Az „Are You A Bot” képernyők eldobhatják oldalait a Google-tól
A rossz forgalom blokkolására használt „robot vagy” ellenőrzés néha azt okozhatja, hogy az oldalak kiesnek a Google-ból. A Search Off the Record legújabb epizódjában a Google munkatársa, John Mueller elmagyarázta, miért történik ez, és megjegyezte, hogy ennek következtében a Google az Ön oldalát egy másik webhely oldalának másolatának tekintheti.
A Probléma
Amikor egy webhely biztonsága gyanúsként jelöli meg a látogatót, akkor a valódi tartalom helyett egy „te vagy a bot” oldalt jeleníti meg. Néha ez az oldal úgy kerül vissza a Google-hoz, mintha az normális lenne, és a Google indexeli. Emiatt a webhely valódi tartalma kieshet az indexből, vagy felválthatja ezt a közbeiktatott hirdetést.
Tekintettel arra, hogy a „Te vagy a bot” képernyő más webhelyeken is megjelenik, a Google számos hasonló oldallal találkozik. Ha ismétlődőnek látszó oldalakat észlel, a Google az egyiket gyűjtőverziónak választja, a többit pedig ismétlődőnek tekinti.
Az indexelésen túl ez a probléma azt is befolyásolhatja, hogy a Google melyik oldalt tekinti meg a tartalom fő verziójának. Előfordulhat, hogy kiválaszt egy oldalt egy másik webhelyről, aminek következtében az oldal ismétlődőként lesz megjelölve.
Mueller elmagyarázta, hogy nehéz nyomon követni, mert meg kell vizsgálni a Google által kiválasztott oldalt, majd visszafelé kell dolgozni az ok meghatározásához. Ezen túlmenően, mivel egy tipikus látogató soha nem találkozik a „te egy bot” üzenettel, úgy tűnik, nincs semmi baj, ha saját maga átnézi a webhelyet.
Miért nehéz látni
Előfordulhat, hogy a normál böngészőellenőrzések nem teszik lehetővé az „Ön egy bot” képernyő megjelenítését, mert az csak a gyanúsként megjelölt látogatók számára jelenik meg. Számodra az oldal valószínűleg normálisan töltődik be.
A Search Console-ban meg kell győződnie arról, hogy probléma van. Az oldalindexelési jelentés az oldalakat ismétlődőként vagy máshol kanonizáltként jelöli meg.
Ezenkívül a Search Console URL-ellenőrző eszköze felfedi, hogy a Google melyik címet választotta fő verzióként. Ha ez a cím olyan webhelyhez tartozik, amely nem az Öné, érdemes utánanézni.
Miért számít ez?
Néha a problémák anélkül is felmerülhetnek, hogy magán a webhelyen bármilyen nyilvánvaló jel jelenne meg, mivel az „Ön egy bot” képernyőt egy CDN, gazdagép vagy botvédelmi réteg váltja ki, nem pedig közvetlenül az oldalak. Mueller megemlítette, hogy ez a fajta védelem akkor aktiválódhat, amikor a kúszás felgyorsul.
A kérés sikeresen megtörténik, így az a gyakori ösztön, hogy egy törött oldalt keressünk, itt nem segít. Mivel a Google képes elérni a webhelyet és érvényes választ kapni, a probléma az, hogy rossz tartalmat kap. Ez az oka annak, hogy a hibát nem észlelik olyan ellenőrzések, amelyek nem ismerik fel azt, amit a Googlebot valójában lát.
Már foglalkoztam egy hasonló problémával, ahol Mueller leírta az „Oldalindexelt tartalom nélkül” hibát. Ebben az esetben a webhely biztonsági beállításai csendben blokkolták a Googlebotot, de engedélyezték a rendszeres látogatókat, így a Google úgy tölti be az oldalt, hogy nem kapott tartalmat.
Előre tekintve
Ha ezzel a problémával találkozik, lépjen kapcsolatba azzal, aki a biztonsági szolgáltatást, a CDN-t vagy a webtárhelyet kezeli, és keresse meg a megoldást. A javítás után kérje meg a Google-t, hogy térképezze fel újra a Search Consoles Validate Fix segítségével. A Google a következő feltérképezés során is észlelheti a javítást.