Domain kizárása keresőkből, crowler "hazaküldése"
Alap szituáció: adott egy domain, melyet érdemben WEB-es publikálásra már nem szeretnék használni, de még egy meghatározott ideig e-mail forward üzemel a domain-en.
A régi honlapok törölve, index.php-ből 404-es fejléc kiküldve, robots.txt-ben mindenki kiltva.
Annak ellenére, hogy a vázolt megoldás már lassan egy éve üzemel, a keresők még mindig bőszen indexelik az oldalt, a Google-ben pedig domain-re keresve még mindig ott van a találat.
Lehet ezen felül jelezni a keresőknek, hogy hiába is próbálkoznak, itt már nem lesz semmilyen tartalom és "menjenek haza"?
Lehetne még 410-es header-t haszálni, de mi van, ha nem érti a bot?
■ A régi honlapok törölve, index.php-ből 404-es fejléc kiküldve, robots.txt-ben mindenki kiltva.
Annak ellenére, hogy a vázolt megoldás már lassan egy éve üzemel, a keresők még mindig bőszen indexelik az oldalt, a Google-ben pedig domain-re keresve még mindig ott van a találat.
Lehet ezen felül jelezni a keresőknek, hogy hiába is próbálkoznak, itt már nem lesz semmilyen tartalom és "menjenek haza"?
Lehetne még 410-es header-t haszálni, de mi van, ha nem érti a bot?
410
Bizony, a 410-et értik. De
Takarítás