Mnoho majiteľov webových stránok sa stretáva s problémom zákazu indexovania zdrojov a ich odstraňovania z vyhľadávacích nástrojov. Stáva sa to zvyčajne preto, lebo stránka zastaráva a je irelevantná, vydavateľ alebo návštevníci o ňu strácajú záujem alebo stránka obsahuje osobné, ba dokonca dôverné informácie.
Inštrukcie
Krok 1
Existuje mnoho spôsobov, ako odstrániť web z vyhľadávacích nástrojov.
Prvý a najjednoduchší spôsob odstránenia výsledkov dotazu z vyhľadávacieho nástroja je odstránenie stránky zo samotnej stránky alebo úplné odstránenie stránky CMS pomocou pripojenia FTP. Za pár dní vyhľadávací modul aktualizuje databázu a z výsledkov vyhľadávania odstráni odkaz na váš zdroj.
Krok 2
Najpopulárnejším spôsobom, ako správcovia webu chrániť web, jeho jednotlivé sekcie alebo stránky pred indexovaním, a tým odstrániť odkazy z výsledkov vyhľadávania, je upraviť súbor robots.txt.
Pomocou indexu môžete zavrieť samostatnú stránku z indexovania:
User-Agent: *
Disallow: /page.html (zatvorenie stránky page.html)
Na internete existuje veľa autorských pokynov, ako používať kódy pre súbor robots.txt.
Krok 3
Tretím spôsobom odstránenia stránok z vyhľadávacích nástrojov je použitie metaznačky robots na ich stránkach. Značka je napísaná v kóde HTML skrytých stránok medzi značkami.
Po opätovnej indexácii webu PS teda vypadnú stránky s touto metaznačkou. Nevýhodou tejto metódy je, že veľa moderných webov používa šablóny tpl, čo znamená, že budete musieť manuálne meniť kód na stovkách, možno tisíckach stránok.
Krok 4
Štvrtý spôsob odstránenia webov z vyhľadávacích nástrojov je použitie hlavičiek X-Robots-Tag. Podstata tejto hlavičky je podobná použitiu predchádzajúcej metaznačky, položka však musí byť umiestnená v hlavičkách
Značka X-Robots: noindex, nofollow
Krok 5
Najefektívnejším spôsobom, ako (úplne) odstrániť web z vyhľadávacích nástrojov, je odstrániť ho z panela správcu webu. Po aktualizácii (3 - 7 dní) bude web pre vyhľadávač neprístupný. Panel správcu webu je k dispozícii pre vyhľadávače Yandex (https://webmaster.yandex.ru/delurl.xml) a Google (https://webmaster.yandex.ru/delurl.xml).