Stránky každého webu pravidelne prehľadávajú vyhľadávacie roboty, ktoré spracúvajú informácie na webe tak, aby boli na požiadanie používateľov dostupné vo vyhľadávačoch. Návštevy návštevníkov z vyhľadávacích nástrojov majú pozitívny vplyv na prenos na stránkach a stimulujú rozvoj zdroja. Ak však na webe existujú stránky, ktorých informácie nie sú určené pre internetové publikum (napríklad osobné stránky používateľov alebo registračná stránka), potom prechod z vyhľadávacích nástrojov na tieto stránky nie je potrebný a je potrebné je lepšie zakázať indexovanie týchto informácií.
Nevyhnutné
- - mať svoj vlastný web
- - poznať odkazy na stránky, ktorých indexovanie by malo byť zakázané.
- - mať aspoň základné znalosti HTML
Inštrukcie
Krok 1
Ak chcete zabrániť robotovi v indexovaní určitých stránok webu, musíte vykonať zmeny v súbore robots.txt, ak sa už na vašom webe nachádza, alebo vytvoriť tento súbor.
Krok 2
Ak je súbor robots.txt už na web nahraný a je možné ho upraviť priamo z ovládacieho panela prostriedkov, otvorte súbor robots.txt prostredníctvom webovej služby na úpravy.
Krok 3
Ak v požadovanom súbore nie je možné vykonať zmeny priamo z ovládacieho panela, otvorte súbor robots.txt v prehliadači kliknutím na odkaz na tento súbor. Skopírujte všetky údaje zo stránky, ktorá sa otvorí, a vložte ich na hárok v programe Poznámkový blok.
Krok 4
Ak sa na webe nenachádza žiadny súbor robots.txt, otvorte program „Poznámkový blok“, do ktorého nového dokumentu budete musieť zadať potrebný kód.
Krok 5
Na prázdny hárok textového dokumentu napíšte prvý požadovaný riadok:
User-agent: *
Krok 6
Potom prejdite na ďalší riadok stlačením klávesu Enter a zadajte nasledujúci kód:
Disallow: / index / page3Dallow: označuje, že indexovanie nie je možné, a / index / page3 je odkaz na stránku, ktorú nie je potrebné indexovať. Namiesto odkazu / indexu / stránky3 vložte odkaz na stránku svojho webu, ktorú chcete zablokovať kvôli spracovaniu robotmi.
Krok 7
Samotný názov domény chýba na začiatku odkazu; jeho prítomnosť v položke znamená lomku. Pri indexovom prehľadávaní stránok vyhľadávací robot automaticky vloží názov domény do týchto odkazov. Preto píšte odkazy na potrebné stránky týmto spôsobom.
Krok 8
After Disallow: môžete umiestniť nielen odkaz na konkrétnu stránku, ale aj odkaz na ktorúkoľvek sekciu alebo adresár stránky. Podobne môžete zakázať indexovanie požadovanej časti stránky.
Krok 9
Ak je potrebné robotom zakázať spracovanie niekoľkých rôznych sekcií zdroja, napíšte odkaz na každú sekciu alebo stránku do nového riadku, na začiatok ktorého nezabudnite vložiť položku Disallow:.
Krok 10
Zmenu súboru robots.txt dokončíte kliknutím na tlačidlo „Uložiť“pri úprave súboru na ovládacom paneli alebo uložením textového dokumentu so záznamami pod názvom robots.txt a odovzdaním tohto súboru na web.
