Čo je X-Robots-Tag?
X-Robots-Tag je HTTP hlavička, ktorá umožňuje webovým majstrom ovládať indexovanie a spracovanie ich webových stránok vyhľadávačmi na úrovni serverovej odpovede. Táto hlavička poskytuje podobnú funkčnosť ako meta tag robots v HTML, ale je flexibilnejšia, pretože môže byť aplikovaná na akýkoľvek typ súboru, nie len na HTML dokumenty.
Prečo je X-Robots-Tag dôležitý?
X-Robots-Tag je dôležitý, pretože poskytuje výkonný nástroj na riadenie toho, ako vyhľadávače indexujú a zobrazujú obsah vašej stránky. Umožňuje napríklad zabrániť indexovaniu určitých súborov alebo stránok, riadiť správanie odkazov na sledovanie a zabraňovať ukladaniu stránok vo vyrovnávacej pamäti vyhľadávačov.
Ako využiť X-Robots-Tag?
X-Robots-Tag využijete pridaním príslušných direktív do HTTP hlavičiek odpovedí vašeho servera. Môžete napríklad nastaviť „noindex“ pre súbory PDF, ktoré nechcete, aby sa objavovali vo výsledkoch vyhľadávania, alebo použiť „nofollow“ na stránkach, kde nechcete, aby vyhľadávače sledovali odkazy.
