Soubor robots.txt je textový soubor, který určuje, které stránky nebo sekce webového serveru mohou být indexovány vyhledávači, jako je např. Google, Seznam, Bing apod. Tento soubor v podstatě slouží jako instrukce pro vyhledávače, aby neindexovaly citlivý nebo nežádoucí obsah na Vašich webových stránkách. Je to jednoduchý způsob, jak vyhledávačům sdělit, které stránky se mohou či nemohou stát součástí jejich výsledků vyhledávání. Pojďme se tedy blíže podívat na soubor robots.txt a jeho příklady. Soubor robots.txt se nahrává do kořenového adresáře webu. Například tedy, pokud máte webovou stránku „mojedomena.cz„, soubor robots.txt by se měl nahrát na adresu … Číst dál