#Пример корректно составленного robots.txt, при обработке #которого директива Host учитывается User-Agent: * Disallow: Host: www.obrazovanie-v-chehii.ru Sitemap: http://www.obrazovanie-v-chehii.ru/sitemap.xml