4 июня, 2020 
AdminGWP
Google o типax кoнтeнтa в Robots.txt
Oкaзывaeтся, поисковик благосклонно относится к разным типам контента, представленного в файле Robots.txt.
Это следует из недавней переписки с представителем поиска в Твиттере. Один сеошник поинтересовался у Джона Мюллера (John Mueller):
"У меня к вам один актуальный вопрос: мне всегда казалось, что в Robots.txt приветствуется лишь один тип контента – обычный текст (TEXT/PLAIN), а не текст плюс HTML. Однако в последнее время при проверке этого файла на корректность я вижу, что конфликта из-за подобных комбинаций (TEXT/HTML) нет. Правда ли это?"
Ответ эксперта поисковой системы:
"По моему мнению, в этом документе может использоваться любой тип контента. Важно понимать, что ключевое – не тип, а сам контент".
К слову, создать корректный Robots.txt можно при помощи нашего инструмента.
Опубликовано в рубрике