Здесь я пишу о том, что мне интересно
Всегда в топе
· профессиональный аудит сайтов
· продвижение проектов любой сложности
· консультации по всем этапам продвижения
· блокады сайта фильтрами поиска
· стратегии непоискового продвижения
· создание компаний контекстной рекламы
· корпоративные аккаунты в соцсетях
· вывод сайтов из под ручных санкций Google
· вывод сайтов из под санкций Яндекс
· гарантированное удаление любых ссылок
· индивидуальные консультации
август 28, 2011, 10:01
Пустой файл, который упростит работу Google на Вашем сайте
Речь идёт об известном всем файле robots.txt. Вебмастера, оптимизаторы и все остальные так или иначе задействованные в сфере работы с сайтами, портят себе нервы, доказывая преимущества или же наоборот расписывая недостатки этого файла. К примеру, рассмотрим такую ситуацию: Вы не собираетесь закрываться от роботов в сети, что вам лучше сделать с robots.txt? Создать пустой файл, добавить в него “disallow” или же не создавать такой файл вообще?
Один из ведущих сотрудников Google – Мэтт Катс считает, что лучше добавить user-agent: *Disallow, либо же создать пустой файл. Однако, по его словам, наличие пустого файла robots.txt может стать причиной того, что поисковый робот посчитает, что данные из файла были удалены по ошибке. Если же вы используете user-agent: *Disallow, то в данном случае, вы упрощаете работу поисковой системы, позволяя ей четко определить, ваше отношение к индексации данных роботом.
Один из параноидальных вариантов – не использовать файл robots.txt вообще, может привести к появлению страницы 404 при обращении к вашему сайту, а это может негативно отразиться на дальнейшей работе сайта. Впрочем, Мэтт Катс добавляет, что поисковая система Google уже «умеет» определять подобные ситуации, и лишь в крайне редких случаях возможны какие-либо осложнения.
