Здесь я пишу о том, что мне интересно

Всегда в топе

· профессиональный аудит сайтов
· теория работы поисковых систем
· консультации по всем этапам продвижения
· блокады сайта фильтрами поиска
· стратегии непоискового и вирусного продвижения
· настройка компаний контекстной рекламы
· корпоративные аккаунты в соцсетях
· вывод сайтов из под санкций Google
· индивидуальное обучение

август 28, 2011, 10:01

Пустой файл, который упростит работу Google на Вашем сайте


Речь идёт об известном всем файле robots.txt. Вебмастера, оптимизаторы и все остальные так или иначе задействованные в сфере работы с сайтами, портят себе нервы, доказывая преимущества или же наоборот расписывая недостатки этого файла. К примеру, рассмотрим такую ситуацию: Вы не собираетесь закрываться от роботов в сети, что вам лучше сделать с robots.txt? Создать пустой файл, добавить в него “disallow” или же не создавать такой файл вообще?

Один из ведущих сотрудников Google – Мэтт Катс считает, что лучше добавить user-agent: *Disallow, либо же создать пустой файл. Однако, по его словам, наличие пустого файла robots.txt может стать причиной того, что поисковый робот посчитает, что данные из файла были удалены по ошибке. Если же вы используете user-agent: *Disallow, то в данном случае, вы упрощаете работу поисковой системы, позволяя ей четко определить, ваше отношение к индексации данных роботом.

Один из параноидальных вариантов – не использовать файл robots.txt вообще, может привести к появлению страницы 404 при обращении к вашему сайту, а это может негативно отразиться на дальнейшей работе сайта. Впрочем, Мэтт Катс добавляет, что поисковая система Google уже «умеет» определять подобные ситуации, и лишь в крайне редких случаях возможны какие-либо осложнения.



Поделитесь постом

f t                                                                         

Вам будет интересно

Если вас заинтересовали мои услуги


Мои расценки


Аудит сайта
от $900
срок исполнения 6 рабочих дней


Консультация
$200-$400 в час
в рабочее по Москве время


Мои реквизиты


ИП Смирнов Евгений Дмитриевич
св-во №309343525900080
выдано 16 сентября 2009
ИНН: 344100235769
КПП: 344402001
Расчетный счет: 40802810831000379201
Кор. Счет: 30101810100000000715
БИК: 041806715
Банк: Южный ф-л ПАО «Промсвязьбанк», г.Волгоград

TOP