создание и продвижение сайтов
реклама в Интернет
по всей России

       

+7 (812) 981-18-97
WhatsApp, Viber +7 904 519-45-93

Файлы robots.txt будут «читаться» Яндексом по-новому

Пустая директива Allow в файле robots.txt больше не будет учитываться поисковым роботом Яндекса в качестве сигнала, запрещающего индексировать весь сайт. Эта информация появилась в официальном блоге компании 10 июня.

Файлы robots.txt будут читаться по новомуПо словам специалистов Яндекса, до недавнего времени были нередки ситуации, когда поисковому роботу системы не удавалось получить доступ к сайту из-за пустой директивы Allow. Данная директива позволяет индексировать контент только в том случае, если она сопровождается конкретным уточнением. Ранее индексирующий робот воспринимал её как полностью запрещающую, теперь же он научится её игнорировать.

Если же вы действительно хотите запретить индексацию сайта, вам придётся воспользоваться командой Disallow. Узнать подробнее о том, что разрешено или, напротив, запрещено в robots.txt, вы можете в соответствующей панели Вебмастера Яндекса.

Новости

Редизайн и оптимизация сайта 5ave.spb.ru

Редизайн и оптимизация сайта 5ave.spb.ru

Редизайн и оптимизация сайта 5ave.spb.ru. Сайт создан по новому шаблону.

Проведен аудит сайта для Пионер-Тур

Проведен аудит сайта для Пионер-Тур

Проведен аудит сайта для туристической компании Пионер-Тур.

Обновление каталога на сайте багетной мастерской

Обновление каталога на сайте багетной мастерской

Проведено обновление каталога на сайте багетной мастерской в Санкт-Петербурге Ра-Свет.

Аудит сайта для психолога Ольги Хлебниковой

Аудит сайта для психолога Ольги Хлебниковой

Проведен бесплатный аудит сайта для психолога Ольги Хлебниковой.

Видеоурок по редактированию слайдера в MODx.

Видеоурок по редактированию слайдера в MODx.

На наш сайт добавлен новый видеоурок.

Разработан новый шаблон сайта-визитки!

Разработан новый шаблон сайта-визитки!

Нами разработан новый шаблон сайта-визитки с полным адаптивом и по привлекательной цене.

Выполнен бесплатный аудит сайта tochkarosta-murmansk.ru

Выполнен бесплатный аудит сайта tochkarosta-murmansk.ru

Выполнен бесплатный аудит сайта для детского центра по раннему развитию "Точка роста".

Выполнен бесплатный аудит сайта betondmr.ru

Выполнен бесплатный аудит сайта betondmr.ru

Бесплатный аудит сайта компании по производству и доставке бетона позволил выявить его основные проблемы.

Сайт-визитка для компании "Артель-забор"

Сайт-визитка для компании

Сдан сайт-визитка для компании "Артель-забор" с оригинальным дизайном.

Выполнена разовая оптимизация сайта perevod.moscow

Выполнена разовая оптимизация сайта perevod.moscow

Выполнен бесплатный аудит и разовая оптимизация сайта perevod.moscow.

Сдан сайт компании Fortis

Сдан сайт компании Fortis

Сайт компании Fortis, кроме стандартного набора, снабжен рядом интересных опций.

Аудит для masters-online

Аудит для masters-online

Проведен бесплатный аудит сайта, посвященного ремонту бытовой техники в Краснодаре.

Создание сайтов, продвижение сайтов, аудит сайтов

“WebСадовник”© Агентство интернет-маркетинга, 2008 - 2017. Реквизиты

карта сайта
+7 (812) 981-18-97
WhatsApp, Viber+7 904 519-45-93