создание и продвижение сайтов
реклама в Интернет
по всей России

       

+7 (812) 981-18-97
WhatsApp, Viber +7 904 519-45-93

Файлы robots.txt будут «читаться» Яндексом по-новому

Пустая директива Allow в файле robots.txt больше не будет учитываться поисковым роботом Яндекса в качестве сигнала, запрещающего индексировать весь сайт. Эта информация появилась в официальном блоге компании 10 июня.

Файлы robots.txt будут читаться по новомуПо словам специалистов Яндекса, до недавнего времени были нередки ситуации, когда поисковому роботу системы не удавалось получить доступ к сайту из-за пустой директивы Allow. Данная директива позволяет индексировать контент только в том случае, если она сопровождается конкретным уточнением. Ранее индексирующий робот воспринимал её как полностью запрещающую, теперь же он научится её игнорировать.

Если же вы действительно хотите запретить индексацию сайта, вам придётся воспользоваться командой Disallow. Узнать подробнее о том, что разрешено или, напротив, запрещено в robots.txt, вы можете в соответствующей панели Вебмастера Яндекса.

Наши работы

Сдан сайт компании Fortis
Создание сайта-визитки туркомплекса
Верстка  сайта-визитки студии «JP»
Редизайн Главной страницы студии звукозаписи
Создание сайта-визитки для компании по вывозу мусора
Создание сайта-визитки для филиала
показать еще

Новости

Сдан сайт компании Fortis

Сдан сайт компании Fortis

Сайт компании Fortis, кроме стандартного набора, снабжен рядом интересных опций.

Аудит для masters-online

Аудит для masters-online

Проведен бесплатный аудит сайта, посвященного ремонту бытовой техники в Краснодаре.

Создан сайт-визитка по шаблону для компании Фонодом.

Создан сайт-визитка по шаблону для компании Фонодом.

Сайт-визитка по шаблону компании Фонодом укомплектован стандартными для данного предложения модулями

Выполнена разовая оптимизация сайта stroyrus.spb.ru

Выполнена разовая оптимизация сайта stroyrus.spb.ru

Для компании Артель выполнена разовая оптимизация сайта, в ходе которой устранен ряд проблем

Сдан сайт туристического комплекса в Карелии Белые мосты

Сдан сайт туристического комплекса в Карелии Белые мосты

Сдан сайт туристического комплекса Белые мосты, адаптированный под любые устройства.

Наш новый клиент: компания "АвтоВоз"

Наш новый клиент: компания

Создан сайт для компании АвтоВоз с последующим продвижением.

Web-Садовник приглашает программиста на сдельную работу

Web-Садовник приглашает программиста на сдельную работу

Web-Садовник приглашает программиста на сдельную работу

Компания Web-Садовник открывает вакансию web-маркетолога

Компания Web-Садовник открывает вакансию web-маркетолога

Web-Садовник открывает вакансию web-маркетолога.

Приглашаем на работу рерайтера

Приглашаем на работу рерайтера

Предлагаем работу для ответственного и грамотного рерайтера.

Проведен SEO-аудит сайта samara-consult.ru

Проведен SEO-аудит сайта samara-consult.ru

Нами проведен бесплатный сео-аудит сайта samara-consult.ru

Команда нашего клиента покорила Эльбрус

Команда нашего клиента покорила Эльбрус

Команда Альпгуру совершила восхождение на гору Эльбрус на высоту 5642 метра.

Проведен очередной бесплатный SEO-аудит

Проведен очередной бесплатный SEO-аудит

Мы провели бесплатный аудит сайта adjuster group.ru.

“Web-Садовник”, агентство интернет-маркетинга, 2008 - 2017, реквизиты

Создание сайтов, продвижение сайтов, аудит сайтов, сопровождение сайтов

карта сайта
+7 (812) 981-18-97
WhatsApp, Viber+7 904 519-45-93
вверх