Блог про интернет-маркетинг для бизнеса

SEO

Robots.txt и case sensitive — будьте внимательны к мелочам

0
0
0
0

Вопрос 1: закроет ли такой вот robots.txt: User-agent: * Disallow: *?nrk= от индексации URL http://auto.slando.ru/moskva/prodam_a_m_jeep_compass_P_19707308.html?nrk=RU-MOS?

Ответ: Да!

Вопрос 2: а закроет ли URL http://auto.slando.ru/moskva/prodam_a_m_jeep_compass_P_19707308.html?NRK=RU-MOS?

Ответ: Нет :(

Будьте внимательны: урлы с разными регистрами — это разные урлы в UNIX системах, поэтому если вы закрыли теги вида /tags/, а на сайте у вас они открываются как /Tags/, то будьте готовы к тому, что урлы проиндексируются поисковыми системами.

Обнаружили ошибку? Выделите ее и нажмите Ctrl + Enter.

Комментарии (0)

Чтобы оставить комментарий, необходимо авторизироваться

Подписаться

на самую полезную рассылку по интернет-маркетингу

Самое

обсуждаемое популярное читаемое