Расскажите о вашей задаче
SEO

Robots.txt и case sensitive — будьте внимательны к мелочам

Вопрос 1: закроет ли такой вот robots.txt: User-agent: * Disallow: *?nrk= от индексации URL http://auto.slando.ru/moskva/prodam_a_m_jeep_compass_P_19707308.html?nrk=RU-MOS?

Ответ: Да!

Вопрос 2: а закроет ли URL http://auto.slando.ru/moskva/prodam_a_m_jeep_compass_P_19707308.html?NRK=RU-MOS?

Ответ: Нет :(

Закроет ли robots.txt URL http://auto.slando.ru/moskva/prodam_a_m_jeep_compass_P_19707308.html?

Будьте внимательны: урлы с разными регистрами — это разные урлы в UNIX системах, поэтому если вы закрыли теги вида /tags/, а на сайте у вас они открываются как /Tags/, то будьте готовы к тому, что урлы проиндексируются поисковыми системами.

0
0
0
Обнаружили ошибку? Выделите ее и нажмите Ctrl + Enter.

Комментарии (0)

Последние комментарии

    Чтобы оставить комментарий, нужно войти

    Чтобы оставлять комментарии, переключитесь на профиль читателя

    Подписаться

    на самую полезную рассылку по интернет-маркетингу

    Самое

    обсуждаемое популярное читаемое
    Просматривая этот сайт, вы соглашаетесь с нашей политикой конфиденциальности — Принять