robots.txt

Сегодня узнала одно правило про robots.txt....

Мы записали в него ссылки в нижнем регистре. Но сами страницы на сайте и урлы у нас имеют символы в верхнем регистре. При этом /Stranica и /stranica - это одна и та же страница (так воспринимается сайтом)

Оказалось, что  /Stranica, на сайте проиндексировалась так как /stranica  указана в robots.txt, а не первый ее вариант.

В моей админки они генерируются в зависимости от того, что ввели пользователи.
Ещё когда дела это, мне внутреннее я говорило, зачем тебе эти большие буквы, насильно сделай их маленькими........

Исправление заняло мин 5, но с памяти яндекса, я не удалю........

Комментарии

Популярные сообщения