robots.txt
Сегодня узнала одно правило про robots.txt....
Мы записали в него ссылки в нижнем регистре. Но сами страницы на сайте и урлы у нас имеют символы в верхнем регистре. При этом /Stranica и /stranica - это одна и та же страница (так воспринимается сайтом)
Оказалось, что /Stranica, на сайте проиндексировалась так как /stranica указана в robots.txt, а не первый ее вариант.
В моей админки они генерируются в зависимости от того, что ввели пользователи.
Ещё когда дела это, мне внутреннее я говорило, зачем тебе эти большие буквы, насильно сделай их маленькими........
Исправление заняло мин 5, но с памяти яндекса, я не удалю........
Комментарии
Отправить комментарий