Идеальный robot.txt для нашего движка

Правила раздела: faq.php?mode=okay
Модератор: Модераторы

Floki
Floki
Репутация: 0
Сообщения: 10
Зарегистрирован: 30.03.2017
С нами: 6 лет 11 месяцев

Сообщение #1 Floki » 23.04.2017, 19:12

Коллеги, дайте, пожалуйста, вводную новичку по созданию идеального robot.txt для нашего движка.Приму к изучению и внедрению любую информацию, какой бы банальной она вам не казалась.

m1hasik M
Аватара
m1hasik M
Возраст: 32
Репутация: 31
Сообщения: 200
Зарегистрирован: 12.11.2015
С нами: 8 лет 4 месяца
Откуда: Днепр
Skype

Сообщение #2 m1hasik » 24.04.2017, 05:55

Floki писал(а):Коллеги, дайте, пожалуйста, вводную новичку по созданию идеального robot.txt для нашего движка.Приму к изучению и внедрению любую информацию, какой бы банальной она вам не казалась.
Не закрывать папку design/ - так как гугл не увидит, что ваш сайт адаптивный, и не прочитает некоторые скрипты
закрывать все возможные utm метки, и вообще любые параметры со знаком вопроса в ссылке.
Указывать обязательно host и sitemap
примерно вот такие правила точно стоит соблюдать, ну и еще по всем рассказам, лучше писать инструкцию для всех юзеров агентов, и отдельно для гугла и яндекса


Название раздела: Техническая оптимизация OkayCMS для поисковых систем
Правила раздела: faq.php?mode=okay

Быстрый ответ


Введите код в точности так, как вы его видите. Регистр символов не имеет значения.
Код подтверждения

   

Вернуться в «Техническая оптимизация OkayCMS для поисковых систем»

Кто сейчас на форуме (по активности за 5 минут)

Сейчас этот раздел просматривают: 10 гостей