Сообщение #10 Aleks » 19.04.2023, 15:45
Предыдущее мое сообщение оказалось неверным. Гугль продолжил сканирование cart.
Эта проблема со сканированием/индексированием CART (корзины) решается просто.
Достаточно удалить в файле robots.txt строку Disallow: /cart
Эту строку в robots.txt вставлять не нужно, исходя из логики работы Гугля.
Гугль сначала сканирует страницы, руководствуяcь файлом robots.txt.
Вот он и считывает, что cart заблокирован в robots.txt. Все - он дает сообщение, что cart отсканирован, а его индексирование
заблокировано в файле robots.txt.
До Okay/Controllers/CartController.php со строкой $this->design->assign('noindex_follow', true) он уже не идет.
Если из файла robots.txt удалить Disallow: /cart, то гугль сканирует cart и идет дальше по файлам,
находит noindex для cart и прекращает сканирование и попытки индексирования cart.
И больше к этому вопросу не возвращается.
Гугль пишет, что блокировку нужно вставлять только один раз, или в robots.txt или в нужном файле.
Даже удивительно как гугль подсуетился, сразу же удалил из выдачи 100 отсканированных cart
Предыдущее мое сообщение оказалось неверным. Гугль продолжил сканирование cart.
Эта проблема со сканированием/индексированием CART (корзины) решается просто.
Достаточно удалить в файле robots.txt строку Disallow: /cart
Эту строку в robots.txt вставлять не нужно, исходя из логики работы Гугля.
Гугль сначала сканирует страницы, руководствуяcь файлом robots.txt.
Вот он и считывает, что cart заблокирован в robots.txt. Все - он дает сообщение, что cart отсканирован, а его индексирование
заблокировано в файле robots.txt.
До Okay/Controllers/CartController.php со строкой $this->design->assign('noindex_follow', true) он уже не идет.
Если из файла robots.txt удалить Disallow: /cart, то гугль сканирует cart и идет дальше по файлам,
находит noindex для cart и прекращает сканирование и попытки индексирования cart.
И больше к этому вопросу не возвращается.
Гугль пишет, что блокировку нужно вставлять только один раз, или в robots.txt или в нужном файле.
Даже удивительно как гугль подсуетился, сразу же удалил из выдачи 100 отсканированных cart