Добрый день. Такой вопрос возник. Если на Opencart вкл. ЧПУ то в robots.txt надо запрещать ссылки с учетом ЧПУ или без? Напиример: Disallow: index.php?route=record/blog&blog_id=1 или Disallow: /articles Как правильно ответа так и не нашел...
я запрещал с учетом чпу Disallow: /checkout Disallow: /shopping-cart Disallow: /compare-products По идее, в html-коде страницы ссылки выводятся именно в чпу-формате. А для роботов имеет место код страницы. Т.е., что в нем страницы указано, то и прописывай в роботс.
fster, можете поиграться и проанализировать роботс здесь (под яндекс) - http://webmaster.yandex.ua/robots.xml По идее если чпу, то нужно Disallow: /articles, если без, то - /*route=record/ Можете добавить /*route=record/ и проверить ссылку /articles на сервисе на разрешение к индексации.