Ребята помогите гугл пишет установлен запрет на сайт http:// Сайт на хостинге *Украина* Первый раз регистрируюсь,может что не так делаю? robots.txt User-agent: * Disallow: /my-account Disallow: /index.php?route=account/simpleedit Disallow: /order-history Disallow: /change-password Disallow: /downloads Disallow: /search?filter_name= Disallow: /search Disallow: /search? Disallow: /simplecheckout Disallow: /checkout Disallow: /vouchers Disallow: /affiliate-login Disallow: /request-return Disallow: /index.php?route=checkout/simplecheckout Disallow: /login Disallow: /admin Disallow: /cache Disallow: /niks Disallow: /catalog Disallow: /download Disallow: /export Disallow: /system Disallow: /index.php?route=account Disallow: /index.php?route=account/account Disallow: /index.php?route=checkout/cart Disallow: /index.php?route=checkout/shipping Disallow: /index.php?route=common/home Disallow: /index.php?route=product/product/captcha Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /index.php?route=product/search Disallow: /index.php?route=information/contact/captcha Disallow: /index.php?route=information/information&information_id= Disallow: /index.php?route=account/login Disallow: /index.php?route=information/information/info&information_id=5 Disallow: /route=account/ Disallow: /route=account/login Disallow: /route=checkout/ Disallow: /route=checkout/cart Disallow: /route=affiliate/ Disallow: /route=product/search Disallow: /?sort= Disallow: /?sort Disallow: /&sort= Disallow: /?order= Disallow: /?order Disallow: /&order= Disallow: /?limit= Disallow: /&limit= Disallow: /?filter_name= Disallow: /&filter_name= Disallow: /?filter_sub_category= Disallow: /&filter_sub_category= Disallow: /?filter_description= Disallow: /&filter_description= Disallow: /?tracking= Disallow: /&tracking= Disallow: /?manufacturer Disallow: /?keyword Disallow: /?page Disallow: /&page Disallow: /?tag Disallow: /&tag Disallow: /contact-us Disallw: /brands Disallw: /forgot-password Sitemap: http://domberkana.com/index.php?route=feed/google_sitemap Host: domberkana.com
Я когда установил движок на хост,начал наполнять, выключил в robots.txt весь сайт от индексирования User-agent: * Disallow: / Теперь гугл пишет В течение последних 90 дней робот Google пытался просканировать эти URL, но был заблокирован посредством файла robots.txt. Что делать?
Яндекс в панели вебмастера вроде сразу анализирует роботс.тхт. Раньше как-то там проверял сайтмапы. Ну по идее да, должно норм индексироваться