# Роботу adsense разрешаем все User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: */complain/* Disallow: */vote/* # В качестве эксперимента пытаемся убрать совсем бесполезные страницы из индекса 30.08.2014. Сейчас они просто не дают смотреть структура сайта в панели вебмастера в яндексе # Изменится ли что-то после запрета индексации этих страниц, отразится ли это на траффике? Disallow: /comments/* Disallow: /users/all/sort* Disallow: /users/?* Disallow: /users/dnevnik* Disallow: /users/login/*url_referer=* # Изменения с 18.08.16 (Константин). Disallow: /users/all/page* Disallow: /forum/search/* Disallow: /forum/members/* Disallow: /forum_new/* Disallow: /forum/find-new/* Disallow: */add-reply* Disallow: */reply* Disallow: /hybrid_auth/* Disallow: */undefined Disallow: /forum/birthdaycalendar/ Disallow: /forum/help/* Disallow: /forum/misc/* Disallow: /forum/proxy.php* Disallow: */mark-read* Disallow: /forum/watched/* Disallow: /search/*?* Disallow: /forum/online/ Disallow: /video/tag/* Disallow: /blogs/tag/* Disallow: /news/tag/* Disallow: */no-text* Disallow: /forum/javascript* Disallow: /pages Disallow: /subscribe Disallow: */poll/results* Disallow: /users/recover/ Disallow: /lenta-of-records* Disallow: /record-wire* Disallow: /new-on-forum* Clean-param: utm_campaign&utm_medium&utm_source&utm_term&utm_content&width&height&set&mc&sa&iframe&PHPSESSID&openCommentForm&sort&topic&direction&action&order&project_id&action&nav&sort&fromsite&cat&old_sort&orient&pp&sort&hash # for Sitereport SEO bot User-Agent: Sitereport Crawl-delay: 3 Allow: /forum Disallow: / Sitemap: https://www.hunting.ru/sitemap/sitemap_articles.xml Sitemap: https://www.hunting.ru/sitemap/sitemap_blogs.xml Sitemap: https://www.hunting.ru/sitemap/sitemap_gallery.xml Sitemap: https://www.hunting.ru/sitemap/sitemap_reports.xml Sitemap: https://www.hunting.ru/sitemap/sitemap_tidings.xml Sitemap: https://www.hunting.ru/sitemap/sitemap_video.xml Sitemap: https://www.hunting.ru/sitemap/sitemap_news.xml Sitemap: https://www.hunting.ru/forum/sitemap.php Host: https://www.hunting.ru