Уважаемые пользователи usale, подскажите почему могли пропасть страницы с индексации Яндекса?
Быть может это из-за того, что я подправил файл robot.txt?
Его содержание следующее:
Code
User-agent: *
Disallow: /stuff/
Disallow: /search/
Disallow: /a/
Disallow: /stat/
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat/
Host: мой_сайт.ру
Sitemap: http://мой_сайт.ру/sitemap.xml
Sitemap: http://мой_сайт.ру/sitemap-forum.xml
Sitemap: http://мой_сайт.ру/sitemap-shop.xml
Если кто знает в чёи могла быть причина - отпишитесь, пожалуйста.Добавлено (08.09.2012, 04:33)
---------------------------------------------
Никто не знает в чём может быть проблема?
Добавлено (08.09.2012, 09:31)
---------------------------------------------
Вчера повозился с файлом robot.txt - убрал строчку: "Disallow: /stuff/ " и в индексацию вернулась треть страниц.
Быть может я что-то лишнее закрыл от поисковиков? Явно, что проблема с файлом robot.txt
Добавлено (08.09.2012, 09:50)
---------------------------------------------
Сегодня подправил файл робот.тхт, оставил только строки:
Code
User-agent: *
Disallow: /admin/
Host: мой_сайт.ру
Sitemap: http://мой_сайт.ру/sitemap.xml
Sitemap: http://мой_сайт.ру/sitemap-forum.xml
Sitemap: http://мой_сайт.ру/sitemap-shop.xml
Если вернутся страницы в поиск - отпишусь.