Новые сообщения · Участники · Правила форума · Поиск · RSS
  • Страница 1 из 1
  • 1
Форум » Для Веб-мастера » Мастерская » Пропали странице в индексации Яндекса..
Пропали странице в индексации Яндекса..
Admin7539 {Модераторы} {Зачастивший} {Сообщений: 171}
Admin7539
Webmoney BL:
WM-репутация:
Дата: Суббота, 08.09.2012, 09:50 | Сообщение # 1 [644]
Уважаемые пользователи usale, подскажите почему могли пропасть страницы с индексации Яндекса?
Быть может это из-за того, что я подправил файл robot.txt?

Его содержание следующее:

Code
User-agent: *
Disallow: /stuff/
Disallow: /search/
Disallow: /a/
Disallow: /stat/
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat/
Host: мой_сайт.ру
Sitemap: http://мой_сайт.ру/sitemap.xml
Sitemap: http://мой_сайт.ру/sitemap-forum.xml
Sitemap: http://мой_сайт.ру/sitemap-shop.xml


Если кто знает в чёи могла быть причина - отпишитесь, пожалуйста.

Добавлено (08.09.2012, 04:33)
---------------------------------------------
Никто не знает в чём может быть проблема? wacko

Добавлено (08.09.2012, 09:31)
---------------------------------------------
Вчера повозился с файлом robot.txt - убрал строчку: "Disallow: /stuff/ " и в индексацию вернулась треть страниц.
Быть может я что-то лишнее закрыл от поисковиков? Явно, что проблема с файлом robot.txt

Добавлено (08.09.2012, 09:50)
---------------------------------------------
Сегодня подправил файл робот.тхт, оставил только строки:

Code
User-agent: *  
Disallow: /admin/
Host: мой_сайт.ру  
Sitemap: http://мой_сайт.ру/sitemap.xml  
Sitemap: http://мой_сайт.ру/sitemap-forum.xml  
Sitemap: http://мой_сайт.ру/sitemap-shop.xml


Если вернутся страницы в поиск - отпишусь.
Да поможет вам F1, да сохранит вас F2, во имя Control`а, Alt`а и святого Delet`а. Enter, братья мои!
WMID
pro100kasper {Пользователи} {Заглянувший} {Сообщений: 5}
pro100kasper
Дата: Суббота, 08.09.2012, 11:27 | Сообщение # 2 [644]
Admin7539, Удалите ваши robots.txt оставьте стандартный и не трогайте. Он и так отлично настроен под все поисковые ведущие системы.
Dissalow закрывает от индексации. В данном случаи вы закрыли все модули.

Сообщение отредактировал pro100kasper - Суббота, 08.09.2012, 11:28
Admin7539 {Модераторы} {Зачастивший} {Сообщений: 171}
Admin7539
Webmoney BL:
WM-репутация:
Дата: Суббота, 08.09.2012, 12:13 | Сообщение # 3 [644]
В том то и дело, что этого файла вообще не было.. Или на юкозе он уже встроен?
Да поможет вам F1, да сохранит вас F2, во имя Control`а, Alt`а и святого Delet`а. Enter, братья мои!
WMID
RoLeX_aka_Sky {Проверенные} {Заглянувший} {Сообщений: 33}
RoLeX_aka_Sky
Webmoney BL:
WM-репутация:
Дата: Суббота, 08.09.2012, 12:24 | Сообщение # 4 [644]
он появляется сам и его не надо самому делать.
Его просто не видно в фм
WMID
pro100kasper {Пользователи} {Заглянувший} {Сообщений: 5}
pro100kasper
Дата: Суббота, 08.09.2012, 13:41 | Сообщение # 5 [644]
Admin7539, Он автоматически встроен но когда вы создаёте в файловом менеджере он заменяется.
Admin7539 {Модераторы} {Зачастивший} {Сообщений: 171}
Admin7539
Webmoney BL:
WM-репутация:
Дата: Суббота, 08.09.2012, 16:23 | Сообщение # 6 [644]
pro100kasper, RoLeX_aka_Sky, спасибо большое, друзья. Удалил файл, буду следить за индексацией)
Да поможет вам F1, да сохранит вас F2, во имя Control`а, Alt`а и святого Delet`а. Enter, братья мои!
WMID
WebMage {Проверенные} {Постоянный} {Сообщений: 600}
WebMage
Webmoney BL:
WM-репутация:
Дата: Суббота, 08.09.2012, 16:41 | Сообщение # 7 [644]
хех, так говориш как будто бы у тебя роботы постоянно тусуются... возможно ты сейчас вообще без robots.txt остался.
вот возьми:
Code
User-agent: *
Disallow: /a/
Disallow: /admin/
Disallow: /stat/
Disallow: /index/1  
Disallow: /index/2  
Disallow: /index/3  
Disallow: /index/5  
Disallow: /index/7  
Disallow: /index/8  
Disallow: /index/9  
Disallow: /main/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /panel/
Disallow: /search
Host: nagoraa.ru
Sitemap: http://твой_сайт.ru/sitemap.xml
Sitemap: http://твой_сайт.ru/sitemap-forum.xml

и закачай на сайт, в любом случае хуже уже не будет.

П.С. лучше бы чем здесь вату катать пол дня, написал бы пару статей себе на сайт smile
WMID
Admin7539 {Модераторы} {Зачастивший} {Сообщений: 171}
Admin7539
Webmoney BL:
WM-репутация:
Дата: Воскресенье, 09.09.2012, 05:27 | Сообщение # 8 [644]
Quote (WebMage)
хех, так говориш как будто бы у тебя роботы постоянно тусуются... возможно ты сейчас вообще без robots.txt остался.
вот возьми:

Вот именно, первоначально был такой робот, как ты написал (за исключением нескольких строк)... Это ни к чему хорошему не привело.. Вчера удалил файл с робот.тхт, посмотрю как изменится индексация. Если не поможет - то поставлю, как ты указал. Спасибо. Как-то даже не ожидал, что ты тут отпишешь)

Добавлено (09.09.2012, 05:27)
---------------------------------------------
Сейчас проверил через Яндекс.Вебмастер свой файл с робот.тхт, он выдал следующее:

Code
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: http://мой_сайт.ру/sitemap.xml
Sitemap: http://мой_сайт.ру/sitemap-forum.xml
Sitemap: http://мой_сайт.ру/sitemap-shop.xml


Так что парни были правы, что на юкозе свой файл с робот.тхт (так сказать - встроенный). Ну разве что не помешало бы добавить строку с хостом, а так - такая же, как ты отписал.
Да поможет вам F1, да сохранит вас F2, во имя Control`а, Alt`а и святого Delet`а. Enter, братья мои!
WMID
WebMage {Проверенные} {Постоянный} {Сообщений: 600}
WebMage
Webmoney BL:
WM-репутация:
Дата: Воскресенье, 09.09.2012, 12:52 | Сообщение # 9 [644]
Так вот сейчас сделай одну вещь и не трогай этот роботс к чёртовой бабушке, а именно:

пропиши строчку вместо пробела "Host: твой_сайт.ru"
И я бы удалил "Sitemap: http://мой_сайт.ру/sitemap-shop.xml" если у тебя не стоит модуль на магазин.

Потом можеш в личку дать мне адрес твоего сайта, я через RDSbar (расширение для Google Chrom) посмотрю роботс, чтоб у тебя отлего на душе и ты смог приступить уже к наполнению своего любимого сайтика контентом
WMID
Admin7539 {Модераторы} {Зачастивший} {Сообщений: 171}
Admin7539
Webmoney BL:
WM-репутация:
Дата: Воскресенье, 09.09.2012, 15:05 | Сообщение # 10 [644]
WebMage, сделал и отправил, проверяй)
Да поможет вам F1, да сохранит вас F2, во имя Control`а, Alt`а и святого Delet`а. Enter, братья мои!
WMID
Форум » Для Веб-мастера » Мастерская » Пропали странице в индексации Яндекса..
  • Страница 1 из 1
  • 1
Поиск: