Роботы опять отдыхают? - Страница 3

formalist · 04.07.2008, 11:30

Цитата:

Сообщение от bitlz

Третьего представился "Yandex/2.01.00 (compatible; Win16; Dyatel; Z)"

Это не тот

big.bon · 04.07.2008, 13:23

Цитата:

Сообщение от formalist

Это не тот

Это дятел - проверяет доступность сайта. Та же опера.

REG_PR · 04.07.2008, 13:54

В последнее время АПдейты слабые на новые страницы. По крайней мере у меня так. Много свежих сйтов непроиндексированно. При том, что контент полностью уникальный. 2-3 по нулям.

dva-main · 04.07.2008, 19:29

Цитата:

Сообщение от formalist

но вцелом шифрация бота - это глупо

глупо? с чего бы? не шифровать бота который проверяет сайт на клоакинг - вот это глупо... краулера и индексатора действительно не стоит шифровать - перекроют доступ за траф...

Цитата:

Сообщение от formalist

в таком бы случае я бы зафиксировал всплеск активности на "неизвестных" IP

при нормальной работе 5-10 заходов "проверяльщика" на основные "узлы" архитектуры в день... Вы отслеживаете все такие "всплески" ?

yayayagogogo · 05.07.2008, 03:24

Цитата:

Сообщение от cash

+1 к вопросу

Цитата:

Сообщение от Alex_11

А где такой скриптец качнуть можно?

http://thecounter.ru

В статистике можно смотреть логи посещений всех роботов.

formalist · 05.07.2008, 06:19

проснулсо бот

big.bon · 05.07.2008, 10:23

Ага, вчера вечером скачал за 5 суток сразу. За часа два! Думал меня на хостинге забанят за дос))

yarnik · 05.07.2008, 13:33

то ли Яшу глючит, то ли еще кого то
но если спросить его и отсортировать мои страницы по дате, говорит что последнее что он видел - 2 месяца назад.
хотя новости каждый день и остальной контент тоже

yayayagogogo · 21.07.2008, 21:52

Гугл сканирует по одной странице за одну минуту это нормально? Уже 5 суток так. Яндекс не заходил вообще

bitlz · 22.07.2008, 00:32

Цитата:

Сообщение от formalist

Это не тот

Да какая разница, бот жив

Жрет три дня подряд, активизировались яху, вэбальта, гугл
Жрут собаки немерено, что ни строка в ацессе то бот

05.07.2008, 13:33	#28
yarnik Специалист Регистрация: 02.04.2008 Адрес: 10 минут до Майдана Сообщений: 404 Вес репутации: 214	то ли Яшу глючит, то ли еще кого то но если спросить его и отсортировать мои страницы по дате, говорит что последнее что он видел - 2 месяца назад. хотя новости каждый день и остальной контент тоже __________________ уже сбылось: редактирование фильтров, избранное для каждого проекта, возвращение Wink

21.07.2008, 21:52	#29
yayayagogogo Специалист Регистрация: 16.03.2008 Сообщений: 127 Вес репутации: 0	Гугл сканирует по одной странице за одну минуту это нормально? Уже 5 суток так. Яндекс не заходил вообще __________________ http://gun.su/referer/Бесплатные посетители на Ваши сайты!

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Роботы Яндекса отдыхают?	big.bon	Яндекс	12	17.06.2008 13:43
Опять про код ссылок	ejikevil	Вопросы от новичков	5	19.05.2008 22:05
не успел добавить сайт ка он вылетел из яндекса и опять добавил и опять вылетел	111	Вопросы по работе системы	9	07.04.2008 01:24
С каких IP ходят роботы sape?	craziman	Вопросы по работе системы	4	27.12.2007 11:54
Опять АП ТИЦ?!	TR#ll	Апдейты	124	23.07.2007 17:13

04.07.2008, 13:54	#23
REG_PR Новичок Регистрация: 04.07.2008 Сообщений: 7 Вес репутации: 0	В последнее время АПдейты слабые на новые страницы. По крайней мере у меня так. Много свежих сйтов непроиндексированно. При том, что контент полностью уникальный. 2-3 по нулям.

05.07.2008, 06:19	#26
formalist Специалист Регистрация: 03.11.2007 Сообщений: 200 Вес репутации: 205	проснулсо бот

05.07.2008, 10:23	#27
big.bon Мастер Регистрация: 04.11.2007 Сообщений: 747 Вес репутации: 220	Ага, вчера вечером скачал за 5 суток сразу. За часа два! Думал меня на хостинге забанят за дос))