Парсер Яндекса

Апокалипсис · 30.09.2010, 21:15

Посвятите плиз, отстал от жизни, кто нить обошел (понял) почему яша капчу браузеру выдает а скрипту - нет?..
Поделитесь сслылками, ни один самописных парсеров не пашут которые работают с антикапчей.

Красавчег · 30.09.2010, 21:25

А что парсится? Сниппеты, урлы или что? Без антикапчи никак?

googlebot · 30.09.2010, 21:26

Ё, понятно что случилось с сеумкой... Третий день не могу позиции снять.

Апокалипсис · 30.09.2010, 21:30

Да парсю выдачу, урлы по ключевикам мне нужны.
Антикапчу юзаю, но капчу скачать скриптом не могу url not found

Alex_Wind · 30.09.2010, 22:23

Скинул парсер в ЛС.

Апокалипсис · 30.09.2010, 22:37

Мне пока интересует как это обойти технически

boric · 30.09.2010, 23:09

Апокалипсис
Какой UserAgent ваши скрипты подставляют в заголовки?

Апокалипсис · 30.09.2010, 23:10

boric, мозильный или иешный. что задам..

boric · 30.09.2010, 23:18

Апокалипсис
И из фаерфокса работает, а из скрипта нет?
Может быть он куку пытается записать? Надо попробовать в лисе запретить джаваскрипты, куки и флэш, и попробовать тогда сравнить его поведение со скриптом.

Апокалипсис · 30.09.2010, 23:26

Цитата:

Сообщение от boric

Надо попробовать в лисе запретить джаваскрипты, куки и флэш, и попробовать тогда сравнить его поведение со скриптом.

Сложно будет воспроизвести , в лисе у меня оч редко капча.
Куки скрипт смотрит. Скорее всего проблема действительно в яваскрипте. Пока еще не понял. Нужно поймать как то.

30.09.2010, 21:15	#1
Апокалипсис Эксперт Регистрация: 13.05.2008 Сообщений: 7,497 Вес репутации: 387	Парсер Яндекса Посвятите плиз, отстал от жизни, кто нить обошел (понял) почему яша капчу браузеру выдает а скрипту - нет?.. Поделитесь сслылками, ни один самописных парсеров не пашут которые работают с антикапчей. __________________ Ортопедические матрасы

30.09.2010, 21:25	#2
Красавчег К черту кодекс !! Регистрация: 19.12.2009 Адрес: [ forum.sape.ru ] Сообщений: 2,168 Вес репутации: 377	А что парсится? Сниппеты, урлы или что? Без антикапчи никак? __________________ Вы использовали запрещённое администрацией слово(-а). Пожалуйста, удалите его(их).

30.09.2010, 21:26	#3
googlebot Эксперт Регистрация: 06.04.2009 Сообщений: 1,076 Вес репутации: 227	Ё, понятно что случилось с сеумкой... Третий день не могу позиции снять. __________________ DropBox - secure online backup sync service. На халяву 2-16 Гб (при реге по рефке 500 Мб бонус обоим)

30.09.2010, 21:30	#4
Апокалипсис Эксперт Регистрация: 13.05.2008 Сообщений: 7,497 Вес репутации: 387	Да парсю выдачу, урлы по ключевикам мне нужны. Антикапчу юзаю, но капчу скачать скриптом не могу url not found __________________ Ортопедические матрасы

30.09.2010, 22:37	#6
Апокалипсис Эксперт Регистрация: 13.05.2008 Сообщений: 7,497 Вес репутации: 387	Мне пока интересует как это обойти технически __________________ Ортопедические матрасы

30.09.2010, 22:23	#5
Alex_Wind Специалист Регистрация: 22.04.2008 Адрес: Питер Сообщений: 455 Вес репутации: 217	Скинул парсер в ЛС.

30.09.2010, 23:09	#7
boric Эксперт Регистрация: 05.03.2008 Сообщений: 1,095 Вес репутации: 250	Апокалипсис Какой UserAgent ваши скрипты подставляют в заголовки?

30.09.2010, 23:10	#8
Апокалипсис Эксперт Регистрация: 13.05.2008 Сообщений: 7,497 Вес репутации: 387	boric, мозильный или иешный. что задам.. __________________ Ортопедические матрасы

30.09.2010, 23:18	#9
boric Эксперт Регистрация: 05.03.2008 Сообщений: 1,095 Вес репутации: 250	Апокалипсис И из фаерфокса работает, а из скрипта нет? Может быть он куку пытается записать? Надо попробовать в лисе запретить джаваскрипты, куки и флэш, и попробовать тогда сравнить его поведение со скриптом.

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
парсер ЯК	abs	Софт для оптимизаторов и вебмастеров	21	25.04.2012 17:54
Sitemap парсер	lifeisfineru	Софт для оптимизаторов и вебмастеров	6	26.04.2010 09:51
Ищу парсер web.archive.org	Ufaweb	Разработка и сопровождение сайтов	17	09.07.2009 21:20
YACA Парсер	Wink	Разработка и сопровождение сайтов	35	27.02.2008 19:53
Парсер Я.Каталога	kip	Курилка	3	06.10.2007 20:17