Почему Sape не работает с Blogger.com

[alex4]

Как известно, Сапа не может договориться с блогами blogspot.com и ставит честные ссылки с них в статус Error.

Короткий ответ: имхо это потому, что Сапа делает запрос страницы по протоколу HTTP 1.1, а ответ не может переварить.

Подробный ответ:

1. Моё исследование показало, что Сапа не может договориться с Блоггером именно на уровне HTTP-заголовков. (Исследование простое - если взять HTML-код с blogspot-блога и вставить на любой другой свой не-blogspot сайт, всё работает хорошо, все ссылки в ОК. Стало быть, с HTML проблем нет).

2. Делаем запрос страницы блога HTTP viewer-ом под двумя версиями: HTTP 1.0 и HTTP 1.1 и видим, что по большому счету разница только в заголовке Transfer-Encoding: chunked (HTTP 1.1)

3. Сие означает, что страница отдаётся не одним куском, а частями (чанками)

4. Не знаю, на чем написано бот Сапы, но предположу что на не самой свежей версии РНР. А РНР не умеет автоматически работать с chunked transfer decoding (пруф линк - PHP prior to 5.3.0 does not implement chunked transfer decoding. [...] It is your responsibility to be HTTP 1.1 compliant)

Ребята из Сапы, вы можете делать запрос по HTTP 1.0?

Вашему же саппорту уменьшится поток жалоб.

[Rellas]

В факе яндекса написано, что ссылки с бесплатных хостингов не передают тИЦ, это же относится к блоггеру? может поэтому сапе он и не особо нужен? хотя на серп и на пр влияют весьма положительно

[alex4]

На Блоггер это не распространяется. У меня ТИЦ40, например.

[Rellas]

тИЦ на бесплатный хостинг передается, а вот С бесплатного не факт