Старый 06.05.2008, 08:37   #31
Banned
 
Регистрация: 28.06.2007
Сообщений: 1,487
Вес репутации: 0
datot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущееdatot - прекрасное будущее
Отправить сообщение для datot с помощью ICQ
По умолчанию

Цитата:
Сообщение от Lenka Посмотреть сообщение
То есть, получается что админы Сапе не все предусмотрели при покупке новых IP-адресов? Как оказалось этого недостаточно ?
Все предусмотреть невозможно. А в свете последних веяний ПС (ограничение проверок программами сайтов и блокировка IP после проверки третьего- четвертого сайта: Ашманов и прочее), то можно говорить о сложности в дальнейшем.

Цитата:
P.S. я не про последний АП, а в перспективе, к чему готовиться-то?
Русский народ всегда найдет выход из положения. А мощная SAPE тем более.
datot вне форума   Ответить с цитированием
Старый 06.05.2008, 09:16   #32
Администратор
 
Регистрация: 22.11.2006
Сообщений: 5,868
Вес репутации: 21475118
Avelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспоримаAvelon - репутация неоспорима
По умолчанию

Цитата:
Сообщение от Lenka Посмотреть сообщение
Но ведь совсем недавно Вы говорили, что у Сапе теперь достаточно IP и проблем с обновлением PR в системе быть больше не должно, как это понимать?
обновляем с периодом 1 IP - 1 раз в 4-6 секунд обращения. Все равно гугл банит. Хотя 2 недели назад обновили пиар за 2 суток без проблем.
Avelon вне форума   Ответить с цитированием
Старый 06.05.2008, 09:28   #33
Мастер
 
Регистрация: 06.08.2007
Сообщений: 739
Вес репутации: 189
Lenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущееLenka - прекрасное будущее
По умолчанию

Цитата:
Сообщение от Avelon Посмотреть сообщение
Хотя 2 недели назад обновили пиар за 2 суток без проблем.
Но все же, тогда получилось много нулей на внутренних, Вы еще собирались с этим разобраться, есть какие-то радостные новости? перспективы?
__________________
Тестник, это то же самое что Сонник, только для тестов!
Сайт бесплатных психологических тестов.
Lenka вне форума   Ответить с цитированием
Старый 06.05.2008, 11:51   #34
Вредина
 
Аватар для Jooz
 
Регистрация: 03.07.2007
Адрес: д.Коноплянка
Сообщений: 3,535
Вес репутации: 385
Jooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущее
По умолчанию

Цитата:
Сообщение от Avelon Посмотреть сообщение
обновляем с периодом 1 IP - 1 раз в 4-6 секунд обращения. Все равно гугл банит. Хотя 2 недели назад обновили пиар за 2 суток без проблем.
Это часто, вероятно.
Пробуйте с одного IP не более 6 запросов в минуту. Долго, но что делать, но имея 300IP получиться 1800 запросов в минуту 108000 в час, ~2.6млн в сутки. Нагрузка на 1-IP получиться 8640 запросов в сутки, это уже пшик.

Другой файриант что бы быстрее все шло, можно поступить так:

1. Переписать sape.php хитренько что бы во время проверки созадавался еще один файл например data.pr (перешифрованный),
2. Заполнять его при просмотре страничек юзером. Т.е. IP тех кто заходит на сайт.
3. Оналогично ограничить запросов с одного IP
4. Инициализировать процесс заполнения базы (файла) по какой ни будь команде с сапы.

Это так рассуждения, но вполне, вроде, реальны.
__________________
Чтобы произошло чудо нужно обязательно дунуть. Если не дунуть - чуда не произойдет!
Jooz вне форума   Ответить с цитированием
Старый 06.05.2008, 12:17   #35
Специалист
 
Регистрация: 19.07.2007
Сообщений: 239
Вес репутации: 162
Atec скоро станет известенAtec скоро станет известен
По умолчанию

Уже предлагалось такое решение, ответ насколько я понял был - всегда найдутся умники которые расшифруют файл и перепишут значения, + если запрос выполняется на стороне сайта, то я не вижу проблем перед записью приплюсовывать некую цифру к пиару... и т.д. и т.п.
Atec вне форума   Ответить с цитированием
Старый 06.05.2008, 12:51   #36
Специалист
 
Аватар для sni
 
Регистрация: 10.10.2007
Адрес: Montego Bay
Сообщений: 376
Вес репутации: 166
sni - луч света в тёмном царствеsni - луч света в тёмном царствеsni - луч света в тёмном царствеsni - луч света в тёмном царствеsni - луч света в тёмном царстве
По умолчанию

Цитата:
Сообщение от Avelon Посмотреть сообщение
обновляем с периодом 1 IP - 1 раз в 4-6 секунд обращения. Все равно гугл банит. Хотя 2 недели назад обновили пиар за 2 суток без проблем.
Тоже борюсь с этой проблемой у себя, правда не в таких масштабах.
Заметил - раньше 4-5 секунд между обращением хватало, теперь - да, банит.

Но подобрал новую цифру. 10 секунд. Хватает для нескольких тысяч запросов с одного IP (дольше просто времени не было проверять, но бана не последовало.)

Теперь и яндекс пошел к ужесточению по обращениям за единицу времени.

А что если сначала морды проверить а потом внутренние? Чтобы хоть что-то народу было ?

И еще, можно как-то переложить бремя проверки на пользователей системы - пусть они проверяют, а страницы где PR изменился - укажут системе (не панацея конечно. многие будут добавлять только то что в плюс, но хоть какой-то вариант)

Например у меня у самого растущего сайта за последний АП из 1000 страниц сайта PR сменился у 10-ти страниц, и то считаю это неплохим результатом. Тоесть фактически надо обновить 1% страниц.

(выше описанный вариант, естественно для первичной, быстрой проверки, потом уже можно полную производить сколько потребуется, хоть две недели...)
__________________
Вот заработаю на сапе - куплю велосипед.
Мощный технический аудит сайтов - Долго. Дорого. Ох..
sni вне форума   Ответить с цитированием
Старый 06.05.2008, 15:20   #37
Вредина
 
Аватар для Jooz
 
Регистрация: 03.07.2007
Адрес: д.Коноплянка
Сообщений: 3,535
Вес репутации: 385
Jooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущее
По умолчанию

Цитата:
Сообщение от Atec Посмотреть сообщение
Уже предлагалось такое решение, ответ насколько я понял был - всегда найдутся умники которые расшифруют файл и перепишут значения, + если запрос выполняется на стороне сайта, то я не вижу проблем перед записью приплюсовывать некую цифру к пиару... и т.д. и т.п.
Шифровать можно по разному - нас интересует 11 цифр от 0 до 10
При этом существует открытый ключ ака URL
А дальше хоть потоп, шифровать открытым ключем а расшифровывать закрытым ключем известным только сапе.
Получаем всегда разный открытый ключ (оригинальный URL) и один и тот же закрытый ключь (при чем для каждой площадки может быть свой) получаем довольно стойкую крипто систему. Различные ЭЦП, АЦП именно по такому алгоритму и работают. Было бы желание и криптологи найдутся
__________________
Чтобы произошло чудо нужно обязательно дунуть. Если не дунуть - чуда не произойдет!
Jooz вне форума   Ответить с цитированием
Старый 06.05.2008, 15:46   #38
Специалист
 
Аватар для Destroy
 
Регистрация: 27.03.2008
Адрес: East-Timor
Сообщений: 266
Вес репутации: 156
Destroy - весьма и весьма положительная личностьDestroy - весьма и весьма положительная личностьDestroy - весьма и весьма положительная личность
По умолчанию

Проверяю PR по 100 запросов по 100 датацентрам (приблизительно конечно) раз в 3 минуты. Бана при таких настройках пока не видел...

По поводу проверки на строне пользователя, то тут все просто:
1. Система должна выдавать "чужие" адреса страниц на проверку.
2. Если новый PR совпадает с предыдущим, то записывается в базу (думаю в 90% случаях именно такие страницы)
3. Те страницы где PR изменился, перепроверяются средствами сапы.
Destroy вне форума   Ответить с цитированием
Старый 06.05.2008, 17:46   #39
Мастер
 
Аватар для boolevar
 
Регистрация: 02.08.2007
Сообщений: 668
Вес репутации: 195
boolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущееboolevar - прекрасное будущее
По умолчанию

Предлагаю такое решение:

После апа пр все показатели сбросить в ноль. И разрешить пользователю обновлять ПР для страниц вручную как сделано для ВС.
Блокировать эту функцию пока АП идет, чтоб показатели устаканились.

Это страшно неудобно, это ужасно, но по сравнению с 3 месячным ожиданием пересчета системой - это выход.
boolevar вне форума   Ответить с цитированием
Старый 06.05.2008, 18:45   #40
Вредина
 
Аватар для Jooz
 
Регистрация: 03.07.2007
Адрес: д.Коноплянка
Сообщений: 3,535
Вес репутации: 385
Jooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущееJooz - прекрасное будущее
По умолчанию

Цитата:
Сообщение от boolevar Посмотреть сообщение
Предлагаю такое решение:

После апа пр все показатели сбросить в ноль. И разрешить пользователю обновлять ПР для страниц вручную как сделано для ВС.
Блокировать эту функцию пока АП идет, чтоб показатели устаканились.

Это страшно неудобно, это ужасно, но по сравнению с 3 месячным ожиданием пересчета системой - это выход.
"Наркоман!"
__________________
Чтобы произошло чудо нужно обязательно дунуть. Если не дунуть - чуда не произойдет!
Jooz вне форума   Ответить с цитированием
Ответ

Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Обновление ТИЦ в системе - когда будет ? timeout Курилка 97 04.07.2008 11:39
Когда заработает Обновление Пр и Тиц?? paulg Ошибки при работе с системой 3 09.04.2008 19:38
Обновление когда-нибудь меня постигнет? andy78 Вопросы по работе системы 10 08.02.2008 18:21
Будет АП или когда? datot Апдейты 65 25.07.2007 00:09
Обновление PR будет произведено 2-3 мая (Sape) Rick Вопросы по работе системы 41 05.05.2007 13:25


Часовой пояс GMT +3, время: 16:48.