Antigate

  • Автор темы Bryant
  • Обновлено
  • 15, Feb 2011
  • #2
в амазинге ставлю от 0сек до 1сек задержку, но после долгого такого парсинга на каждый запрос выскакивает капча. жму на паузу - через час все норм.
 

Che


Рег
03 Dec, 2003

Тем
75

Постов
194

Баллов
619
  • 15, Feb 2011
  • #3
che: после долгого такого парсинга
Это сколько примерно по времени? Хочу на ночь поставить. У меня 288к ключей, очищеных от мусора, дубликатов и т.п.
 

Bryant


Рег
11 Feb, 2011

Тем
72

Постов
218

Баллов
578
  • 15, Feb 2011
  • #4
Bryant: Это сколько примерно по времени? Хочу на ночь поставить. У меня 288к ключей, очищеных от мусора, дубликатов и т.п.
ek:ek: Тебе лучше будет использовать прокси
 

Bondito


Рег
23 Oct, 2010

Тем
71

Постов
212

Баллов
587
  • 15, Feb 2011
  • #5
Можно поподробней для новичка? Первый раз сам сталкиваюсь с прокси, до этого только слышал
 

Bryant


Рег
11 Feb, 2011

Тем
72

Постов
218

Баллов
578
  • 15, Feb 2011
  • #6
Bryant: Это сколько примерно по времени? Хочу на ночь поставить. У меня 288к ключей, очищеных от мусора, дубликатов и т.п.
~1.5 суток где-то. эт что за тематика у тебя такая?
 

Che


Рег
03 Dec, 2003

Тем
75

Постов
194

Баллов
619
  • 15, Feb 2011
  • #7
Я думаю амазингом парситься будет намного больше чем 1,5 суток. Если задержка 0-1 секунда, то в час это в идеале 3600 ключей, реально будет не больше 3к. Получаем 96 часов.
 

Zlad


Рег
23 Jan, 2011

Тем
74

Постов
179

Баллов
549
  • 15, Feb 2011
  • #8
zlad: Я думаю амазингом парситься будет намного больше чем 1,5 суток.
Если задержка 0-1 секунда, то в час это в идеале 3600 ключей, реально будет не больше 3к. Получаем 96 часов.
А вас капча не выходит при такой задержке? У меня задержка 4-7сек,и после 10-20к ключей через каждый ключ выходит капча(
 

Bondito


Рег
23 Oct, 2010

Тем
71

Постов
212

Баллов
587
  • 15, Feb 2011
  • #9
В амазинге? Я не парсил больше 15к, если через впн парсить то капча достаточно часто выскакивает, точно не помню, через 500 где-то. Если с реального ип то совсем редко. Если выскивает часто, то попробуй поставить впс прокси. Хреново что в амазинге нет многопоточности. Нет же? Или я что-то упустил?
 

Zlad


Рег
23 Jan, 2011

Тем
74

Постов
179

Баллов
549
Тем
403,760
Комментарии
400,028
Опыт
2,418,908

Интересно