Уже много лет с удовольствием пользуюсь программой Zenno Poster, которая позволяет автоматизировать что угодно при работе с вебом.
Одна из её сильных сторон - универсальный парсинг.
Можно без знания программирования в визуальной среде указать прямо на странице, какие элементы выдирать, задать обработку для них и потом в многопоточном режиме собрать информацию.
Поддерживаются прокси, капчи и всё, что только вы можете себе представить
Рекомендую! Реф-ссылку могу выслать в личку, но моя цель не в том, чтобы заработать)