Имя: Пароль:
IT
Админ
Посоветуйте хороший парсер сайтов.
0 Jump
 
18.08.14
15:08
Самому писать лень, надо бы что то такое чтобы гибко настроить можно было, и натравить на ресурс для вытягивания информации.
1 Aleksey
 
18.08.14
15:11
1С Предприятие
2 acsent
 
18.08.14
15:14
универсальных нет и не может быть
3 HeroShima
 
18.08.14
15:23
Питон +- селениум.
4 Котокот
 
18.08.14
15:29
(0) А че вытягивать надо, цены?
5 Сниф
 
18.08.14
15:35
Human Emulator -4.0.14 - последняя версия, которую можно найти в сети.
6 Jump
 
18.08.14
15:42
(4)Цены, описания, картинки, адреса.
7 Сниф
 
18.08.14
15:49
Особенность Human Emulator - заходишь на сайт, включаешь запись макроса, выполняешь действия - останавливаешь запись макроса и получаешь скрипт на PHP, который осталось подправить.
Даю ссылку на бесплатные скрипты для Human Emulator
http://www.x-scripts.com/scripts.php
8 Jump
 
18.08.14
16:10
Жалко у нее триального периода нет, чтоб попробовать.
Так то не сильно и дорогая, но без пробы покупать неохота, придется искать.
9 Jump
 
18.08.14
16:12
(3)Я ж говорю лень.
Вот ежели ничего не найду, то как раз и будет питон и селениум.
10 vhl
 
18.08.14
17:04
(0) Обращайся через API, а то парсер, да парсер. Потом после тебя все тормозить будет.
11 Сниф
 
18.08.14
17:18
Если нет денег загуглить написанное в (5) или скачать бесплатную демку с сайта производителя, то можно попробовать IMacros+Firefox.
12 Jump
 
18.08.14
17:18
(10)А есть API не слышал о таком.
И что именно тормозить будет?
13 Jump
 
18.08.14
18:15
(11)А есть демка бесплатная? Не нашел.
14 Сниф
 
18.08.14
19:02
(13) на http://humanemulator.info/ внизу ссылка "Demo версия"

Но надо сказать, что у программы (по сравнению с версией, указанной в (5)) появился существенный недостаток: она стала кушать слишком много оперативки. 150-200 мегабайт против старой версии 4.0.14, которая кушала всего 40-50 мегабайт. Если запускать парсинг в несколько потоков, то получается, пригодность новой версии под вопросом.
15 vhl
 
19.08.14
09:30
(12) А что ты предпринял чтобы о нем узнать?
Требовать и эффективности, и гибкости от одной и той же программы — все равно, что искать очаровательную и скромную жену... по-видимому, нам следует остановиться на чем-то одном из двух. Фредерик Брукс-младший