|
Посоветуйте хороший парсер сайтов.
| ☑ |
0
Jump
18.08.14
✎
15:08
|
Самому писать лень, надо бы что то такое чтобы гибко настроить можно было, и натравить на ресурс для вытягивания информации.
|
|
1
Aleksey
18.08.14
✎
15:11
|
1С Предприятие
|
|
2
acsent
18.08.14
✎
15:14
|
универсальных нет и не может быть
|
|
3
HeroShima
18.08.14
✎
15:23
|
Питон +- селениум.
|
|
4
Котокот
18.08.14
✎
15:29
|
(0) А че вытягивать надо, цены?
|
|
5
Сниф
18.08.14
✎
15:35
|
Human Emulator -4.0.14 - последняя версия, которую можно найти в сети.
|
|
6
Jump
18.08.14
✎
15:42
|
(4)Цены, описания, картинки, адреса.
|
|
7
Сниф
18.08.14
✎
15:49
|
Особенность Human Emulator - заходишь на сайт, включаешь запись макроса, выполняешь действия - останавливаешь запись макроса и получаешь скрипт на PHP, который осталось подправить.
Даю ссылку на бесплатные скрипты для Human Emulator
|
|
8
Jump
18.08.14
✎
16:10
|
Жалко у нее триального периода нет, чтоб попробовать.
Так то не сильно и дорогая, но без пробы покупать неохота, придется искать.
|
|
9
Jump
18.08.14
✎
16:12
|
(3)Я ж говорю лень.
Вот ежели ничего не найду, то как раз и будет питон и селениум.
|
|
10
vhl
18.08.14
✎
17:04
|
(0) Обращайся через API, а то парсер, да парсер. Потом после тебя все тормозить будет.
|
|
11
Сниф
18.08.14
✎
17:18
|
Если нет денег загуглить написанное в (5) или скачать бесплатную демку с сайта производителя, то можно попробовать IMacros+Firefox.
|
|
12
Jump
18.08.14
✎
17:18
|
(10)А есть API не слышал о таком.
И что именно тормозить будет?
|
|
13
Jump
18.08.14
✎
18:15
|
(11)А есть демка бесплатная? Не нашел.
|
|
14
Сниф
18.08.14
✎
19:02
|
(13) на внизу ссылка "Demo версия"
Но надо сказать, что у программы (по сравнению с версией, указанной в (5)) появился существенный недостаток: она стала кушать слишком много оперативки. 150-200 мегабайт против старой версии 4.0.14, которая кушала всего 40-50 мегабайт. Если запускать парсинг в несколько потоков, то получается, пригодность новой версии под вопросом.
|
|
15
vhl
19.08.14
✎
09:30
|
(12) А что ты предпринял чтобы о нем узнать?
|
|
Требовать и эффективности, и гибкости от одной и той же программы — все равно, что искать очаровательную и скромную жену... по-видимому, нам следует остановиться на чем-то одном из двух. Фредерик Брукс-младший