eurekafag 18.12.2010 20:09 Home

Внезапно, взбрела мысль, что на питоне наверняка есть фреймворк для создания грабилок со свистоперделками. Быстрый гуглинг выдал вот это: http://doc.scrapy.org/intro/overview.htm... (сразу пример использования). Кто щупал, как оно? Не хочется велосипедить.

python, win
#oeifs
re 11 comments !recommend ~bookmark Ssubscribe
1. SirAnthony 18.12.2010 20:10 Home

но зачем питон для парсеров? есть же перл

#oeifs/1
rereply
2. eurekafag → SirAnthony /1 18.12.2010 20:10 Home

Но зачем насиловать труп?

#oeifs/2
rereply
3. SirAnthony → eurekafag /2 18.12.2010 20:10 Home

Нене, перл для парсеров рулит. Скорость раза в 4 выше

#oeifs/3
rereply
4. eurekafag → SirAnthony /3 18.12.2010 20:11 Home

Сдаётся мне, в случае с кравлером скорость парсинга вообще далеко не бутылочное горло. Я же не гугл с гигабитным каналом.

#oeifs/4
rereply
5. SirAnthony → SirAnthony /3 18.12.2010 20:11 Home

По сути, это единственное оправданное его применение сейчас.

#oeifs/5
rereply
6. SirAnthony → eurekafag /4 18.12.2010 20:12 Home

Ну, регэкспы няшно писать еще, да.

#oeifs/6
rereply
7. eurekafag → SirAnthony /5 18.12.2010 20:12 Home

Ради одного применения учить инопланетный язык? Да ну нахуй, НЕ НУЖНО. Питон вполне неплохо с этим справится, а регекспами XML парсить — моветон.

#oeifs/7
rereply
8. SirAnthony → eurekafag /7 18.12.2010 20:13 Home

для xml есть модули. Кто парсит их вручную?

#oeifs/8
rereply
9. eurekafag → SirAnthony /8 18.12.2010 20:14 Home

Я и говорю, регекспы для XML не нужны.

#oeifs/9
rereply
10. SirAnthony → eurekafag /9 18.12.2010 20:18 Home

что-то я не понял, в чем профит этого фреймворка. По моему, можно взять красивосуп и сделать то же самое, не намного больше кода нужно.

#oeifs/10
rereply
11. eurekafag → SirAnthony /10 18.12.2010 20:19 Home

Ну там внизу WHAT ELSE MUTHAFUKKA, почитай. Суп делает чисто парсинг, а тут свистоперделки ещё и мидловарь.

#oeifs/11
rereply
Do you really want to delete ?