作者StubbornLin (Victor)
看板EZsoft
标题Re: [请问] 今天老师出的难题...百思不解
时间Tue Oct 7 11:21:32 2008
※ 引述《andy740813 (.)》之铭言:
: 不好意思,我没有解释得很清楚
: 其实我老板是想研究最近很火红的那部国片的部落格行销
: 所以想藉由分析留言内容来解析一些东西,虽然这部国片不是完全靠部落格行销来支撑的
: 但是这只是众多原因中的一小项,所以才会要我找个抓留言的软体给他,并不是想做坏事
: 麻烦各位帮个忙,这个程式我找了二天,还是找不到~"~谢谢各位
通常这种程式都是特别制做的比较多
毕竟网页那麽多种,也很难有一个固定的形式
抓网页通常都是针对特定网页而做
所以应该比较难找到通用的
http://blog.ez2learn.com/2008/10/05/python-is-the-best-choice-to-grab-web/
可以参考一下我写的抓网页程式的心得
我有打算弄成函式库和工具之类的open source专案
受到gstreamer(一套影音的程式引擎)的启发 抓网页的流程会像是pipeline(管线)一样
也就是
抓网页 -> 解析语法 -> 取得资料 -> 存入资料库
每个流程是独立的这样,因此可以重覆使用
目前就我所知好像没有什麽现成工具抓网页的样子 或着是不好找我没找到
有人知道的话也希望推荐一下 我也想参考看看 :P
--
易记学 程式设计教学
http://ez2learn.com/
易记学 程式设计讨论区
http://forum.ez2learn.com
VICTOR's 个人Blog
http://blog.ez2learn.com/
财报分析王
http://victorlin.serveftp.org/stock/
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 118.170.90.72