作者johnnyne (强尼乃)
看板PHP
标题[请益] 如何动态抓取网页
时间Mon Feb 20 16:02:13 2012
目前想要对网页下query并进行自动撷取网页资料
原本的方法是在url後面接上query并且解析网页内容抓取我们要的资讯
可是现在我想要对一个网站下不同query後再进去抓取动作
可是他的url在不同的query下并没有改变
请问有甚麽方法是可以动态输入关键字并且抓取相关内容呢?
EX:
http://140.111.1.43/cgi-bin/gdic/gsweb.cgi?ccd=l_fujy&o=wframe04.htm
谢谢大家
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 140.115.156.76
1F:推 scribeTW:用cURL POST你的参数 02/20 21:41
3F:→ guardlan:浏览器送一次正常的 post 资讯过去 然後看他需要那些资料 02/21 00:07
4F:→ guardlan:然後利用 curl post 你要的资料过去 02/21 00:08
5F:推 weakstudy:curl是正解 02/21 21:53