作者sbshank (季)
看板java
标题[问题] 网页爬虫
时间Fri Mar 1 22:48:36 2013
我想要抓取露天拍卖"宠物"的拍卖结果
抓取如下网页
http://search.ruten.com.tw/search/s000.php?searchfrom=searchf&k=%C3d%AA%AB&t=0
(缩址:
http://goo.gl/ICioT )
但发现他似乎有些地方是用javascript跑的
所以直接抓html会抓不到
後来我试着用HtmlUnit 直接模拟浏览器
抓到的仍是没有商品项目的网页
请问为什麽会这样呢
谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 114.34.140.123
1F:→ iFEELing: hint : enable javascript 03/01 23:23
我有webClient.setJavaScriptEnabled(true);
※ 编辑: sbshank 来自: 114.34.140.123 (03/01 23:42)