作者sbshank (季)
看板java
標題[問題] 網頁爬蟲
時間Fri Mar 1 22:48:36 2013
我想要抓取露天拍賣"寵物"的拍賣結果
抓取如下網頁
http://search.ruten.com.tw/search/s000.php?searchfrom=searchf&k=%C3d%AA%AB&t=0
(縮址：
http://goo.gl/ICioT )
但發現他似乎有些地方是用javascript跑的
所以直接抓html會抓不到
後來我試著用HtmlUnit 直接模擬瀏覽器
抓到的仍是沒有商品項目的網頁
請問為什麼會這樣呢
謝謝
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 114.34.140.123
1F：→ iFEELing: hint : enable javascript 03/01 23:23
我有webClient.setJavaScriptEnabled(true);
※ 編輯: sbshank 來自: 114.34.140.123 (03/01 23:42)