作者g66932007 (孤單的人)
看板Web_Design
標題[問題] 如何取得google全部搜尋結果?
時間Wed Jun 5 23:25:45 2013
User異想天開,想要把google關鍵字的結果(網址),通通存到資料庫
用google api雖然可以取得網址,但最多只能傳回64筆....
目前是用url的參數去換頁
http://www.google.com/search?q=XXXXX&start=11
然後取得每一頁的原始碼,在用Regex去取得每個的連結.....
而且還不能query太快,否則會被google鎖一段時間
不知道各位高手有沒有其他解呢??
謝謝
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 123.110.222.166
1F：→ mrbigmouth:這是何等的異想天開.... 06/06 09:19
2F：推 yanli2:寫個程式去抓就好了.. 06/06 13:37
3F：→ g66932007:怎麼抓?以"王建民" site:yahoo.com.tw 去搜尋 06/06 14:52
4F：→ g66932007:第一頁可看到約1460結果,當你翻到第25頁時,就已到底 06/06 14:52
5F：→ g66932007:約250筆 所以到底是1460筆還是250筆???? 06/06 14:53
6F：推 f1234518456:有阿 叫他去吃X 06/06 23:10
7F：→ Ageis:先問user到底要解決什麼問題 06/07 14:45
8F：→ g66932007:今天在談一次 他說一般USER看不懂GOOGLE搜出來得結果 06/07 21:43
9F：→ g66932007:要我把結果分成十個TABLE 每個TABLE裝十條結果 06/07 21:44
10F：→ g66932007:真得很想嗆回去 幹 這不是一樣嗎? 06/07 21:45
11F：→ tyf99:想學百度盜用google搜尋結果？ 06/07 22:10