作者g66932007 (孤单的人)
看板Web_Design
标题[问题] 如何取得google全部搜寻结果?
时间Wed Jun 5 23:25:45 2013
User异想天开,想要把google关键字的结果(网址),通通存到资料库
用google api虽然可以取得网址,但最多只能传回64笔....
目前是用url的参数去换页
http://www.google.com/search?q=XXXXX&start=11
然後取得每一页的原始码,在用Regex去取得每个的连结.....
而且还不能query太快,否则会被google锁一段时间
不知道各位高手有没有其他解呢??
谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 123.110.222.166
1F：→ mrbigmouth:这是何等的异想天开.... 06/06 09:19
2F：推 yanli2:写个程式去抓就好了.. 06/06 13:37
3F：→ g66932007:怎麽抓?以"王建民" site:yahoo.com.tw 去搜寻 06/06 14:52
4F：→ g66932007:第一页可看到约1460结果,当你翻到第25页时,就已到底 06/06 14:52
5F：→ g66932007:约250笔 所以到底是1460笔还是250笔???? 06/06 14:53
6F：推 f1234518456:有阿 叫他去吃X 06/06 23:10
7F：→ Ageis:先问user到底要解决什麽问题 06/07 14:45
8F：→ g66932007:今天在谈一次 他说一般USER看不懂GOOGLE搜出来得结果 06/07 21:43
9F：→ g66932007:要我把结果分成十个TABLE 每个TABLE装十条结果 06/07 21:44
10F：→ g66932007:真得很想呛回去 干 这不是一样吗? 06/07 21:45
11F：→ tyf99:想学百度盗用google搜寻结果？ 06/07 22:10