作者ntuleo (里欧)
看板Python
标题[问题] 爬取infinite scrolling web
时间Tue Jun 30 12:28:03 2015
有不用selenium可以爬infinite scrolling web的方法吗?
有些page selenium没有办法爬(ex:quora),而且selenium很慢
有没有其他方式可以background trigger infinite scrolling
让我可以爬到整个网页呢?
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 60.250.185.98
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1435638486.A.BC2.html
1F:→ talenttb: 查他的js呼叫那一只api,然後组参数呼叫。 这种方式 07/08 08:31
2F:→ talenttb: 如何 07/08 08:31