作者ks110159 (HFDragon)
看板Python
标题[问题] 爬虫伪元素问题
时间Wed May 23 15:02:49 2018
小弟最近在练习简单的爬虫
使用bs抓取资料
但每每遇到 ::before ::after 之间的资料
像抓取以下中国时报的新闻标题 都无法顺利抓取
https://i.imgur.com/mnC6a0p.jpg
爬了一下文发现是非html的部分
想请问有什麽方法可以解决这种js的问题
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 101.12.129.123
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1527058971.A.94B.html
1F：→ tlaceruse: 关键找 js 怎麽吃资料进来的。 05/23 16:40
2F：→ tlaceruse: 如果真的找不到 那就直接模拟开启浏览器选元素 一般都 05/23 16:41
3F：→ tlaceruse: 选得到 但吃资源问题 05/23 16:41
4F：→ ks110159: 请问t大 模拟浏览器选元素是使用selenium吗 05/23 17:50
5F：推 HybridSC: selenium 05/25 02:25
6F：→ ks110159: 谢谢h大 05/25 09:06