作者Lishiver (绪风)
看板Python
标题[问题] ptt 爬虫疑问
时间Thu Sep 26 00:29:04 2024
请教各位爬虫大大,若遇到爬ptt文章时,遇到档案太大,无法完全显示留言的问题时,要如何解决呢? 目前看了各家网页都无法全部显示留言
好像只能登录term.ptt.cc 才能查看,只是这边对小弟来说就进入未知的领域, 请问各位爬虫大师有办法直接用python读取term.ptt.cc上的资讯吗?
-----
Sent from JPTT on my iPhone
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 118.169.224.144 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1727281746.A.086.html
1F:→ tzouandy2818: 网页版ptt不就一次显示所有留言了吗 09/26 05:04
2F:→ DaOppaiLoli: 是无法完全显示即时留言吧?我记得有相关套件可用 09/26 07:21
3F:→ Lishiver: 後来用pyptt 解决了 网页版我看都无法全部显示欸 09/27 14:25
4F:推 holishing: pyptt比较像模拟你是一个终端机上bbs的方式提取资料 09/28 18:10
5F:→ holishing: 网页版因为有做cache机制设定,不同步是正常的 09/28 18:11
6F:推 CodingMan: (飘过~ 10/07 10:03
7F:推 holishing: 楼上作者XD 10/08 21:43