作者rossy (Rossy)
看板Python
标题[问题] PTT爬虫寻找作者文章
时间Tue Jul 18 23:36:53 2017
各位大大好
小弟我最近看网路范例改写PTT爬虫
想要能够搜寻某作者发过的文章
目前用的方法是每一页每一页去找
找到有该作者的发文就记录下来
可是这种方法实在是太慢了
一个版可能有好几千页
要全部搜寻完实在不太实际
想问问大家有没有什麽方法呢?
手机排版请见谅!
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 49.159.244.115
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1500392216.A.4E1.html
1F:→ hoho8: ucptt之类的备份站就能搜了 07/18 23:58
2F:推 CodingMan: 下搜寻指令呢? a 作者? 07/19 00:53
3F:→ vi000246: a作者就要用telnet了 写起来麻烦很多 07/19 00:56
4F:→ vi000246: 可是我也只想得到这个 07/19 00:56
5F:推 holishing: 太好搜也很麻烦... (某种角度来说 07/19 02:13
6F:→ s860134: ㄜ 你 google 上面看得到相同功能的都是这样慢慢爬出来的 07/19 02:29
7F:→ s860134: 不过频率太高会被站方封锁 07/19 02:30
8F:→ s860134: PttAntiBot 可以看到站方是有在做反制,只是好像没很严 07/19 02:33
9F:推 CodingMan: 我可以想想看加这个功能 07/19 05:26
10F:→ rossy: 看起来要研究一下telnet了 C大我後来有看到您的贴文 我等 07/19 11:52
11F:→ rossy: 等也去研究一下! 07/19 11:52
12F:推 CodingMan: Hi 我今天看了一下,应该是办得到。 07/22 00:04
13F:→ rossy: C大您有什麽建议呢 07/23 20:39
14F:推 CodingMan: 程式已经可以支援条件搜寻跟作者搜寻了喔 06/06 23:37