作者rossy (Rossy)
看板Python
標題[問題] PTT爬蟲尋找作者文章
時間Tue Jul 18 23:36:53 2017
各位大大好
小弟我最近看網路範例改寫PTT爬蟲
想要能夠搜尋某作者發過的文章
目前用的方法是每一頁每一頁去找
找到有該作者的發文就記錄下來
可是這種方法實在是太慢了
一個版可能有好幾千頁
要全部搜尋完實在不太實際
想問問大家有沒有什麼方法呢?
手機排版請見諒!
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 49.159.244.115
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Python/M.1500392216.A.4E1.html
1F:→ hoho8: ucptt之類的備份站就能搜了 07/18 23:58
2F:推 CodingMan: 下搜尋指令呢? a 作者? 07/19 00:53
3F:→ vi000246: a作者就要用telnet了 寫起來麻煩很多 07/19 00:56
4F:→ vi000246: 可是我也只想得到這個 07/19 00:56
5F:推 holishing: 太好搜也很麻煩... (某種角度來說 07/19 02:13
6F:→ s860134: ㄜ 你 google 上面看得到相同功能的都是這樣慢慢爬出來的 07/19 02:29
7F:→ s860134: 不過頻率太高會被站方封鎖 07/19 02:30
8F:→ s860134: PttAntiBot 可以看到站方是有在做反制,只是好像沒很嚴 07/19 02:33
9F:推 CodingMan: 我可以想想看加這個功能 07/19 05:26
10F:→ rossy: 看起來要研究一下telnet了 C大我後來有看到您的貼文 我等 07/19 11:52
11F:→ rossy: 等也去研究一下! 07/19 11:52
12F:推 CodingMan: Hi 我今天看了一下,應該是辦得到。 07/22 00:04
13F:→ rossy: C大您有什麼建議呢 07/23 20:39
14F:推 CodingMan: 程式已經可以支援條件搜尋跟作者搜尋了喔 06/06 23:37