作者terryshin (溫暖的小太陽)
看板PHP
標題[分享] 最近完成的防爬蟲 PHP library
時間Mon Jun 10 14:35:28 2019
最近完成的 library,主要用在自己網站
大約問市約一個月。
設計動機:
因為盜文農場 (例如 xx 頭條) 之類的爬蟲實在很多
由其中國那邊很流行用鏡像對映的方式盜人全站放廣告
讓我覺得很不爽。因為才會做這個。
做好之後稍微整理一下分享出來。
https://github.com/terrylinooo/shieldon
文件:
https://shield-on-php.github.io/
使用遇到問題歡迎到GitHub開 Issue 給我。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 101.137.183.143 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/PHP/M.1560148532.A.064.html
1F:推 holishing: 先推分享 06/10 17:00
2F:推 tgenie: 推一個 06/11 08:22
3F:推 ice831107: 推大大分享 06/11 19:10
4F:推 bakedgrass: 這樣是不是也犧牲了SEO? 06/12 04:26
5F:推 MoMoShota: 回4樓,這個可以設定白名單給指定的 bot 06/12 09:43
6F:推 hareion08: 推 06/12 13:47
7F:推 alian954: 推 06/14 13:24
8F:推 cph911: 設白名單的話爬蟲不是也能偽裝嗎? 06/18 08:24
9F:推 teli: 分享有推 06/25 15:49
10F:推 vi000246: 是用RDNS去判斷是否白名單的 應該不能偽裝吧 07/02 15:06
11F:推 powyo: 這有辦法防headless嗎 07/08 13:34
12F:推 harry8736968: 推分享 07/19 12:37
13F:推 swallowcc: 推,讚讚 08/13 10:13
15F:→ Edison4ever: 看到這麼完整的repo會想要重新回去玩PHP 謝分享~ 01/04 09:22
16F:推 yuiweq1999: 推 02/06 08:41