作者terryshin (温暖的小太阳)
看板PHP
标题[分享] 最近完成的防爬虫 PHP library
时间Mon Jun 10 14:35:28 2019
最近完成的 library,主要用在自己网站
大约问市约一个月。
设计动机:
因为盗文农场 (例如 xx 头条) 之类的爬虫实在很多
由其中国那边很流行用镜像对映的方式盗人全站放广告
让我觉得很不爽。因为才会做这个。
做好之後稍微整理一下分享出来。
https://github.com/terrylinooo/shieldon
文件:
https://shield-on-php.github.io/
使用遇到问题欢迎到GitHub开 Issue 给我。
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 101.137.183.143 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/PHP/M.1560148532.A.064.html
1F:推 holishing: 先推分享 06/10 17:00
2F:推 tgenie: 推一个 06/11 08:22
3F:推 ice831107: 推大大分享 06/11 19:10
4F:推 bakedgrass: 这样是不是也牺牲了SEO? 06/12 04:26
5F:推 MoMoShota: 回4楼,这个可以设定白名单给指定的 bot 06/12 09:43
6F:推 hareion08: 推 06/12 13:47
7F:推 alian954: 推 06/14 13:24
8F:推 cph911: 设白名单的话爬虫不是也能伪装吗? 06/18 08:24
9F:推 teli: 分享有推 06/25 15:49
10F:推 vi000246: 是用RDNS去判断是否白名单的 应该不能伪装吧 07/02 15:06
11F:推 powyo: 这有办法防headless吗 07/08 13:34
12F:推 harry8736968: 推分享 07/19 12:37
13F:推 swallowcc: 推,赞赞 08/13 10:13
15F:→ Edison4ever: 看到这麽完整的repo会想要重新回去玩PHP 谢分享~ 01/04 09:22
16F:推 yuiweq1999: 推 02/06 08:41