作者Big9 (Big9)
看板Ajax
标题[问题] NodeJS Crawler behind company proxy
时间Wed Mar 1 23:58:20 2017
各位好
最近在学NodeJS
打算写一只Crawler
参照此文章
如何撰写Crawler
http://yhsiang.logdown.com/posts/2014/05/10/how-to-write-a-crawler
也完成了一只Crawler
在家中一般网路环境时顺利抓下资料
但是 拿到公司网路环境运作
竟然无法爬资料
深入追查下才发现
公司连网站都会透过Proxy
导致爬网页时都会失败
上网找了许多相关问题
也是无法顺利解决
上来求教各位
谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 223.139.229.14
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Ajax/M.1488383903.A.487.html
2F:→ mmis1000: 那就让你的crawler也过proxy 03/02 12:39