作者bckkt (bckkt)
看板Python
标题[问题] 如果爬回来的response部分内容有加密?
时间Sat Mar 3 22:25:11 2018
如题
拿到response之後,做了一次URL decode才看到json的结构
直接贴到json editor online,有报错
後来丢到dirtymarkup,发现有些地方长得如下
https://imgur.com/VA6hn8u
https://imgur.com/4OVZkFh
每个response都会有3~4处长这样,json格式会被破坏,似乎网站会随机找几处来加密
请问有没有大大遇过这种的ORZ,被加密的资料占了要爬的资料很大一部分
因为爬的是篮球比赛即时的分数,所以能不用selenium就不用
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 36.229.148.18
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1520087113.A.2AA.html
1F:推 ckc1ark: 就看他怎麽解的照做罗 03/03 23:05
2F:→ bckkt: 谢谢回应,大大的意思是说把网站载下来,看网站的.js来找? 03/03 23:14
3F:→ s860134: 看起来还是 json format? 通常这个是 base64 03/04 12:44
4F:→ s860134: import base64;base64.b64decode 03/04 12:45
5F:→ WunoW: 你去宫庙找人帮你通灵比较快 03/04 20:13