作者fordpines (阿福)
看板Python
标题[问题] python response 问题
时间Thu Mar 8 20:20:11 2018
http://crdd.osdd.net/raghava/lbtope/vrindex/index.php?ran=42052
最近在做网页的爬虫
上传资料到form的已经另外写好了 问题是不管什麽时候点进结果页(上面的网址)他都会先跑
loading 的gif再刷新到有结果的那个页面(会有标示百分比的那个)
我有试着送出request以後 让他等一下收回response 但还是只有读到gif的页面
https://imgur.com/Mi4E6Yh
请问乡民有甚麽方法 可以让他读到结果页呢?
另外 在另一个地方问 回答的人说她改user-agent就可以拿到 但我用了两个方法都不行啊...
https://imgur.com/AeUwT1h
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 36.225.56.90
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1520511615.A.D3E.html
※ 编辑: fordpines (36.225.56.90), 03/08/2018 20:23:49
1F：→ s860134: 不熟悉爬虫抓网业流程吧，先把 F12 打开 重新整理网页 03/10 00:52
2F：→ s860134: 可以发现其实这个页面总共要了两次页面 03/10 00:53
4F：→ s860134: 所以你加什麽 header 都没有用拉，因为 url 是错的 03/10 00:55
5F：→ s860134: index.php (X) lbtope.php(O) 03/10 00:56
6F：推 fiorentino: Good 03/10 09:46
7F：→ AlaRduTP: 呃 显示结果的网址和你给的网址不是不一样吗 03/10 15:54
8F：→ fordpines: 谢谢s86大 03/12 14:33