作者fordpines (阿福)
看板Python
標題[問題] python response 問題
時間Thu Mar 8 20:20:11 2018
http://crdd.osdd.net/raghava/lbtope/vrindex/index.php?ran=42052
最近在做網頁的爬蟲
上傳資料到form的已經另外寫好了 問題是不管什麼時候點進結果頁(上面的網址)他都會先跑
loading 的gif再刷新到有結果的那個頁面(會有標示百分比的那個)
我有試著送出request以後 讓他等一下收回response 但還是只有讀到gif的頁面
https://imgur.com/Mi4E6Yh
請問鄉民有甚麼方法 可以讓他讀到結果頁呢?
另外 在另一個地方問 回答的人說她改user-agent就可以拿到 但我用了兩個方法都不行啊...
https://imgur.com/AeUwT1h
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.225.56.90
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Python/M.1520511615.A.D3E.html
※ 編輯: fordpines (36.225.56.90), 03/08/2018 20:23:49
1F：→ s860134: 不熟悉爬蟲抓網業流程吧，先把 F12 打開 重新整理網頁 03/10 00:52
2F：→ s860134: 可以發現其實這個頁面總共要了兩次頁面 03/10 00:53
4F：→ s860134: 所以你加什麼 header 都沒有用拉，因為 url 是錯的 03/10 00:55
5F：→ s860134: index.php (X) lbtope.php(O) 03/10 00:56
6F：推 fiorentino: Good 03/10 09:46
7F：→ AlaRduTP: 呃 顯示結果的網址和你給的網址不是不一樣嗎 03/10 15:54
8F：→ fordpines: 謝謝s86大 03/12 14:33