作者piyieen (Nightshift24)
看板Python
标题[问题] 爬虫网页
时间Mon Jun 11 17:26:38 2018
小的是刚学python的新手
想请教一下
如果要一次爬很多网页收集成资料库的话
读取网页的code
是用for回圈的方式吗
还是有什麽比较常用的方法
谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 42.73.46.173
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1528709200.A.936.html
1F：→ neil987: YT有很多教学 先从简单的开始 06/11 17:37
2F：→ Jyery: 先学会逛github stackoverflow 06/11 23:33
3F：→ zo6596001: 除了回圈还能怎麽做... 06/12 01:28
4F：→ zo6596001: 我是把要爬的网页做成一个list，然後for each 一个一个 06/12 01:29
5F：→ zo6596001: 慢慢抓。 06/12 01:29
6F：→ zo6596001: 另一个不是动态网页，则是直接改url的编号，一个一个抓 06/12 01:30
7F：→ zo6596001: 我写过2个爬虫，一个抓即时价格，一个载图图。 06/12 01:31
谢谢分享 用了一天终於跑完了 for回圈满快的!
8F：→ kobe8112: yield 06/12 08:43
※ 编辑: piyieen (42.72.123.55), 06/12/2018 17:14:18
9F：推 handsomeLin: 用while loop阿然後DFS or BFS爬 06/13 19:58