作者jamesxxx1997 (黄~)
看板Python
标题[问题] 想请教学网路爬虫前的预备知识有哪一些?
时间Sat Oct 7 00:23:47 2017
各位大大好,新手想在此请教一下,若想学习网路爬虫,有哪些先备知识要先会呢?
也想知道,应该学多深
(像是我知道好像要先学HTML和CSS,不过不清楚应该学到哪个程度,javascript亦然)
谢谢各位大大~
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 111.83.22.152
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1507307029.A.F35.html
1F:推 neil987: 学会看youtube跟google查东西 10/07 12:04
2F:→ lizkarina: 首先网路连线要懂一点,tcp/ip, udp. 怎麽用socket. 10/07 13:10
3F:→ lizkarina: tls/ssl. http protocol(get,post...)/headers/cookies 10/07 13:13
4F:→ lizkarina: http status code. https(http over tls). 如果要取的 10/07 13:14
5F:→ lizkarina: 资料用javascript生成,你就需要web driver. 10/07 13:15
6F:→ lizkarina: #webdriver. 再来看你取的资料是html,json,图片,影像 10/07 13:17
7F:→ lizkarina: 或是音乐,再学相对应的知识。 10/07 13:18
8F:→ jamesxxx1997: 谢谢neil大的解答,收获良多~ 10/07 18:09
9F:→ jamesxxx1997: 好的,谢谢l大,你的意思是说其实这是一个很广泛 10/07 18:09
10F:→ jamesxxx1997: 的东西对吧,那我就先照你说的,学西一些网路连线 10/07 18:10
11F:→ jamesxxx1997: 的概念,感谢~ 10/07 18:11
12F:推 sean50301: 稍微了解一下css跟xpath就可以爬简单的网页了 10/07 18:35
13F:推 areyo: 大数学堂 10/07 19:16
15F:→ f496328mm: 学爬虫 推荐这串影片 讲得蛮好的 10/08 06:38
16F:→ goldflower: 大数学堂无敌 真的 10/08 16:07
17F:→ goldflower: 应该不会看到比这边还详细的影片了 10/08 16:08
18F:推 vi000246: 正规表达式也可以学一下 会方便很多 10/08 16:24
19F:推 f496328mm: 正规可以说是必备 10/09 00:34
20F:→ jamesxxx1997: 恩恩,现在正在学正规表达式(re模组) 10/09 13:17
21F:→ jamesxxx1997: 谢谢各位的指导XDD 10/09 13:17
22F:推 mantour: 先找一个你想爬的网站,然後用到什麽学什麽 10/20 20:27
23F:→ jamesxxx1997: 想要爬CDC网站的图片及文章 11/14 16:14