作者timTan (用口头禅区分年记)
看板Python
标题Re: [问题] Python urllib.urlopen 抓取有繁体网页
时间Mon Jul 29 23:15:15 2013
※ 引述《bohan222 (哈哈哈)》之铭言:
: 请教大家
: Python 2.7.3 有使用下面utf-8的宣告
宣告是说你的程式码是 utf8. 跟你要抓的东西无关。
: #!/usr/bin/python
: # -*- coding: utf-8 -*-
: 问题:
: 使用 web = urllib.urlopen(内容具有繁体中文的网站)
: content = web.read()
接下来的 content 只是一些无意义的 binary,
一定要解码,不解码,不能看。
而解码的方式,推文已有。
编码有学问
这篇 Joe 的文章一定要看过
http://bit.ly/14txdCm
: 想分析网页内容为繁体的部分,结果繁体部分会变成乱码,
: 似乎是ascii之类的编码问题
: 想请教有人有遇过这类型问题吗~谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 123.192.234.137
※ 编辑: timTan 来自: 123.192.234.137 (07/29 23:15)
1F:→ bohan222:来研究一下这篇文章~~谢谢~ 07/29 23:16
2F:推 lc85301:用了linux发现副档名不重要 07/29 23:44
3F:→ lc85301:看了Joe发现文件编码是你订的lol 07/29 23:45
4F:→ timTan:这就是重点,你不指定编码,就是要炸! 07/30 00:25
5F:推 WaiTingKuo:其是实是Joel XD stackoverflow的老板 07/30 00:36
6F:推 os653:对编解码不熟还是先用Python3比较好,至少出错相对明显 07/30 09:13
7F:→ timTan:上面提醒得真好 ~ Python 3 强迫你要弄懂编码~ 07/30 09:48
8F:→ timTan:我也是用 Python3 以後才比较掌握编码~ 07/30 09:49