[已解决]Python爬虫出现编码错误

py大神

第一次使用的是utf-8编码，结果出现错误











用notepad++打开，发现是GB2312编码，于是使用GB2312解码，还是出错了。
怎么解决？













而且这里为什么会出现jso解析失败？
百度了网上的方法，试过了，不行

最佳答案

月排行榜 / 总排行榜

sky

2018-1-17 11:40:49

建议深入了解python3编码
这里用gbk就可以了 因为 html代码里是gbk
html也得会
最后一个json.loads是解析json字符串的
但是你传给他的是html代码字符串当然解析不了啦

跳转到最佳答案楼层

sky

建议深入了解python3编码
这里用gbk就可以了 因为 html代码里是gbk
html也得会
最后一个json.loads是解析json字符串的
但是你传给他的是html代码字符串当然解析不了啦

sunlight070

我看了一下你要爬取的页面，编码方式是用GBK方式编码的，程序解码方式改为decode("GBK")应该就可以了

sunlight070

以下测试代码亲测可行

1. import urllib.request
   
2. url = 'http://www.31xs.org/12/12970/'
   
3. responce = urllib.request.urlopen(url)
   
4. html = responce.read().decode("GBK")
   
5. print(html)
   

复制代码

py大神

sunlight070 发表于 2018-1-17 11:52
以下测试代码亲测可行

好的，感谢老哥

py大神

sky 发表于 2018-1-17 11:40
建议深入了解python3编码
这里用gbk就可以了 因为 html代码里是gbk
html也得会

有什么资料推荐么？
还有这个问题：

1.     req = urllib.request.Request(url,headers=headers)
   
2.     response = urllib.request.urlopen(req)
   
3.     html = response.read().decode("GBK")
   
4.     jsonstr = json.dumps(html)

复制代码

这段代码如果打印html是可以正确显示的，但是如果经过json解析后，就变成了乱码？

sky

py大神 发表于 2018-1-17 14:21
有什么资料推荐么？
还有这个问题：

因为json只能解析 json格式的字符串呀 html代码字符串是解析不了的
编码 能看多少看多少 慢慢理解
http://www.cnblogs.com/luotianshuai/articles/5735051.html

py大神

sky 发表于 2018-1-17 14:26
因为json只能解析 json格式的字符串呀 html代码字符串是解析不了的
编码 能看多少看多少 慢慢 ...

好的，谢谢老哥