网页爬虫求助

jiulanrensan

刚刚接触爬虫，在网易云看的爬虫课程，也是按照课程的代码，运行却出错了，报错看得不是很懂，请教各位大神，谢谢

1. import requests
   
2. import json
   
3. res = requests.get ('http://comment5.news.sina.com.cn/page/info?version=1&format=js&channel=ty&newsid=comos-fymesii4872432&group=&compress=0&ie=utf-8&oe=utf-8&page=1&page_size=20')
   
4. 
   
5. 
   
6. jd = json.loads(res.text)
   
7. print (jd)

复制代码

hldh214

这个并不是标准的 json 格式, 而是 js 代码
简单点就取 `var data=` 之后的数据再 jsonDecode
稍微稳一点用正则吧

gopythoner

先用正则提取到json格式的代码，然后再转换