QQ登录

只需一步,快速开始

登录 | 立即注册 | 找回密码
楼主: jerryxjr1220

[技术交流] 【python爬虫应用】爬京东上的小米5的2600多条差评数据之词频分析

  [复制链接]
最佳答案
0 

尚未签到

imwaco 发表于 2017-6-5 15:25:56 | 显示全部楼层
哪个库做的词频分析呢?
最佳答案
0 

尚未签到

fundy 发表于 2017-6-5 16:11:27 | 显示全部楼层
看看大神的杰作
最佳答案
0 
累计签到:2 天
连续签到:1 天
lalalabu 发表于 2017-6-5 20:54:24 | 显示全部楼层
# -*- coding: cp936 -*-

因为返回的不是中文
改了一下,加一个import json
#! /usr/bin/env python
# encoding:utf-8

import json

import codecs as cs
import jieba as jb                         #jieba是python上非常不错的中文分词插件,有多种模式可以选择
f = cs.open("bad.txt","r")
lines = f.readlines()
f.close()
data = []
dic ={}
for each in lines:
        bad = jb.cut_for_search(each)
        data.append(bad)

for eachline in data:
        for eachword in eachline:
                if eachword in dic:
                        dic[eachword] += 1
                else:
                        dic[eachword] = 1
sorteddic = sorted(dic.items(),key=lambda x:x[1],reverse=True)
for i in range(200):                        #显示了前100项,但是很多都是无用的助词或者标点符号,我在excel里手动删了,还是很方便的。
        
print json.dumps(sorteddic[i],encoding='UTF-8',ensure_ascii=False)
最佳答案
0 

尚未签到

Puff 发表于 2017-6-8 17:54:00 | 显示全部楼层
正好在做相关的分析,过来参考下
最佳答案
0 

尚未签到

leoleom 发表于 2017-6-8 18:13:54 | 显示全部楼层
顶顶顶顶
最佳答案
0 
累计签到:17 天
连续签到:1 天
花寺情僧 发表于 2017-6-9 18:38:18 From FishC Mobile | 显示全部楼层
学习一下
最佳答案
0 
累计签到:2 天
连续签到:1 天
cvn 发表于 2017-6-10 19:13:57 | 显示全部楼层
看看
最佳答案
0 
累计签到:3 天
连续签到:2 天
军不败 发表于 2017-6-10 23:07:16 | 显示全部楼层
犀利 1024
最佳答案
0 

尚未签到

xtg1148 发表于 2017-7-2 11:39:38 | 显示全部楼层
1111111111
最佳答案
0 

尚未签到

djangson 发表于 2017-7-27 17:06:13 | 显示全部楼层
看看看看那看看卡
最佳答案
0 

尚未签到

曾经子曰 发表于 2017-9-13 15:01:12 | 显示全部楼层
看看如何分析词频
最佳答案
0 

尚未签到

hefu77 发表于 2017-9-13 22:09:34 | 显示全部楼层
哈哈哈
最佳答案
0 
累计签到:3 天
连续签到:2 天
zqm176 发表于 2017-9-13 23:15:54 | 显示全部楼层
1
最佳答案
0 

尚未签到

阳pipi 发表于 2017-9-14 07:24:29 From FishC Mobile | 显示全部楼层
666
最佳答案
0 
累计签到:9 天
连续签到:1 天
chvanhui 发表于 2017-9-26 16:44:07 | 显示全部楼层
参观学习一下
最佳答案
5 
累计签到:37 天
连续签到:1 天
文明的读书人 发表于 2017-9-26 17:16:47 | 显示全部楼层
00
最佳答案
0 

尚未签到

白色球鞋 发表于 2017-9-26 21:33:39 | 显示全部楼层
膜拜
最佳答案
0 

尚未签到

Danndee 发表于 2017-10-2 21:54:51 | 显示全部楼层
瞄一下,
最佳答案
0 

尚未签到

fily029 发表于 2017-10-3 23:18:34 | 显示全部楼层
看看代码
最佳答案
0 
累计签到:40 天
连续签到:1 天
Dout 发表于 2017-10-4 10:55:25 | 显示全部楼层
学习学习

发表回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

小甲鱼强烈推荐 上一条 /2 下一条

    移动客户端下载(未启用)
    微信公众号

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备11014136号

Copyright 2018 鱼C论坛 版权所有 All Rights Reserved.

Powered by Discuz! X3.1 Copyright
© 2001-2018 Comsenz Inc.    All Rights Reserved.

小黑屋|手机版|Archiver|鱼C工作室 ( 粤公网安备 44051102000370号 | 粤ICP备11014136号

GMT+8, 2018-1-18 05:53

快速回复 返回顶部 返回列表