全部版块 我的主页
论坛 数据科学与人工智能 数据分析与数据科学 R语言论坛
9164 17
2015-11-18
以总理2015报告原文进行挖掘处理,进行简单的词云分析,完整代码,可运行。
一、准备工作

先将报告内容保存为TXT格式文本,停止词表可到网上搜索下载。
需要的包:rJava,Rwordseg,wordcloud。
library(rJava)
library(Rwordseg)
library(wordcloud)

二、实验步骤:
1、读入文本数据
mydata<-read.csv("D:/test/R/report2015.txt", stringsAsFactors=FALSE,header=FALSE)
2、中文分词
txt<-segmentCN(as.character(mydata$V1))
3、将列表转换为向量
txt.aslist<-unlist(txt)
4、词语统计
txt.freq<-table(txt.aslist)
5、频数排序
txt.result<-txt.freq[order(-txt.freq)]
6、画词云
wordcloud(names(txt.result),txt.result,random.order=FALSE)
7、取前100位画词云
wordcloud(names(text.result)[1:100],text.result[1:100],random.order=FALSE)

如果要去除停止词,可使用下面的步骤:

8、使用去停止词
(1)导入停止词表
stopword<-read.csv('D:/test/R/stop-word.txt',stringsAsFactors=FALSE,header=FALSE)
(2)将data.frame类型数据转换为向量型数据
stopword.v<-as.vector(stopword$V1)
(3)去除词语统计中的停止词
word.pure<-setdiff(names(txt.result),stopword.v)
word.pure为去除停止词的统计分析对象词表。

(4)取出非停止词
txt.pure<-txt.result[word.pure]

(5)画词云
wordcloud(names(txt.pure)[1:100],txt.pure[1:100],random.order=FALSE)




可以看出发展是核心,经济、改革、建设是重点。

欢迎各位指点。

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2015-11-19 00:51:36
顶帖
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2015-11-20 11:51:49
学习了,感谢!
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2015-11-20 12:34:54
不错
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2015-12-14 21:16:12
感谢楼主分享!
测试结果如下:
1.64位win8需要先安装64位Java, R使用3.2.3版本
2.手动安装Rwordseg包并增加RColorBrewer包
3.停止用词表找得不好,和,的这类词都没有剔除
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2016-2-17 13:27:48
原样学习了一次,有些许小误,我会更正。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群