基于大数据技术的网络舆情文本挖掘研究

摘要：

通过分析大数据与网络舆情数据的相似特征，基于大数据思想构建网络舆情的文本挖掘模块，并在此基础上构建预警模型，对关系型数据库与分布式数据库进行了融合，使之适应模型从数据采集到分析查询的全部流程；并对大数据核心技术MapReduce进行扩展，改进的MapReduce贯穿于数据处理模块的文本特征向量提取与舆情指数的矩阵-向量乘积运算。通过仿真实验，证明该模型具有一定的准确性与良好的时效性。

关键词：大数据、MapReduce、分布式数据库、网络舆情、舆情指数

分类号：TP391(计算技术、计算机技术)

资助基金：国家社会科学基金资助项目“我国电子政务系统外包开发模式风险控制研究”10BGL097;江苏省普通高校研究生科研创新计划项目“大数据环境下融合情感分析的目标在线评论挖掘研究”KYzz 0287。

在线出版日期：2014-11-18（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：1-6,13