云储存海量数据的采集方法研究

摘要：

针对传统数据采集方法主要通过数据特征采集,忽略采集过程对数据特征造成的影响,导致数据采集耗时长、误差大的问题,提出基于REID技术与F统计计量结合的云储存海量数据采集方法.在分析数据采集原理的基础上,对云储存的原始数据进行非线性补偿,设置参数对数据进行预处理,建立一种能够对内存进行直接访问的硬件机制,给出部分传输程序;采用聚类算法对云储存数据进行聚类,结合F统计计量进行检验所建立的判别函数的有效性,实现对云储存海量数据的采集.实验结果表明,采用改进方法进行云储存数据采集时,其采集结果相比传统方法精度及完整度均有提高,具有一定的优势.

关键词：云储存、海量数据采集、REID技术、F统计计量、非线性补偿、聚类算法

所属期刊栏目：41

分类号：TN911-34;TP391

资助基金：2016年江苏省农业三新工程项目SXGC[2016]300;资助留学基金:2014年江苏省政府留学奖学金资助访问学者200

在线出版日期：2018-08-15（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：10-13