期刊专题

一种断点续传的多线程新闻组抓取方法及存储结构

引用
针对新闻组的海量性及相关编码特点设计新闻帖抓取流程,采用多线程方式加快新闻帖的抓取及解析速度,同时设计一种便于海量数据断点续传的数据存储结构,通过实验采集验证该方法能有效达到信息检测的数据采集要求,抓取及解析新闻帖的速度比普通单线程抓取解析方式有显著提高.

新闻组、多线程、海量数据、网络新闻传输协议

TP393(计算技术、计算机技术)

国家十一五科技支撑计划子课题2006BAH03B05

2011-06-10(万方平台首次上网日期,不代表论文的发表时间)

29-33

相关文献
评论
暂无封面信息
查看本期封面目录

现代图书情报技术

1003-3513

11-2856/G2

2011,(2)

相关作者
相关机构

专业内容知识聚合服务平台

国家重点研发计划“现代服务业共性关键技术研发及应用示范”重点专项“4.8专业内容知识聚合服务技术研发与创新服务示范”

国家重点研发计划资助 课题编号:2019YFB1406304
National Key R&D Program of China Grant No. 2019YFB1406304

©天津万方数据有限公司 津ICP备20003920号-1

信息网络传播视听节目许可证 许可证号:0108284

网络出版服务许可证:(总)网出证(京)字096号

违法和不良信息举报电话:4000115888    举报邮箱:problem@wanfangdata.com.cn

举报专区:https://www.12377.cn/

客服邮箱:op@wanfangdata.com.cn