以支撑搜索服务为主的网络操作系统研制

摘要：

随着信息技术和互联网的发展，搜索引擎作为支撑互联网服务的一个重要的基础设施，其显著的特点就是超大规模，主要体现在数据存储与数据处理两个方面。该课题以网络操作系统新型体系结构为目标，突破大规模分布式数据共享与管理、高效资源调度、虚拟资源管理、大规模分布式系统运维等关键技术，提出了高性能存储引擎与存储系统设计、MapReduce环境中基于虚拟分区的负载平衡策略、异构Hadoop集群环境中性能驱动的数据平衡方法、云计算资源计量方法、分布式计算引擎设计、数据密集型计算系统设计、基于历史信息比例因子动态调整的作业完成时间预测算法、空闲节点评估调度算法、MapReduce作业输入负载均衡策略、应用远程虚拟运营与应用开放平台设计、超大规模数据中心多层次网络互联设计、大规模机群系统监控管理技术、大规模机群系统软件远程部署技术、低功耗高密度服务器和机柜设计技术，以及机器与机群管理系统等多项技术成果。利用百度强大的互联网服务作为支撑，基于超大规模的云计算数据中心，设计并实现具有自主知识产权的新一代网络操作系统。该系统将以支持搜索业务为核心，以数据中心的集群平台为服务支撑，为搜索引擎服务提供超大规模数据存储和数据处理能力，同时为基于搜索的开放应用服务提供运营支撑。

关键词：网络操作系统、搜索服务、数据存储引擎、资源调度、系统监控、Hadoop、MapReduce

分类号：TP3;TN

在线出版日期：2016-07-08（万方平台首次上网日期，不代表论文的发表时间）

页数：共1页

页码：161-161