面向多星多任务的大数据处理系统设计

V557; 随着我国发射的空间科学卫星越来越多,科学数据量爆发式增长,空间科学卫星大数据处理逐渐成为空间科学创新发展过程中被重点关注的环节,建设一套高性能的地面数据处理系统是建设我国自主可控的空间科学大数据生态、助力科学成果产出的重要推手.面向多星多任务并行处理的任务需求,针对空间科学卫星大数据处理中的多分级分类、多源产品融合组织以及高时效性要求等特点,提出了适用于大数据处理业务场景的高可靠硬件环境设计方案,并针对科学卫星处理任务类型多的特点,提出了基于任务类型感知的统一资源调度系统.完成了面向多星多任务的可扩展地面大数据处理系统的研制,支撑了中国科学院空间科学先导专项中的科学卫星数据处理任务...

Full description

Saved in:
Bibliographic Details
Published in大数据 Vol. 7; no. 5; pp. 1 - 16
Main Authors 马福利, 石涛, 陈玲, 郑岩, 熊森林
Format Journal Article
LanguageChinese
Published 中国科学院国家空间科学中心,北京 100190%中国科学院空天信息创新研究院,北京 100094 2021
Subjects
科学卫星;大数据;可扩展;地面处理系统
Online AccessGet full text

Cover

More Information
Summary:V557; 随着我国发射的空间科学卫星越来越多,科学数据量爆发式增长,空间科学卫星大数据处理逐渐成为空间科学创新发展过程中被重点关注的环节,建设一套高性能的地面数据处理系统是建设我国自主可控的空间科学大数据生态、助力科学成果产出的重要推手.面向多星多任务并行处理的任务需求,针对空间科学卫星大数据处理中的多分级分类、多源产品融合组织以及高时效性要求等特点,提出了适用于大数据处理业务场景的高可靠硬件环境设计方案,并针对科学卫星处理任务类型多的特点,提出了基于任务类型感知的统一资源调度系统.完成了面向多星多任务的可扩展地面大数据处理系统的研制,支撑了中国科学院空间科学先导专项中的科学卫星数据处理任务.
ISSN:2096-0271
DOI:10.11959/j.issn.2096-0271.2021045