太阳城集团

  • / 7
  • 下载费用:30 金币  

一种基于HADOOP的大数据遥感卫星数据处理系统.pdf

摘要
申请专利号:

CN201510400968.8

申请日:

2015.07.09

公开号:

CN105045856A

公开日:

2015.11.11

当前法律状态:

授权

有效性:

有权

法律详情: 授权|||实质审查的生效IPC(主分类):G06F 17/30申请日:20150709|||公开
IPC分类号: G06F17/30 主分类号: G06F17/30
申请人: 中国资源卫星应用中心
发明人: 邵俊; 徐文; 喻文勇; 徐大琦; 冯春
地址: 100094北京市海淀区永丰产业基地丰贤东路5号
优先权:
专利代理机构: 中国航天科技专利中心11009 代理人: 范晓毅
PDF完整版下载: PDF下载
法律状态
申请(专利)号:

CN201510400968.8

授权太阳城集团号:

||||||

法律状态太阳城集团日:

2018.08.10|||2015.12.09|||2015.11.11

法律状态类型:

授权|||实质审查的生效|||公开

摘要

太阳城集团本发明提供了一种基于Hadoop的大数据遥感卫星数据处理系统,该系统包括数据获取子系统、Hadoop数据平台、计算处理子系统和应用子系统,其中,Hadoop数据平台包括分布式文件子系统、资源管理子系统、数据库和物理存储单元;该系统以数据在线化为基础,支持面向应用的分布式存储和处理,可以同时支持横向跨行业和纵向跨历史的数据分析。该系统具有灵活的可扩展性,支持未来新发射的遥感卫星地面系统的快速建设和在线接入。

权利要求书

1.一种基于Hadoop的大数据遥感卫星数据处理系统,其特征在于:包括
数据获取子系统、Hadoop数据平台、计算处理子系统和应用子系统,所述
Hadoop数据平台包括分布式文件子系统、资源管理子系统、数据库和物理存
储单元,其中:
数据获取子系统:接收外部采集系统发送的源数据,对所述源数据进行解
压缩或格式转换,然后将数据发送到Hadoop数据平台的分布式文件子系统;
分布式文件子系统:接收数据获取子系统发送的数据,以及计算处理子系
统发送的数据处理结果,将所述数据和数据处理结果按照分布式存储策略存储
在物理存储单元中,并将所述存储数据和数据处理结果的元太阳城集团存储在数据库
中;
资源管理子系统:接收应用子系统发送的指令,对所述指令进行解析,按
照指令解析结果从数据库中读取相应数据的元太阳城集团,然后将指令解析结果和数
据元太阳城集团发送到计算处理子系统;
计算处理子系统:接收资源管理子系统发送的数据元太阳城集团和指令解析结果,
根据所述数据元太阳城集团在Hadoop数据平台的物理存储单元中读取相应数据,然
后按照所述指令解析结果对数据进行相应处理,并将数据处理结果发送到分布
式文件子系统进行存储;
应用子系统:发送指令到资源管理子系统,并通过分布式文件子系统读取
数据处理结果进行显示。
2.根据权利要求1所述的一种基于Hadoop的大数据遥感卫星数据处理
系统,其特征在于:Hadoop数据平台的存储物理单元为在线盘阵。
3.根据权利要求1所述的一种基于Hadoop的大数据遥感卫星数据处理
系统,其特征在于:计算处理子系统包括多个分布式物理计算单元,并且所述
分布式物理计算单元和资源管理子系统通过光纤网络实现互连。
4.根据权利要求3所述的一种基于Hadoop的大数据遥感卫星数据处理
系统,其特征在于:资源管理子系统包括MapReduce计算框架,所述计算框
架实现数据划分、计算调度和数据归约整合控制,具体控制实现方法如下:
(1)、MapReduce计算框架根据指令解析结果对数据处理任务进行划分,
按照任务划分结果将各分任务对应的数据元太阳城集团和指令分发到计算处理子系统
的各分布式物理计算单元;
(2)、各分布式物理计算单元根据接收到的数据元太阳城集团读取相应数据,并
按照接收到的指令进行数据处理;
(3)、MapReduce计算框架根据步骤(1)的任务划分结果,对各分布式
物理计算单元的数据处理结果进行归约整合,即各分布式物理计算单元按照
MapReduce计算框架给出的归约整合指令将数据处理结果发送到分布式文件
子系统进行存储。
5.根据权利要求3所述的一种基于Hadoop的大数据遥感卫星数据处理
系统,其特征在于:应用子系统包括多个应用服务器,所述应用服务器通过如
下方法实现数据查询和下载处理:
应用服务器接收外部输入的数据查询或下载命令,对所述命令进行解析后,
按照命令解析结果在Hadoop数据平台的数据库中查找数据元太阳城集团,然后按照
所述数据元太阳城集团从物理存储单元中读取数据,并在用户计算机上对所述数据进
行显示或下载。

关 键 词:
一种 基于 HADOOP 数据 遥感 卫星 数据处理系统
  专利查询网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
太阳城集团本文
本文标题:一种基于HADOOP的大数据遥感卫星数据处理系统.pdf
链接地址:http://zh228.com/p-6401559.html
太阳城集团我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服客服 - 联系我们

copyright@ 2017-2018 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备17046363号-1 
 


收起
展开
葡京赌场|welcome document.write ('');