周小华
- 作品数:14 被引量:3H指数:1
- 供职机构:中国科学院计算机网络信息中心更多>>
- 相关领域:自动化与计算机技术更多>>
- 一种小文件对象的存取方法和装置
- 本发明公开了一种小文件对象的存取方法和装置,其步骤为:1)将待存储的小文件对象以数据流的方式存储到数据对象存储库中,并将所述小文件对象的小文件对象标识信息写入元数据库和数据对象存储库的索引文件中;2)当客户端请求读取所述...
- 孟珍王学志周小华周园春
- 面向复杂栅格数据处理任务的集群算力自适应调度方法
- 本发明公开了一种面向复杂栅格数据处理任务的集群算力自适应调度方法,其步骤包括:1)将栅格数据分析步骤组件化,封装成独立运行的算子;2)按业务需要挑选算子组成有向无环图;3)在执行工作流时,根据算子依赖关系确定执行顺序,当...
- 张春阳周小华赵江华王学志
- 一种基于WEB的遥感影像多波段自由组合渲染方法
- 本发明公开了一种基于WEB的遥感影像多波段自由组合渲染方法。本方法为:1)服务器端根据遥感影像的属性信息生成一遥感数据标识及对应存储目录,然后将各波段灰度数据及其元数据存储到对应目录中;2)浏览器端根据用户选择的波段组合...
- 周小华王学志李芸林青慧周园春黎建辉
- 文献传递
- 一种基于WEB的遥感影像多波段自由组合渲染方法
- 本发明公开了一种基于WEB的遥感影像多波段自由组合渲染方法。本方法为:1)服务器端根据遥感影像的属性信息生成一遥感数据标识及对应存储目录,然后将各波段灰度数据及其元数据存储到对应目录中;2)浏览器端根据用户选择的波段组合...
- 周小华王学志李芸林青慧周园春黎建辉
- 轻量级遥感数据分布式调度框架DataboxMR被引量:3
- 2021年
- 【目的】目前,基于通用平台处理遥感数据,在提升处理效率的同时,也带来了执行轻量级任务效率低、用户使用门槛高、迁移代价大的问题。为降低用户处理轻量级任务的复杂度,降低基于通用平台处理带来的迁移代价,提高用户对任务调度端的控制力。【方法】本文提出了一个高效处理遥感数据的轻量级分布式调度框架(DataboxMR)。框架基于UDF(User-Defined Function)技术设计实现了遥感数据处理服务组件(Remote Sensing User-Defined Function,RS-UDF),RS-UDF支持用户已有程序封装、自定义函数封装和引用已有成熟处理技术,通过接口服务的形式实现同步调用和异步调用。此外,框架基于双层调度模式设计遥感数据调度引擎(DataboxMREngine),支持指定节点处理任务,支持任务划分和分发及故障恢复等功能。【结果】与基于内存计算的遥感数据处理工具GeoTrellis进行实验对比,结果表明,执行轻量级遥感数据处理任务时,DataboxMR效率更高,系统开销更小。【结论】DataboxMR是一个轻量高效的遥感数据分布式调度框架。
- 孟祥海王学志赵江华周小华
- 关键词:遥感数据
- 一种大规模序列数据的解析处理方法及装置
- 本发明公开了一种大规模序列数据的解析处理方法及装置。本方法为:1)遍历所有待解析处理的序列文件,将文件路径、大小、类型记录到主队列中;2)选取多个解析服务器并在每一所述解析服务器上部署一解析进程,用于向主队列发送解析请求...
- 周小华孟珍陈艳王学志周园春
- 一种LANDSAT影像数据的自适应格网剖分组织方法和装置
- 本发明涉及一种LANDSAT影像数据的自适应格网剖分组织方法和装置。该方法包括:1)根据LANDSAT遥感影像的分辨率确定全球等经纬度格网大小,并定义格网ID;2)根据一景LANDSAT影像的投影信息和边界范围,选择包含...
- 赵江华王学志周园春黎建辉周小华林青慧
- 文献传递
- 一种面向海量遥感影像的并行数据访问方法与系统
- 本发明公开了一种面向海量遥感影像的并行数据访问方法与系统,其存储方法为:1)用于采用设定网格体系对待处理的遥感影像进行切分,每一网格内的数据对应一数据块;2)收集过去一段时间内底层分布式对象存储系统Ceph的数据访问日志...
- 王学志赵江华周小华林青慧周园春
- 文献传递
- 一种LANDSAT影像数据的自适应格网剖分组织方法和装置
- 本发明涉及一种LANDSAT影像数据的自适应格网剖分组织方法和装置。该方法包括:1)根据LANDSAT遥感影像的分辨率确定全球等经纬度格网大小,并定义格网ID;2)根据一景LANDSAT影像的投影信息和边界范围,选择包含...
- 赵江华王学志周园春黎建辉周小华林青慧
- 一种面向遥感影像数据的高效缓存方法及系统
- 本发明公开了一种面向遥感影像数据的高效缓存方法及系统,其步骤为:1)各Data节点将收到的单个原始遥感影像数据文件从逻辑上分为多个固定大小的数据块,并将原始的遥感影像数据文件保存在存储系统中;各Data节点将申请的内存空...
- 王学志周小华林青慧孟珍周园春
- 文献传递