鑫云助力国测星绘实现海量卫星遥感数据高效存储、快速处理

2023-08-30 08:38



地理信息、卫星遥感数据是重要的

不可再生的信息资源

如果发生丢失

将会带来重大损失


受害监测和预警受阻

卫星遥感数据对于灾害监测和预警至关重要。例如,卫星可以用于检测火灾、洪水、地震等自然灾害,并提供实时信息以便采取及时的救援措施。如果卫星遥感数据丢失,我们将失去这一重要的监测和预警手段,从而使得对灾害的应对能力下降。

02

科学研究受阻

卫星遥感数据对于科学研究具有不可替代的价值。科学家和研究人员利用这些数据来研究气候变化、地球科学、生态学等领域。如果卫星遥感数据丢失,将会影响科学研究的进展,阻碍对自然界和地球的深入理解。


环境监测和资源管理困难

卫星遥感数据有助于监测环境变化和资源利用情况,如森林覆盖率、土地利用、水资源状况等环境指标,并为环境保护和可持续发展提供支持。数据丢失可能导致对环境状况的监测和资源管理的缺失,从而难以有效进行环境保护和资源规划。

04

地图制作和导航不准确

卫星遥感数据是绘制地图和进行导航的重要数据来源。通过卫星图像,我们可以准确地识别和标记地理特征、道路网络、地标等。如果卫星遥感数据丢失,地图和导航系统可能变得不准确,给导航和定位带来一定困扰。


北京国测星绘信息技术有限公司是自然资源部国土卫星遥感应用中心的全资公司,作为中心的成果转化和应用推广基地,公司以卫星数据的处理、服务与应用为基础,在海量卫星数据即时更新、高精度正射影像及高程产品生产、遥感信息提取及遥感监测等领域具有雄厚的技术优势。

此次国测星绘选择鑫云地理信息、卫星遥感

数据存储解决方案

应对海量卫星数据存储压力

以及图像高效处理问题


1

高读写带宽要求

High read and write bandwidth requirements

卫星遥感的原始数据主要为巨大的非结构化的文件数据,这些原始数据的存储、处理需要基于文件系统的非结构化存储系统作为支撑。


鑫云图像存储基于强大的针对图像领域专门优化的文件系统,拥有强大的并发读写带宽性能,可以支撑海量此类数据快速写入、读取,大幅节省时间,提高效率。


鑫云SS-260P 60盘位光纤图像存储,单台设备读带宽高达8000MB/s,写带宽高达3400MB/s,完全满足图像数据存储、数据处理高传输的需求。




2

大容量、高安全要求

Large capacity and high safety requirements

卫星遥感原始数据量巨大,而取得这些数据的成本和代价高昂,因此对存储系统的容量、安全性、稳定性都提出了极高的要求。


鑫云图像存储单机最大可达到PB级的容量,而分布式存储则可以支持数十PB的容量空间。在安全性上,鑫云图像存储拥有多副本、纠删码、RAID等多种数据保护机制,支持RAID0、1、10、5、6,其中RAID6容许两块磁盘同时故障而不影响数据的存取。

当一块磁盘出现故障,预先配置的热备盘将会自动重建原始RAID配置;热插拔式设计可以在不影响系统工作运行的基础上,进行磁盘替换操作;即使在RAID严重损坏意外灾难发生后,磁盘克隆技术也能将数据恢复到最后正常状态,从而最大程度保障数据安全。


3

扩展性要求

Extensibility requirements

卫星遥感数据的增长是持续的,因此面对未来可能出现的爆发式增长,需要存储拥有扩展性能。

鑫云图像存储支持横纵向扩展,在单机扩容方式上考虑到用户需要灵活扩展的规划存储空间,系统可支持跨RAID建卷、在线扩容。在单机设备已经完全满配的情况下,SS200P还可以通过JBOD扩展柜和CLUSTER 两种方式进行容量的扩展。对于JBOD扩展柜方式来说,可以外挂扩展柜实现经济扩容;对于CLUSTER来说,理论上可以无限扩展,至少可提供高于10PB的存储容量,每台鑫云图像存储拥有独立IP,分担存储压力。

鑫云图像存储可以平滑升级到鑫云Singcloud分布式集群存储,在该系统下每个存储节点的性能可以利用分布式文件系统进行有效叠加,性能和容量同步增加。


4

图像高效处理、协同作战

Efficient collaborative processing of images

国测星绘有着成千上万的卫星数据,使用ERDAS IMAGINE遥感图像处理系统软件进行图形图像处理操作,在进行图像制作时由于存储设备的问题,素材经常会出现丢帧的情况,对图像处理结束或二次修改后不能保存回存储上,需要存到本地,这占据了本地极大的空间。


这次国测星绘选择鑫云SS-260P图形图像中央共享存储,可以实现各类数据集中存储与汇总,允许数据、文档或项目存储在一个中央位置,而不是各自保存在不同用户的本地设备上,这样可以确保所有用户都能够访问最新版本的文件,避免因文件分散在不同设备中而导致数据丢失或版本混乱的问题。


中央协同制作存储允许多个用户同时对同一个文件进行编辑和修改,用户可以实时看到其他用户的修改并进行即时反馈,这种实时协同编辑的功能提高了团队之间的沟通效率,减少了不必要的文件传递和合并操作。


本文为作者 鑫云 分享,影视工业网鼓励从业者分享原创内容,影视工业网不会对原创文章作任何编辑!如作者有特别标注,请按作者说明转载,如无说明,则转载此文章须经得作者同意,并请附上出处(影视工业网)及本页链接。原文链接 https://cinehello.com/stream/149915
鑫云是国内少数专注于视音频、图像存储领域的专业型磁盘阵列制造商,我们致力于为您提供足以改变生产方式、提高工作效率的专业级存储产品。