CReSIS用StorNext测量海平面变化的影响

由堪萨斯大学的团队领导,遥感冰床(批量)的中心使用雷达对格陵兰和南极洲的冰盖进行图像和轨道变化。粉碎需要一个新的解决方案来存储日益增长的数据量。

用雷达看透冰层

CReSIS于2005年由美国国家科学基金会(National Science Foundation)颁发奖项,帮助精确测量地球冰盖的变化。研究人员使用通常安装在飞机腹部的先进雷达。CReSIS的IT工程师Riley Epperson说:“通过绘制格陵兰岛和南极洲冰川的层、床和顶部,科学家可以评估气候变化对冰的当前影响,并预测其未来的影响。”

每次任务收集高达150TB的科学数据

每次任务收集的数据量随时间急剧增加。“在2005年,研究人员可能在每次任务中收集了100GB的数据,”Epperson说。“但从那以后的几年里,我们的工程师一直在继续增强雷达系统的能力。现在的系统可以提供更高的冰层分辨率。因此,研究人员现在每次任务带回的电量接近150TB。”

随着在该领域收集的原始数据量的增加,工作流程可能会变慢。“研究人员收集的数据越多,我们花在消化、验证和清理这些数据上的时间就越多,”Epperson说。“我们需要一个能帮助我们提高工作流程效率的解决方案。”

在寻找尺度的高性能存储平台

CReSIS IT集团决定改变用于存储和管理研究数据的文件系统。“我们需要一种新的方法来处理不断增长的庞大数据量,同时允许我们继续使用现有的存储空间,”Epperson说。

IT部门还想要一个有助于提高吞吐量的文件系统。“合作者和合作伙伴需要分析和处理我们摄亚博棋牌正网入的数据,这样他们才能生成研究所需的产品,”Epperson说。“与NASA等合作伙伴亚博棋牌正网合作,我们有望在特定的时间框架内扭转数据。”

需要一个更具成本效益的解决方案

CReSIS IT组需要支持多层环境的数据管理能力。“我们每年只吸收原始数据两到三次,然后它就消失了——大约80%的数据是冷的,”Epperson说。“我们希望找到一种解决方案,使我们能够轻松地将冷数据转移到磁带上,然后再检索它。”

使用StorDext构建更灵活,大型的存储环境

在评估了各种新的文件系统和数据管理解决方案后,CReSIS团队选择了xinyabo体育 平台。该解决方案由StorNext数据管理软件支持,包括一个高性能的共享文件系统和策略驱动的分层软件。

选择StorNext平台使CReSIS团队能够继续使用一个老化的主磁盘,同时添加磁带归档层。“有了StorNext平台,我们现在有一个单一的文件系统来管理我们的整个多层存储解决方案,从磁带到主磁盘到高性能计算集群,”Epperson说。

加速摄取和支持气候研究的HPC工作流程

StorNext消除了团队以前的文件系统施加的池大小限制。批量现在在单个文件系统上有600个磁盘而不是过去仅为100个。结果是优越的性能。

“与以前的环境相比,我们的存储性能超过了三倍以上,”Epperson说。“StorNext帮助我们在继续满足我们现有的截止日期时更快地摄取和进程增加数据集合。”

高速存储有助于加快整体工作流程。“我们可以将数据移动到我们的HPC集群中进行处理,以进行处理,我们可以将其提供给研究人员,”Epperson说。

通过多层存储解决方案控制成本

迁移到StorNext平台使CReSIS能够扩展其存储环境,同时通过使用经济的磁带归档来控制成本。节省下来的成本增加得很快。“StorNext提供了强大的投资回报,”爱普森说。

StorNext还提供了满足存储要求不可预测的更改的灵活性。“我们从一年到年份没有一致的数据增长率,”埃普尔森说。“每次工程师都创建一个新的雷达系统,我们可能需要将五次存储五次,每个任务都有多种数据。使用StorDext,我们可以快速扩展以满足这些要求。“