德克萨斯大学奥斯汀分校的关键研究数据归档

德克萨斯大学奥斯汀分校的德克萨斯高级计算中心(TACC)提供了强大的超级计算资源,使突破性研究成为可能。TACC需要用可靠的、可扩展的解决方案来替代老化的归档环境,以帮助实施严格的使用策略。

从天体物理学和生物医学到材料研究和地球科学,广泛学科的研究人员利用TACC的资源来回答世界上最复杂的问题。为了保存数据并能够长期访问这些数据,TACC为研究人员提供了一个名为Ranch的大规模归档环境。

TACC在归档环境中使用分层存储管理器(HSM)解决方案,但它的寿命即将结束。TACC大型系统高级系统管理员Frank Douma表示:“整个环境开始萎缩。“我们需要一个能够提供我们服务水平协议中承诺的数据可靠性和可恢复性的环境。”

杜玛还想改变人们使用档案的方式。研究人员使用的环境更像是近线存储,他们可以存储经常访问的文件和当前数据集。但它不是为此而设计的,”Douma说。“我们希望实施一些政策,确保研究人员将环境作为长期存档的场所,而不是将其作为抛掷任何类型数据的另一个地方。”

用量子建立一个新的档案

在评估了几个可能的存档解决方案后,TACC决定推进由StorNext®平台驱动的量子解决方案。Douma说:“我们认识到,Quantum可以提供我们长期需要的可靠性和可恢复性。

新设计的环境使用来自另一家供应商的30pb面向用户的磁盘存储,通过InfiniBand连接到6个Quantum Xcellis®工作流存储节点。四个节点用作分布式数据移动器(DDMs),这有助于在归档操作期间保持系统性能。然后将节点连接到Quantum Scalar®i6000磁带库。

TACC使用带有4.7 PB的Quantum QXS™混合磁盘环境来支持HSM。Douma说:“通过集成QXS解决方案,我可以继续支持遗留环境,直到每个人都从它迁移数据。

使用StorNext®强制用户配额

StorNext让Douma控制研究人员的存储分配。Douma说:“StorNext平台使我们能够执行防止研究人员使用近线存储等环境的政策。”“我们为目录设置了坚固的配额——每个研究人员获得2tb和100,000个文件。如果有人需要更多,他们可以要求项目空间环境。通过控制配额,我们可以确保优化档案的利用。”

使用工作流存储加速归档性能

Douma说:“性能并不是我们最优先考虑的,但Quantum解决方案提供了非常强大的磁盘到磁带的吞吐量。”使用DDMs的量子工作流存储提供了I/O的并行化。我们同时在多个背板上运行多个磁带驱动器,以获得比过去更高的性能。”

为不断增长的数据量规划规模

新环境的许可容量为50亿用户文件。但在未来,TACC计划扩大量子环境,以处理更多的研究数据。有了这种可伸缩性,TACC可以继续支持越来越多的研究人员,运行更复杂的工作负载来解决越来越复杂的问题。

超越灭火

量子环境使Douma能够专注于新的计划和未来的规划,而不是不断担心保持灯开着。杜马说:“有了量子,我不需要努力让事情运转起来。“相反,我可以专注于更好地支持前沿研究的方法。”