GWDG 借助 STORNEXT 为哥廷根大学和马克斯•普朗克学会的突破性研究提供支持
GWDG 使大学的科研人员和马克斯•普朗克学会的科学家们能够进行涵盖广泛课题的开创性研究 — 从基因组学到人文科学,研究使每年的存储需求近乎翻番。GWDG 的副主任 Philipp Wieder 博士指出:“以下一代基因排序为例,这项研究会产生海量数据。单单一个项目一个团队就需要存储 300TB 的数据。”
该中心还为市和大学图书馆提供支持 — 服务于哥廷根大学、下萨克森州以及哥廷根科学院。Wieder 表示:“图书馆在进行文本数字化并创建实物模型。所有此类数据必须被有效存储。”
由于用户数量超过 40000,GWDG IT 基础设施副主任 Stefan Teusch 坦言:“我们需要一个能够处理几十亿个文件和海量数据的文件系统。”
创建涵盖磁盘和磁带的 7PB 多层存储环境
GWDG 存储系统使用多个层级。Teusch 坦言:“我们现在通过 StorNext 将 2.5PB 的数据存储在磁盘上,将 4.5PB 的数据存储在磁带上。目标是可通过单一文件系统对数据进行访问。”磁带库的经济性可帮助中心满足将数据存储十年以上的需求。
十多年前,中心采用了 昆腾的 StorNext,并对这一系统逐步扩展。“根据我们的经验,StorNext 是唯一能够处理大量文件和数据同时提供高性能的平台。”Teusch 如是说。
可轻松支持科学家所使用的所有不同操作系统
StorNext 使中心能够支持所有用户的操作系统。Teusch 指出:“许多科学家,尤其是自然科学领域的科学家通常使用 UNIX 或 Linux,而其他用户则可能更倾向于使用 Windows 或 Mac OS。实际上,一些部门仅使用 Mac。利用 StorNext,我们可以轻松支持所有这些操作系统。用户能够访问所需的数据,无需对其工作流进行任何变更。”
借助基于以太网的高速共享存储,支持 HPC 处理
为了从 StorNext 环境提供对数据的 HPC 集群共享访问,IT 部门安装了 StorNext 分布式 LAN 客户端 (DLC) 和网关,以实现负载均衡和故障转移。Teusch 指出:“利用 StorNext DLC,无需将所有 HPC 节点与光纤通道相连。我们可以继续使用传统的以太网。HPC 用户需要每秒 2GB 的性能。借助 StorNext DLC,我们可实现每秒 3.2GB 的性能。研究人员可以快速地将大量数据移至 HPC 集群以进行处理并且进行长期存储。”
保留数据副本以供灾难恢复
为了保护数据,IT 部门使用 StorNext 策略来创建主数据的磁带副本。Teusch 指出:“如果硬件设备出现故障或者一个存储系统出现问题,我们仍然有 StorNext 磁带归档中的副本,可以快速恢复数据,使用户能够恢复正常工作。”
甚至随着多层存储环境的不断增长,管理 StorNext 仍然始终保持简便易行。无需招聘更多的人员或者从其他项目抽调现有人员,IT 部门即可不断进行扩展。
未来的云环境包含由 StorNext 环境组成的网络
展望未来,中心的 IT 部门正在考虑以新的方式来使用 StorNext,包括构建一个由涵盖德国的互连 StorNext 环境组成的网络。总之,GWDG IT 部门将 StorNext 视为能够满足中心规模、性能和可管理性需求的理想存储解决方案。
正如 Wieder 所言:“StorNext 能够满足我们的需求,即使在我们的工作流已经变为更加严苛的情况下,我们的环境在不断演化,我们的管理团队在不断变化,我们坚信 StorNext 将始终满足我们未来的需求。”