IBM近日宣布,中国石油集团东方地球物理勘探有限责任公司采用IBM GPFS并行文件系统和FlashSystem全闪存阵列组成的软件定义存储解决方案,为地震数据分析提供了大容量、快速、稳定的存储支撑,在大幅提升元数据查询速度的同时,还提高了地震数据处理和分析的效率,让石油勘探工作变得更高效。
中国石油集团东方地球物理勘探有限责任公司是中国石油旗下、中国最大的专门从事地球物理勘探的专业化工程技术服务公司,中国石油集团东方地球物理勘探有限责任公司研究院主要负责石油的勘探与开发,其工作涉及大量地震数据的采集、分析和检索。众所周知,地震数据是典型的大数据,中国石油东方地球物理公司地震解释系统高性能计算项目的数据总量达到PB级,同时对文件系统的并行处理速度要求极高。
中国石油集团东方地球物理勘探有限责任公司每年都要为其地震解释系统高性能计算项目进行新的存储采购。从2011年开始到现在,IBM公司已经连续三年中标此项目,为中国石油东方地球物理公司提供定制化、优化的高效存储系统。
2013年底,在中国石油集团东方地球物理勘探有限责任公司最近的一次存储系统采购中,IBM的软件定义存储系统因其出色的性能、灵活的可扩展性、运行的稳定性和高性价比再次中标。实际测试显示,由IBM GPFS并行文件系统与FlashSystem全闪存阵列组成的软件定义存储解决方案的数据吞吐性能达到20GB/s,完全可以满足中国石油集团东方地球物理勘探有限责任公司对高速数据处理的需求。
IBM软件定义存储解决方案实际上是一套可横向扩展的文件存储系统,包括软件和硬件两部分:软件就是IBM GPFS并行文件系统,存储硬件系统主要由大容量、低成本的IBM DCS3700存储阵列与IBM FlasySystem 810闪存阵列组成。中国石油东方地球物理公司目前部署了两套IBM软件定义存储系统,总存储容量达到1.4PB。单套系统包括集群NAS机头(配置16 台IBM X3650 M4)、加速模块(配置2台IBM Flashsystem 810+2台3650 M4)和存储柜(8台IBM DCS3700磁盘阵列)三部分。
为提升存储访问体验,中国石油集团东方地球物理勘探有限责任公司将元数据与生产数据分离,元数据存储在高性能的IBM Flashsystem 810上,海量的生产数据则存储在大容量、低成本的IBM DCS3700磁盘阵列上,这样一来可以将元数据的查询速度提升上千倍。经测试,将元数据集中式存放在高速闪存阵上,顺序读性能提升了1495倍 。以1.4PB的数据处理总量计算,其中元数据大约为3TB-4TB,而单台IBM Flashsystem 810的可用容量是6TB,不仅可以满足当前的元数据存储需求,而且预留了足够的扩展空间。中国石油集团东方地球物理勘探有限责任公司共部署了两套IBM Flashsystem 810,通过IBM GPFS的镜像复制功能实现了系统冗余,进一步提高了数据处理的可靠性。
“海量数据的持续增长给地震数据的采集、存储和分析带来了极大压力。除了容量以外,我们还需要存储具有更好的弹性和智慧。”中国石油集团东方地球物理勘探有限责任公司研究院副总工程师赖能和表示:“IBM 软件定义存储解决方案是一套具有海量存储能力、高吞吐量和更低成本的解决方案,完全可以满足我们对高带宽、高吞吐量的要求。此外,我们将元数据与生产数据分离,元数据集中存放在IBM FlasySystem 810全闪存阵列上,在提升元数据查询速度的同时也使得整个数据分析更加完整和精确。”
采用IBM软件定义存储解决方案,无论是并发存储访问、数据的分层,还是数据在不同层级间的迁移全部都是以软件为核心实现的,其独特的优势表现在以下三个方面:第一,系统的伸缩性好,可实现模块化的灵活扩展,存储容量能够随着用户的需求从几十TB扩展到PB级;第二,实现灵活的配置和功能的调整,可以针对客户的具体需求进行调整和优化;第三,架构灵活,系统的所有组件都是松耦合的关系,交换模块、存储模块等不同模块可以自由组合,不受限制,比如存储模块既可以是大容量、低成本的磁盘阵列,也可以是高性能的固态硬盘(SSD)。
相关统计数据显示,目前IBM位居全球闪存发货量的首位。在中国,IBM Flashsystem的应用前景也十分广阔。IBM表示:IBM 软件定义存储解决方案已经广泛应用于多个行业。IBM Flashsystem 810帮助中国石油集团东方地球物理勘探有限责任公司有效地实现了元数据与生产数据的分离,不仅提升了元数据检索的效率,而且保证了数据的可靠性和安全性,可谓一举多得。
声明: 此文观点不代表本站立场;转载须要保留原文链接;版权疑问请联系我们。