波兰石油公司部署Panasas并行存储集群的成功案例

 

概要

    行业:石油和天然气

挑战:提供一种存储解决方案,即要能够满足不断增长的计算工作量对存储的需求又要不增加管理的复杂程度

方案:Panasas ActiveStor AS 3000系统,配有ActiveScale工作环境包括采用DirectFLOW协议的Panasas PanFS并行文件系统。

结果:地震资料处理工作的速度提高了6倍,提高了地球物理学家的生产效率,增加了工作的迭代次数且改善了成像结果和服务质量,提高了定位新能源储备和/或使现有油井产能最大化的成功概率。

    挑战

Geofizyka Krakow的用户依靠从公司收到的重要数据才能在这个苛求的行业中具有竞争力。快速提供精确的数据才能使Geo zyka Krakow和他们的用户在业务中共赢。公司的野外地震团队通常传送大量的地震观测资料到IT中心。使用西方公司的OMEGA SPS地震处理软件处理这些高达数百GB的文件,形成影像文件描绘出地质层位和结构。公司的地球物理学家解释这些数据,把他们的发现交给用户,使他们能够定位新油井和天然气的储量或优化现有油井的生产。

为使生产效率最大化,IT中心需要同时运行几个独立的地震资料处理工作。这些工作有些是I/O密集型的,在很多情况下单个I/O密集型工作将影响所有争用同一个存储阵列的其他工作,因此影响IT中心的总的生产能力。很明显他们需要一种解决方案,能够处理多种不同的工作而又能够保持管理简捷。

他们先前的存储器解决方案基于两个独立的NFS存储阵列,通过网络连接到两个独立的IBM计算集群上,从计算集群到存储器提供的是一种串行的I/O连接。由于多项工作同时在计算集群中运行,每项工作都争用串行I/O的带宽,I/O密集型工作一执行这种方案就很容易超过负荷而崩溃。

解决方案

Geofizyka Krakow要寻找一种解决方案,可以集成到他们现有的环境中并且能够处理I/O密集型工作量而不增加管理的复杂性和人员需求,从而保持高水平的生产效率。他们发现原有存储的缺点是在同时处理多个作业时产生的严重I/O瓶颈问题。他们决定调查寻找一种解决方案,它可以扩展同时发生I/O操作的数量又不对整体工作产生负面影响。

Geofizyka Krakow评测了一套Panasas AS 3000 ActiveStor并行存储系统,试验结果证明他们的选择是非常正确的。

他们发现当多项工作同时运行时Panasas PanFS并行文件系统能显著地提高工作效率高达6倍。Panasas并行存储解决方案配备了专利的面向对象的PanFS并行文件系统,它使用户能够最佳化应用程序和作业性能。这套解决方案使计算集群中的每个结点都能够直接存取存储器,允许各个结点能以并行方式同时处理I/O操作。单个全局名字空间显著地简化了存储管理,从而提高了生产率,能够完成更多工作。Panasas并行存储系统为石油和天然气行业用户地震资料处理、油藏建模和地震资料解释应用提供了统一的存储解决方案以及一级和二级存储解决方案,这套系统在业界是独一无二的,它有能力合理处理所有工作流程和提高数据的可用性。

    结果

Geofizyka Krakow完成地震资料处理的速度提高了六倍。系统性能的提升显著提高了地球物理学家的生产效率,快速提供计算结果且有机会迭代运算更多任务,改善成像效果。Panasas并行存储方案促使项目高质量的快速推进,帮助用户快速定位能源储备,最终使Geofizyka Krakow的石油和天然气行业用户的勘探工作受益。Geofizyka Krakow公司的计算机系统经理Leszek Boryczko说:“我们部署Panasas AS 3000之前,我们的地球物理学家经常来电话抱怨,等待地震资料处理的结果阻碍了他们的工作进度,自从部署了Panasas并行存储解决方案,我发现我们全部的IT工作流程都更加容易管理了,而且我们的地球物理学家的工作也更加富有成效,因为他们很快就能完成地震资料处理工作周期,我们能够快速地向用户提供更精确的结果。”

Geofizyka Krakow公司简介Geofizyka Krakow是波兰石油天然气集团公司的一部分,他在全球帮助主要的能源勘探和生产企业成功地勘探碳氢化合物和地热水矿床以及监测自然资源的储藏。公司创建于1956年,专注于地震资料的采集,处理和解释,录井和垂直地震资料处理服务,公司总部位于波兰的克拉科夫。

 

来源:51CTO

时间: 2024-09-13 11:19:55

波兰石油公司部署Panasas并行存储集群的成功案例的相关文章

在阿里云上部署生产级别Kubernetes集群

阿里云是国内非常受欢迎的基础云平台,随着Kubernetes的普及,越来越多的企业开始筹划在阿里云上部署自己的Kubernetes集群.本文将结合实战中总结的经验,分析和归纳一套在阿里云上部署生产级别Kubernetes集群的方法.文中所采取的技术方案具有一定的主观性,供各位读者参考.在实践中可以根据具体使用场景进行优化. 目标 当我们刚接触Kubernetes进行测试集群的搭建时,往往会选择一篇已有的教程,照着教程完成集群搭建.我们很少去质疑教程作者每一步操作的合理性,只想快点把集群搭建起来,

weblogic12C 部署了一套集群,单独访问受管理服务,会跳转到代理服务。

问题描述 weblogic12C 部署了一套集群,单独访问受管理服务,会跳转到代理服务. 开始的时候我们部署了一套集群,通过代理Server分发请求. 现在我们部署了负载均衡设备,替代软件Proxy服务,向所有节点分发请求. 问题是受管理服务在访问中,有一部分情况会把地址重定向到集群的Proxy代理地址.导致无法打开. 请问如何配置可以取消受管理服务向代理服务的跳转?

中科曙光斩获奇虎360对象存储集群近80%份额

记者从中科曙光公司获悉,在近日奇虎360公布的2016年下半年存储系统集采招标中,中科曙光一举获得Ceph存储系统对象存储集群近80%的份额. 对象存储设备是智能设备,它能作为目标和启动者,支持与其他对象存储设备的通信和合作,此次中科曙光为对象式存储服务器项目提供了最具性价比的I620-G20服务器搭载英特尔NVMeSSD实现了高效数据读写和文件查询技术,能够提供高达几十个GB的稳定聚合带宽,每秒数十万个文件查询效率. 本文转自d1net(转载)

CentOS 7部署Kafka和Kafka集群

CentOS 7部署Kafka和Kafka集群 注意事项 需要启动多个shell脚本交互客户端进行验证,运行中的客户端不要停止. 准备工作: 安装java并设置java环境变量,在`/etc/profile`中加入 export JAVA_HOME=/usr/java/jdk1.8.0_65 export PATH=$PATH:$JAVA_HOME/bin 安装kafka 下载:wget http://mirrors.cnnic.cn/apache/kafka/0.10.0.1/kafka_2.

如何在Ubuntu 16.04中安装Ceph存储集群

Ceph 是一个高性能.可靠.可扩展的开源存储平台.它是一个自由的分布式存储系统,提供了对象.块和文件级存储的接口,并可以不受单点故障的影响而运行. 在这个教程中,我将指导你在 Ubuntu 16.04 服务器上安装建立一个 Ceph 集群.Ceph 集群包括这些组件: Ceph OSD (ceph-osd) - 控制数据存储,数据复制和恢复.Ceph 集群需要至少两个 Ceph OSD 服务器.这次安装中我们将使用三个 Ubuntu 16.04 服务器. Ceph Monitor (ceph-

如何在 Ubuntu 16.04 中安装 Ceph 存储集群

Ceph 是一个高性能.可靠.可扩展的开源存储平台.它是一个自由的分布式存储系统,提供了对象.块和文件级存储的接口,并可以不受单点故障的影响而运行. 在这个教程中,我将指导你在 Ubuntu 16.04 服务器上安装建立一个 Ceph 集群.Ceph 集群包括这些组件: Ceph OSD (ceph-osd) - 控制数据存储,数据复制和恢复.Ceph 集群需要至少两个 Ceph OSD 服务器.这次安装中我们将使用三个 Ubuntu 16.04 服务器. Ceph Monitor (ceph-

在ubuntu上部署Kubernetes管理docker集群示例

本文通过实际操作来演示Kubernetes的使用,因为环境有限,集群部署在本地3个ubuntu上,主要包括如下内容: 部署环境介绍,以及Kubernetes集群逻辑架构 安装部署Open vSwitch跨机器容器通信工具 安装部署Etcd和Kubernetes的各大组件 演示Kubernetes管理容器和服务 关于 Kubernetes 系统架构及组件介绍见这里. 1. 部署环境及架构 vSphere: 5.1 操作系统: ubuntu 14.04 x86_64 Open vSwith版本: 2

Zookeeper的安装部署,zookeeper参数配置说明,集群搭建,查看集群状态

1.Zookeeper的安装部署 7.1 Zookeeper工作机制 7.1.1.Zookeeper集群角色 Zookeeper集群的角色:  Leader 和  follower (Observer) zk集群最好配成奇数个节点 只要集群中有半数以上节点存活,集群就能提供服务   7.2 Zookeeper部署 7.2.1 机器准备 1/ 安装到3台虚拟机上,准备的三台服务器地址是: C:\Windows\System32\drivers\etc\hosts中配置的内容如下:   192.16

10分钟自动部署Kubernetes1.6.1集群

Kubernetes是非常流行的容器管控平台,阿里云的容器服务团队为Kubernetes提供的基于阿里云服务的CloudProvider,让Kubernetes可以更好的和阿里云的计算资源深度集成,提供更好的性能和网络特性.本文主要目的是为大家提供一种非常简单的方法,在阿里云上部署Kubernetes集群. 本文所描述的部署过程基于阿里云资源编排服务(ROS),部署过程中会自动创建Kubernetes运行所需的VPC网络.安全组.子用户.ECS等资源,无需关注资源创建和安装细节.使大家能够非常简