曙光高性能计算在气象海洋领域的应用方案

  【天极网服务器频道12月16日消息】气象、海洋预报事业关系国计民生的各个方面,近年来极端天气和极端气候频发,自然灾害增多,也对气象、海洋及相关行业的预报业务提出更高的需求。十二五期间,">天气预报的准确率、时效性、精细化程度和服务水平都需要大幅度提高。数值天气预报是指是指根据流体(大气或海洋)的物理和运动特性,在一定的初值和边值条件下,通过大型计算机进行数值计算,求解描写流体演变过程的流体力学和热力学的控制方程组,预测未来一定时段的流体运动状态和天气现象的方法。随着气象模式的日益成熟、大型计算机性能的不断提升,数值预报系统现已成为气象、海洋行业业务和科研不可或缺的支撑工具。

  数值天气预报涉及的应用主要包括气象模式、海洋模式、气候模式、环境模式及卫星、遥感资料处理程序等。常用的气象模式包括MM5、WRF、GRAPES、AREMS、LAPS、ARPS等,常用的海洋模式包括FVCOM、ROMS、HYCOM、POP等,环境常用模式包括CMAQ、WRF-Chem等,气候模式包括CCSM3、CESM等。各种模式在流程上有一定的相似性,都包括数据前处理,主模式计算和结果后处理三部分。数据前处理包括地形和地表资料、气象预报背景场资料、各种气象观测资料(观测站、雷达、卫星等)的处理和同化,为模式计算提供边界场和初值;主模式计算是主要计算量所在,通过并行计算进行数值方程的迭代求解,对CPU、网络和IO都有较高的需求。结果后处理是指从模式计算结果提取各种气象信息元素,并以图形、动画、网页等形式将结果呈现给气象预报人员。

  气象、海洋预报模式对高性能计算系统有着非常苛刻的要求:首先,模式求解有非常大的计算量,而气象预报又要求极高的实时性,模式必须在指定时间内完成运算,另一方面预报精度的不断提高,所需计算量也将成几何级上升。其次,模式计算对网络通信压力很大,多数模式采用格点有限差分法做并行计算,除了模拟域内部格点间的数据通讯,当模拟区域嵌套时还涉及母域和嵌套域之间的域间通讯,因此要求配置高速的通信网络。另外,气象过程模拟涉及海量小文件的处理,对系统IO性要求很高,要求持续的IO存储带宽,一般使用有分布式IO或者并行文件系统,否则很难有较好的加速比。

  基于对应用软件的特征分析和在气象、海洋领域多年的成功经验,曙光推荐如下高性能计算集群解决方案:

  在硬件层面,高性能计算系统分为5个子系统:(1)登陆管理系统:采用双机架节点,实现双机热备,配置和计算系统同型号的CPU;(2)计算系统:采用高密度、低功耗、易管理的刀片服务器,如曙光TC3600/TC4600,刀片节点可配置双路/四路,采用最新的64位Intel或AMD处理器,注重浮点峰值和内存性能;(3)集群容错系统:关键应用可以使用曙光Clusnap集群容错模块进行系统级断点保护;(4)存储系统:目前主流的解决方案是采用分布式的并行存储系统,如曙光ParaStor 100/200,可配DBStor备份系统,实现关键数据的智能备份和保护;(5)网络系统:管理网络采用普通千兆网络,计算网络采用低延迟、高带宽的QDR/FDR InfiniBand,能大幅度提高应用程序的计算速度和并行加速比。

  在软件层面,曙光为气象、海洋用户配备完备的并行计算开发和运行环境,配置曙光Gridview集群监控管理及作业调度软件,包含针对不同模式软件开发的Web作业提交界面ClusPortal,可以大大降低高性能计算机的使用门槛。曙光有全国各地上百个气象行业的成功案例,可免费提供常用数值模式的安装、调试和培训服务,并配合用户完成数值预报业务系统的安装调试。

(作者:飞翔的鱼责任编辑:柏景福)

时间: 2024-07-30 01:48:09

曙光高性能计算在气象海洋领域的应用方案的相关文章

曙光高性能计算在生命科学领域中的应用

[天极网服务器频道12月16日消息]由于测序技术的飞速发展,人类发现的基因序列数目以指数级增长,对于如此数量庞大的基因进行同源性搜寻.比对.分析.遗传发育分析等等,往往伴随着巨大的http://www.aliyun.com/zixun/aggregation/14345.html">数据处理量和并行计算量.同时,生命科学的研究对象往往是蛋白质和DNA的大分子,对这些分子的三维结构进行预测,研究它们的动力学特性.热力学特性及其在生命过程中如何发生作用等等,这些科学问题也要借助于高性能计算机.

浪潮将建我国海洋领域最快超级计算机

8月20日,在青岛举行的"海洋大数据与智能计算"鳌山论坛上,浪潮集团宣布将为青岛海洋科学与技术国家实验室(以下简称海洋国家实验室)建设超级计算机.该超算系统性能将达每秒千万亿次,将是我国目前在海洋领域运算速度最快的超级计算机.   浪潮将建我国海洋领域最快超算 (图为浪潮集团副总裁张革和海洋国家实验室常务副主任王栽毅签署战略合作) 海洋国家实验室是科技部2006年启动筹建的10个国家实验室之一,是国家所拥有的并赖以解决国家急需的.具有战略意义的重大科学问题的实验室,代表了国家在海洋科学

曙光高性能计算在石油地球物理勘探中的应用

[天极网服务器频道12月16日消息]石油地球物理勘探(简称石油物探),一直是高性能计算技术的传统和主要应用领域.随着人类对于油气资源需求的不断提高,油气勘探工作面临的勘探对象不断复杂化,勘探条件日趋恶劣,从而导致对石油地球物理勘探技术的研究与应用不断深化.地球物理技术的发展与应用高度依赖于包括高性能计算技术在内的信息技术的发展. 地震勘探过程主要由地震数据采集.数据处理和地震资料解释3个阶段组成,而其中地震数据处理又是整个工期中耗时最长.占用资源最多的一个环节.地震数据处理的任务是加工处理野外观

河北公布服务业重点领域发展行动方案

映象网讯(首席记者 梁新慧)昨天,东方今报记者获悉:省政府办公厅日前印发了<2015年河南省服务业重点领域发展行动方案>,方案明确:2015年河南省服务业增加值增长8.8%以上,固定资产投资增速17%,服务业占生产总值比重达到34%.这么高的比重,在我省服务业的发展史上还是首次,预示着我省服务业将迎来一个前所未有的发展机遇. [现代物流业] 航空港:货邮吞吐量力争达到50万吨 启动机场货运站.北货运区项目.争取顺丰公司物流基地(机场)项目布局郑州,推动中国邮政集团在郑州建设集疏中心.拓展货运航

基于云上分布式NoSQL的海量气象数据存储和查询方案

前言 气象数据是一类典型的大数据,具有数据量大.时效性高.数据种类丰富等特点.气象数据中大量的数据是时空数据,记录了时间和空间范围内各个点的各个物理量的观测量或者模拟量,每天产生的数据量常在几十TB到上百TB的规模,且在爆发性增长.如何存储和高效的查询这些气象数据越来越成为一个难题. 传统的方案常常采用关系型数据库加文件系统的方式实现这类气象数据的存储和实时查询,这种方案在可扩展性.可维护性和性能上都有一些缺陷,随着数据规模的增大缺点越来越明显.最近几年,学界和业界开始不约而同的转向利用分布式N

专访DeepScale:深度学习加前融合,这家公司想做自动驾驶领域的感知方案供应商

Forrest Iandola 多传感器融合目前看来已经成了通往自动驾驶的必由之路,更多的传感器数据往往也意味着更高的安全性.但数据融合并不是一件简单的事. DeepScale是硅谷一家专注于自动驾驶感知技术的公司,其CEO Forrest Iandola在本月接受雷锋网采访时表示,他们能将深度学习同时用于摄像头以外的传感器数据上,如雷达与激光雷达,并在较为廉价的嵌入式设备上提供感知解决方案. Forrest在加州大学伯克利分校攻读博士学位时,主要研究深度神经网络及其应用,重点关注加速及改进用于

曙光联合创腾推出材料科学大数据方案

2016年9月24日-26日,第八届国际分子模拟与信息技术应用学术会议在大连召开,本次大会在分子模拟与信息技术应用于大数据示范的科研创新以及如何建立基于模型的新型研发模式等方面进行深入的探讨和广泛的交流.众所周知材料和能源.环境.健康.信息等方面息息相关,在众多研究材料的方法之中,计算是一种重要的手段,通过计算模拟和预测实验现象,可以认识材料性质.开拓新用途.进行改造发明.然而随着材料科学的不断发展以及数据密集型科学研究范式的到来,对于计算能力的要求不断提高,急需可靠的硬件设备与应用软件的完美结

曙光EasyOP:让我来接管你的HPC系统吧!

ZD至顶网服务器频道 04月22日 新闻消息(文/于泽):"锄禾日当午,不如运维苦",一句话就真实反映出了IT运维人员的真实处境.7x24小时的操心.劳碌,只有经历过的人才深有体会.在日前召开的中科曙光EasyOP(Easy Operation的简称)在线运维平台正式上线仪式上,来自中国科学院物理研究所的徐力方研究员表达了自己的感慨,"半夜三更穿着裤衩背心就往机房跑,虽然投入了大量的精力,但仍时刻提心吊胆."  EasyOP上线仪式 其实,这不仅是他一个人面对的问题

从曙光1号到亚洲第一 中国科技进入超越阶段

[天极网服务器频道12月16日消息]中国科技实力的发展正在影响并帮助人类向着更智慧的方向发展,这将是史无前例的大变革.大事件!中国的人口基数决定了其科技惠民的结果将为世界发展和进步注入空前的动力与活力,将根本改变世界的发展方式.改变全球经济发展和政治格局. 那么,代表中国科技第一线的高性能算计产业,用什么在向全球证明着自己的力量? 曙光1号成为科技创新的里程碑 20年前,在国家863计划指导,中科院计算所李国杰院士的带领下,研制出了我国第一台SMP(对称式多处理机)结构计算机--曙光一号计算机,