Transcript 南海海洋研究所超级计算机的应用及布局情况

南海海洋研究所超级计算机的应用
及布局情况
中国科学院南海海洋研究所
2011年12月26日
前言
 自上个世纪五十年代以来，国际上大气环流模式、大洋环流模式及其海气耦合
模式不断地发展和提高。而我国在海洋环流数值模拟上起步较晚，尤其至今还
没有一个针对南海区域的数值预报和同化系统。
 中国大气物理研究奠基人、中国科学院院士叶笃正也在1985年指出，超级计算
使得大气科学从一门经验科学变成了理论科学和实验科学，人们可以通过计算
模拟来研究和预测天气和气候的变化。
 中国科学院南海海洋研究所近年来通过实施海上大型观测，积累了大量宝贵的
资料，同时从国内外引进了具有很强数值模式及资料同化背景的人才，在对南
海环流的数值模拟方面取得了一定的经验和成绩，因此已经具备建立适合南海
区域的高分辨率多重嵌套的海-气-浪耦合模式及资料同化系统。
 通过高性能计算集群平台的建设，对我所科研水平的学科发展有着重要的推动
作用，有利于架构我们的同化系统，有利于应用模式，发展模式，参与到全球
变化研究中。通过同化产品促进南海北部环境预测，形成该区域初步后报能力
和再分析能力。
 多重嵌套高分辨率海气耦合模式及资料同化对计算机的运算速度及存储量要求
极高，尤其是资料同化系统，要处理的协方差矩阵数量级至少为
(100x100x100)2 =1012（假设模式的水平网格点及垂直层数为100的量级，实
际上高分辨率模式的水平网格点数要大于100）,因此，其要求的运算速度至少
要达到10万亿次以上，存储量100TB以上。
超级计算在研究工作中的作用
南海区域的海-气-浪耦合模式
建立适合南海区域的高分辨率多重嵌套的海-气-浪耦合模式，对南海区域的
海洋环境及天气状况进行模拟和预测，同时也为深入的研究南海动力和热力
过程提供高质量高分辨率的再分析资料。
南海资料同化系统
建立基于集合卡门滤波和伴随变分技术的先进资料同化系统，将所获得的
海洋资料，如卫星，船舶，锚定，走航等资料，有效地同化进模式里， 以提
高模式的预报精度和再分析产品的质量
热带印度洋海洋和大气过程的数值研究
应用热带印度洋的大气模式和海气耦合模式，对热带印度洋海气过程进行
重现；通过结合ARGO等海洋观测资料，改进模拟印度洋上层海洋温盐和环
流结构；通过对物理过程的模拟改善印度洋SST和上层热含量的模拟精度。
二、我所的高性能计算建设情况
 本单位现有2008年和2010年购置的DELL高性能计算机集群两台，按
功能分成计算中心、存储备份中心和管理中心。
系统组成
HPC平台建设的拓扑图按功能划分分成计算中心、存储备份、管理中心、网络中
心等：
 计算中心：一台服务器(2008年)由集群24个Dell M600刀片计算节点（48颗
Intel CPU，共192个核）、1台分发管理服务器组成。另一台服务器(2010年)
由16个Dell M610刀片计算节点（32颗Intel CPU ，共192个核）， 1台分发
管理服务器组成。计算服务器集群是计算子系统的核心。
 存储备份： 使用DELL MD3000和DELL MD3200服务器，使用模块化磁盘存
储阵列,完成对数据的集中存储和备份, 有效简化存储的管理、维护与扩展。
 管理中心：使用DELL PER710服务器，管理整体客户HPC平台的网络设备、
存储备份、以及所有服务器、工 作站的管理。HPC集群管理软件，实现HPC
系统管理、集群管理和负载管理等。
 整个系统的总的理论峰值性能约为双精度4万亿次/秒。
 总的存储空间达到50TB。
 现有用户数63人
 任务提交数已达22万多个
硬件布局图
系统软件
 集群管理软件系统：Centos集群，Redhat HPC 5.5集群
 存储节点文件系统：NFS
 开发环境：MPICH，MVAPICH，OpenMPI
 编译器：Intel C, C++, Fortran Compilers , PGI
 任务管理系统：SGE，LAVA
现阶段支持的科研项目
 国家杰出青年基金“南海西边界流格局”。
 国家自然科学基金重点项目“南海环流中的涡致输运及其在环流季节转换中
的作用”。
 科技部973项目 “南海海气相互作用与海洋环流和涡漩演变规律”。
 中国科学院知识创新重大项目群项目子课题“海洋对亚洲季风年际变化和年
代际转型的影响与响应”。
 科技部863项目 “地球系统模式中的高效并行算法研究与并行耦合器研制”
。
 科学院知识创新工程重要方向性项目“南海年际动力热力过程及其与热带大
洋相互作用”。
 科技部973项目“南大洋-印度洋海气过程对东亚及全球气候变化的影响”第
二课题：南印度洋影响热带印度洋的关键海洋-大气过程。
海气数值预报试验平台简介
海气数值预报试验平台主要包括以下两
个方面的研究：
（1）天气预报：利用中尺度天气预报
模式WRF和降尺度方法对华南及南海区域
进行天气预报，包括中期预报和短期预报
。中期预报的网格点间距为72km，预报时
长为15天；短期预报的网格点间距为24km
，预报时长为78小时。
（2）风暴潮预报：利用天气预报短期
预报的结果，插值出海表面10m高度的风
场及气压场，并由OTPS潮汐预报得出的调
和常数作为潮汐边界条件，建立POM南海
风暴潮模式，对南海区域的海面增水进行
48小时的预报。
以上两个预报模式均为每6小时预报一
次，并将模式预报结果与西沙台站的实测
结果进行对比。
未来五年的计算需求及存储需求
 随着各项科研项目的展开，现有计算能力已远远不能满足我所日益增长的
大规模数据和大计算量的需求。由于任务较多，计算资源负荷已经过于饱
满，迫切需要引进更大处理能力的高性能计算机。
 多重嵌套高分辨率海气耦合模式及资料同化对计算机的运算速度及存储量
要求极高，尤其在资料同化系统中需要大量的读写IO的操作，需要提高数
据读写IO 的速度。
 所以未来至少需要运算速度达到每秒10万亿次以上，存储量100TB以上，
并且能够支持大量的高速的读写IO的操作。
谢 谢！