Transcript 人民财产保险HPC高性能解决方案

HPC 高性能计算
——保险行业解决方案
议题
精算业务需求及现状描述
HPC 介绍
人保高性能平台案例分享
客户工作模式
客户工作模式——SAS
源数据
目标数据
Data
导入
生成
Data
Data
临
时
文
件
客户工作模式
客户工作模式——Excel
大Excel文件
结果
生成
运行
VBA脚本
业务需求及现状描述
• SAS和Excel的运算效率
现状（参考人保）：
—笔记本电脑，内存支持不到4G。
—系统Windows XP 32bit，运算常出现假死现象
•
SAS的存储要求
现状（参考人保）：
—本机硬盘，容量小，易损坏。
—移动硬盘速度慢、易损坏、容量有限。
—历史信息及数据，没有统一集中管理，已经清理过的数据需要重复处理
业务需求及现状描述
• 执行结果的准确性
现状（参考人保）：
—源数据、中间数据、结果数据版本不一致，计算结果不准确。
• 机密文档的安全性
现状（参考人保）：
—公司业务数据信息机密随笔记本、移动硬盘被带出公司。
—相对隔离的数据，没有很好的权限控制。
痛苦的结果
•
•
•
•
•
模型计算：等了几个小时，岿然不动
统计结果：经常重新再来
磁盘空间：最痛恨被告知空间已满，无法计算
数据备份：伤不起的PC机
安全问题：问题依旧
终极目标
更佳
更高
• 提升管理
执行力
• 提升软硬
件配置
更优
更快
• 优化团队
协作效率
• 提升员工
工作效率
更强
• 提升计算
任务效率
议题
精算业务需求及现状描述
高性能计算介绍
人保高性能平台案例分享
高性能计算概述
• 高性能计算(HPC) 指通常使用很多处理器（作为单个机器
的一部分）或者某一集群中组织的几台计算机（作为单个
计 算资源操作）的计算系统和环境。
• 领域专家或者工程师可以用来解决一些程序规模庞大、运
算时间长以及数据量大的模型。
• 对计算任务进行分解，并把分解的任务块通过一定方式交
给不同的处理器计算。
HPC网络图
11
HPC工作原理
初始化并分发任务
将作业传给控制
节点
整合结果展现
传递后台计算结果
12
HPC应用及发展趋势
• 高性能计算机能够广泛应用于生物、信息、电子商务、金
融、保险等产业，它同时也是传统产业（包括制造业）实
现技术改造、提高生产率和竞争力的重要工具。高性能计
算已从技术计算（即科学计算和工程计算）扩展到商业应
用和网络信息服务领域。
• 高性能计算开始走出原来的科研计算向更为广阔的商业计
算和信息化服务领域扩展。更多的典型应用在电子政务、
石油物探、分子材料研究、金融服务、教育信息化和企业
信息化中得以展现。
13
HPC国际成功案例
• 美国能源部的加速战略计算计划，目标是构造100万亿次的超级计算
机系统、软件和算法，在2004年真实地模拟核爆炸。
• 福特用高性能计算机构造了一个网上集市，通过网络连到它的3万多
个供货商。这种网上采购不仅能降低价格，减少采购费用，还能缩短
采购时间。福特估计这样做大约能节省80亿美元的采购成本。
• 好利威尔公司和通用电气公司用网络将全球各地设计中心的服务器和
贵重设备连于一体，以便于工程师和客户共同设计产品，设计时间可
缩短100倍
• 壳牌石油公司通过全球内部网和高性能服务器收集员工的创新建议，
加以集中处理。其中产生了一种激光探测地下油床的新技术，为该公
司发现了3亿桶原油。
14
议题
精算业务需求及现状描述
高性能计算介绍
人保高性能平台案例分享
人保需求分析
性能
存储问题
数据管理
协同办公
解决方案
Windows HPC Server
•
•
•
•
端到端的完整解决方案
可扩展的性能
快速、可扩展的部署
可扩展的管理、监控、故障排除和报表工
具
• 具有业务关键性的基于面向服务的架构（
SOA）应用程序
• 增强的Excel 2010 的性能
18
Windows HPC Server
19
为什么要用SharePoint
SharePoint 有完整的文档生命周期管理
模板
创建
修订/审批
日志记录
权限保护
发布
存储
HPC + SharePoint
改变
HPC + SharePoint
•
•
•
•
•
模型计算：多节点服务器并行运行，节省大部分空间
统计结果：数据源唯一，版本控制
磁盘空间：服务器加存储
数据备份：版本管理；服务器备份
安全问题：灵活的权限管理
POC验证
拟合计算并行测试结果
CPU数量
40*CPU
拟合计算次数
1200
81
32*CPU
24*CPU
16*CPU
8*CPU
1*CPU
71
60
53
52
103
2400
84
76
66
62
74
205
4800
92
84
78
87
120
409
9600
106
105
109
130
208
817
19200
139
150
171
222
390
1636
38400
224
247
301
423
760
3217
76800
376
445
552
790
1511
6438
153600
699
830
1056
1554
3002
12876
307200
1317
1614
2071
3079
5977
25750
CPU数量
拟合计算次数
307,200
拟合次数规模
40*CPU
32*CPU
24*CPU
16*CPU
8*CPU
1*CPU
5个节点
4个节点
3个节点
2个节点
1个节点
1个CPU
1317秒
1614秒
2071秒
3079秒
5977秒
25750秒
0.37小时
0.45小时
0.58小时
0.86小时
1.66小时
7.15小时
23
部署架构
HPC拓扑结构
25
案例分享——硬件
26
案例分享—HPC客户端
Excel计算
分
钟
60
60
50
单机
40
30
20
10
10
0
Excel计算
27
案例分享—延伸需求
• 客户在数据审计过程中，利用Excel、SAS
进行已决、未决数据的审计，计算速度和
人工效率低下。
• SAS主要做数据钻取和统计，而关系型数
据的管理却是SQL Server的强项。
• 客户希望在SAS和Excel中的数据管理和筛
选任务转移到SQL Server中。
28
案例分享—延伸价值
29
案例分享—方案沉淀
源数据
内容管理
整合数据
搜索
项目管理
。。。
商业智能
报表服务
SQL
数据展现
SAS统计
功能驱动
HPC管理
HPC
高性能价值
对业务员
对IT管理人员
提高工作效率
简单易控的系统
∆ 节省时间
∆ 简化流程
∆ 降低风险
∆ 服务满意度提升
∆ 提升效率
∆ 优化协作
对管理层
管理工作的便利
∆成本降低
∆有效利用
Q&A
谢谢！