Transcript Slide 1
大数据洪流,引爆数据中心变革 李东胜 艾萨华公司中国区副总裁 亚太区渠道业务总经理 艾萨华公司介绍 艾萨华是一家半导体和软件领先供应商,其主要产品包括:RAID控制器、 SSD控制器、Axxia网络处理器和定制ASIC等,为加速数据存储中心与移动网 络性能提供了许多领先的解决方案 公司基本信息 • 创立1981年, 1989年上市 • 市值超越AMD • • • 2012 销售额:25亿美元 2012 现金流:6.8亿美元 全球5000名员工 • 1998 在华建立分公司,主要从事研发。 目前共有500员工 企业成就 100% 服务器厂商集成LSI芯片 100% IBM, Dell, Lenovo, 浪潮,曙光 集成 LSI MegaRAID卡 100% 甲骨文Exadata一体机集成LSI Nytro IO加速卡 100% 移动网络基站集成LSI网络芯片,华为 中兴重点客户 #1 RAID 控制芯片市场占有率 #1 HBA 控制芯片市场占有率 #1 SSD 控制芯片市场占有率 全面协助国家经济发展,加快企业创新 2 大数据 推 动 变 革 3 数据洪流已成现实 4 大数据处于这场变革的中心 2.8ZB in 2012 40ZB in 2020 5 从大数据中提取价值,我们需要 采集 多样 保有 海量 分析 高速 6 这需要对工具、产业环境和基础架构进行创新 采集 保有 分析 7 工具创新 Hadoop与Friends 采集 保有 分析 8 “开放式生态系统”创新 软件 Scorpio项目 硬件 采集 保有 分析 9 LSI的数据流产品系列 存储和网络解决方案加速数据流 多核通信 处理器 Axxia® 定制芯片 服务器和存储 连接解决方案 硬盘 SoC 和 前置放大器 闪存存储 处理器 PCIe闪存 解决方案 Syncro™ MegaRAID® TrueStore® SandForce® Nytro PCIe Flash™ Adapters SAS HBA* MegaRAID HBA* 采集 10 LSI Confidential 保有 分析 10 LSI Nytro应用加速解决方案 纯闪存DAS: Nytro WarpDrive SAN/DAS缓存: Nytro XD Nytro MegaRAID I/O 热数据 Nytro XD软件 冷数据 应用数据 I/O I/O 智能缓存 存储热数据 冷数据 应用 操作系统 DAS缓存: SAS • FC • iSCSI Dell TMT Summit Accelerating Innovation Summit | © LSI Corporation 2013. All rights reserved. LSI Proprietary. 11 • 性价比: $0.2/IOPS • 耗电量: 25W Random IOPs: 70% Reads/30% Write; 8K transfer; Q-Depth=4: 2.5”, 15K SAS IOPs=258/Drive Random IOPs: 70% Read/30% Write, 8K Transfer: IOPs=90,000/Drive 1 x Nytro加速卡 90,000 IOPs 或 • 性价比: $2.14/IOPS • 耗电量: 2443W Random IOPs: 70% Read/30% Write; 8K Transfer; Q-Depth=4: SAS SLC SSD IOPs=8000/Drive Nytro 加速解决方案概念 349 x 15K 普通硬盘 90,000 IOPs 11 x 固态硬盘 88,000 IOPs • 性价比:$0.72/IOPS • 耗电量: 66W 绿化节能,维护成本低 12 Nytro大数据加速方案 大数据应用特点: – 以带宽为导向,批处理操作 – 低延迟、高价值、时间敏感型分析 Hadoop为大规模I/O处理而设计 – Map-Reduce作业中产生的临时数据需要高的IOPS – 仅需少量的闪存可以显著提升性能 NoSQL数据库作为Hadoop大数据架构的集成产品 – Hbase提供了低延迟的数据随机访问 – 依靠服务器内存来提供高速读访问,但内存容量有限,用闪存作为二级缓存可以显著提高性能 YCSB C (100% 读) 每秒钟操作数 平均减少25% 作业运行时间 1.5TB 数据, 20 线程 两千万条记录 40.00% 30.00% 20.00% 10.00% 0.00% L1 L3 L4 L5 L6 L7 L8 L9 L10 L11 L13 L14 L15 L16 L17 每秒钟的操作数 PigMix 批处理作业执行时间(与仅使用硬盘比较) 45,000 40,000 35,000 30,000 25,000 20,000 15,000 10,000 5,000 0 41,985 1,047 Nytro™ WarpDrive HDD Only 13 Hbase加速方案效果 每秒钟执行的YCSB 操作 – 工作模式(50%更新,50%读) 大量的测试数据产生 非常显著的磁盘访问 Nytro™ MegaRAID 闪 存卡可以显著的提升 性能,特别是在数据 量增加时 针对不同场景下每秒 钟的操作数增加35% -150% 14 响应时间对比 响应时间分布 LSI闪存加速: 普通硬盘: 9毫秒 36毫秒 15 Hadoop 案例 服务器数量 1,000 配备Nytro MegaRAID的服务器后 640 平均节点成本 ¥40,625 ¥40,625 服务器成本 Nytro MegaRAID 100GB卡 (MSRP:建议零售价 ¥13,600) 总体硬件成本 机架空间、功耗、冷却、服务器配置、硬件管理和采 购成本(3年*) ¥40,625,000 ¥26,000,000 ¥0 ¥8,704,000 ¥40,625,000 ¥34,704,000 ¥122,562,500 ¥78,440,000 ¥163,187,500 ¥113,144,000 正常情况 3年总成本 3年总计节约 * ¥50,043,500 计算使用451集团下属的独立部门Uptime Institute的数据 http://uptimeinstitute.com/component/docman/doc_download/48-update-uptime-institute-revolutionizing-data-center-efficiency 配备Nytro MegaRAID的服务器的优势: •需要的服务器数量减少36% •初始硬件成本降低600万人民币 •3年期TCO节约5,000万人民币 16