高端数据处理系统

2006年10月高端数据处理系统胡雷军浪潮公司2高性能计算系统结构3高端数据处理系统综合能力强的计算机系统----高性能系统注重实际应用效果，着眼于具有挑战性的应用领域的成本效益和总拥有成本，解决太空探索，生命科学，气象模型，高能物理和理论化学等复杂问题. 需要海量数据处理. 需要较高的计算性能. 数据处理（转换，分析，筛选）应用程序需要强大的计算能力，具有大系统规模，系统处理器规模，节点规模，内存规模，较大的系统空间占用，能耗直接影响系统的拥有成本4高性能计算系统的组成IPN ... CPU内存CPU内存CPU内存CPU内存高速交换路径............ CI / O单元CI / O单元管理单元SI / O单元SI / O单元. .. SAN ... 5高端计算研究的差异国外主要技术发展趋势高端计算领域的机遇6高端计算研究的差异高端计算机=高性能计算= HPC = linpack？高端应用程序=高性能计算=高性能科学计算=数值计算？ HPC并不是高端计算机的全部高性能计算. 它实际上是高端计算机的应用领域. 数值计算并非全部都是高性能计算. 国际市场上超过90％的高端计算机都面向商业应用. 超过80％的高端计算机用于数据处理（2005年IDG数据）95％的高端应用程序不需要100节点群集系统，但是需要具有4到32个处理器的SMP系统. 7高端计算研究的差异对重要体系结构的研究投入较少. 国内的高性能计算系统架构主要是集群的. 对SMP / NUMA和其他体系结构的研究较少依赖于国外基础技术，而对处理器，芯片组和交换互连的研究也较少. 投资不足侧重于单个指标，不强调综合指标，侧重于系统浮点计算性能指标，不重视综合应用能力，注重数值计算应用，强调高端系统数值计算能力（峰值浮点）计算能力（LINPACK），并不关注OLTP指标，SPECWEB指标和其他面向业务的指标，而是着眼于高性能计算领域中计算能力的提高. 应用模型，算法，并行编程工具和并行程序的调试和优化研究需要进一步加强. 差分高性能计算是行业还是应用领域？业界关注主要市场需求，首先要满足主要市场需求. 主要市场需求是高端业务应用程序. 高性能计算是高端计算机系统，高效率还是高性能的主要应用领域？国外技术发展趋势: 从专注于计算能力到系统的整体性能，专注于系统的性能功耗比，系统针对不同应用的综合处理能力，系统提供服务的能力系统的数据处理能力和系统事务连续不断地变化，处理能力9会如何变化？我们应该关注什么方向？从满足高端关键应用的角度考虑国外的发展趋势，考虑我们的战略布局，高效率，追求系统性能和功耗，追求系统数据处理能力，追求系统性能，平衡计算能力以及获取数据，以及改善平衡计算. 容量的提高和I / O容量的提高均衡开发追求系统资源的有效利用追求适用于多种不同的应用10议程高端计算研究的差异国外主要技术发展趋势高端计算11概述自适应计算的发展12高性能计算和海量数据处理将成为社会信息和服务的基础13相关产品和行业的发展与国家和国家的长期发展有关. 国家信息社会的政治和经济安全概念. 通用计算巨头系统虚拟存储分层存储研究层海量数据处理虚拟计算智能网络存储协议和安全高效计算高信任度实用层高性能服务器海量存储虚拟现实低成本基于海量计算机的综合信息服务和应用data 14国外多核技术的发展趋势是提高性能功耗比的有效方法，也是提高系统数据处理能力的有效方法. 多核技术带来的最重要的变化之一是性能/功率比的提高. 一种提高系统综合能力的有效方法. 平衡的计算能力和内存带宽. 平衡的计算能力和I / O总线带宽虚拟化技术是提高系统资源综合利用率的有效方法. 虚拟化技术通过重建边界或打破边界完全改变了系统资源. 分配方法是基于开放标准的高速互连技术，是一种平衡计算能力和I / O能力的有效方法，是高端系统适应多种应用的重要发展方向15处理器向多核演进从16到多核的演进100％单核* 90％85％60％30％多核0％Q3'05 Q4'05 Q1'06 Q2'06 Q3'06 Q4'06FORECAST17向多核1995对称多处理的演进2006年超线程（HT）技术SMP ϵͳ两核2线程双通道SMP系统双核4线程多核双通道SMP系统4-8核4线程18向多核性能的演进每瓦吞吐量扩展的多核性能性兴趣点单核200020062008+预测行业的革命性转折点19多核可提高性能功耗比并提高数据处理能力1.

51.8 SPECint_rate2.0 2.0Q4'05 1H'06 2H'06 200702.82.13.93250％400％350％300％200％150％100％50％0％1H'05SPECint_rate每个系统WattPaxDP 2. 8 / LH800 Opteron * 280（2.4 GHz）Dempsey 3. 73 / BF1066 Opteron * 2. 6（F插槽）Woodcrest 3. 00 / BF1333 Opteron * 2. 8插槽F Clovertown 2. 67 / BF 1066 Opteron * Quad CoreIrwindalePaxvilleDP Opteron DC 2. 4 Dempsey 95W Opteron DC插座F 2. 6 Woodcrest Opteron DC插座F 2. 8 Clovertown Opteron QC插座F2H'051H'062H'06200720系统总线的演变2003-2004FSB？单核400？ MP前端总线？大型CPU缓存BCWentpraeliazekd Memory2004Chipset6.

4 GB / sDDR-II，200内存带宽峰值6. 4 GB /未来？多核？新的公交车架构记忆？ ArIocmhrpiytreoCcvtaeudpreaCaccithye和内存16 GB CH（IPDSEDTR2-400）200520-028 006DIB 800？双核？双独立总线17至21 GB / s？每个核心的缓存？内存容量高达21 GB / s（FBD-667）2007-20082006与2004芯片组DDR2高达3x400？四核？专用总线64 GB？共享的CPU缓存？芯片组探听过滤器？下一代内存（FBDIMM）DHSIFBD高达4倍探听过滤器21虚拟化技术的发展促进了资源的充分利用. 该系统分为几个虚拟机. 22虚拟化技术的发展促进了资源的充分利用. 集成资源的虚拟化将多个物理设备集成到一个虚拟机中. 23高速互连技术的发展促进了高端系统的综合应用能力. 集成存储I / O，通信，数据同步，管理网络的高速互连技术将成为未来系统之间互连的主流. 24高速互连技术的发展. Infiniband将在存储领域获得快速发展. 它可以实会，新世纪的头10年，40种海量数据处理需求趋势，以及市场机会勘探，油气田模拟气象预报和气象模型研究飞机和船舶设计IPTV和数字媒体根据处理系统的要求，为了满足按需需求，IPTV运营商必须存储和处理大量视频数据. 数据处理系统需要50个公共通道，每天的数据量约为4320GB = 4.

32TB为了保证点播的质量，通常在社区中设置视频数据缓存或CDN数据缓存服务器（内容分发网络服务器，带有数据缓存存储设备）. 预计到2008年，中国IPTV用户数量将达到6000万3G移动用户对通信的海量数据处理系统的需求此类服务的发展需要大量的存储系统. 由于存在存储内容和缓存内容，因此假设每个3G用户将需要1GB的存储空间. 根据4000万3G用户的说法，未来3G应用将需要存储容量: 基于40P Internet的存储服务成为可能. 这种趋势将催生一组Internet存储服务提供商，并对庞大的网络存储系统产生巨大的需求. 一个普通用户存储10G数据，一百万用户将需要1PB的存储容量. 41海量数据处理海量数据的应用将成为未来市场的主流，并且是市场上商业高端系统的主要增长点. 用于海量数据处理的高端系统必须满足以下要求. 该系统可以实现PB级海量数据的存储高性能体系结构smp，处理和传输系统需求，支持数十GB / s的数据访问流量. 由于海量数据应用程序的特性，海量数据处理系统通常面临大量并发访问，这需要系统设计来平衡计算能力和I / O功能. 大量的应用程序要求系统基于并行数据处理，而同一数据集则需要计算单元之间的高速交换通道来进行数据同步和数据共享. 由于系统的复杂性，系统的可靠性和可用性设计对于系统设计而言将是困难的. 未来数据存储速度的应用将每天都在增加. TB的规模将增加，并发用户数将继续增长. 要求数据处理系统具有高可伸缩性. 需要高端计算机的功能. 数据处理能力，数据I / O能力，系统可靠性，系统利用率，系统功耗和性能比42系统CPU内存CPU内存CPU内存CPU内存高速交换路径............ CI / O单元CI / O单元管理单元SI / O单元SI / O单元VSMP硬件架构……SANIPN…………43最新的Wave存储产品线价格AS1000和1000G2AS600和600G2CX300、500、700存储系统AS330G2AS500AS200AS300AS系列CX系列性能44AS500简介？ 3U机架，15个插槽？可以同时支持iSCSI和FC吗？单，双控制器？支持SATA硬盘根据需要更改，灵活的体系结构吗？标准P4 CPU; 2×512MB DDR ECC内存，最大8GB？支持RAID0、1、5、10级别吗？可以支持256个LUN吗？ AS Manager管理软件实现快照，硬件监控等高级功能？ IOPS 8,4000？传输带宽: 680MB / s45AS500内部架构控制器1FC x 2 iSCSIx 2镜像缓存CPUSATA / SAS×4备用电源CMI风扇电源风扇电源风扇备用风扇控制器2FC x 2 iSCSIx 2图像缓存CPUSATA / SAS×4完全冗余的结构同时支持FC和iSCSI46AS500应用案例-国务院新闻办公室（FC SAN）？山东移动？北京石景山政府？安徽省信息产业厅？黑龙江省委党校？山东大学？老师的数学系？ ... 47AS500推荐的Application-IP SAN和FC SAN某些具有高性能要求的服务器通过FC连接到大量服务器. 通过IP连接性能按需分配性能要求较低的服务器. 共享存储可实现最佳性价比. 48谢谢大家！

本文来自电脑杂谈，转载请注明本文网址：
http://www.pc-fly.com/a/jisuanjixue/article-222037-1.html