微波EDA网,见证研发工程师的成长!
首页 > 微波射频 > 射频工程师文库 > 不同于网格 云计算中超算设计方案出台

不同于网格 云计算中超算设计方案出台

时间:06-28 来源:中关村在线 点击:

广泛企业计算、WEB应用,普适性更强;

  在对待异构性方面,二者的理念有所不同。网格计算用中间件屏蔽异构系统,力图使用户面向同样的环境,把处理异构部件的困难留给中间件来完成。而云计算实际上承认异构,用镜像执行,或者提供服务的机制来解决异构性问题。当然不同的云计算系统会存在差别,如Google一般用自己内部的专用平台来支持。

  总之,云计算是以相对集中的资源,运行分散的应用(大量分散的应用在若干大的中心执行);而网格计算则是聚合分散的资源,支持大型集中式应用(一个大的应用分到多处执行)。但从根本上来说,从应对Internet应用的特征来说,他们是一致的:为了完成在Internet情况下支持应用、解决异构性、资源共享等问题。

超级计算的分类
随着超级计算的不断发展,逐渐出现了新的应用。新应用在丰富了传统的网格计算种类的同时,也给网格计算带来了新的挑战。从网络的角度,将超级计算分为三大类:并行信息处理、分布式I/O处理和并行文件处理。

  1.并行信息处理

  并行信息处理指的是在所有计算节点并行执行应用,主节点管理各计算节点的输入处理,节点之间信息高速交互,通过"等-停"机制保证信息交互时序的正确性。通常是在追求最高计算性能的定制计算环境。这类应用就是通常所说的科学计算,包括:气候模型,材料科学,生物系统模型,核模拟和人工智能等等。

  这类应用的共同特点是对信息交互时延极敏感。对网络的要求是高带宽、低时延(Top500高端计算应用IPC时延<10us)。

  2.分布式I/O处理

  分布式I/O处理指的是客户端请求通过主节点发送到所有计算节点进行并行处理,各节点的结果直接返回主节点,由主节点响应给客户端。时延要求不苛刻,但是所有计算节点以最快速度响应主节点,使得主节点网络位置短时会产生较大突发流量。这类计算的典型应用就是网站搜索引擎。有信息显示:Google 每天需要提供1.5亿次查询服务,平均每毫秒发生1.736次查询。举例来说,搜索"高性能计算",得到3,250,000结果,用时0.20秒(第二次再搜0.05秒)。

  这类应用的共同特点是对网络丢包敏感。对网络的要求是高带宽、不丢包。对设备带宽、包缓存大小及分配方式有要求,与应用的具体规模(服务器数量等) 相关。

  3.并行文件处理

  并行文件处理指的是将庞大的源数据文件通过主节点分割成多个小文件后,分发到各计算节点并行处理,处理完毕后返回主节点进行文件组装。这类计算的典型应用就是动漫渲染和影视动画制作。将影视文件有机分割,分发到集群内相应服务器进行渲染等工作,各部分完成后返回组合成新的文件。

  这类应用的特点是节点之间信息交互少,但都是以大文件的形式完成。网络流量很大,且存在很强的并发性。对网络的要求是高带宽互联。

超级计算中心网络安全解决方案

  1.超级计算在云计算中的部署方案

  超级计算可以作为云计算的一种业务对Internet用户提供便捷的服务。从这个角度来看,超算中心可以作为云计算数据中心的一个部分。但是超级计算与云计算仍有较大区别,因此需要看作是特殊的云计算服务。超级计算作为"聚合"业务,是一种特殊的服务器集群应用。这种应用要求服务器自成系统,具体表现在:

  集群系统不能出现异构现象;

  集群内部的通信服务质量要求非常高,因此不能与其他业务共享业务通道;

  集群系统的安全级别很高,从接入区开始一直到超算区,要求与其他系统保持物理或逻辑隔离;

  集群节点的计算性能要求较高,一般不会出现虚拟机。因此,集群内部的通信流量并不会很大。

  综合各种需求,可以将超级计算中心和云计算数据中心的网络进行融合,进而对外提供统一的解决方案。如图1所示,将超级计算服务作为云计算一个独立的区,保证超级计算端到端的安全隔离,并在超级计算区内实现统一交换架构。该方案重点强调性能、安全、可靠和易用性设计。

  2.超级计算组网方案的高性能设计

  由于Infiniband具有高带宽、低时延转发的特点(通常可以低于10us,甚至达到纳秒级),传统的超级计算网络通常采用其进行组网。随着以太网的发展,以太网已在超级计算中心的网络中广泛应用。在高性能计算区域(HPC)TOP500集群中,采用千兆以太网的用户数量是采用 InfiniBand集群用户数量的两倍。

千兆以太网计算集群的优势是成本较低,但万兆以太网计算集群的性能远高于千兆。新一代万兆以太网网卡可以将服务器之间延迟降低到千兆网络延迟的八分之一,同时带宽获得更高的提升,几乎与InfiniBand速度不相上下。以H3C数据中心级交换机S12500为例,根据最新的Spirent测试报告显示,其万兆端口转发时延6~14us(盒

Copyright © 2017-2020 微波EDA网 版权所有

网站地图

Top