专访赵开勇:高性能计算未来发展格局

标签: 业界 | 发表时间:2013-01-09 09:37 | 作者:张祺
出处:http://news.csdn.net/yejie/

赵开勇:基于移动设备的高性能计算将会成为未来潮流

赵开勇,香港浸会大学计算机在读博士,长期从事高性能计算领域研究,在CPU、GPU异构计算方面有多年的研究经验。浪潮高性能计算顾问,组织参与国内多个科研单位和高性能用户的高性能项目开发。

高性能计算未来发展格局

CSDN:过去几年,并行计算的技术演变、应用的拓展,以及未来发展分别是什么?

赵开勇:传统的并行计算机更多的是中型机和大型机,或者专门制造的特需机器,那个时候并行计算离大众还很远。并行计算的算法基本是在上世纪六、七十年代的时候开始,当时有很多研究文章,而且研究得很透彻。但在那时候,并行计算、高性能计算,离大众还比较远。

从2000年左右开始,计算芯片、存储、网络的发展使得之前昂贵的计算机变得廉价。由于像Google这类公司的算法的演变,使得廉价的PC架构的机器构建出的服务器集群就可以完成高性能计算。当然我们这里讨论的并行计算,其实只是高性能计算的一种方法而已,并行计算通常是指许多指令一起执行,是针对串行计算而言的。

现在的高性能计算,既有并行计算,也有串行计算,概念更加的广泛,而不局限于传统的并行计算。从2000年左右开始,有科研者采用GPU作为通用计算。到2006年,Nvidia推出通用计算的GPU,打破了传统基于CPU(或者专用协处理器)的高性能计算,让民众更接近高性能计算(并行计算),并且可以采用廉价的芯片达到高性能计算的目的。

在传统CPU芯片方面,也通过增加CPU的核心来提高计算性能,从以前的单核、双核到多核,再到Intel前不久推出的MIC架构的众核芯片,都标明了计算芯片再向多核心方向发展。另一个方面,基于AMD的APU架构芯片,兼备CPU和GPU,让CPU和GPU可以通过更便捷的方式共享内存,达到协作处理的目的。

此外,内存的价格越来越低,基于内存的存储会在将来的高性能发展中起到重要的地位。我们在高性能计算中常常会遇到IO的瓶颈,很难真正发挥所有计算芯片的能力,内存等存储的廉价也会在这些问题上得到一些解决。随着网络传输的发展,性能的提高,也会在将来的高性能计算中起到决定的因素。

CSDN:你如何看待未来的芯片格局?

赵开勇:传统的CPU会长期存在,但是 高性能计算的地位会下降,会有GPU、CPU(不同类别的CPU,x86体系结构,基于ARM的CPU)都会逐步跟上。Intel的高性能计算的地位有所动摇,Nvidia的GPU和ARM64架构的芯片会埋头追赶,AMD的APU和基于ARM64的芯片也同样如此。同时基于移动设备的CPU、GPU也会具有高性能计算的能力。

在过几年,Intel的x86的CPU、MIC;Nvidia的GPU(还有ARM64架构的芯片,可能是CPU也可能是GPU,也可能是CPU和GPU的合体);AMD的CPU、GPU、APU,以及基于ARM的芯片,都会在高性能计算里面各争天下。 基于移动设备的高性能计算,也会成为一个潮流

还有一个重点是 低功耗、高性能,会在将来的高性能计算中会成为一个重要的指标

而国产的高性能计算芯片会在中国未来几年的舞台上发挥重要的作用,包括专业级的高性能计算中心,也包括民用级别的高性能计算机,都会国产的设备初露头角。

未来的元计算中心和高性能计算中心,基本上会成为一个实体、两个概念或是融合一起。硬件层次上不会有太多的区别,更多的是跑在服务器上的算法和应用。

其中,高性能计算的发展硬件只是一个方面,而且硬件的变革很快,这几年基本上是一年到一年半就h一个变化。所以在堆砌硬件的同时,一定要注意软件的开发、软件算法、框架的设计,做到发挥现有集群性能的同时,向后兼容。现在很多云计算中心,或者高性能中心,计算量达不到饱和,一年维护的费用和电费等超过了本身发挥的价值。 软件是高性能计算现在的短板,需要在高性能计算的软件上开展更多的工作。

CSDN:ARM+Hadoop在高性能计算领域的应用领域是什么?瓶颈是什么?

赵开勇:Hadoop在高性能计算中已经应用很广,基于ARM架构的Hadoop部署现在还比较少。ARM的优势是低功耗、高性能,但是其处于瓶颈,基于ARM的高性能计算核心还没有大规模的量产,或者说在业界还没有真正得到认可。基于ARM架构的高性能计算芯片,或许会在接下来的几年中大放异彩。

CSDN:你认为GPU与CPU的融合,最大的挑战在哪里?

赵开勇:GPU现在还是作为CPU的协作处理器存在,通过PCIE传输数据,这就是很严重的瓶颈。也许再过几年,CPU和GPU可以共享内存以后,传输的瓶颈会得到解决。

高性能计算是一个不断迭代的优化过程

CSDN:对并行计算从业者而言,请推荐几个好的开源框架和一定要去读的几本书,以及分享下你学习的好经验、好方法。

赵开勇:个人感觉,高性能计算有硬件和软件部分,对于一个整体系统,既要对系统的硬件,包括计算核心、存储和网络传输分布等都要有了解。这些方面可以看Intel、NVidia和AMD等厂商的技术手册,都可以看到一些计算核心的资料。

同时要了解高性能计算的应用层面,任何的高性能计算都不能大包大揽,用一个方案解决所有的问题。需要在对应的行业里面学习相关的知识,了解问题的根本,从问题的根本入手,从算法层面优化问题,不要套用固定的模型或框架。需具体问题具体分析,再抽象出来,看已有的框架是否可以解决,然后再优化设计。 高性能计算是一个不断迭代的优化过程,找到分析问题、问题的热点、解决问题、优化问题、再找新的热点,然后重复迭代的过程。高性能计算的领域不同,解决问题的方法也不一定相同,需要融汇各种方法和理论。

我个人推荐的书籍有陈国良院士的《并行计算系列丛书》、《并行算法导论/艾克萨威尔》等一些算法的书籍,对高性能计算(并行计算)有一些算法的了解,学会用并行计算的思维思考问题,解决问题。编程相关的就可以了解一下OpenMP、MPI、CUDA等编程方法。还有现在比较流行的并行计算框架、hadoop等,此类文档都可以再上网搜索。

既要了解最根本的算法,有算法的思想,同时深入了解问题的本质,然后再在编程实践中去解决问题,既有理论,也有实践,结合起来才最重要的原则。 空谈误事,实干兴业

CSDN帮我提升自身价值

CSDN:你曾是CSDN社区版主,在那段时间里对你的工作和学习有何帮助?你留下了什么深刻的回忆可分享?

赵开勇:通过解答网友的问题,可以更清楚的认识问题。有些问题自己一开始也不清楚,但是在回答问题的过程中需要查阅资料,也就把问题攻克了。同时,还可以跟很多业界的朋友进行沟通和交流,分享自己研究成果的时候,帮助大家的时候,其实也是在帮助自己。我最大的收获是在分享这些成果的时候,得到了大家的认可。 最深刻的影响是通过CSDN的博客分享、技术交流,让业界的各个高性能公司了解了我,包括Nvidia、AMD、浪潮、联想、曙光,以及Intel等。这些收获是在帮助别人的时候并没有考虑到的,后来回想这些收获,最重要的一点在于帮助别人,其实就是帮助自己。

CSDN:你对CSDN有何建议,你认为未来的社区有何期待?

赵开勇:在CSDN有大概有十年的感情,在这里认识了不少朋友,也希望可以成为技术交流的圈子,希望成为华人核心技术社区,成为国际品牌,而不止局限于国内,希望能走出国门,让更多的华人参与到这里面来。

相关 [性能 计算 未来] 推荐:

专访赵开勇:高性能计算未来发展格局

- - 业界
赵开勇:基于移动设备的高性能计算将会成为未来潮流. 赵开勇,香港浸会大学计算机在读博士,长期从事高性能计算领域研究,在CPU、GPU异构计算方面有多年的研究经验. 浪潮高性能计算顾问,组织参与国内多个科研单位和高性能用户的高性能项目开发. CSDN:过去几年,并行计算的技术演变、应用的拓展,以及未来发展分别是什么.

量子计算使未来原子钟更加精确

- Ra白菜 - 科学松鼠会
新一代原子钟的误差约为每370亿年1秒. 也就是说,经过从宇宙诞生到现在的时间,这个原子钟才会产生0.5秒的误差. 目前,最精确的时钟是科罗拉多州博尔德国家标准与技术研究所去年制造的量子逻辑钟,它的误差约为每37亿年1秒. 而未来采用新的改进方式的原子钟又可能将发生1秒误差的时间延长到370亿年,这比宇宙年龄的两倍还要大.

捕食者物体跟踪算法:未来的计算机操作界面

- 柏林 - cnBeta.COM
我刚刚看到了这个用来演示一种新的物体跟踪的算法的视频,它是一个博士论文里的一部分. Zdenek Kalal是英国萨里大学的一个捷克学生. 他演示的是他的神奇的精确定位系统,这个系统几乎可以跟踪镜头里的任何物体,只要你能看见它,并把它选中.

为什么Hadoop将一定会是分布式计算的未来?

- MAGI-CASPER/Peter Pan - 博客园-leftnoteasy
写本文由leftnoteasy发布于http://leftnoteasy.cnblogs.com 本文可以被全部或者部分的使用,但请注明出处,如果有问题,可以联系wheeleast (at) gmail.com, 也可以加我的新浪微博:http://weibo.com/leftnoteasy.   很久没有写写博客了,之前主要是换工作,耽误了很多的时间,让人也变得懒散,不想花大时间来写东西.

ARM掌门:未来计算领域英特尔只是小角色

- 洞箫 - cnBeta.COM
据国外媒体报道,芯片设计公司ARM CEO沃伦・伊斯特(Warren East)在接受媒体采访时预测,在未来的计算领域,英特尔只能当个小角色. 伊斯特表示,ARM在移动计算领域的主导地位将使英特尔成为小角色,“按影响力衡量,我们是全世界最有影响力的芯片设计公司”. 英特尔的营收超过ARM逾100倍.

计算机技术代替记者?连线:未来90%新闻将电脑化

- - TechWeb 今日焦点 RSS阅读
机写新闻报道能否胜过人工记者.   腾讯科技讯(中涛)北京时间5月2日消息,美国知名IT杂志《连线》记者史蒂芬·列维(Steven Levy)近日发表长篇评论文章称,虽然由计算机程序控制的新闻报道编写技术已取得了长足进展,且该技术很可能致使大量记者丢掉“饭碗”,但至少目前这种威胁尚未真正显现出来.    以下为列维文章全文:.

马云,为什么将云计算和大数据作为未来战略

- - 人人都是产品经理
前几天马云的一封未来战略信引起了笔者的注意,马云在信中提到云端将是移动互联网的关键,阿里未来10年的目标是建立DT数据时代中国商业发展的基础设施. 前些天还一直在推动阿里社交APP的马云,为什么会在这个节点突然提出云计算和大数据战略. 这显然是有预谋的,也许就是为了和阿里未来的战略目标相呼应,前两天阿里挤走了IBM,拿下了国内最大的IT服务商东软并签署了战略协议,而东软将逐渐把传统IT服务迁移到阿里云的云计算平台.

中国电信宣布未来将把云计算服务作为主业

- - 雷锋网
雷锋网消息,近日,在广东举办的第十二届天翼智能生态博览会论坛上,中国电信宣布未来将把云计算服务打造成为中国电信的主业. 同时,中国电信将采取混合多云的云网融合策略,不仅是中国电信自身网络与天翼云的深度融合,还是多云和多网的融合. 对于一家电信运营商来说,这无疑是一次具有历史意义的战略转变. 事实上,中国电信在云计算方面早有布局,自2012年正式推出“天翼云”以来,在政企、广电等领域打造了众多业务上云的实例.

通过预计算提高GIS服务性能

- - CSDN博客推荐文章
        在Esri的会议中,我们经常会举办有关加快地理信息技术Web服务的研讨会. 这其中最重要的建议就是尽可能的进行预计算. 在这一点上,我们会说明所谓的预计算的含义,同时提供给用户一些简单的方法,通过遵循这些原则来提高ArcGIS Server服务的性能.         服务器环境下预计算的重要性.

性能测试的主要概念和计算公式[转]

- - 企业架构 - ITeye博客
PS:下面是性能测试的主要概念和计算公式,记录下:.   一个系统的吞度量(承压能力)与request对CPU的消耗、外部接口、IO等等紧密关联. 单个reqeust 对CPU消耗越高,外部系统接口、IO影响速度越慢,系统吞吐能力越低,反之越高. 系统吞吐量几个重要参数:QPS(TPS)、并发数、响应时间.