Chinaunix

标题: TOP500榜单看中国HPC发展瓶颈，何时HPC发展看中国？（获奖名单已公布-2014-3-6） [打印本页]

作者: send_linux 时间: 2014-01-08 15:28
标题: TOP500榜单看中国HPC发展瓶颈，何时HPC发展看中国？（获奖名单已公布-2014-3-6）
获奖名单已公布，详情请看：http://bbs.chinaunix.net/thread-4130539-1-1.html

背景介绍：
近些年，我国的超算水平正在逐年提升，中国自主研发的超级计算机已经两次获得TOP500排名的第一位。如今超级计算机对于我们的日常生活也产生了深刻的印象，从天气预报到工业设计，超级计算机正在逐步融入我们的生活。

讨论话题：
1、除了超算硬件的蓬勃发展之外，在应用方面中国也正在不断提升。从具体的使用来说，HPC在应用上有哪些特点？目前遇到的主要问题和瓶颈在哪里？一台超级计算机从采购立项到应用部署，哪些方面有所改善？高性能计算机集群从采购立项到应用部署，哪些方面有所改善？

2、应用软件方面，目前您主要使用那些HPC软件，目前使用的情况怎么样？是否使用过国产的一些软件？对国内自主开发HPC应用软件有什么建议？使用过那些国内的方案实施商和软件商？

3、并行计算已经成为了高性能计算发展的一个重要方向，不少厂商也推出了各自的加速解决方案。对目前出现的HPC新趋势，如至强融核协处理器、高密度共享架构系统、流动缓存等技术，您是怎么看待的？会在近期的方案实施中采用吗？

活动时间：
2014年1月8日-2014年1月24日

本期奖品：
1、优秀参与奖，奖励价值100元32G的U盘一个
2、积极参与奖，奖励价值50元的鼠标一个，共计8个

活动要求：
1、要言之有物，不能低于20个字，我们鼓励大家提供优质的内容回复，畅谈对于HPC领域的看法和观点，纯粹灌水将不能参与获奖。
2、本次话题主要关注HPC行业和技术交流，其他问题可能不做重点

PS2:第五届中国数据库技术大会（DTCC2014）又将与大家见面了！届时将会有更多技术话题与大家沟通，欢迎大家参与！！！

专题地址：http://dtcc.it168.com/

作者: chenyx 时间: 2014-01-08 16:25
好活动,沙发支持,稍后编辑

作者: 或者是2012 时间: 2014-01-08 16:30
我可以参加活动么？

作者: fengzhanhai 时间: 2014-01-08 16:32
高深莫测啊，没接触过这一行业，坐等大牛

作者: Hongqiyaodao 时间: 2014-01-08 16:51
提示: 作者被禁止或删除内容自动屏蔽

作者: xike2002 时间: 2014-01-08 17:12
好活动，支持一下！

作者: qingduo04 时间: 2014-01-08 17:53
好活动，支持一下！

作者: to407 时间: 2014-01-08 18:00
这两年big data/cluster 和 cloud storage的很多概念开始影响HPC, 在network和storage方面灵活性比之前大多了. 这个在之前都算得上不小的瓶颈,

国内其实现在这方面需求变大了, 不仅是国家的基础项目变多, 像航空航天,军事,气象等作用以外, 互联网行业, 传统行业在运用大数据做规划时候, HPC 的成本也在降低, 也是渐渐可以考虑的了

作者: q1208c 时间: 2014-01-08 19:44
在天朝, 拥有最多服务器的, 是互连网公司, BAT 这样的公司. 但是, 这些公司里的技术人员, 多数都已经被 "互连网" 化了. 一门心的搞什么云计算. 根本无心去搞 HPC.

最近几年, "大数据" 浮出水面, 所以, 数据分析才渐渐被认可, 不过, 便宜了 Yahoo 的 Hadoop, 因为简单, 入门要求低. 而一旦用上之后, 懒人的思维就主导了一切, 所以, 一味的增加node数, 根本没人有打算去改变这一现状.

我对 HPC 的了解不是太多, 毕竟不是科班出身, 对于这样专业的领域, 所知有限. 但就目前中国的现状来看, 除了国家出钱, 别的人, 是不太会去搞 HPC 了.

作者: forgaoqiang 时间: 2014-01-08 22:36
HPC的掌机很牛X的样子围观下先~

作者: send_linux 时间: 2014-01-08 22:46

forgaoqiang 发表于 2014-01-08 22:36
HPC的掌机很牛X的样子围观下先~

啥/？掌机？

作者: 2009532140 时间: 2014-01-09 08:19
本帖最后由 2009532140 于 2014-01-28 10:38 编辑

1、除了超算硬件的蓬勃发展之外，在应用方面中国也正在不断提升。从具体的使用来说，HPC在应用上有哪些特点？
目前遇到的主要问题和瓶颈在哪里？
一台超级计算机从采购立项到应用部署，哪些方面有所改善？
高性能计算机集群从采购立项到应用部署，哪些方面有所改善？
①:　高效能运算的服务器在大多数的时间都呈现高负载
②：软件和应用远远落后于硬件，软件和应用已经成为HPC技术发展的主要障碍。为了充分发挥高性能计算机的作用，必须开展并行计算研究，通过使高性能计算机各个部件尽可能并行工作，提高速度和效率。
③④：并行算法研究、并行软件设计和并行应用开发，而针对落后的现实、加强并行计算的研究已经成为推动HPC发展关键和核心。

2、应用软件方面，目前您主要使用那些HPC软件，目前使用的情况怎么样？
是否使用过国产的一些软件？
对国内自主开发HPC应用软件有什么建议？
使用过那些国内的方案实施商和软件商？
Neusoft的研究院不是谁都能进，能了解点就不错了~至于是什么软件，不晓得...

3、并行计算已经成为了高性能计算发展的一个重要方向，不少厂商也推出了各自的加速解决方案。对目前出现的HPC新趋势，如至强融核协处理器、高密度共享架构系统、流动缓存等技术，您是怎么看待的？会在近期的方案实施中采用吗？
这些都是不错的发展研究方向。随着研究的深入和竞争的加剧，各个领域越来越多地使用模拟的方法来解决科研和生产中的实际问题。模型膨胀、并且对计算的精度的要求越来越高、对HPC性能要求也越来越高。这种周而复始的高要求，随之对应的就是协处理器、高密度共享架构系统、流动缓存等技术的产生。至于哪种技术能在规定的时间内完成任务，可能就占有了市场，否则就失去了计算的价值，甚至造成极其严重的灾难性影响。短期内会有相应的方案在实施中采用。

作者: humjb_1983 时间: 2014-01-09 08:53
围观，支持！！

作者: qidunhu 时间: 2014-01-09 09:45
目前我们公司正在使用HPC集群，节点数不是太多，计算效率还可以。

作者: qidunhu 时间: 2014-01-09 09:48
本帖最后由 qidunhu 于 2014-01-09 09:48 编辑

主要还是没有国产的作业调度系统，基本上都是SGE(被oracle收购后，更名为OGE，还是原来的配方，还是熟悉的味道)，LSF(IBM的，据说很贵)，PBS等。

作者: send_linux 时间: 2014-01-09 14:01

qidunhu 发表于 2014-01-09 09:48
主要还是没有国产的作业调度系统，基本上都是SGE(被oracle收购后，更名为OGE，还是原来的配方，还是熟悉的味 ...

哈哈，说到点子上了哈，欢迎实际在使用HPC的技术专家们多多发表意见：）

作者: wangyb 时间: 2014-01-09 15:30
我已经使用HPC有3年多的光景了，也一直关注HPC。
愚见：
HPC其实多数和节点并行，以及能上top排行的名次，已经是很次要的了，至少不会太赚取我的眼球。
首先，HPC的应用软件还十分匮乏，缺少大师级的产品。很多软件，还需要大量的知识，才能发挥hpc的一点儿优势。
然后，我觉得我用点时间，也可以组装出和top上的hpc几乎一样的hpc。虽然我没有尝试过，因为我没那么多钱。给我钱，我也能攒个这样的机器。因为我在虚拟机上已经测试过了，剩下的就是往上叠加节点。
另外HPC的安全问题也是很关键的，因为大家都是在一个“群”里运行，内存和cpu是共用的，而且一个节点出问题了，所有节点都会暴漏无疑。
还有，没有还有了，就是国家还是少上top吧，浪费老百姓的钱。

作者: forgaoqiang 时间: 2014-01-10 02:55
⊙﹏⊙ 看错了这里指的应该是 High Performance Computing Cluster

没有条件接触相关的技术只能看下有实际经验的怎么说~

send_linux 发表于 2014-01-08 22:46
啥/？掌机？

作者: fl3w 时间: 2014-01-10 12:35
支持一下。

作者: beyondfly 时间: 2014-01-11 02:07
1、除了超算硬件的蓬勃发展之外，在应用方面中国也正在不断提升。从具体的使用来说，HPC在应用上有哪些特点？目前遇到的主要问题和瓶颈在哪里？一台超级计算机从采购立项到应用部署，哪些方面有所改善？高性能计算机集群从采购立项到应用部署，哪些方面有所改善？

   超级计算机一般是国家层面的，主要用于气象，测绘之类的大型计算应用。当然，如果是一些小的科研单位有这方面的需求，可以向超级计算机拥有机构提出申请，租用部分的计算性能，我觉得这是超级计算机的一个很好的应用，HPC也一样。

2、应用软件方面，目前您主要使用那些HPC软件，目前使用的情况怎么样？是否使用过国产的一些软件？对国内自主开发HPC应用软件有什么建议？使用过那些国内的方案实施商和软件商？
   没有使用过

3、并行计算已经成为了高性能计算发展的一个重要方向，不少厂商也推出了各自的加速解决方案。对目前出现的HPC新趋势，如至强融核协处理器、高密度共享架构系统、流动缓存等技术，您是怎么看待的？会在近期的方案实施中采用吗？
      新技术的发展，并将推动HPC不断前行。会不会在未来的方案中采用，应该是不会

作者: hexilanlan 时间: 2014-01-11 09:50
本帖最后由 hexilanlan 于 2014-01-14 11:55 编辑

2008年参加了1个高性能计算的会，啥也没听明白。
就听了些介绍，现在也不太记得了。。
只记得罗列了一些NB的机器（貌似深腾）、并线计算、各种算法；就在这个会上，第一次知道了单条内存也能有128GB。。。
搞这些都是有钱的主啊。。

作者: Juice12 时间: 2014-01-13 16:13
我现在的公司有这个东东，节点都是HP x86的服务器，单台cpu 2至8个，内存48至500多G，有30多台节点，用的是IBM platform LSF 软件，不知道这个算啥规模？

作者: yybmsrs 时间: 2014-01-14 14:16
1、除了超算硬件的蓬勃发展之外，在应用方面中国也正在不断提升。从具体的使用来说，HPC在应用上有哪些特点？目前遇到的主要问题和瓶颈在哪里？一台超级计算机从采购立项到应用部署，哪些方面有所改善？高性能计算机集群从采购立项到应用部署，哪些方面有所改善？

HPC的应用感觉需要大量的计算，如CPU等，主要在天气预报等科研领域，价格太贵，性能太高，应用太少，用处不多。不懂

作者: send_linux 时间: 2014-01-14 19:04

Juice12 发表于 2014-01-13 16:13
我现在的公司有这个东东，节点都是HP x86的服务器，单台cpu 2至8个，内存48至500多G，有30多台节点，用的是 ...

说说使用经验呢？

作者: Juice12 时间: 2014-01-15 09:41
回复 24# send_linux

我也不懂，这个不在我工作范畴内，另外一个team维护的{:3_182:}

作者: kokkokkko 时间: 2014-01-15 15:29
听说过没见过,过来看看

作者: jimmy-_-lixw 时间: 2014-01-16 17:47
本帖最后由 jimmy-_-lixw 于 2014-04-05 21:11 编辑

..........

作者: zhouhuaooo 时间: 2014-01-21 17:28
其实云计算也是高性能计算的一个范畴，hpc 最为关键的还是在应用上，特别是在如下几个领域：制造业，气象研究、基因研究、探索外来信息等等方面
制造业一个典型的是汽车制造，发动机的研究、碰撞、流体力学等等都需要高性能计算机的辅助，所以随着硬件价格的下降，将会有越来越多的企业掌握高性能计算
带来的益处！

作者: jackyyen 时间: 2014-01-23 09:41
不懂，随便说说。随着集群技术的发展，HPC面临的压力会很大吧。不过，好在HPC有自己的圈子。象我们作的应用，以WEB服务为主，主要面临的问题，还是大量并发用户压力。通过使用集群技术，增加些服务器，就很好地解决了。

作者: duli2888 时间: 2014-01-26 12:15
对这个不是很懂，积极参与一下，等大牛解答。。。。

作者: shang2010 时间: 2014-02-02 17:30
超级计算机，在互联网行业就是团渣，

作者: send_linux 时间: 2014-02-04 10:14

shang2010 发表于 2014-02-02 17:30
超级计算机，在互联网行业就是团渣，

人家也没说互联网行业是他们的主要应用行业啊

作者: xuleicsu 时间: 2014-02-08 15:31

send_linux 发表于 2014-02-04 10:14
人家也没说互联网行业是他们的主要应用行业啊

讨论还有效吗？我有话说

作者: send_linux 时间: 2014-02-09 09:40
回复 1# send_linux

HPC最近这几年发展的还是很迅速的

作者: wang290 时间: 2014-02-09 10:33
从超级计算机的架构来说，服务器只是其中的一个部分，包括存储和网络也是必不可少的组成部件。可是现在大部分人看超算，还是停留在计算能力上

作者: wang290 时间: 2014-02-09 10:35

qidunhu 发表于 2014-01-09 09:45
目前我们公司正在使用HPC集群，节点数不是太多，计算效率还可以。

贵公司是哪个行业的？
HPC目前最适合的还是计算等行业的吧，目前流行的大数据什么的，还是不适用吧

作者: wang290 时间: 2014-02-09 10:39

Juice12 发表于 2014-01-13 16:13
我现在的公司有这个东东，节点都是HP x86的服务器，单台cpu 2至8个，内存48至500多G，有30多台节点，用的是 ...

这个规模不算大，主要是看你现在跑的任务量如何？如何利用好HPC是个问题

作者: wang290 时间: 2014-02-09 10:40

jackyyen 发表于 2014-01-23 09:41
不懂，随便说说。随着集群技术的发展，HPC面临的压力会很大吧。不过，好在HPC有自己的圈子。象我们作的应用 ...

HPC的应用范畴和你说的web访问的需求是两个不同领域的，互联网方面的IT业务压力，HPC估计一时半会是帮不上忙的

作者: wang290 时间: 2014-02-09 10:50

Hongqiyaodao 发表于 2014-01-08 16:51
美帝封锁整机，幸好不封锁cpu，不然狗剩也用不了吧

不是有龙芯CPU的HPC么？
国产自主品牌！

你懂的

作者: lemoncandy 时间: 2014-02-09 10:57

send_linux 发表于 2014-01-08 15:28
背景介绍：
近些年，我国的超算水平正在逐年提升，中国自主研发的超级计算机已经两次获得TOP500排名的第一 ...

HPC项目是一个复杂的工程，从立项要使用，再到高效利用绝不是一蹴而就的，可是很多客户在这方面太依赖厂家了
很多本身行业特点的计算需求，是厂家无法帮你模拟出来的，只有靠自己慢慢摸索才能够建立好适合自己的HPC

作者: Hongqiyaodao 时间: 2014-02-09 13:08
提示: 作者被禁止或删除内容自动屏蔽

作者: 流氓无产者 时间: 2014-02-10 09:01
看看大家怎么吹，只要不是实际应用，中国玄学是很有市场的

作者: qidunhu 时间: 2014-02-12 15:18

wang290 发表于 2014-02-09 10:35
贵公司是哪个行业的？
HPC目前最适合的还是计算等行业的吧，目前流行的大数据什么的，还是不适用吧

我们公司是属于生命科学领域的，但不是纯粹的大数据，指数数据量比较大，不符合 big data的定义

欢迎光临 Chinaunix (http://bbs.chinaunix.net/)