多亏它,让大家做好“山竹”来袭的准备【Make It Real故事汇】


不得不说台风“山竹”来得快去得也快

周日广东多个城市还在接受狂风暴雨的洗礼

周一上班族就开启了通勤路上的“披荆斩棘

天气情况的变化自古就影响着民生大计

在古代,人们常依据风向、动物异象等预测台风,比如“东风转北,搓绳缚屋”,大量浅海鱼类上浮,较大的深海鱼来到浅海等信号,来判断台风是否来临,并做好准备。

然而由于技术条件限制,古时的台风预测的准确性和时效性都较差,因而每次台风对沿海居民来说都是一场灾难。

而今天,我们不仅看到台风在哪里出生,还能预知台风走向何处


这要多亏于HPC(高性能计算)这一气象应用领域的法宝,通过应用卫星、雷达、自动观测站等一系列探测工具获取实时数据,再通过数值模式,对天气变化过程进行深入的模拟研究和预报试验。HPC在气象预报预测业务中有着核心支撑地位,能有效起到保护生命、预防财产损失

古有“草船借箭”的故事给诸葛亮博得“神机妙算”的美名。如今,“神机妙算”的重任由HPC接任,而且除了气象预测,HPC在地震预测、碰撞试验、生命科学,甚至零售、制造、金融领域等都发挥着重要且不可替代的作用

640?wx_fmt=png


关于HPC,今天为大家介绍上海交通大学(以下简称上海交大)的HPC项目


2017年9月,教育部发布世界一流大学和一流学科建设高校及建设学科名单(简称“双一流”)。上海交大成功入选。在“双一流”建设方案中,上海交大确立了三个阶段目标:到2020年跻身世界一流大学行列,若干学科进入世界一流前列;2030年进入世界一流大学前列,若干学科方向具有世界领先地位;2050年建成卓越的世界一流大学。

而要支持上述三阶段目标,上海交大首先升级了其高性能计算(以下简称HPC)系统,以保障生命科学、仿真设计等重点学科的科研和教学。

HPC助推上海交大“双一流”建设


“双一流”与HPC:上海交大入选“双一流”,与其强大的科研实力和坚实的基础科研平台建设密不可分。其中HPC对于上海交大多个学科建设和科研工作的推进起到至关重要的作用。例如,针对生命科学,HPC可以用来进行生物分子的结构测定、生物信息学类计算、分子动力学类计算和计算机辅助药物类计算等,从而满足上海交大在这一领域的科研项目需求。

针对工程仿真,HPC的用途更多,如用来舰船/车辆等大型产品整体结构静力、动力响应、安全性分析等;大坝/超高层建筑/桥梁等大型土木建筑结构地震响应分析,水流/风载/通风计算等。

640?wx_fmt=gif

总体而言,上海交大HPC系统的建立,在满足其自身在科研、学科以及重要课题研究等方面高端需求的同时,还助力上海交大在“双一流”建设中成为前沿学术科技的创新主阵地,从而跻身世界一流大学行列。

开展“双一流”建设

上海交大HPC系统亟待升级

 


随着“双一流”建设的推进,上海交大的科研项目越来越多,HPC系统每年要为数百个科研项目提供2300万核小时甚至更多的计算能力,并且众多科研项目带来的庞大数据量对IT资源的需求也越来越大,这给从成立之后一直没有升级的 HPC系统带来了巨大压力:

存储容量达到“红色警戒”:理工科是上海交大的强项,如物理、天文、生命科学等自然科学以及一些新兴学科都是使用 HPC 较多的学科。这些学科的课题研究本身对于数据的要求较高,产生的数据量也较大。上海交大HPC系统建成时,系统的可用容量为500 多TB,而不到一年,存储利用率就超过90%,已经达到存储需求的“红色警戒”。并且数据量还在不断攀升,存储已经成为整个HPC系统的性能和容量瓶颈。

集群计算性能不稳定:为了支撑海量的计算任务,上海交大的HPC系统配备了332个CPU节点,130块GPU加速卡和65个GPU加速卡节点。但由于HPC 存储性能的不稳定,在大规模并行计算读写大量小文件操作方面,速度仍然较慢,从而拖慢整个数据的处理进程。上海交大需要能够弹性扩展计算资源,以不断提高存储的吞吐量和性能,从而为整个HPC系统提供有力支持。

640?wx_fmt=gif

系统运维管理“拖后腿”:上海交大的HPC系统作为校级平台,要为全校所有院系的科研和教学项目提供支持。这就要求能够对HPC集群进行集中、透明的部署、管理、监控和调度,在大幅提高计算能力的同时,加速应用处理。然而上海交大缺乏专业的运维团队,且现有HPC系统管理的复杂性还带来整个HPC系统运维过程中高故障率,严重影响用户体验的流畅性

戴尔易安信

为上海交大HPC升级保驾护航



尔易安信借助安装了Intel EE for Lustre 软件的HPC存储解决方案,为上海交大搭建了一个高性能、高可靠HPC系统,满足科研及教学项目的计算和存储需求。

消除容量瓶颈:上海交大HPC新系统配备了戴尔易安信PoweEdge服务器和高密度磁盘阵列,向上扩容可达180块硬盘。新系统上线后,系统容量提升三倍,可投入使用的存储容量达到2PB,后续还会继续扩容至 3PB,为未来业务发展提供了保障。例如,生命科学学院基因测序课题组在进行项目研究时,再也不受原来系统在容量或性能上的限制,已经在新的系统上新增存储100TB。

满足各种项目性能需求:戴尔易安信双控制器高速连接、高性能RAID以及GPU,保证了上海交大各类科研项目对HPC环境中高性能处理能力需求。此外,戴尔易安信磁盘阵列自带高性能层许可,通过自动分层处理满足对象存储管理数据的性能要求,加快小文件读写速度。相比旧系统,新系统运行更为稳定,例如,在进行基因测序分析时,课题组成员可以同时利用100 多个节点来完成高通量的分析任务。

640?wx_fmt=gif

管理运维自动化减轻管理负担:Intel文件系统(IML)提供了智能、丰富且直观的统一web管理界面,管理运维人员无需专业技能即可轻松查看整个系统的吞吐量和故障点。并且当出现故障时,管理员只要远程登录到管理界面,通过实时、近实时监控,迅捷完成故障恢复,这为各院系课题组科研和教学的正常、顺利进行提供了保障。

640?wx_fmt=png

戴尔科技集团加速HPC在各行业着陆


戴尔科技集团在HPC领域的独特优势


在数字化转型过程中,由于数据量激增和企业创新驱动发展所带来的业务模式和应用模式的变化,使企业对IT计算性能的需求不断提升,而HPC正是能解决企业难题的有力手段。不同行业和不同企业对HPC的需求各不相同,而功能强大和复杂的传统HPC解决方案未必适合所有的企业。作为在IT企业级市场领军的厂商,戴尔科技在HPC领域的独特优势,加速HPC在各行业着陆,包括

  • 加速开源落地:戴尔科技是OpenHPC创始成员之一,加速开源在HPC方案落地的能力。

  • 中国战略投入:戴尔科技在北京建立了高性能计算创新实验室,可帮助中国的用户实现软硬件的测试、验证和创新。

  • 全球资源整合:戴尔科技通过全球战略联盟,结合HPC咨询和服务,保证用户在HPC方面的投资回报,确保HPC业务稳定安全。

  • 开放产品方案:戴尔科技提供一系列基于开放技术的HPC端到端产品和针对典型行业HPC简化方案,保证高可扩展HPC的稳定安全,让更多中小企业将HPC作为业务创新引擎。

  • 高性能生态链:戴尔科技将推动中国数字化转型IT生态链作为战略,通过云联盟、与中科院自动化所的深度学习战略合作,根据中国市场需求,打造HPC生态环境,简化HPC部署和使用,提高HPC创新和管理效率。


戴尔科技HPC 解决方案


研究领域HPC解决方案:包括PowerEdge机架式服务器C4130;英特尔Xeon Phi处理器或NVIDIA GPU;基于英特尔Lustre的分布式存储;Dell Networking高性能以太网或Infiniband网络;Bright Cluster Manager集群管理软件。

640?wx_fmt=gif

生命科学HPC解决方案:模块化C6320服务器;PowerEdge 服务器作为大内存节点;基于Lustre存储方案或NFS存储方案,或Dell EMC Isilon存储方案;Dell Networking 和 Mellanox InfiniBand 交换机。

制造业HPC解决方案:Precision工作站。

深度学习HPC解决方案:“诸葛·深知”。

640?wx_fmt=jpeg

戴尔科技集团不断提升创新能力进行产品布局,同时整合优秀资源,率先推出了针对研究领域、生命科学、制造业、深度学习等领域的高性能方案;并且戴尔科技集团积极联合领先的合作伙伴,采纳社区标准,推动高性能计算平台生态圈的建立,全方位将高性能计算市场化、商用化、普及化,满足各种层次各行业用户的应用需求,帮助更多的企业和机构实现创新驱动发展。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/525498.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

华为matepad 鸿蒙,曝华为4月27日召开高端平板发布会:MatePad Pro2将亮相 首发鸿蒙系统...

去年五月份,华为推出了Mate系列首款平板电脑——华为MatePad Pro,该机搭载了业内顶级的硬件配置,配合华为专门针对大屏设计适配的系统,带来了非常优秀的使用体验,饱受消费者好评。现在,华为新一代高端平板产…

Python 字典推导式 - Python零基础入门教程

目录 一.Python 字典推导式简介二.Python 字典推导式语法三.Python 字典推导式实战 1.在字典中提取或者修改数据,返回新的字典2.在字符串中提取数据,返回新的字典 四.重点总结五.猜你喜欢 零基础 Python 学习路线推荐 : Python 学习目录 >> Pytho…

Cloud一分钟 | 阿里云发布飞天2.0操作系统;京东云串联生态伙伴专治“看病难”...

Hello,everyone:9月28日早,星期五,祝大家工作愉快!一分钟新闻时间:完01微 信 群 添加小编微信:tangguoyemeng,备注“进群公司职位”即可,加入【云计算学习交流群】&…

Python 不定长参数 *argc/**kargcs - Python零基础入门教程

目录 一.前言二.Python 不定长参数 argc/*kargcs 简介 1.函数不定长参数 *args 使用2.函数不定长参数 **kwargs 使用3.函数不定长参数*args 和**kwargs 只能放在形参的末尾,顺序不能错. 三.Python 不定长参数 argc/*kargcs 实战四.Python 不定长参数 argc/*kargcs …

外卖小哥是怎样炼成的?

图片来源:网络作者小鹏/陈万成/阮田来源城市数据团原创作品,如有转载,请联系公众号授权。在中国,外卖用户规模已达3.6亿,日均订单量上千万。为了服务这些嗷嗷待哺的食客,有超过百万数量的外卖骑手奔波在全国…

Python 匿名函数 lambda - Python零基础入门教程

目录 一.Python 匿名函数 lambda 语法二.Python 匿名函数 lambda 调用 1.lambda 匿名函数常规使用2. lambda 匿名函数使用不定长参数3. lambda 匿名函数作为参数使用 三.Python 匿名函数 lambda 重点总结:四.猜你喜欢 零基础 Python 学习路线推荐 : Python 学习目录…

必须建筑师附体!像盖大楼那样打造数据即服务

近两年产业界总用“数据洪流”来形容数据的大爆发,但如果我们真把它视作洪水,那么它只会带来冲击;如能积极发掘其潜藏的价值,它则可能变成一条流金之河,正如麦肯锡在研究中发现的那样:与竞争对手相比&#…

华为鸿蒙用着怎么样,首批华为鸿蒙用户体验如何?“差评”有点难听,但是很真实!...

为了实现国产替代,打破海外企业对操作系统的垄断。华为集团推出了鸿蒙操作系统,这是一款真正意义上的国产操作系统,可以从一定程度上突破海外企业对手机操作系统的限制 。当然,一款操作系统的发展需要广大用户的支持,尽…

Python return逻辑判断表达式 - 零基础入门教程

目录 一.return 逻辑判断表达式 and二.return 逻辑判断表达式 or三.return 逻辑判断表达式 and 和 or 配合使用四.return 逻辑判断表达式重点总结五.猜你喜欢 零基础 Python 学习路线推荐 : Python 学习目录 >> Python 基础入门 一.return 逻辑判断表达式 and and&…

用 Python 分析《斗破苍穹》,分析其究竟是烂片无疑还是沧海遗珠?

作者 | 量化小白H责编 | 郭芮近期根据小说《斗破苍穹》改编的同名电视剧正在热映,本文对《斗破苍穹》进行文本分析,分为两部分。首先爬取豆瓣影评进行简单分析,随后对于原创小说文本中的人物进行详细分析。影评分析爬取影评使用的也是之前《用…

Python input 函数 -Python零基础入门教程

目录 一.前言二.Python input 函数简介三.Python input 函数实战四.猜你喜欢 零基础 Python 学习路线推荐 : Python 学习目录 >> Python 基础入门 一.前言 Python 内置函数其实挺多的,其中 input 和 eval 算得上比较特殊,input 属于交互式内置函数…

综评:5个方面看刚刚发布的Kubernetes 1.12

Kubernetes项目在过去几年中发展迅速,并且作为容器编排和管理解决方案的领导者而备受尊重。有了这个地位,Kubernetes开发者有责任提供经过充分测试,易于维护,高性能和可扩展的API和工具。在即将到来的每个发布周期中,大…

华为麒麟1020鸿蒙系统,华为P50pro最新确认:麒麟1020+立体全面屏+鸿蒙系统,这才是华为...

原标题:华为P50pro最新确认:麒麟1020立体全面屏鸿蒙系统,这才是华为华为P系列一直是领导华为手机上半年的发展,而今年的华为P40系列更是实现了大爆发,市场上手机销量不断的攀升,并且权威的科技评测也给出了…

干货 | 算法和编程面试题精选TOP50!(附代码+解题思路+答案)

作者 | javinpaul编译 | 王天宇、Jane整理 | Jane【导读】之前我们给同学们推荐了很多关于 Python 的面试资源,大家都表示很有用。这次营长表示要翻 Java 的牌子啦~ 应大家的强烈反馈,我们找了一套 Java 语言的算法和编程的面试题。这份面试资源主要包含…

Python map 函数 -Python零基础入门教程

目录 一.前言二.Python map 函数语法简介三.Python map 函数实战 1.使用 map 函数2.map 函数配合 lambda 匿名函数一起使用 四.Python map 函数效率对比五.Python map 函数总结六.猜你喜欢 零基础 Python 学习路线推荐 : Python 学习目录 >> Python 基础入门 一.前言 截…

鸿蒙os2.0开发者beta版,鸿蒙 OS 2.0 开发者beta版针对Mate 40系列设备开放

华为开始针对包括P40,Mate 30和MatePad Pro设备在内的设备招募HarmonyOS 2.0 Mobile开发人员beta版。招募之后,华为还开始向选定的测试人员推出HarmonyOS 2.0移动开发人员更新。根据最新信息,华为现已决定扩展适用于华为Mate X2可折叠手机&am…

python2版本libnum

如果运行RsaCtfTool工具 需要用到libnum,而网上基本上都是python3的libnum讲解,下面我就来说说python2的libnum https://github.com/ryanInf/python2-libnum 这个链接讲述的是python2的libnum模块 安装 git clone https://github.com/ryanInf/python2-l…

1.7亿条数据,比胡同和撸串更真实的北京

作者王越来源DT财经原创作品,如有转载,请联系公众号授权。“宇宙中心”是哪里?哪里又是北京的城市活力中心?北京究竟是一座怎样的城市?是汇聚了政治中心、国际交往中心、科技创新中心等多项顶级职能的大国之都,是拥有…

Python 文件读写操作-Python零基础入门教程

目录 一.Python 文件的打开 open二.Python 文件的关闭 close三.Python 文件的读取 read 1.read 函数2.readline 函数3.readlines 函数 四.Python 文件的写入 write 1.write 函数语法2.write 函数使用案例 五.Python 文件偏移 seek 1.seek 函数2.tell 函数3.seek / tell 函数示…

面趣 | 为什么要分稳定排序和非稳定排序?

作者channingbreeze如需转载,请联系原作者。小史是一个应届生,虽然学的是电子专业,但是自己业余时间看了很多互联网与编程方面的书,一心想进BAT互联网公司。今天他去了一家互联网小巨头公司面试了。没想到面试并不像想象中的顺利。…