用SLURM优化超级计算机内的资源管理

为了在一个架构中提供最多的功能,SLURM 开源作业调度程序(由中国天河-IA ">超级计算机以及即将推出的 IBM® Sequoia 超级计算机采用)优化了资源分配和监视。本文将了解 SLURM 及其平行集群内的工作负载的方式。

超级计算机是军备竞赛的一个典型示例。随着现代超级计算机不断增强的性能扩展到新的问题领域,这些巨大的系统也在提供解决新问题的平台。超级计算机是国家和企业荣誉感的来源,因为公司和国家都致力于提高 LINPACK 的成绩。图 1 展示了过去五年间超级计算机军备竞赛的情况,同时 IBM Sequoia 超级计算机目前被预测为 2012 年内的领军者。如图所示,IBM Roadrunner 是第一台打破一直不变的千万亿次障碍的超级计算机(而 IBM Blue Gene®/L 则自 2004 年至 2008 年一直位居榜首)。

图 1. 超级计算机性能:2008-2012

早期的超级计算机目的在于为核武器建模。如今,它们的应用更为广泛,可处理气候研究、分子建模、大型物理模拟甚至强力的密码破译等领域内的大量计算问题。

1964 年至今

何为 LINPACK 基准?

为了对比互相竞争的超级计算机的性能,就创建了 LINPACK 性能基准。LINPACK 度量的是浮点运算的执行速度。具体而言,LINPACK 是一组用来解决密集的线性方程系统的程序。

通常认为,第一台超级计算机是 1964 年发布的(由 Seymour Cray 设计)Control Data Corporation (CDC) 6600。6600 使用硬件、Freon 冷却系统和能完成每秒浮点操作数为 3 百万的单个 CPU 填充了四个机柜。虽然并不缺少美感,但它的机柜却明显可见很多用于将外围单元处理器连接到单个 CPU 上以使其尽量繁忙的彩色电线。

快速发展至今,目前的超级计算机的领先者是日本的 Kei 计算机(由 Fujitsu 构建)。此系统注重于蛮力计算功能,使用了超过 88,000 个 SPARC64 处理器,占用了 864 个机柜。Kei 超级计算机的一个显著特点是突破了 10 千万亿次的障碍。与 CDC 6600 类似,Kei 使用的是水冷加气冷。

什么是超级计算机?

超级计算机不是关于任何特定的架构,它只是处在计算性能尖端的一种设计。如今,这意味着如果以 LINPACK 基准度量,该系统能够在千万亿次(或百万之四次方的 FLOPS)的性能范围内运行。

无论超级计算机如何实现这些 FLOPS,任何超级计算机架构的一个低层目标都是在有工作可做时最佳地保持计算资源忙碌。与 CDC 6600 用来保持其单个 CPC 忙碌的外围处理器类似,现代的超级计算机需要同样的基本性能。让我们来看这样一个计算节点资源管理的实现,其名为 Simple Linux® Utility for Resource Management (SLURM)。

SLURM 简介

SLURM 是一种可用于大型计算节点集群的高度可伸缩和容错的集群管理器和作业调度系统。SLURM 维护着一个待处理工作的队列并管理此工作的整体资源利用。它还以一种排他或非排他的方式管理可用的计算节点(取决于资源的需求)。最后,SLURM 将作业分发给一组已分配的节点来执行工作并监视平行作业至其完成。

本质上,SLURM 是一个强健的集群管理器(更关注于对功能丰富性的需求方面),它高度可移植、可伸缩至大型节点集群、容错好,而且更重要的是它是开源的。SLURM 最早是一个开源的资源管理器,由几家公司(包括 Lawrence Livermore National Laboratory)协作开发。如今,SLURM 已经成为了很多最强大的超级计算机上使用的领先资源管理器。

时间: 2024-11-03 21:22:44

用SLURM优化超级计算机内的资源管理的相关文章

卓大师一键ROOT新版功能:优化卸载内置程序

ROOT专家是一款运行于手机端的一键root权限获取工具,具备成功率高.免安装.上手简单等特点,支持市面上绝大多数旗舰手机以及国产品牌手机的一键root,2014年5月ROOT专家成功更名为卓大师一键ROOT,势必要把在手机上ROOT优势继续做大做强! 今天,卓大师一键ROOT发布了最新的2.1.4版,新版本着重提升Android4.2.4.3的root成功率,加入新的root引擎,增强root能力,提升root速度,优化卸载内置程序功能,加强安全卸载能力. 卓大师一键Root主要具备如下优点:

如何利用网站整体优化与内页优化的区分来提升排名

如何利用网站整体优化与内页优化的区分来提升排名 网站的外部优化主要是通过外链以及增加网站的点击率,提升网站的权重和品牌知名度来让网站的排名提升,y对于我们seo教程酒后一帖的工作人员来说,网站的外链是非常重要的,因为它直接关注到网站在搜索引擎心目中的地位,如果你的网站外链强大,证明文章更新程度比较好,也反应出网站的权重相对较高;另外ip流量和alex排名等等都是需要经过优化来提升的. 网站的内部的优化主要是在于网站的内容以及网站的友情链接以及网站的标题设置.网站关键设定以及网站的描述等等,网站的

优化站内搜索 -让用户更容易找到所需信息

关于如何让用户更容易地找到需要的信息,上一篇文章中介绍了使用优化网站信息架构的方式,这篇文章主要介绍的是通过优化站内搜索的方式来帮助用户找到需要的信息. 站内搜索已经成为目前几乎所有网站必不可少的一块功能,尤其在内容丰富的网站中,当用户有目的地寻找目标内容但又无法直接从首页或导航页中直接找到时,这时用户就会求助于站内搜索. 分析站内搜索的意义 分析站内搜索最常见的就是分析用户的搜索短语或者关键词,通过关键词了解用户的需求,但是某些基于搜索后的用户操作和行为分析分析往往更有价值:站内搜索的意义主要

如何通过优化站内博客助力提升主网站流量

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 相信刚开始学习seo的朋友都会拥有一个属于自己的seo博客,这个seo博客除了可以记录平时的学习之外,还能够用来让seoer练手.但是随着网络营销的迅猛发展,博客除了能够提供seoer练手和交流之外,还能够有效帮助seoer优化网站.优化站内博客就是一个典型的例子. 笔者现在手上就有一个关于医疗网站的站内博客,这个博客的排名已经通过笔者的优化

网站优化站内文章写作如何做到条理清晰

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 之前笔者和大家分享的文章一直是如何提升网站用户体验.优质的网站结构.高权重的外链建设等到细节去阐述的,关于站内文章写作方面的东西还没有和大家进行过较为仔细的阐述,今天笔者和大家详细分享下我在网站优化过程中是如何写作站内原创的文章的,好,咱们闲话短续进入今天主题,网站优化站内文章写作如何做到条理清晰. 笔者认为我们写作之前,必须有一个主题和构思

网站链接优化内外有别 内链优化同样重要

在网站优化方面,很多站长都明白外链优化的重要性,不是有一句行话叫做外链为皇,内容为王么!这句话就充分体现了外链的重要性,于是针对外链优化出现了数量众多的优化方法,有投机取巧的链轮和黑链,也有一本正经的软文外链,还有花钱购买的高质量外链等等不一而足,而相对于外链的火爆行情内链优化却相对沉寂,甚至是逐渐呈现一种边缘化的现象,是不是内链优化就没有那么重要呢? 答案自然是否定的,随着搜索引擎对外链优化的作弊方法给了严厉的打击之后,站长们发现外链优化越来越难,而内链优化却是一个尚未开发的净土,而且搞好内链

企业优化站内页该如何设计

上一节我们讲到介绍了企业网站优化首页设计思维篇,这一节我们来谈一谈企业站内页如何设计更有利于用户体验. 首先思考个问题: 1.你的网站内页与同行相比有什么优势,价值在哪里?(附加价值和差异化价值) 以百度搜索"生态木"排名第二的"鑫华生态木"网站作为案例,排名稳定在首页已经很长时间了,他的内页设计的怎么样呢? 通过分析前20名的网站中只有鑫华生态木品牌网站提供了生态木价格.生态木规格栏目,通过栏目文章的点击用户的需求是非常大的,这就是优势,具有很好的差异化价值. 2

案例分析教你如何做站内优化和内链布局

一.内链的控制 1.内链数量的控制 内页数量的控制是大部分站长比较纠结的问题,因为很多人不知道内链放多少合适.网站的权重是靠链接来传递的所以内链理论上是越少越好,但是一个行业会出现很多的长尾关键词从而就要产生大量的内页去参与长尾关键词的排名获取流量,今天易科SEO给大家经过案例的分析如何去控制内链和优化. 案例: 搜索西安婚纱摄影,当时是第五名西安婚博城,今天去看已经变成第一名了.这个网站首页和内链的布局有一个致命的缺陷,即使排名到第一名也会掉下去.那就是搜索婚纱摄影关键词用户的需求是图片,但是

网站优化做好内链:让网站权重飞起来

网站优化分为站外优化和站内优化两种,其中站外优化就是我们常说的搜索引擎优化.从一定角度上讲,站外优化更偏向于客观,相对于站内优化也有更多不可抗拒因素,当然也更难:而站内优化则是相对简单,而又不得忽视的.尽管如此,站内优化往往被人所忽视,因此做好站内优化能对网站排名起到不小的作用.而站内优化最重要的部分就是做好网站的内部链接,因此今天笔者就谈谈网站内部链接优化的技巧和心得. 一.设置清晰结构,目录层次尽量简化 这是建立一个网站时最基本,也是非常重要的一部分,因为基本上设置好之后就不会再变了(当然可