分布式计算框架Mesos最新版本六大新特性揭秘

1、容器的网络隔离

Mesos 0.23 提供支持在容器部署前定义网络的监控和隔离规则。网络隔离避免了单个容器占用太多的端口、太多的带宽,以及造成其他用户数据包明显的延迟。

每个运行的容器的网络统计数据可以在 slave 上从 /monitor/statistics.json 文件中读取。网络隔离对运行在 slave 上的多数 tasks 都是透明的(那些绑定到 port 0 和让内核分配给它们对应的端口)。这个特性仅仅是在 Linux 上实现并且需要设置 configure-time flag(配置时间标志位)。请参阅:http://mesos.apache.org/documentation/latest/network-monitoring/

2、SSL

对通过 libevent 的任何 libprocess 通信提供 SSL 加密支持(目前还是实验性)。对 Mesos master 和它对应的 slaves 及 Frameworks 之间的流量进行加密,防止被窃听和伪造,对于提高信息安全至关重要。这个特性需要 configure-time flag 并且有一些性能的影响。请参阅:http://mesos.apache.org/documentation/latest/mesos-ssl

3、超售

尝试在可撤销的资源上启动 tasks/executors,而 Mesos 可以随时撤销任务。重要的任务可以利用这些临时资源来提升性能。

为了应对峰值负载以及一些无法预料的负载暴增,高优先级的 2C 服务会置备在大型集群上。因此,大多数时间,资源没有得到充分的利用。超售特性可以利用暂时没有使用的资源来执行一些后台运行的任务,比如后台分析、视频 /图像处理、芯片仿真,以及其他低优先级的工作,当资源被征用,这些任务可以被随时撤销。

超售特性增加了两个新的 slave 的模块:资源估算和服务质量(QoS)控制,同时对现有的资源进行分配、资源监视器和 mesos slave 进行了扩展。请参阅:http://mesos.apache.org/documentation/latest/oversubscription/

4、持久化卷

尝试支持 Frameworks 提供创建磁盘持久化卷服务,这使得有状态服务例如 HDFS 以及 Cassandra 可以通过 Mesos 存储相关数据,而不是像之前必须将数据存储在网络挂载的 EBS 卷或者将数据放置在其他位置使得磁盘资源不受管理。详情请参阅:http://mesos.apache.org/documentation/latest/persistent-volume/

5、动态保留

Framework 可以对特定的 salve 上的动态资源进行预留(实验性支持)。不需要操作者在 slave 启动的时候指定一个固定的、预先计算好的“静态”资源,现在 Framework 可以预留 slave 提供的资源而无需重启 salve。现有的动态预留机制重大改变,这意味着现有的静态预留机制继续全力支持。请参阅:http://mesos.apache.org/documentation/latest/reservation/

6、缓存抓取

Executor/task 的二进制文件读取器(fetcher)现在支持缓存机制(实验性)。现在可以指示读取器将通过 URI 下载的二进制文件缓存到一个专用的目录,这样后续的下载可以重用。如果对于URI的 “cache” 标志位是 true,缓存读取机制将会生效。如果 URI 是第一次被下载(对于特定用户),则首先下载到高速缓存中,然后从那里复制到 sandbox 目录。如果相同的 URI 再次被遇到(对于同一个用户!),而且相应的缓存文件还在缓存中,则不会进行重复下载,此时读取器会直接从高速缓存进行拷贝。请参阅:http://mesos.apache.org/documentation/latest/fetcher/

本文作者:佚名

来源:51CTO

时间: 2024-09-12 05:17:08

分布式计算框架Mesos最新版本六大新特性揭秘的相关文章

新款MacBook Pro六大新特性汇总

  POPSUGAR网站总结了新款MacBook Pro将具有的六大新特性: 新设计: 外界预计新款MacBook Pro相当薄,但不会像MacBook Air或12英寸MacBook那样薄.当前型号的13英寸MacBook Pro厚度为0.71英寸(1.8厘米). 告别功能键: 据称苹果将利用触控屏取代键盘顶部的一行功能键.新款MacBook Pro将利用OLED屏幕(可能用于未来iPhone)显示功能键,例如播放键--与用户正在运行的软件有关. 采用Touch ID指纹传感器: Touch

微软推出Windows 8.1预览版 六大新特性解析

网易科技讯 6月27日消息,微软今天在其Build开发者大会上正式推出了Windows 8.1预览版.科技博客TechCrunch撰文称该版本在易用性上有了很大的改进,并盘点了部分主要的新特性,包括开始按钮恢复.启动至桌面.深度整合SkyDrive.更加智能的搜索工具等等. 以下为文章主要内容: 微软恢复开始按钮,并允许用户直接进入桌面模式,说明该公司一直在倾听用户的意见.在很多方面,8.1--甚至是预览版--就是Windows 8本该有的模样. 自Windows 8推出以来,微软对其提供了超过

J2SE 1.5版本的新特性一览

j2se 到了2003的年末,J2SE1.5的beta版本就将发布了.这次发布和现在已经发布的J2SE1.4的两个更新1.4.1和1.4.2都如2003年的JavaOne大会预期的发布.如果你没有参加这次大会,或者想重新回顾一下,那么下面就是这次大会的简要内容. J2SE 1.4.1 and 1.4.2 Releases 当1.4.1(开发代号"Hopper")在2002年9月发布以及它的后续版本1.4.2(开发代号"Mantis")在2003年1月如期发布的时候,

FireFox浏览器3.6版本的新特性

自 Firefox 3 发布以来,我们一直在努力为 web 开发者提供新的功能.我们认为有必要写一篇博文,来确切列出那些我们知道的但大家可能还不知道的所有特性.这篇博文包含了我们在之前约三个发布版本的研发过程中完成的所有工作,更集中整理了 3.6 版本中的新特性(由于译言编辑器不支持 CSS3,原文中的 3.6 标记加粗代替). 尽情享受吧! CSS @font-face   使用网络上的字体显示文字(3.6: 支持 WOFF 与 TTF 字体)   pointer-events   点穿元素

J2SE 1.5版本的新特性一览_Java编程

文章来源:互联网 作者:supertoto(翻译)/CSDN.Net 到了2003的年末,J2SE1.5的beta版本就将发布了.这次发布和现在已经发布的J2SE1.4的两个更新1.4.1和1.4.2都如2003年的JavaOne大会预期的发布.如果你没有参加这次大会,或者想重新回顾一下,那么下面就是这次大会的简要内容. J2SE 1.4.1 and 1.4.2 Releases 当1.4.1(开发代号"Hopper")在2002年9月发布以及它的后续版本1.4.2(开发代号"

IIS7的六大新特性

Windows的网络服务器Internet Information Services(IIS)7.0 将整合ASP.NET,改善诊断系统,引入新款管理员用户界面,配置系统以及一系列新构件. 微软IIS,网络平台及工具开发组项目经理Bill Staples以及产品经理Mary Alice Colvin指出,虽然微软下一代网络服务器IIS7.0到2006年Longhorn发布时才推出,但现时许多Web开发者都迫不及待地想知道IIS 7.0有那些具体改进之处.在采访中,Staples和Colvin都毫

Backbase 4.2新特性揭秘

Enterprise Ajax for Java框架的4.2版,这个新的版本为Java开发者提供了一个完整的Ajax平台,支持许多常用的框架,包括Struts.Spring MVC和Java Server Faces.Backbase的Enterprise Ajax for Java的终极目标是提供一个基于标准的.可以代替类似Flex和Silverlight的插件,提供简单的特性.支持和开发工具. InfoQ采访了Backbase和Michel Gerin和Jep Castelein以了解关于这

《使命召唤:黑色行动》多人模式新特性揭秘

(编译/苍天小白)随着11月3号的发售日期临近,Treyarch也开始着手为其新作<使命召唤:黑色行动>预热.近日,Treyarch的社区经理乔希(Josh)在接受媒体采访时就对<黑色行动>多人模式中的一些新功能进行揭秘. 例如,有玩家知道黑色行动的多人模式中是支持多画面的么?你可以创造一个访客账号并且和朋友在一个屏幕前一起进行游戏.访客账号可以升级排名,解锁任务等等,但是当使用访客账号的用户登出服务器,那么这个账号将自动取消. 什么,你已经知道这个功能了!好吧,这就是乔希一直强调

POWER7新特性揭秘:POWER 7特性帮助客户实现动态的基础设施

在当今的 IT 基础设施中,涉及的资产.数据.事务和分析越来越多,这要求基础设施更加动态.2 月份,IBM 推出了配备 POWER7 芯片的新服务器,由此把它的 Power Systems 产品系列定位于动态的基础设施产品. 主管 Power Systems 全球市场营销的 IBM 副总裁 Scott Handy 说,"除了把人相互连接起来之外,组织正在把各种东西相互连接起来,因此必须管理的信息正在急剧增加.当今的基础设施往往比较迟钝.死板,为了适应新的情况,基础设施需要更加动态.更智慧的系统必