全面剖析康奈尔大学“红云”项目

近日,康奈尔大学高级计算中心发布了“红云”,一个基于订阅的按需研究计算服务。该项目致力于让更多的研究人员和学生使用康奈尔大学的HPC计算资源,进行科学研究与发现,从而促进科研成果的发现。本文将从红云提供的服务、红云的底层配置和使用红云的好处等三个方面对红云进行解读。

  “红云”提供的两种服务:IaaS层和SaaS层

  IaaS(Infrastructure as a Service)层,通过提供按需租用虚拟服务器和存储的服务,该服务让更多的研究人员可以按需使用康奈尔大学的HPC计算资源,这是基于开源云计算平台Eucalyptus。

    SaaS (Software as a Service)层,通过提供“MATLAB红云”服务,为康奈尔大学的用户提供了从私人站点无缝连接到MDCS worders,访问NVIDIA GPU进行优化性能,“MATLAB红云”还为科学网关提供了“快速队列”。

  红云的底层配置

  以上两种红云服务都使用了Dell的HPC解决方案,运行在Dell PowerEdge C系列服务器上。

  “红云”总共包括8台服务器,每台服务器配置了2颗2.7GHz的Intel至强E5650 CPU,48GB的内存。支持的最高配置的虚拟机是12个核,48GB内存,而且虚拟机能够通过10Gb iSCSI共享访问7.5TB的存储。订阅该服务的用户可以使用大多数Linux发行版,包括自定义的CentOS 5.6以及CentOS 6,用户具有访问虚拟服务器和虚拟磁盘的root权限。可供用户选择的虚拟服务器配置包括了以下5种:M1.small (1 核, 内存4GB, 磁盘20GB ); C1.medium (2 核, 内存8GB, 磁盘40GB); M1.large (4 核, 内存16GB,磁盘200GB ); M1.xlarge (8 和, 内存32GB, 磁盘400GB ); C1.xlarge (12 核, 内存48GB, 磁盘1000GB)。

  “MATLAB的红云”总共包括8台服务器,每台服务器配置了2颗2.4GHz的Intel至强E5820 CPU,24GB的内存,以及1颗NVIDIA Tesla M2070的GPU,服务器通过千兆以太网进行互联,挂载了8TB的CIFS存储,安装的软件包括MATLAB MDCS 2011B以及CAC 并行MATLAB客户端代码。订阅该服务的用户在本地桌面使用具有并行计算工具箱的MATLAB客户端编写程序,然后使用MATLAB分布式计算服务器纵向扩展到基于MATLAB的红云上。

  使用“红云”的八大优势

  可预测、可再生、可靠的性能。红云服务是由高级计算中心发布的供康纳尔大学研究人员及其合作者使用的具有弹性的计算和数据分析资源,提供了可预测、可再生、可靠的性能;

  无隐性成本。红云作为一种订阅服务,不包括隐含的成本,而且首次订阅该服务还能获得50GB的存储空间,如果需要额外的存储空间,康奈尔大学内部的订阅者将按照0.91美元/GB/年进行收费,外部用户按照1.45美元/GB/年进行收费;

  快速访问数据。用户不用额外付费就可以通过10Gb以太网快速访问云内部数据以及云外部的数据;

  专家支持。系统、应用和编程的咨询;

  订阅模式很容易做预算;

  兼容Amazon API。方便用户从红云平台迁移出去。

  以上特性对致力于数据驱动应用的研究人员来说非常具有吸引力。

▲红云和自建HPC集群的优劣势对比

(责任编辑:蒙遗善)

时间: 2024-08-29 13:12:09

全面剖析康奈尔大学“红云”项目的相关文章

康奈尔大学王飞: 医学人工智能真正落地面临的三大挑战

王飞:谢谢大家!很高兴新智元的邀请让我有机会跟大家分享.我们这个会主要强调人工智能,所以技术方面的内容大家听得比较多.我想讲一讲我从2010年开始在临床数据分析领域我们在技术之外遇到的一些问题,以及还有哪些挑战. 我们现在强调人工智能在治疗当中的应用,有各种各样的创业话题,包括AI技术怎样帮助医生进行决策支持,怎样帮助病人去更好地了解自己的病情,我们也有专门人员在研究怎样通过AI技术促进患者参与到治疗过程当中.前段时间有一篇论文发表在新英格兰医学杂志上,讲到Patient Reported Ou

康奈尔大学王飞博士:AI处理医疗数据面临的8大挑战

雷锋网按:本文转自HC3i中国数字医疗网,作者王飞博士,他是康奈尔大学威尔医学院助理教授,IBM沃森研究中心顾问,法国液空集团研究顾问.曾任职于康涅狄格大学以及IBM沃森研究中心.主要研究方向包括数据挖掘,机器学习技术在医疗信息学中的应用.王飞博士已经在相关方向的顶级国际会议和杂志上发表了近190篇学术论文,引用超过5000次,H指数38. 随着国务院发布新一代人工智能发展规划,"人工智能"这个已经在最近家喻户晓的名词再一步被推向了风口浪尖.对于医疗健康这一与人类息息相关的行业来讲,一

二十一世纪的计算 | 康奈尔大学教授Fred B. Schneider开讲计算机安全

雷锋网(公众号:雷锋网)按:本文根据Fred B. Schneider教授在韩国"Computing in the 21st Century 2016"大会上所做报告<A Science of Cyber – Security?>以及微软亚洲研究院首席研究员刘铁岩博士的解说编辑整理而来,在未改变原意的基础上略有删减. Fred B. Schneider是康奈尔大学计算机科学系系主任及Samuel B. Eckert讲席教授.他是美国科学进步协会(1992年),美国计算机协会

教机器人听懂口语,康奈尔大学正在尝试放弃指挥

摘要: 康奈尔大学正在该校的机器人实验室进行一项研究,实验目的是 在不需要明确而复杂的指令字符串的前提下,教会机器人理解通俗的语音指令 . 这项实验是由一名教授和两名博士生发 康奈尔大学正在该校的机器人实验室进行一项研究,实验目的是在不需要明确而复杂的指令字符串的前提下,教会机器人理解通俗的语音指令. 这项实验是由一名教授和两名博士生发起的.他们的基本想法是教会机器人从不同的扬声器收听并理解基本的口语指令,然后进行"自适应环境"和填充缺失的信息内容. 我知道你看起来会比较费劲,不妨举个

Trickles —— 康奈尔大学的高性能网络通讯协议

Trickles 是一个无状态的高性能网络通讯协议. Trickles 目前提供了基于 Knoppix 改造的一个 Live CD 版本,该版本的网络内核已经替换为 Trickles ,请点击本介绍底部的 软件下载 按钮. Trickles 的系统架构: 文章转载自 开源中国社区 [http://www.oschina.net]

纪源资本李宏玮:康奈尔“旁听生”到顶级VC

编者按:通过深度访问国内外顶级的投资人,从成长经历.投资理念.投资策略等方面去透视一个个重大投资决策背后的故事.商业逻辑和复杂人性.本期,推出的是著名女性投资人纪源资本管理合伙人李宏玮(Jenny),敬请关注后续精彩报道.一个在硅谷做无人机的创业者得知记者与纪源资本(GGV)管理合伙人李宏玮(Jenny)聊了三个多小时后,羡慕地说,"wow,她是我非常敬佩的投资人!"李宏玮(Jenny),<福布斯>杂志评选出的全球五大女性创业投资人之一,全球创业投资人中排名第36位.她是G

微软康奈尔:未来的OS X系统也有可能整合必应

硅谷网讯 7月3日消息 据美国科技博客TheVerge撰文称,必应目前支持iOS7的Siri网页搜索,也已经深度整合至 Windows8.1预览版,该搜索引擎有望成为微软的新平台. 以下为文章主要内容: 今年早些时候,微软搜索团队主管QiLu针对必应提出了一个新策略:打造融入微软自家产品和第三方服务的广泛搜索平台.这似乎很有雄心壮志,当然也让人联想起微软有关在搜索领域打败谷歌的其它未兑现的承诺,但这一次微软非常认真,它的计划已经在iOS7和Windows8.1中得到了一定的 体现. 最大的工程项

老康:Java开源项目Hibernate快速入门

快速入门|项目 作者:老康 其实Hibernate本身是个独立的框架,它不需要任何web server或application server的支持.然而,大多数的Hibernate入门介绍都加入了很多非Hibernate的东西,比如: Tomcat, Eclipse, Log4J,Struts, XDoclet, 甚至JBoss.这容易让人产生Hibernate复杂难懂的误解,特别是打击了初学者的积极性. 在这篇文章将不涉及Eclipse, log4j, Struts, Tomcat, XDoc

全面剖析日赚500元项目的骗局

中介交易 SEO诊断 淘宝客 云主机 技术大厅 日赚500元,这是广大中小站长朋友们的一个不大不小的梦想.但是时过境迁,当今互联网早已非昨日之网络世界,有一些变动因素是我们不得不考虑的,日赚500元的不可行性分析笔者将主要从以下六个方面进行简要的分析. 其一,网民经验的丰富. 由于网民的经验越多越丰富,分辨广告的能力越来越高,对一些常见的诱骗手法见怪不怪,特别是一些群发的网址,根本就不会去看,甚至达到了只要一看是 发来的网址,想都不想,从心理上一概拒绝,哪怕是好友发的推荐网址(无论真假,这年头Q