OpenStack合力Kubernetes打造IoT平台,提供智能城市解决方案

本文详细介绍了OpenStack奥斯丁峰会上主题演讲所提及的开源IoT平台。首先我们会介绍关于IoT的方法和愿景,随后会提供简要的技术概述并展示两个使用案例。

物联网(IoT)是云计算领域的“下一件大事”。领先的行业供应商都提供了自己的IoT解决方案,并将其视作自己的业务战略。因此IoT这个词已经被滥用成为描述不同供应商专有解决方案的一个新流行词汇。“IoT”这个词几乎可以代表一切,甚至比“云计算服务”更加空泛。物联网主要围绕日益增加的计算机间通信,可通过用于收集数据传感器的网络和连接到云计算服务的执行程序处理各类信息。这个技术可以让我们生活中的一切,从街边路灯到港口都变得更加“智能”。

我们对IoT的看法与其他供应商有所差异。我们会通过相同的方法向客户提供私有云解决方案,并使用现有的开源项目对云服务的实现方式进行扩展,借此打造通用IoT平台,以应对不同用例的需求。为此我们定义了下列需求:

开源软件 整个平台必须基于现有的开源解决方案,并且绝对不能只由某一家供应商开发。我们希望使用现有的平台:OpenStack、Kubernetes、Docker、OpenContrail等。

不依赖具体硬件和供应商 软硬件方面不能存在供应商锁定的情况。IoT网关CPU必须支持x86/64或ARM架构。我们不想因为昂贵的专有装置而被迫只能使用某一供应商的产品。

**互操作性**IoT平台必须是通用的,可以适合不同用例。举例来说,如果某一IoT网关可用于统计街灯数量,那么也必须能通过相同的方式将其用于智能工厂或工业4.0应用程序中。

因此我们设计出涉及OpenStack、Kubernetes、OpenContrail和Docker开源项目的下列高层体系结构。

  开源软件

整个平台必须基于现有的开源解决方案,并且绝对不能只由某一家供应商开发。我们希望使用现有的平台:OpenStack、Kubernetes、Docker、OpenContrail等。

不依赖具体硬件和供应商

软硬件方面不能存在供应商锁定的情况。IoT网关CPU必须支持x86/64或ARM架构。我们不想因为昂贵的专有装置而被迫只能使用某一供应商的产品。

互操作性

IoT平台必须是通用的,可以适合不同用例。举例来说,如果某一IoT网关可用于统计街灯数量,那么也必须能通过相同的方式将其用于智能工厂或工业4.0应用程序中。

下文技术概述一节将详细介绍其中的技术细节。首先一起来看看我们构建解决方案原型的两个用例。

智能城市原型

第一个用例是为捷克共和国一个名为皮斯克(Pisek)的小城市构建的智能城市项目。智能城市的理念和架构需要部署超过3000个端点,以及大约300个IoT网关,这些网关以高可用模式运行在Kubernetes驱动的容器中。该解决方案还包含开放数据门户,并通过数据API为第三方公司提供了下列信息:

交通流量、路线、停车位监控和管理能源的使用以实现节能电子商务、营销、旅游信息环境分析生活方式、社交服务、社交网络

该解决方案使用基于RaspberryPi 2的IoT网关。来自网关的数据存储在Graphite中,通过自行开发的数据挖掘应用程序进行处理,将结果显示在基于Leonardo CMS构建的市民门户网站中。Leonardo CMS是一种Web服务,可以将复杂的可视化结果混合显示在一起呈现任何内容。这个开放数据门户可以通过可视化仪表盘或API提供数据访问。

下图展示了特定时间内,Kollarova和Zizkova两条街道十字路口的机动车和行人通行情况。

若要详细了解该项目,建议阅读奥斯丁SuperUser杂志《更进一步,让城市变得更智能》一文,或观看KubeCon 2016演讲。

OpenStack奥斯丁峰会上的智能会议系统

为了证明我们的IoT平台真正不依赖某种应用程序环境,在OpenStack峰会过程中,我们将智能城市项目中使用的IoT网关(RaspberryPi 2)带到了奥斯丁会议中心,通过基于IQRF的网状网络将其与传感器连接在一起,借此测量湿度、温度,以及二氧化碳浓度。这个演示证明了IoT网关可以对IQRF、蓝牙、GPIO,以及任何其他基于Linux平台的通信标准进行管理并收集数据。

我们在会议中心三层楼内部署了20个传感器和20个路由器,通过一个IoT网关接收来自整个IQRF网状网络的数据,并将其中继至一个专门的时序数据库,本例中使用的数据库是Graphite。数据收集器使用了Docker容器内运行,通过Kubernetes管理的MQQT-Java网桥。其中最有趣的地方是距离,运行Docker容器的Raspberry位于美国奥斯丁的会议中心内,而虚拟机运行在欧洲的数据中心。动态网络覆盖渠道由OpenContrail SDN提供。下文技术概述一节还将对该平台进行进一步介绍。

下图展示了传感器和路由器发现过程中找到的一个无线IQRF网状网络。区域0 - 1覆盖会议中心一楼,区域2 - 4覆盖四楼。

IQRF是一种工作在亚GHz ISM波段的无线网状网络技术,可提供简单易行的集成能力,良好的互操作性,最多支持240个跃点的健壮网状网络连接,工作距离可达数百米,能耗非常低。

下图展示了会议中心二楼不同房间的二氧化碳实时浓度。历史图表显示了自周一以来的数值。从中可以直观了解到主题演讲的开始时间和午饭时间。

  奥斯丁这套平台的数据收集方面,我们使用了下列服务架构。

  技术概述

本节进一步介绍了这个IoT平台的一些技术构思。这个IoT平台以“通用”为愿景,旨在以安全的方式收集、管理和处理来自数千个端点的数据,并以动态的方式集中管理所有数据。

因此整个体系结构可以分为下列两大主要部分:

数据中心

数据中心是整个IoT平台的中心管理点。其中包含OpenStack IaaS云,以及伴随云同时运行的虚拟机和SDN控制面板。这些计算机负责了时序存储、数据处理群集、数据API网关访问,以及可视化Web服务等任务。

网关

IoT网关可位于任何目标位置,例如街灯、工厂机械、家用电器中。SDN提供的传输层将远程IoT网关与云服务连接在一起。网关可支持多平台,甚至可能混合使用了x86/64和ARM设备。该技术可以通过一个网关为多个客户承载多种传感器平台,这一特性是通过微服务分隔(Docker容器)和Kubernetes对多租户的支持实现的。整个平台可以提供可伸缩的多租户环境,无论多远距离的应用程序和传感器都可位于同一个网络中。

下列架构图展示了数据中心层和网关端的相关组件。下文架构详情一节提供了进一步介绍。

  架构详情

架构图展示了整个IoT平台在体系结构方面的逻辑视图。左侧是数据中心,右侧是上文提到的网关。

从下图可以看到,这里使用OpenStack作为承载所有控制服务的云,同时所有大数据处理和前端可视化任务也是在这里进行的。网关使用Kubernetes对服务进行微分隔,为了实现多租户功能并确保不同传感器的安全,这一步是必须的。同时该平台还使用OpenContrail将两端连接在一起,并为Kubernetes POD和OpenStack Project虚拟机提供网络分隔。

上文曾提到过,分隔是通过SDN覆盖实现的。这里的重点在于数据中心边缘路由器和IoT网关之间只存在IP连接。网关操作系统和数据中心边缘路由器之间的VPN连接可以看作该平台的最底层,该层之上是SDN,在这里可以通过OpenContrail实现虚拟机(OpenStack云)和容器(网关)之间的直接通信。这种方法使得用户可以自由选择不同类型的传感器和执行程序,为其设置权限,并用安全的方式将其与云中负责任务处理的应用程序连接在一起。

数据中心包含下列服务:

管理服务

硬件群集中运行的虚拟机承载了所有控制服务:OpenStack控制器、OpenContrail控制器(SDN)、Kubernetes主机、Salt主机。

OpenStack云

OpenStack项目为数据库(Graphite、Influxdb、openTSDB)、大数据处理(Hadoop),以及数据可视化(Grafana、LeonardoCMS)所涉及的不同虚拟机服务提供了分隔和划分。这个云运行在KVM hypervisor之上,通过OpenContrail的Neutron插件实现网络连接。

边缘路由器

OpenContrail会与数据中心边缘路由器创建iBGP对端,这样便可以将OpenStack虚拟机和Kubernetes POD的动态网络路由传播至IoT网关。该设备可以MPLSoverGRE或MPLSoverUDP方式创建标准的L3VPN。

远程网关包含下列组件:

Kubernetes Minion

Kubernetes minion负责与数据中心内的Kubernetes主机通信,并负责管理Kubeletand POD。Kubelet使用了Opencontrail插件,借此将Docker容器与vRouter代理连接在一起。

Kubernetes POD

Kubernetes POD是连接到vRouter的一个或多个Docker容器。POD可按照标签进行分隔,这样即可启动不同应用程序,从不同消息总线以IQRF、蓝牙,或GPIO方式读取数据。

Docker容器

Kubernetes POD中的Docker容器为整个平台提供了极大的收益,可在无需特别安装的情况下支持任何类型的操作系统。例如,IQRF使用了某一版本的简单Java应用程序,可通过容器在几分钟内交付,并且不会与网关本身的操作系统产生不匹配的情况。

应用程序视图

下列架构图详细介绍了应用程序视图。从图中可知,借助OpenContrail覆盖的帮助,OpenStack云内部的虚拟机可以通过L2或L3私有网络联系位于任何地理位置的Docker容器。因此应用程序开发者可以使用标准云平台中用过的同一套工具。他们可以通过HEAT部署虚拟机应用程序控制器,随后通过简单的Yaml文件在远程网关上的容器中部署Kubernetes服务。

以通过环境传感器收集数据的做法为例:传感器直接连接至容器,数据在Docker容器中处理后发送至Graphite时序数据库。因为我们希望以图形化方式实时呈现数据,因此使用了另一个虚拟机,通过Leonardo CMS借助Graphite API读取数据,并将其显示在网站上。据此我们可以通过同一个云平台,按照相同的原则创建不同项目,并使用多种输入和输出位置。

结论

我们希望对这个IoT平台的愿景和已经部署的原型进行一个简要的介绍。目前我们正在完成整个智慧城市解决方案的细节设计工作。

今年在奥斯丁举行的OpenStack峰会和伦敦举行的KubeCon上对该方案进行介绍后,我们收到了来自社区成员的大量反馈。在IoT平台的安全性、弹性,以及性能方面,我们的构想得到了大家的认可,很多技术合作伙伴希望通过合作对我们的IoT平台进行扩展,借此构建他们自己的解决方案。我们现在正在着手有关工业4.0的构想,打算通过开源项目创建第一个智能工厂。

====================================分割线================================

本文转自d1net(转载)

时间: 2024-07-28 15:37:45

OpenStack合力Kubernetes打造IoT平台,提供智能城市解决方案的相关文章

钉钉再放大招!打造公司文化也有智能工具,中国4300万中小企业有福了

"截至2017年9月30日,钉钉企业组织数量超过500万家,成为全球最大的企业服务平台."钉钉CEO陈航(花名:"无招")在11月19日钉钉"智连未来"的发布会现场首先公布了钉钉的最新数据. 这是无招继6月份的"中国酷公司"发布会后再次登上深圳卫视的舞台. 发布会现场,无招表示,通过软件的全面升级与硬件的连接协同,钉钉将实现又一次飞跃. 钉钉4.0时代来临,他要帮助中国4300万中小企业跨入智能移动办公时代. 钉钉推出首款智能

中韩合作打造智能城市计划

本报讯(记者闵捷)你佩戴的手表会把你的血压.脉搏等信息传输到医院,再播报医生提供的健康咨询:你家的房门会在遇到小偷撬门时,自动发警报到小区保安的手机上--这些功能都列入了韩国SK电讯与中铁二局共同打造的"智能城市"计划.近日,双方在四川成都正式组建合资公司,面向全国推广这项计划. 合资公司定位为在中国实施"智能城市"经营方略的母公司,主要方向是为城市提供先进的城市管理服务,智能的环境保护.废弃物综合回收与利用,公共安全保卫,韩国SK电子竞技.数字娱乐等.合资公司将首

谷歌人行道实验室欲打造未来智能城市

Google的"智能城市"项目公司"人行道实验室"(SidewalkLabs)在较为平静的一年之后终于有了新的动向.在互联网气球和无人驾驶汽车都有了进展之后,本周又有消息称,Google人道实验室最近刚刚招聘了一批新技术以及城市管理的专家,新团队将主要负责研发新的科技产品. Google的人行道实验室主要目的是为了当前存在于各大城市的各种问题,其中包括城市的拥堵.住房.能源的利用等各个方面的问题,欲打造一个未来的"智能城市".人道实验室的CEOD

Mirantis与CoreOS将共同发起企业级的OpenStack、Kubernetes集成平台

本文讲的是Mirantis与CoreOS将共同发起企业级的OpenStack.Kubernetes集成平台,[编者的话] 8月6日,OpenStack服务提供商Mirantis与CoreOS宣布他们将合作开发Mirantis版OpenStack与CoreOS的Tectonic集成的平台.当下,这两家公司已经可以给企业用户提供OpenStack与Kubernetes的整合服务,并可以提供企业级的支持与管理. 8月6日,OpenStack服务提供商Mirantis与CoreOS宣布他们将合作开发Mi

阿里云IoT发布智能生活开放平台 加速智能家庭产业链成熟

6月28日,阿里云IoT事业部正式发布"智能生活开放平台",通过提供连接.设备管理.数据分析等一揽子解决方案,帮助合作伙伴低成本实现智能化,从而加速智能家庭成熟可用,让千万个家庭体验到智能生活的美好. 据介绍,通过阿里云IoT "智能生活开放平台",合作伙伴可以低成本实现智能化,单品设备可以联网,设备之间能够互相联通.协同工作,从而提供完整的场景化智能服务,比如离家模式,睡眠模式等.智能家居厂商还能通过平台实现产品数据上下行传输和存储,也能在平台上管理智能设备的接入

揭秘全球领先物联网平台提供商 中国厂商如何追赶?

物联网产业正在迅猛发展,虽然目前还处在物联网连接大规模建立的第一阶段,但越来越多的云计算厂商.物联网解决方案提供商通过外延并购.合作来抢夺物联网整体解决方案的核心物联网平台市场.全球领先的物联网平台有哪些?中国厂商发展如何?本文为你一一解答. 物联网平台四大类型 物联网的技术体系主要包括四个层次:感知与控制层.网络层.平台服务层.应用服务层. 物联网平台作为物联网整体解决方案的核心,起到了承上启下的作用.物联网平台按照逻辑关系从下层到上层提供四大功能:终端管理(Device Management

云计算和IoT平台之争开启“下半场”,边缘计算竟成“主阵地”

因为云计算这块大饼,亚马逊.微软.谷歌都使出浑身解数,撕累了.资料显示,亚马逊.微软和Alphabet(谷歌母公司)在2016年的资本支出和资本租赁共计为315.4亿美元,比2015年同比增长22%.每家公司都将云计算列为主要投资领域. 由于对云计算的扩张越来越激进,且险些走进"囚徒困境".这三家公司似乎打起了价格战,纷纷降低了部分云产品的价格,甚至引起了由于价格持续下滑,可能造成利润过低的担忧. 在这个由亚马逊.微软和谷歌引领的1.0模式通用云基础设施服务市场中,对于后来者已经没有机

Marvell推出Andromeda Box IoT平台,加速物联网装置开发

Marvell行销主管Aviad Enav Zagha日前在Semiconductor Engineering撰文指出,随着业者逐渐往云端发展,加上物联网(IoT)装置可满足消费者在智能家庭生活便利性需求,相关平台产品势必也会陆续出炉,让以消费者为主的设计趋势在物联网中更加明显. Zagha指出,过去外界曾认为PC将成为未来通讯与控制的核心,但随着智能型手机问世后,用户之间的通讯.音乐.家庭自动化.车辆导航与娱乐等都开始以智能型手机为主.但如今随着物联网或万物联网(IoE)演进,智能型手机也即将

DockOne微信分享(一零六):乐视云基于Kubernetes的PaaS平台建设

本文讲的是DockOne微信分享(一零六):乐视云基于Kubernetes的PaaS平台建设[编者的话]本次分享主要介绍乐视云两代PaaS平台的变迁过程,着重介绍第二代PaaS平台LeEngine的架构设计和遇到的问题. 背景 2014年乐视云开始尝试Docker的推广和使用,我们的团队开始开发第一代容器云平台Harbor (分享网址:http://dockone.io/article/1091 ).(在这里提醒一下,这与VMware公司中国团队为企业用户设计的Docker Registry e