微软大数据:SQL Server任主力 Azure与Hadoop集成辅助

在不断激增的联网设备以及无处不在的网络连接的驱动下,视频、音乐及文本等数据早已呈现出无限膨胀的态势。近日研究机构Gartner更发表报告称,“大数据”将在未来十年内成为新的常规行业。目前包括谷歌、IBM、微软、EMC、惠普等众多巨头,已早早开始布局大数据,为在即将来临的大数据时代做好竞争铺垫。

如何利用海量数据为企业带来价值,是微软目前的主要专注方向,同时也是大数据的核心要素。通过数据的采集、存储、发送、处理及分析,帮助企业制定更有效的方针和政策,这在全球各企业中需求非常旺盛,全球50%的企业领导者都已有此种意识。微软亚太研发集团中国云计算创新中心总监王枫表示,微软在此方面已有不遗余力的探索。

“很多企业为了节省管理和运营成本,选择利用公有云,通过外网处理复杂数据,但这势必会带来安全问题。而若企业采用在内网监控下的私有云,既能保证数据安全,又能提高数据中心的效率。”王枫谈到,“如此看来,混合云可能是其中最好的方式。其可根据企业业务特性,制定哪些应用及数据需通过私有云处理,哪些需要通过公有云处理,而最终的数据管理存储则以私有云方式实现。”

如此便形成了微软的大数据思维:以SQL Server平台为主,并集成WindowsAzure公有云与Hadoop系统,形成覆盖整个产业链的完整解决方案。

数据采集、数据存储、数据处理分析被微软视为大数据的三个生命周期,也是大数据至关重要的三个环节。尤其在存储环节,大数据的要求非常高,其安全性、不可间断性、可持久性与扩展性必须保证。据王枫透露,微软的大数据布局,主要以SQL Server平台为主。今年5月,微软刚刚发布了这一平台的2012新版本,其在保证数据不间断性方面表现优异。

SQL Server能处理的不仅仅是结构化数据,其他各种数据类型都能轻松应付,其甚至可以自定义数据类型。对于关系型数据,可利用各种技术进行查询和索引,如全文本查询、非结构化属性查询,之后也可通过各种技术进行管理及存储,从而更好地利用这些数据。不同于关系型数据的复杂性,非关系型数据则更注重数据的读取以及简单的属性查询,不需要太复杂的关系型操作。“SQL Server目前在存储非关系型数据方面,也有其性能、效率和操作上的便捷优势。”

数据存储到位后,需要将其包装成系统性的数据报告,形成对企业有价值的参考文件。王峰认为,类似于应用商店的概念,大数据也需要“数据商店”。在这个平台上,无论供应商、集成商、采集商、开发商,都可以将数据与其他企业共享,并享受这个平台上的其他各种数据资源。在Windows Azure平台上,微软除了有自己的数据商店外,还通过SQL Server与Azure的集成以及与Hadoop的集成,来充实其数据商店平台。公有云领域,微软靠Windows Azure成功占领了部分市场空间。如今国内PPTV的全球视频推送就是与微软合作,为其提供计算资源、存储资源及CDN服务。

此外,微软在大数据方面,除了拥有自身能独当一面的平台外,还与当今世界领先的分布式系统Hadoop进行了集成,从而为业界带来更更开源、更开放的平台。比如,微软将SQL Server的活动目录与Hadoop集成,进一步提高了数据的安全性。而通过云计算等主要管理工具与Hadoop的集成,使得其管理方式变得更先进更灵活。此外,微软通过SQL Server存储及商业智能等和Hadoop的集成,能够将Hadoop处理完的数据更好地呈现给用户。“微软与Hadoop的集成基本发挥到了淋漓尽致的地步。”王枫如此谈到。

微软大数据方案已能渗透产业链的方方面面,其可通过windows嵌入到每台设备中,为其产生的各种数据服务。近些年,微软大数据在世界各地已有诸多成功案例。中国作为微软非常重要的市场,成功的大数据案例也不在少数。例如目前正在成都投入运作的云计算中心,利用大数据平台、虚拟化、BI商业智能分析等一系列技术手段,实现了对成都猪肉从喂养到售卖的实时监控。据王枫透露,这一套云计算系统可在一周内完成部署,并能降低三分之二的部署开支。

(责任编辑:蒙遗善)

时间: 2024-10-06 16:09:08

微软大数据:SQL Server任主力 Azure与Hadoop集成辅助的相关文章

甲骨文推出Oracle大数据SQL(Oracle Big Data SQL)

北京, 2014年7月22日--企业正在寻求以创新方式管理尽可能多的数据及数据源.尽管Hadoop.NoSQL等技术提供了应对大数据问题的具体方法, 但是这些技术却可能引入数据孤岛,导致形成关键洞察力所需的数据访问及数据分析 复杂化.为了最大化信息价值,更好的处理大数据,企业需要逐步改变数据管理架构,使之变 成大数据管理系统,以无缝整合各种来源.所有类型的数据,包括Hadoop.关系数据库以及NoSQL.大数据管理系统在简化所有数据访问的同时,还应该帮助企业 利用人员的现有技能,保持企业级数据安

sql server数据|sql server数据库入侵渗透~~求大神

问题描述 sql server数据|sql server数据库入侵渗透~~求大神 QQ200832005[招聘]渗透测试工程师(可兼职也可接私活) 技能要求 具有至少1年以上的职业黑客攻击经验,并实际操作过各类项目,拒绝理论派.熟悉渗透测试服务器提权方面. 1.掌握MySQL.MSSQL.Oracle.PostgreSQL等一种或多种主流数据库结构以及特殊性. 2.熟悉渗透测试的步骤.方法.流程.熟练掌握各种渗透测试工具. 3.有主机.网络或Web安全渗透测试相关项目实施经验&. 4.对网站/服

微软大数据:强调降低门槛人人能用

大数据很热,几乎所 有的 IT巨头都推出了相应http://www.aliyun.com/zixun/aggregation/14294.html">的大数据战略.日前微软在中国公布其 大数据战略, 微软全球高级副总裁,大中华区董事长兼首席执行官 贺乐赋,强调说微软大数据解决方案不仅仅强调要从数据挖掘.数据分析的层面去解决"大"的问题,更强调更可视化.直观化和人人用得起的方式来推动大数据落地.微软的大数据强调低门槛,人人能用. 微软全球高级副总裁.大中华区董事长兼首席执

数据就是现金,微软大数据战略浮出水面

从大数据生产到大数据分析,从大数据一体机到大数据云服务,从互联网到物联网,微软的大数据产品战略围绕大数据商业价值全面展开. 微软本周发布了一系列大数据产品和服务,旨在帮助用户从日益膨胀的数据中获取有用的分析结果.微软指出数据就是现金,新发布的一系列产品将在未来四年帮助客户创造超过1万亿美元的新收入. 微软新发布的大数据产品和服务包括SQL Server2014."大数据盒子"APS分析平台系统(Analytics Platform System,整合SQL Server和Hadoop的

迁移 SQL Server 数据库到 Azure SQL 实战

最近有个维护的项目需要把 SQL Server 2012 的数据库迁移到 Azure SQL 上去,迁移过程可谓一波三折,故在此分享这次迁移中碰到的点点滴滴,希望对朋友们有所帮助. Azure SQL 的版本 Azure SQL Database 是微软提供的 SQL 服务(PaaS).最新的版本叫 Azure SQL Database V12,其实微软还是通过 SQL Server 2014 来提供数据库服务:   上图中第一个数据库服务器是本地安装的 SQL Server 2014,第二个和

微软首席架构师Yaniv Pessach谈微软大数据COSMOS(中文意思是宇宙)

微软首席架构师Yaniv Pessach谈微软大数据COSMOS(中文意思是宇宙) 参考:http://www.quora.com/Distributed-Systems/What-is-Microsofts-Cosmos 宇宙是微软内部大数据分析平台. COSMOS宇宙是由分布式计算组件(有点相当于Hadoop的Map/Reduce了使用微软Dryad的解决方案,它(不像的map-reduce)允许计算任意DAG. COSMOS宇宙支持类似SQL的语法(类似于HIVE/PIG),包括分布式存储

系统-请问大神SQL Server怎样设置加分限制

问题描述 请问大神SQL Server怎样设置加分限制 各位大神,渣新一枚,现在在做一个系统,学生的平时表现分数评定系统,大概是根据学校的规定制定加减分项,放在系统中,然后由学生自己对符合条件的加分项进行申请,班主任登录进行审批,而现在有个问题是,每个加分项都有累计加分限制,所以就想问这个加分限制应该怎样实现呢?理想效果是当学生进行申请时,如果他的该项分数已经达到上限或此次加分后就会超过上限,则此次申请无法提交并告知该学生原因--求大神指导,万分感谢!!!!!!!(>﹏<) 解决方案 加三个前

主流大数据SQL引擎技术博弈,谁为王?

文章讲的是主流大数据SQL引擎技术博弈,谁为王,近日,AtScale公布了第四季度主流大数据SQL引擎的测试结果,主要针对Spark.Impala.Hive/Tez以及Presto. 测试结果证实了我们早已实践出的一些事情:Impala是中等大小数据库查询的最佳选择,并且已经积累了不少用户,Presto在这方面也做得不错.Hive和Spark更适用于长时间分析查询. AtScale产品管理方面副总Joshua Klar表示,许多公司客户使用两个引擎.通常他们认为Hive更稳定,并且更习惯于使用H

甲骨文Oracle大数据SQL加速企业大数据部署

[天极网服务器频道7月25日消息]甲骨文公司推出了Oracle大数据SQL(Oracle Big Data SQL),该款基于SQL的软件,可跨Hadoop.NoSQL和Oracle数据库进行同一个SQL查询.Oracle大数据SQL在Oracle大数据机(Oracle Big Data Appliance)上运行,可与Oracle Exadata数据库云服务器配合使用. Oracle大数据SQL提供基于SQL的流行商务智能工具和应用,更易于访问传统数据仓库以外的Hadoop和NoSQL数据源.