Presto 0.175 发布,Facebook 大数据查询引擎

Presto 0.175 发布了,Presto 是 Facebook 开源的数据查询引擎,可对250PB以上的数据进行快速地交互式分析,查询的速度达到商业数据仓库的级别。据称该引擎的性能是 Hive 的 10 倍以上。

Presto 可以查询包括 Hive、Cassandra 甚至是一些商业的数据存储产品。单个 Presto 查询可合并来自多个数据源的数据进行统一分析。

部分更新如下:

将 mongodb.connection-per-host 配置选项重命名为 mongodb.connections-per-host

添加对 INT 的支持,作为 INTEGER 数据类型的别名

将 INTERVAL 数据类型支持添加到 avg()和 sum()聚合函数

添加 enable_intermediate_aggregations 会话属性,以便在未分组的聚合中使用中间聚合

减少涉及 ORDER BY 的某些查询的内存利用率

时间: 2024-10-13 03:18:18

Presto 0.175 发布,Facebook 大数据查询引擎的相关文章

Presto 0.179 发布,Facebook 大数据查询引擎

Presto 0.179 已发布,Presto 是 Facebook 开源的数据查询引擎,可对250PB以上的数据进行快速地交互式分析,查询的速度达到商业数据仓库的级别.据称该引擎的性能是 Hive 的 10 倍以上. Presto 可以查询包括 Hive.Cassandra 甚至是一些商业的数据存储产品.单个 Presto 查询可合并来自多个数据源的数据进行统一分析. 更新内容: 新增基于文件的全局安全性,可以使用 "etc / access-control.properties"

Facebook 正式开源其大数据查询引擎 Presto

Facebook 正式宣布开源 Presto -- 数据查询引擎,可对250PB以上的数据进行快速地交互式分析.该项目始于 2012 年秋季开始开发,目前该项目已经在超过 1000 名 http://www.aliyun.com/zixun/aggregation/1560.html">Facebook 雇员中使用,运行超过 30000 个查询,每日数据在 1PB 级别.Facebook 称 Presto 的性能比诸如 Hive 和 Map*Reduce 要好上 10 倍有多. Prest

开源大数据查询分析引擎现状

引言 大数据查询分析是云计算中核心问题之一,自从Google在2006年之前的几篇论文奠定云计算领域基础,尤其是GFS.Map-Reduce. Bigtable被称为云计算底层技术三大基石.GFS.Map-Reduce技术直接支持了Apache Hadoop项目的诞生.Bigtable和Amazon Dynamo直接催生了NoSQL这个崭新的数据库领域,撼动了RDBMS在商用数据库和数据仓库方面几十年的统治性地位.FaceBook的Hive项 目是建立在Hadoop上的数据仓库基础构架,提供了一

Facebook大数据释放的新机会

前几天,人们对Facebook将推出什么新产品多有猜测. 现在答案揭晓了. Facebook周二(1月15日)在门罗帕克总部召开新闻发布会,CEO马克·扎克伯格宣布推出Graph Search(图形搜索)工具. Graph Search 这是Facebook自2012年5月上市以来推出的最重要产品,它区别于普通搜索的突出特点是:这是一款与用户密切相关的搜索.它是Facebook对10亿名用户.2400亿张照片和1万亿次页面访问量作出的回应,这个工具旨在向用户提供有关人.照片.地方和兴趣(这也是与

Graph Search,Facebook大数据释放的新机会

前几天,人们对Facebook将推出什么新产品多有猜测. 现在答案揭晓了. Facebook周二(1月15日)在门罗帕克总部召开新闻发布会,CEO马克·扎克伯格宣布推出Graph Search(图形搜索)工具. Graph Search 这是Facebook自2012年5月上市以来推出的最重要产品,它区别于普通搜索的突出特点是:这是一款与用户密切相关的搜索.它是Facebook对10亿名用户.2400亿张照片和1万亿次页面访问量作出的回应,这个工具旨在向用户提供有关人.照片.地方和兴趣(这也是与

中关村发布:大数据企业分布图等3张图

2015年12月12日,中关村大数据日在中关村国家自主创新示范区会议中心举办.此次大会主题为"共享共融 数创未来". 在大数据文摘后台,回复"中关村大数据日",下载高清大图.发布PPT:点击文末"阅读原文",加入大数据企业名录 指导单位: 中关村科技园区管理委员会.北京市经济和信息化委会.北京市海淀区人民政府 主办单位: 中关村大数据产业联盟 联合主办: 美林数据技术股份有限公司.北京久其软件股份有限公司 协办单位: 北京大数据研究院.清华大数据

工业4.0不遥远 沃尔核材大数据应用之道

文章讲的是工业4.0不遥远 沃尔核材大数据应用之道,大数据到现在可以说在概念上已经无人不知无人不晓,也萌生了很多技术提供商,但是在用户端真正明白如何用,有实际的成功应用案例的并不多,这一方面体现了技术落地应用的时间线性规律,也体现了新技术在应用方面的门槛,以及结合不同应用场景下的创新能力.另外值得一提的是,IT选型和逛街买衣服没有本质区别,除了个性化元素之外,朋友穿什么牌子可以借鉴参考.因此,如何发挥企业的主观能动性,让新技术应用周期缩短,让企业更快的看到应用成果,是我们做行业沙龙/会议的真正价

从0到1构建大数据生态系列1:数据蛮荒中的拓荒之举

缘起   我们都知道,当前大数据的需求基本属于遍地开花.无论是帝都.魔都,还是广州.深圳,亦或是全国其他各地,都在搞大数据:不管是不到百人的微小公司,还是几百上千人的中型公司,亦或是上万的大型公司,都在需求数据岗位.   大公司暂且不论,他们一切都走在前头.那么,对于中小型企业来说,开始尝试以数据的思维去思考问题,开始涉足大数据领域,这就是一个从0到1的过程了.   有(bu)幸(xing),近半年来,我亲自见证以及亲身体会到了这个过程,或者至今仍然在完善1这个过程中.期间,有痛苦有坑.有喜悦有

浪潮集团发布金融大数据一体机

摘要: 浪潮集团发布金融大数据一体机 近日,浪潮集团与国内金融行业软件解决方案厂商南天信息联合发布浪潮云海金融大数据一体机,主要用于金融行业的大数据挖掘与分析.本次推出的浪 浪潮集团发布金融大数据一体机 近日,浪潮集团与国内金融行业软件解决方案厂商南天信息联合发布浪潮云海金融大数据一体机,主要用于金融行业的大数据挖掘与分析.本次推出的浪潮云海金融大数据一体机,具有弹性扩展.即付即用.安全可靠等特点.浪潮集团大数据产品部总经理王峰表示,浪潮大数据一体机未来也会拓展至金融以外的 其他 领域. 浪潮云