雅虎开源 MySQL Partition Manager

雅虎开源数据库分区表管理器 MySQL Partition Manager ，你可在 GitHub 查看它的源码。

雅虎内容管理大量的 MySQL 数据库，它们分布在不同的数据中心。在有数千个数据库，每个数据库有大量的分区表。为了高效地创建和维护分区表，他们开发了这个分区管理器，以最低的预配置来自动管理分区。

雅虎数据库工程团队还在 blog 表示，他们将与 MySQL 社区保持的互动，并开发出更多特性。

====================================分割线================================
文章转载自开源中国社区[http://www.oschina.net]

时间： 2024-10-31 17:39:29

雅虎开源 MySQL Partition Manager的相关文章

雅虎开源 MySQL 性能监控和分析器（Java）

MySQL Performance Analyzer 是雅虎公司的一个 MySQL 性能监控和分析工具,该项目包含两个子项目,分别是 Java web 应用项目 myperf 和 Java Web 服务器 Jetty 的封装. 该项目的 pom.xml 指定要 JDK 8 支持,但项目没有用到任何 JDK 8 才有的特性,因此可修改为 JDK 7 即可. 文章转载自开源中国社区 [http://www.oschina.net]

partition manager导致资料丢失如何解决

[问题] 我用Partition Manager软件,想把E盘的系统格式更改为NTFS 操作提示失败提示如图. 然后我打开我E盘的资料,发现资料基本都不见了-- 我看剩余的空间跟之前的又一样,这种情况如何恢复数据? [回答] 先说导致数据丢失的原因,以及我对调整分区的看法: PQ是个不稳定的软件,我们在数据恢复工作中经常遇到因PQ合并,拆分导致的数据故障.其原因我分析可能是:PQ毕竟是第三方的软件,对于文件系统的解释和MICROSOFT的解释还是不可能完全一致的(MICROSOFT像NTFS文

雅虎开源了TensorFlowOnSpark

雅虎开源了TensorFlowOnSpark,数据科学家和工程师们可以直接利用运行于CPU/GPU架构上的Spark或者Hadoop做分布式模型训练.据报道,这个库支持把现有的TensorFlow程序切换到新的API,同时实现了模型训练的性能提升. 在开源公告里,雅虎说明了TensorFlowOnSpark想解决的问题,比如在深度神经网络训练中管理Spark数据管线之外的其他集群带来的运维负载,以网络I/O为瓶颈的数据集在训练集群的传入和传出,令人讨厌的系统复杂性,以及端到端的整体学习时延.Te

雅虎开源其JavaScript 框架Mojito

雅虎近日开源了其JavaScript框架Mojito,该框架是雅虎于去年11月份推出的Cocktails(鸡尾酒)移动开发平台的一部分,允许开发者在连接的设备以及后端服务上部署HTML5应用程序. 根据官方介绍: 引用 Mojito是一个JavaScript Web应用框架,使用其开发的程序可同时运行在浏览器和服务器端.也就是说,使用Mojito,开发人员不必再为后端的服务器及前端浏览器分别编写不同的代码了.而且,不必害怕Web页面会提示"必须启用JavaScript

开源MySQL高效数据仓库解决方案：Infobright详细介绍_Mysql

Infobright是一款基于独特的专利知识网格技术的列式数据库.Infobright是开源的MySQL数据仓库解决方案,引入了列存储方案,高强度的数据压缩,优化的统计计算(类似sum/avg/group by之类),infobright 是基于mysql的,但不装mysql亦可,因为它本身就自带了一个.mysql可以粗分为逻辑层和物理存储引擎,infobright主要实现的就是一个存储引擎,但因为它自身存储逻辑跟关系型数据库根本不同,所以,它不能像InnoDB那样直接作为插件挂接到mysql,

Facebook开源MySQL分支，谷歌、LinkedIn、Twitter等大拿捧场

3月27日,http://www.aliyun.com/zixun/aggregation/1560.html">Facebook发布了新的开源项目 WebScaleSQL.WebScaleSQL是人气数据库MySQL的一个分支,已获Google.LinkedIn及Twitter等大型互联网公司的支持.同时,Facebook还承诺具有一定MySQL运营经验的机构或个人也可以申请加入WebScaleSQL社区成为贡献者. Facebook丰富的MySQL经验 Facebook在MySQL上拥

雅虎开源发布/订阅消息平台Pulsar

雅虎发布了其发布-订阅消息平台Pulsar,这个平台在他们内部已经用在了多项服务的生产环境之中. 按照雅虎的说法,Pulsar是一个低延迟的发布/订阅消息系统,它可以进行水平扩展,跨多个主机和数据中心.雅虎从2015年第二季度开始,就一直在邮件.财经.Gemini Ads.Sherpa(雅虎的分布式key-value服务--译注)以及体育相关的功能中使用Pulsar.通过将其开源,他们希望Pulsar能够与其他开源项目进行集成,从而促使它得到广泛的应用.雅虎已经将Pulsar部署到了十个以上的数

mysql partition 分区功能使用详解

目前分区规则有四种,分别是RANGE.LIST.HASH和KEY,另外通过DATA DIRECTORY和INDEX DIRECTORY选项可以把不同的分区数据文件分散到不同的磁盘上,从而进步一提高系统的IO吞吐量.因此按照业务逻辑设计好了分区,可以大大提高查询效率,而且删除数据可能也会很容易.但是分区也有一些限制:1.主键或者唯一索引必须包含分区字段:2.只能通过int类型的字段或者返回int类型的表达式来分区:3.单表最多只能有1024个分区. 默认mysql是开启了分区功能的,可以通过下述查

厉害了！雅虎开源TensorFlowOnSpark

去年雅虎结合了大数据和机器学习领域的两大明星,将内存数据处理框架Spark与深度学习框架Caffe集成.在Spark中编写的应用程序将使用Caffe的训练功能,或者使用经过训练的模型来进行Spark本地机器学习无法实现的预测. 今年,雅虎又发了一波大招,最新的Yahoo开源项目TensorFlowOnSpark(TFoS)(Github地址:https://github.com/yahoo/TensorFlowOnSpark)再次融合了深度学习和大数据框架,据说能够更有效地大规模运行,并且几乎没