MySQL智能运维与实践,看关系型数据库如何优雅应对云时代

随着互联网场景的导入,非结构化的海量数据给传统数据库的处理能力带来了极大的挑战,作为最受欢迎的开源关系型数据库,MySQL一步步地占领了原有商业数据库市场。如今Google、Facebook、网易、淘宝等大公司都在使用MySQL数据库。而MySQL的发展也从1.0到如今的8.0版本,其功能的完善和稳定性也得到了很好的保证。

本文包含以下三部分:

  • MySQL8.0 的新特性
  • 云时代MySQL的运维实践
  • 金融行业最佳应用场景

今年8.0版本将会带来哪些惊喜呢?

MySQL 8.0 新特性一览

1、InnoDB的增强

MySQL 5.7版本中在 InnoDB引擎上关于 Buffer pool的在线修改,临时表以及在线DDL的增强,极大地提高了InnoDB的性能,成为划时代的新变革。而在8.0中,通过在InnoDB中存储新的数据字典,允许InnoDB直接从服务器获取元数据,能够实现自动DDL,使得创建删除表等过程实现更方便。

2、性能的增强

在8.0版本中,MySQL对Redo日志做了重新设计,增加了多线程的功能以及自驱动的模块,在很大的程度上提高了写日志过程的效率,从而数据库性能得到较大提升。

3、安全的新特性

增加了SQL的角色,实现对SQL访问数据库的权限控制。除了默认的角色之外,还包含一些动态的特权角色。

在企业版中,为了提高数据的安全管理,MySQL对整个安全体系都做了更新。如下所示:

4、复制功能的增强

通过将元数据存储在二进制日志中,使得复制环境下的数据传输和提取更加方便。

5、更多的新特性

table 表达式,能够实现在一些简单的查询中创建临时表或者视图,提出了新的表空间管理方式,每个表空间进行自描述,取消了system表空间的代理,并实现通过SQL管理undo log和tablespace。

更多的新特性,关注公众号后回复关键字“2017OOW”获取相关ppt.

在今年的数据技术嘉年华上,来自甲骨文公司的MySQL研发工程师宋利兵将为大家介绍MySQL-8.0中异步复制和Group Replication复制的发展方向,和已经实现了的新技术新特点。数据是每个公司最核心的资产,大数据时代到来更是如此。对于使用MySQL的企业来说,作为存储数据的最重要的载体,那么MySQL是如何做到数据安全呢?CRUG创始人强昌金将从单机配置、集群等方面的阐述MySQL是如何做到数据安全的。

云时代的MySQL运维实践

随着数据库朝着自动化和智能化的方向发展,MySQL数据库也不断地创新和变革,而在不同的企业中,为了更好地应对业务的需求,MySQL数据库的运维模式也在发生巨大的变化。

在今年的数据技术嘉年华上,去哪儿网数据库总监周彦伟将会分享如何在MySQL运维实践中,充分发挥MySQL开源社区红利,选用MySQL各种开源工具,在工作中实现事半功倍的效果。来自竞技世界自身技术专家杨建荣将会根据自己的实践从Oracle和MySQL的维度来聊一聊DBA成长中的一些疑问和想法,比如技术选型,技术架构和职业发展。来自新浪微博研发技术中心副总监肖鹏,对于MySQL的运维管理有丰富的经验,将从自身的经历出发,反思职场职位选择、个人发展、管理转型等不同阶段做出的选择的理由和个人经验分享,旨在帮助大家在面对抉择的时候能更加的理性。

在MySQL的智能运维方面,来自阿里云的专家张云扬分享阿里云的下一代数据库PolarDB,从阿里面对的10万量级数据库实例的挑战出发,介绍新一代数据库PolarDB的架构性能等方面的内容。阿里巴巴的CloudDBA-数据库智能优化理念探索也深受行业关注,阿里巴巴产品专家胡航丽 将为大家分享这一产品设计理念和突出成果。

同时还有云和恩墨 MySQL 技术顾问田朋带来MySQL的运维实践,精彩内容敬请期待。

金融行业最佳应用场景

大数据的时代,很多企业都在NoSQL与NewSQL的方向上不断尝试,但由于缺乏统一的标准,目前很多技术还是相对不成熟。传统的关系型数据库仍然与大部分企业需求达到了高度匹配。

就拿受互联网行业影响最大的金融行业来说,目前很多金融企业在使用MySQL数据库。来自腾讯金融的资深技术专家姜承尧将对外分享财付通平台上的MySQL数据库应用,以及在如此大规模数据库平台上如何高效的运维这么庞大的数据库集群以及对于未来金融数据库架构的发展讨论。

来自京东金融的技术专家高新刚为我们分享MySQL在金融理财领域的相关应用。在他的分享中将会重点阐述

  • 如何保证业务快速发展下系统的高可用性?
  • 如何实现数据库运维从人工维护到智能运维?

来自腾讯的专家李海翔,将分析金融云分布式数据库的事务处理技术,在这个主题中,海翔将和大家分享腾讯的TDSQL是如何应对挑战、以技术推动互联网金融业务发展的。

是一场MySQL的技术盛会,看传统数据库如何优雅地应对云时代,尽在数据技术嘉年华!

除了以MySQL为代表的开源的传统数据库,在本次嘉年华大会,第一次有众多国产数据库的身影汇聚,而且各具代表性,KDB 是传统关系型数据库,SequoiaDB 是 NoSQL,TiDB 是 NewSQL 分布式关系型数据库,Oushu Database 则是源自 HAWQ 的企业级 MPP 数据库。当然这其中还包括源于MySQL的 PolarDB 、TDSQL,以及阿里研发的Oceanbase。逐一细数,其实我们发现,国产数据库已经能够覆盖传统的关系型应用、NoSQL、NewSQL、MPP大数据库处理 ,以及几乎支撑中国互联网的整个江山。而CockroachDB作为受到 Google的Spanner 项目启发而诞生的OLTP数据库,在百度内部已然被广泛应用。

这一次来自KDB数据库的掌门人江豫京、SequoiaDB 巨杉数据库的创始人 王涛、百度的技术专家严龙、Oushu 数据库的创始人 常雷 博士,TiDB 副总裁申砾、首席架构师唐刘齐聚一堂。江豫京来自浪潮,代表了国产数据库传统模式的突围,王涛 出自IBM,代表了源于DB2理念的革新,而常雷博士曾任EMC高级研究员、EMC/Pivotal研发部总监,是Apache HAWQ创始人,申砾 和 唐刘 都是国际开源项目的活跃者,从国内到国际,又从国际到国内,说英雄,谁是英雄?看数据,谁是数据之王?快来数据技术嘉年华!



原文发布时间为:2017-11-8

时间: 2024-08-03 23:29:49

MySQL智能运维与实践,看关系型数据库如何优雅应对云时代的相关文章

裴丹教授采访|如何实现智能运维及对运维行业的未来展望

编者按 裴丹教授,清华大学计算机系长聘副教授,主要研究领域是基于机器学习的互联网智能运维,深耕此领域15年,发表了80余篇学术论文和20余项美国专利.裴教授同时还是国家青年千人计划,美国UCLA博士,曾任美国AT&T研究院主任研究员,也是ACM 和 IEEE的Senior Member. 裴教授也是本次中生代&飞马网年度技术大会(北京)的运维专场出品人.小编有幸先行对裴丹教授进行了采访,如果你也非常期待见到裴教授并跟他进行深度交流,一定不能错过即将举行的年度技术大会. 访谈实录 裴教授,很

清华裴丹分享AIOps落地路线图,看智能运维如何落地生根

大家上午好,非常荣幸,能有这个机会,跟这么多的运维人一起交流智能运维.最近这两年运维里面有一个很火的一个词叫做AIOps(智能运维),并且有一小部分人一往无前的投入到AIOps中去了, 但是更多的人都还在持观望态度,因为大家内心中还存在一个无法回避的问题:AIOps到底在自己的场景下怎么落地?所以今天我要跟大家分享我认为的AIOps落地应该遵循的路线图.既有技术路线图,也有战略路线图.这虽然不是唯一的一个路线图,但这是我今后十年会不断努力.专注和迭代的一个方向,希望为那些对AIOps感兴趣的朋友

畅游:游戏运维最佳实践

回顾视频:https://yq.aliyun.com/edu/lesson/play/608   以下内容根据阿里云行业圆桌论坛视频整理而成. 本期嘉宾介绍: 黎志刚,畅游运维部总监: 翔贺,阿里云资深架构师. 上云趋势不可避免,越来越多的企业启动上云之路.在云计算普惠时代,各行各业都在发生着变化. 阿里云行业圆桌会,汇聚APP.网站.游戏.金融.电商.音视频.健康.教育.能源.政务.运输.制造等12大行业类别,邀请阿里云经典客户,一起聊聊他们的上云之路,以及云上技术实践!   畅游业务情况简介

高效运维最佳实践七字诀,不再憋屈的运维!

做运维的那么多,快乐的能有几个? 我们那么努力,为什么总感觉过得那么憋屈.苦闷?做的事情那么多,为什么业务部门.直接领导和公司貌似都那么不领情?怎么做才能自己更加开心些? 本专栏的主线实际是一个运维人员的十年成长史,从菜鸟到运维总监.但不是基础技术教学,也不会在运维技术的某一方面过深涉及.更多的是应用技巧.实践经验及案例剖析.专栏中的系列文章,包含作者在运维各个细分领域的技术和个人成才的心得体会.因此也可以成为广大运维朋友的工具书,伴随大家从初级运维成长为高级技术型运维管理人才. 技术专栏就非得

当DevOps遇见AI,智能运维黄金时代即将开启?

    人工智能应用的分类 很多情况下人工智能无法给出 100% 正确的回答(其实人类也是一样的),如何找到人工智能善于解决的问题就成了首要的任务. 人工智能应用可以分成三类: 核心业务,失败不可接受. 医疗,银行,法律. 核心业务,失败率可接受. 自动驾驶,自然语言理解. 非核心业务,对失败不敏感. 用于改善用户体验. 从人工智能发展和应用的过程来看,通过对感知的模拟,帮助人类做决策,直到完全 代替人类处理大量重复的数据方面的工作. 另一方面,由 巨大商业利益 推动的人工智能将很快成为现实,自

中亦科技发布“智能运维”战略 实现IT资源全面有效管控

<三体>这本小说很多人都看过,其中有这样一句话"当高维文明灭绝低维文明时,我毁灭你与你无关".随着时代的变革,IT的发展给各行各业带来了巨大的冲击,不断推动着企业业务的发展.但当企业IT部门推出一款新产品时,产品落地后的稳定性是至关重要的,如何才能避免人工错误的产生,提升后台运营能力是企业IT部门一直在关注的问题. 10月19日,中亦科技发布了云服务管理平台(EVO-Cloud)和自动化运维管理平台(EVO-AIMS)两款"智运维"的产品.其中,云服务管

三大通用核心套件帮你构建智能运维体系

2017年在线技术分会--运维/DevOps在线技术峰会上,来自阿里基础架构事业部大数据SRE团队的池枫分享了构建通用化智能运维体系的实践.他主要介绍了智能运维体系的设计以及通用核心套件,从T-flow操作执行.ICS事件连接.IAS智能分析三个核心套件的实际案例出发详细介绍了阿里的运维经验.   以下内容根据直播视频整理而成.   发展历程 上图的上方是大数据SRE团队运维的产品,几乎包括了所有阿里巴巴使用的大数据产品.下方是运维模式的发展历程,经过了:人工脚本化.工具整合.自动化平台.智能运

高效运维最佳实践七字诀

做运维的那么多,快乐的能有几个? 我们那么努力,为什么总感觉过得那么憋屈.苦闷?做的事情那么多,为什么业务部门.直接领导和公司貌似都那么不领情?怎么做才能自己更加开心些? 前段时间有位IT大佬在网络上发声,我这么有钱,为什么不幸福?诚然,有钱是幸福的最重要条件之一,但有钱就一定幸福么?真的是充分必要条件?当然更悲催的是运维行当,技术好是被认可(幸福)的最重要条件,但技术再好,外部门不说咱们"坏话",已经是很不错的了.   1. 什么是高效运维 我们收集了一些来自外部门对运维的印(tou

《Splunk智能运维实战》——第1章 游戏时间——导入数据 1.1 简介

第1章 游戏时间--导入数据 1.1 简介 加快运维智能的机器数据有很多不同的形式,来源也各不相同.Splunk可从多种来源收集并索引数据,其中包括Web服务器或商业应用程序创建的日志文件,网络设备生成的系统日志数据,及自定义开发脚本输出的数据.即便数据一开始看上去很复杂,我们也可以借助Splunk轻松地实时收集.索引.转化和呈现数据. 本章将学习一些基本的技巧,掌握如何将所需的数据导入Splunk,介绍如何使用样本数据集来构建自己的Splunk智能运维应用程序.该数据集是由一个虚拟的三层式电子