• 博客访问: 7291853
  • 博文数量: 1014
  • 用 户 组: 普通用户
  • 注册时间: 2009-10-07 13:14
个人简介

MySQL DBA NoSQL DEVOPS

文章分类

全部博文(1014)

发布时间:2017-08-27 20:28:24

Percona公司发布 innobackup 2.4 版本已经很久了,增加了新的特性比如xtrabackup支持非Innodb表备份,指定 --safe-slave-backup,增加备份的一致性,最重要的一点是支持5.7的备份,2.2是不能备份5.7 版本的。本文主要记录我们使用 2.4 版本过程中遇到的问题和之前的一些改变。......【阅读全文】

阅读(1367) | 评论(0) | 转发(0)

发布时间:2017-08-16 23:50:13

本文通过测试我们要弄清楚两个问题
a 继承关系 wait_timeout在session和global级别分别继承那个参数?
b 生效参数 在会话中到底哪个参数决定了会话的存活时间?......【阅读全文】

阅读(1977) | 评论(0) | 转发(0)

发布时间:2017-08-04 13:45:22

order by 语句的优化是MySQL DBA处理业务慢查询的时候经常遇到的情况,本文比较详细的针对常见的业务场景做分析,能够帮助开发掌握什么样的语句可以利用到索引排序,什么的sql 需要规避。......【阅读全文】

阅读(3000) | 评论(0) | 转发(0)

发布时间:2017-08-02 00:00:00

Redis-Sentinel是Redis官方推荐的高可用性(HA)解决方案,当用Redis做Master-slave的高可用方案时,假如master宕机了,Redis本身(包括它的很多客户端)都没有实现自动进行主备切换,而Redis-sentinel本身也是一个独立运行的进程,它能监控多个master-slave集群,发现master宕机后能进行自懂切换。......【阅读全文】

阅读(1788) | 评论(0) | 转发(1)

发布时间:2017-07-30 10:59:30

fileinput 是python 提供的一个可以快速遍历,修改一个或者多个文件的模块。我们可以使用该模块进行文本替换 并做文件备份。......【阅读全文】

阅读(1552) | 评论(0) | 转发(1)

发布时间:2017-07-29 21:20:13

python 字符串输出格式化有两种方式 %[s,d,] ,还有一种是string.format()。python 2.6 版本提供了后者,其功能也相当强大。......【阅读全文】

阅读(735) | 评论(0) | 转发(1)

发布时间:2017-07-16 23:25:22

*args 和 **kwargs 主要用于函数定义。 当我们需要定义的函数的传入参数个数不确定时,可以使用*args 和 **kwargs 代替不确定的参数个数。其实并不是必须写成*args 和**kwargs。 只有变量前面的 *(星号)才是必须的. 我们可以写成*var和**vars. 而写成*args 和**kwargs只是一个通俗的命名约定。......【阅读全文】

阅读(891) | 评论(0) | 转发(1)

发布时间:2017-07-16 13:00:25

Python 内置了很多非常有用的函数 比如map() ,reduce(),filter(),还有lambda。熟练应用这些函数可以在写python程序的时候构建精简的代码。本文先来了解map函数。......【阅读全文】

阅读(876) | 评论(0) | 转发(0)

发布时间:2017-07-15 23:32:19

sort 的功能是将文件/文本的每一行作为一个单位,相互比较,比较原则是从首字符向后,依次按ASCII码值进行比较,最后将他们按升序输出。......【阅读全文】

阅读(308) | 评论(0) | 转发(1)

发布时间:2017-07-02 21:52:42

使用python进行并发处理多台机器/多个实例的时候,我们可以使用threading ,但是由于著名的GIL存在,实际上threading 并未提供真正有效的并发处理,要充分利用到多核CPU,我们需要使用多进程。Python提供了非常好用的多进程包--multiprocessing。multiprocessing 可以利用multiprocessing.Process对象来创建一个进程,该Process对象与Threading对象的用法基本相同,具有相同的方法(官方原话:"The multiprocessing package mostly replicates the API of the threading module.") 比如:start(),run(),join()的方法。multiprocessing包中也有Lock/Event/Semaphore/Condition/Pipe/Queue类用于进程之间的通信。话不多说 show me the code!......【阅读全文】

阅读(1501) | 评论(0) | 转发(1)

发布时间:2017-06-10 15:30:48

和团队内部的同事一起沟通,讨论了MySQL 数据库系统数据安全性问题,主要针对MySQL丢数据库的场景 ,主从不一致的场景 ,还有业务层面使用不得当导致主备库数据结构不一样的情况,本文是基于以上的讨论和总结做的思维导图。......【阅读全文】

阅读(1658) | 评论(0) | 转发(0)

发布时间:2017-06-10 12:10:58

Python和MySQL交互的模块有 MySQLdb 和 PyMySQL(pymysql),MySQLdb是基于C 语言编写的,而且Python3 不在支持MySQLdb 。PyMySQL是一个纯Python写的MySQL客户端,它的目标是替代MySQLdb,可以在CPython、PyPy、IronPython和Jython环境下运行,PyMySQL在MIT许可下发布。
在开发基于Python语言的项目中,为了以后系统能兼容Python3,我们使用了PyMySQL替换了MySQLdb。下面我们来熟悉一下pymysql的使用。......【阅读全文】

阅读(1275) | 评论(0) | 转发(0)

发布时间:2017-05-06 23:45:33

相信大部分能看到我blog的人都听说过知乎吧?如果你没有听说过,那么链接在这里 知乎? 作为一个知乎er,为了更加深入的理解“xxx 是一种什么体验”(的图片),为了践行 “技术改变生活”(实则有些wuliao) ,使用requsets 爬取知乎中最优价值的内容,本文本着探索的精神,写一段获取内容的python程序。......【阅读全文】

阅读(5752) | 评论(2) | 转发(0)

发布时间:2017-05-05 23:08:37

在构建数据库自动化运维系统的时候,数据库服务器上必须要有一个agent来执行web服务器端发起的命令,我们研究了好几种技术celery,rq 或者基于socket实现,当然还有自己写,因为之前有同事已经完成了一个agent---servant,在和同事沟通之后,我们决定复用servant,不用重复造轮子。servant是一款基于go语言编写的,提供权限认证和远程调用,支持异步执行命令的agent ,满足我们目前数据库备份任务,定时收集数据库元数据信息,定时校验备份的有效性的任务需求。本文是一篇how to 文档,相对比较详细的介绍如何安装和使用servant,希望对读者朋友有所帮助。......【阅读全文】

阅读(5193) | 评论(5) | 转发(0)

发布时间:2017-05-01 19:11:38

装饰器是一个用于封装函数或者类的代码工具,显式地将封装器作用于函数或者类上,达到程序运行时动态增加功能的目的。对于函数运行前处理常见前置条件(常见的web登陆授权验证),或者在函数执行之后做善后工作(比如异常处理,记录log 等等)。......【阅读全文】

阅读(2222) | 评论(0) | 转发(0)
给主人留下些什么吧!~~

杨奇龙2017-08-31 17:28

zhuizong:杨老师!
抛出
硬件、系统、DB层面
mysql 的 sql 优化应该如何去优化

谢谢!!!

已经攒够素材了,过几天会补上 sql 优化的 文章 。请期待

回复  |  举报

杨奇龙2017-06-21 11:12

jiangnan_ora:期待mysql2阶段性提交的介绍哈

已经 写了 思维导图了 在这里  http://blog.itpub.net/22664653/viewspace-2131353/

回复  |  举报

jiangnan_ora2017-06-21 11:04

期待mysql2阶段性提交的介绍哈

回复  |  举报

杨奇龙2017-05-07 18:48

zhuizong:杨老师!
抛出
硬件、系统、DB层面
mysql 的 sql 优化应该如何去优化

谢谢!!!

以后会逐步写 sql 层面的优化系列的文章

回复  |  举报

zhuizong2017-05-06 21:29

杨老师!
抛出
硬件、系统、DB层面
mysql 的 sql 优化应该如何去优化

谢谢!!!

回复  |  举报
留言热议
请登录后留言。

登录 注册

/xyw/010e.html /123/314m.html /8848/266y.html /bosoo/706u.html /bosoo/463a.html /bbs/784O.html /bbs/656d.html /bbs/771b.html /pmw/278D.html /gupiao/160J.html /123/615g.html /888/166A.html /xyw/847r.html /3088/577F.html /bbs/282G.html /88410/171F.html /55901/212v.html /ks/684t.html /bbs/223y.html /8888/888V.html /ks/464P.html /0088/100b.html /3088/557Q.html /daxue/225t.html /wb/576V.html /xyw/285B.html /bbs/158H.html /888/222x.html /bosoo/811p.html /boss/501p.html /xyw/421H.html /xyw/088O.html /bbs/134v.html /bbs/771F.html /daxue/740H.html /123/410e.html /bosoo/043y.html /ggs/085u.html /55901/058g.html /8888/020b.html /bg88/876C.html /ks/675Z.html