CMUG第9期美团数据库运维平台介绍1

1、美团数据库运维平台介绍曾经的阿飞大纲自动化运维平台慢查询系统备份系统统计分析报表Percona使用经验自动化运维平台自助DDL授权申请慢查询系统DBA Weekly ReportCPU IO 慢查询 监控历史Processlist查询历史Innodb Status查询元信息DBManager工具报表开发报表废弃表 废弃索引 冗余索引容量管理自助DDL任务类型直接执行备份Drop使用OSC变更Too big并发执行createalter、dropdropalterdelaypt-online-schema-changeNew DataOldDataNew Table触发器Insert ignor

2、e into newtable select from oldtable where pk between () lock in share mode踩的一些坑MDL锁：长时间运行的事务添加唯一索引，丢数据：replace into主从表结构异构：create new table 变更时间非常长较差从库延迟Thread_running一直超过阈值慢查询慢查询pt-query-digestBox AnemometerMySQLSlow LogPt-query-digestMySQLAnemometerMySQLSlow LogPt-query-digestMySQLSlow LogPt-quer

3、y-digest备份系统Xtrabackup自动扩容坑5.6 bug，已经修复备份session：flush tables with read locksql thread：waiting for commit lock备份session ： Show slave status死锁自动化运维平台自助DDL授权申请慢查询系统DBA Weekly ReportCPU IO 慢查询 监控历史Processlist查询历史Innodb Status查询元信息DBManager工具报表开发报表废弃表 废弃索引 冗余索引容量管理DBA Weekly Report慢查询TOP10磁盘消耗速度TOP10Inn

4、odb_pages_read TOP10Innodb_row_lock_time TOP10监控被disable的主机自增ID溢出检测开发的DB Weekly Report包含内容持续一周不在访问表持续一周不在使用的索引冗余的索引实现方式percona user statpt-duplicate-key-checker历史processlist查询历史的show engine innodb status查询容量管理美团容量管理BenchmarkTcpcopy挖掘历史数据估算节假日峰值监控数据:max(avg(15m)Percona使用经验Percona ServerUser Statistic

5、sResponse Time DistrubThread poolinnodb_deadlocksmax_binlog_filesPercona Toolkitpt-query-digestpt-killpt-online-schema-changept-duplicate-key-checkerUser Statisticsset global userstat=onResponse Time Distrubhave_response_time_distributionquery_reponse_time_range_basept-query-digestpt-query-digest -order-by=Bytes_sentpt-query-digest -processl