20210203 8. 运维和第三方工具

运维和第三方工具

Yearning

Yearning 开源的 MySQL SQL 语句审核平台,提供数据库字典查询,查询审计,SQL 审核等多种功能。

canal

canal 译意为水道/管道,主要用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费。

DataX

DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据源之间高效的数据同步功能。

percona-toolkit

MySQL 数据库是轻量级、开源数据库的佼佼者,因此有很多功能强大第三方的衍生产品,如 perconatoolkit、traBackup等。percona-toolkit 是一组高级命令行工具的集合,可以查看当前服务的摘要信息,磁盘检测,分析慢查询日志,查找重复索引,实现表同步等等。

MySQLMTOP

MySQLMTOP 是一个由 Python + PHP 开发的开源 MySQL 企业监控系统。该系统由 Python 实现多进程数据采集和告警, PHP 实现 Web 展示和管理,优点如下:

  • MySQL 服务器无需安装任何 Agent,只需在监控WEB界面配置相关数据库信息
  • 启动监控进程后,即可对上百台 MySQL 数据库的状态、连接数、QTS、TPS、数据库流量、复制、性能慢查询等进行实时监控。
  • 可以在数据库偏离设定的正常运行阀值(如连接异常,复制异常,复制延迟) 时发送告警邮件通知到 DBA 进行处理。
  • 可以对历史数据归档,通过图表展示数据库近期状态,以便DBA和开发人员能对遇到的问题进行分
    析和诊断。

ELK

ELK 是一个完整的集中式日志系统 ,提供了一整套解决方案,并且都是开源软件,之间互相配合使用,完美衔接,高效的满足了很多场合的应用。目前主流的一种日志系统。

Prometheus

Prometheus 于 2012 年由 SoundCloud 创建,目前已经已发展为最热门的分布式监控系统。Prometheus 完全开源的,被很多云厂商(架构)内置,在这些厂商(架构)中,可以简单部署 Prometheus ,用来监控整个云基础架构设施。比如 DigitalOcean 或 Docker 都使用普罗米修斯作为基础监控

原文地址:https://www.cnblogs.com/huangwenjie/p/14368061.html