推荐一款关于MongoDB日志分析的工具--Mtools

一. 需求背景

MongoDB数据库的强大的文档模型使其成为处理数据的最佳方式。文档适用于广泛的流行数据模型，支持各种各样的场景。文档模型可以包含键值、关系数据集和图形数据集，当然，还可以包含父子关系、列表/数组以及其他层次关系，它们比传统的关系型数据库技术（表格）具有更大的灵活性。由于文档模型与主流面向对象编程语言中的对象直接对应，因此开发人员可以根据现实世界中实体之间的自然关系存储和组织数据，从而将重点放在以最有意义的方式构建应用程序上，而不是围绕其数据库的局限性开展工作。因此，使用文档模型显著提高了开发人员的生产效率，使组织机构能够更快地进行创新。MongoDB CEO 兼总裁Dev Ittycheria称之为： 文档即未来。

但是 MongoDB 通用的监控 工具 有限，其中又有一部分还是要收费的,通过工具 Percona Monitoring and Management 进行监控，是个不错的选择。但在慢查询收集方面，需要开启Profiling，对性能方面会有一些侵害，另外，更细粒度的监控项维护起来也不容易。如果不想不开启Profiling，我们还可以通过收集分析mongodb的运行log来来进行性能监控，并且通过运行日志还可以获取更多的运行状态相关的信息。

今天介绍的就是一款专门用来读取、分析MongoDB运行日志的工具--Mtools。

二. Mtools 的介绍

Mtools的工具包和功能可以通过下面的List来描述。

三. Mtools安装的详细步骤

很多同学抱怨安装比较麻烦，错误很多，在这儿，把安装的详细步骤梳理如下。

Step 1下载pip程序包

wget "https://pypi.python.org/packages/source/p/pip/pip-1.5.4.tar.gz#md5=834b2904f92d46aaa333267fb1c922bb"

Step 2 解析下载的文件

 Step 3安装 python setup.py install

此时报错，提示错误信息如截图

Step 4针对上述错误，需安装setuptools,python下的setuptools。此程序包带有一个easy_install的工具,在安装 python 的每三方模块、工具时很有用,。

下载

wget --no-check-certificate https://pypi.python.org/packages/source/s/setuptools/setuptools-12.0.3.tar.gz#md5=f07e4b0f4c1c9368fcd980d888b29a65

解压

Step 5转到解析后的文档中，再次安装 python setup.py install

安装成功。

Step 6安装 yum -y install python-pip

如果提示错误

No package python-pip available.

Error: Nothing to do

请看后面的附注

Step 7安装  mtools

执行命令  pip install mtools

Step 8安装效果验证

使用其中的mlogfileter命令，查看日志超过100ms的慢查询。

通过mloginfo统计日志中connections的来源情况

验证工具安装OK。

安装后，工具包所在的文档位于 /usr/lib/python2.7/site-packages/mtools 下 （自动生成）

四 附录

A：解决 No package python-pip available的问题 。

此错误的原因主要是没有安装epel。索引， 运行以下命令，安装epel

安装 epel-release后，再次安装 python-pip，不再报错。

B：运行 mplotqueries 工具 需安装 python-matplotlib 包，和修改mplotqueries.py文件

否则报错，具体信息如下：

安装命令 yum install python-matplotlib

到此，还没结束，还会报错，我们还需要修改 /usr/lib/python2.7/site-packages/mtools/mplotqueries/mplotqueries.py 执行文件。

添加 以下指令

import matplotlib as mpl
mpl.use('Agg')

添加前

添加后

再次执行 mplotqueries 命令后，看出生成了我们想要的 01-2.png 统计文件

本文版权归作者所有，未经作者同意不得转载 , 谢谢配合！！！