如何监控业务的响应速度？Cloud Insight SDK 实践分享

一直在说 Cloud Insight 是数据聚合平台，可以用 SDK 和 API 实现业务监控，如今不拿出点实践人们恐怕是不能信服。那今天本文就先简单介绍一下 SDK 可以应用在哪些方面，再举个真实用户场景来让大家看看。

首先说一点，通过 SDK 你可以把你想看的任何数据都接在 Cloud Insight 平台上，例如运营可以把涉及到的用户数据放上去，让开发，运维，boss 随时都可以看到自己产品的用户，如果涉及到多个层次的指标数据（日活，增长，转化，留存。。。）都有相应的简单操作；开发可以把自己 build 代码的次数，提交的次数放上去；销售也可以把用户签单数，签单额放上去（如果允许的话啊）；运维就更不用说了，所有服务器监控指标都可以放上来。

下面介绍一个业务场景的监控，本实例来自真实用户场景。

用户需求

监控可用性和响应速度，运营的需求要求每次接口响应控制在0.1-0.5s内。如果超出这个时间就要找到问题，进行优化。

以前的做法

在后端添加 serverId 和处理时间并放到 http header 中，通过 curl 去获得后端信息和处理时间，采样后生成报表。

后来改成通过 nginx 记录 upstream 的 response time，采样生成可视化数据。但由于 nginx 日志分布于不同的机器中，收集数据相对来讲还是比较麻烦的。

现在的监控手段

配置

通过 Cloud Insight SDK 采集数据，通过探针发送这些数据到后端服务器，后端服务器对数据进行处理，进行展示。

真正操作起来很简单，安装 Ci 探针，安装 Python SDK，编辑代码，调用系统命令，获取 nginx，php 的响应时间，从几个响应时间中取最大值传到 Cloud Insight 服务器，探针默认 30s 抓取一次数据，但我们又想每秒统计三次响应最慢的请求，所以写一个定时执行这个命令的脚本。

#!/usr/bin/env python
# -*- coding:utf8 -*-
 
import commands
import socket
from oneapm_ci_sdk import statsd
 
hostname = socket.gethostname()
error, result = commands.getstatusoutput(""" tail /opt/dataroot/nginx/access.log |grep "download" | awk -F '" "' '{print $7}' """)
if ( error == 0 ):
        code = result.split("\n")
        statsd.gauge('php_response_time.download.%s' % hostname, float( max(code) ) )
        print 'php_response_time.%s : %04f' % ( hostname, float(max(code)) )

#获取Nginx Upstream response time
* * * * * for i in $(seq 3); do sleep 15; python /opt/ci_check_php_response_time.py; done

部署好后，可以在自定义数据仪表盘上看到应用数据。把这些自定义数据放在一张仪表盘上，后期可以直接打开这个自定义仪表盘来查看 php 的响应情况，即使是多个不同服务器中的 nginx 消息也都可以放在一张图表上，效果如下图：

这样仪表盘是配置完了，其实还可以设置报警策略，在一些指标超出范围时触发报警。

查看

依照平时使用习惯，进入监控界面，首先第一眼就是各个平台概览，看看是不是都在正常运行，正常情况下图标都应该是绿色的，如果变成红色了就点进去看看，上面会有相应报错。

上述平台如果没有问题，就进入仪表盘页面，首先左面是自定义仪表盘，在这就可以查看之前配置的 php 的响应情况，右面是平台仪表盘，一般你系统监控上什么就会自动出现相应的组件信息。

点击查看业务数据的仪表盘，发现了一个 PHP 响应时间达到 5s 的异常纪录，查看 Ai(Application Insight) 的 web 事务（web 事务默认会抓取响应超过 2s 的事务），果然发现一个异常缓慢的事务，通过分析（代码级监控）确认问题，解决问题。

延伸

SDK 是 Cloud Insight 团队根据 StatsD 进行了修改，方便用户上传自定义指标，目前支持的数据格式有 Counters Gauges 2种，支持的语言有 Python Ruby Nodejs 3 种，其他的 Java PHP 还在开发中。目前使用 SDK 的前提条件为需要安装 Cloud Insight Agent。Agent 的采集周期为 30 s，数据发送周期为 15 s。

我们还将提供 Cloud Insight API，它拥有更加强大的功能，通过它可以不受任何约束的发送符合 Cloud Insight 数据格式标准的任意数据，无论本机是否安装了 Cloud Insight Agent，目前在开发中。

总结

监控服务器，简单，一键安装
监控数据库等组件，简单，修改配置文件，重启探针
监控业务数据，依旧简单，使用 SDK

简单列几个有意思的 SDK 监控应用：

监控北京空气质量监控不同地区 PM2.5
监控闭路电视的硬盘空间 github 上有项目
使用 Cloud Insight SDK 实现 Druid 监控实现大数据监控

参考文档：

使用OneApm CI SDK实现业务响应速度监控

Cloud Insight 集监控、管理、计算、协作、可视化于一身，帮助所有 IT 公司，减少在系统监控上的人力和时间成本投入，让运维工作更加高效、简单。想阅读更多技术文章，请访问 OneAPM 官方技术博客。

本文转自 OneAPM 官方博客

来源：oschina

链接：https://my.oschina.net/u/2365986/blog/647161

标签

系统监控