监控基础

发表于 2018-07-26 阅读次数： Disqus：

监控需要监控技术环境和监控业务情况

监控基本原则

监控需要在开发业务前就进行考虑,结合业务情况和环境,考虑要监控的metric.

监控设计要从业务逻辑出发再下沉到应用的监控和操作系统的监控
但这不是说通用的系统监控不需要只是他们不能用来汇报业务价值

监控服务的正确性例如不是单单看health接口是否返回了200 而要确认里面的值

不要只使用静态的阈值阈值应该是根据窗口数据等方式计算获取

保存足够多的历史监控数据(用于之后的分析)

监控需要容易被设置/部署需要自动化支持

Probe :应用外
Introspection:应用内

推
拉
普罗米修斯基本上是基于pull的但也有push的方式

监控数据的类型
Metrics:时间序列数据记录应用的度量的状态
Logs:应用程序发出的文件事件通常情况更有用但这本书不怎么讲 https://www.logstashbook.com/

metrics提供了动态的,实时的基础设施状态,帮助你管理环境和给做更好的决定.
Metrics are measures of properties of components of software or hardware

固定时间间隙收集 -> 颗粒性或者分辨率

累计数据

统计数据

其他统计字段:
Counter
Sum
Average
Median
Percentiles
Standard deviation
Rates of change

平均数的陷阱:

For every resource, check utilization, saturation, and errors
对于每个资源检查利用率饱和度和错误
http://www.brendangregg.com/USEmethod/use-linux.html

Latency
Traffic
Errors
Saturation

Alert和notification是监控的主要输出