分类

Grafana 支持多种数据源，默认的有 Elasticsearch 、 Prometheus 、InfluxDB等，而 Open-falcon 这类的数据源需要使用 Grafana 插件的方式来实现。

Grafana 是一个监控的前端展示项目，可以把收集来的指标通过漂亮的图表可视化得展示出来。操作非常简单，还有报警机制，设定指标进行警报。

线上服务产生报错日志，可以第一时间通知到相关的人员可以更快得修复问题，提高服务的可用性。前一篇文件已经实现把所有日志文件收集起来，于是在此只需要获取这份数据，按需要来报警。

项目一多，对于各个项目的日志进行收集分析就变得至关重要。代码产生错误，可以及时通知到相关人员，及早得发现问题，解决问题，减少对线上服务产生的影响。

在 hive 中，要实现某些功能写 SQL 不方便实现时，UDF(User-Defined Function 用户自定义函数) 就出现了。本文主要使用 Python 实现 IP 转地理位置，期间遇到的各种问题也一并记录于此。

使用 Azkaban 提供的 API 实现命令行中查看此任务的依赖关系。当一个任务失败时，可以通过这个命令查看成功了哪些任务、失败了哪些任务。