最近接到新的需求做可视化监控爬虫,搞了 3 个小时终于成了。。。
-
环境搭建
我是在 windows 下搭建的环境,在这里只说 windows
InfluxDb,是目前比较流行的时间序列数据库;
下载地址:https://dl.influxdata.com/influxdb/releases/influxdb-1.7.6_windows_amd64.zip
安装:解压安装即可,目前的配置文件去掉了 admin 可视化配置。
可视化配置:要使用 web 管理需要下载 Chronograf,https://portal.influxdata.com…,下载完直接解压,双击 exe 程序,在浏览器输入 http://localhost:8888/,一开始登录要账户密码,我都用 admin 就进去了
Grafana,一个可视化面板(Dashboard),有着非常漂亮的图表和布局展示,功能齐全的度量仪表盘和图形编辑器,支持 Graphite、zabbix、InfluxDB、Prometheus 和 OpenTSDB 作为数据源
下载地址:Download the zip file
安装:该 zip 文件包含一个包含当前 Grafana 版本的文件夹。将此文件夹解压缩到您希望 Grafana 运行的任何位置。进入 conf 目录并复制 sample.ini 到 custom.ini。你应该编辑 custom.ini,永远不要 defaults.ini。默认的 Grafana 端口是 3000,此端口需要 Windows 上的额外权限。编辑 custom.ini 和取消注释 http_port 配置选项(; 是 ini 文件中的注释字符)并将其更改为类似 8080 或类似的内容。该端口不应该需要额外的 Windows 权限。http://127.0.0.1:3000 即可启动,默认登录名和密码 admin/admin
influxdb(pip install influxdb)
Python 3.6
代码:(借用崔庆才老师的代码:链接:https://cuiqingcai.com/6217.html
)
-
最后结果 ;
-
意外发现
influxdb 的可视化界面 chronograf 也呈现出了监控结果。