关于物联网:HStreamDB-Newsletter-202206|新集群机制可视化监控Python-客户端发布…

7次阅读

共计 1497 个字符,预计需要花费 4 分钟才能阅读完成。

本月,HStreamDB 团队专一于 v0.9 的开发工作,目前曾经实现了 HServer 去中心化集群的切换、HStream IO Embedded Runtime 和 CDC Source Connector 的开发,并带来了新的 Grafana 监控集成以及正式公布了首个可用的 Python 客户端。另外,还与 EMQX 团队合作实现了 HStreamDB 与 EMQX 的集成。

HServer 采纳新的集群机制

目前咱们曾经初步实现将 HServer 集群机制从基于 ZooKeeper 的中心化计划切换到基于 SWIM[1] 的去中心化计划,其次要目标是为了反对更大的集群和更好的扩展性,同时缩小对外部零碎的依赖。后续咱们将持续对新集群机制进行更多测试和欠缺,这一个性将在 v0.9 中正式公布。

HStream IO 反对 CDC Source

HStream IO 是 HStreamDB v0.9 行将公布一个外部数据集成框架,蕴含 source connectors、sink connectors、IO Runtime 等组件,它可能实现 HStreamDB 和多种内部零碎的互联互通,从而助力促成数据在整个企业数据栈内的高效流转以及实时价值开释。

本月咱们实现了 Embedded IO Runtime 以及多种数据库的 CDC Source Connector 的开发,包含:MySQL、PostgreSQL、SQL Server 等,可能高效实现将这些数据库的数据增量、实时地同步到 HStreamDB。

新增 Grafana 监控集成

为了不便用户运维和治理 HStreamDB 集群,咱们新增了基于 Prometheus 和 Grafana 的监控反对,这也是目前业界支流的监控计划。HStreamDB 外部的监控数据会通过 Exporter 存储到 Prometheus,而后通过 Grafana 的面板进行可视化展现,以后成果如下图所示。

对于监控相干的更多内容请参考文档 https://hstream.io/docs/en/la…

Python 客户端正式公布

本月咱们正式公布了 HStreamDB 的 Python 客户端 hstreamdb-py https://github.com/hstreamdb/hstreamdb-pyy v0.1.0,反对 HStreamDB v0.8,目前曾经具备数据批量写入、订阅生产以及资源管理等外围性能,欢送大家应用并反馈倡议。

相干装置指令可参考 https://pypi.org/project/hstr…,更多应用文档参见 https://hstreamdb.github.io/h…

反对与 EMQX 集成

EMQX 是由 EMQ 开发的寰球当先的开源 MQTT 音讯服务器,在物联网畛域有着广泛应用。本月通过与 EMQX 研发团队单干,咱们实现了 EMQX 与 HStreamDB 的高效集成,这将助力用户实现一站式的物联网设施连贯、数据接入、长久化存储和实时剖析。具体可参考 https://www.emqx.com/zh/blog/…

[1]:Das, A., Gupta, I. and Motivala, A., 2002, June. Swim: Scalable weakly-consistent infection-style process group membership protocol. In Proceedings International Conference on Dependable Systems and Networks (pp. 303-312). IEEE.

版权申明:本文为 EMQ 原创,转载请注明出处。

原文链接:https://hstream.io/zh/blog/hstreamdb-newsletter-202206

正文完
 0