共计 3751 个字符，预计需要花费 10 分钟才能阅读完成。
作者：草谷
前言
业务大促备战是企业必做功课之一，明天趁着 99 大促来袭前，谈一谈如何利用 MSE 的服务自治能力提前发现潜在危险，通过可观测能力理解引擎外部运行状态，并提供自建 Nacos/ZooKeeper 一键迁徙上云服务，帮忙业务顺利应答大促。
点击查看直播回放：
https://yqh.aliyun.com/live/detail/29401
微服务的挑战
单体到微服务的变动
随着互联网的业务快速增长，进而导致系统的架构也在一直的产生着变动，由最后的单体状态演变到当初最风行的微服务架构；软件架构设计外面没有银弹，享受着微服务带来的扩展性和性能晋升，必然要接受它带来的一些副作用，总的来说，次要有以下几点的变动：
- 调用链路减少了多跳
单体利用的业务逻辑在一个节点过程外面闭环执行实现，微服务架构革新后，不同功能属性的逻辑拆分成一个个服务部署在独立的节点之上，要实现一段残缺的业务逻辑，须要每个独立节点互相配合，A->B 变成了 A->B1->B2->B3。
- 减少了简单中间件的依赖
微服务架构外面，RPC 是最根本的技术引入，它蕴含了：RPC 客户端（Dubbo/Spring Cloud），注册核心（Nacos/ZooKeeper/Eureka），如果有事务要求的，还须要依赖一些分布式事务组件如 Seata。
- 从单兵作战到多团队合作
微服务架构的降级，除了利用零碎层面的变动，生产关系也可能产生了变动，以前一个零碎由一个人负责，变成了多个服务团队合作开发，互相支持。
带来的挑战
面对微服务架构带来的变动，给开发者和运维同学带来了不少挑战：
在日常开发和运维过程中，常常会遇到一些如下的典型问题：
- 场景一：服务调用失败，Consumer 日志显示没有可用服务，可明明 Provider 过程失常运行着，是服务没注册下来呢？还是注册核心没把地址推送到客户端呢？
- 场景二：Nacos 客户端在某种极其场景下，呈现了异样，排查了半天，是 Nacos 客户端已知 Bug 导致，须要降级到 xx 稳固版本，然而作为开发 / 运维的你，每天业务需要那么多，如何搞定对客户端版本迭代放弃着时刻的关注呢？
- 场景三：业务大促即将来临，客户端热气腾腾的扩容以应答激增的流量，忽然间注册配置核心不工作了，原来是达到注册配置核心额外容量了，须要扩容了，每次都是呈现问题才后知后觉，而后提前做好容量布局呢？
- 场景四：线上注册配置核心呈现 FullGC，重启又缓解一下，每隔一段时间又呈现，排查同学反馈是可能是有客户端错用，大量的读写数据导致内存吃不消，然而又苦于难以找出到底是谁在“捣鬼”？
服务自治能力
云原生微服务依然是目前最热门的技术架构（《40% 的云原生开发者专一于微服务畛域》），因而解决这部分群体的痛点，可能给企业带来最大的价值，这也是 MSE 的初衷。
阿里巴巴从 08 年开始单体架构演进走到当初，有着十几年的踩坑教训，也总结出了一套打法；MSE 的服务自治能力，指标是帮忙用户疾速发现问题，定位问题，解决问题，它次要围绕以下 3 个方面提供一系列的性能和工具：
可观测性
可观测性（Observability）是帮忙微服务持重运行的重要一环：
- “零碎是否还是失常的？”
- “终端用户的体验是否合乎预期？”
- “如何在零碎快要出问题之前被动发现零碎的危险？”
如果说监控能够通知咱们零碎出问题了，那么可观测就能够通知咱们零碎哪里出问题了，什么起因导致的问题。可观测岂但能够判断零碎是否失常，还能够在零碎呈现问题之前，被动发现零碎危险。
- 监控大盘
MSE 提供了丰盛的监控大盘，无缝集成 ARMS，收费为大家提供了丰盛的可观测能力，能够借助这些指标，窥探容量状况，尽早发现问题，定位问题：
1. 根底大盘
提供了基础设施的一些外围指标，次要如下：
- JVM 监控
- 内存 /CPU
- 网络流量
针对这些根底外围指标，倡议至多要把内存 /CPU 的预警给加上，阀值设置到 60%。
如果你的利用是时延敏感的，须要重点关注下 JVM 监控中的 FullGC 指标，这个会导致过程响应变慢。
网络流量指标，能够用来观测 SLB 的网络问题，例如流量忽然涨到某个点，而后始终横盘，这时你的客户端也相应呈现链接失败异样，这个就可能是达到了流量阀值。
2. 概览大盘
概览大盘的指标，次要的目标是给大家疾速展现一些外围的指标，可能有一个全局的视角：
- 客户端散布
- 以后配置 / 服务水位
- 链接数
- 配置 / 服务数
其中，客户端散布指标，能够帮忙你看到零碎中各种客户端版本的散布状况，联合 Nacos 的版本应用限度，找到高危版本，推动解决掉客户端带来的稳定性危险。
例如：近期 Nacos 公布了最新的版本应用束缚，Nacos 1.4.1 版本有重大的 DNS 解析异样问题，能够通过客户端散布指标，找到该客户端散布的状况，告诉对应的业务进行降级。
3. 业务大盘 -Nacos 服务 / 配置大盘
MSE 提供的业务大盘外面的指标，都是精挑细选进去具备代表性的，可能帮忙你全面理解注册配置核心的外部业务规模；大促降临，公司要求你评估注册配置核心以后容量规模，你能够通过这些指标数据进行一个全面的剖析。Nacos 的应用场景分为注册核心和配置核心，MSE 依据这 2 个场景独自设置了大盘：
配置核心指标：
- 配置数量
- 配置监听数量
- 配置的 TPS/QPS
- 读写 RT
注册核心服务指标：
- 服务提供者 / 订阅者数量
- 注册核心 QPS/TPS
- 注册核心读写 RT
- 推送成功率 / 耗时 /TPS
4. ZooKeeper TopN 大盘
TopN 大盘，对外部因素导致了服务端出现异常类的问题定位是十分高效的：
- Znode 的大小 Top N 排序
- 客户端对 ZooKeeper 的读写 TPS/QPS Top N
- 热点数据的 TPS/QPS Top N
- 热点数据的监听数 Top N
在日常开发中，你大概率遇到过 ZooKeeper FullGC 的场景，然而又不晓得是具体什么起因引起的 GC，可能是 ZooKeeper 在推送大量数据导致，又不确定是哪个热点数据被订阅导致的，也可能是有客户端往 ZooKeeper 外面写大数据，又找不到是哪个客户端写的？
咱们看下 2 个客户端典型错用的场景：
- 户端错用写入了大数据，订阅者十分多，导致 ZooKeeper 推送大量数据引起了 FullGC：
往 /99testWriteBig 门路上面写入了大数据，能够通过 Znode 大小 TopN 发现大数据节点
- 客户端错用频繁读某 ZK，导致集群性能压力减少，响应延时，须要找到这个客户端：
一个 SessionId 为：0x1030871c8ed0004 的客户端，频繁读取 /99testRead 节点，通过客户端 QPS TopN 大盘，能够找到它，同时也能看到这个以后 Server 中最频繁读取的是哪个数据
- 指标预警
MSE 给注册配置核心提供了外围指标的预警能力，倡议把如下的指标都配置上：
- Nacos 倡议配置：
<!—->
-
- 服务读写均匀耗时：能够发现性能问题
- 配置长轮训链接数：能够发现容量问题
- 服务数 / 配置数：能够发现容量问题 / 客户端错用
- ZooKeeper 倡议配置：
<!—->
-
- Znode 数：能够发现客户端错用
- 连接数变化率：突降的话服务端节点可能呈现了故障
- 单服务端链接数：能够发现容量问题 / 客户端错用
链路追踪
- 推送轨迹
推送轨迹，是指注册配置核心从 server 端到 client 端的一次推送链路上的相干信息展现。推送轨迹能够让用户十分不便的查问到，当开发过程中，呈现如下问题，都能够通过推送轨迹疾速定位到，极大的进步问题的排查效率：
- 客户端未收到服务推送
- 服务间调用出现异常
- 配置公布异样了
- 配置批改完发现某台机器不失效
- 须要查看配置核心变更及推送事件
MSE – Nacos 注册核心推送轨迹查问页面
MSE – Nacos 配置核心推送轨迹配置维度查问页面
集群诊断
- 一键诊断
如果说 MSE 提供的各种监控大盘，是辅助你去发现，定位问题，那么 MSE 行将提供的一键诊断性能，就是主动帮你去扫描发现危险，2 者互相配合辅助，它目前次要从上面 3 个方面去做评估：
下图是一键诊断的性能页面，从下面能够看到目前你以后购买的引擎存在的危险，这些都是依据内置规定给主动扫描进去的，你不必再去人肉进行排查了，并且提供了正当的倡议给到你进行改良：
平滑迁徙 MSE
下面给大家介绍的 MSE 服务自治性能，后续将持续欠缺打磨，提供更多的自治能力，包含事件统计、衰弱审计等性能，升高注册和配置核心的问题排查难度、晋升可用性。
如果你当初还是自建的注册配置核心，倡议尽快迁徙上云，享受这些企业级服务，MSE 提供了高效的迁徙工具 MSE Sync，提供双向同、主动服务获取、一键同步全副服务等能力，帮忙用户更好的实现 Nacos、Zookeeper 注册配置核心的迁徙。
MSE 的官网文档，提供了具体的 Step by Step 的迁徙操作文档：
《自建 Dubbo ZooKeeper 迁徙到 MSE ZooKeeper》
https://help.aliyun.com/docum…
《自建 Dubbo ZooKeeper 注册核心迁徙到 MSE Nacos》
https://help.aliyun.com/docum…
《自建 Dubbo Nacos 注册核心迁徙到 MSE Nacos》
https://help.aliyun.com/docum…
如果迁徙过程遇到问题或者须要定制，能够分割咱们提供专家一对一的迁徙反对。
购买 MSE 享受企业级服务
MSE 提供了 高可用、高性能、平安易用等外围竞争力！