关于后端:来看大厂如何设计运营后台系统的

0 背景

重经营 的利用。对于 App 里的顶导航、我的页面、弹窗等，须要依据模式、版本、平台、语言、渠道等不同的维度进行经营治理。随着业务疾速倒退，版本疾速迭代，如何：

• 放弃经营资源可能被高效、稳固和灵便地配置
• 高效稳固的为新的经营需要提供反对

通过打造一个 稳固、灵便、高效 的经营配置平台来解决后面遇到的问题。本文次要分享咱们在建设高效的经营配置平台过程中积攒的一些教训以及面临的 挑战和思考。

1 配置资源拆解

经营类配置分类：

• 经营资源
• 根底数据

1.1 经营资源

经营资源可了解为 App 中常常变动的一些广告、经营流动等。比方上图中弹窗广告，就是一个典型的经营资源。

1.1.1 特色

① 时效性强

只在肯定工夫范畴内显示在 C 端固定地位。

② 模式强相干

每个流动、广告都只会呈现在固定的某些模式。

③ 数据变动频繁

特地是流动类数据，展现的图片文案等变动较为频繁

④ 反对多语言展现

基于公司海内站面向寰球用户的状况，不同模式需展现不同语言文案。

1.2 根底数据配置

根底数据配置绝对于经营资源来说其变更的频率绝对较低，与工夫、版本的关系也没那么强。譬如上面爱奇艺海内 App- 底部导航栏（款式如上图）。

1.2.1 特色

① 多维度

须要针对不同的模式、语言做不同的配置。

② 长期有效

这种类型的配置个别长期存在，过期场景较少。

2 实际痛点

面对接踵而至经营配置需要，最后实现不同的配置界面来对接各类经营产品需要。但这必然很大问题

2.1 经营效率低

新经营配置需要，研发要开发对应配置页面，而后转给经营同学进行配置的治理，最初经营人员对资源进行配置上线，流程图：

每个经营配置需要都经需要评审、页面开发、配置管理、上线。配置页面开发，少则 1 到 2 天，问题就在：

• 研发老本高，每个需要要开发新的配置管理页面
• 研发周期长，经营效率低，从需要的提出到经营上线周期长
• 灵活性差，对不同的经营维度（模式、版本、工夫等）都须要当时确定好，无奈动静调整

2.2 频繁反复开发

通用型的经营配置后盾，某些特有性能特地对于前后端来说反复开发工作显著。如操作记录，审核机制，依据不同的模式版本语言过滤数据等性能，在每次呈现的配置需要中都需反复开发。

3 实际中的思考

心愿设计一个通用解决方案，去解决上文论述的各种经营资源管理的问题。咱们把这个我的项目称为经营位。

调研确认

3.0 我的项目设计准则

• 所有数据皆可配
• 经营数据高可用
• 接口性能高效

一直实际和总结，抓手如下：

3.1 数据 JSON 化

随业务迭代，无论采纳啥数据字段组成，都很难满足业务变动字段（题目、副标题、图片、跳转链接等）要求。对底层数据进行 JSON 化，对应数据字段即可实现 可动静扩大，满足业务迭代需要。JSON 化带来经营位字段治理问题，在经营后盾提供字段治理性能即可解决。

3.2 经营数据多点存储

长久化存储，分布式缓存，以及接入业务方的本地缓存，经营数据的多方存储，保障极其状况都有降级数据获取，升高零碎异样损失。

3.3 接口 SDK 化

经营数据，无论通过数据库的落地计划、还是分布式缓存，都无奈彻底解决服务中心化和服务抖动。通过接入的 SDK 化，实现数据的本地缓存更新机制，解除对中心化服务的依赖，晋升服务稳定性和性能。同时整个经营位服务变成可程度扩大，在扩大过程中也不会影响核心服务的稳定性。

调用方申请流程图

4 经营位架构

经营位配置零碎整体框架图。从性能角度，大体上分为四层：数据层、服务层、接入层和监控层。

4.0 经营位架构图

4.1 数据层

次要存储接入经营位的各类经营数据。

难点

• 数据量大
• QPS 高

可通过 redis 集群做两头缓存，通过 SDK 使各业务方接入本地缓存、通过音讯监听异步更新，以解决核心服务的流量压力。

4.2 服务层

服务层向下对底层数据进行操作；向上为接入层获取数据提供接入能力。提供四个服务能力：

• 经营后盾，面向经营人员和产品，提供数据的配置后盾
• 开放平台，收归开发技术人员，提供一个减少经营位配置的后盾
• 数据服务，次要是为调用数据的开发提供一个对立的、高可用的、高性能的 api 接口
• SDK，服务于数据服务，次要简化开发人员的接入老本，提供数据服务性能和可用性

4.3 接入层

4.3.1 C 端接入咋不便？

为简化开发接入老本，调用逻辑在 SDK 内实现，用户只需引入 maven 包，注入 OppkitClient，封装 OppkitRequest，通过 OppkitClient 间接调用即可返回过滤并且翻译后的数据。

4.3.2 B 端配置咋更便捷？

设计我的项目时，后盾配置的惟一准则：所有皆可配置。通过凋谢后盾来配置经营位，每个经营位相当于一个业务状态，如导航栏，而经营位蕴含多个数据，如 title，link，title 蕴含多种语言，需配置多语言 key：

• 开放平台就是创立经营位，为经营位配置字段
• 经营后盾，配置开放平台创立的经营位数据

4.4 监控层

除了数据存储层监控及烽火台对数据层与服务层的监控，还监控 SDK 内实现的本地缓存。

C 端的接入即数据的获取在 SDK 外部实现，SDK 外部实现性能：

• 若申请蕴含某些特定离散字段如设施 id，因数据量极大，存入本地缓存会给业务方机器内存压力，则避开缓存间接申请服务
• 为满足数据实时性要求较高业务方，新增不接入本地缓存的逻辑
• 若只蕴含某些聚合度高字段如平台、版本、模式和语言等，则把申请的数据存入本地缓存。本地缓存通过监听经营平台的形式进行异步更新，当异步更新获取数据失败，则放弃之前的数据返回，防止极其状况经营数据全副为空，将 业务损失降至最低
• SDK 外部通过异步线程，将本地缓存应用状况通过定时线程存入，通过后盾界面展现各缓存应用状况，实时监控各类缓存应用

5 稳定性与性能

经营后盾稳定性与性能保障计划。

5.0 整体申请流程图

5.1 稳定性保障

各类经营数据配置的经营后盾，稳定性 很重要。

除了操作机制即经营流程化数据配置机制、多级数据存储应用分布式缓存及分布式数据库，还提供 SDK 计划来对服务故障进行降级。来看该计划落地过程。

5.2 SDK 本地缓存计划

实现本地缓存益处

• 缓解核心服务的流量压力，更多流量申请到本地服务的内存
• 基于海内站业务特点，国外网络环境不可预测，环境差，尽可能减少网络申请链路
• 一旦核心服务故障，周知各业务方不要重新部署，以本地缓存实现数据降级

本地缓存计划毛病显著

一旦有经营后盾数据更新，各业务方无奈实时获取最新数据。对此，SDK 开始迭代：

架构三版，较好解决核心服务流量问题，使经营后盾流量由用户申请量决定改为 后盾的数据更新频率 决定，从而解决流量过载问题。但该版也要解决：

各业务方本地缓存的应用状况品种繁多，如何进行提供系统监控？

MQ 方案设计

针对问题 1，SDK 外部通过 scheduledexecutorservice 定时工作，周期性将缓存应用状况拉取到库内，通过后盾界面依据工夫展现本地缓存应用状况。可把握各业务方缓存应用状况，给业务方内存申请和调配提供数据撑持。

针对问题 2，波及难点：

• 业务服务机器个别集群部署，一个音讯的更新须要被多台部署雷同代码的服务器同时生产，确保每台机器都获取到最新的数据

  音讯 Producer 是经营后盾服务，而一个音讯要被所有业务方监听，即所有业务方的每台机器。所以，每台机器应属不同生产组。所以要找到一个每台机器都不一样的 标识节点，以该节点做生产组。显然，最好的就是机器地址，可保障每台机器所在分组不同

• 经营位有多个，但对于业务方，没必要在未接入的经营位更新数据时去异步申请经营后盾核心服务更新数据（因为这些数据这个业务方基本没接入）

  提供一个配置文件，各业务方在配置文件内写入各自业务方应用的经营位名称，当一个音讯降临，先判断音讯中的经营位名称是否蕴含在配置文件：若不在，则这条音讯被疏忽（空生产）；在，则申请响应的经营位更新本地数据

5.3 性能保障

SDK 提供本地缓存可进步后端服务性能。经营位实际配置中发现，经营人员更改经营数据情景相比网络申请来说十分低频，如根底经营数据。因而，数据缓存在客户端可防止客户端与后端服务网络耗费，极大进步性能。

可为每个经营位数据提供一个版本。通过保留各经营位的操作最新工夫，在客户端开屏时发动一次申请，将所有经营位最近数据更新工夫返给客户端，客户端将该工夫戳缓存本地，当下次开屏申请时，同样获取到服务端返回的经营位最近更新工夫戳，将本地的与服务的进行匹配，确认是否去更新各经营位数据，如果客户端缓存的经营数据工夫与经营后盾返回统一，则间接展现缓存在客户端的数据。

这计划另一益处是极其时如对外裸露 API4 故障，通过 禁止经营后盾的数据更新，可使业务数据失常展现，防止经营数据隐没的重大故障。

5.4 申请流程图

6 总结

本文次要介绍了经营位设计开发，先依据痛点提出经营后盾设计准则，针对准则去思考与实现具体技术计划：

• 配置数据 Json 化实现业务字段 可扩展性
• 设计的数据模型来介绍满足多语言下各类经营配置数据办法
• 提供 SDK 外部实现本地缓存，MQ 监听，异步更新解决服务中心化的大流量问题和缓存导致数据不统一问题。针对海内具体情况，提出客户端缓存的相干计划

如错误码配置举例，错误码须要给客户端返回各类错误码以及对应的相干文案，文案是多语言场景的，通过经营位配置化实现，只须要在剖析需要，拆分业务字段和数据露出的条件后，很快就能够给出相应的经营后盾。

关注我，紧跟本系列专栏文章，咱们下篇再续！

作者简介：魔都技术专家兼架构，多家大厂后端一线研发教训，各大技术社区头部专家博主，编程严选网创始人。具备丰盛的引领团队教训，深厚业务架构和解决方案的积攒。

负责：

• 地方 / 分销预订零碎性能优化
• 流动 & 优惠券等营销中台建设

• 交易平台及数据中台等架构和开发设计

  目前主攻升高软件复杂性设计、构建高可用零碎方向。

参考：

• 编程严选网

  本文由博客一文多发平台 OpenWrite 公布！