作者：珑乘、锕蛮
业务高速倒退，业务敏捷性和稳定性面临挑战
波司登国内控股有限公司(简称波司登) 始于 1976 年，旗下品牌包含“波司登”、“雪中飞”等，波司登羽绒服滞销美国、法国、意大利等 72 个国家寰球超 2 亿人次在穿。
作为全国最大的品牌羽绒服生产商，波司登间断 26 年全国销量当先，在疫情黑天鹅的冲击下，线下销售渠道增长瓶颈，波司登减速推动数智策略。但因为波司登外围业务零碎别离由不同的软件开发商开发建设和保护，架构老旧、以传统单体利用为主，且版本迭代很慢，无奈满足波司登线上业务的高速增长带来的高并发、弹性扩大、敏捷性等更高的要求，为此波司登迫切 须要进行外围业务零碎的云原生化革新降级，以撑持业务的高速倒退。
全程贴身服务保障，外围零碎一次性上线胜利
在波司登尝试通过本身技术团队进行云原生化革新过程中，第一套云原生化革新的商品经营 IMOS 零碎上线后零碎在订货期间呈现链路阻塞，对业务造成了重大影响。此外，陆续还有线上平台订单治理 OMS 零碎和门店收银 POS 零碎以及用户治理 CRM 零碎须要同时革新上线，如何最快速度实现三套外围零碎革新和平滑切换上线成为波司登面临的难关。
收到波司登需要后，阿里云服务团队第一工夫赶到波司登现场，具体介绍了阿里云云原生革新计划以及波司登案例，帮忙波司登量身定制云原生革新所需可观测性体系、全链路压测，零碎变更与调优、全链路资源查看等计划、并为波司登建设专属应急保障体系。
在零碎上线前，阿里云服务团队深刻波司登业务场景，欠缺云原生架构下的可观测性和云产品监控，全量利用以及对应业务日志接入 ARMS 和 SLS，显著晋升了对于分布式系统谬误的被动发现和白盒化定位能力。通过 PTS 产品结合实际业务场景，对 11 个外围业务场景进行了全链路性能压测和调优，提前发并排除现 2 个重大危险，联合压测后果和最佳实际对全链路 30 多个产品以及几百个 Pod 的资源进行全面巡检和调优，实现 Hologres 和 PostgreSQL 等实例容量扩容的同时，通过对 200 多条 SQL 的优化，大量慢 SQL 问题的危险失去了及时收敛。
在零碎上线期间，阿里云服务团队全程驻场，第一工夫响应解决波司登上线的紧急问题，疾速处理了两起突发异样。一是数据库连接池没有管制好，Hologres 局部 work 节点的并发连接数被打满，导致数据迁徙失败和利用启动异样，通过现场疾速定位连接数暴涨的利用，并优化 Hologres 侧的闲暇链接开释参数帮忙波司登疾速躲避问题。二是 PostgreSQL 数据库的 SQL 诊断优化性能触发 index_advisor 插件的 BUG 导致对应的 PostgreSQL 实例异样重启，紧急叫停波司登应用 SQL 诊断优化性能，并优先确保数据库稳固确保零碎失常。
通过波司登技术团队和阿里云服务团队的的集中技术攻坚，圆满完成 OMS、POS、CRM 三套外围零碎的容器化和分布式革新，且一次性上线割接胜利，放慢推动了数智化策略的过程。
绘就微服务治理大图，完满撑持双 11 业务洪峰
零碎上线之后利用变更变的加频繁，简直每天都有发版，而且在白天变更时常常会导致前端利用异样，重大影响应用体验，使得变更只能在晚间进行这样极大的减少了研发人员的累赘也违反了麻利开发的初衷。零碎上线之后性能不现实，在并发不大的状况下次要利用的 POD 数量达到 20 个以上，须要靠堆资源来晋升零碎的解决能力，而且往年是云原生革新之后的第一个年，离双十一大促只剩下短短的三个月，如何疾速实现服务治理革新，进步零碎零碎的稳定性和性能，保障系统可能顺利扛过双十一流量洪峰，成为了波司登技术人员的重要考量。
理解到波司登的痛点之后，阿里云服务团队依据波司登业务特点联合阿里云微服务治理和稳定性治理体系的最佳实际以及波司登案例，帮忙波司登制订了利用无损公布，灰度公布，容量布局，限流降级等计划，并与波司登一道实现计划的落地。
利用无损公布可无效防止利用公布时前端异样的问题，晋升用户的应用体验，让零碎在变更时更加顺滑。 为了放慢落地并缩小工作量，充分利用 ACK 和 MSE 的能力，通过配置 preStop 和 MSE 无损下线实现利用优雅退出，通过配置健康检查并开启 MSE 上线流量预热性能爱护利用平安启动，无效躲避利用公布所呈现的流量损失。联合波司登现状，为波司登定制云效流水线、ACK 和 MSE 微服务治理能力相结合的利用公布计划，在利用公布的过程中即可实现无损高低线，无需减少额定操作，给技术人员减负。
灰度公布在利用上线之后呈现重大异样时可能及时回滚疾速切流，能够小流量试错新版本。 利用 MSE 提供 Agent 接入的形式，基于 HTTP 的 Header 中的某个字段给流量染色，利用 Kubernetes 的申明式部署对利用版本打入灰度标识，这样就能够限度只有被染过色的流量才会进入打上了灰度标识的版本，实现基于逻辑隔离机制的全链路灰度能力，从而实现新版本公布后业务小规模的流量验证，一旦发现新版本存在任何问题，能够及时回滚，把对业务的影响降至最低。
全链路压测是发现零碎瓶颈确定零碎容量的最佳伎俩 。 波司登技术团队和阿里云服务团队针对云上 5 套外围零碎梳理出 50 余个压测场景，设计全链路压测计划、数据模型与压测脚本。通过 Hologres SQL 执行优化、表分区键以及 shard 优化、索引调整，利用日志异步化，JVM 参数优化，代码优化，Redis 缓存，MQ 架构革新等十几项调优伎俩，在进步零碎稳定性的同时零碎整体性能进步 50 倍以上，云上资源利用率也显著进步，整体资源费用升高 5% 以上。
限流降级能力能够为零碎装置一个牢靠的保险绳。 因为慢 SQL 较多且工夫紧迫来不及优化，为了防止重大的慢 SQL 产生后拖垮整个数据库，对线上业务产生阻断性的危险，波司登应用了 MSE 的数据库治理能力，基于压测后果评估流量峰值，配置 SQL 限流规定，在数据库流量过大时有选择性的让 SQL 进行期待或者疾速失败，把不确定的流量变为确定性的流量，保障数据库的稳固从而确保整个业务的稳固。
波司登通过阿里云 AMS 服务，减速各种云原生计划的落地，用一年工夫实现外围零碎云原生化革新，极大的晋升了零碎的稳定性和性能，订单解决能力最高达到 50 万单每小时，顺利扛过双十一流量洪峰，也为线上业务的简单与多变性提供了强有力的技术保障，线上零售额在疫情冲击下逆势同比增长 66% 以上 。 在满是「不确定性」的后疫情时代，线上渠道通过数智化降级胜利实现高质量增长。
双十一的顺利度过以及线上业务的增长使波司登实现了自证预言，走出了一条自住可控的数字化改革之路，将来波司登将持续拥抱云计算，通过更先进、更高效的技术，更数字化的经营形式，激发翻新生机，与各行各业的时代改革者独特成长，持续引领行业潮流。
采纳的阿里云服务
阿里云可运维性咨询服务
https://www.aliyun.com/servic…
运维服务
https://www.aliyun.com/servic…
云管平台服务
https://www.aliyun.com/servic…