简介： 为了撑持起闲鱼万亿的交易规模，王树彬和技术团队正在紧锣密鼓地进行传统巨型利用的 Serverless 化革新，“闯过了 Serverless 的这一关，才是我比较满意的状态。”
造梦者 | 王树彬，阿里巴巴闲鱼架构负责人
2014 年 6 月 28 日，阿里行将赴美上市的这一年，西溪园区的一个茶水间里，28 集体日夜赶工了三个月后，上线了一个闲置交易平台——闲鱼。往年 5 月份，在阿里巴巴的年报中对外颁布了闲鱼的数据：GMV2000 亿元，同比增长 100%，每天在线卖家数超过 3000 万人。闲鱼曾经从一个茶水间守业的外部小产品，变成了在 C2C 畛域的当先平台。
据艾媒数据预计，2020 年全年的二手物品交易市场的规模将达到万亿以上。线上交易的凋敝亟需技术架构做相应的调整、演进能力撑持业务的疾速倒退。闲鱼对于阿里而言，有比营收更重要的意义，那就是翻新。翻新不只体现在业务模式上，闲鱼的技术架构也在摸索最新的方向——向 Flutter 化、云原生 /Serverless 化发展。
2009 年，从浙江大学毕业的王树彬，在 UT 斯康达工作了三年后，退出阿里巴巴。2017 年，王树彬首次将 Flutter 引入到闲鱼，从 2018 年开始，王树彬率领闲鱼技术团队在下一盘更大的棋：布局 Serverless。颠覆性翻新往往是从边缘性的中央呈现，而向云原生化 /Serverless 化降级，对于闲鱼是一条全新的路，但趟出了这条路，对于很多做线上交易的公司有着微小的借鉴意义。
明天，咱们就一起聊聊闲鱼的云原生故事。
01 为什么要做 Serverless？
闲鱼是依靠阿里电商体系的前台型业务，有十分独特的业务特点和用户诉求，在底层依靠阿里零碎的同时，在体现层和业务层须要摸索适宜闲鱼的、并且更加疾速灵便的研发体系。
依照传统的开发方式，闲鱼原有的 IT 零碎会面临很多痛点，比方：
1、客户端交互层、服务端业务胶水层、畛域层边界划分不清晰，这就导致很小的业务需要就须要整条链路的同学参加，协同老本高，开发调试周期长。
2、服务端存在巨型利用，研发耦合、公布耦合、运维耦合重大，甚至零碎稳定性也受到很大挑战，单个业务问题往往会影响整个利用。
3、运维老本极高。为了保障业务的稳定性和可用性，阿里对每一个利用上线都有相应的标准和规定。哪怕是一个很小的外部利用，一天可能只有一两个访问量，上线也须要恪守既有的标准，这势必会耗费一些固定资源。单个利用耗费的资源可能很无限，但所有利用耗费的资源累积起来也是一个不小的数字。而对于巨型利用，因为影响面微小，公布时要有更加严格的流程和步骤，一次公布至多要耗时 6 小时，导致运维老本极高。
Serverless 的呈现，一方面使云端一体化研发成为可能，很多小业务需要的协同老本能够大大降低。另一方面，Serverless 使业务胶水层的巨型利用，有了比微服务更加正当的拆分形式。
传统巨型利用的老本（速度）、稳固、品质互相制约的瓶颈，能够用上面这个三角形来直观的示意。
云原生 /Serverless 这些新技术的呈现，能够使利用运维能力下沉，传统巨型利用的老本（速度）、稳固、品质互相制约的瓶颈才有可能被突破。闲鱼在落地新技术的过程中，先围绕 Flutter 重点攻坚了 Flutter 混合工程体系、高性能组件库。而后围绕 Serverless 重点攻坚云端一体化研发体系、服务端业务组装层架构体系。
闲鱼客户端基于 Flutter 进行架构演进与翻新，通过 Flutter 对立 Android 和 iOS 双端晋升研发效力之后，心愿通过 Flutter+Serverless 解决各角色间存在的大量的协同问题，正是这些问题导致整体研发效率低，挪动端离业务越来越远，服务端没有工夫做底层畛域积淀。通过 Serverless 的引入，闲鱼会显著看到整体研发效率的晋升。
02 一边摸索，一边实际
2018 年，闲鱼技术团队开始摸索 Serverless，整体分为四个阶段：自建 Dart Server、依靠 FaaS 平台、云端一体化、传统巨型利用 Serverless 化。
2018 年 5 月，以 Serverless 思路构建了 2s 内冷启动的 Dart Server 利用框架，用于服务端业务胶水层的轻量化开发。
2018 年底到 2019 年初，闲鱼启动与 Gaia 团队协同共建基于 Gaia 平台的 Dart 运行时，并上线了局部业务。注：Gaia 是基于阿里云的面向淘宝业务特点封装的、用于淘宝业务的 FaaS 平台。
2019 年，闲鱼基于 Gaia 的 Dart Runtime 标准化，摸索 Flutter+FaaS 云端编程一体化，畛域接口元数据化，最终诞生了 Nexus 等胶水层业务框架，并在闲鱼 20 多个业务落地。
2020 年，闲鱼开始进行云端的工程 & 工具一体化，指标是实现一个工程、多端部署。当初，王树彬正带着技术团队攻坚业务胶水层的传统巨型利用治理，使传统利用向 Serverless 化迁徙，“最快 3 个月，最晚 6 个月，咱们就会交出一份丑陋的答卷。”
具体来看过来这两年的工夫里，闲鱼在 Serverless 上的实际成绩，次要分为 5 个方面：
1、云端编程模型一体化框架（Nexus API）
这个框架的指标是使 Flutter、FaaS 的编程模型对立，买通 UI、交互、数据、逻辑。王树彬提到，一开始说要做 Flutter + FaaS 一体化的时候，咱们对“一体化“这三个字的认知绝对比拟含糊，只是晓得端侧的同学能够用 Dart 这门语言来写 FaaS 函数，这其实还停留在语言上的一体化。对于 FaaS 所能做的事，也仅仅停留在前端施行已久的 BFF 层面。
咱们花了很长时间来探讨，基于 Dart 生态下，前端的 FaaS 在研发交付其实并不高效，研发阶段次要面临的问题是：
编程语言不对立： 编程语言自身尽管不是最大的阻碍，但这也的确给前端开发者减少不少门槛，而且更重要的是语言背地的生态、环境与体系更是一道高高的墙。
开发模式与架构割裂，环境简单： 端侧一个工程，FaaS 侧也有一个独立的工程，它们背地有本人的一套构建、调试、集成 / 公布的工具链；除此之外，FaaS 还有本人配套的环境、Runtime、框架作为撑持。开发者面对这样简单的 FaaS 研发环境与双重的研发工作流是无奈做到高效交付的。
最终，咱们对一体化有了一个比拟清晰的共识，那就是要实现两个外围的一体化：
- 语言一体化
- 开发模式与架构一体化
编程语言的一体化能够为开发者提供一种相熟的技术栈，开发模式与架构一体化能帮忙开发者解决工程割裂以及背地简单的 FaaS 本地运行环境问题，带来与原研发模式基本一致的研发体验。
通过这两个层面的一体化，最终达到开发 Flutter 页面和开发 FaaS 无显著 Gap。例如，闲鱼客户端 Flutter 以往是用 Redux 框架开发，在 Nexus API 框架下，能够使 Redux 与 FaaS 调用无缝集成。
2、CLI 开发工具标准化
云端一体化开发时，通过 CLI（命令行工具）屏蔽 FaaS 开发的一些细节，使客户端开发 FaaS 时的开发体验标准化，合乎客户端同学的本地开发习惯。
3、根底服务 BaaS 化
过来两年，咱们在逐步简化根底服务能力，如对象存储、音讯、搜寻。同时，建设业务畛域层服务的元数据中心，这些简化的根底服务能力，再加上已有的业务畛域层服务，使客户端同学能够疾速组装业务。
4、云端工程一体化
闲鱼在胜利引入 Flutter 后，在端侧造成了以 Flutter 为主、H5 为辅的跨端研发体系，使传统的 Android 和 iOS 的两端研发，合并成一端。在端上的生产力失去开释时，咱们发现端的同学有机会向上层走一点，使服务端面向简略的数据组装逻辑，由端的同学一人闭环实现，这套模式尤其实用于一些小业务的需要。相似的尝试业界其实早就有了，例如 GraphQL 框架的风行，前端的 BFF 层的造成。但有了 Serverless，服务端轻量代码的开发能够极大地简化，所以闲鱼抉择这个机会推动云端一体化。
云端一体化波及到云端编程框架、工具链、工程体系、根底服务 BaaS 化、畛域服务下沉，同时，也波及人员上的组织保障、分工重塑、平安生产培训等。
5、传统巨型利用的 Serverless 化革新
Serverless 不是银弹，但与业务胶水层的特点很匹配，十分实用于解决胶水层的传统巨型利用的拆分，这也是闲鱼正在攻坚的下一个难题。
03 难题与破局
闲鱼落地 Serverless 的过程中并非一帆风顺。王树彬提到，在 Serverless 云端一体化过程中，遇到了一些技术难题，比方 Java 富客户端的异构语言拜访、凋谢环境如何对立以及客户端同学对畛域接口不相熟等问题。
在闲鱼的 Java 零碎中，存在大量的 Java 富客户端利用。针对 Java 富客户端的异构语言拜访，闲鱼以 Sidecar 的模式，建设 Java 的 Proxy 来解决这类问题。
紧接着，为了让开发环境对立，闲鱼开发了本人的 CLI 工具（GCLI）。GCLI 是一个基于撑持 FaaS 研发生命周期的命令行工具，它定义了闲鱼 FaaS 开发闭环，对立了 FaaS 的研发环境，是晋升 FaaS 研发效率的利器。GCLI 将研发闭环拆解成适宜 Serverless 研发习惯的开发指令。为了让用户继承其研发习惯和工具，闲鱼优先选择了基于本地的开发计划；应用 Docker 技术对立开发环境，在 Dcoker 内申明 Dart FaaS 技术栈依赖的运行环境 (软件 + 配置)。借助容器技术，FaaS 的软件环境能够移植到任何反对 Linux 运行的操作系统，从而解决了环境对立的问题；GCLI 通过 FaaS Open API 实现本地和函数平台实现互操作，造成残缺的研发闭环。
最初，针对客户端同学对畛域接口不相熟的问题，闲鱼开发了畛域层的元数据中心。
云端一体化重塑了传统的云、端边界，缩小了协同，也给人员的分工带来了更大的灵活性，技术上的研发效率、研发品质也显著晋升。而这些扭转对于业务带来的间接益处，就是能够让业务有更快的迭代速度、更快地适应市场和用户需要的变动。
云端一体化目前利用在闲鱼的重交互场景以及轻量业务场景中，其带来的技术效率、品质晋升更容易以量化的数据模式出现。例如，以典型的中大型业务需要抽样统计，开发人日升高了 30%，千行代码 Bug 率升高了 20%。如果以零散需要统计，数据晋升会更加显著。以往的小需要因为多个同学参加，往往排期须要几周，而云端一体化后，资源的灵活性明显提高，使需要响应速度大大晋升。
“然而，还有一些问题没有解决”，王树彬说，在 Serverless 的巨型利用拆分方面，闲鱼遇到的问题更加严厉，比方：
- 微服务和 Serverless 的选型
在 Functions 之间代码复用
对函数的依赖做对立降级
这几个问题的计划，闲鱼还在逐渐验证中，待教训成熟后再向大家具体分享，欢送继续关注。
04 借鉴与思考
什么样的公司、利用或场景应该选用 Serverless 的架构模式？目前没有具体的定义，关键在于想分明。想分明，就须要均衡好收益、老本、效率和应答市场的能力。其中，老本是企业更为关注的因素，这其中包含基础设施搭建的老本、运维老本、扩容老本、平安老本等。
Netflix 是落地 Serverless 的一个胜利的典型，Netflix 在产品设计上始终都有翻新的基因，除了不间断的 A/B 测试之外，每周都会公布很多新性能。为了确保这样高强度的工作成绩，就须要一个 API 服务平台来帮忙客户端工程师疾速而无效地将更改的需要部署到服务层。FaaS 通过把那些与服务相干的所有平台组件形象为业务逻辑自身来实现这一指标，而 Serverless 模式可能为 Netflix 提供一个平台，即便没有服务器和经营教训的工程师也能够开发高可用的服务。
采纳 FaaS 模式，实质上是对交易速度和可能性的定制化。有些应用程序的 FaaS 服务体现得很好——Netflix API 的状况就是如此，Netflix 运行的是绝对对立的微服务，只须要拜访和扭转上游服务的数据。然而，如果服务须要定制化，例如须要扭转服务平台的各个组成部分，像 RPC、数据拜访、缓存、认证等，那么 FaaS 模式可能无奈为这些服务提供足够的灵活性。
自建 Serverless 平台对企业 IT 人员的要求比拟高，同时建设老本也很高。另外，施行 Serverless 须要一个成熟的生态。绝大多数状况下，曾经上云的企业应该优先思考云厂商的 Serverless 产品，而没有上云的企业，须要思考现有零碎的生态状况是否能与云厂商的 Serverless 产品兼容。
对于 Serverless 产品的选型，应该综合几个方面来看：生态的成熟度，反对的开发语言，功能丰富度，免费规范等，要害是联合企业本身业务倒退的需要。
05 对于将来
O’Reilly 曾对 Serverless 的利用状况进行了过一次考察，发现软件行业的开发者关注和利用 Serverless 十分多，这在意料之中，然而金融和银行业也在高度关注 Serverless，起因之一是越来越多的金融科技初创企业的诞生，它们承当了传统基础架构的责任，并且以更凋谢的心态，接收和拥抱 Serverless。
对于回绝 Serverless 的理由，60% 的受访者示意是平安问题。因为很多行业对于 IT 环境的安全性要求很高，而采纳任何新技术都可能会带来平安危险。
此外，开发者另外一层顾虑次要是放心被厂商绑定，这就导致具备肯定规模的组织会基于开源计划，如 Knative，搭建本人的 Serverless 平台。而一旦某个开源计划成为支流，云厂商就会被动去兼容开源规范并增大社区投入。
Serverless 除了对技术和业务产生影响外，对于企业组织架构和技术人员也提出了新的要求。
首先，Serverless 扭转了沟通构造。依照康威定律，组织架构须要适应新的沟通构造，才是最好的匹配。闲鱼以前负责客户端和服务端的同学是离开的，在全新的 Flutter+Serverless 的背景下，组织构造也须要做相应的调整。通过探讨，闲鱼最终决定依照业务线划分，将客户端、服务端的同学按业务线重新组合到一起。
其次，Serverless 使客户端的同学有机会更多的理解业务，这就要求客户端同学更加具备业务敏感度。Serverless 促使客户端同学扩充了技术边界，也须要理解肯定的服务端开发概念。
最初，Serverless 要求原有的服务端同学有更好的数据建模、领域建模能力，从而有助于底层接口复用度更好。
从最开始不被外界看好，甚至被调侃为“咸鱼”，到现在实现了千万 DAU，盘活了一个万亿级市场，闲鱼的呈现，无论是对前端的电商生态，还是用户在互联网上的生存模式，都产生了重要的影响。
为了撑持起闲鱼万亿的交易规模，王树彬和技术团队正在紧锣密鼓地进行传统巨型利用的 Serverless 化革新，“闯过了 Serverless 的这一关，才是我比较满意的状态。”
云栖大会预报：
在 9 月 17-18 日云栖大会上，王树彬将在「Serverless 分论坛 — 2020 Serverless 新浪潮」分享《闲鱼 Serverless 架构实际》的话题，敬请期待。