共计 2235 个字符，预计需要花费 6 分钟才能阅读完成。
TiFlash 终于 开源 了，而且不再闭源：咱们选了这个特地的节日开源并做出承诺，心愿能显得更加真挚 :)
PingCAP 始终以来对开源这件事件，是有信奉的。这种信奉植根于创始人的情怀，也深深影响了这个旗号下汇聚的所有人。开源自身并不是一种市场策略：远在咱们看清开源到底能带来什么的时候，咱们就有了开源的保持，这也使得咱们的开源精力绝对纯正。作为 TiDB 社区的一个重要力量，咱们和其余社区贡献者一起奉献代码，通过社区用户的应用、打磨，大家独特分享 TiDB 不断进步的红利，没有任何人为阻碍和边界。自在和共赢的理念，也是咱们对技术对开源的倔强。
TiDB 是一款 HTAP 分布式数据库，其中提供 HTAP 能力的重要组成部分是 TiFlash。从原型开发起，因为是一个摸索型的我的项目，一开始咱们并没有想好最终状态和架构（TiFlash 在 2018 年也确实经验了一次彻底翻新重做），为了不引起外界太多探讨，咱们抉择了让 TiFlash 临时闭源，等大体成型了再开源。尽管从一开始咱们就打算开源，但待到真正着手做的时候，咱们发现它曾经欠下了不少「开源债」，显得和 TiDB 骨干心心相印：公布流程没有齐全交融，开源所需的文档缺失，编译体验相当蹩脚，甚至局部代码格调有些俊俏。要还上这些债权，须要投入相当多的工夫和人力。与此同时，产品迭代的压力和无限的资源就成为束缚 TiFlash 开源的最大阻碍。作为将开源当成信奉的团队而言，TiFlash 闭源对咱们来说其实是如鲠在喉。因而，尽管仍有诸多缺失，咱们抉择投入工夫逐渐还债。毕竟，独自就这个引擎而言，咱们也从社区有所取，无论是 ClickHouse 绝佳的 Runtime 根底，还是诸多社区用户提供的实在场景和改良倡议，这些都让 TiFlash 获益无算，能够说没有这些助力，就不会有 TiFlash。
TiFlash 首先受害于开源社区的其余我的项目，除开咱们所应用的各类根底库，最重要的局部是：TiFlash 的框架代码是基于 ClickHouse 的。咱们应用 ClickHouse 的形式是将它当做一个单机的 Compute Runtime 和 Server 框架，并复用了 Storage Interface。针对在线事务数据分析的大指标，咱们退出了事务相干逻辑、MPP 能力和可实时更新的列存引擎，引入 Raft 协定和 MySQL 兼容以融入整个 TiDB 体系。很感激 ClickHouse 为社区提供了一套高性能的计算引擎，对咱们而言，一个好的根底大大减速了 TiFlash 的研发进度。值得一提的是，TiFlash 和 ClickHouse 领有齐全不同的善于场景：TiFlash 齐全偏重于事务性数据的剖析，咱们也并不心愿用户认为 TiFlash 是更好的 ClickHouse。
作为一个年老的引擎，在两年多的工夫里，受到天使用户们容纳和帮忙的同时，咱们也通过近距离聆听用户的声音高速迭代改良产品。这所有也反过来帮忙用户简化了剖析链路的架构，享受实时数据的红利。彼时 TiFlash 虽未开源，却已失去了 TiDB 社区的加持。咱们分明地记得，在晚期版本时，税务系统的敌人和咱们一起测试，尝试优化缴税流程的实时性，虽未胜利落地，但让咱们对系统设计在实在场景上的得失有了第一手体感，进而间接导致了一次重大重构：咱们齐全从新设计了存储层，引入了 Raft Learner 作为复制协定，且决定应用 TiDB-Server 作为对立入口而非 TiSpark，这也是大家今日所见的架构；而随着 TiDB 4.0 一起公布的正式版本，则能够说是齐全仰赖小红书在公布前数月就提供场景和咱们一起摸索，而这个尝试最终胜利落地电商实时看板场景，让交易数据得以实时展示；待到 5.0，从中通有惊无险却时有毛刺的 618，到流量倍增却平平稳稳的双十一，TiFlash 在低压实时场景的体现失去了晋升和验证。而这代表的不仅是寰球当先快递公司的外围业务落地，也不仅是数万 TPS 和数十亿订单的实时监控，更是用户的容纳，信赖和互助。至今咱们都常常会收到客户的私信，说本人某个场景因为 TiFlash 的能力而失去切实的业务收益。每次看到这些可恶的音讯，咱们都会在团队内分享喜悦。能帮忙大家，提供独特的价值，是咱们所谋求的；与此同时，社区的反对，也是产品倒退不可或缺的给养，推动它在更严苛更有价值的场景落地。能够说，没有社区的力量，咱们也无奈向更多人提供更好的产品。而时至今日，开源则是一个全新的渠道，让 TiFlash 能以更深刻的形式和社区互助共赢。
最初容咱们说一句道歉。尽管开源，但 TiFlash 依然缺失必要的面向社区的代码解读。对于 TiFlash 和 TiDB HTAP 的架构解析，能够参考咱们在 VLDB 2020 公布的论文《TiDB: A Raft-based HTAP Database》，或者《TiDB HTAP 深度解读》、《TiDB 的列式存储引擎是如何实现的？》文章。（社区同学也整顿了一份 TiFlash 相干文章的合辑列表 惋惜的是，这些都是基于 TiDB 4.0 版本，过后 TiFlash 仍不具备重要的 MPP 能力。除此之外，源码解析和浏览指南，也仍在缺失状态。这些都将在后续的几个月内陆续补上，以帮忙大家浏览和了解 TiFlash。心愿关注 TiFlash 的大家在应用以外，借助开源能有更多伎俩帮忙它变得更好，无论是更多的函数，算子反对，更直观的 Tracing 能力，还是更快更稳固的 Delta Tree 列存引擎。
是的，咱们期待你的奉献，因为这份力量将会借助社区的翅膀飞跃令人惊叹的奇景。
祝大家节日快乐。
