Forrester 考察显示：企业应用 A / B 测试的 ROI 达 126%
4 月 26 日，《火山引擎 A / B 测试总体经济影响白皮书》正式公布。这份白皮书由市场钻研公司 Forrester 调研撰写，揭示了 A / B 测试对于企业营收增长、经营老本、生产力优化等方面的重要影响。基于对多家企业调研，Forrester 发现企业营收增长与其洞察力高度相干，当先企业的营收增长速度能够达到落后者的 5 倍，A/ B 测试正是企业晋升洞察力最无效的工具之一。
白皮书中，Forrester 调研了多家应用火山引擎 A / B 测试的企业，发现这些企业的广告营收和会员经营收益均有显著晋升。综合财务剖析来看，企业应用 A / B 测试的 ROI（投资回报率）达到 126%。
《火山引擎 A / B 测试总体经济影响白皮书》：具备较高成熟度的洞察力驱动企业，营收增长是落后者的 5 倍
A/ B 测试成为企业降本增效利器
随着人口红利逐步消退，各行各业面临着不同水平的增长瓶颈，企业迫切需要由过来粗放式的经营模式，转变到以客户体验至上的精细化经营模式。白皮书显示：94% 的企业决策者认为，客户需要及偏好相干的数据洞察对于晋升企业营收极为要害；81% 的企业认为通过数据深刻理解客户的需要，并基于数据不断改进和优化解决方案，晋升了竞争劣势。
作为客户洞察最无效的工具之一，A/B 测试正在被越来越多的企业所驳回。A/ B 测试实质是对照试验，其办法是对不同策略进行随机比照，通过试验数据来确定最优计划。为了主观出现 A / B 测试带来的理论价值，Forrester 应用总体经济影响（TEI）模型，对采纳火山引擎 A / B 测试产品的企业进行调研剖析。
调研显示，A/ B 测试能通过优化的形式实现广告营收增长、会员经营收益晋升、经营老本节俭，以及晋升数据分析效率，实现生产力优化。量化分析表明，受访企业产品上线迭代效率晋升 20%，数据分析效率晋升 60%，三年广告业务利润净增长 224 万元，三年会员经营利润净增长 115 万元。综合财务剖析来看，企业应用 A / B 测试的 ROI 达到 126%。
“通过分流模型和继续的试验，咱们大幅度优化了开屏广告，广告营收取得了翻倍的增长，这是以往无奈做到的”，一家受访企业示意 A / B 测试的成果超出了预期。
白皮书指出，A/ B 测试带来的还有非量化收益，包含升高产品新版本公布危险、晋升客户参加及活跃度、落地数据驱动的文化，以及晋升企业自适应性，实现业务疾速迭代和继续翻新。
Forrester 高级征询参谋谷丰认为，洞察力驱动成熟度与企业营收增长高度相干，具备较高成熟度的洞察力驱动企业，营收增长是落后者的 5 倍。
从 A / B 测试走向“麻利数智引擎”
字节跳动被称为一家“A/ B 测试”公司，有着“万事不决问 AB”的流行语，甚至连抖音的名字也是通过 A / B 测试测进去的。作为字节跳动旗下的企业级技术服务平台，火山引擎也将 A / B 测试视为重要的技术工具。
火山引擎数据产品负责人郭东东示意，基于外部先进的底层算法、迷信分流能力、智能统计引擎，火山引擎 A / B 测试已笼罩举荐、广告、搜寻、UI、产品性能等业务场景，提供从实验设计、试验创立、指标计算和统计分析，到最终评估上线等贯通整个试验生命周期的服务。
郭东东指出，A/ B 测试是一个重要的生产力工具，但转型为洞察驱动型组织还须要搭配数据驱动更多的能力。为此，火山引擎基于字节跳动数据驱动理念，为企业客户提供了一套残缺的数据中台，实现从单品数智到全局数智。
火山引擎数据产品全景图
火山引擎数据中台分为 SaaS 层和 PaaS 层。SaaS 层次要是数据利用产品，外围是帮忙业务应用数据、推动业务增长，包含 A / B 测试产品 DataTester、增长营销平 GMP、增长剖析 DataFinder、客户数据平台 CDP、智能数据洞察 ABI。PaaS 层次要是数据中台类产品，提效数据开发、积淀数据资产，包含湖仓一体剖析服务 LAS、Stateless 云原生开源大数据平台 E -MapReduce、极速 OLAP 引擎 ByteHouse、大数据研发治理套件 DataLeap。
郭东东介绍，与传统建设数据驱动体系的理念不同，火山引擎数据中台是从业务场景登程，依据企业理论利用驱动中台能力建设，从上往下逐渐落地数据驱动能力，为企业客户构建麻利的数智引擎。