双11直播电商背后的技术：基于DataLeap开放平台提供实时数据能力
-
超级管理员
- 2023-11-12 20:01:19
- 超级管理员
随着直播电商业务的高速增长,业务场景越来越丰富,业务基于数据做的决策也越来越多,对数据的时效性要求也越来越高。原有离线批处理的数据仓库已经无法满足诉求,因此需要打造一套同时具备高时效性和高稳定性的计算能力快速完成对数据的处理,即实时数仓。
很多直播实时数仓团队负责为直播中台业务建设实时数据仓库,为业务侧数据产品提供实时数据能力。2023年之前,各业务实时数仓(直播/电商等)因发布流程问题引发了多起稳定性事故。
发布流程常见问题有测试验证缺失、影响评估不准确、上线意识不严谨、上线review随意等。期望有一套流程化工具,自动约束人为不规范操作,降低流程原因导致的事故数、甚至完全规避。
DataLeap是火山引擎一站式数据中台套件,能帮助用户快速完成数据集成、开发、运维、治理、资产、安全等全套数据中台建设,提升数据研发效率、降低管理成本。DataLeap开放平台支持业务自定义扩展程序能力,扩展程序可以订阅DataLeap侧OpenEvent监听用户操作、通过OpenAPI与DataLeap进行丰富的交互实现用户行为管控,除此之外开放平台还提供将N个扩展程序以流水线的形式编排的能力。
以主播服务平台-直播大屏为例,DataLeap开放平台为主播提供在线人数趋势、进房人数等互动指标和送礼人数、送礼金额等收入指标,主播在开播过程中会基于以上指标做直播策略的调整。控制发布频率和发布时间降低业务影响,通过流程控制提升发布质量,保障数据时效性和正确性。
未来DataLea开放平台针对直播电商场景提供实时发布复查流程精细化管控,定时发布、顺序发布、发布异常快速发现及发布自动化回滚和发布变更自动周知等能力。
