跳转至

淘宝营销会场智能测试平台的AI落地实践

Ch01.1114 淘宝营销会场智能测试平台的AI落地实践

📊 Level ⭐⭐ | 5.6KB | entities/淘宝营销会场智能测试平台的ai落地实践.md

淘宝营销会场智能测试平台的AI落地实践

来源: 大淘宝技术

发布日期: 2026-04-01

原文链接: https://mp.weixin.qq.com/s/QVeetEguVAzGnfrAgWdP3w


本文 介绍了淘宝营销会场智能测试平台的AI落地实践:基于LLM与多模态Agent,实现“所见即所得”渲染校验、价格/内容/交互一致性比对、定投与多端适配自动检测;覆盖需求提测、测试执行、线上回归全流程。达成问题发现率↑、线上风险↓、测试人效提升100%、整体提效40%,推动测试从“人工驱动”迈向“AI智能判定+闭环自治”。后续聚焦需求意图识别、AI造数、智能用例选择等深度智能化方向。

背景与现状

▐ 业务演进:测试内容模板化

目前会场需求测试中,被测对象(页面、组件、数据服务)、技术方案,在支持营销多业务产技需求场景下趋近稳定。测试流程、测试范围、测试手段相对标准化。在过往的测试过程中,关键节点通过自动化工具切入进行提效,但交互、视觉体验等验证领域介入成本较高。

大促、日常营销导购会场需求测试内容中,围绕着以会场

主链路测试 、 埋点验证 测试为主,以 会场性能 、 压测 、 适配 、 兜底容灾 测试验证保障会场极致用户体验,交付需求测试产物。

业务需求-》测试执行

会场测试在“所见所得渲染验证、价格一致性、Tab/Feed 交互、骨架/快照/终态对比、渠道投放一致性、内容异常发现”等多个维度,传统依赖人工肉眼和脚本、难以覆盖且易遗漏。引入 LLM 大模型和测试 Agent ,旨在通过截图比对、多模

态识别、自动链路拼接和可视化异常发现,实现C端可视化校验、核心交互路径验证、场景体验统一和内容缺失自动识别,达到提升测试质量与效率效果。

▐ 会场测试:传统测试工具下保障会场极致体验

会场主链路测试

会场主链路功能测试 页面与楼层交互功能 会场(上、下游)一致性验证 会场状态切换、定投渲染验证

· 会场页面结构完整性测试 · 页面渲染方式:csr、ssr、快照、骨架 · 验证点:页面结构符合预期、内容渲染正常

1.上下、左右手势滑动 ·页面头下滑搜索头展开 ·会场feeds下滑吸顶 ·会场下滑软刷新 ·会场左右滑动 2.页面与楼层交互功能 具体一致性检查点包含但不限于以下内容 1.业务实体(品、店、内容、直播间等)承接正确, 2.业务实体数据表达(价格,名称,利益点,素材,氛围等)符合预期

  1. 随大促里程碑、业务需求变更,页面结构、内容、氛围随排期切换 2. 页面、楼层设置定投实验 3. 手淘终端渠道渲染 4. 其他终端渠道渲染(其他淘内app与非淘内app) ·打开渲染、内嵌半屏渲染

用户极致体验验证

服务端压测 兜底容灾验证 适配验证 会场性能测试

业务流量模型梳理-》OPM模型流量录入-》压测报告与数据沉淀

多层的容灾兜底场景下服务异常且不影响C端用户的正常浏览访问

通过覆盖同一张H5会场在不同型号、系统版本、尺寸、分辨率及DPR(设备像素比)下内容、样式正确性表达,来确保视觉一致性与操作可用性。

通过 简单的图片纹理canny算子计算边缘纹理,计算会场渲染过程中终帧与首帧加载时间耗时,计算会场渲染首帧响应时长

▐ Agent在测试中应用机会

期望在会场测试经验全面、基建完善的当前基础上,应用AI大模型能力,在

需求提测、需求测试、线上回归 阶段 , 提供会场业务智能测试解决方案,提高会场需求测试整体效率。

实现方案

在既有测UI自动化

原文存档


关联