AI原生研发范式在地图AI-QA值守系统中的实践与创新
议题背景:
随着业务需求的持续增长和新功能的快速交付压力,精准识别代码改动中的潜在质量风险并自动化执行测试用例,成为亟待解决的关键问题。为此,我们构建一套依托大模型能力的AI-QA值守系统,涵盖风险精准识别、测试用例规划与测试结果归因,以及精准质量研判。确保程序变更经过严格检测。系统已在14个业务、71个模块中落地应用,通过大模型与专家规则的结合,显著提高风险识别准确率(高达90%),并减少了20%的人工判断时间,为项目质量保驾护航。
内容大纲:
1. 问题背景与挑战:
1.1 在地图业务高速迭代的进程中,变更上线环节常因风险洞察不充分而面临质效管理的严峻挑战。
1.2 业务需求的快速增长,使得精准识别代码改动中的潜在质量风险成为关键。
1.3 目标是构建一套依托大模型能力的全流程机制,包括风险精准识别、测试用例规划及测试结果归因,以及精准质量
研判,确保程序变更经过严格检测,安全上线。
2. 技术方案:
2.1 整套系统概述:
依托“AI风险洞察、D级项目测试智能化、AI智能研判”,构建测前预警、测中智判、测后决策的全链路质量保障体系。
结合多模型打分和专家经验规则,通过语义推理和业务知识词条补充,实现从风险洞察到质量研判的全流程打通。
通过人工分析标注,持续优化整体流程,提高模型洞察准确率,建立程序变更的前置化、高效化、完善的质量保障
体系。
2.2 AI风险漏斗架构概述:
质量维度风险识别:基于代码变更内容、业务知识图谱以及测试专家经验,全面分析程序变更的潜在质量风险,从多
维度构建初步的风险评估基础。
智能项目定级:结合研发画像、模块成熟度与预设定级标准,通过多模型投票机制与Goodcase约束方法,精准计算项
目风险等级,为后续治理提供科学依据。
风险治理闭环与持续优化:构建“反馈-迭代”闭环,通过风险洞察工作卡推送风险治理任务,形成"人工反馈-Prompt优
化-效果提升"的持续学习路径。通过不断内化专家经验规则,系统逐步提升风险洞察的准确性与可解释性,实现自适
应优化。
2.3 项目落地效果:
风险洞察已接入87个业务模块,包括phpui、导航、定位、交通、公共出行、开平等业务线,共实现洞察超3000次,研
发反馈超过50次,洞察准确率平均达到65%-75%。
听众收益:
学习AI风险漏斗架构的创新设计与应用;掌握多模型投票机制与Goodcase约束方法;了解“反馈-迭代”闭环及专家经验内化路径,增强系统准确性与可解释性。