岗位描述(节选)
岗位职责
建设 AI 软件测试体系
面向 AI Agent、RAG、智能助手等产品,制定测试策略、质量标准和测试方案,覆盖功能、效果、稳定性、性能、安全及兼容性测试;推动测试活动融入需求、开发、发布和线上运营流程。
开发自动化评测平台与工具
设计并实现 AI 应用自动化测试框架,支持测试集管理、批量执行、结果采集、指标计算、报告分析、版本对比和回归测试。根据业务需要集成 DeepEval、LangSmith 等评测或可观测工具,并能扩展自定义评测器。
开展 Agent 白盒测试
建立对 Agent 内部执行过程的验证能力,重点覆盖任务规划、上下文构建、记忆读写、RAG 检索、工具选择与调用、状态流转、异常恢复和多轮对话。能从 Trace、事件流、日志或结构化中间结果中定位问题并设计校验规则。
设计并维护测试数据集
将需求和业务场景拆解为可执行测试用例,构建包含输入、参考答案、期望工具行为、……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。