ATH-AI创新事业部-AI Agent 评测与效果优化工程师-Qoder

1、面向对话式编程、代码审查及 Agent 自主编程等场景，构建线上与离线评测体系，将真实用户任务、代码交付质量和使用价值转化为可衡量、可验证的指标，综合评估产品效果、响应时延与推理成本； 2、深入研究 AI Coding 场景下的上下文工程，设计和优化代码检索、上下文筛选与组织、历史信息压缩及动态上下文管理策略，通过实验验证其对代码理解、生成质量和长程任务完成能力的影响； 3、设计和开发评测框架与基准任务集，结合代码执行验证、规则校验、人工评价及模型辅助评价等方法，建设可复现的自动化评测流程；持续检查评测方法的有效性、一致性与偏差，提升对真实产品效果的解释能力； 4、在数据合规与隐私保护前提下，分析补全接受率、后续编辑行为、会话过程及 Agent 执行轨迹，结合用户反馈开展失败归因，识别上下文缺失、工具使用、模型能力及交互设计等因素对结果的影响； 5、设计和执行离线对比实验与线上 A/B…… 完整岗位描述与官方投递入口,请登录后在岗位详情页查看。

本站当前在招 1431 个杭州技术研发岗位，其中 60 个公开标注了薪资。按这些标注统计：月薪（税前）主流区间 20K ~ 32K（25~75 分位），中位约 28K，最低 5K、最高 90K。