岗位描述(节选)
1. 评测框架与平台开发:构建以模型、Harness为评测对象,以办公通用领域为核心内容的的评测能力,实现对 ” 任务 X 模型 X Harness “ 多维度组合的评测,建设使用门槛低、效率高、自动化、可信赖的评测框架与平台;
2. 评测方法建设:能够快速跑通、复现开源Benchmark;协同领域专家、产品经理共同构建符合业务属性的评测方法,包含自建Benchmark,探索新的评估范式以解决静态评估及榜单的弊端;
3. 评测结果分析:对评测结果进行深入分析,形成评测报告,为模型、Agent研发迭代提供参考。Agent评测,对工具调用、工具轨迹、权限、状态变化、消耗资源、Agent产物等全链路评测结果进行真实性反馈,形成Agent迭代优化的依据;
4. AI研发体系建设:协同模型研发、Agent研发、业务服务等多个研发团队,建设起闭环研发质量体系,不断提升模型与Agent表现。
任职要求:……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。
本站当前在招 24465 个上海岗位(全城各职能合计),其中 1204 个公开标注了薪资。按这些标注统计:月薪(税前)主流区间 8K ~ 20K(25~75 分位),中位约 12K,最低 0.8K、最高 113K。
在招岗位较多的企业:字节跳动 992 个米哈游 663 个拼多多 479 个哔哩哔哩股份有限公司 445 个阿里巴巴集团 431 个
统计口径:求职者营地实时在招岗位的公开薪资标注,未标注者不计入;区间为 25~75 分位,非薪酬承诺。