数据与测评工程师

【职责描述】 • 负责 AI 模型训练、后训练及评测所需数据集的设计、构建、清洗、筛选、版本管理与质量控制。 • 建设覆盖不同模型与任务的 Benchmark、测试集和评测标准，持续提升评测的代表性、稳定性与可解释性。 • 构建自动化评测、人工评测及 Model-as-Judge / LLM-as-Judge 等评测流程，并持续校准评测结果。 • 建立 Failure Taxonomy、回归分析和错误诊断机制，定位模型、数据和产品体验中的系统性问题。 • 设计并维护数据采集、标注、审核及供应商协作流程，建立可量化的数据质量标准。 • 与研究、算法、产品及数据平台团队协作，将真实使用反馈转化为数据与评测需求，推动模型持续迭代。 • 开发数据分析、评测流水线、Dashboard 及相关工具，提高研发和版本验证效率。 • 跟踪大模型、多模态模型、Agent 等方向的数据与评测方法，持续引入有效的…… 完整岗位描述与官方投递入口,请登录后在岗位详情页查看。

本站当前在招 24276 个上海岗位（全城各职能合计），其中 1198 个公开标注了薪资。按这些标注统计：月薪（税前）主流区间 8K ~ 20K（25~75 分位），中位约 12K，最低 0.8K、最高 113K。