千问事业部
社会招聘千问事业部-大模型产品评测策略专家-北京/杭州
面议
关于这个机会
1. 制定所负责业务线的评测策略,与产品、算法目标对齐,明确评测优先级与节奏; 2. 设计并维护评测标准与Rubrics体系,建立科学、可量化的评估框架; 3. 产出深度评测报告与Bad Case归因分析,输出可落地的改进建议,驱动产品迭代; 4. 开展评测数据洞察与Insight分析,从评测结论中提炼业务价值与趋势判断; 5. 组织行业专家参与评测,把控人评质量,推动专家逆序率持续下降
任职要求
1. 本科及以上学历,专业不限,计算机语言学、人工智能优先; 2. 1年以上大模型评测或NLP质量评估经验,有垂域评测经验优先; 3. 具备评测集设计、标注规范制定与质控的完整经验; 4. 较强的数据分析与报告撰写能力,能将评测结论转化为业务语言; 5. 具备行业专家资源组织经验,能独立开展主观评测活动; 6. 良好的跨团队协作能力,能与产品、算法团队高效沟通并建立信任
内推申请说明
本站为独立内推协助平台。申请会交由管理员核实岗位与内推渠道,不等于已在公司官网投递;薪资、岗位状态和实际招聘流程以官方信息为准。