腾讯(tencent)招聘微信输入法-大模型评测数据科学分析师
招聘职位:
微信输入法-大模型评测数据科学分析师 搜索同类职位
岗位职责:
1.数据体系设计:围绕评测业务,设计端到端的数据生产链路,包括 query 采集、分层抽样、标注体系、质检方案、版本管理;
2.评测数据集构建:主导高质量评测集(含 SFT 评测集、安全评测集、业务评测集)的建设,确保覆盖度、区分度与稳定性;
3.数据分析与洞察:基于评测结果做多维度数据分析(模型对比、版本对比、Bad Case 聚类、能力雷达图),为算法和业务决策提供量化依据;
4.标注体系搭建:设计标注规范、培训外包/众包团队、构建一致性指标(Kappa、IAA),持续提升标注质量;
5.指标体系建设:与算法、产品共建评测指标体系(自动指标 + 人工指标 + 业务指标),并推动指标上线与监控。
岗位要求:
1.数学/统计/计算机/数据科学相关专业本科及以上;
2.1 年以上数据科学 / 数据分析 / 数据标注体系经验,有 NLP 或大模型相关背景优先;
3.熟练使用 Python(pandas / numpy / sklearn)、SQL,能独立完成数据 pipeline;
4.熟悉常见统计方法(假设检验、置信区间、Bootstrap、相关性分析);
5.对数据质量极其敏感,具备良好的抽样设计、偏差分析、异常检测能力;
6.有大模型评测集 / 标注平台 / Bad Case 分析经验者优先。
1.数据体系设计:围绕评测业务,设计端到端的数据生产链路,包括 query 采集、分层抽样、标注体系、质检方案、版本管理;
2.评测数据集构建:主导高质量评测集(含 SFT 评测集、安全评测集、业务评测集)的建设,确保覆盖度、区分度与稳定性;
3.数据分析与洞察:基于评测结果做多维度数据分析(模型对比、版本对比、Bad Case 聚类、能力雷达图),为算法和业务决策提供量化依据;
4.标注体系搭建:设计标注规范、培训外包/众包团队、构建一致性指标(Kappa、IAA),持续提升标注质量;
5.指标体系建设:与算法、产品共建评测指标体系(自动指标 + 人工指标 + 业务指标),并推动指标上线与监控。
岗位要求:
1.数学/统计/计算机/数据科学相关专业本科及以上;
2.1 年以上数据科学 / 数据分析 / 数据标注体系经验,有 NLP 或大模型相关背景优先;
3.熟练使用 Python(pandas / numpy / sklearn)、SQL,能独立完成数据 pipeline;
4.熟悉常见统计方法(假设检验、置信区间、Bootstrap、相关性分析);
5.对数据质量极其敏感,具备良好的抽样设计、偏差分析、异常检测能力;
6.有大模型评测集 / 标注平台 / Bad Case 分析经验者优先。
免责声明:
此信息由腾讯官网 (查看来源)审核并发布,我们转载该信息,仅出于传递更多就业招聘资讯、促进大学生及广大求职者就业之目的。该招聘职位信息的真实性、准确性、时效性及合法性均由原始发布方“腾讯官网”负责。我们作为信息转载平台,不构成求职建议,不涉及任何职业中介服务,不对其内容承担任何形式的保证责任。请用户在使用转载信息时保持审慎,自行判断并承担相应风险,求职请认准企业官方渠道!