腾讯(tencent)招聘腾讯营销-商业化策略产品-大模型评测方向

岗位职责：
1.负责腾讯营销业务下大模型相关评测工作，包括不限于Agent、创意、推荐体验和特征质量评估，核心围绕标准制定、机制优化、模型建设、效果评估持续发现并刻画问题，提升模型的质量和效率；
2.参与设计数据自动化生成及模型自动化评估方案，跟踪国内外前沿大模型评测方法与benchmark，结合业务场景实践完善评测能力的建设和优化，确保评测的真实性和稳定性；
3.持续监测与分析评测数据，抽象评测badcase总结典型问题；输出评测报告，支撑模型迭代；
4.与上下游模型算法、工程技术、标注交付团队等紧密协同合作，持续优化标准提升评测模型的人机一致率，探索评测模型的业务应用场景，提升数据应用价值；
5.持续完善内部评测工具建设，收集用户反馈并推广产品使用，提升质量评测影响力。
岗位要求：
1.本科及以上学历，计算机、统计学、数学、数据科学等相关专业优先；
2.有过大模型评测、搜推策略产品或商业化产品经验优先；
3.具备数据分析基础能力，擅长数据分析对数据敏感，能够从数据中刻画问题，独立产出评测报告，抽象问题并输出解决方案，推动算法落地优化；有大模型/AI应用经验优先；
4.有owner意识，具备较强的团队协作能力和沟通能力。
岗位介绍：
“用户为本，科技向善”，是写在每位腾讯产品人心中的一句箴言。在互联网浪潮中，大众的生活已被深刻地改变，如何为用户创造价值、创造怎样的价值，需要每位产品人花费更长时间去体会与探索。在这里，你将与同样关注细节、关注本质、关注美好的同事一道，开启你的创造性工作。