Tencent Games
Tencent Games

生态发展部-资深游戏测试工程师-Agent评测

RoleQA
LevelMid Level
LocationShenzhen, China
WorkOn-site
TypeFull-time
Posted1 month ago
Apply now

About the role

About the role
在腾讯,优秀的技术质量管理,保证腾讯每一个的产品与服务能更加稳定、顺畅、安心地被用户使用和体验。与技艺高超的同事们一同深化对架构设计、数据和产品的理解,在美好向善的世界里,成为一块闪耀的基石。

Responsibilities:

1.负责AI Agent全链路评测与质量保障工作,聚焦Agent能力基准测试、自动化评测基座建设及分级评测指标定义;
2.针对AI生成的非确定性与参数化特点,设计并量化评测标准,搭建科学的分级评测指标体系;
3.主导构建高质量的基准测试集(Benchmark),覆盖多轮交互、长短上下文等复杂场景,解决AI生成结果验证标准量化的核心难题;
4.参与设计和研发Agent自动化评测基座,通过构建自动化测试脚本和引入大模型交叉验证(LLM-as-a-Judge)机制,提升评测效率;
5.建立高效的缺陷定界机制,精准判断问题根因,输出多维度评测报告并协同开发团队推动问题解决。

Requirements:

1.本科及以上学历,计算机、软件工程、人工智能等相关专业,3年及以上测试开发/评测经验,具备大模型或AI Agent核心评测经验;
2.深入理解大模型及AI Agent核心运行逻辑,能快速拆解Agent驱动游戏生成的业务链路;
3.具备优秀的逻辑思维与缺陷定界能力,能基于生成日志、链路追踪工具快速定位复杂AI生成异常的根因;
4.具备优秀的跨团队沟通协作能力和执行力,能高效对接算法、研发、产品团队,推动测试工作落地和问题闭环;
5.精通至少一门编程语言,具备扎实的编码基础。

Role highlights
1.参与前沿AI Agent评测体系建设,深度影响产品质量与用户体验;
2.与顶尖算法、研发团队紧密合作,共同推动AI技术在游戏生成领域的创新应用;
3.提供技术深度与广度并重的职业发展路径,支持个人能力快速成长;
4.富有挑战性的工作内容,持续接触最前沿的AI技术与应用场景。

Preferred qualifications
1.有从0到1搭建AI自动化评测基准平台的实战经验;
2.工作中独立开发过Agent应用,并达到提效预期;
3.熟悉小游戏功能,对游戏领域有浓厚兴趣;
4.具备良好的数据分析能力,能通过评测数据提炼产品质量趋势,反推Agent策略的迭代;
5.有丰富的跨领域合作经验,能够快速理解不同业务场景下的评测需求。

About Tencent Games

Shenzhen

Headquarters