AI 应用测试工程师

岗位职责： 1.负责 AI 应用产品的测试工作，包括功能测试、接口测试、数据验证、流程测试和上线回归。 2.参与大模型应用链路测试，包括 Prompt 输出验证、RAG 检索结果验证、结构化输出校验、Function Calling、Tool Use、Agent 工作流测试等。 3.根据产品需求和技术方案设计测试用例，覆盖正常流程、异常场景、边界条件、权限控制和数据一致性。 4.负责接口自动化测试、回归测试和测试数据构造，提升测试效率和交付质量。 5.跟踪 AI 输出质量问题，包括回答不稳定、结果不准确、格式错误、幻觉、上下文丢失、工具调用失败等问题。 6.与产品、开发、算法/AI 应用工程师协作，推动问题定位、修复验证和版本交付。 7.参与线上问题复盘，完善测试策略、测试用例和质量标准。 任职要求： 1.本科及以上学历，计算机、软件工程、测试工程等相关专业优先。 2.3年以上软件测试经验，有 Web 系统、后端接口或 AI 应用测试经验优先。 3.熟悉测试流程，能够独立完成需求分析、测试计划、测试用例设计、缺陷跟踪和回归验证。 4.熟悉接口测试工具，如 Postman、Apifox、JMeter、Swagger 等。 5.熟悉 SQL，能够进行基础数据查询、测试数据准备和结果校验。 6.了解 Python、JavaScript 或其他脚本语言，能够编写简单自动化测试脚本者优先。 7.具备较强的问题定位能力，能够通过日志、接口返回、数据库数据和复现路径协助开发排查问题。 8.细心、负责，对产品质量敏感，能主动发现流程漏洞和体验问题。 加分项 1.有大模型应用、智能问答、知识库、RAG、Agent、AI Workflow 等测试经验优先。 2.熟悉 AI 应用常见问题，如幻觉、召回不准、输出格式不稳定、工具调用失败、多轮上下文丢失等。 3.有自动化测试经验，熟悉 pytest、unittest、Playwright、Selenium、JMeter 等工具优先。 4.有接口自动化、性能测试、稳定性测试、日志监控、线上问题排查经验优先。 5.有测试平台、质量度量、缺陷管理、CI/CD 测试集成经验优先。 6.对 AI 产品感兴趣，愿意学习大模型、Prompt、RAG、Agent 等新技术。 我们希望你： 不只是按页面点点功能，而是能理解业务流程和 AI 链路背后的数据逻辑。 能设计出覆盖真实使用场景的测试用例，而不是只测标准答案。 对 AI 输出的不确定性有敏感度，能发现“不稳定、不可靠、不可控”的问题。 能和开发一起把问题定位清楚，推动产品真正变得稳定可用。