校招职位
AI系统测试专家
20-40K/月深圳南山区1人
刺猬平台全部职位均通过刺猬审核且不收费,如在求职过程中遇到涉嫌内容不实、收费等违反平台规定的行为,请联系工作人员0755-26608614
职位描述
工作职责:
负责特定领域大模型应用产品的模型性能测评工作
深入剖析产品使用场景,开发自动化标注、抽取(或生成)测试语料数据工具,构建场景覆盖度高的benchmark测试集
基于产品应用场景特性,设计模型性能的多维度评价指标,形成完整的模型性能评价标准
设计与开发模型性能自动化评估算法,快速评估产品在实际应用中的效果,参与建设与维护自动化测试框架(根据测试过程反馈和数据分析,不断优化评估算法或模型,逐步提高稳定性和高效性)岗位要求:
熟悉基本测试方法理论,3年及以上测试开发经验
熟悉大语言模型的架构和工作原理
丰富的prompt编写经验,根据具体业务场景,快速写出高效的prompt
熟练Python脚本编程,熟练运用linux操作命令
熟练操作mysql/redis/es数据库命令
熟悉容器,K8S的运行原理与部署方法
工作地址
深圳 - 南山区 - 深圳市粤海街道航天大厦A座1201
其他职位
公司名称 · 公司职务
推荐的相似职位更多





