大模型数据评测-会python
Technology
深圳易宝软件有限公司1周前
全职
职位描述
优先考虑有数据构造爬取和大模型工具(GPT/Claude)日常使用经验的吧
岗位职责:负责音频生成相关项目的数据处理、数据标注、数据筛选与过滤、模型训练支持、结果评测及效果维护等工作。
岗位介绍:
1、负责音频、视频、文本等相关数据的整理、清洗、切分及标准化处理,构建可用于训练和评测的数据集;
2、负责数据 caption 标注及标注质量优化,持续提升数据描述的准确性、一致性和可用性;
3、负责训练数据的筛选、过滤、去重及质量评估,制定并完善数据处理规则,保障数据质量;
4、熟练使用各类 AI 工具辅助数据处理,能够独立设计并搭建数据筛选、过滤、标注优化等自动化处理流程;
5、使用现有脚本和工具支持模型训练、训练数据准备及实验流程执行;
6、对生成结果进行初步评测与分析,协助定位问题并持续优化效果;
7、配合研发及业务团队完成相关数据流程建设、效果维护与迭代优化工作。
岗位要求:
1、计算机科学、数据科学等相关专业,2年以上工作经验;
2、具备较强的理解能力、抽象思维能力和快速学习能力,有强烈的责任心和奉献精神,做事认真积极有耐心;
3、有科学的问题分析方法论、良好的编程习惯以及撰写技术文档的习惯;
4、熟悉使用Python语言;熟悉使用Linux;熟悉shell脚本
5、有音频方面的工作经验,1年以上的模型训练经验。
6、熟悉各类 AI 工具的使用,能够独立完成数据处理、筛选过滤及流程自动化相关工作。
对这个职位感兴趣吗?