数据工程师

职位描述

• 工作职责：

  设计翻译产品/技术所需语料的生产流程及方案，包括但不限于语料数据收集、清洗、生成及深入挖掘和全面数据工程分析；为最终数量及高内容质量负责。
  研究数据质量与模型效果的关系，构建高效且全面的语料数据体系，助力语言模型的优化和提升。
  负责分布式数据采集系统的维护与优化，优化数据采集调度、抓取、解析、存储全栈流程。
  不断探索更低成本高质量的语料生产解决方案。

• 岗位要求：

  熟悉主流技术及框架，如Scrapy/Selenium/PhantomJS/Puppeteer等。
  具备1年以上NLP数据工程工作经验；有过AI语料生产标注相关经验，了解多语言AI语料生产标准及方法优先。
  熟悉Python/Go/C++其中一种语言，具备扎实的编码能力，具备良好的编码能力和代码质量意识。
  具备独立分析问题、定义问题和解决问题能力，并且有优秀的理解和沟通能力。

工作地址

深圳 - 南山区 - 深圳市粤海街道云科技大厦14F