各大行业职位任你选
首次验证通过即注册BOSS直聘账号相似职位更多相似职位
-
OLAP引擎研发工程师 60-70K·16薪
职位对比
BOSS直聘
北京
-
数据平台开发-用户画像 60-80K·15薪
职位对比
某大型知名互联网公司
北京
-
大数据仓库工程师 60-90K·15薪
职位对比
某大型知名互联网公司
北京
-
资深数据研发工程师 60-80K·15薪
职位对比
某大型知名互联网公司
北京
-
资深数据开发工程师 60-85K·16薪
职位对比
某大型互联网公司
北京
职位描述
- Java
- Python
- 计算机相关专业
- 大数据开发经验
1、设计和开发大规模预训练数据处理链路，为基座模型预训练提供稳定、可靠的高质量数据处理能力，包括数据寻源、数据抓取/采集、数据解析处理等工作内容；
2、设计和开发服务大模型预训练的数据平台，管理海量文本和多模态数据的元信息、血缘、存储治理等全生命周期要素；提供预训练数据的可视化、可观测能力；探索数据实验、数据发版的工程上限；
3、根据大模型训练数据特点，抽象并开发高效、可靠的数据加工框架，提升所有大模型算法工程师处理数据的工程效率；
4、与团队成员共同攻克技术难题，持续迭代项目能力输出，提高服务质量。
岗位基本要求
1、熟练掌握Java, Python 等主流编程语言，具备核心业务系统、大规模在线系统及数据处理系统架构设计与开发经验。
2、具备优秀的编码能力、架构设计能力和分析解决问题能力，能够发现业务痛点，并通过架构改进解决问题。
3、有面对技术挑战的热情，能独立思考，具有好奇心和快速学习能力。对业务、产品和技术都有浓厚的兴趣，对技术驱动业务有强烈的激情，持续学习成长，勤于思考总结，结果导向。
4、责任心强，积极主动，有良好的沟通能力和团队合作能力。
具备以下条件优先
1、基础扎实、编码能力强悍，对新技术有强烈的学习热情者优先；
2、熟悉ES、Scrapy、Lucene、Selenium、RPC框架等相关技术者优先；
3、熟练掌握主流中间件和大数据工具，对大数据技术有深入的理解加分，熟练掌握如Spark、Flink、Kafka、Hive、HDFS、ClickHouse、Doris、Ray等工具优先；
4、有数据中台、机器学习相关的系统平台开发、深度使用经验加分；
5、对大模型技术、产品生态有深入了解加分。
岗位亮点
1、紧跟AI最前沿，深度参与大语言数据系统的建设及迭代过程。
2、参与重点项目从0到1建设，解决大模型数据领域遇到的各类问题，流量大，业务复杂，挑战多，发展空间大。
3、参与到公司的战略级项目，与领域技术大拿一起交流成长；
认证资质
黑女士
竞争力分析
人中排名第BOSS 安全提示
BOSS直聘严禁用人单位和招聘者用户做出任何损害求职者合法权益的违法违规行为，包括但不限于扣押求职者证件、收取求职者财物、向求职者集资、让求职者入股、诱导求职者异地入职、异地参加培训、违法违规使用求职者简历等，您一旦发现此类行为， 请立即举报
了解更多职场安全防范知识精选职位
更新于：2024-11-16
电子营业执照
京公网安备11010502032801
关注BOSS直聘微信服务号
