职位&公司对比

招聘中
  • 互联网
  • 不需要融资
招聘中

高级实时数据研发工程师

-K·薪
  • 互联网
  • 已上市

职位详情

  • 上海
  • 3-5年
  • 本科
  • Linux
  • 数据库开发
  • 数据架构

岗位描述: 1、基于分布式计算系统的数据开发,包括离线计算和实时计算 2、对不同类型数据进行分析,数据建模,来自BOSS直聘构建合理的数据架构 3、分析数据合理性,有效处理数据质量问题,改善数据质量 BOSS直聘岗位要求: 1、至少掌握一种主流数据库,如ORACLE,DB2,MYSQL等,精通SQL语句 2、熟悉Ha直聘doop等分布式开发平台,有实际数据开发经验 3、熟悉Linux系统,并具备Python, shell等脚本语言开发能力 4、BOSS直聘三年以上工作经验

职位详情

  • 上海
  • 1-3年
  • 本科
  • Kafka
  • Flink
  • Java
  • 计算机相关专业
  • 大数据开发经验

岗位职责 1.负责拼多多实时数仓的架构设计和研发,持续集成相关工具产品,建设拼多多统一的实时数据体系; 2.负责拼多多实时数据建模、研发与质量把控,键技术攻关,不断优化系统性能、降低资源开销; 3.推进批流一体落地,提升拼多多数据采集、生产与使用的时效性; 4.与业务深入合作,以解决实际问题导向,助力业务及产品不断优化; 5.构建丰富多样的实时应用,解决实时数据在数据分析、业务决策、服务化、产品boss化等场景的一系列挑战 任职要求 1.具备扎实的计算机理论基础, 1年以上相关工作经历; 2.精通Java语言编程,具备优秀的系统Debug/Profiling能力和经验; 3.精通并行计算或者分布式计算原理,熟悉高并发、高稳定性、可线性扩展、海量数据的系统特点和技术方案; 4.熟悉Kimball的维度建模设计方法,具备海量数据加工处理(ETL)相关经验; 5.熟悉Flink/Kafka/Hadoop/Clickhouse等开源实时大数据技术; 6.优秀的业务敏感度,能够通过梳理设计业务模型发现业务问题,同时具备优秀的技术与业务结来自BOSS直聘合能力; boss 加分项 1.熟悉Hudi、IceBerg、Delta Lake等开源数据湖技术经验优先; 2.kanzhun有大规模Hadoop/K8S/Flink管理实践、有大规模实时数仓落地、实时数据资产管理等经验优先

技能解析

专有技能
  • 脚本语言
  • MYSQL
  • 数据质量
  • 精通SQL
  • ORACLE
  • SQL语句
  • 数据进行分析
  • 质量问题
  • 数据开发
  • 数据架构
  • 分析数据
  • 主流数据库
  • 开发能力
  • 开发经验
相同技能
  • 分布式计算
  • 数据建模

数据来自CSL职业科学研究室

技能解析

专有技能
  • 业务敏感度
  • 系统性能
  • 海量数据
  • 资产管理
  • 实时数据
  • 关键技术
  • 技术方案
  • 架构设计
  • 数据资产管理
  • 资产管理等
  • 理论基础
  • 数据技术
  • 数据分析
  • 业务问题
  • 优化系统
  • 语言编程
  • 设计和研发
  • 质量把控
  • 数据采集
  • 解决实际问题
相同技能
  • 分布式计算
  • 数据建模

数据来自CSL职业科学研究室

工作时间

上午11:00   -   下午08:00

公司福利

  • 节日福利
  • 全勤奖
  • 定期体检
更新于 2025-01-23