职位&公司对比
职位详情
- 北京
- 3-5年
- 本科
- Hadoop
- Java
- Spark
工作职责: 负责工业大数据平boss台和大数据处理模块的架构设计和开发; 基于Hadoop、Spark框架的数据仓库的设计,开发,维护; 大数据平台API等服务和数据接口的开发; 配合机器学习工程师,负责基于Spark技术的海量数据的处理、分析、统计、挖掘功能的开发和项目实施工作; 同前端工程师写作完成相关的开发工作。 任职要求: 计算机等相关专业统招二类本科以上学历; 3-5年以上基于Java主流框架的设计和开来自BOSS直聘发经验; 够独立搭建Hadoop和MPP数据仓库; 出色直聘的问题解决能力和快速学习直聘能力; 优秀的沟通能力,并能够适应Agile开发模式; 具备SQL和noSQL(例如:HDFS)的经验; 具备RESTful web services的知识和经验; Spring框架经验; Kafka分布式消息服务经验; Spark分布式数据处理经来自BOSS直聘验; 具备R或Python数据建模经验者优先考虑;
职位详情
- 北京
- 3-5年
- 本科
- 要求数据开发经验
- 数据平台开发经验
- 数据仓库开发经验
- 大数据引擎开发经验
- Spark
- Hive
- Flink
- Spark原理/源码
- Flink原理/源码
- Hive原理/源码
- Java
- Python
- 非外包类
- BI报表开发经验
- ETL开发经验
- 计算机相关专业
- 大数据平台架构
- Hadoop
- 数据开发
工作职责: 1.参与大数据平台架构的设计、持续优化、为数据的接入、存储、计算、kanzhun分析、建模提供稳健的架构支撑 2.参与数据仓库、数据湖等大数据存储解决方案的设计与实现,优化数据处理流程。 3.开发和优化大数据处理流程,包括数据采集、清洗、存储和分析。 4.负责数据治理、元数据管理、数据质量评价体系的建设。 5.负责大数据平台的监控、告警和故障处理,确保系统的高可用性。 6.和业务团队合作,提供数据支持和技kanzhun术解决方案。 7.研究和引入新的大数据技术和工具,提升平台的技术水平和性能。 8.撰写技术文档,进行代码评审和技术分享,提升团队整体技术水平。 任职要求: 1.计算机科学、软件工程、信息技术等相关专业本科及以上学历。 2.3年以上大数据开发经验,熟悉Hadoop、Spark、Flink等大数据处理框架。 3.熟悉开源的分布式开源数据库/查询引擎(Hbase、Doris、ClickHouse、ES等)的适用场景及性能调优。 4.精通Java/Scala/Python等编程语言,有良好的编码规范和编程习惯。 5.熟悉Hadoop、ZooKeeper、Kudu等大数据生态组件的工作原理及适用场景。 6.具备良好的问题分析和解决能力,能快速定位和解决系统故障。 7.具boss有团队合作精神和良好的沟通能力,能够与不同团队协同工作。 8.对新技术保持敏锐的兴趣和学习能力,积极参与技术社区和开源项目者优先。 加分项:负责或参与0-1的数据平台搭建。
技能解析
- 分布式数据处理
- 问题解决能力
- 优秀的沟通
- 项目实施工
- 海量数据
- 数据建模经验
- 开发模式
- 数据处理经验
- 架构设计
- 项目实施
- 建模经验
- 问题解决
- 机器学习
- 数据建模
- 快速学习能力
- 分布式数据
- 开发工作
- 沟通能力
- 数据仓库
- 开发经验
- 学习能力
- 数据处理
- 解决能力
数据来自CSL职业科学研究室
技能解析
- 开发和优化
- 评价体系
- 数据处理框架
- 性能调优
- 快速定位
- 数据质量
- 元数据管理
- 编程语言
- 具有团队合作
- 软件工程
- 数据开发
- 数据存储
- 数据处理流程
- 信息技术
- 大数据开发
- 合作精神
- 问题分析
- 平台架构
- 编程习惯
- 技术解决方案
- 数据管理
- 团队合作精神
- 团队协同
- 提供数据支持
- 团队合作
- 数据支持
- 数据技术
- 解决方案
- 方案的设计
- 编码规范
- 数据治理
- 写技术文档
- 技术水平
- 高可用性
- 好的沟通
- 平台搭建
- 技术文档
- 数据采集
- 沟通能力
- 数据仓库
- 开发经验
- 学习能力
- 数据处理
- 解决能力
数据来自CSL职业科学研究室
工作时间
公司福利
- 五险一金
- 定期体检
- 年终奖
- 股票期权
- 带薪年假
- 餐补
- 节日福利
- 双休
- 15薪