Skip to content

data-engineer.md

Latest commit

 

History

History
224 lines (182 loc) · 6.25 KB

data-engineer.md

File metadata and controls

224 lines (182 loc) · 6.25 KB

数据工程师职位描述(JD)

岗位基本信息

  • 岗位名称：数据工程师(Data Engineer)
  • 工作性质：全职
  • 工作地点：北京/上海/深圳/杭州/成都
  • 招聘人数：若干
  • 薪资范围：20K-55K/月(根据经验水平)

岗位职责

数据平台建设

  • 设计和构建企业级数据平台架构
  • 开发和维护ETL数据管道
  • 构建和优化数据仓库及数据湖
  • 实现数据质量管理体系建设
  • 保障数据平台稳定性和性能

数据处理开发

  • 开发批处理和流处理数据作业
  • 设计实时数据处理和分析系统
  • 优化数据存储和查询性能
  • 实现数据安全和权限管控
  • 监控数据流程和异常告警

业务支持协作

  • 与数据科学家协作提供数据支持
  • 为业务部门提供数据接口和服务
  • 参与数据需求分析和技术方案设计
  • 指导业务人员数据使用方法
  • 推动数据驱动的业务决策

任职要求

必备技能

核心技术栈：

  • 精通Python/Java/Scala至少一门编程语言
  • 熟悉大数据处理框架(Hadoop/Spark/Flink)
  • 掌握SQL和至少一种NoSQL数据库
  • 熟悉数据仓库建模理论和实践
  • 掌握Git版本控制和敏捷开发流程

工程能力：

  • 具备良好的系统设计和架构能力
  • 熟悉分布式系统原理和实践
  • 具备性能调优和故障排查能力
  • 了解数据安全和隐私保护要求
  • 具备自动化运维和监控能力

经验要求

  • 学历要求：本科及以上学历，计算机/数学/统计学相关专业
  • 工作经验：
    • 初级岗位：2-4年数据工程相关经验
    • 中级岗位：4-7年数据工程经验
    • 高级岗位：7年以上数据平台建设经验
  • 项目经验：有大型数据平台或数据仓库建设经验

加分技能

  • 云数据平台使用经验(AWS/Azure/GCP)
  • 实时流处理技术(Kafka Streams/Flink)
  • 数据治理和元数据管理经验
  • 容器化和微服务架构经验
  • 开源大数据项目贡献经历

薪酬福利

薪资结构

  • 基本工资：根据经验20K-55K/月
  • 项目奖金：重要项目额外奖励
  • 年终奖：根据个人和团队表现
  • 股票期权：核心员工享有期权激励
  • 技术津贴：专业认证额外补贴

福利待遇

  • 五险一金 + 补充医疗保险
  • 弹性工作时间 + 远程办公支持
  • 年度体检 + 健康管理计划
  • 数据技术培训 + 会议参与资助
  • 团队活动 + 节日福利
  • 学习津贴 + 专业书籍报销

职业发展

技术发展路径

Data Engineer → Senior Data Engineer → Data Architect
           ↓
    Big Data Expert → Chief Data Architect

管理发展路径

Senior Data Engineer → Data Team Lead → Data Platform Manager

学习成长机会

  • 参与PB级数据平台架构设计
  • 接触前沿大数据技术栈
  • 与数据科学团队深度合作
  • 数据行业会议和技术交流
  • 专业技术认证和培训支持

工作环境

技术栈

  • 数据处理：Spark/Flink/Hive/Presto
  • 数据存储：HDFS/S3/HBase/Cassandra
  • 调度工具：Airflow/Oozie/Azkaban
  • 监控告警：Prometheus/Grafana
  • 云平台：EMR/DataProc/CDH

团队文化

  • 数据驱动，重视技术深度
  • 开放协作，鼓励知识分享
  • 注重工程质量和最佳实践
  • 支持技术创新和实验
  • 定期技术分享和code review

应聘方式

简历要求

请在简历中重点说明：

  • 数据工程项目经验和技术栈
  • 大数据平台架构设计能力
  • 解决过的复杂数据问题
  • 数据质量管理和优化经验
  • 个人技术博客或开源贡献

面试流程

  1. 初步沟通(HR电话)：30分钟基本情况了解
  2. 技术笔试(在线编程)：数据处理算法测试
  3. 架构面试(系统设计)：数据平台设计方案
  4. 项目深挖(经验交流)：过往项目详细讨论
  5. HR终面(期望沟通)：薪资和职业发展规划
  6. 发放Offer：通过后1-2周内正式发出

联系方式

发布日期：2026年初
有效期：长期有效
招聘状态：📊 数据团队扩招中

真实JD案例参考

案例1：京东 - 数据工程师(大数据平台)

公司规模：10000+人
薪资范围：25K-45K/月
工作地点：北京

岗位职责：

  • 负责京东大数据平台数据接入和处理
  • 设计和开发数据ETL流程
  • 维护数据仓库和数据集市
  • 优化数据处理性能和质量

任职要求：

  • 计算机相关专业本科及以上学历
  • 3年以上数据工程相关经验
  • 熟练使用Hadoop/Spark生态系统
  • 精通SQL和至少一门编程语言
  • 有电商行业背景优先

技术栈：Hadoop + Spark + Hive + Kafka + Flink

案例2：小米 - 高级数据工程师

公司规模：10000+人
薪资范围：30K-55K/月
工作地点：北京

岗位职责：

  • 负责小米IoT设备数据平台建设
  • 设计实时数据处理架构
  • 参与数据治理体系搭建
  • 指导 junior 数据工程师

任职要求：

  • 本科及以上学历，5年以上数据工作经验
  • 精通数据建模和仓库设计
  • 熟悉流处理技术(Kafka Streams/Flink)
  • 有大规模数据平台建设经验
  • 良好的沟通协调能力

加分项：

  • 有物联网行业经验
  • 熟悉云原生数据平台
  • 有数据安全治理经验

案例3：快手 - 数据工程师(推荐系统)

公司规模：10000+人
薪资范围：28K-50K/月
工作地点：北京

岗位职责：

  • 参与快手推荐系统数据平台开发
  • 负责用户行为数据收集和处理
  • 优化推荐算法数据供给流程
  • 保障数据质量和时效性

任职要求：

  • 统招本科以上学历
  • 2年以上数据开发经验
  • 熟悉Python/Java编程
  • 了解推荐系统业务逻辑
  • 具备良好的学习能力

公司福利：

  • 14薪 + 年终奖
  • 股票期权
  • 弹性工作制
  • 免费三餐下午茶

数据来源声明：本文件信息来源于公开渠道整理，仅供参考，使用者请自行核实关键信息。