## 数据湖架构 岗位技能要求
### 简介
岗位需掌握数据湖技术栈(Hadoop/Spark/Alluxio)、数据治理规范、分布式存储原理及数据安全策略，要求具备TB/PB级数据架构设计经验，熟悉AWS S3/HDFS/ADLS等存储系统，常需配合数据工程师和数据科学家完成端到端数据流水线建设。
### 职业方向
初级架构师→高级数据湖架构师→大数据平台技术负责人→首席数据架构师（3-5年发展路径）
### 核心技能
Hadoop生态体系,Spark流计算,数据治理框架,ETL开发,Parquet ORC文件格式,数据分区策略,数据安全加密,云原生架构设计
### 相关技能
[数据仓库建模](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E4%BB%93%E5%BA%93%E5%BB%BA%E6%A8%A1/?ur=article)， [湖仓一体架构](https://s.niuqizp.com/s_campus_%E6%B9%96%E4%BB%93%E4%B8%80%E4%BD%93%E6%9E%B6%E6%9E%84/?ur=article)， [实时计算框架](https://s.niuqizp.com/s_campus_%E5%AE%9E%E6%97%B6%E8%AE%A1%E7%AE%97%E6%A1%86%E6%9E%B6/?ur=article)， [数据质量监控](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E8%B4%A8%E9%87%8F%E7%9B%91%E6%8E%A7/?ur=article)， [元数据管理](https://s.niuqizp.com/s_campus_%E5%85%83%E6%95%B0%E6%8D%AE%E7%AE%A1%E7%90%86/?ur=article)， [数据合规性审计](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E5%90%88%E8%A7%84%E6%80%A7%E5%AE%A1%E8%AE%A1/?ur=article)
### 相关专业
[计算机科学与技术](https://s.niuqizp.com/s_campus_%E8%AE%A1%E7%AE%97%E6%9C%BA%E7%A7%91%E5%AD%A6%E4%B8%8E%E6%8A%80%E6%9C%AF/?ur=article)， [大数据技术与应用](https://s.niuqizp.com/s_campus_%E5%A4%A7%E6%95%B0%E6%8D%AE%E6%8A%80%E6%9C%AF%E4%B8%8E%E5%BA%94%E7%94%A8/?ur=article)， [软件工程](https://s.niuqizp.com/s_campus_%E8%BD%AF%E4%BB%B6%E5%B7%A5%E7%A8%8B/?ur=article)， [人工智能](https://s.niuqizp.com/s_campus_%E4%BA%BA%E5%B7%A5%E6%99%BA%E8%83%BD/?ur=article)， [信息工程](https://s.niuqizp.com/s_campus_%E4%BF%A1%E6%81%AF%E5%B7%A5%E7%A8%8B/?ur=article)
### 相关证书
[AWS Certified Big Data - Specialty](https://s.niuqizp.com/s_campus_AWS%20Certified%20Big%20Data%20-%20Specialty/?ur=article)， [Azure Data Engineer Associate](https://s.niuqizp.com/s_campus_Azure%20Data%20Engineer%20Associate/?ur=article)， [Cloudera CCDP](https://s.niuqizp.com/s_campus_Cloudera%20CCDP/?ur=article)， [Apache Spark认证专家](https://s.niuqizp.com/s_campus_Apache%20Spark%E8%AE%A4%E8%AF%81%E4%B8%93%E5%AE%B6/?ur=article)
### 相关岗位
[大数据开发工程师](https://s.niuqizp.com/s_campus_%E5%A4%A7%E6%95%B0%E6%8D%AE%E5%BC%80%E5%8F%91%E5%B7%A5%E7%A8%8B%E5%B8%88/?ur=article)， [数据仓库架构师](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E4%BB%93%E5%BA%93%E6%9E%B6%E6%9E%84%E5%B8%88/?ur=article)， [云平台架构师](https://s.niuqizp.com/s_campus_%E4%BA%91%E5%B9%B3%E5%8F%B0%E6%9E%B6%E6%9E%84%E5%B8%88/?ur=article)， [数据治理专家](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E6%B2%BB%E7%90%86%E4%B8%93%E5%AE%B6/?ur=article)， [企业级数据架构师](https://s.niuqizp.com/s_campus_%E4%BC%81%E4%B8%9A%E7%BA%A7%E6%95%B0%E6%8D%AE%E6%9E%B6%E6%9E%84%E5%B8%88/?ur=article)
### 求职建议
应届生建议：1）参与过Kaggle竞赛或企业级数据项目 2）掌握至少1个云平台（AWS/GCP/Azure）数据湖实践 3）熟悉Delta Lake/Hudi等新数据湖框架 4）准备典型架构设计方案答辩 5）考取基础级云原生认证提升竞争力
