## 什么是Hadoop？
### 简介
Hadoop是Apache基金会下的分布式计算框架，包含HDFS存储系统、MapReduce计算引擎、YARN资源调度器三大核心组件。通过HDFS实现PB级数据存储，利用MapReduce进行并行计算，配合YARN进行集群资源管理，支持Hive、HBase、Spark等生态工具构建大数据应用体系。
### 职业方向
应届生→初级大数据工程师→中级大数据工程师→高级大数据工程师→大数据架构师/技术专家（或转向数据科学家、云计算架构师等方向）
### 核心技能
HDFS分布式存储配置,MapReduce编程模型,YARN资源调度优化,Hive Pig数据仓库工具,HBase分布式数据库,Spark流式计算框架,Kafka消息队列,ZooKeeper分布式协调服务,Java Python编程,SQL查询优化
### 相关技能
[Spark](https://s.niuqizp.com/s_campus_Spark/?ur=article)， [Flink](https://s.niuqizp.com/s_campus_Flink/?ur=article)， [Kafka](https://s.niuqizp.com/s_campus_Kafka/?ur=article)， [Hive](https://s.niuqizp.com/s_campus_Hive/?ur=article)， [HBase](https://s.niuqizp.com/s_campus_HBase/?ur=article)， [MapReduce](https://s.niuqizp.com/s_campus_MapReduce/?ur=article)， [HDFS](https://s.niuqizp.com/s_campus_HDFS/?ur=article)， [YARN](https://s.niuqizp.com/s_campus_YARN/?ur=article)， [ZooKeeper](https://s.niuqizp.com/s_campus_ZooKeeper/?ur=article)， [Flume](https://s.niuqizp.com/s_campus_Flume/?ur=article)， [Sqoop](https://s.niuqizp.com/s_campus_Sqoop/?ur=article)
### 相关专业
[计算机科学与技术](https://s.niuqizp.com/s_campus_%E8%AE%A1%E7%AE%97%E6%9C%BA%E7%A7%91%E5%AD%A6%E4%B8%8E%E6%8A%80%E6%9C%AF/?ur=article)， [软件工程](https://s.niuqizp.com/s_campus_%E8%BD%AF%E4%BB%B6%E5%B7%A5%E7%A8%8B/?ur=article)， [信息工程](https://s.niuqizp.com/s_campus_%E4%BF%A1%E6%81%AF%E5%B7%A5%E7%A8%8B/?ur=article)， [电子工程](https://s.niuqizp.com/s_campus_%E7%94%B5%E5%AD%90%E5%B7%A5%E7%A8%8B/?ur=article)， [统计学](https://s.niuqizp.com/s_campus_%E7%BB%9F%E8%AE%A1%E5%AD%A6/?ur=article)， [数学与应用数学](https://s.niuqizp.com/s_campus_%E6%95%B0%E5%AD%A6%E4%B8%8E%E5%BA%94%E7%94%A8%E6%95%B0%E5%AD%A6/?ur=article)， [数据科学与大数据技术](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E7%A7%91%E5%AD%A6%E4%B8%8E%E5%A4%A7%E6%95%B0%E6%8D%AE%E6%8A%80%E6%9C%AF/?ur=article)
### 相关证书
[Cloudera CCA175认证](https://s.niuqizp.com/s_campus_Cloudera%20CCA175%E8%AE%A4%E8%AF%81/?ur=article)， [Hortonworks HDP认证](https://s.niuqizp.com/s_campus_Hortonworks%20HDP%E8%AE%A4%E8%AF%81/?ur=article)， [AWS Certified Big Data - Specialty](https://s.niuqizp.com/s_campus_AWS%20Certified%20Big%20Data%20-%20Specialty/?ur=article)， [Google Professional Data Engineer](https://s.niuqizp.com/s_campus_Google%20Professional%20Data%20Engineer/?ur=article)， [PMP项目管理认证](https://s.niuqizp.com/s_campus_PMP%E9%A1%B9%E7%9B%AE%E7%AE%A1%E7%90%86%E8%AE%A4%E8%AF%81/?ur=article)
### 相关岗位
[大数据开发工程师](https://s.niuqizp.com/s_campus_%E5%A4%A7%E6%95%B0%E6%8D%AE%E5%BC%80%E5%8F%91%E5%B7%A5%E7%A8%8B%E5%B8%88/?ur=article)， [数据分析师](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E5%88%86%E6%9E%90%E5%B8%88/?ur=article)， [数据科学家](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E7%A7%91%E5%AD%A6%E5%AE%B6/?ur=article)， [云计算工程师](https://s.niuqizp.com/s_campus_%E4%BA%91%E8%AE%A1%E7%AE%97%E5%B7%A5%E7%A8%8B%E5%B8%88/?ur=article)， [ETL开发工程师](https://s.niuqizp.com/s_campus_ETL%E5%BC%80%E5%8F%91%E5%B7%A5%E7%A8%8B%E5%B8%88/?ur=article)， [数据仓库工程师](https://s.niuqizp.com/s_campus_%E6%95%B0%E6%8D%AE%E4%BB%93%E5%BA%93%E5%B7%A5%E7%A8%8B%E5%B8%88/?ur=article)， [机器学习工程师](https://s.niuqizp.com/s_campus_%E6%9C%BA%E5%99%A8%E5%AD%A6%E4%B9%A0%E5%B7%A5%E7%A8%8B%E5%B8%88/?ur=article)
### 求职建议
应届生需重点掌握Hadoop生态系统工具链，建议参与Kaggle等数据竞赛积累项目经验。优先考取Cloudera或AWS认证，熟悉Hive SQL优化与MapReduce编程实践。关注实时计算框架Spark/Flink发展趋势，同时提升Python自动化脚本编写能力。在求职时突出数据处理Pipeline搭建、ETL流程开发等项目成果。
