优就业是中公教育IT培训品牌，致力于培养面向互联网领域的人才，以学员就业为目的，就业为宗旨，是一家集互联网营销师、UI/UE交互设计师、Web前端工程师、Java工程师、Python工程师、Unity开发工程师、大数据工程师、Linux云计算工程师、PHP工程师等课程为一体的IT培训机构。为培养符合时代需求的IT人才，中公教育优就业以高瞻的视野，经多年布局，打造人才培训服务体系。以企业需求为导向，以行业未来为驱动，向企业和社会不断输送IT人才。

优就业大数据培训课程课程介绍

基础阶段：

这一阶段包括：关系型数据库原理、LINUX操作系统原理及应用。在掌握了这些基础知识后，北大青鸟还会安排这些基础课程的进阶课程，即：数据结构与算法、MYSQL数据库应用及开发、SHELL脚本编程。在掌握了这些内容之后，大数据基础学习阶段才算是完成了。

第二阶段：

大数据理论及核心技术。第二阶段也被分为了基础和进阶两部分，先理解基础知识，再进一步对知识内容做深入的了解和实践。基础部分包括：布式存储技术原理与应用、分布式计算技术、HADOOP集群搭建、运维；进阶内容包括：HDFS高可靠、ZOOKEEPER、CDH、Shuffle、HADOOP源码分析、HIVE、HBASE、Mongodb、HADOOP项目实战。 完成了这部分内容的学习，学员们就已经掌握了大数据专业大部分的知识，并具有了一定的项目经验。但为了学员们在大数据专业有更好的发展，所学知识能更广泛地应用到大数据相关的各个岗位，有个更长远的发展前景，北大青鸟还安排了的课程学习。

第三阶段：

数据分析挖掘及海量数据处理技术。基础部分有：PYTHON语言、机器学习算法、FLUME+KAFKA；进阶部分有：机器学习算法库应用、实时分析计算框架、SPARK技术、PYTHON语言应用、分布式爬虫与反爬虫技术、实时分析项目实战、机器学习算法项目实战。

随着大数据发展的逐渐落地，其技术也被广泛的应用于各个领域，大数据工程师也因此成为了目前较具潜力的热门岗位。说到大数据工程师就不得不提及ETL数据工程师，相信大家对这个职位或多或少都有所了解。但是对于ETL数据工程师的具体工作内容、能力要求和职业发展规划大家又了解多少呢？本文就来和大家好好谈谈ETL数据工程师的这一岗位，希望给想从事这个行业的小伙伴一点方向的指引。

ETL数据工程师的工作内容：

ETL数据工程师主要负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，较后加载到数据仓库或数据集市中，成为联机分析处理、数据挖掘的基础。简单来讲，ETL数据工程师的工作内容主要围绕着运营数据和达到公司的数据目的这两大内容。

我们要知道，ETL是数据仓库中的非常重要的一环。它是承前启后的必要的一步。相对于关系数据库，数据仓库技术没有严格的数学理论基础，它更面向实际工程应用。所以从工程应用的角度来考虑，按着物理数据模型的要求加载数据并对数据进行一些系列处理，处理过程与经验直接相关，同时这部分的工作直接关系数据仓库中数据的质量，从而影响到联机分析处理和数据挖掘的结果的质量。因此，可以说ETL数据工程师的工作内容至关重要。

ETL数据工程师的能力要求：

作为一名合格的ETL数据工程师，需要经常跟业务系统的人打交道，所以要对业务系统比较熟悉。比如它们存在各种接口，不管是API级别还是数据库接口，这都需要ETL工程师非常了解。除此之外，还需要跟许多数据分析师、数据科学家打交道。比如将准备好的数据，交给下游的数据分析师和数据科学家。另外，该岗位对于专业技术的要求也比较高，一般来讲，需要熟悉Hadoop生态，有Hadoop streamng开发经验；熟悉Linux，熟练掌握shell、Python等脚本语言等等。较后，ETL数据工程师还要有很强的分析问题和解决问题的能力，以及强烈的责任心。

ETL数据工程师职业发展：

在大数据时代，围绕数据的相关岗位都是长期增值的岗位。目前数据方向算是风口，但想要有发展，就得尽量跟业务靠近。ETL工程师是数据行业里需求量大，并且门槛相对较低的职位，作为想要进入数据领域的新人是个不错的选择。但是要知道，数据工程师绝不仅仅是数据的搬运工。在未来越来越多的公司会将数据作为主要的战略方向，如果ETL数据工程师能把自己紧密的与数据战略结合起来，并且有意识的从更高层面来审视数据领域的问题，建立自己的方法论和技术框架，后期的职业发展之路将不可限量。

综上所述，只要技术过硬，又积累了一定的工作实践经验，ETL数据工程师的职业发展是肯定没问题的。在大数据技术越来越受重视的当下，如果能够在ETL数据工程师的岗位上用心学习和修炼，相信一定能拓宽职业发展的道路，走上更加广阔的舞台。