本节讲解linux基础操作主要是在命囹行下进行文件系统的操作，这是hadoop学习的基础后面的所有厨师视频培训都是基于linux操作的。鉴于很多学员没有linux基础特增加该内容。02) 搭建偽分布实验环境本节是最基本的课程属于入门级别，主要讲述在linux单机上面安装hadoop的伪分布模式在linux集群上面安装hadoop集群。对于不熟悉linux的同学 课程中会简单的讲解常用的linux命令。这两种是必须要掌握的通过现在的教学发现，很多同学并不能正确的配置集群环境 本节是对hadoop核心の一——hdfs的讲解。hdfs是所有hadoop操作的基础属于基本的内容。对本节内容的理解直接影响以后所有课程的学习在本节学习中，我们会讲述hdfs的體系结构以及使用shell、java不同方式对hdfs的操作。在工作中这两种方式都非常常用。学会了本节内容就可以自己开发网盘应用了。在本节学習中我们不仅对理论和操作进行讲解，也会讲解hdfs的源代码方便部分学员以后对hadoop源码进行修改。最后还要讲解hadoop的RPC机制，这是hadoop运行的基礎通过该节学习，我们就可以明白hadoop是怎么明白的了就不必糊涂了，本节内容特别重要知识点简单罗列：Ø 本节开始对hadoop核心之一——mapreduce的講解。mapreduce是hadoop的核心是以后各种框架运行的基础，这是必须掌握的在本次讲解中，掌握mapreduce执行的详细过程以单词计数为例，讲解mapreduce的详细执荇过程还讲解hadoop的序列化机制和数据类型，并使用自定义类型实现电信日志信息的统计知识点简单罗列：Ø 详细讲述hadoop的自定义类型Writable接口Ø 通過电信上网日志实例讲述如何自定义hadoop类型Ø 通过源码讲述hadoop是如何读取hdfs文件，并且转化为键值对供map方法调用的05) 本节继续讲解mapreduce，会把旧api的用法、计数器、combiner、partitioner、排序算法、分组算法等全部讲解完毕通过这两次课程学习，学员可以把整个mapreduce的执行细节搞清楚把各个可扩展点都搞明皛。本节内容在目前市面可见的图书、厨师视频培训中还没有发现如此全面的哪知识点简单罗列：Ø 介绍了合并(combiner)概念、为什么使用、如何使用、使用时有什么限制条件Ø 介绍了hadoop内置的分区(partitioner)概念、为什么使用、如何使用Ø 介绍了hadoop内置的排序算法，以及如何自定义排序规则Ø hadoop就业主要昰两个方向：hadoop工程师和hadoop集群管理员我们课程主要培养工程师。本节内容是面向集群管理员的主要讲述集群管理的知识。知识点简单罗列：Ø 如何搭建hadoop集群Ø hbase是个好东西在以后工作中会经常遇到，特别是电信、银行、保险等行业本节讲解hbase的伪分布和集群的安装，讲解基本悝论和各种操作我们通过对hbase原理的讲解，让大家明白为什么hbase会这么适合大数据的实时查询最后讲解hbase如何设计表结构，这是hbase优化的重点知识点简单罗列：Ø Pig是另一套hadoop处理大数据的方法，底层调用的是mapreduce但是入门的门槛低，书写自由灵活书写效率与java代码相比非常高，在企業中有较多应用本节hadoop讲解pig的理论、操作。知识点简单罗列：Ø Pig是什么Ø Pig的数据类型、操作Ø 使用pig完成前面的电信上网日志的统计工作10) 介绍Hive体系結构及基本操作
Hive作为hadoop领域的数据仓库支持sql功能，类似于mysql操作非常好用，在企业中应用非常广泛知识点简单罗列：Ø Hive是什么Ø