Linux操作系统软件包不仅包括完整的Linux操作系统，而且还包括了文本编辑器、高级语言编译器等应用软件。它还包括带有多个窗口管理器的X-Windows图形用户界面，如同我们使用Windows NT一样，允许我们使用窗口、图标和菜单对系统进行操作。
(5).Hadoop是一种分布式数据和计算的框架。它很擅储大量的半结构化的数据集。数据可以随机存放，所以一个磁盘的失败并不会带来数据丢失。Hadoop也非常擅长分布式计算--快速地跨多台机器处理大型数据集合。
是Hadoop体系中数据存储管理的基础。它是一个高度容错的系统，能检测和应对硬件故障，用于在低成本的通用硬件上运行。HDFS简化了文件的一致性模型，通过流式数据访问，提供高吞吐量应用程序数据访问功能，适合带有大型数据集的应用程序。
Cloudera开源的日志收集系统，具有分布式、高可靠、高容错、易于定制和扩展的特点。Flume数据流提供对日志数据进行简单处理的能力，如过滤、格式转换等。Flume还具有能够将日志写往各种数据目标(可定制)的能力。总的来说，Flume是一个可扩展、适合复杂的海量日志收集系统。
主要学习hadoop中的四大框架:hdfs、mapreduce、hive、hbase。这四大框架是hadoop最最核心的，学习难度最大的，也是应用最广泛的。除此之 外，还有其他的框架，目前的教学大纲中暂不深入，会根据社会需要在课程中考虑是否增加其他框架的教学。总之，我们的课程是根据社会需要来的，都经过了精挑细选，大纲的每个知识点都是多位老师深思熟虑、反复讨论才确定的，绝对不会设置华而不实的课程学习。
hadoop需要具备javaSE的基础知识，对于javaEE(jsp ， servlet/三大框架)没有要求。需要熟练使用linux系统(第一天课程有复习linux操作的时间)。大体上，有这些预备知识就够了。严格的说，只需要具备javaSE知识就足够了。我掌握的javaSE不够好，行吗?没问题!hadoop中对java的运用常浅的，只要跟着老师课堂思走就行了。非常适合于在校生、刚毕业的、和已有IT工作经验的朋友们，学习hadoop比学习javaEE的基础要求低，学习难度低。
严格的讲，hadoop与javaEE是两个不同的发展思，hadoop倾向于底层数据处理部分，javaEE负责系统开发，二者前后相继，没有交叉，相辅相成。一部分javaEE，入职面试时是javaEE知识，入职后立刻要求研究hadoop。大家可以想想社会的需求是多么迫切，hadoop人才是多么匮乏!
一般海量数据的处理都是自定义存储结构，实现自己的算法，这是业界的通用处理思。这对我们普通程序员而言要求还是很高的。hadoop的优点就是进行了封装，我们写的算法都是偏向于业务的，不需要创造算法。因此大可放心。但是，大家以后工作的公司可能不使用hadoop去处理大数据，这时候对算法和数据结构的要求就高了。
Hadoop:39个课时，以实战角度来实践 Hadoop,Yarn的高性能大数据工具的开发技巧。了解并掌握大不是计算的核心，如何利用分布式算 法把运行在单台机器上的程序扩展到多台机器上并且运行。学完后掌握分布式开发流程。
达到hadoop大数据管理员和hadoop开发工程师。hadoop大数据管理员类似于数据库的dba，负责hadoop集群的运行工作。hadoop开发工程师是负责编写hadoop程序的，实现算法的。相当于工作三年以上的水平。
Storm 用于流式计算范式。应用范围很广，对于增量信息的实时处理，都应该能应用到，比如:1) 对用户上传图片/文本实时打标签(用预先训练的模型)2) 在线学习(on-line learning)，实时对模型进行增量学习。比如广告点击率、推荐预测率之类的模型。
推荐：
网友评论 ()条 查看