A股上市公司传智教育(股票代码 003032)旗下技术交流社区北京昌平校区

 找回密码
 加入黑马

QQ登录

只需一步,快速开始

黑马程序员2013年课程全新升级!!JavaEE+物联云计算正式引入重量级课程——Hadoop

  学web的你知道Hadoop吗?不知道?那你就OUT了。Hadoop是一个能够对大量数据进行分布式处理的软件框架,是目前最火的云计算技术。掌握Hadoop的开发人员,不需要太精通,只是掌握,就业薪水就达8000以上。可以说前景相当广阔,薪水相当诱人。有图为证:(以下是招聘网站的截图)


这还只是入门级的待遇,那如果熟练以后呢:


  月薪30000以上,不要怀疑你的眼睛,这是真的。自己可以去各大招聘网搜索hadoop给的薪水!现在百度、IBM、Sohu、腾迅等各大公司都在研究应用Hadoop技术。

  Hadoop不但就业薪水起点高,而且现在市场上奇缺掌握Hadoop的开发人员。随着云计算在中国的兴起,相信2014——2016年中国对hadoop的需求将达到井喷的程度。黑马程序员的教学宗旨就是给学员传授最先进、最实用的技术。并在国内第一个开设hadoop课程,让学员真正掌握Hadoop应用。引领技术的潮流,让别人永远跟在我们屁股后面。


+++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++

Hadoop课程体系介绍:
一、HADOOP背景,定义,开发准备
         1、课程简介。大数据时代的特点。HADOOP能做什么?HADOOP与云计算,HADOOP生态圈。
         2、HADOOP与其他系统的比较。举例:分布式程序与HADOOP的区别。HBASE与传统数据库的区别。
         3、介绍“教学例程”的背景,软件架构,实现方式。
         4、本机开发环境做准备。讲解虚拟机软件的安装,虚拟机CENTOS安装。

二、HADOOP本机模式开发MAPREDUCE
         1、伪分布模式的单机环境的搭建
         2、MAPREDUCE的设计思想以及框架结构说明与讲解HADOOP自带例子wordcount
         3、做简单的KPI计算(统计手机用户的总包数,总流量,上网成功率)的MAPREDUCE程序与WEB CONSOLE

三、HADOOP核心之HDFS
         1、分布式文件系统(DFS)与HBASE的基本概念
         2、HADOOP文件管理命令行操作
         3、JAVA接口操作

四、HADOOP核心之MAPREDUCE(续)
         1、HADOOP的Writable接口,序列化(Text,IntWritable),
         2、HADOOP的Combiner
         3、HADOOP的输入,输出类型与格式
         4、HADOOP的计数器

五、HADOOP集群
         1、集群概念。
         2、HADOOP集群的搭建(1个NameNode,1个SecondaryNameNode,3个DataNode,全部Linux环境)
         3、集群的管理,监控,优化
         4、剖析MapReduce作业的在集群执行过程;HADOOP的Shuffle;集群下运行MAPREDUCE程序

六、NOSQL数据库与HBASE
         1、NOSQL数据库及其主流产品介绍
         2、HBASE基础知识
         3、HBASE的伪分布模式在本机的搭建

七、HBASE的集群
         1、集群的搭建(1个HMaster,3个RegionServer,全部Linux环境)
         2、集群的管理与监控

八、HBASE的访问
         1、HBASE表的设计
         2、HBase Shell以及演示
         3、HBASE的批量导入(例:详单入库)
         4、Java客户端以及代码演示(例:详单查询)

九、数据仓库与HIVE
         1、数据仓库基础知识
         2、Hive的定义及其体系结构简介以及与数据库的比较
         3、HIVE安装与运行与数据仓库表的设计
         4、HiveQL数据类型,表以及表的操作
         5、HiveQL查询数据(排序和聚合,连接,子查询,视图等)


十、教学实例
         对网站日志数据分析的程序。主要功能与涉及到技术点有:
         1、MAPREDUCE(KPI建模,KPI计算等)
         2、HBASE(详单入库与查询)
         3、HIVE(数据仓库与多维分析)

教学中使用的软件:
软件
版本
描述
centos
6.0
本地伪分布模式操作系统
RHEL
6.2
集群各节点操作系统
JDK
7.0.17

HADOOP
hadoop-1.0.4.tar.gz

HBASE
hbase-0.94.2-security.tar.gz
No sql 数据库
HIVE
hive-0.10.0.tar.gz
基于HADOOP数据仓库
SSHSecureShellClient
3.2.9
SSH客户端软件

教学集群:
机器IP
机器名
开放服务
机器配置
用途
备注

hadoop0
SSH
gcc
cpu>2个核 2.4GMZ
内存:>4G
本地硬盘:>200G
Namenode
secondaryNamenode
RHEL6.2

hadoop1
SSH
gcc
cpu>2个核 2.4GMZ
内存:>4G
本地硬盘:>200G
datanode
RHEL6.2

hadoop2
SSH
gcc
cpu>2个核 2.4GMZ
内存:>4G
本地硬盘:>200G
datanode
RHEL6.2

hadoop3
SSH
gcc
cpu>2个核 2.4GMZ
内存:>4G
本地硬盘:>200G
datanode
RHEL6.2

+++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++

  



75 个回复

倒序浏览
云计算,我会来的!
回复 使用道具 举报
陈山洪 来自手机 高级黑马 2013-3-22 14:30:47
藤椅
我一定会来的,留我一个
回复 使用道具 举报
越来越给力了,黑马,我要来了
回复 使用道具 举报
云计算 好强大啊。。。。
回复 使用道具 举报
好的,我们会加油的!~!
回复 使用道具 举报
郝勇 中级黑马 2013-3-22 17:19:40
7#
不是本科的  怎么弄啊  上面要求貌似都是本科!!!
回复 使用道具 举报
云计算是以后互联网发展重大方向的啊  黑马真的很给力  
回复 使用道具 举报
支持~  果断支持~~  大力支持~~~
回复 使用道具 举报
还有首页,支持了
回复 使用道具 举报
5月我就杀来黑马了{:soso_e129:}
回复 使用道具 举报
good,加油,努力中
回复 使用道具 举报
郝勇 发表于 2013-3-22 17:19
不是本科的  怎么弄啊  上面要求貌似都是本科!!!

那你就把技术搞的牛一点了
回复 使用道具 举报
给力啊 !!!!!!!!!
回复 使用道具 举报
加油!我要参加{:soso_e176:}
回复 使用道具 举报
这个必须要顶
回复 使用道具 举报
苦逼的生活还有3个月,吼吼吼,搞起~~~~
回复 使用道具 举报
支持,这也太给力了。。。
回复 使用道具 举报
全力支持!黑马,越来越给力了!向黑马进军!
回复 使用道具 举报
顶了 气场强大
回复 使用道具 举报
1234下一页
您需要登录后才可以回帖 登录 | 加入黑马