java php asp.net 安卓 云计算 数据库

首页 > 浪曦公告> 浪曦大数据学院完美呈现开端篇
浪曦大数据学院完美呈现开端篇
[2017/5/8 17:39:50]


 

一、 课程概述

随着互联网技术的快速发展,海量数据现在已经进入全球经济、互联网、科学计算等诸多领域。与此同时人们对海量数据离线分析处理的需求也越来越强烈。对于海量数据的离线分析已为企业与用户创造很多的价值。本课程致力于解决目前基于Hadoop生态的海量数据离线分析的各方面在大数据场景的使用。

二、 课程目标

1) 全方位掌握Hadoop/Hive架构原理以及在生产中如何使用Hadoop/Hive进行业务分析处理;

2) 掌握使用Hadoop和Hive在处理大数据业务分析过程中遇到的各种问题的解决和优化方案,比如数据倾斜、内存泄漏等;

3) 掌握离线批处理通用的系统架构及处理流程,进而达到举一反三的效果,而不是为了学习知识点而学习知识点;

4) 掌握以Hadoop为基础的生态系统其他框架的使用。

5) 独立安装与卸载CDH、独立部署与卸载集群中的各种服务组件、对于集群中出现各种异常信息能够独立思考与解决、能够精准化做好CDH平台的优化与运营;

 

三、 适合人群

1) 打算毕业后从事找大数据工作的零基础的高校学生;

2) 欲转换从事大数据工作的在职人员;

 

四、 浪曦大数据学院开端篇由以下七套课程组成:

第一套:Linux

1) Linux系统版本介绍

2) VMware虚拟机安装

3) CentOS系统安装

4) 常用工具的安装及使用:SecureCRT、FileZilla、NotePad++/UE等

5) 文件管理

6) 用户组管理

7) 软件安装:JDK、MySQL、Eclipse、IDEA等

第二套:Hadoop基础

1) 大数据概述

2) Hadoop产生背景

3) Hadoop与Hadoop生态圈

4) Hadoop2.x三大组件详解

5) Hadoop生态系统版本选型

6) Hadoop源码编译

7) Hadoop伪分布式安装

8) Hadoop在企业中的使用

第三套:分布式文件系统HDFS

1) HDFS架构设计

2) HDFS副本放置策略

3) HDFS读写流程

4) Shell命令操作HDFS

5) Java API操作HDFS

第四套:MapReduce

1) MapReduce2架构设计(与MapReduce1对比)

2) WordCount原理和案例编程详解

第五套:YARN

1) YARN架构设计、常用命令和进程

2) YARN工作流程(mr提交应用程序)

3) YARN资源管理与调度、常见参数配置

4) YARN三种调度器详解

5) MapReduce ON YARN

6) Hadoop 项目实战

第六套:Hive基础

1) Hive概述、架构、环境部署

2) Hive QL详解

3) Join在大数据中的使用详解

4) Hive项目实战

 

第七套:CDH平台实战

1) CM、Cloudera介绍

2) CM安装和卸载

3) 通过CM添加/删除Hadoop、Hive等服务

 

五、 讲师介绍

1) 讲师团队:

a) Jepson

主要从事大数据平台产品的技术工作。

负责设计、构建和优化基于HDFS/HBase的存储平台架构;

负责整体提升Hadoop等集群的高可用性、高性能、高扩展特性;

负责对公司的Apache Hadoop1.2、CDH4及CDH5集群的监控、调优和运维。

此外,精通Java、Shell、Python编程和管理SQL数据库及熟悉NOSQL的经验。

b) Carson

主要负责Spark、Storm、分布式爬虫系统的研发工作,曾就职于中国电信、网易研究院担任大数据高级工程师。

六、 开课情况

1) 课程时长

课程周期为八周,首期课程将实行实时在线讲解+视频录制+在线答疑+群沟通,一线大数据高级项目架构师全程讲解,课堂内外及时分析大数据应用与技术最新动态资讯。

2) 授课方式:在线直播(每周六、日晚20点到22点+ 视频学习

3) 软件使用版本

操作系统

CentOS6.4+

Hadoop生态软件版本

CDH5.7.0

 

七、 为什么选择我们

1) 我们的讲师均来自于一线互联网公司架构师、高级工程师,不同于其他机构的全职老师买本书或者买其他机构的视频来讲给学生听,自己都没实战经验如何才能高质量的课程内容;

2) 以实战驱动教学,课程中的项目均为讲师在公司中的真实项目/产品中抽取而来,全程代码驱动,拒绝纯理论;

3) 将晦涩难懂的理论以通俗易懂的方式,并辅以案例并结合源码分析的方式讲解,让学员能够知其然并知其所以然;

4) 除了大纲内容外,还有很多讲师工作经验分享不便一一列出,会在上课过程中讲解;

5) 定期开展学员线下交流,扩展知识面、扩大人际圈;定期开展在线答疑;定期更新课程内容;

6) 所有课程支持离线下载到本地,不受网络限制;可无限次数反            复学习。

八、课程价位:

全套课程共计7个阶段。浪曦注册会员一阶段、二阶段全部免费,一卡通会员,钻石会员七阶段全部免费,整套课程单独购买价格为599元。

开课时间:2017年5月27日每周二次,周六、日晚8-10点

注:开课前非会员购买整套活动价:199元