Storm入门教程 玩转大数据计算之Storm

Storm入门教程 玩转大数据计算之Storm

大数据分析工程师任职要求:
1.计算机、数学等相关专业,2年以上大数据分析工作经验,博士优先
2.有较强的机器学习算法理论知识,熟悉常用的一些机器学习算法,分类、回归等
3.具备良好的编程基础,至少会Python,R,等一种主流语言
4.熟悉Hadoop大数据框架及Hive、Hbase、storm等相关技术
岗位职责:
1.协助构建以工业物联网为中心的大数据平台。
2.负责对各种工业数据进行数据挖掘,数据分析,建立数据模型,优化生产工艺。
学大数据的掌握以上技能 月薪将达到2万以上

Storm实时开发:
大数据工程师中storm简介与基本知识、拓扑详解与组件详解、Hadoop分布式系统、spout详解与bolt详解、zookeeper详解、storm安装与集群搭建、storm-starter详解、开源数据库HBase、trident详解;

课程目标:【学习本课程就能知道数据分析师要学什么】

1、storm基本概念和组件介绍
2、storm分组策略
3、storm安装
4、Storm 记录级容错原理
5、Storm 配置详解
6、storm基本api介绍
7、Storm Topology的并发度
8、Storm消息机制原理讲解
9、Storm DRPC实战讲解
10、Storm Transaction 原理+实战讲解
11、Storm 实现滑动窗口计数和TopN排序
12、Storm流聚合
13、Storm的新利器Pluggable Scheduler

适合对象:【什么样的人适合学习本课程】

大数据研究方向人员

学习条件:【学习本课程需要具备什么样的基础知识和条件】
有一定java基础和linux基础,掌握分布式的基本概念

课程目录:

1.Storm基础知识
storm基础知识讲解,包括实时计算需要解决一些什么问题,怎么实现一个实时计算系统,storm的基本概念,storm应用场景,storm的分组机制。

2.storm集群安装-1
详细讲述storm集群的安装,手把手教授安装流程并排除问题.

3.Storm集群安装-2

4.Storm-starter打包运行测试Storm集群
详细讲解storm-starter打包部署运行的全过程,同时进行storm集群验证。

5.Storm 配置文件配置项讲解
详细讲解storm配置文件对应的参数,以及用法。

6.Maven 环境快速搭建教程
讲述maven环境的搭建过程,以及常用命令。

7.storm基本api介绍

8.Storm Topology的并发度

9.Storm消息机制原理讲解

10.Storm DRPC实战讲解

Storm大数据教程下载地址:
http://www.xuexiluxian.net/storm.html

猜你喜欢

转载自blog.csdn.net/fengliaoai/article/details/89465457