走进大数据之storm流式计算基础_学习笔记

首页免费课走进大数据之storm流式计算基础笔记

走进大数据之storm流式计算基础

最热最新

慕丝8133230 02:31

安装maven，将maven加入bin目录中，测试是否可以使用

查看全部

0 采集收起来源：Storm的搭建
2016-03-13
慕丝8133230 03:14

storm ui时storm提供页面查看和管理的

查看全部

0 采集收起来源：Storm组件
2016-03-13
慕丝8133230 02:51

完成一个分布式的rpc服务,只有用户使用rpc时用，一般情况下并不需要

查看全部

0 采集收起来源：Storm组件
2016-03-13
慕丝8133230 02:41

加了个中间层进行管理

查看全部

0 采集收起来源：Storm组件
2016-03-13
慕丝8133230 02:17

真正进行数据计算和传输的都是有里面的worder进行

查看全部

0 采集收起来源：Storm组件
2016-03-13
慕丝8133230 02:11

听nimbus的话，但他也不进行数据的计算和传输

查看全部

0 采集收起来源：Storm组件
2016-03-13
慕丝8133230 01:36

单点上，无状态，重启后就可以运行，只是一些管理的工作，如果当掉，其他的数据还会正常运行

查看全部

0 采集收起来源：Storm组件
2016-03-12
coolswater

strom 开源的分布式的流式系统

查看全部

0 采集收起来源：分布式起源
2016-03-10
qq_CYC_0

apache strorm 开源分布式流式系统

查看全部

0 采集收起来源：分布式起源
2016-03-07
自由的web 04:10

批量计算和流式计算对比

查看全部

0 采集收起来源：Storm起源_2
2016-03-03
自由的web 03:52

Google分布式计算的三个基础

查看全部

0 采集收起来源：分布式起源
2016-03-03
yuyuyu

一台机器三年出一次故障 1000台机器每天出故障的概率 1 - 0.999^1000 = 63.2% 故障处理 Nimbus故障，换台机器重启即可 Supervisor挂掉，迁移其上Worker即可 worker挂掉数据丢失处理超时 Spout数据保障不丢：Acker机制保证数据如果未成功处理，可以及时发现，并通知Spout重发不重：使用msgID去重 NextTuple中, emit时，指定msgID Bolt容错 emit时，锚定输入Tuple ack输入tuple Trident API 为用户屏蔽掉一些状态与计算一致的细节使用户更方便的书写可容错的作业

查看全部

0 采集收起来源：数据可靠性
2016-02-18
zhousuhang 04:16

批量计算与流式计算的区别

查看全部

0 采集收起来源：Storm起源_2
2016-01-20
Crimson 04:37

spout负责读取数据，下游bolt负责读取数据并shuffle，再由下面的bolt写到data-sink，总体和mr比较像。但因为是流式计算，不会像mr一样完成之后再输出结果，它会来一个数据就输出一次。

查看全部

0 采集收起来源：StormAPI基本概念
2016-01-18
Crimson 01:00

topology任务结构 -spout数据源节点 -bolt普通计算节点 -stream数据流 -tuple记录

查看全部

0 采集收起来源：StormAPI基本概念
2016-01-18

首页上一页 16 17 18 19 20 下一页尾页

0/150

提交

取消

开始学习

课程须知: 本课程是Storm初级课程，对用户要求不多，但： 1.讲解API时使用的是Java API，需要用户掌握Java基本语法。 2.最好用过hadoop，或者其它分布式批处理计算系统，会更容易理解一些东西。

老师告诉你能学到什么？: 1、流式计算起源 2、Storm组成与基本原理 3、Storm基本API用法 4、Storm集群搭建

微信扫码，参与3人拼团

热搜

最近搜索清空

走进大数据之storm流式计算基础