-
Zookeeper 文件系统
查看全部 -
Storm 主从架构
查看全部 -
Storm 的诞生
查看全部 -
文件系统
每个目录都是一个znode节点
zonde节点可直接存储数据
类型:持久化、持久化顺序、临时、临时顺序
查看全部 -
zookeeper
查看全部 -
storm组件
查看全部 -
storm原理
查看全部 -
架构类型:
主从架构:简单,高效,但主节点存在单点问题(HDFS,YARN,storm,hbase,spark,flumk)
对称架构:复杂,效率较低,但无单点问题,更加可靠(zookeeper,kafka)
查看全部 -
特性:
使用场景广泛:实时处理和更新,持续并行化查询,满足大量场景
可伸缩性高:扩展计算任务,只需要加机器并提高并行度(使用zookeeper框架)
保证数据无丢失:保证每条消息都会被处理
异常健壮:集群易管理,可轮流重启节点
容错性好:消息处理过程出现异常,会进行重试(分布式计算框架都有的特性)
语言无关性:topology可以用多种语言编写(c,java,python)
查看全部 -
cat /etc/sysconfig/network
cat /etc/hosts
查看全部 -
连接本地服务器:zkCli
查看命令:ls或ll
查看根目录:ls /
查看磁盘配额:ls /zookeeper
查看数据:get /zookeeper/quota
创建持久化目录:create /test abc
查看: ls /test
获取数据:get /test
修改数据:set /test 123
删除目录:rmr /test
查看全部 -
核心功能2:通知机制<br/>查看全部
-
核心功能1:文件系统(Linux就是一个文件系统)
查看全部 -
分布式协调服务框架
查看全部 -
电饭煲查看全部
-
使用zkCli.sh连接不同的zookeeper节点 --server host:port --connect host:port 可以使用 ls 查看各个命令的具体用法查看全部
-
查看 zookeeper状态 zkServer.sh status follower 从节点 leader 主节点查看全部
-
在zookeeper目录中,建立data文件夹, 在data文件夹下建立 myid文件 在不同的机器上,分别该myid中的信息为 1 2 3查看全部
-
在zoo.cfg文件末尾添加server.<id>信息 server.<id>=hostname:2888:3888 2888: zookeeper 数据同步端口 3888: zookeeper节点需要选主,从节点需要向主节点同步数据 server.1=hadoop001:2888:3888 server.2=hadoop003:2888:3888 server.3=hadoop005:2888:3888 用奇数机器 1 3 5查看全部
举报