如何理解Storm本地目录结构

发布时间:2021-11-25 17:03:38 作者:柒染
来源:亿速云 阅读:160

本篇文章给大家分享的是有关如何理解Storm本地目录结构,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

     阅读背景:确保您已经成功的安装了Storm,并且已经找到了storm-local 的本地文件夹

     阅读目的: 究竟在Storm的本地文件夹之有什么? 持有到zookeeper上的信息已被大家所熟知,那么

持有到本地的信息了?

/{storm-local-dir}
  |
  |-/nimbus
  |   |
  |   |-/inbox                     -- 从nimbus客户端上传的jar包
  |   |  |                            会在这个目录里面
  |   |  |
  |   |  |-/stormjar-{uuid}.jar    -- 上传的jar包其中{uuid}表示
  |   |                               生成的一个uuid
  |   |
  |   |-/stormdist
  |      |
  |      |-/{topology-id}
  |         |
  |         |-/stormjar.jar        -- 包含这个topology所有代码
  |         |                         的jar包(从nimbus/inbox里
  |         |                         面挪过来的)
  |         |
  |         |-/stormcode.ser       -- 这个topology对象的序列化
  |         |
  |         |-/stormconf.ser       -- 运行这个topology的配置
  |
  |-/supervisor
  |   |
  |   |-/stormdist
  |   |   |
  |   |   |-/{topology-id}
  |   |      |
  |   |      |-/resources          -- 这里保存的是topology的
  |   |      |                        jar包里面的resources目录
  |   |      |                        下面的所有文件
  |   |      |
  |   |      |-/stormjar.jar       -- 从nimbus机器上下载来的
  |   |      |                        topology的jar包
  |   |      |
  |   |      |-/stormcode.ser      -- 从nimbus机器上下载来的
  |   |      |                        这个topology对象的序列
  |   |      |                        化形式
  |   |      |
  |   |      |-/stormconf.ser      -- 从nimbus机器上下载来的
  |   |                               运行这个topology的配置
  |   |
  |   |-/localstate                -- supervisor的localstate
  |   |
  |   |-/tmp                       -- 临时目录,从Nimbus上下
  |      |                            载的文件会先存在这个目
  |      |                            录里面,然后做一些简单
  |      |                            处理再copy到
  |      |                            stormdist/{topology-id}
  |      |                            里面去
  |      |-/{uuid}
  |         |
  |         |-/stormjar.jar        -- 从Nimbus上面download下
  |                                   来的工作jar包
  |
  |-/workers
      |
      |-/{worker-id}
          |
          |-/pids                  -- 一个worker可能会起多个子
          |   |                       进程所以可能会有多个pid
          |   |
          |   |-/{pid}             -- 运行这个worker的JVM的pid
          |
          |-/heartbeats            -- 这个supervisor机器上的
             |                        worker的心跳信息
             |
             |-/{worker-id}        -- 这里面存的是一个worker
                                      的心跳:主要包括心跳时
                                      间和worker的id

     

以上就是如何理解Storm本地目录结构,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注亿速云行业资讯频道。

推荐阅读:
  1. storm的本地模式demo怎么实现
  2. Storm笔记整理(二):Storm本地开发案例—总和计算与单词统计

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

storm

上一篇:DotNet的字符转义操作是怎样的

下一篇:怎么进行asp.net core开发环境准备

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》