beat

beat

heartbeat能否监控其余beat?

Beatsvlgnaw 回复了问题 • 1 人关注 • 1 个回复 • 600 次浏览 • 2018-07-19 10:52 • 来自相关话题

请问这样做,es中的数据会重复吗

Elasticsearchlaoyang360 回复了问题 • 2 人关注 • 1 个回复 • 626 次浏览 • 2018-05-01 10:24 • 来自相关话题

filebeat Template 报错

Beatsrockybean 回复了问题 • 2 人关注 • 1 个回复 • 2043 次浏览 • 2018-01-18 07:29 • 来自相关话题

在Elasticsearch-head看到乱码

回复

BeatsWithLin 发起了问题 • 1 人关注 • 0 个回复 • 563 次浏览 • 2017-12-06 21:34 • 来自相关话题

filebeat如何根据document type 映射到redis的多个key中

Beats谭雁宏 回复了问题 • 2 人关注 • 2 个回复 • 2231 次浏览 • 2017-06-26 16:38 • 来自相关话题

怎样在Kibana中显示Byte数据?

回复

Kibanasitanxin 发起了问题 • 1 人关注 • 0 个回复 • 2027 次浏览 • 2016-12-12 22:48 • 来自相关话题

beat收集数据meta头里面ip问题

Beatsmedcl 回复了问题 • 2 人关注 • 1 个回复 • 2615 次浏览 • 2017-07-27 09:02 • 来自相关话题

Day6:用logstash-input-http_poller模拟nginxbeat

Advent三斗室 发表了文章 • 0 个评论 • 3135 次浏览 • 2015-12-07 00:18 • 来自相关话题

Elastic 公司最近推出了 beats 系列,在官方的 packet/top/file{beat} 之外,社区也自发制作了一些比如 docker/nginx/ 不过很可惜的是:nginxbeat 只支持两个数据来源:标准的 ngx_http_stub_status_module 和商业版 Nginx Plus 的ngx_http_status_module 我们都知道,ngx_http_stub_status_module 输出的信息太少,除了进程级别的连接数,啥都没有。那么,在使用开源版本 Nginx 的我们,还有别的办法么? 在官网的第三方模块列表里,发现了一个韩国人写的 nginx-module-vts。这个扩展可以做到 vhost 级别的状态信息输出。(我知道国人还有很多类似的统计扩展,但是没上官网,不便普及,就忽略吧) 但是,不懂 Golang 的话,没法自己动手实现一个 nginx-vts-beat 啊。怎么办? 其实我们可以用 logstash-input-http_poller 实现类似的功能。 首先,我们要给自己的 Nginx 加上 vts 扩展。编译方式这里就不讲了,和所有其他第三方模块一样。配置方式详见README。我们这里假设是按照核心和非核心接口来统计 URL 的状态:
http {
    vhost_traffic_status_zone;

    map $uri $filter_uri {
        default 'non-core';
        /2/api/timeline core;
        ~^/2/api/unread core;
    }

    server {
        vhost_traffic_status_filter_by_set_key $filter_uri;
        location /status {
            auth_basic "Restricted"; 
            auth_basic_user_file pass_file;
            vhost_traffic_status_display;
            vhost_traffic_status_display_format json;
        }
    }
}
然后我们需要下面一段 Logstash 配置来定期获取这个数据:
input {
  http_poller {
    urls => {
      0 => {
        method => get
        url => "http://localhost:80/status/format/json"
        headers => {
          Accept => "application/json"
        }
        auth => {
          user => "YouKnowIKnow"
          password => "IKnowYouDonotKnow"
        }
      }
      1 => {
        method => get
        url => "http://localhost:80/status/con ... up%3D*"
        headers => {
          Accept => "application/json"
        }
        auth => {
          user => "YouKnowIKnow"
          password => "IKnowYouDonotKnow"
        }
      }
    }
    request_timeout => 60
    interval => 60
    codec => "json"
  }
}
这样,就可以每 60 秒,获得一次 vts 数据,并重置计数了。 注意,urls 是一个 Hash,所以他的执行顺序是根据 Hash.map 来的,为了确保我们是先获取数据再重置,这里干脆用 0, 1 来作为 Hash 的 key,这样顺序就没问题了。 想了解更全面的 ELK Stack 知识和细节,欢迎购买我的《ELK Stack权威指南》,也欢迎加 QQ 群:315428175 哟。

heartbeat能否监控其余beat?

回复

Beatsvlgnaw 回复了问题 • 1 人关注 • 1 个回复 • 600 次浏览 • 2018-07-19 10:52 • 来自相关话题

请问这样做,es中的数据会重复吗

回复

Elasticsearchlaoyang360 回复了问题 • 2 人关注 • 1 个回复 • 626 次浏览 • 2018-05-01 10:24 • 来自相关话题

filebeat Template 报错

回复

Beatsrockybean 回复了问题 • 2 人关注 • 1 个回复 • 2043 次浏览 • 2018-01-18 07:29 • 来自相关话题

在Elasticsearch-head看到乱码

回复

BeatsWithLin 发起了问题 • 1 人关注 • 0 个回复 • 563 次浏览 • 2017-12-06 21:34 • 来自相关话题

filebeat如何根据document type 映射到redis的多个key中

回复

Beats谭雁宏 回复了问题 • 2 人关注 • 2 个回复 • 2231 次浏览 • 2017-06-26 16:38 • 来自相关话题

怎样在Kibana中显示Byte数据?

回复

Kibanasitanxin 发起了问题 • 1 人关注 • 0 个回复 • 2027 次浏览 • 2016-12-12 22:48 • 来自相关话题

beat收集数据meta头里面ip问题

回复

Beatsmedcl 回复了问题 • 2 人关注 • 1 个回复 • 2615 次浏览 • 2017-07-27 09:02 • 来自相关话题

Day6:用logstash-input-http_poller模拟nginxbeat

Advent三斗室 发表了文章 • 0 个评论 • 3135 次浏览 • 2015-12-07 00:18 • 来自相关话题

Elastic 公司最近推出了 beats 系列,在官方的 packet/top/file{beat} 之外,社区也自发制作了一些比如 docker/nginx/ 不过很可惜的是:nginxbeat 只支持两个数据来源:标准的 ngx_http_stub_status_module 和商业版 Nginx Plus 的ngx_http_status_module 我们都知道,ngx_http_stub_status_module 输出的信息太少,除了进程级别的连接数,啥都没有。那么,在使用开源版本 Nginx 的我们,还有别的办法么? 在官网的第三方模块列表里,发现了一个韩国人写的 nginx-module-vts。这个扩展可以做到 vhost 级别的状态信息输出。(我知道国人还有很多类似的统计扩展,但是没上官网,不便普及,就忽略吧) 但是,不懂 Golang 的话,没法自己动手实现一个 nginx-vts-beat 啊。怎么办? 其实我们可以用 logstash-input-http_poller 实现类似的功能。 首先,我们要给自己的 Nginx 加上 vts 扩展。编译方式这里就不讲了,和所有其他第三方模块一样。配置方式详见README。我们这里假设是按照核心和非核心接口来统计 URL 的状态:
http {
    vhost_traffic_status_zone;

    map $uri $filter_uri {
        default 'non-core';
        /2/api/timeline core;
        ~^/2/api/unread core;
    }

    server {
        vhost_traffic_status_filter_by_set_key $filter_uri;
        location /status {
            auth_basic "Restricted"; 
            auth_basic_user_file pass_file;
            vhost_traffic_status_display;
            vhost_traffic_status_display_format json;
        }
    }
}
然后我们需要下面一段 Logstash 配置来定期获取这个数据:
input {
  http_poller {
    urls => {
      0 => {
        method => get
        url => "http://localhost:80/status/format/json"
        headers => {
          Accept => "application/json"
        }
        auth => {
          user => "YouKnowIKnow"
          password => "IKnowYouDonotKnow"
        }
      }
      1 => {
        method => get
        url => "http://localhost:80/status/con ... up%3D*"
        headers => {
          Accept => "application/json"
        }
        auth => {
          user => "YouKnowIKnow"
          password => "IKnowYouDonotKnow"
        }
      }
    }
    request_timeout => 60
    interval => 60
    codec => "json"
  }
}
这样,就可以每 60 秒,获得一次 vts 数据,并重置计数了。 注意,urls 是一个 Hash,所以他的执行顺序是根据 Hash.map 来的,为了确保我们是先获取数据再重置,这里干脆用 0, 1 来作为 Hash 的 key,这样顺序就没问题了。 想了解更全面的 ELK Stack 知识和细节,欢迎购买我的《ELK Stack权威指南》,也欢迎加 QQ 群:315428175 哟。