Graylog Sidecar介绍

Graylog Sidecar 是 Graylog 日志管理平台的一个组件，用于管理和配置日志收集代理（log collectors）。它允许你集中管理和监控分布在不同服务器上的日志收集器，方便地将日志数据发送到 Graylog 服务器进行集中存储、分析和可视化。

Graylog Sidecar 可以用于集成各种不同类型的日志收集器，包括但不限于 Filebeat、Winlogbeat、NXLog、rsyslog 等。通过 Graylog Sidecar，你可以在 Graylog 界面上配置和管理这些收集器的设置，包括日志文件路径、过滤规则、发送目标等。这样一来，你无需登录到每个服务器上手动配置收集器，而是通过 Graylog 界面统一管理和监控所有的收集器。

Graylog Sidecar 的核心概念是"收集器配置"（Collector Configuration）。每个收集器配置对应一台服务器上的一个日志收集器实例。你可以为每个收集器配置指定具体的收集器类型、收集器标识、日志文件路径、过滤规则等信息。Graylog Sidecar 将这些配置应用到相应的收集器上，并负责启动、停止、重启和监控收集器的状态。

Graylog Sidecar 使用步骤

在 Graylog 界面上创建和配置收集器配置。
在需要收集日志的服务器上安装 Graylog Sidecar。
在服务器上运行 Graylog Sidecar 并与 Graylog 服务器建立连接。
Graylog Sidecar 根据配置启动相应的日志收集器，并开始收集、过滤和发送日志数据到 Graylog 服务器。
Graylog 服务器接收和处理日志数据，并提供搜索、过滤、分析和可视化功能。

Graylog Sidecar 安装

graylog sidecar 安装需要和graylog进行版本对应如下所示:

ubuntu安装

wget https://packages.graylog2.org/repo/packages/graylog-sidecar-repository_1-5_all.deb
sudo dpkg -i graylog-sidecar-repository_1-5_all.deb
sudo apt-get update && sudo apt-get install graylog-sidecar
curl -L -O https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-8.8.1-x86_64.rpm
sudo rpm -vi filebeat-8.8.1-x86_64.rpm

centos安装

sudo rpm -Uvh https://packages.graylog2.org/repo/packages/graylog-sidecar-repository-1-5.noarch.rpm
sudo yum install graylog-sidecar
sudo graylog-sidecar -service install
sudo systemctl enable graylog-sidecar
sudo systemctl start graylog-sidecar
curl -L -O https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-8.8.1-x86_64.rpm
sudo rpm -vi filebeat-8.8.1-x86_64.rpm

Windows 安装

访问下载exe安装包进行安装
详情参考官网

graylog配置说明

选择input 配置Beats

点击new input 选择Global

注意如果是docker配置的注意要将5044端口映射出去

选择sidecar

点击 Create or reuse a token for the graylog-sidecar user

填写token的名字创建token，复制生成的token在sidecae.yml需要配置

编辑 sidecae.yml

window 修改 C:\Program Files\Graylog\sidecar

# The URL to the Graylog server API.
#这里改成你自己的gralog的api
# Default: "http://127.0.0.1:9000/api/"
server_url: "http://127.0.0.1:9000/api"
# The API token to use to authenticate against the Graylog server API.
# Default: none 通过graylog生成token
server_api_token: "5k9j2506042ladcaa09vlgp7cok5q7la2ilpr5d7j2no82e7fkp"# The node ID of the sidecar. This can be a path to a file or an ID string.
# If set to a file and the file doesn't exist, the sidecar will generate an
# unique ID and writes it to the configured path.
#
# Example file path: "file:C:\\Program Files\\Graylog\\sidecar\\node-id"
# Example ID string: "6033137e-d56b-47fc-9762-cd699c11a5a9"
#
# ATTENTION: Every sidecar instance needs a unique ID!
#
# Default: "file:C:\\Program Files\\Graylog\\sidecar\\node-id"
node_id: "file:C:\\Program Files\\Graylog\\sidecar\\node-id"# The node name of the sidecar. If this is empty, the sidecar will use the
# hostname of the host it is running on.
# Default: "本机的地址"
node_name: "192.168.43.153"# The update interval in secods. This configures how often the sidecar will
# contact the Graylog server for keep-alive and configuration update requests.
# Default: 10
update_interval: 10# This configures if the sidecar should skip the verification of TLS connections.
# Default: false
tls_skip_verify: false# A list of tags to assign to this sidecar. Collector configuration matching any of these tags will automatically be
# applied to the sidecar.
# Default: []
tags: []

windows重新启动Graylog Sidecar可以看到当前ip连接成功

配置filebate

点击 configuration创建Filebeat

填写name 根据服务器类型选择
在这里插入图片描述

配置log日志的的位置修改paths为自己的log路劲
配置 graylog的input 修改hosts为自己的

关联

选择filebate 关联刚刚创建的日志收集器点击svae保存

点击 start 启动日志推送

Graylog Sidecar日志采集相关推荐

Kubernetes日志采集Sidecar模式介绍
摘要: DaemonSet和Sidecar模式各有优缺点,目前没有哪种方式可以适用于所有场景.因此我们阿里云日志服务同时支持了DaemonSet以及Sidecar两种方式,并对每种方式进行了一些额外的 ...
容器日志采集利器Log-Pilot
容器时代越来越多的传统应用将会逐渐容器化,而日志又是应用的一个关键环节,那么在应用容器化过程中,如何方便快捷高效地来自动发现和采集应用的日志,如何与日志存储系统协同来高效存储和搜索应用日志.本文将主要 ...
采集虚拟机_系列文章：Kubernetes日志采集最佳实践
前言上一期主要介绍Kubernetes日志输出的一些注意事项,日志输出最终的目的还是做统一的采集和分析.在Kubernetes中,日志采集和普通虚拟机的方式有很大不同,相对实现难度和部署代价也略大, ...
直击痛点，详解 K8s 日志采集最佳实践
作者 | 元乙阿里云存储服务技术专家导读:上一篇文章主要介绍 Kubernetes 日志输出的一些注意事项,日志输出最终的目的还是做统一的采集和分析.在 Kubernetes 中,日志采集和普通虚 ...
Kubernetes入门——Kubernetes日志采集与监控告警
作者简介: 郭川磊百度基础架构部研发工程师负责云原生产品的研发本文基于百度云原生团队『云原生基础知识概述及实践』系列视频课程--『Kubernetes入门-Kubernetes实现应用高可用』梳 ...
系列文章：Kubernetes日志采集最佳实践
前言上一期主要介绍Kubernetes日志输出的一些注意事项,日志输出最终的目的还是做统一的采集和分析.在Kubernetes中,日志采集和普通虚拟机的方式有很大不同,相对实现难度和部署代价也略大, ...
LC3视角：Kubernetes下日志采集、存储与处理技术实践
摘要: 在Kubernetes服务化.日志处理实时化以及日志集中式存储趋势下,Kubernetes日志处理上也遇到的新挑战,包括:容器动态采集.大流量性能瓶颈.日志路由管理等问题.本文介绍了" ...
Logtail从入门到精通（四）：正则表达式Java日志采集实战
摘要: 为简化日志接入门槛,我们提供了极简模式的日志解析方式(如[开启日志采集之旅]()中的介绍).为了更好的对日志进行分析,我们还提供了其他解析方式,例如:分隔符模式.完整正则模式.JSON模式等. ...
k8s部署-49-k8s日志采集的解决方案思路梳理
k8s中的日志怎么能方便查看呢?总不能每次都登录到各个容器中进行查看吧,是否能实现k8s日志的统一管理呢? 一.k8s日志输出和传统服务对比二.常用的k8s日志解决方案是什么 1.远程日志就是说在 ...

Graylog Sidecar日志采集