logstash启动指南

一、logstash的概述

Logstash 是一个开源的数据处理管道，可以轻松地将来自各种来源的数据进行过滤、解析、转换和发送到指定的位置。它主要由三个部分组成：input、filter和output。input用于从不同来源读取数据，如文件，网络，数据库等。filter用于转换、处理和过滤数据。output用于将处理后的数据发送到目标位置，比如Elasticsearch,Logstash和Kibana等。

启动 Logstash, 可以使用多种方法，包括命令行，Docker和systemd服务。接下来我们会详细介绍三种启动 Logstash 的方法，分别是：

二、使用命令行启动 Logstash

在命令行下启动 Logstash 可以使用以下命令：

bin/logstash -f config-file.conf

其中 "bin" 是 Logstash 安装目录下的 bin 目录； "config-file.conf" 是 Logstash 配置文件路径。

启动命令后，Logstash 会开始读取配置文件当中的 input 插件，读取数据，经过 filter 的处理后发送到指定的 output 插件。

下面是一个简单的示例config文件：

input {
  stdin {}
}

output {
  stdout {}
}

以上配置表示从标准输入(stdin)读取数据，然后直接把数据输出到标准输出(stdout)。我们可以通过以下命令启动 Logstash:

bin/logstash -f path/to/config_file.conf

三、使用 Docker 启动 Logstash

Docker是目前最流行的容器技术，可以实现快速开发和部署应用程序。以Logstash为例，我们可以通过构建docker镜像来启动Logstash。

首先创建一个 Dockerfile , 文件内容如下:

FROM docker.elastic.co/logstash/logstash:7.0.0

COPY config-dir/ /usr/share/logstash/pipeline/

CMD ["logstash", "-f", "/usr/share/logstash/pipeline/"]

以上 Dockerfile 采用了官方的 Logstash 7.0.0 镜像作为基础镜像, 然后将本地的配置文件拷贝到容器内部的 /usr/share/logstash/pipeline/ 目录中。 最后使用 CMD 指令运行 Logstash。

同时，为了更好的管理容器和镜像，我们可以采用 docker-compose。我们只需要创建一个 docker-compose.yml 文件，并在文件里配置相关的参数就可以一键启动或停止 Logstash。示例文件内容如下：

version: '2'
services:
  logstash:
    image: logstash
    volumes:
      - ./config-dir:/usr/share/logstash/pipeline/
    command: logstash -f /usr/share/logstash/pipeline/

四、使用 systemd 启动 Logstash

systemd 是目前最流行的进程管理工具。通过 systemd，我们可以更好的管理Logstash进程。我们需要创建一个 systemd 启动配置文件，放置到 /etc/systemd/system 目录下。文件内容如下：

[Unit]
Description=logstash

[Service]
Environment=PATH=/usr/share/logstash/bin/:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin
Type=simple
ExecStart=/usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/

[Install]
WantedBy=multi-user.target

以上配置文件指定了 Logstash 的启动路径和配置文件路径。 完成配置后，重启 systemd 服务即可生效。

五、总结

在本篇文章中，我们介绍了 Logstash 的概述和启动方式。通过命令行、docker-compose和systemd等方式可以轻松启动 Logstash。