在CentOS 7上安装和配置ELK栈（Elasticsearch、Logstash、Kibana）教程

ELK栈由 Elasticsearch、Logstash 和 Kibana 三个开源工具组成，广泛应用于日志管理、实时数据分析和可视化。通过这些工具，您可以实现对大量日志和事件数据的高效收集、存储、分析与可视化，帮助您监控系统、应用和服务的运行状态。

下面将介绍如何在 CentOS 7 上安装和配置 ELK 栈的详细步骤。

Step 1：安装Java

ELK栈的核心组件需要 Java 环境才能运行，首先要安装 Java 1.8 版本（OpenJDK）。

sudo yum install java-1.8.0-openjdk

解释：

• sudo yum install：使用YUM包管理器来安装Java。
• java-1.8.0-openjdk：指定安装Java 1.8版本的OpenJDK。

安装完成后，可以通过以下命令验证 Java 是否安装成功：

java -version

Step 2：安装Elasticsearch

Elasticsearch 是 ELK 栈中的核心组件，提供强大的实时搜索和分析功能。

1. 添加Elasticsearch官方YUM源

sudo rpm --import https://artifacts.elastic.co/GPG-KEY-elasticsearch
sudo vi /etc/yum.repos.d/elasticsearch.repo

在 elasticsearch.repo 文件中添加以下内容：

[elasticsearch-7.x]
name=Elasticsearch repository for 7.x packages
baseurl=https://artifacts.elastic.co/packages/7.x/yum
gpgcheck=1
gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch
enabled=1
autorefresh=1
type=rpm-md

2. 安装Elasticsearch

sudo yum install elasticsearch

解释：

• rpm --import：导入Elasticsearch的GPG密钥，用于验证软件包的完整性。
• yum install elasticsearch：通过YUM安装Elasticsearch。

Step 3：配置Elasticsearch

配置Elasticsearch的核心设置。

编辑 /etc/elasticsearch/elasticsearch.yml 文件：

sudo vi /etc/elasticsearch/elasticsearch.yml

配置以下参数：

cluster.name: "your_cluster_name"
node.name: "your_node_name"
network.host: 0.0.0.0
http.port: 9200

• cluster.name：设置集群名称。
• node.name：设置当前节点名称。
• network.host：设置为 0.0.0.0 使得Elasticsearch能够从外部访问。
• http.port：默认HTTP端口设置为9200。

保存并退出后，启动Elasticsearch并设置为开机自启：

sudo systemctl start elasticsearch
sudo systemctl enable elasticsearch

Step 4：安装Logstash

Logstash 用于日志数据的收集、处理和转发。

1. 添加Logstash官方YUM源

sudo vi /etc/yum.repos.d/logstash.repo

在 logstash.repo 文件中添加以下内容：

[logstash-7.x]
name=Elastic repository for 7.x packages
baseurl=https://artifacts.elastic.co/packages/7.x/yum
gpgcheck=1
gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch
enabled=1
autorefresh=1
type=rpm-md

2. 安装Logstash

sudo yum install logstash

Step 5：配置Logstash

创建Logstash配置文件 /etc/logstash/conf.d/logstash.conf：

sudo vi /etc/logstash/conf.d/logstash.conf

配置日志输入和输出：

input {
  file {
    path => "/path/to/your/logfile.log"
    start_position => "beginning"
    sincedb_path => "/dev/null"
  }
}

output {
  elasticsearch {
    hosts => ["localhost:9200"]
    index => "your_index_name"
  }
}

• path：指定日志文件的路径。
• sincedb_path：Logstash的内部数据库位置，设置为 /dev/null 来禁用状态持久化。
• hosts：指定Elasticsearch的地址。
• index：指定数据存储的索引名称。

保存并启动Logstash，设置为开机自启：

sudo systemctl start logstash
sudo systemctl enable logstash

Step 6：安装Kibana

Kibana 提供基于Web的可视化界面，用于查看和分析Elasticsearch中的数据。

1. 添加Kibana官方YUM源

sudo vi /etc/yum.repos.d/kibana.repo

在 kibana.repo 文件中添加以下内容：

[kibana-7.x]
name=Kibana repository for 7.x packages
baseurl=https://artifacts.elastic.co/packages/7.x/yum
gpgcheck=1
gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch
enabled=1
autorefresh=1
type=rpm-md

2. 安装Kibana

sudo yum install kibana

Step 7：配置Kibana

编辑 /etc/kibana/kibana.yml 文件：

sudo vi /etc/kibana/kibana.yml

配置以下参数：

server.port: 5601
server.host: "0.0.0.0"
elasticsearch.hosts: ["http://localhost:9200"]

• server.port：设置Kibana监听的端口，默认是 5601。
• server.host：设置为 0.0.0.0 使得Kibana能够从外部访问。
• elasticsearch.hosts：指定Elasticsearch的地址。

保存并启动Kibana，设置为开机自启：

sudo systemctl start kibana
sudo systemctl enable kibana

Step 8：配置防火墙规则

如果启用了防火墙，需要打开Elasticsearch和Kibana的端口，允许外部访问。

sudo firewall-cmd --add-port=9200/tcp --permanent
sudo firewall-cmd --add-port=5601/tcp --permanent
sudo firewall-cmd --reload

• 9200端口：Elasticsearch的HTTP端口。
• 5601端口：Kibana的Web界面端口。

Step 9：访问Kibana

配置完成后，您可以通过浏览器访问 Kibana 的可视化界面：

http://your_server_ip:5601

• your_server_ip：替换为您CentOS服务器的IP地址。

总结

通过以上步骤，您可以成功地在CentOS 7上安装和配置ELK栈，构建强大的日志收集、分析和可视化平台。ELK栈的每个组件都有特定的功能：

• Elasticsearch：提供强大的实时搜索与索引功能。
• Logstash：用于收集、处理和转发日志数据。
• Kibana：提供Web界面，方便用户可视化、分析Elasticsearch中的数据。

借助这些工具，您可以全面提升日志管理的效率，进行深入的数据分析。如果您在安装或配置过程中遇到问题，请随时联系我！