Logstash 条件输出到 elasticsearch(每个 filebeat 主机名的索引)

Question

我有几个安装了 filebeat 的 Web 服务器，我想每个主机有多个索引。

我当前的配置看起来像

input {
  beats {
    ports => 1337
  }
}
filter {
  grok {
    match => { "message" => "%{COMBINEDAPACHELOG}"}
  }
  geoip {
    source => "clientip"
  }
}
output {
  elasticsearch {
  if [beat][hostname] == "luna"
  {
         hosts => "10.0.1.1:9200"
         manage_template => true
         index => "lunaindex-%{+YYYY.MM.dd}"
         document_type => "apache"
  }
  }
}

然而，上述会议的结果是

给定的配置无效。原因：预期为 #、=> 第 22 行，第 6 列(字节 346(

这是 if 语句发生的地方。有什么帮助吗？

我想以嵌套格式将上述内容作为

if [beat][hostname] == "lina"
{
index = lina
}
else if [beat][hostname] == "lona"
{
index = lona
}

等。请帮忙吗？

Answer 1

该线程很旧，但希望有人会发现这很有用。插件定义不允许在其中使用条件，因此会出现错误。条件必须包含如下所示的整个定义。此外，有关详细信息，请参阅文档。

output {
    if [beat][hostname] == "luna" {
        elasticsearch {
            hosts => "10.0.1.1:9200"
            manage_template => true
            index => "lunaindex-%{+YYYY.MM.dd}"
            document_type => "apache"
        }
    } else{
       elasticsearch {
            // alternate configuration
       }
    }
}

Answer 2

要访问任何内部字段，您必须用 %{} 将其括起来。

试试这个

%{[beat][hostname]}

有关更多解释，请参阅此处。

更新：

将 %{[beat][主机名]} 与 == 一起使用将不起作用，请尝试

if "lina" in [beat][hostname]{
    index = lina
}

Answer 3

解决方案可以是：

在每个 filebeat 配置文件中定义，在 prosperctor 部分中定义文档类型：

document_type：露娜

在您的管道 conf 文件中，检查类型字段

如果[类型]=="露娜">

希望这有帮助。