logstash-configuration 相关问题

Logstash配置有三个主要部分 - 输入,过滤和输出。每个部分都有该部分中可用的每个插件的配置。

是否可以在logstash输出配置中提及分区id?

是否可以在logstash输出配置中提及分区ID? Logstash.conf: | 输入 { 卡夫卡{ group_id =>“测试组”

回答 1 投票 0

来自 ElasticSearch 的数据作为 http_poller 的输入

我正在尝试执行以下操作: 从elasticsearch中获取一些数据(比如说单个浮点值),并通过Logstash管道将它们添加到对某些Rest API的http_poller调用的主体中......

回答 1 投票 0

_id 值在 8.9 v 中填充一些随机字符串,同时使用 logstatsh 克隆 2.3 中的数据

logstatsh.conf 输入 { 弹性搜索{ 主机=>“XXXXXXXXX” 索引=>“周一” } } 输出 { 弹性搜索{ 主机=>“XXXXXX” 索引 => ...

回答 1 投票 0

询问如何嵌套在logstash(Elastic Search)中

“archives_id”:空, “细节级别”:空, “项目”: \[ { “条形码”:“000892”, “brn”:“4188”, ”

回答 1 投票 0

Logstash 配置不会解析 JSON 文件,也不会将数据推送到索引 - log: {:count=>1,:running_pipelines=>[:main], :non_running_pipelines=>[]}

我通过 Python 代码每 5 分钟生成一个 JSON 文件,并尝试将数据推送到 Elastic,但 Logstash 抛出以下消息,并且不将任何数据推送到 Kibana。 我的管道:文件 -->

回答 1 投票 0

Logstash 8.8.2 中的 Grok 模式和主机名提取问题

列出项目 我在处理来自客户端计算机的日志时遇到 Logstash 8 问题,而 Logstash 6 可以正确处理相同的日志。以下是日志样本: 日志示例 - Logstash...

回答 0 投票 0

Logstash 使用 JDBC 输入插件和 elasticsearch 时出现“无法从 nil 确定时区”错误

我在使用 JDBC 输入插件将数据从 MySQL 数据库同步到 Elasticsearch 的配置运行 Logstash 时遇到问题。以下是问题的详细信息: 福尔...

回答 0 投票 0

Logstash 映射 - 嵌套属性中的重复值

当聚合映射中有超过 1 个嵌套类型属性时,有人可以帮助映射吗?我们正在使用 8.0 版本并使用 Logstash 我们正在同步来自我们 Da...

回答 0 投票 0

将 Logstash 连接到 _changes feed 后 CouchDB 中的警告

我正在使用 Logstashs Couchdb_changes 输入插件通过 Logstash 将 CouchDB 中的数据索引到 OpenSearch 中。 一切正常,但由于连接了 Logstash,以下警告经常出现在

回答 0 投票 0

Logstash - 解析嵌套的 KV 日志

我对这种日志有疑问: <183>Apr 26 12:53:53 host.example tag_audit_log: type=USER_ACCT msg=audit(1989212.965:15124458): pid=20982 uid=0 auid=427890281 ses=4294967295 subj=sys...

回答 0 投票 0

如何使用logstash forwarder指定elasticsearch索引

我想达到的目标: 从 logback-spring.xml 或 application.properties 配置日志将在其中结束的 elasticsearch 索引。 我尝试了什么: 我目前正在使用这种依赖: <

回答 0 投票 0

logstash 的 Nginx grok 模式

以下是我的Nginx日志格式 log_format timed_combined '$http_x_forwarded_for - $remote_user [$time_local] ' '"$request" $status $body_bytes_sent ' '"$http_referer" "$http_user...

回答 2 投票 0

当 mongodb 数据更新时,Logstash 不会更新数据

为了同步elasticsearch和mongodb,我配置了logstash。 这是我的配置正常工作: 输入 { mongodb { uri => ''

回答 1 投票 0

Logstash - 输入中的 if 语句

if 语句是否适用于 logstash 输入? 有什么方法可以在输入之前检查字段是否存在?我喜欢做这样的事情: 输入 { 如果 [field] 和 [another_field] { 节拍...

回答 0 投票 0

Logstash 在使用聚合时推送正确的数据

我正在通过 logstash 将数据推送到 elastic,在 logstash 中我将数据作为父子进行了 aggerated。 这个推送数据但是在聚合时遗漏了一些数据,例如我有一张卡并且有 10

回答 0 投票 0

Filebeat 无法连接到 logstash

我在云上使用两台服务器,在一台服务器上 (A) 我安装了 filebeat,在第二台服务器上 (B) 我安装了 logstash、elasticsearch 和 kibana。所以我在从

回答 1 投票 0

将matcher集成到logstash grok配置中出错。

我使用的是logstash 7.6.2。我的日志行是json字符串。每个json有3个字段,"msg "是文本,"topic "是文本,"ts "是一个浮点数。下面是我的匹配表达式。{"...

回答 1 投票 0

Logstash自动更新数据

我使用的是最新版本的logstash(7.6.2)。我试着上传了一个样本数据,并且能够使用logstash成功上传到elasticsearch中(启用了自动重载),并且能够看到 ...

回答 1 投票 0

Filebeat中的YARN或HDFS日志。

如果我想把HDFS中的日志摄取到Filebeat中,我该怎么做?我可以指定本地驱动器上的任何目录,但我希望Filebeat从HDFS中提取数据。有没有...

回答 1 投票 3

如何改变logstash创建ES索引时区?

logstash.conf: elasticsearch{ hosts => ["172.31.29.xxx:9200"] index => "redis-%{+YYYYMMdd}" } 我用YYYYMMdd定义了索引,我想改变索引的时区,如何才能 ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.