logstash 相关问题

Logstash是用于管理事件和日志的工具。您可以使用它来收集日志,解析它们并将它们发送到存储器以供以后使用(例如搜索)。

在Logstash中查询关键字字段

我想过滤掉索引消息字段中的字符串“My Alert”。该字段是关键字字段。为了实现这一目标,我编写了以下内容: 筛选 { 变异{

回答 1 投票 0

ELK 索引名称在第二天展期时不会更改

我正在使用ELK(elasticsearch-8.12.0-1.x86_64)来存储kong API网关日志。我正在使用 ILM(索引生命周期管理)策略来管理索引保留,我在其中提到过 Logstash 管道...

回答 1 投票 0

如何在logstash中删除空行

在我的logstash 日志中,有时会有空行或只有空格的行。 为了删除空行,我创建了一个 dropemptyline 过滤器文件 # 删除空行 筛选 { if [消息] =~ /^\s*$/ {...

回答 2 投票 0

Logstash 结合数据流和索引模板

我正在尝试在logstash v7.17中使用数据流和索引模板 实现此目的的正确 Elasticsearch 输出配置是什么? 选项 1 在模板中使用 data_stream -> 失败

回答 1 投票 0

Elasticsearch 在消息字段中显示 JSON 数据

当uniface产品创建日志行时,它看起来如下: {“应用程序”:“space_ship”,“平台”:“MSW”,“版本”:“10.4.02.045”,“

回答 1 投票 0

无法读取管道yaml文件

这是我关于 pipelines.yml 文件的问题。首先,我使用 Elasticsearch 6.6 和 Logstash 6.2.2。两者都安装在我自己的 Google Cloud 帐户的虚拟机中(不是 ELK 提供的...

回答 4 投票 0

如何配置 Filebeat 以便从日志发送完整条目

如何配置 Filebeat 将以下消息作为一个事件发送?我们的客户希望将此类消息视为 Kibana 中的一个连续条目。 如何配置 Filebeat 将以下消息作为一个事件发送?我们的客户希望在 Kibana 中看到这样的消息作为一个连续的条目。 <get xmlns="http://services.example.com/"> <request xmlns=""> <credentials> <applicationUsername>******</applicationUsername> <applicationPassword>******</applicationPassword> <username>******</username> </credentials> <individual> <filter> <cqlQuery>*</cqlQuery> <startRow>0</startRow> <numRows>20</numRows> </filter> <payment getTransactions="false"> <filter> <cqlQuery>paymentid=123456</cqlQuery> <startRow>0</startRow> <numRows>100</numRows> <mustHave>true</mustHave> </filter> </payment> </individual> </request> </get> 您可以使用 filebeat 多行解析器 将多行合并到一个文档中。 另请检查 filebeat XML 解码。

回答 1 投票 0

使用http_poller从非本地的elasticsearch主机请求某些内容

我想问是否有一种方法可以使用http_poller从非本地的elasticsearch主机请求某些内容。就像下面这样: 输入 { http_poller { 网址=> { es_data =>...

回答 1 投票 0

Grok 模式 [Mon Jan 04 08:36:12 2021]

我正在努力使用logstash将一些日志发送到elasticsearch。我无法弄清楚 [Mon Jan 04 08:36:12 2021] 的 grok 模式。格式为日月日期时间年帮助和建议...

回答 1 投票 0

LOGSTASH - 输出出现语法错误 - “预期 [ \t\r\n]、\”#\”、\”(\” 位于行之一”

在尝试运行此logstash配置时遇到问题,该配置使用http_poller来运行查询,然后将其结果与我的电脑上的本地数据表进行比较。 这是输出和...

回答 1 投票 0

即使配置正确,在 Windows 上如何调试 Logstash?

我的logstash 导入一些CSV 文件有以下配置: 输入 { 文件 { 路径=> [ “C:\Data\Archive_ATS_L1�6-10-08-00-00_to_2016-10-09-00-00\S2KHistorian\

回答 3 投票 0

从 ElasticSearch 索引中获取最后一个值

我试图从 Elasticsearch 索引中获取最新值,但是当我执行此操作时,它会在控制台上打印索引中的所有内容。 我也尝试过使用“DateTime”f...

回答 1 投票 0

Elastic Stack - Logstash 给出 JSON 解析错误

我正在尝试使用弹性堆栈创建日志服务。 我接收 TCP 中的输入(输入来自不同的微服务),并基于 logstash 输出到 http 或 elastic(o...

回答 1 投票 0

文件输入add_field未向每一行添加字段

我正在使用logstash配置解析不同负载平衡服务器集群的多个日志文件,并希望向每个文件的条目添加一个“log_origin”字段,以便以后轻松过滤。 她...

回答 2 投票 0

如何计算Elasticsearch + Kibana中的时间戳差异并将其显示在结果中的新列中

假设我们有两个时间戳字段,我们可以计算它们之间的时间差吗?为了 例子 [2014-04-01T18:50:41.817+0000] ~[2014-04-01T18:50:45.680Z]

回答 3 投票 0

使用 Filebeat 和 mssql 模块提取 SQL Server 错误日志

我正在使用带有 mssql 模块的 Filebeat 将 SQL Server ErrorLog 文件直接提取到 Elastic 搜索输出,但我得到像这样的字符 \u00000\u00002\u00004\u0000-\u00000\u00004\u0000-\

回答 1 投票 0

Kibana 服务器尚未准备好,无法从 Elasticsearch 节点检索版本信息

嗨,我想通过 docker compose 运行 Elastic 和 Kibana,但是当它运行时,我得到: Kibana 服务器尚未准备好。 这是我的 docker ps -a docker ps -a 集装箱ID图像...

回答 1 投票 0

Logstash 主类 JvmOptionsParser 未找到/无法加载

我已经被这个问题困扰很长一段时间了,任何帮助将不胜感激。 所以我有一个包含 Elastic Stack 服务的 docker compose,以及一个 Cassandra 数据库。 我正在努力

回答 1 投票 0

在实体内索引数组的最佳实践

我目前正在通过 SQL 中的 Logstash 将数据提取到 Elasticsearch。 我当前正在使用的实体有一个标签列表,它基本上是一个 id 列表。在 Logstash 管道中我有

回答 1 投票 0

如何使用 DSL 查询丢弃 ElasticSearch 中的重复值?

这里我试图根据查询客户获取属性名称,这里的问题是属性名称中有很多重复值我想丢弃,有人可以帮助我吗

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.