在“重新启动错误”时间戳上记录输入mongodb循环

Question

我尝试使用mongodb插件作为logstash的输入。以下是我的简单配置：

input {
    mongodb {
        uri => 'mongodb://localhost:27017/testDB'
        placeholder_db_dir => '/Users/TEST/Documents/WORK/ELK_Stack/LogStash/data/'
        collection => 'logCollection_ALL'
        batch_size => 50
    }
}
filter {}
output { stdout {} }

但是我面临一个“循环问题”，可能是由于一个字段“时间戳”，但我不知道该怎么办。

[2018-04-25T12:01:35998][WARN][logstash.inputs.mongodb]mongodb Input引发异常，重新启动{:exception=

还有一个调试日志：

[2018-04-25T12:01:34.893000#2900]调试--:MONGODB | QUERY | namespace=testDB。logCollection_ALL selector={:_id=

我如何参数化我的logstash配置，以便在标准输出控制台中获得输出？

Answer 1

这是因为字段@timestamp具有ISODate数据类型。

您必须从所有文档中删除此字段。

db.getCollection('collection1').update({}, {$unset: {"@timestamp": 1}}, {multi: true})