调优参数

# pipeline线程数,官方建议是等于CPU内核数

pipeline.workers: 8

 

# 实际output时的线程数

pipeline.output.workers: 8

 

# 每次发送的事件数(当batch.size增大,es处理的事件数就会变少,写入也就越快了)

pipeline.batch.size: 10000

 

# 发送延时(根据实际的数据量逐渐增大来测试最优值)

pipeline.batch.delay: 5

 

扩展

 

Logstash系列:pipelines.xml配置详解