logstash与redis交互

把标准输入的数据存储到redis中

编辑配置redis-out.conf配置文件,

# vim /etc/logstash/conf.d/redis-out.conf

添加如下内容

input {

      stdin {}

}

output {

      redis {

          host => "192.168.1.202"

          port => "6379"

          password => 'test'

          db => '1'

         data_type => "list"

         key => 'elk-test'

}

}

 

logstash -f /etc/logstash/conf.d/full.conf

运行之后在控制台进行输入,然后在Redis观察

 

把reids的存储的数据输出到elasticsearch中

编辑配置redis-in.conf配置文件,

# vim /etc/logstash/conf.d/redis-out.conf

添加如下内容

input{

       redis {

           host => "192.168.1.202"

           port => "6379"

           password => 'test'

           db => '1'

           data_type => "list"

            key => 'elk-test'

            batch_count => 1 #这个值是指从队列中读取数据时,一次性取出多少条,默认125条(如果redis中没有125条,就会报错,所以在测试期间加上这个值)

}

}

output {

                  elasticsearch {

                  hosts => ['192.168.1.202:9200']

                  index => 'redis-test-%{+YYYY.MM.dd}'

}

}

运行logstash指定redis-in.conf的配置文件

# /usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/redis-out.conf