溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Logstash怎么配置文件

發(fā)布時間:2021-12-16 10:37:11 來源:億速云 閱讀:171 作者:iii 欄目:云計算

本篇內(nèi)容主要講解“Logstash怎么配置文件”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學(xué)習(xí)“Logstash怎么配置文件”吧!

一、下載

二、安裝,啟動

[root@hftest0001 opt]# pwd
/opt

[root@hftest0001 opt]# ll
...
-rw-------  1 root root  89916973 Jan 14 03:03 logstash-1.5.6.tar.gz
...

[root@hftest0001 opt]# tar -zxvf logstash-1.5.6.tar.gz

[root@hftest0001 logstash-1.5.6]# pwd
/opt/logstash-1.5.6

修改JAVA_HOME
[root@hftest0001 logstash-1.5.6]# vi bin/logstash
...
export JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera
...

添加conf
[root@hftest0001 logstash-1.5.6]# mkdir conf
[root@hftest0001 logstash-1.5.6]# vi conf/input_file-output_file.conf
input {
    file{
        path => [ "/opt/logstash-data/input/1.log" ]
    }
}

output{  
  file {
     path => ["/opt/logstash-data/output/1.log"]
  }
}

[root@hftest0001 logstash-1.5.6]# mkdir -p /opt/logstash-data/{input,output}
[root@hftest0001 logstash-1.5.6]# touch /opt/logstash-data/input/1.log

啟動
[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/

測試
[root@hftest0001 logstash-1.5.6]# echo "1" >> /opt/logstash-data/input/1.log

三、多配置文件

配置文件分段。即把input,filter,output分成不同的文件。

A.一個input 一個output

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*

[root@hftest0001 logstash-1.5.6]#  vi conf/input_file.conf
input {
  file {
    path => [ "/opt/logstash-data/input/1.log" ]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/output_file.conf
output{  
  file {
     path => ["/opt/logstash-data/output/1.log"]
  }
}

[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/


測試
[root@hftest0001 logstash-1.5.6]# echo "1" >> /opt/logstash-data/input/1.log

結(jié)果
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1

B 兩個input(兩個input是完全一樣的) 一個output

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*

[root@hftest0001 logstash-1.5.6]#  vi conf/input_file.conf
input {
  file {
    path => [ "/opt/logstash-data/input/1.log" ]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/input_file2.conf
input {
  file {
    path => [ "/opt/logstash-data/input/1.log" ]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/output_file.conf
output{  
  file {
     path => ["/opt/logstash-data/output/1.log"]
  }
}

[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/

測試
[root@hftest0001 logstash-1.5.6]# echo "1" >> /opt/logstash-data/input/1.log

注意注意?。。。〗Y(jié)果
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1

繼續(xù)添加數(shù)據(jù)
[root@hftest0001 logstash-1.5.6]# echo "2" >> /opt/logstash-data/input/1.log

[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1
1
2            =>變成了三條數(shù)據(jù),即我們可以看出,兩個input分別產(chǎn)生了一條數(shù)據(jù)。為什么沒有兩個2呢?此時kill logstash 后,

[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1
1
2
2

C 兩個input(兩個input是不一樣的) 一個output

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*

[root@hftest0001 logstash-1.5.6]#  vi conf/input_file.conf
input {
  file {
    path => [ "/opt/logstash-data/input/1.log" ]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/input_file2.conf
input {
  file {
    path => [ "/opt/logstash-data/input/2.log" ]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/output_file.conf
output{  
  file {
     path => ["/opt/logstash-data/output/1.log"]
  }
}

[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/

測試
[root@hftest0001 logstash-1.5.6]# echo "1" >> /opt/logstash-data/input/1.log

結(jié)果
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1

繼續(xù)添加數(shù)據(jù)
[root@hftest0001 logstash-1.5.6]# echo "2" >> /opt/logstash-data/input/2.log

[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1
2

D 一個input 兩個output(兩個output完全一樣)

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*

[root@hftest0001 logstash-1.5.6]#  vi conf/input_file.conf
input {
  file {
    path => [ "/opt/logstash-data/input/1.log" ]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/output_file.conf
output{  
  file {
     path => ["/opt/logstash-data/output/1.log"]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/output_file2.conf
output{  
  file {
     path => ["/opt/logstash-data/output/1.log"]
  }
}

[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/

測試
[root@hftest0001 logstash-1.5.6]# echo "1" >> /opt/logstash-data/input/1.log

注意注意?。?!結(jié)果  即同一條消息被兩個output都寫入相同文件
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1
1

繼續(xù)添加數(shù)據(jù)
[root@hftest0001 logstash-1.5.6]# echo "2" >> /opt/logstash-data/input/2.log

[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1
1
2
2

E 一個input 兩個output(兩個output不一樣)

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*

[root@hftest0001 logstash-1.5.6]#  vi conf/input_file.conf
input {
  file {
    path => [ "/opt/logstash-data/input/1.log" ]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/output_file.conf
output{  
  file {
     path => ["/opt/logstash-data/output/1.log"]
  }
}

[root@hftest0001 logstash-1.5.6]#  vi conf/output_file2.conf
output{  
  file {
     path => ["/opt/logstash-data/output/2.log"]
  }
}

[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/

測試
[root@hftest0001 logstash-1.5.6]# echo "1" >> /opt/logstash-data/input/1.log

注意注意!??!結(jié)果  即同一條消息分別被兩個output寫入不同文件
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/2.log
1

繼續(xù)添加數(shù)據(jù)
[root@hftest0001 logstash-1.5.6]# echo "2" >> /opt/logstash-data/input/2.log

[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
1
2
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/2.log
1
2

F 一個Input,要被寫入不同的

到此,相信大家對“Logstash怎么配置文件”有了更深的了解,不妨來實際操作一番吧!這里是億速云網(wǎng)站,更多相關(guān)內(nèi)容可以進入相關(guān)頻道進行查詢,關(guān)注我們,繼續(xù)學(xué)習(xí)!

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI