溫馨提示×
您好，登錄后才能下訂單哦！
點擊 登錄注冊 即表示同意《億速云用戶服務條款》
您好，登錄后才能下訂單哦！
這篇文章主要介紹了ELK之Logstash如何安裝與導入數(shù)據(jù)，具有一定借鑒價值，感興趣的朋友可以參考下，希望大家閱讀完這篇文章之后大有收獲，下面讓小編帶著大家一起了解一下。
下載地址：https://grouplens.org/datasets/movielens/
首先去官網(wǎng)下載 Logstash 安裝包：https://www.elastic.co/downloads/logstash
如果下載速度太慢可以選用這個代理地址下載：http://mirror.azk8s.cn/elastic/logstash/
下載完安裝包并解壓進入 config 目錄：
同時配置如下內(nèi)容,你只需要按照你的數(shù)據(jù)集的路徑改一下配置文件中最開始的path即可：
input {
file {
path => "/Users/tanjian/Desktop/logstash-7.6.1/movielens/ml-latest-small/movies.csv" # 這里指定數(shù)據(jù)集路徑
start_position => "beginning"
sincedb_path => "/dev/null"
}
}
filter {
csv {
separator => ","
columns => ["id","content","genre"]
}
mutate {
split => { "genre" => "|" }
remove_field => ["path", "host","@timestamp","message"]
}
mutate {
split => ["content", "("]
add_field => { "title" => "%{[content][0]}"}
add_field => { "year" => "%{[content][1]}"}
}
mutate {
convert => {
"year" => "integer"
}
strip => ["title"]
remove_field => ["path", "host","@timestamp","message","content"]
}
}
output {
elasticsearch {
hosts => "http://localhost:9200"
index => "movies"
document_id => "%{id}"
}
stdout {}
}
配置好上面的 logstash.conf 文件后，我們就可以啟動 Logstash 并開始導入數(shù)據(jù)了：
sudo ./bin/logstash -f config/logstash.conf
如下圖 Logstash 日志所示，正在導入數(shù)據(jù)集：
在查看數(shù)據(jù)之前，我們需要打開 http://localhost:5601 通過 Kibana 創(chuàng)建一個 Index Pattern：
之后，我們就可以通過 Discover 去查看我們的數(shù)據(jù)了：
剩下的就交給你自己折騰吧，你可以去 Dev Tools 通過 QSL 語法搜索數(shù)據(jù)熟悉一下語法。
感謝你能夠認真閱讀完這篇文章，希望小編分享的“ELK之Logstash如何安裝與導入數(shù)據(jù)”這篇文章對大家有幫助，同時也希望大家多多支持億速云，關注億速云行業(yè)資訊頻道，更多相關知識等著你來學習!
免責聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點不代表本網(wǎng)站立場，如果涉及侵權(quán)請聯(lián)系站長郵箱：is@yisu.com進行舉報，并提供相關證據(jù)，一經(jīng)查實，將立刻刪除涉嫌侵權(quán)內(nèi)容。
