溫馨提示×

您好，登錄后才能下訂單哦！

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

Elasticsearch7.6.2如何在Docker環(huán)境中安裝

發(fā)布時(shí)間：2020-11-19 14:44:56 來源：億速云 閱讀：211 作者：Leah 欄目：開發(fā)技術(shù)

Elasticsearch7.6.2如何在Docker環(huán)境中安裝？很多新手對(duì)此不是很清楚，為了幫助大家解決這個(gè)難題，下面小編將為大家詳細(xì)講解，有這方面需求的人可以來學(xué)習(xí)下，希望你能有所收獲。

安裝Elasticsearch

注意：使用版本為 7.6.2，你可以選擇其他版本

拉取鏡像

docker pull elasticsearch:7.6.2

啟動(dòng)容器

docker run --restart=always -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" \

-e ES_JAVA_OPTS="-Xms512m -Xmx512m" \

--name='elasticsearch' --cpuset-cpus="1" -m 2G -d elasticsearch:7.6.2

說明：

1. -v /opt/hanlp:/opt/hanlp如果使用了hanlp的分詞，所以需要掛載詞庫

2. ES_JAVA_OPTS可以設(shè)置參數(shù)

3. 單節(jié)點(diǎn)啟動(dòng)

訪問地址：http://172.18.63.211:9200

Elasticsearch7.6.2如何在Docker環(huán)境中安裝

插件安裝

安裝ik 分詞器

下載對(duì)應(yīng)的版本：elasticsearch-analysis-ik

為什么安裝IK，輕量級(jí)。配置好詞庫也是可以用來中文分詞，HanLP重量級(jí)，內(nèi)置算法較多，不適合單獨(dú)分詞使用。

# 離線安裝，下載對(duì)應(yīng)插件zip
# https://github.com/medcl/elasticsearch-analysis-ik
docker cp /opt/elasticsearch-analysis-ik-7.6.2.zip elasticsearch:/opt
docker exec -it elasticsearch bash
cd plugins/
mkdir analysis-ik
unzip -d /usr/share/elasticsearch/plugins/analysis-ik/ /opt/elasticsearch-analysis-ik-7.6.2.zip 
exit
docker restart elasticsearch

Elasticsearch7.6.2如何在Docker環(huán)境中安裝

自定義詞庫

自定義字典

遠(yuǎn)程詞庫

常用維護(hù)命令

# 查看所有索引信息
GET /_cat/indices?pretty
# 節(jié)點(diǎn)監(jiān)控
GET /_cat/health?pretty
# 安裝了哪些插件
GET _cat/plugins

其他命令在用的時(shí)候再次整理，本文主要講安裝和部署。

監(jiān)控和開發(fā)工具Kibana

Kibana 是為 Elasticsearch設(shè)計(jì)的開源分析和可視化平臺(tái)。你可以使用 Kibana 來搜索，查看存儲(chǔ)在 Elasticsearch 索引中的數(shù)據(jù)并與之交互。你可以很容易實(shí)現(xiàn)高級(jí)的數(shù)據(jù)分析和可視化，以圖標(biāo)的形式展現(xiàn)出來。

我們的服務(wù)器IP是172.18.63.211

docker run --restart=always --link elasticsearch:elasticsearch --name kibana -p 5601:5601 -d kibana:7.6.2

進(jìn)入容器修改配置文件kibana.yml

docker exec -it kibana bash
vi config/kibana.yml
########################
# 指定es的地址
elasticsearch.hosts: ["http://172.18.63.211:9200"]
# 中文化
i18n.locale: "zh-CN"
# 修改外網(wǎng)訪問 可選
server.host: "0.0.0.0"
exit
########################
docker restart kibana

打開地址：http://172.18.63.211:5601

測(cè)試分詞工具

POST _analyze
{
 "text": "檢測(cè)甘藍(lán)型油菜抗磺酰脲類除草劑基因BnALS3R的引物與應(yīng)用",
 "analyzer": "hanlp"
}

新增索引庫

PUT achievement
{
 "settings": {
 "number_of_shards": 1,
 "number_of_replicas": 1
 }
}

PUT achievement/_mapping
{
 "properties": {
 "id": {
  "type": "text"
 },
 "owner": {
  "type": "text"
 },
 "title": {
  "type": "text",
  "analyzer": "hanlp"
 },
 "description": {
  "type": "text",
  "analyzer": "hanlp"
 },
 "update_time":{
  "type": "date"
 }
 }
}

數(shù)據(jù)同步Logstash

用于收集、解析和轉(zhuǎn)換日志，同步數(shù)據(jù)等。

安裝

docker pull logstash:7.5.0

配置文件目錄

mkdir -p /usr/local/logstash/config
cd /usr/local/logstash/config
touch logstash.yml
vi log4j2.properties
#####添加以下內(nèi)容
logger.elasticsearchoutput.name = logstash.outputs.elasticsearch
logger.elasticsearchoutput.level = debug
#####
vi pipelines.yml
####
- pipeline.id: logstash-match
 path.config: "/usr/share/logstash/config/*.conf"
 pipeline.workers: 3
####

同時(shí)需要將MySQL的驅(qū)動(dòng)包放入配置文件中。

Elasticsearch7.6.2如何在Docker環(huán)境中安裝

再創(chuàng)建配置文件即可

這里給一個(gè)例子，是定時(shí)同步mysql數(shù)據(jù)到es中的。*

# logstash-mysql-es.conf
input{
 jdbc{
 jdbc_driver_class => "com.mysql.cj.jdbc.Driver"
 jdbc_connection_string => "jdbc:mysql://172.18.63.211:3306/open_intelligence?characterEncoding=utf8&serverTimezone=Asia/Shanghai"
 jdbc_user => "docker"
 jdbc_password => "docker@12345"
 jdbc_paging_enabled => true
 jdbc_page_size => 10000
 jdbc_fetch_size => 10000
 connection_retry_attempts => 3
 connection_retry_attempts_wait_time => 1
 jdbc_pool_timeout => 5
 use_column_value => true
 tracking_column => "update_time"
 tracking_column_type => "timestamp"
 record_last_run => true
 last_run_metadata_path => "/usr/share/logstash/mysql/goods_achievement"
 statement => "select * from goods_achievement where update_time > :sql_last_value"
 schedule => "* */30 * * * *"
 }
}

filter{
 mutate {
 split => { "feature1" => ";" }
 }
 mutate {
 split => { "feature2" => ";" }
 }
 mutate {
 split => { "feature3" => ";" }
 }
}

output {
 elasticsearch {
 document_id => "%{id}"
 index => "goods_achievement"
 hosts => ["http://172.18.63.211:9200"]
 }
}

啟動(dòng)

docker run -d -p 5044:5044 -p 9600:9600 -it \
-e TZ=Asia/Shanghai \
--name logstash --restart=always \
-v /usr/local/logstash/config/:/usr/share/logstash/config/ \
-v /usr/local/logstash/mysql/:/usr/share/logstash/mysql/ \
--privileged=true \
logstash:7.6.2

如果報(bào)錯(cuò)了

Error: com.mysql.cj.jdbc.Driver not loaded. :jdbc_driver_library is not set, are you sure you included the proper driver client libraries in your classpath?

可以嘗試將驅(qū)動(dòng)器即mysql-connector-java-xxxx-bin.jar拷貝到 logstash目錄\logstash-core\lib\jars 下

如：

cd /usr/local/logstash/config

docker cp mysql-connector-java-8.0.17.jar logstash:/usr/share/logstash/logstash-core/lib/jars

檢測(cè)配置文件

bin/logstash -f /usr/local/logstash/config/mysql-es-patent.conf -t

看完上述內(nèi)容是否對(duì)您有幫助呢？如果還想對(duì)相關(guān)知識(shí)有進(jìn)一步的了解或閱讀更多相關(guān)文章，請(qǐng)關(guān)注億速云行業(yè)資訊頻道，感謝您對(duì)億速云的支持。

向AI問一下細(xì)節(jié)

免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱：is@yisu.com進(jìn)行舉報(bào)，并提供相關(guān)證據(jù)，一經(jīng)查實(shí)，將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI
助
手