自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

基于Centos7系統(tǒng)一鍵部署EFK服務(wù)，值得收藏

作者：波波說運維
系統(tǒng) Linux
最近平臺EFK版本均作了升級，平臺采用EFK(ElasticSearch-7.6.2 + FileBeat-7.6.2 + Kibana-7.6.2)架構(gòu)。這里建議三個組件主次版本保持一致?？紤]到服務(wù)器比較多，所以寫成腳本來批量部署。

 最近平臺EFK版本均作了升級，平臺采用EFK(ElasticSearch-7.6.2 + FileBeat-7.6.2 + Kibana-7.6.2)架構(gòu)。這里建議三個組件主次版本保持一致?？紤]到服務(wù)器比較多，所以寫成腳本來批量部署。

[[326087]]

腳本內(nèi)容大家看一下function就行了..

架構(gòu)

EFK采用集中式的日志管理架構(gòu)

  • elasticsearch：一個開源分布式搜索引擎，提供搜集、分析、存儲數(shù)據(jù)三大功能。它的特點有：分布式，零配置，自動發(fā)現(xiàn)，索引自動分片，索引副本機制，restful風格接口，多數(shù)據(jù)源，自動搜索負載等。
  • kibana：可以為Logstash 、Beats和ElasticSearch提供友好的日志分析Web 界面，可以幫助匯總、分析和搜索重要數(shù)據(jù)日志。
  • filebeat：輕量級日志采集器。需要在每個應(yīng)用服務(wù)器配置filebeat，來采集日志，并輸出到elasticsearch

 

基于centos7系統(tǒng)一鍵部署EFK服務(wù)，值得收藏

 

一鍵部署KIBANA腳本

  1. function install_es7_el7()  
  2. { 
  3.     echo "" 
  4.   echo -e "\033[33m****************************************************安裝ElasticSearch 7.6.2*****************************************************\033[0m"  
  5.   #action "********初始化JAVA環(huán)境********" /bin/true 
  6.   #install_jdk 
  7.  
  8.   #下載包 
  9.     if [ -f /opt/elasticsearch-7.6.2-x86_64.rpm ] && [ -f /opt/elasticsearch-analysis-ik-7.6.2.zip ] ;then 
  10.         echo "*****存在ElasticSearch 7.6.2安裝包，無需下載*****" 
  11.     else 
  12.       ping -c 4 artifacts.elastic.co >/dev/null 2>&1 
  13.       if [ $? -eq 0 ];then 
  14.         wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.6.2-x86_64.rpm -O /opt/elasticsearch-7.6.2-x86_64.rpm 
  15.         wget https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.6.2/elasticsearch-analysis-ik-7.6.2.zip  -O /opt/elasticsearch-analysis-ik-7.6.2.zip    
  16.       else 
  17.         echo "please download ES7 package manual !" 
  18.         exit $? 
  19.       fi  
  20.   fi 
  21.  
  22.   #安裝es7.6  
  23.   action "********安裝ElasticSearch 7.6.2服務(wù)********" /bin/true 
  24.   chmod u+x /opt/elasticsearch-7.6.2-x86_64.rpm && rpm -ivh /opt/elasticsearch-7.6.2-x86_64.rpm 
  25.    
  26.   #建目錄及授權(quán) 
  27.   mkdir -p $ES_HOME/data &&  mkdir -p $ES_HOME/log 
  28.   chown -R elasticsearch:elasticsearch $ES_HOME && chmod -R 755 $ES_HOME 
  29.    
  30.   #修改ES配置文件 
  31.   cp /etc/elasticsearch/elasticsearch.yml /etc/elasticsearch/elasticsearch.yml_bak &>/dev/null  
  32. cat > /etc/elasticsearch/elasticsearch.yml << EOF  
  33. cluster.name: es-cluster 
  34. # 設(shè)定本機節(jié)點名  
  35. node.name: es_node 
  36. # 設(shè)定集群主節(jié)點清單 
  37. cluster.initial_master_nodes: ["es_node"]  
  38. path.data: ${ES_HOME}/data 
  39. path.logs: ${ES_HOME}/log 
  40. bootstrap.memory_lock: false 
  41. bootstrap.system_call_filter: false 
  42. # 允許從其它機器訪問 
  43. network.host: 0.0.0.0 
  44. http.port: ${ES_PORT} 
  45. discovery.zen.ping.unicast.hosts: ["${ES_IP}:${ES_PORT}"] 
  46. EOF 
  47.     
  48.   #安裝分詞器：ik-analyzer插件 
  49.   #默認情況下，ES使用內(nèi)置的標準分詞器，對文本進行解析。但是對于中文，其會拆解為一個一個的漢字，最終失去了分詞的意義，所以安裝分詞器：ik-analyzer插件 
  50.   action "********安裝ik-analyzer插件********" /bin/true 
  51.   mkdir -p /usr/share/elasticsearch/plugins/ik 
  52.   unzip /opt/elasticsearch-analysis-ik-7.6.2.zip -d /usr/share/elasticsearch/plugins/ik/ &>/dev/null  
  53.   chown -R elasticsearch:elasticsearch /usr/share/elasticsearch/plugins/ &&  chmod -R 755  /usr/share/elasticsearch/plugins/ 
  54.   sleep 2 
  55. #在filebeat配置文件中為索引模板添加默認分詞器屬性。未來新創(chuàng)建的索引均引用此屬性: 
  56. #setup.template.settings: 
  57. #  index.analysis.analyzer.default.type: "ik_max_word" 
  58. #  index.analysis.analyzer.default_search.type: "ik_max_word" 
  59. #setup.template.overwrite: true 
  60. #在Linux終端中執(zhí)行如下命令，為現(xiàn)有所有索引，設(shè)置默認分詞器屬性: 
  61. #curl -X POST "172.16.20.143:9200/_all/_close" 
  62. #curl -X PUT  -H'Content-Type: application/json' 'http://172.16.20.143:9200/_all/_settings?preserve_existing=true' -d '{ 
  63. #  "index.analysis.analyzer.default.type" : "ik_max_word", 
  64. #  "index.analysis.analyzer.default_search.type" : "ik_max_word" 
  65. #}' 
  66. #curl -X POST "172.16.20.143:9200/_all/_open" 
  67.  
  68.  
  69.   #啟動ES并初始化數(shù)據(jù) 
  70.   action "********啟動es并初始化數(shù)據(jù)********" /bin/true 
  71.   systemctl daemon-reload && systemctl enable elasticsearch.service  
  72.   systemctl restart elasticsearch.service 
  73.   es_version=`curl -XGET ${ES_IP}:${ES_PORT}` 
  74.   echo -e "\033[33m**************************************************完成ElasticSearch 7.6.2安裝***************************************************\033[0m" 
  75. cat > /tmp/es7.log  << EOF 
  76. ES服務(wù)器IP： ${ES_IP} 
  77. ES服務(wù)器端口:${ES_PORT} 
  78. ES數(shù)據(jù)目錄： ${ES_HOME}/data 
  79. ES日志目錄： ${ES_HOME}/log 
  80. ES詳細信息： ${es_version} 
  81. EOF 
  82.   cat /tmp/es7.log 
  83.   echo -e "\e[1;31m 以上信息10秒后消失，保存在/tmp/es7.log文件下 \e[0m" 
  84.   echo -e "\033[33m************************************************************************************************************************\033[0m" 
  85.   echo "" 
  86.   sleep 10 
  87. } 

 

基于centos7系統(tǒng)一鍵部署EFK服務(wù)，值得收藏

 

一鍵部署Elasticsearch腳本

  1. function install_es7_el7()  
  2. { 
  3.     echo "" 
  4.   echo -e "\033[33m****************************************************安裝ElasticSearch 7.6.2*****************************************************\033[0m"  
  5.   #action "********初始化JAVA環(huán)境********" /bin/true 
  6.   #install_jdk 
  7.  
  8.   #下載包 
  9.     if [ -f /opt/elasticsearch-7.6.2-x86_64.rpm ] && [ -f /opt/elasticsearch-analysis-ik-7.6.2.zip ] ;then 
  10.         echo "*****存在ElasticSearch 7.6.2安裝包，無需下載*****" 
  11.     else 
  12.       ping -c 4 artifacts.elastic.co >/dev/null 2>&1 
  13.       if [ $? -eq 0 ];then 
  14.         wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.6.2-x86_64.rpm -O /opt/elasticsearch-7.6.2-x86_64.rpm 
  15.         wget https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.6.2/elasticsearch-analysis-ik-7.6.2.zip  -O /opt/elasticsearch-analysis-ik-7.6.2.zip    
  16.       else 
  17.         echo "please download ES7 package manual !" 
  18.         exit $? 
  19.       fi  
  20.   fi 
  21.  
  22.   #安裝es7.6  
  23.   action "********安裝ElasticSearch 7.6.2服務(wù)********" /bin/true 
  24.   chmod u+x /opt/elasticsearch-7.6.2-x86_64.rpm && rpm -ivh /opt/elasticsearch-7.6.2-x86_64.rpm 
  25.    
  26.   #建目錄及授權(quán) 
  27.   mkdir -p $ES_HOME/data &&  mkdir -p $ES_HOME/log 
  28.   chown -R elasticsearch:elasticsearch $ES_HOME && chmod -R 755 $ES_HOME 
  29.    
  30.   #修改ES配置文件 
  31.   cp /etc/elasticsearch/elasticsearch.yml /etc/elasticsearch/elasticsearch.yml_bak &>/dev/null  
  32. cat > /etc/elasticsearch/elasticsearch.yml << EOF  
  33. cluster.name: es-cluster 
  34. # 設(shè)定本機節(jié)點名  
  35. node.name: es_node 
  36. # 設(shè)定集群主節(jié)點清單 
  37. cluster.initial_master_nodes: ["es_node"]  
  38. path.data: ${ES_HOME}/data 
  39. path.logs: ${ES_HOME}/log 
  40. bootstrap.memory_lock: false 
  41. bootstrap.system_call_filter: false 
  42. # 允許從其它機器訪問 
  43. network.host: 0.0.0.0 
  44. http.port: ${ES_PORT} 
  45. discovery.zen.ping.unicast.hosts: ["${ES_IP}:${ES_PORT}"] 
  46. EOF 
  47.     
  48.   #安裝分詞器：ik-analyzer插件 
  49.   #默認情況下，ES使用內(nèi)置的標準分詞器，對文本進行解析。但是對于中文，其會拆解為一個一個的漢字，最終失去了分詞的意義，所以安裝分詞器：ik-analyzer插件 
  50.   action "********安裝ik-analyzer插件********" /bin/true 
  51.   mkdir -p /usr/share/elasticsearch/plugins/ik 
  52.   unzip /opt/elasticsearch-analysis-ik-7.6.2.zip -d /usr/share/elasticsearch/plugins/ik/ &>/dev/null  
  53.   chown -R elasticsearch:elasticsearch /usr/share/elasticsearch/plugins/ &&  chmod -R 755  /usr/share/elasticsearch/plugins/ 
  54.   sleep 2 
  55. #在filebeat配置文件中為索引模板添加默認分詞器屬性。未來新創(chuàng)建的索引均引用此屬性: 
  56. #setup.template.settings: 
  57. #  index.analysis.analyzer.default.type: "ik_max_word" 
  58. #  index.analysis.analyzer.default_search.type: "ik_max_word" 
  59. #setup.template.overwrite: true 
  60. #在Linux終端中執(zhí)行如下命令，為現(xiàn)有所有索引，設(shè)置默認分詞器屬性: 
  61. #curl -X POST "172.16.20.143:9200/_all/_close" 
  62. #curl -X PUT  -H'Content-Type: application/json' 'http://172.16.20.143:9200/_all/_settings?preserve_existing=true' -d '{ 
  63. #  "index.analysis.analyzer.default.type" : "ik_max_word", 
  64. #  "index.analysis.analyzer.default_search.type" : "ik_max_word" 
  65. #}' 
  66. #curl -X POST "172.16.20.143:9200/_all/_open" 
  67.  
  68.  
  69.   #啟動ES并初始化數(shù)據(jù) 
  70.   action "********啟動es并初始化數(shù)據(jù)********" /bin/true 
  71.   systemctl daemon-reload && systemctl enable elasticsearch.service  
  72.   systemctl restart elasticsearch.service 
  73.   es_version=`curl -XGET ${ES_IP}:${ES_PORT}` 
  74.   echo -e "\033[33m**************************************************完成ElasticSearch 7.6.2安裝***************************************************\033[0m" 
  75. cat > /tmp/es7.log  << EOF 
  76. ES服務(wù)器IP： ${ES_IP} 
  77. ES服務(wù)器端口:${ES_PORT} 
  78. ES數(shù)據(jù)目錄： ${ES_HOME}/data 
  79. ES日志目錄： ${ES_HOME}/log 
  80. ES詳細信息： ${es_version} 
  81. EOF 
  82.   cat /tmp/es7.log 
  83.   echo -e "\e[1;31m 以上信息10秒后消失，保存在/tmp/es7.log文件下 \e[0m" 
  84.   echo -e "\033[33m************************************************************************************************************************\033[0m" 
  85.   echo "" 
  86.   sleep 10 
  87. } 

 

基于centos7系統(tǒng)一鍵部署EFK服務(wù)，值得收藏

 

一鍵部署filebeat腳本

  1. function install_filebeat7_el7()  
  2. { 
  3.     echo "" 
  4.   echo -e "\033[33m****************************************************安裝Filebeat 7.6.2*****************************************************\033[0m"  
  5.  
  6.   #下載包 
  7.     if [ -f /opt/filebeat-7.6.2-x86_64.rpm ] ;then 
  8.         echo "*****存在Filebeat 7.6.2安裝包，無需下載*****" 
  9.     else 
  10.       ping -c 4 artifacts.elastic.co >/dev/null 2>&1 
  11.       if [ $? -eq 0 ];then 
  12.         wget https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-7.6.2-x86_64.rpm -O /opt/filebeat-7.6.2-x86_64.rpm 
  13.       else 
  14.         echo "please download Filebeat7.6 package manual !" 
  15.         exit $? 
  16.       fi  
  17.   fi 
  18.  
  19.   #安裝filebeat7.6  
  20.   action "********安裝filebeat 7.6.2服務(wù)********" /bin/true 
  21.   chmod u+x /opt/filebeat-7.6.2-x86_64.rpm && rpm -ivh /opt/filebeat-7.6.2-x86_64.rpm 
  22.    
  23.   #修改kibana配置文件 
  24.   cp /etc/filebeat/filebeat.yml /etc/filebeat/filebeat.yml_bak  
  25. cat > /etc/filebeat/filebeat.yml << EOF  
  26. filebeat.inputs: 
  27. - type: log 
  28.   enabled: true 
  29.   paths: 
  30.     - /lcp_logs/*.log 
  31. filebeat.config.modules: 
  32.   path: /etc/filebeat/modules.d/*.yml 
  33.   reload.enabled: false 
  34. setup.template.settings: 
  35.   #number_of_shards  是數(shù)據(jù)分片數(shù)，默認為5，有時候設(shè)置為3 
  36.   index.number_of_shards: 3 
  37.   index.analysis.analyzer.default.type: "ik_max_word" 
  38.   index.analysis.analyzer.default_search.type: "ik_max_word" 
  39. setup.template.overwrite: true 
  40. setup.kibana: 
  41.   host: "${KIBANA_IP}:${KIBANA_PORT}" 
  42. output.elasticsearch: 
  43.   hosts: ["${ES_IP}:${ES_PORT}"] 
  44.   ilm.enabled: true 
  45.   ilm.rollover_alias: "fsl_uat.prod1" 
  46.   ilm.pattern: "{now/d}-000001" 
  47. processors: 
  48.   - add_host_metadata: ~ 
  49.   - add_cloud_metadata: ~ 
  50. EOF 
  51.  
  52.   #啟動filebeat并初始化數(shù)據(jù) 
  53.   action "********啟動filebeat并初始化數(shù)據(jù)********" /bin/true 
  54.   systemctl daemon-reload && systemctl enable filebeat.service  
  55.   systemctl restart filebeat.service 
  56.   #nohup ./filebeat -e -c filebeat.yml >/dev/null 2>&1 & 
  57.    
  58.   echo -e "\033[33m**************************************************完成Filebeat 7.6.2安裝***************************************************\033[0m" 
  59. cat > /tmp/filebeat7.log << EOF 
  60. filebeat版本：   7.6.2 
  61. filebeat路徑:    /usr/bin/filebeat 
  62. filebeat配置kibana： ${KIBANA_IP}:${KIBANA_PORT} 
  63. filebeat配置elasticsearch： ${ES_IP}:${ES_PORT} 
  64. EOF 
  65.   cat /tmp/filebeat7.log 
  66.   echo -e "\e[1;31m 以上信息10秒后消失，保存在/tmp/filebeat7.log文件下 \e[0m" 
  67.   echo -e "\033[33m************************************************************************************************************************\033[0m" 
  68.   echo "" 
  69.   sleep 10 
  70. } 

 

基于centos7系統(tǒng)一鍵部署EFK服務(wù)，值得收藏

 

 

責任編輯：武曉燕 來源： 今日頭條
Centos7EFK部署
相關(guān)推薦

2019-12-02 08:58:09

SQL腳本語言MySQL

2022-05-23 07:48:10

zabbix監(jiān)控CentOS7

2019-06-27 10:17:40

Centos7Pinpoint監(jiān)控

2025-04-02 09:10:00

LinuxShell腳本

2011-09-15 19:05:49

windows 7一鍵關(guān)機

2019-09-03 09:22:08

數(shù)據(jù)庫Redis算法

2021-04-30 06:12:28

Windows10操作系統(tǒng)微軟

2021-04-30 23:52:41

Windows 10Windows微軟

2022-02-14 07:47:30

巡風CentOS7漏洞掃描

2014-04-01 15:31:14

2020-03-31 15:03:56

Spring Boot代碼Java

2023-06-15 10:00:00

Jenkins任務(wù)操作

2023-09-12 07:06:04

2024-04-08 13:59:03

大模型Replicate

2021-08-03 15:25:09

數(shù)據(jù)庫Sharding SpSQL

2021-12-02 07:50:29

分支服務(wù)git worktre

2023-09-14 20:55:52

NodeJSDocker

2015-02-09 15:25:52

換膚

2015-06-09 10:36:13

Cloud FoundAzurePaaS
點贊
收藏

51CTO技術(shù)棧公眾號