shell腳本如何實現(xiàn)定時統(tǒng)計Nginx下access.log的PV并發(fā)送給API保存到數(shù)據(jù)庫

這篇文章主要介紹shell腳本如何實現(xiàn)定時統(tǒng)計Nginx下access.log的PV并發(fā)送給API保存到數(shù)據(jù)庫，文中介紹的非常詳細(xì)，具有一定的參考價值，感興趣的小伙伴們一定要看完！

1，統(tǒng)計PV和IP

統(tǒng)計當(dāng)天的PV（Page View）

cat access.log | sed -n /`date "+%d\/%b\/%Y"`/p |wc -l

統(tǒng)計某一天的PV

cat access.log | sed -n '/20\/Sep\/2018/p' | wc -l

查看日志中訪問次數(shù)最多的前10個IP

cat access.log.1 |cut -d ' ' -f 1 | sort |uniq -c | sort -nr | awk '{print $0 }' | head -n 10

查看日志中訪問次數(shù)超過1000次的前10個IP

cat access.log.1 |cut -d ' ' -f 1 | sort |uniq -c | sort -nr | awk '{if($1>1000) print $0 }' | head -n 10

2，curl發(fā)送數(shù)據(jù)

使用curl發(fā)送GET請求

curl http://127.0.0.1:8080/login?admin&passwd=12345678

使用curl發(fā)送POST請求

curl -d "user=admin&passwd=12345678" http://127.0.0.1:8080/login

使用curl發(fā)送POST的JSON數(shù)據(jù)

curl -H "Content-Type:application/json" -X POST -d '{"user": "admin", "passwd":"12345678"}' http://127.0.0.1:8000/login

使用curl發(fā)送動態(tài)參數(shù)POST請求

curl -i -X POST -H "'Content-type':'application/json'" -d '{"ATime":"'$atime'","BTime":"'$btime'"}' $url
curl -i -X POST -H "'Content-type':'application/json'" -d '{"ATime":"'${atime}'","BTime":"'{$btime}'"}' ${url}

3，shell腳本統(tǒng)計并發(fā)送

#!/bin/bash
log_path=/var/log/nginx/access.log
domain="http://127.0.0.1:8080/data/count"
log_date=`date "+%d/%b/%Y"`
echo ${log_date}
total_visit=`cat ${log_path} | grep $log_date|wc -l`
curl -d "count=${total_visit}" ${domain}
echo $total_visit

4，服務(wù)器端接受并保存到數(shù)據(jù)庫

@RequestMapping(value = "/count")
  public void count(String count){
  //業(yè)務(wù)代碼 
}

以上是“shell腳本如何實現(xiàn)定時統(tǒng)計Nginx下access.log的PV并發(fā)送給API保存到數(shù)據(jù)庫”這篇文章的所有內(nèi)容，感謝各位的閱讀！希望分享的內(nèi)容對大家有幫助，更多相關(guān)知識，歡迎關(guān)注億速云行業(yè)資訊頻道！