欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  网络运营

shell脚本定时统计Nginx下access.log的PV并发送给API保存到数据库

程序员文章站 2022-04-06 22:24:29
1,统计pv和ip 统计当天的pv(page view) cat access.log | sed -n /`date "+%d\/%b\/%y"`/p |wc...

1,统计pv和ip

统计当天的pv(page view)

cat access.log | sed -n /`date "+%d\/%b\/%y"`/p |wc -l

统计某一天的pv

cat access.log | sed -n '/20\/sep\/2018/p' | wc -l

查看日志中访问次数最多的前10个ip

cat access.log.1 |cut -d ' ' -f 1 | sort |uniq -c | sort -nr | awk '{print $0 }' | head -n 10

查看日志中访问次数超过1000次的前10个ip

cat access.log.1 |cut -d ' ' -f 1 | sort |uniq -c | sort -nr | awk '{if($1>1000) print $0 }' | head -n 10

2,curl发送数据

使用curl发送get请求

curl

使用curl发送post请求

curl -d "user=admin&passwd=12345678" http://127.0.0.1:8080/login

使用curl发送post的json数据

curl -h "content-type:application/json" -x post -d '{"user": "admin", "passwd":"12345678"}' http://127.0.0.1:8000/login

使用curl发送动态参数post请求

curl -i -x post -h "'content-type':'application/json'" -d '{"atime":"'$atime'","btime":"'$btime'"}' $url
curl -i -x post -h "'content-type':'application/json'" -d '{"atime":"'${atime}'","btime":"'{$btime}'"}' ${url}

3,shell脚本统计并发送

#!/bin/bash
log_path=/var/log/nginx/access.log
domain="http://127.0.0.1:8080/data/count"
log_date=`date "+%d/%b/%y"`
echo ${log_date}
total_visit=`cat ${log_path} | grep $log_date|wc -l`
curl -d "count=${total_visit}" ${domain}
echo $total_visit

4,服务器端接受并保存到数据库

@requestmapping(value = "/count")
  public void count(string count){
  //业务代码 
}

总结

以上所述是小编给大家介绍的shell脚本定时统计nginx下access.log的pv并发送给api保存到数据库,希望对大家有所帮助