shell版Nginx日志蜘蛛爬取查看脚本

shell版nginx日志蜘蛛爬取查看脚本

用之前改一下nginx日志的路径即可
如果 更多的蜘蛛 自己在 代码蜘蛛ua数组里加即可

#!/bin/bash
 
m="$(date +%m)"
case $m in
  "01") m='jan';;
  "02") m='feb';;
  "03") m='mar';;
  "04") m='apr';;
  "05") m='may';;
  "06") m='june';;
  "07") m='july';;
  "08") m='aug';;
  "09") m='sept';;
  "10") m='oct';;
  "11") m='nov';;
  "12") m='dec';;
esac
d="$(date +%d)"
 
spider=(
  googlebot
  baiduspider
  sogou
  yisouspider
  360spider
)
for i in ${spider[*]}; do
  echo -e "$i \t" `cat 此处修改为nginx访问log |grep $d/$m|grep $i|wc -l`
done

以上所述就是本文的全部内容了，希望能对大家熟悉shell脚本有所帮助。