最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Nginx日志的自動(dòng)封異常ip和解封腳本方式

 更新時(shí)間:2025年06月17日 09:15:24   作者:ReadMeFrist  
這篇文章主要介紹了Nginx日志的自動(dòng)封異常ip和解封腳本方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教

Nginx日志的自動(dòng)封異常ip和解封腳本

設(shè)計(jì)思路

1.每五分鐘統(tǒng)計(jì)一次日志異常ip

2.被封的異常ip一小時(shí)后自動(dòng)解封

3.盡量減少對(duì)Nginx的重啟,完成全部判斷后再去考慮是否重啟Nginx進(jìn)程

4.黑名單ip采用非iptable,使用將deny+ip語(yǔ)句加入blockip.conf中(后期解封比較好處理),并且在上述語(yǔ)句塊中nginx.conf中include此文件(blockip.conf可以根據(jù)需要放入http 語(yǔ)句塊、server 語(yǔ)句塊、location 語(yǔ)句塊)

5.blockip.conf設(shè)計(jì)為deny + ip + ;號(hào) + #號(hào) + 時(shí)間戳(五個(gè)可以分割的值)

程序流程圖

程序有兩個(gè)腳本組成

1.python寫的blockip.conf中的ip根據(jù)時(shí)間戳去解封(簡(jiǎn)稱sub),返回一個(gè)是夠要重啟的信號(hào)給shell

2.shell寫的根據(jù)最近五分鐘訪問(wèn)超過(guò)100次(生產(chǎn)環(huán)境建議改成500-1000)的ip,加入到blockip.conf,根據(jù)是否有新ip加入和sub返回值判斷Nginx是否需要重啟

 

腳本

1.nginx_black.sh

#/bin/bash

#/usr/local/python3.9/bin/python3   /root/ai2/sub_oldip.py
reload1=$(/usr/local/python3.9/bin/python3   /root/ai2/sub_oldip.py)   ##調(diào)用python腳本,是否返回重啟
reload2=nores               ##默認(rèn)值不重啟
#echo "$reload1"
sleep 1s
my_log=/root/ai2/log.txt
#logfile=/root                     
logfile=/usr/local/tengine/logs   ##Nginx日志


confdir=/usr/local/tengine/conf/blockip.conf     ##Nginx的blockip.conf目錄
time_sjc=$(date -d  now +%s)                     ##獲取時(shí)間戳
my_log_date=`date +"%Y-%m-%d %H:%M:%S"`               ##日志記錄時(shí)間
start_time=`date -d "-5min" +"%H:%M:%S"`         ##start_time-stop_time的值為Nginx統(tǒng)計(jì)日志的時(shí)間為5分鐘
#echo "$start_time"
stop_time=`date +"%H:%M:%S"`
#echo "$stop_time"

#過(guò)濾出單位之間內(nèi)的日志并統(tǒng)計(jì)最高ip數(shù),請(qǐng)?zhí)鎿Q為你的日志路徑
tac $logfile/host.access.log | awk -v st="$start_time" -v et="$stop_time" ' {t=substr($4,RSTART+14,21);if(t>=st && t<=et) {print $0}}' |awk '{print $1}' |grep -i -v -E "google|yahoo|baidu|msnbot|FeedSky|sogou" |sort | uniq -c | sort -nr |head -20> $logfile/log_ip_top20

ip=`cat $logfile/log_ip_top20 | awk '{if($1>50)print $2}'`    ##統(tǒng)計(jì)排名前10的ip訪問(wèn)次數(shù),100次以上加入黑名單
ip_tmp=`cat $logfile/log_ip_top20 | awk '{if($1>50)print $2}' |head -1`    ##用于if判斷去首行,多行會(huì)報(bào)錯(cuò)
##echo "$ip"

if [ "$ip_tmp" = "" ];then    ##如果ip_tmp為空,打印沒(méi)有黑名單ip
     echo "$my_log_date no black ip " >> $my_log
else
#      for line in $ip                        ##按行讀取黑名單ip,按格式加入到blockip.conf和日志
#         do
#         echo "deny $line ; # $time_sjc" >> $confdir
#         echo "$my_log_date deny $line " >> $my_log
#         done
#      #/usr/local/tengine/sbin/nginx -s reload
#      reload2=res                             ##賦值reload2 需要重啟

      for line in $ip                        ##按行讀取黑名單ip,按格式加入到blockip.conf和日志
         do
           if [ `grep -c "$line" $confdir` -eq '0' ];then
             echo "deny $line ; # $time_sjc" >> $confdir
             echo "$my_log_date deny $line " >> $my_log
             reload2=res
           else
             #line_uptime="deny $line ; # $time_sjc"
             #sed -e "s/.*'$line'.*$/$line_uptime/g" $confdir
             sed  -i /"$line"/d "$confdir"
             echo "deny $line ; # $time_sjc" >> $confdir
             echo "$my_log_date $line is in conf" >> $my_log
           fi
         done

fi
#echo  "$reload1"
#echo  "$reload2"

##如果reload1或者reload2都為res則重啟,否則不重啟;
if [ "$reload1" = "res" ] || [ "$reload2" = "res"  ];then
  /usr/local/tengine/sbin/nginx -s reload          ##替換自己的Nginx環(huán)境變量
  echo "$my_log_date Nginx  reload"  >> $my_log
else
  echo "$my_log_date Nginx no reload"  >> $my_log
fi

2.sub_oldip.py

#!/usr/bin/python3
# chenzhenhua
import string,time,os
time_now = int(time.time())
log_time = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime())
dir = "/usr/local/tengine/conf/blockip.conf"                       ##修改自己的blockip.conf地址
f_log = open("/root/ai2/log.txt","a")                ##本程序日志

with open(dir,"r",encoding="utf-8") as f:     ##讀取blockip.conf
    lines = f.readlines()
    #print(lines)
with open(dir,"w",encoding="utf-8") as f2:    ##把日期小于3600的ip重新寫入回blockip.conf
    for line in lines:
        if line == '' or line == '\n':
            continue
        else:
            old_time = int(line.strip().split()[4])    ##取第五個(gè)值,然后和現(xiàn)在時(shí)間挫進(jìn)行對(duì)比
            time_sjc = time_now -old_time
            ipadd = line.split()[1]
            if time_sjc > 3600:              ###根據(jù)要求調(diào)整秒數(shù),秒數(shù)大于次值不再重新寫入blockip.conf
                line_log = line.strip().split()[1]
                f_log.write("%s sub %s \n"%(log_time,line_log )  )
                continue
            else:
                f2.write(line)

f2.close()
with open(dir,"r",encoding="utf-8") as f3:
    lines2 = f3.readlines()
f3.close()
#time.sleep(0.5)
if lines2 == lines:                                      ###對(duì)比新、老blockip.conf是否一致
    f_log.write("%s py over retrun nores \n" % (log_time))
 #   time.sleep(0.5)
    print('nores')                                       ##返回shell不要求重啟
else:
    f_log.write("%s py over retrun res \n" % (log_time))
 #   time.sleep(0.5)
    print('res')                                         ##返回shell不要求重啟
f_log.close()

測(cè)試

加入每五分鐘執(zhí)行一次

[root@Zabbix ~]# crontab -e
*/5 * * * * /root/ai2/nginx_black.sh

其他服務(wù)器進(jìn)行ab測(cè)試,沒(méi)有的百度安裝

 ab -c 10 -n 100 http://172.16.3.89/test2/

再回到本機(jī)進(jìn)行查看,發(fā)現(xiàn)已經(jīng)加入黑名單中

[root@Zabbix logs]# tail -f /root/ai2/log.txt 
2021-08-14 18:15:02 Nginx no reload
2021-08-14 18:20:01 py over retrun nores 
2021-08-14 18:20:02 no black ip 
2021-08-14 18:20:02 Nginx no reload
2021-08-14 18:25:01 py over retrun nores 
2021-08-14 18:25:02 no black ip 
2021-08-14 18:25:02 Nginx no reload
2021-08-14 18:30:01 py over retrun nores 
2021-08-14 18:30:02 deny 192.168.200.244 
2021-08-14 18:30:02 Nginx  reload
[root@Zabbix logs]# cat /usr/local/tengine/conf/blockip.conf 
deny 192.168.200.244 ; # 1628937002

我們?cè)偃偛臿b測(cè)試服務(wù)器進(jìn)行curl查看,已經(jīng)返回403

總結(jié)

以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。

相關(guān)文章

  • nginx日志配置指令詳解

    nginx日志配置指令詳解

    這篇文章主要介紹了nginx日志配置指令詳解,nginx有一個(gè)非常靈活的日志記錄模式,每個(gè)級(jí)別的配置可以有各自獨(dú)立的訪問(wèn)日志,需要的朋友可以參考下
    2014-07-07
  • Nginx實(shí)現(xiàn)前后端分離

    Nginx實(shí)現(xiàn)前后端分離

    本篇文章是小編整理的關(guān)于Nginx實(shí)現(xiàn)前后端分離的詳細(xì)代碼,如果你對(duì)此有需要,可以參考測(cè)試下。
    2018-02-02
  • nginx修改默認(rèn)運(yùn)行80端口的方法

    nginx修改默認(rèn)運(yùn)行80端口的方法

    這篇文章主要給大家介紹了關(guān)于nginx是如何修改默認(rèn)運(yùn)行80端口的方法,文中介紹的非常詳細(xì),需要的朋友可以參考借鑒,下面來(lái)一起看看吧。
    2017-04-04
  • LINUX中NGINX反向代理下的TOMCAT集群(詳解)

    LINUX中NGINX反向代理下的TOMCAT集群(詳解)

    下面小編就為大家?guī)?lái)一篇LINUX中NGINX反向代理下的TOMCAT集群(詳解)。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
    2017-05-05
  • Nginx可視化nginxWebUI的具體使用

    Nginx可視化nginxWebUI的具體使用

    NginxWebUI 是一款圖形化管理 nginx 配置的工具,可以使用網(wǎng)頁(yè)來(lái)快速配置 nginx單機(jī)與集群的各項(xiàng)功能,本文就來(lái)介紹一下Nginx網(wǎng)頁(yè)配置工具nginxWebUI的具體使用,感興趣的可以了解一下
    2023-08-08
  • Nginx工作模式及代理配置的使用細(xì)節(jié)

    Nginx工作模式及代理配置的使用細(xì)節(jié)

    這篇文章主要為大家介紹了Nginx工作模式及代理配置的使用細(xì)節(jié),有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪
    2022-03-03
  • Nginx 啟用 OCSP Stapling的配置

    Nginx 啟用 OCSP Stapling的配置

    本篇文章主要介紹了Nginx 啟用 OCSP Stapling的配置,小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
    2018-03-03
  • Nginx+Tomcat高性能負(fù)載均衡集群搭建教程

    Nginx+Tomcat高性能負(fù)載均衡集群搭建教程

    這篇文章主要為大家詳細(xì)介紹了Nginx+Tomcat高性能負(fù)載均衡集群搭建教程,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下
    2018-04-04
  • nginx php-fpm中啟用慢日志配置(用于檢測(cè)執(zhí)行較慢的PHP腳本)

    nginx php-fpm中啟用慢日志配置(用于檢測(cè)執(zhí)行較慢的PHP腳本)

    這篇文章主要介紹了nginx php-fpm中啟用慢日志配置,php-fpm慢日志slowlog設(shè)置可以讓我們很好的看見哪些php進(jìn)程速度太慢而導(dǎo)致的網(wǎng)站問(wèn)題,可以讓我們方便的找到問(wèn)題的所在,需要的朋友可以參考下
    2014-05-05
  • Nginx配置統(tǒng)計(jì)流量帶寬請(qǐng)求及記錄實(shí)時(shí)請(qǐng)求狀態(tài)的方法

    Nginx配置統(tǒng)計(jì)流量帶寬請(qǐng)求及記錄實(shí)時(shí)請(qǐng)求狀態(tài)的方法

    這篇文章主要介紹了Nginx中配置統(tǒng)計(jì)流量帶寬請(qǐng)求及記錄實(shí)時(shí)請(qǐng)求狀態(tài)的方法,分別用到了ngx_req_status和ngx_realtime_request模塊,需要的朋友可以參考下
    2016-01-01

最新評(píng)論

微博| 尉犁县| 曲松县| 桃江县| 伊川县| 泰安市| 溧水县| 通州区| 包头市| 禹州市| 墨竹工卡县| 青川县| 闸北区| 台东县| 靖边县| 长治县| 东丰县| 顺平县| 本溪市| 漳平市| 马尔康县| 澄迈县| 拜泉县| 遂昌县| 合川市| 新源县| 富源县| 聂荣县| 阳曲县| 灵武市| 太白县| 深泽县| 武宣县| 安阳市| 南通市| 游戏| 衡东县| 柳河县| 诏安县| 恭城| 嵊州市|