Nginx?限流和流量控制的實現(xiàn)
Nginx 提供了強大的流量控制功能。限制客戶端在特定時間段內(nèi)的請求次數(shù)，以保護(hù)服務(wù)器資源，防止因過載而導(dǎo)致的性能下降甚至服務(wù)不可用。限流在防止DDoS攻擊、爬蟲過度抓取和濫用API等方面有著重要作用。這里將詳細(xì)介紹Nginx限流的工作原理、配置方法、各種限流策略以及實際應(yīng)用。
一、Nginx限流的工作原理
Nginx的限流功能主要通過limit_req和limit_conn模塊實現(xiàn)：
limit_req模塊： 用于限制每秒的請求次數(shù)。該模塊基于令牌桶（Token Bucket）算法，每個請求在處理前必須從令牌桶中獲取一個令牌，如果沒有令牌可用，則請求被延遲或拒絕。limit_conn模塊： 用于限制同時連接數(shù)。該模塊控制每個特定鍵（如IP地址或用戶）允許的最大并發(fā)連接數(shù)。
二、limit_req模塊配置
limit_req模塊通過定義共享內(nèi)存區(qū)域來存儲限流信息，并在特定的上下文中應(yīng)用限流策略。
1. 定義共享內(nèi)存區(qū)域
首先，需要定義一個共享內(nèi)存區(qū)域來存儲請求的計數(shù)信息?？梢允褂?code>limit_req_zone指令來完成。
語法：
limit_req_zone $variable zone=name:size rate=rate;
示例：
http {
limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
server {
location / {
limit_req zone=one burst=5 nodelay;
proxy_pass http://backend;
}
}
}
在上面的示例中：
$binary_remote_addr：以二進(jìn)制格式表示的客戶端IP地址。zone=one:10m：定義名為one的共享內(nèi)存區(qū)域，大小為10MB。rate=1r/s：限制每秒最多1個請求。
2. 應(yīng)用限流策略
在定義共享內(nèi)存區(qū)域后，可以在server或location上下文中使用limit_req指令來應(yīng)用限流策略。
語法：
limit_req zone=name [burst=number] [nodelay];
示例：
http {
limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
server {
location / {
limit_req zone=one burst=5 nodelay;
proxy_pass http://backend;
}
}
}
在上面的示例中：
zone=one：指定使用名為one的共享內(nèi)存區(qū)域。burst=5：允許突發(fā)5個請求。nodelay：立即處理突發(fā)請求，不進(jìn)行延遲。
3. 示例配置詳解
以下是一個完整的示例配置：
http {
# 定義共享內(nèi)存區(qū)域
limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
server {
listen 80;
server_name example.com;
location / {
# 應(yīng)用限流策略
limit_req zone=one burst=5 nodelay;
# 代理到后端服務(wù)器
proxy_pass http://backend;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
}
}
}
在這個示例中，Nginx會限制每個客戶端每秒最多發(fā)送一個請求，并允許最多5個突發(fā)請求。
三、limit_conn模塊配置
limit_conn模塊用于限制每個特定鍵（如IP地址或用戶）的并發(fā)連接數(shù)。
1. 定義共享內(nèi)存區(qū)域
首先，需要定義一個共享內(nèi)存區(qū)域來存儲連接計數(shù)信息。可以使用limit_conn_zone指令來完成。
語法：
limit_conn_zone $variable zone=name:size;
示例：
http {
limit_conn_zone $binary_remote_addr zone=addr:10m;
server {
location / {
limit_conn addr 10;
proxy_pass http://backend;
}
}
}
在上面的示例中：
$binary_remote_addr：以二進(jìn)制格式表示的客戶端IP地址。zone=addr:10m：定義名為addr的共享內(nèi)存區(qū)域，大小為10MB。
2. 應(yīng)用限流策略
在定義共享內(nèi)存區(qū)域后，可以在server或location上下文中使用limit_conn指令來應(yīng)用限流策略。
語法：
limit_conn zone_name number;
示例：
http {
limit_conn_zone $binary_remote_addr zone=addr:10m;
server {
location / {
limit_conn addr 10;
proxy_pass http://backend;
}
}
}
在上面的示例中：
zone_name：指定使用的共享內(nèi)存區(qū)域名稱。number：允許的最大并發(fā)連接數(shù)。
3. 示例配置詳解
以下是一個完整的示例配置：
http {
# 定義共享內(nèi)存區(qū)域
limit_conn_zone $binary_remote_addr zone=addr:10m;
server {
listen 80;
server_name example.com;
location / {
# 應(yīng)用限流策略
limit_conn addr 10;
# 代理到后端服務(wù)器
proxy_pass http://backend;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
}
}
}
在這個示例中，Nginx會限制每個客戶端最多允許10個并發(fā)連接。
四、高級限流策略
1. 多級限流
在實際應(yīng)用中，可以根據(jù)不同的需求設(shè)置多級限流策略。例如，可以根據(jù)客戶端IP地址限制每秒請求數(shù)，同時根據(jù)用戶ID限制每分鐘請求數(shù)。
示例：
http {
limit_req_zone $binary_remote_addr zone=ip_zone:10m rate=1r/s;
limit_req_zone $cookie_userid zone=user_zone:10m rate=30r/m;
server {
location / {
limit_req zone=ip_zone burst=5 nodelay;
limit_req zone=user_zone burst=10;
proxy_pass http://backend;
}
}
}
在上面的示例中：
ip_zone：限制每個IP地址每秒最多1個請求，允許5個突發(fā)請求。user_zone：限制每個用戶每分鐘最多30個請求，允許10個突發(fā)請求。
2. 動態(tài)限流
通過Lua腳本和ngx_lua模塊，可以實現(xiàn)更復(fù)雜的動態(tài)限流策略。例如，可以根據(jù)用戶的VIP等級動態(tài)調(diào)整限流閾值。
示例：
http {
lua_shared_dict my_limit_req_store 10m;
server {
location / {
access_by_lua_block {
local limit_req = require "resty.limit.req"
local lim, err = limit_req.new("my_limit_req_store", 200, 100)
if not lim then
ngx.log(ngx.ERR, "failed to instantiate a resty.limit.req object: ", err)
return ngx.exit(500)
end
local key = ngx.var.binary_remote_addr
local delay, err = lim:incoming(key, true)
if not delay then
if err == "rejected" then
return ngx.exit(503)
end
ngx.log(ngx.ERR, "failed to limit req: ", err)
return ngx.exit(500)
end
if delay >= 0.001 then
ngx.sleep(delay)
end
}
proxy_pass http://backend;
}
}
}
在上面的示例中，使用了OpenResty的resty.limit.req模塊，通過Lua腳本實現(xiàn)了動態(tài)限流策略。
五、實際應(yīng)用場景
1. 防止DDoS攻擊
限流可以有效地防止DDoS攻擊。通過限制每個IP地址的請求頻率，可以防止惡意攻擊者發(fā)送大量請求導(dǎo)致服務(wù)器過載。
示例：
http {
limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
server {
location / {
limit_req zone=one burst=5 nodelay;
proxy_pass http://backend;
}
}
}
2. 防止爬蟲過度抓取
通過限
流，可以防止爬蟲過度抓取網(wǎng)站內(nèi)容，從而保護(hù)服務(wù)器資源。
示例：
http {
limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
server {
location / {
limit_req zone=one burst=5 nodelay;
proxy_pass http://backend;
}
}
}
3. 保護(hù)API服務(wù)
對于API服務(wù)，限流可以防止濫用，確保API的可用性和穩(wěn)定性。
示例：
http {
limit_req_zone $binary_remote_addr zone=one:10m rate=10r/m;
server {
location /api {
limit_req zone=one burst=20 nodelay;
proxy_pass http://api_backend;
}
}
}
六、限流日志和監(jiān)控
為了更好地管理和監(jiān)控限流策略，可以配置Nginx的日志記錄限流事件，并使用監(jiān)控工具進(jìn)行分析。
1. 配置日志
可以通過Nginx的日志模塊記錄限流事件。
示例：
http {
log_format main '$remote_addr - $remote_user [$time_local] "$request" '
'$status $body_bytes_sent "$http_referer" '
'"$http_user_agent" "$http_x_forwarded_for" '
'$request_time $upstream_response_time $pipe';
access_log /var/log/nginx/access.log main;
limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
server {
location / {
limit_req zone=one burst=5 nodelay;
error_log /var/log/nginx/error.log warn;
proxy_pass http://backend;
}
}
}
2. 使用監(jiān)控工具
可以使用Prometheus、Grafana等監(jiān)控工具來監(jiān)控Nginx的限流情況。通過配置Nginx的VTS模塊，可以導(dǎo)出Nginx的各種統(tǒng)計信息，并在Grafana中進(jìn)行可視化展示。
到此這篇關(guān)于Nginx 限流和流量控制的實現(xiàn)的文章就介紹到這了,更多相關(guān)Nginx 限流和流量控制內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
本篇文章主要介紹了nginx日志模塊及日志定時切割的方法，小編覺得挺不錯的，現(xiàn)在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2018-05-05
很長時間沒有關(guān)注FastDFS了，第一次使用FastDFS 是在 08年的時候11月的時候，那個時候是為了解決公司的數(shù)據(jù)存儲~那時候可能是對Fastdfs了解不深，功能還不算太健全，最后選擇了lustre。2010-12-12
深入解析nginx路由location匹配規(guī)則及其優(yōu)先級
Nginx是一款高性能的Web服務(wù)器和反向代理服務(wù)器,它的路由功能是通過location指令來實現(xiàn)的,location指令用于匹配請求的URL,并將請求轉(zhuǎn)發(fā)到相應(yīng)的處理程序或靜態(tài)文件,需要的朋友可以參考下2023-10-10
這篇文章主要介紹了Nginx Location 指令簡明指南,本文講解了它的基本語法、匹配過程、配置實例和全局變量,需要的朋友可以參考下2015-04-04
ngx_lua_waf是一個基于ngx_lua的web應(yīng)用防火墻。代碼很簡單，開發(fā)初衷主要是使用簡單，高性能和輕量級。下面我們來看看如何在為nginx安裝waf模塊2016-08-08
基于Nginx實現(xiàn)一個灰度上線系統(tǒng)的示例代碼
本文主要介紹了基于Nginx實現(xiàn)一個灰度上線系統(tǒng)的示例代碼，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-07-07
nginx學(xué)習(xí)總結(jié)五（nginx反向代理）
Nginx代理與負(fù)載均衡配置與優(yōu)化技巧，方便需要的朋友2012-11-11
很多小伙伴在做完Vue項目之后,想要部署到服務(wù)器上自己運行試試,下面這篇文章主要給大家介紹了關(guān)于nginx部署vue項目的詳細(xì)圖文教程,文中通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2022-09-09
本文主要介紹了使用Nginx禁止特定UserAgent訪問域名,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2025-02-02
這篇文章主要介紹了Nginx代理緩沖proxy_buffering配置方式,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2023-12-12