摘要:背景為了封禁某些爬蟲(chóng)或者惡意用戶(hù)對(duì)服務(wù)器的請(qǐng)求,我們需要建立一個(gè)動(dòng)態(tài)的黑名單。對(duì)于黑名單之內(nèi)的,拒絕提供服務(wù)。配置腳本,定期從獲取最新的黑名單。在服務(wù)器上新建類(lèi)型的數(shù)據(jù),并加入最新的黑名單。
背景
為了封禁某些爬蟲(chóng)或者惡意用戶(hù)對(duì)服務(wù)器的請(qǐng)求,我們需要建立一個(gè)動(dòng)態(tài)的 IP 黑名單。對(duì)于黑名單之內(nèi)的 IP ,拒絕提供服務(wù)。
架構(gòu)實(shí)現(xiàn) IP 黑名單的功能有很多途徑:
1、在操作系統(tǒng)層面,配置 iptables,拒絕指定 IP 的網(wǎng)絡(luò)請(qǐng)求;
2、在 Web Server 層面,通過(guò) Nginx 自身的 deny 選項(xiàng) 或者 lua 插件 配置 IP 黑名單;
3、在應(yīng)用層面,在請(qǐng)求服務(wù)之前檢查一遍客戶(hù)端 IP 是否在黑名單。
為了方便管理和共享,我們選擇通過(guò) Nginx+Lua+Redis 的架構(gòu)實(shí)現(xiàn) IP 黑名單的功能,架構(gòu)圖如下:
1、安裝 Nginx+Lua模塊,推薦使用 OpenResty,這是一個(gè)集成了各種 Lua 模塊的 Nginx 服務(wù)器:
2、安裝并啟動(dòng) Redis 服務(wù)器;
3、配置 Nginx 示例:
其中
lua_shared_dict ip_blacklist 1m;
由 Nginx 進(jìn)程分配一塊 1M 大小的共享內(nèi)存空間,用來(lái)緩存 IP 黑名單。
access_by_lua_file lua/ip_blacklist.lua;
指定 lua 腳本位置。
4、配置 lua 腳本,定期從 Redis 獲取最新的 IP 黑名單。
5、在 Redis 服務(wù)器上新建 Set 類(lèi)型的數(shù)據(jù) ip_blacklist,并加入最新的 IP 黑名單。
完成以上步驟后,重新加載 nginx,配置便開(kāi)始生效了。這時(shí)訪問(wèn)服務(wù)器,如果你的 IP 地址在黑名單內(nèi)的話,將出現(xiàn)拒絕訪問(wèn),如下圖:
以上,便是 Nginx+Lua+Redis 實(shí)現(xiàn)的 IP 黑名單功能,具有如下優(yōu)點(diǎn):
1、配置簡(jiǎn)單、輕量,幾乎對(duì)服務(wù)器性能不產(chǎn)生影響;
2、多臺(tái)服務(wù)器可以通過(guò)Redis實(shí)例共享黑名單;
3、動(dòng)態(tài)配置,可以手工或者通過(guò)某種自動(dòng)化的方式設(shè)置 Redis 中的黑名單。
文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://www.ezyhdfw.cn/yun/40343.html
摘要:目前最常用的軟件反向代理服務(wù)器有和?;趯?shí)現(xiàn)動(dòng)態(tài)代理為了實(shí)現(xiàn)動(dòng)態(tài)代理方案,需要在反向代理服務(wù)器中增加定制的功能。同時(shí),由于反向代理服務(wù)器需要處理大量的代理請(qǐng)求,因此會(huì)頻繁的讀取反向代理配置數(shù)據(jù)。 基于 Nginx 的動(dòng)態(tài)代理 作者:趙波日期:2016 年 8 月 4 日 在實(shí)際應(yīng)用中,遇到了這樣一個(gè)場(chǎng)景: 已有一個(gè)手機(jī) APP 客戶(hù)端,需要在該 APP 客戶(hù)端中實(shí)現(xiàn)通過(guò) Web 的形式...
摘要:自身有的請(qǐng)求限制模塊流量限制模塊基于令牌桶算法,可以方便的控制令牌速率,自定義調(diào)節(jié)限流,就能很好的限制請(qǐng)求數(shù)量,然而,問(wèn)題還是在于無(wú)法熱加載。漏桶算法可以很好地限制容量池的大小,從而防止流量暴增。這也是對(duì)流量攔截的算法,針對(duì)做流量監(jiān)測(cè)。 showImg(http://77l5jp.com1.z0.glb.clouddn.com/blog/logo-nginx-lua.png); 0x0...
摘要:下使用快速搭建灰度網(wǎng)關(guān)簡(jiǎn)介是新浪開(kāi)源的一個(gè)可以動(dòng)態(tài)設(shè)置分流策略的灰度發(fā)布系統(tǒng),工作在層,基于和開(kāi)發(fā),使用作為分流策略數(shù)據(jù)庫(kù),可以實(shí)現(xiàn)動(dòng)態(tài)調(diào)度功能。目前在京東如實(shí)時(shí)價(jià)格秒殺動(dòng)態(tài)服務(wù)單品頁(yè)列表頁(yè)等都在使用架構(gòu),其他公司如淘寶去哪兒網(wǎng)等。 Mac下使用ABTestingGateway快速搭建灰度網(wǎng)關(guān) ABTestingGateway簡(jiǎn)介 ABTestingGateway 是新浪開(kāi)源的一個(gè)可以...
閱讀 3031·2021-10-15 09:41
閱讀 1695·2021-09-22 15:56
閱讀 2170·2021-08-10 09:43
閱讀 3340·2019-08-30 13:56
閱讀 1846·2019-08-30 12:47
閱讀 715·2019-08-30 11:17
閱讀 2840·2019-08-30 11:09
閱讀 2237·2019-08-29 16:19