微服務(wù)入門:Openresty實(shí)現(xiàn)API網(wǎng)關(guān)

概念介紹
如果大家清楚“網(wǎng)關(guān)”這個(gè)概念,那就很容易理解“API網(wǎng)關(guān)“,即所有API的入口。 從面向?qū)ο笤O(shè)計(jì)的角度看,它與外觀模式類似,封裝了系統(tǒng)內(nèi)部架構(gòu)。在單體應(yīng)用架構(gòu)中,沒有「 API網(wǎng)關(guān) 」的概念,每個(gè)項(xiàng)目都會(huì)用到filter/過濾器之類的東西,filter的作用就是把項(xiàng)目中的一些非業(yè)務(wù)邏輯的功能抽離出來獨(dú)立處理,避免與業(yè)務(wù)邏輯混在一起增加代碼復(fù)雜度。比如 鑒權(quán)認(rèn)證功能、Session處理、安全檢查、日志處理等等。
如果采用微服務(wù)架構(gòu),那一個(gè)項(xiàng)目中微服務(wù)節(jié)點(diǎn)很多,如果讓每一個(gè)節(jié)點(diǎn)都去處理上面這些 “鑒權(quán)認(rèn)證功能、Session處理、安全檢查、日志處理等” 會(huì)多出很多冗余的代碼,也會(huì)給增加業(yè)務(wù)代碼的復(fù)雜度,因此就需要有一個(gè)API網(wǎng)關(guān)把這些公共的功能獨(dú)立出來成為一個(gè)服務(wù)來統(tǒng)一的處理這些事情。

主要功能
API網(wǎng)關(guān)就像是微服務(wù)的一扇門,是連通外部客戶端與內(nèi)部微服務(wù)之間的一個(gè)橋梁。
其主要功能有:
- 路由轉(zhuǎn)發(fā) API網(wǎng)關(guān)是內(nèi)部微服務(wù)的對(duì)外唯一入口,所以外面全部的請(qǐng)求都會(huì)先發(fā)到API網(wǎng)上,然后由API網(wǎng)關(guān)來根據(jù)不同的請(qǐng)求去路由到不同的微服務(wù)節(jié)點(diǎn)上。
- 負(fù)載均衡 API網(wǎng)關(guān)收到外部請(qǐng)求之后,可以根據(jù)內(nèi)部微服務(wù)每個(gè)實(shí)例的負(fù)荷情況進(jìn)行動(dòng)態(tài)的負(fù)載均衡調(diào)節(jié)。一旦內(nèi)部的某個(gè)微服務(wù)實(shí)例負(fù)載很高,甚至是不能及時(shí)響應(yīng),則API網(wǎng)關(guān)就通過負(fù)載均衡策略減少或停止向這個(gè)實(shí)例轉(zhuǎn)發(fā)請(qǐng)求。當(dāng)所有的內(nèi)部微服務(wù)實(shí)例都處理不過來的時(shí)候,API網(wǎng)關(guān)還可以采用限流或熔斷的形式阻止外部請(qǐng)求,以保障整個(gè)系統(tǒng)的可用性。
- 安全認(rèn)證 API網(wǎng)關(guān)就像是微服務(wù)的大門守衛(wèi),每一個(gè)請(qǐng)求進(jìn)來之后,都必須先在API網(wǎng)關(guān)上進(jìn)行安全驗(yàn)證或身份驗(yàn)證,驗(yàn)證通過后才轉(zhuǎn)發(fā)給后面的服務(wù)。
- 日志記錄 所有的請(qǐng)求都需要走API網(wǎng)關(guān),那么就可以在API網(wǎng)關(guān)上統(tǒng)一集中的記錄下這些行為日志。
- 數(shù)據(jù)轉(zhuǎn)換 因?yàn)锳PI網(wǎng)關(guān)對(duì)外是面向多種不同的客戶端,不同的客戶端所傳輸?shù)臄?shù)據(jù)類型可能是不一樣的。因此API網(wǎng)關(guān)還需要具備數(shù)據(jù)轉(zhuǎn)換的功能,將不同客戶端傳輸進(jìn)來的數(shù)據(jù)轉(zhuǎn)換成同一種類型再轉(zhuǎn)發(fā)給內(nèi)部微服務(wù)上,這樣,兼容了這些請(qǐng)求的多樣性,保證了微服務(wù)的靈活性。
OpenResty
API網(wǎng)關(guān)最主要的功能實(shí)現(xiàn)就是請(qǐng)求攔截,在網(wǎng)絡(luò)請(qǐng)求的整個(gè)生命階段加入各種filter/過濾器, OpenResty提供了這樣的功能。
OpenResty® 是一個(gè)基于 Nginx 與 Lua 的高性能 Web 平臺(tái),其內(nèi)部集成了大量精良的 Lua 庫、第三方模塊以及大多數(shù)的依賴項(xiàng)。用于方便地搭建能夠處理超高并發(fā)、擴(kuò)展性極高的動(dòng)態(tài) Web 應(yīng)用、Web 服務(wù)和動(dòng)態(tài)網(wǎng)關(guān)。
OpenResty 處理一個(gè)請(qǐng)求,它的處理流程請(qǐng)參考下圖(從 Request start 開始):

依據(jù)OpenResty的請(qǐng)求處理流程,和各種第三方模塊,就可以在流程節(jié)點(diǎn)中加入我們的API網(wǎng)關(guān)邏輯代碼。例如,對(duì)API請(qǐng)求數(shù)量進(jìn)行統(tǒng)計(jì):
- lua_package_path "module/lua-resty-hmac/lib/?.lua;module/lua-resty-redis/lib/?.lua;module/lua-resty-mysql/lib/?.lua;module/lua-resty-jwt/lib/?.lua;;";
- server {
- listen 80;
- server_name gw.gitlib.cn;
- access_log /var/log/nginx/gw.gitlib.cn.access.log access;
- # lua_code_cache off;
- set $redis_host "192.168.1.106";
- set $redis_port "6379";
- set $redis_incrkey "api:access:num";
- access_by_lua_file gateway/intercept.lua; # 對(duì)所有請(qǐng)求進(jìn)行攔截處理
- location = /num {
- content_by_lua_block {
- local _redis = require "resty.redis"
- local redis = _redis:new()
- redis:set_timeout(1000)
- local ok, err = redis:connect(ngx.var.redis_host, ngx.var.redis_port)
- if not ok then
- ngx.say("failed to connect: ", err)
- return
- end
- local res, err = redis:get(ngx.var.redis_incrkey)
- if not res then
- ngx.say("failed to get key: ", err)
- return
- end
- if res == ngx.null then
- ngx.say("key not found.")
- return
- end
- ngx.say("api:access:num:", res)
- }
- }
- location ~ ^/api/([\w]+) {
- default_type text/html;
- content_by_lua_file /web/gw/api/$1.lua;
- }
- }
上面是我們的nginx配置,引入了redis模塊,用于存儲(chǔ)API請(qǐng)求數(shù)量,接下來,我們?cè)趃ateway/intercept.lua中實(shí)現(xiàn)API請(qǐng)求數(shù)量統(tǒng)計(jì)的處理邏輯:
- local function increseNum(key)
- -- get key from rediskey
- local _redis = require "resty.redis"
- local redis = _redis:new()
- redis:set_timeout(100)
- local ok, err = redis:connect(ngx.var.redis_host, ngx.var.redis_port)
- if not ok then
- ngx.log(ngx.ERR, "failed to connect to redis: ", err)
- return nil
- end
- if ngx.var.redis_auth then
- local ok, err = redis:auth(ngx.var.redis_auth)
- if not ok then
- ngx.log(ngx.ERR, "failed to authenticate: ", err)
- return nil
- end
- end
- if ngx.var.redis_db then
- local ok, err = redis:select(ngx.var.redis_db)
- if not ok then
- ngx.log(ngx.ERR, "failed to select db: ", ngx.var.reddb, " ", err)
- return nil
- end
- end
- local res, err = redis:incr(key)
- if not res then
- ngx.log(ngx.ERR, "failed to incr key: ", key ,", ", err)
- return nil
- end
- if res == ngx.null then
- ngx.log(ngx.ERR, "key ", key, " not found")
- return ngx.null
- end
- local ok, err = redis:close()
- if not ok then
- ngx.log(ngx.ERR, "failed to close: ", err)
- end
- return res
- end
- increseNum(ngx.var.redis_incrkey)
就這樣,我們實(shí)現(xiàn)了API網(wǎng)關(guān)的一個(gè)小功能,其他功能實(shí)現(xiàn),就靠大家去摸索了。目前市面上成熟的API網(wǎng)關(guān)實(shí)現(xiàn)方案有很多,采用openresty 開發(fā)出的api網(wǎng)關(guān),比如比較流行的kong、orange等, 大家可以自行了解。