網(wǎng)關(guān)=反向代理+負(fù)載均衡+各種策略,技術(shù)實(shí)現(xiàn)也有多種多樣,有基于 nginx 使用 lua 的實(shí)現(xiàn),比如 openresty、kong;也有基于 zuul 的通用網(wǎng)關(guān);還有就是 golang 的網(wǎng)關(guān),比如 tyk。
讓客戶滿意是我們工作的目標(biāo),不斷超越客戶的期望值來自于我們對(duì)這個(gè)行業(yè)的熱愛。我們立志把好的技術(shù)通過有效、簡(jiǎn)單的方式提供給客戶,將通過不懈努力成為客戶在信息化領(lǐng)域值得信任、有價(jià)值的長(zhǎng)期合作伙伴,公司提供的服務(wù)項(xiàng)目有:申請(qǐng)域名、虛擬主機(jī)、營銷軟件、網(wǎng)站建設(shè)、什邡網(wǎng)站維護(hù)、網(wǎng)站推廣。
這篇文章主要是講如何基于 golang 實(shí)現(xiàn)一個(gè)簡(jiǎn)單的網(wǎng)關(guān)。
轉(zhuǎn)自: troy.wang/docs/golang/posts/golang-gateway/
整理:go語言鐘文文檔:
啟動(dòng)兩個(gè)后端 web 服務(wù)(代碼)
這里使用命令行工具進(jìn)行測(cè)試
具體代碼
直接使用基礎(chǔ)庫 httputil 提供的NewSingleHostReverseProxy即可,返回的reverseProxy對(duì)象實(shí)現(xiàn)了serveHttp方法,因此可以直接作為 handler。
具體代碼
director中定義回調(diào)函數(shù),入?yún)?http.Request,決定如何構(gòu)造向后端的請(qǐng)求,比如 host 是否向后傳遞,是否進(jìn)行 url 重寫,對(duì)于 header 的處理,后端 target 的選擇等,都可以在這里完成。
director在這里具體做了:
modifyResponse中定義回調(diào)函數(shù),入?yún)?http.Response,用于修改響應(yīng)的信息,比如響應(yīng)的 Body,響應(yīng)的 Header 等信息。
最終依舊是返回一個(gè)ReverseProxy,然后將這個(gè)對(duì)象作為 handler 傳入即可。
參考 2.2 中的NewSingleHostReverseProxy,只需要實(shí)現(xiàn)一個(gè)類似的、支持多 targets 的方法即可,具體實(shí)現(xiàn)見后面。
作為一個(gè)網(wǎng)關(guān)服務(wù),在上面 2.3 的基礎(chǔ)上,需要支持必要的負(fù)載均衡策略,比如:
隨便 random 一個(gè)整數(shù)作為索引,然后取對(duì)應(yīng)的地址即可,實(shí)現(xiàn)比較簡(jiǎn)單。
具體代碼
使用curIndex進(jìn)行累加計(jì)數(shù),一旦超過 rss 數(shù)組的長(zhǎng)度,則重置。
具體代碼
輪詢帶權(quán)重,如果使用計(jì)數(shù)遞減的方式,如果權(quán)重是5,1,1那么后端 rs 依次為a,a,a,a,a,b,c,a,a,a,a…,其中 a 后端會(huì)瞬間壓力過大;參考 nginx 內(nèi)部的加權(quán)輪詢,或者應(yīng)該稱之為平滑加權(quán)輪詢,思路是:
后端真實(shí)節(jié)點(diǎn)包含三個(gè)權(quán)重:
操作步驟:
具體代碼
一致性 hash 算法,主要是用于分布式 cache 熱點(diǎn)/命中問題;這里用于基于某 key 的 hash 值,路由到固定后端,但是只能是基本滿足流量綁定,一旦后端目標(biāo)節(jié)點(diǎn)故障,會(huì)自動(dòng)平移到環(huán)上最近的那么個(gè)節(jié)點(diǎn)。
實(shí)現(xiàn):
具體代碼
每一種不同的負(fù)載均衡算法,只需要實(shí)現(xiàn)添加以及獲取的接口即可。
然后使用工廠方法,根據(jù)傳入的參數(shù),決定使用哪種負(fù)載均衡策略。
具體代碼
作為網(wǎng)關(guān),中間件必不可少,這類包括請(qǐng)求響應(yīng)的模式,一般稱作洋蔥模式,每一層都是中間件,一層層進(jìn)去,然后一層層出來。
中間件的實(shí)現(xiàn)一般有兩種,一種是使用數(shù)組,然后配合 index 計(jì)數(shù);一種是鏈?zhǔn)秸{(diào)用。
具體代碼
1. os.Getwd()函數(shù)
原型:func Getwd()(pwd string, err error)
作用:獲取當(dāng)前文件路徑
返回:當(dāng)前文件路徑的字符串和一個(gè)err信息
示例:
輸出:
當(dāng)前路徑: D:ProjectsGomGoLab01
2. os.Getenv()函數(shù)
原型:func Getenv(key string) string
作用:獲取系統(tǒng)環(huán)境變量的值
參數(shù):key - 系統(tǒng)環(huán)境變量名
返回:系統(tǒng)環(huán)境變量的值
示例:
輸出:
環(huán)境變量GOPATH的值是: D:/Projects/Go
3. os.Chdir()函數(shù)
原型:func Chdir(dir string) error
作用:將當(dāng)前文件路徑改變?yōu)槟繕?biāo)路徑(非真實(shí)改變)
參數(shù):dir - 目標(biāo)路徑(即改變之后的路徑)
返回:修改成功,返回 nil;修改失敗(如:目標(biāo)路徑不存在的情況),返回錯(cuò)誤信息。
示例一:
輸出:
起始路徑: D:ProjectsGomGoLab01
修改后的路徑: D:ProjectsGoDemo02
示例二:
輸出:
起始路徑: D:ProjectsGomGoLab01
error: chdir D:ProjectsGoDemo03: The system cannot find the file specified.
注:文件路徑,Window 系統(tǒng)下默認(rèn)是“”,寫在代碼中時(shí)要用“”或“/”代替。
寫了2次才寫完,內(nèi)容很長(zhǎng),翻譯了很久,內(nèi)容來源于Cobra github介紹。翻譯完也更全面的了解了Cobra,功能相當(dāng)強(qiáng)大完善,各種使用的場(chǎng)景都考慮到了。另外也擴(kuò)展了一些其它知識(shí),比如 命令行玩法 , Levenshtein distance 等等。以下是正文:
Cobra提供簡(jiǎn)單的接口來創(chuàng)建強(qiáng)大的現(xiàn)代化CLI接口,比如git與go工具。Cobra同時(shí)也是一個(gè)程序, 用于創(chuàng)建CLI程序
Cobra是建立在結(jié)構(gòu)的命令、參數(shù)和標(biāo)志之上。
命令代表操作,參數(shù)和標(biāo)志是這些行動(dòng)的修飾符。
最好的應(yīng)用程序就像讀取句子。用戶會(huì)知道如何使用本機(jī)應(yīng)用程序,因?yàn)樗麄儗⒗斫馊绾问褂盟?/p>
比如下面的例子, server 是命令, port 是標(biāo)志:
在下面的命令,我們告訴Git克隆url地址bare
使用Cobra很簡(jiǎn)單。首先,使用 go get 安裝最新版本
然后在你項(xiàng)目里引用Cobra
通?;贑obra的應(yīng)用程序?qū)⒆裱旅娴慕M織結(jié)構(gòu),當(dāng)然你也可以遵循自己的接口:
在Cobra應(yīng)用程序中,通常main.go文件非??斩础K饕桓梢患拢撼跏蓟疌obra。
Cobra提供自己的程序來創(chuàng)建你的程序并且添加你想要的命令。這是最簡(jiǎn)單的方式把Cobra添加到你的程序里。
這里 你能找到相關(guān)信息
使用Cobra,需要?jiǎng)?chuàng)建一個(gè)空的main.go文件和一個(gè)rootCmd文件。你可以選擇在合適的地方添加額外的命令。
Cobra不需要特殊的構(gòu)造函數(shù)。簡(jiǎn)單的就可以創(chuàng)建你的命令。
理想情況下你把這個(gè)放在在 app/cmd/root.go
你會(huì)另外定義標(biāo)志和處理配置init()函數(shù)。
比如 cmd/root.go
你需要在main函數(shù)里執(zhí)行root命令。
通常main.go文件非??斩?。它主要只干一件事:初始化Cobra。
其它的命令通常定義在cmd/目錄下的自己文件內(nèi)
如果你想創(chuàng)建一個(gè)version命令,你可以創(chuàng)建cmd/version.go文件,并在文件里這么寫:
標(biāo)志提供修飾符控制動(dòng)作命令如何操作
當(dāng)標(biāo)志定義好了,我們需要定義一個(gè)變量來關(guān)聯(lián)標(biāo)志
'持久'表示每個(gè)在那個(gè)命令下的命令都將能分配到這個(gè)標(biāo)志。對(duì)于全局標(biāo)志,'持久'的標(biāo)志綁定在root上。
Cobra默認(rèn)只在目標(biāo)命令上解析標(biāo)志,父命令忽略任何局部標(biāo)志。通過打開 Command.TraverseChildren Cobra將會(huì)在執(zhí)行任意目標(biāo)命令前解析標(biāo)志
你同樣可以通過 viper 綁定標(biāo)志:
在這個(gè)例子中,永久的標(biāo)記 author 被 viper 綁定, 注意 , 當(dāng)用戶沒有給 --author 提供值, author 不會(huì)被賦值。
標(biāo)記默認(rèn)是可選的,如果你希望當(dāng)一個(gè)標(biāo)記沒有設(shè)置時(shí),命令行報(bào)錯(cuò),你可以標(biāo)記它為必須的
驗(yàn)證位置參數(shù)可以通過 Command 的 Args 字段。
內(nèi)置下列驗(yàn)證方法
一個(gè)設(shè)置自定義驗(yàn)證的例子
在下面的例子,我們定義了3個(gè)命令。2個(gè)在頂級(jí),一個(gè)(cmdTimes)是其中一個(gè)頂級(jí)命令的子命令。在這個(gè)例子里,由于沒有給 rootCmd 提供 Run ,單獨(dú)的root是不能運(yùn)行的,必須要有子命令。
我們僅為一個(gè)命令定義了標(biāo)記。
更多關(guān)于flags的文檔可以在 找到
更完整大型程序的例子, 可以查看 Hugo .
當(dāng)你的程序有子命令時(shí),Cobra 會(huì)自動(dòng)給你程序添加help命令。當(dāng)你運(yùn)行‘a(chǎn)pp help’,會(huì)調(diào)用help命令。另外,help同樣支持其它輸入命令。例如,你有一個(gè)沒有任何其它配置的命令叫‘create’,當(dāng)你調(diào)用‘a(chǎn)pp help create’ Corbra 將會(huì)起作用。
下面的輸入是 Cobra 自動(dòng)生成的。除了命令和標(biāo)志的定義,其它不再需要。
help 就跟其它命令一樣,并沒有特殊的邏輯或行為。事實(shí)上,你也可以提供你自己help如果你想的話。
你能為默認(rèn)的命令,提供你自己的help命令或模板。使用下面的方法:
后2個(gè)也將適用于任何子命令
當(dāng)用戶提供無效的標(biāo)記或命令,Cobra 將會(huì)返回 用法 。
你可能從上面的幫助意識(shí)到,默認(rèn)的幫助將被嵌入到用法里然后作為輸出。
你能提供你自己的用法函數(shù)或模板給 Cobra 使用。
比如幫助,方法和模板都可以重寫。
如果Version字段設(shè)置到了根命令,Cobra 會(huì)提供了一個(gè)頂層 ‘--version’標(biāo)記。運(yùn)行帶上‘--version’標(biāo)記的程序,將會(huì)按照模板版本信息。模板可以通過 cmd.SetVersionTemplate(s string) 方法修改
在命令運(yùn)行前或運(yùn)行后,再運(yùn)行方法非常容易。 PersistentPreRun 和 PreRun 方法將會(huì)在 Run 之前執(zhí)行。 PersistentPostRun 和 PostRun 方法將會(huì)在 Run 之后執(zhí)行。 Persistent*Run 方法會(huì)被子命令繼承,如果它們自己沒有定義的話。這些方法將按照下面的屬性執(zhí)行:
下面的例子,2個(gè)命令都使用了上面的特性。當(dāng)子命令執(zhí)行的時(shí)候,它將執(zhí)行根命令的 PersistentPreRun ,但不會(huì)執(zhí)行根命令的 PersistentPostRun :
輸出:
Cobra 會(huì)自動(dòng)輸出建議,當(dāng)遇到“unknown command”錯(cuò)誤時(shí)。這使得當(dāng)輸入錯(cuò)誤時(shí), Cobra 的行為類似 git 命令。例如:
建議會(huì)基于注冊(cè)的子命令自動(dòng)生成。使用了 Levenshtein distance 的實(shí)現(xiàn)。每一個(gè)注冊(cè)的命令會(huì)匹配2個(gè)距離(忽略大小寫)來提供建議。
如果你希望在你的命令里,禁用建議或虛弱字符串的距離,使用:
或
你可以通過 SuggestFor 來給命令提供明確的名詞建議。這個(gè)特性允許當(dāng)字符串不相近,但是意思與你的命令相近,別切你也不想給該命令設(shè)置別名。比如:
Cobra 可以基于子命令,標(biāo)記,等生成文檔。以以下格式:
Cobra 可以生成一個(gè)bash-completion文件。如果你給命令添加更多信息,這些completions可以非常強(qiáng)大和靈活。更多介紹在 Bash Completions 。
awesome-go :一個(gè)很全的go語言框架,庫,軟件合集
前面發(fā)過關(guān)于awsone-python, awsone django, flask。最近在學(xué)習(xí)golang,所以找到awsone-go
由于內(nèi)容太多,這里只是列出主要的目錄,每一項(xiàng)下面又有很多內(nèi)容。具體詳細(xì)的內(nèi)容,請(qǐng)到官網(wǎng)查看。
github網(wǎng)址 ,
官網(wǎng) 。
就一段代碼也沒有源文件也不告訴err原文是啥怎么給你調(diào)啊。
最簡(jiǎn)單的方法就是打開excel轉(zhuǎn)換成xlsx再讀。