學(xué)完了 net/http 和 fasthttp 兩個HTTP協(xié)議接口的客戶端實現(xiàn),接下來就要開始Server的開發(fā),不學(xué)不知道一學(xué)嚇一跳,居然這兩個庫還支持Server的開發(fā),太方便了。
成都創(chuàng)新互聯(lián)是一家集網(wǎng)站建設(shè),樺南企業(yè)網(wǎng)站建設(shè),樺南品牌網(wǎng)站建設(shè),網(wǎng)站定制,樺南網(wǎng)站建設(shè)報價,網(wǎng)絡(luò)營銷,網(wǎng)絡(luò)優(yōu)化,樺南網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè),幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競爭力。可充分滿足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時我們時刻保持專業(yè)、時尚、前沿,時刻以成就客戶成長自我,堅持不斷學(xué)習(xí)、思考、沉淀、凈化自己,讓我們?yōu)楦嗟钠髽I(yè)打造出實用型網(wǎng)站。
相比于Java的HTTPServer開發(fā)基本上都是使用Spring或者Springboot框架,總是要配置各種配置類,各種 handle 對象。Golang的Server開發(fā)顯得非常簡單,就是因為特別簡單,或者說沒有形成特別統(tǒng)一的規(guī)范或者框架,我發(fā)現(xiàn)了很多實現(xiàn)方式,HTTP協(xié)議基于還是 net/http 和 fasthttp ,但是 handle 語法就多種多樣了。
先復(fù)習(xí)一下: Golang語言HTTP客戶端實踐 、 Golang fasthttp實踐 。
在Golang語言方面,實現(xiàn)某個功能的庫可能會比較多,有機(jī)會還是要多跟同行交流,指不定就發(fā)現(xiàn)了更好用的庫。下面我分享我學(xué)到的六種Server開發(fā)的實現(xiàn)Demo。
基于 net/http 實現(xiàn),這是一種比較基礎(chǔ)的,對于接口和 handle 映射關(guān)系處理并不優(yōu)雅,不推薦使用。
第二種也是基于 net/http ,這種編寫語法可以很好地解決第一種的問題,handle和path有了類似配置的語法,可讀性提高了很多。
第三個基于 net/http 和 github.com/labstack/echo ,后者主要提供了 Echo 對象用來處理各類配置包括接口和handle映射,功能很豐富,可讀性最佳。
第四種依然基于 net/http 實現(xiàn),引入了 github.com/gin-gonic/gin 的路由,看起來接口和 handle 映射關(guān)系比較明晰了。
第五種基于 fasthttp 開發(fā),使用都是 fasthttp 提供的API,可讀性尚可,handle配置倒是更像Java了。
第六種依然基于 fasthttp ,用到了 github.com/buaazp/fasthttprouter ,有點奇怪兩個居然不在一個GitHub倉庫里。使用語法跟第三種方式有點類似,比較有條理,有利于閱讀。
golang net/http標(biāo)準(zhǔn)庫的client是可以配置各種代理的,http/https/sock5等,不過fasthttp僅支持配置sock5代理,通過定義fasthttp dialfunc實現(xiàn):
項目中碰到的問題是,ops只提供了用squid搭建的http代理,所以是想重新定義一個http代理的dialfunc,找了fasthttp github倉庫的issue,作者提供了一個dialFunc
經(jīng)測試,訪問https的站點是OK的,訪問http的站點不行,代理連接不上。先說一下http/https代理的區(qū)別,再說原因。
使用代理訪問https網(wǎng)站時,會先發(fā)CONNECT請求,讓代理與目標(biāo)站點建立一個http tunnel,之后在這個tunnel基礎(chǔ)上進(jìn)行傳輸,對應(yīng)到上面的dialFunc過程就是:
可以看到http站點是不需要發(fā)CONNECT請求的,而是直接將目標(biāo)站點的url作為path 填寫在http請求頭中。
為何上面的dialfunc訪問http站點不行呢,查了squid代理的文檔,發(fā)現(xiàn)squid默認(rèn)會禁止非https站點通過CONNECT方法建立通道,自己搭了個squid代理去掉配置項,發(fā)現(xiàn)上面的dialfunc是可以訪問http、https站點的,就是說http,https都先建立通過,再請求。
看了fasthttp的源碼,沒辦法在請求前修改request header中的path為目標(biāo)站點url,所以如果需要通過fasthttp使用http代理,那么可以使用上面的dialfunc,同時代理需要允許非443端口的站點可以建立通道。如果做不到這一點,那么還是建議使用標(biāo)準(zhǔn)庫net/http的client,會更方便一點。
我們在mian函數(shù)中,首先初始化配置文件,然后新建http連接。
這個連接創(chuàng)建之后,監(jiān)聽服務(wù)器的9999端口。如果url的路徑后綴為 "/ws",就轉(zhuǎn)發(fā)到ws/ws.go中的IndexHandler方法中。
這個方法中首先我們創(chuàng)建一個websocket的Upgrader實例,然后我們使用Upgrader的upgrade方法來升級一下我們的連接為長連接。
升級完成之后會返回一個*websocket.Conn的連接,我們之后所有的關(guān)于連接的操作,都是基于該conn的。
在該連接完成之后,我們將連接存放到一個名為Client的map中,以便之后管理更為方便。
之后,我們啟動一個goroutine來讀取連接中發(fā)送的信息內(nèi)容,再根據(jù)內(nèi)容進(jìn)行相應(yīng)的操作。
網(wǎng)關(guān)=反向代理+負(fù)載均衡+各種策略,技術(shù)實現(xiàn)也有多種多樣,有基于 nginx 使用 lua 的實現(xiàn),比如 openresty、kong;也有基于 zuul 的通用網(wǎng)關(guān);還有就是 golang 的網(wǎng)關(guān),比如 tyk。
這篇文章主要是講如何基于 golang 實現(xiàn)一個簡單的網(wǎng)關(guān)。
轉(zhuǎn)自: troy.wang/docs/golang/posts/golang-gateway/
整理:go語言鐘文文檔:
啟動兩個后端 web 服務(wù)(代碼)
這里使用命令行工具進(jìn)行測試
具體代碼
直接使用基礎(chǔ)庫 httputil 提供的NewSingleHostReverseProxy即可,返回的reverseProxy對象實現(xiàn)了serveHttp方法,因此可以直接作為 handler。
具體代碼
director中定義回調(diào)函數(shù),入?yún)?http.Request,決定如何構(gòu)造向后端的請求,比如 host 是否向后傳遞,是否進(jìn)行 url 重寫,對于 header 的處理,后端 target 的選擇等,都可以在這里完成。
director在這里具體做了:
modifyResponse中定義回調(diào)函數(shù),入?yún)?http.Response,用于修改響應(yīng)的信息,比如響應(yīng)的 Body,響應(yīng)的 Header 等信息。
最終依舊是返回一個ReverseProxy,然后將這個對象作為 handler 傳入即可。
參考 2.2 中的NewSingleHostReverseProxy,只需要實現(xiàn)一個類似的、支持多 targets 的方法即可,具體實現(xiàn)見后面。
作為一個網(wǎng)關(guān)服務(wù),在上面 2.3 的基礎(chǔ)上,需要支持必要的負(fù)載均衡策略,比如:
隨便 random 一個整數(shù)作為索引,然后取對應(yīng)的地址即可,實現(xiàn)比較簡單。
具體代碼
使用curIndex進(jìn)行累加計數(shù),一旦超過 rss 數(shù)組的長度,則重置。
具體代碼
輪詢帶權(quán)重,如果使用計數(shù)遞減的方式,如果權(quán)重是5,1,1那么后端 rs 依次為a,a,a,a,a,b,c,a,a,a,a…,其中 a 后端會瞬間壓力過大;參考 nginx 內(nèi)部的加權(quán)輪詢,或者應(yīng)該稱之為平滑加權(quán)輪詢,思路是:
后端真實節(jié)點包含三個權(quán)重:
操作步驟:
具體代碼
一致性 hash 算法,主要是用于分布式 cache 熱點/命中問題;這里用于基于某 key 的 hash 值,路由到固定后端,但是只能是基本滿足流量綁定,一旦后端目標(biāo)節(jié)點故障,會自動平移到環(huán)上最近的那么個節(jié)點。
實現(xiàn):
具體代碼
每一種不同的負(fù)載均衡算法,只需要實現(xiàn)添加以及獲取的接口即可。
然后使用工廠方法,根據(jù)傳入的參數(shù),決定使用哪種負(fù)載均衡策略。
具體代碼
作為網(wǎng)關(guān),中間件必不可少,這類包括請求響應(yīng)的模式,一般稱作洋蔥模式,每一層都是中間件,一層層進(jìn)去,然后一層層出來。
中間件的實現(xiàn)一般有兩種,一種是使用數(shù)組,然后配合 index 計數(shù);一種是鏈?zhǔn)秸{(diào)用。
具體代碼
這里我介紹兩種方法!
一 ?:用IIS或者Apache之類的web服務(wù)器軟件實現(xiàn)http文件共享
?這里我以IIS為例介紹下用常用的web服務(wù)器實現(xiàn)文件共享的方法,具體如下(以我機(jī)器為例):
? 1、打開IIS,打開“網(wǎng)站 -- 默認(rèn)網(wǎng)站”,右鍵點擊“屬性”,點擊“主目錄”,勾選“目錄瀏覽”選項,如下圖所示:
??
2、進(jìn)入文件夾C:\Inetpub\wwwroot,拷貝文件“1.7z“到這個目錄:
? ?
3、打開瀏覽器,輸入本機(jī)ip(比如我的:192.168.1.123),即可看到共享的文件并可以下載:
? ?
? ?點擊“1.7z”即可下載。
二 ?:用python或者go語言實現(xiàn)http文件共享
1、python實現(xiàn)http文件共享:
? 用過python的都知道python有一個很牛x的命令:
python?-m?SimpleHTTPServer
在C:\Python27下運行命令:
?打開瀏覽器,可以看到如下效果:
?這個命令的默認(rèn)端口是8000,如果我再加一個端口參數(shù),可以用其它端口進(jìn)行訪問,命令如下:
打開瀏覽器:
? ??知道了這個原理,可以寫個bat文件,在需要的時候copy到相應(yīng)的目錄雙擊即可,比如我的httpShare.bat文件如下:
? ? ?python -m SimpleHTTPServer 80
? ? ?默認(rèn)用80端口,訪問時候只需要輸入我的ip地址即可。
2、go語言實現(xiàn)http文件共享:
上面的方法很方便,windows和linux通吃,不過前提是要安裝python
這里我有個用go語言實現(xiàn)的,也是windows和linux通吃(windows下不知道怎么配置的可以參考我之前的文章:,類似C/C++,是代碼可移植,使用前你只需編譯一次。
下面是示例代碼(httpShare.go):
package?main
import?(
"http"
"fmt"
)
func?main(){
h?:=?http.FileServer(http.Dir("."))
var?port?string
fmt.Printf("Please?input?port?Number:?")
fmt.Scanf("%s",port)
http.ListenAndServe(":"+port,?h)???
}
運行效果: