新聞中心
Go語(yǔ)言——goroutine并發(fā)模型
參考:
創(chuàng)新互聯(lián)主營(yíng)新北網(wǎng)站建設(shè)的網(wǎng)絡(luò)公司,主營(yíng)網(wǎng)站建設(shè)方案,重慶APP開(kāi)發(fā),新北h5重慶小程序開(kāi)發(fā)搭建,新北網(wǎng)站營(yíng)銷推廣歡迎新北等地區(qū)企業(yè)咨詢
Goroutine并發(fā)調(diào)度模型深度解析手?jǐn)]一個(gè)協(xié)程池
Golang 的 goroutine 是如何實(shí)現(xiàn)的?
Golang - 調(diào)度剖析【第二部分】
OS線程初始棧為2MB。Go語(yǔ)言中,每個(gè)goroutine采用動(dòng)態(tài)擴(kuò)容方式,初始2KB,按需增長(zhǎng),最大1G。此外GC會(huì)收縮棧空間。
BTW,增長(zhǎng)擴(kuò)容都是有代價(jià)的,需要copy數(shù)據(jù)到新的stack,所以初始2KB可能有些性能問(wèn)題。
更多關(guān)于stack的內(nèi)容,可以參見(jiàn)大佬的文章。 聊一聊goroutine stack
用戶線程的調(diào)度以及生命周期管理都是用戶層面,Go語(yǔ)言自己實(shí)現(xiàn)的,不借助OS系統(tǒng)調(diào)用,減少系統(tǒng)資源消耗。
Go語(yǔ)言采用兩級(jí)線程模型,即用戶線程與內(nèi)核線程KSE(kernel scheduling entity)是M:N的。最終goroutine還是會(huì)交給OS線程執(zhí)行,但是需要一個(gè)中介,提供上下文。這就是G-M-P模型
Go調(diào)度器有兩個(gè)不同的運(yùn)行隊(duì)列:
go1.10\src\runtime\runtime2.go
Go調(diào)度器根據(jù)事件進(jìn)行上下文切換。
調(diào)度的目的就是防止M堵塞,空閑,系統(tǒng)進(jìn)程切換。
詳見(jiàn) Golang - 調(diào)度剖析【第二部分】
Linux可以通過(guò)epoll實(shí)現(xiàn)網(wǎng)絡(luò)調(diào)用,統(tǒng)稱網(wǎng)絡(luò)輪詢器N(Net Poller)。
文件IO操作
上面都是防止M堵塞,任務(wù)竊取是防止M空閑
每個(gè)M都有一個(gè)特殊的G,g0。用于執(zhí)行調(diào)度,gc,棧管理等任務(wù),所以g0的棧稱為調(diào)度棧。g0的棧不會(huì)自動(dòng)增長(zhǎng),不會(huì)被gc,來(lái)自os線程的棧。
go1.10\src\runtime\proc.go
G沒(méi)辦法自己運(yùn)行,必須通過(guò)M運(yùn)行
M通過(guò)通過(guò)調(diào)度,執(zhí)行G
從M掛載P的runq中找到G,執(zhí)行G
Go語(yǔ)言事件請(qǐng)求處理程序(Event Handler)
在Go語(yǔ)言的代碼中,您需要引入官方的SDK庫(kù) aliyun/serverless/fc-runtime-go-sdk/fc,并實(shí)現(xiàn)handler函數(shù)和main函數(shù)。 示例如下:
傳入的event參數(shù)是一個(gè)包含key屬性的JSON字符串,示例如下。
具體的示例解析如下:
有效的Event Handler簽名如下:
其中,InputType和OutputType與encoding/json標(biāo)準(zhǔn)庫(kù)兼容。
Event Handler的使用需遵循以下規(guī)則:
事件函數(shù)的Handler示例代碼:
go語(yǔ)言 python ruby,這三個(gè)怎么選擇
這選擇顯然是因人而異的。。至于怎么選,要看你是初學(xué)者,還是老手?。。對(duì)性能有要求,還是沒(méi)要求?
如果是完全沒(méi)有基礎(chǔ),我建議哪個(gè)都不選,如果非要選一個(gè),那就選PYTHON。。如果你是初學(xué)者,把網(wǎng)上的教程看個(gè)遍,再買上幾本書(shū)。。。你所學(xué)會(huì)的也僅僅是語(yǔ)法,而根本不會(huì)編程。。。因?yàn)檫@些教程,也僅僅是教你語(yǔ)法,而沒(méi)有教你編程。。你甚至把網(wǎng)上的教程看個(gè)精光,卻連個(gè)最基本的OA系統(tǒng)都做不出來(lái)。。。只能在一個(gè)黑乎乎的控制臺(tái)上,打印一堆破字符。。
-------網(wǎng)上的所有教程都會(huì)教你的:
怎么定義一個(gè)變量?怎么在控制臺(tái)打印變量?
怎么寫(xiě)一個(gè)循環(huán)?怎么在控制臺(tái)打印一堆變量?
怎么寫(xiě)一個(gè)函數(shù)?怎么在控制臺(tái)打印返回值?
怎么創(chuàng)建一個(gè)對(duì)象?怎么在控制臺(tái)打印對(duì)象屬性?
------高級(jí)一點(diǎn)的教程,會(huì)教你的:
怎么用PYTHON的模塊,寫(xiě)一個(gè)爬蟲(chóng)?
怎么用RUBY的ROR框架,獲取一個(gè)表單?
怎么用GO的beego,寫(xiě)一個(gè)博客?
-------而這些的教程,從來(lái)不教你的:
面向?qū)ο笥惺裁从茫?委托是什么?事件是什么? 工廠模式,單例模式,觀察者模式,這些都是啥?套接字是啥?UDP是啥?TCP/IP是啥?二叉樹(shù)是什么玩意?狀態(tài)機(jī)又是什么玩意?啥叫逆變?啥叫協(xié)變?啥叫異步?啥叫反射?
---------------------------------------------------------------------------------------------
如果一套教程,要把這些都講明白。。。可能需要上千集。。。所以這些教程,都跳過(guò)了這些內(nèi)容。。但如果你不明白這些,就根本學(xué)不會(huì)編程。。。如果你打算學(xué)一門語(yǔ)言,而手上只有幾十集教程,外加三五本書(shū)。。。那你只能學(xué)會(huì)玩控制臺(tái)。。。
所以初學(xué)者選擇一門語(yǔ)言,首先要保證這門語(yǔ)言作為主要開(kāi)發(fā)語(yǔ)言,常年被公司使用,這樣才能真正學(xué)會(huì)編程。然而這三門語(yǔ)言都不具備這樣的特點(diǎn)。它們通常都是被當(dāng)成第二語(yǔ)言,做一些輔助開(kāi)發(fā)的工作。其中Python只在極少數(shù)情況下,才被用來(lái)作為主要開(kāi)發(fā)語(yǔ)言。至于Go與Ruby,我目前還沒(méi)聽(tīng)說(shuō)過(guò)它們有被當(dāng)作主要開(kāi)發(fā)語(yǔ)言的例子。我所推薦的是從C#和JAVA兩者之間,二選一。。。學(xué)精其中一門之后,再來(lái)考慮PYTHON或GO作為第二語(yǔ)言。。。不然無(wú)論你選哪個(gè),都幾乎不可能靠一門語(yǔ)言找到工作。
講講go語(yǔ)言的結(jié)構(gòu)體
作為C語(yǔ)言家族的一員,go和c一樣也支持結(jié)構(gòu)體。可以類比于java的一個(gè)POJO。
在學(xué)習(xí)定義結(jié)構(gòu)體之前,先學(xué)習(xí)下定義一個(gè)新類型。
新類型 T1 是基于 Go 原生類型 int 定義的新自定義類型,而新類型 T2 則是 基于剛剛定義的類型 T1,定義的新類型。
這里要引入一個(gè)底層類型的概念。
如果一個(gè)新類型是基于某個(gè) Go 原生類型定義的, 那么我們就叫 Go 原生類型為新類型的底層類型
在上面的例子中,int就是T1的底層類型。
但是T1不是T2的底層類型,只有原生類型才可以作為底層類型,所以T2的底層類型還是int
底層類型是很重要的,因?yàn)閷?duì)兩個(gè)變量進(jìn)行顯式的類型轉(zhuǎn)換,只有底層類型相同的變量間才能相互轉(zhuǎn)換。底層類型是判斷兩個(gè)類型本質(zhì)上是否相同的根本。
這種類型定義方式通常用在 項(xiàng)目的漸進(jìn)式重構(gòu),還有對(duì)已有包的二次封裝方面
類型別名表示新類型和原類型完全等價(jià),實(shí)際上就是同一種類型。只不過(guò)名字不同而已。
一般我們都是定義一個(gè)有名的結(jié)構(gòu)體。
字段名的大小寫(xiě)決定了字段是否包外可用。只有大寫(xiě)的字段可以被包外引用。
還有一個(gè)點(diǎn)提一下
如果換行來(lái)寫(xiě)
Age: 66,后面這個(gè)都好不能省略
還有一個(gè)點(diǎn),觀察e3的賦值
new返回的是一個(gè)指針。然后指針可以直接點(diǎn)號(hào)賦值。這說(shuō)明go默認(rèn)進(jìn)行了取值操作
e3.Age 等價(jià)于 (*e3).Age
如上定義了一個(gè)空的結(jié)構(gòu)體Empty。打印了元素e的內(nèi)存大小是0。
有什么用呢?
基于空結(jié)構(gòu)體類型內(nèi)存零開(kāi)銷這樣的特性,我們?cè)谌粘?Go 開(kāi)發(fā)中會(huì)經(jīng)常使用空 結(jié)構(gòu)體類型元素,作為一種“事件”信息進(jìn)行 Goroutine 之間的通信
這種以空結(jié)構(gòu)體為元素類建立的 channel,是目前能實(shí)現(xiàn)的、內(nèi)存占用最小的 Goroutine 間通信方式。
這種形式需要說(shuō)的是幾個(gè)語(yǔ)法糖。
語(yǔ)法糖1:
對(duì)于結(jié)構(gòu)體字段,可以省略字段名,只寫(xiě)結(jié)構(gòu)體名。默認(rèn)字段名就是結(jié)構(gòu)體名
這種方式稱為 嵌入字段
語(yǔ)法糖2:
如果是以嵌入字段形式寫(xiě)的結(jié)構(gòu)體
可以省略嵌入的Reader字段,而直接訪問(wèn)ReaderName
此時(shí)book是一個(gè)各個(gè)屬性全是對(duì)應(yīng)類型零值的一個(gè)實(shí)例。不是nil。這種情況在Go中稱為零值可用。不像java會(huì)導(dǎo)致npe
結(jié)構(gòu)體定義時(shí)可以在字段后面追加標(biāo)簽說(shuō)明。
tag的格式為反單引號(hào)
tag的作用是可以使用[反射]來(lái)檢視字段的標(biāo)簽信息。
具體的作用還要看使用的場(chǎng)景。
比如這里的tag是為了幫助 encoding/json 標(biāo)準(zhǔn)包在解析對(duì)象時(shí)可以利用的規(guī)則。比如omitempty表示該字段沒(méi)有值就不打印出來(lái)。
我們真的需要Go語(yǔ)言嗎?
我們這個(gè)世界真的需要另外一種C語(yǔ)言風(fēng)格的編程語(yǔ)言嗎?很顯然,谷歌很早就這么認(rèn)為了,在 2009 年,它借用雷蒙斯樂(lè)隊(duì)的歌“Hey!Ho!Let’s Go”,正式推出了 Go 語(yǔ)言。現(xiàn)在 Go 語(yǔ)言開(kāi)發(fā)團(tuán)隊(duì)已經(jīng)開(kāi)發(fā)出了這種語(yǔ)言的第一個(gè)穩(wěn)定版本,他們稱之為 Go 1,他們將這種語(yǔ)言推向世界,希望人們用這種語(yǔ)言“開(kāi)發(fā)出健壯的軟件產(chǎn)品和作品。”那么,現(xiàn)在人們對(duì)這種語(yǔ)言的使用情況又是如何呢?讓我們先回顧一下,什么是 Go 語(yǔ)言,是什么促使谷歌決定推出這樣一種語(yǔ)言?按 Go 語(yǔ)言的“常見(jiàn)問(wèn)題”里的說(shuō)法,自從那個(gè)“重要的系統(tǒng)級(jí)編程語(yǔ)言”誕生距今已超過(guò)十幾年了,這段時(shí)間計(jì)算機(jī)世界已經(jīng)發(fā)生了很大的變化。谷歌的才人們對(duì)目前現(xiàn)有的各種語(yǔ)言深感失望,他們必須要在“快速的編譯、快速的執(zhí)行或簡(jiǎn)單編程”之間做出選擇。“沒(méi)有一種主流的編程語(yǔ)言,例如C,C++,Java,Python 等,能提供谷歌人想要的全部特征。于是,谷歌的工程師從 2007 年起開(kāi)始開(kāi)發(fā) Go 語(yǔ)言。“常見(jiàn)問(wèn)題”里這樣說(shuō):Go 語(yǔ)言在基本語(yǔ)法上”基本上屬于C語(yǔ)言家族“,但它從 Pascal 語(yǔ)系吸收了”大量的理念“,還有一些思想是來(lái)自其它的語(yǔ)言。但對(duì)于程序員來(lái)說(shuō),應(yīng)該把它當(dāng)成一種全新的語(yǔ)言,一種以”讓程序員更有效率,讓編程更有效率,至少是讓我們更有效率并且使編程更有樂(lè)趣“的理念為設(shè)計(jì)目標(biāo)的編程語(yǔ)言。Go 語(yǔ)言擅長(zhǎng)做什么…?那么,Go 語(yǔ)言擅長(zhǎng)做什么?根據(jù)谷歌著名的軟件工程師——Go 語(yǔ)言的設(shè)計(jì)人之一——Rob Pike 的說(shuō)法,它是用來(lái)開(kāi)發(fā)”大型軟件“的。Pike 說(shuō) Go 語(yǔ)言適合于”很多程序員一起開(kāi)發(fā)的大型軟件,并且開(kāi)發(fā)周期較長(zhǎng),支持云計(jì)算的網(wǎng)絡(luò)服務(wù):簡(jiǎn)言之,就是服務(wù)端軟件。Go 語(yǔ)言能夠讓程序員快速開(kāi)發(fā),并且在軟件不斷的增長(zhǎng)過(guò)程中,它能讓程序員更容易地進(jìn)行維護(hù)和修改。它融合了傳統(tǒng)編譯型語(yǔ)言的高效性和腳本語(yǔ)言的易用性和富于表達(dá)性。“(作為原貝爾實(shí)驗(yàn)室 Unix 開(kāi)發(fā)小組成員,Pike 對(duì)系統(tǒng)軟件有相當(dāng)?shù)恼J(rèn)識(shí)。)但對(duì)于其它類型的軟件,Go 語(yǔ)言也一樣的好用。例如,我在 Google+ 上詢問(wèn)了 Go 語(yǔ)言的使用者,得到了 Douglas Fils 的回復(fù),他正在拿各種語(yǔ)言做實(shí)驗(yàn)。Fils 說(shuō)他現(xiàn)在有時(shí)會(huì)開(kāi)發(fā)一些 Web 應(yīng)用程序,大多數(shù)都是在 Java 虛擬機(jī)(JVM)平臺(tái)上。“所以 Java 自然是最常用的。我最近開(kāi)始嘗試更多的語(yǔ)言,例如 Scala 和 Groovy。我用 Groovy 語(yǔ)言已經(jīng)開(kāi)發(fā)了不少的東西,而且剛剛完成了一個(gè) Groovy/Grails 語(yǔ)言上的大型項(xiàng)目。我還研究了一下 Ruby on Rails/Python (Python 框架),并用它們做了一些東西。”他說(shuō)他用早期版本的 Go 語(yǔ)言開(kāi)發(fā)了一個(gè) Web 界面來(lái)處理數(shù)據(jù)資源。但很不幸。“當(dāng)時(shí)的 Go 的程序庫(kù)和語(yǔ)法使得開(kāi)發(fā)起來(lái)很困難。我還嘗試了 node.js,而且,到了一月份,我的精力完全轉(zhuǎn)向了 node.js.”Node.js,F(xiàn)ils 說(shuō),很流行,“雖然我很喜歡它,但它的單線程事件循環(huán)機(jī)制和非阻塞的編程模式讓我不太滿意。還有,所有的東西都要用 Javascript 的回調(diào)函數(shù),我不喜歡這樣。”很顯然,他不是一個(gè) JavaScript 的粉絲。Go 語(yǔ)言的語(yǔ)法和結(jié)構(gòu),從另一方面講,“還是很簡(jiǎn)潔的。”當(dāng)Go 語(yǔ)言的語(yǔ)法和結(jié)構(gòu)趨于穩(wěn)定,并發(fā)布了 Go 1 時(shí),他覺(jué)得應(yīng)該轉(zhuǎn)回來(lái),重寫(xiě)他的 Go 語(yǔ)言程序。這回,他想起來(lái)了當(dāng)初為什么想用 Go 來(lái)開(kāi)發(fā)。關(guān)于Go 語(yǔ)言的爭(zhēng)論Fils 說(shuō),在 Java 里,很多東西都需要有一定的模板套路,這是很討厭。他說(shuō) Scala 和 groovy 要好一些,但仍然是個(gè)問(wèn)題。Go 語(yǔ)言給人的感覺(jué)像一個(gè)動(dòng)態(tài)的類型化語(yǔ)言,F(xiàn)ils 說(shuō),但 Go 語(yǔ)言里靜態(tài)類型特征并不像 Java 里那樣明顯。Go 語(yǔ)言的垃圾收集管理,比 JVM 要好的多。跟 Groovy 這樣的動(dòng)態(tài)語(yǔ)言比起來(lái)尤其能看出這點(diǎn)。Fils 在評(píng)論中說(shuō) Go 語(yǔ)言的速度比其它語(yǔ)言快很多倍。它運(yùn)行速度快但不影響負(fù)載量。它編譯所需的時(shí)間很短,他在開(kāi)發(fā)時(shí)能邊開(kāi)發(fā)邊編譯,就像動(dòng)態(tài)語(yǔ)言那樣迅速。最后,他說(shuō)使用 Go 語(yǔ)言要比使用 Node.js,Java 或以 Java 為基礎(chǔ)的語(yǔ)言,Ruby on Rails 等語(yǔ)言要有趣的多。在開(kāi)發(fā) JVM 平臺(tái)上的應(yīng)用時(shí),我總感覺(jué)自己是一個(gè)系統(tǒng)管理員,而不是一個(gè)開(kāi)發(fā)者。我要修改堆空間,我要研究負(fù)載均衡或內(nèi)存問(wèn)題或其它的資源管理問(wèn)題。而使用 Go 語(yǔ)言,我不需要考慮這些。我開(kāi)發(fā),編譯,測(cè)試,運(yùn)行,部署,非常的享受。請(qǐng)注意,并不是所有的人都喜歡 Go 語(yǔ)言。你可以看一看 Shaneal Manek 的關(guān)于 Go 語(yǔ)言的垃圾收集系統(tǒng)以及腳本語(yǔ)言和編譯型語(yǔ)言之間比較的評(píng)論。Go 語(yǔ)言能走向主流嗎?你的期望是什么?按照 RedMonk’s Stephen O’Grady 的說(shuō)法,對(duì)于 Go 語(yǔ)言來(lái)說(shuō)現(xiàn)在還非常年輕。通常,程序員會(huì)分成兩個(gè)陣營(yíng):要么歡迎底層語(yǔ)言和腳本型/垃圾收集器型語(yǔ)言的融合,要么是反對(duì)這樣做。對(duì)于后者,毫無(wú)意外的,他們是C語(yǔ)言的堅(jiān)定擁護(hù)者。圍繞著 Go 語(yǔ)言有很多的爭(zhēng)論,這不令人吃驚,任何一種語(yǔ)言都是這樣。而令人吃驚的是目前 Go 語(yǔ)言在程序員中獲得了相當(dāng)?shù)奈Α’Grady 二月份在 RedMonk 編程語(yǔ)言分級(jí)中把 Go 語(yǔ)言放入了第二梯隊(duì)。但是,他說(shuō),考慮一下 Go 語(yǔ)言是如此的年輕,“即使是目前這種成績(jī)也是讓人相當(dāng)?shù)挠∠笊羁塘恕!惫雀枰呀?jīng)發(fā)布了 Go 語(yǔ)言的穩(wěn)定版本,并且在 Google App Engine 支持部署這種語(yǔ)言的應(yīng)用,這將給 Go 語(yǔ)言帶來(lái)更多的吸引力。Go 語(yǔ)言能否成為一種“主流”語(yǔ)言,這需要由時(shí)間來(lái)判定。不過(guò),看起來(lái)除谷歌之外還有很多公司對(duì)這種語(yǔ)言也很感興趣,比如 Engine Yard 等公司。那些對(duì)目前的現(xiàn)存的語(yǔ)言不太滿意的程序員大概對(duì) Go 語(yǔ)言都在拭目以待。如果你在使用 Go 語(yǔ)言或之前簡(jiǎn)單涉略過(guò)它,你需要注意,Go 1 版引入了不少的變化。然而從 Go 1 版開(kāi)始,Go 語(yǔ)言的變化將會(huì)遵循它的規(guī)格說(shuō)明書(shū)進(jìn)行。根據(jù) Go 語(yǔ)言的開(kāi)發(fā)人員的透露,“也許在某個(gè)時(shí)間,我們會(huì)推出 Go 2 的規(guī)范,但在此之前,用 Go 語(yǔ)言編寫(xiě)的程序在今后的 Go 1 版本(Go 1.1, Go 1.2 等)上都能正確的運(yùn)行。”你用Go 語(yǔ)言開(kāi)發(fā)過(guò)什么項(xiàng)目嗎?
go 的選項(xiàng)模式
現(xiàn)在有個(gè)結(jié)構(gòu)體如下定義:
我們需要初始化結(jié)構(gòu)體,如果是其他語(yǔ)言,函數(shù)支持默認(rèn)參數(shù):
但是,go語(yǔ)言函數(shù)不支持默認(rèn)參數(shù),同時(shí)即使go語(yǔ)言支持默認(rèn)參數(shù),但是如果配置項(xiàng)過(guò)多,那么每一個(gè)配置項(xiàng)都得寫(xiě)一個(gè)默認(rèn)參數(shù),也不現(xiàn)實(shí)。
那么,在go語(yǔ)言中,我們?cè)趺磧?yōu)雅的給其初始化呢,這時(shí),就需要利用選項(xiàng)模式了(option)。
首先,我們定義一個(gè)option函數(shù)類型:
它接收一個(gè)參數(shù): *Server 。
然后定義一個(gè) NewServer 函數(shù),它接收一個(gè) Option類型的不定參數(shù):
最后,再直接定義一系列返回 Option的函數(shù)
使用時(shí),直接:
分享標(biāo)題:go語(yǔ)言事件模式 go語(yǔ)言并發(fā)
網(wǎng)站路徑:http://ef60e0e.cn/article/dodhjos.html