一、我們為什麼選擇Go語言
選擇Go語言的原因可能會有很多,關于Go語言的特性、優勢等,我們在之前的文檔中也已經介紹了很多了。但是最主要的原因,應該是基于以下兩方面的考慮:
-
執行性能
縮短API的響應時長,解決批量請求通路逾時的問題。在Uwork的業務場景下,一次API批量請求,往往會涉及對另外接口服務的多次調用,而在之前的PHP實作模式下,要做到并行調用是非常困難的,串行處理卻不能從根本上提高處理性能。而GO語言不一樣,通過協程可以友善的實作API的并行處理,達到處理效率的最大化。 依賴Golang的高性能HTTP Server,提升系統吞吐能力,由PHP的數百級别提升到數千裡甚至過萬級别。
-
開發效率
GO語言使用起來簡單、代碼描述效率高、編碼規範統一、上手快。 通過少量的代碼,即可實作架構的标準化,并以統一的規範快速建構API業務邏輯。 能快速的建構各種通用元件和公共類庫,進一步提升開發效率,實作特定場景下的功能量産。
二、Go語言能做什麼
Go 語言從釋出 1.0 版本以來備閱聽人多開發者關注并得到廣泛使用,Go 語言的簡單、高效、并發特性吸引了衆多傳統語言開發者的加入,而且人數越來越多。
鑒于Go語言的特點和設計的初衷,Go語言作為伺服器程式設計語言,很适合處理日志、資料打包、虛拟機處理、檔案系統、分布式系統、資料庫代理等;網絡程式設計方面,Go語言廣泛應用于Web 應用、API應用、下載下傳應用等;除此之外,Go語言還适用于記憶體資料庫和雲平台領域,目前國外很多雲平台都是采用Go開發。
- 伺服器程式設計,以前你如果使用C或者C++做的那些事情,用Go來做很合适,例如處理日志、資料打包、虛拟機處理、檔案系統等。
- 分布式系統、資料庫代理器、中間件等,例如Etcd。
- 網絡程式設計,這一塊目前應用最廣,包括Web應用、API應用、下載下傳應用,而且Go内置的net/http包基本上把我們平常用到的網絡功能都實作了。
- 資料庫操作
- 開發雲平台,目前國外很多雲平台在采用Go開發
三、國内外有哪些企業或項目使用Go語言
Go釋出之後,很多公司特别是雲計算公司開始用Go重構他們的基礎架構,很多都是直接采用Go進行了開發,最近熱火朝天的Docker就是采用Go開發的。
使用 Go 語言開發的開源項目非常多。早期的 Go 語言開源項目隻是通過 Go 語言與傳統項目進行C語言庫綁定實作,例如 Qt、Sqlite 等;後期的很多項目都使用 Go 語言進行重新原生實作,這個過程相對于其他語言要簡單一些,這也促成了大量使用 Go 語言原生開發項目的出現。
-
雲計算基礎設施領域
代表項目:docker、kubernetes、etcd、consul、cloudflare CDN、七牛雲存儲等。
-
基礎軟體
代表項目:tidb、influxdb、cockroachdb等。
-
微服務
代表項目:go-kit、micro、monzo bank的typhon、bilibili等。
-
網際網路基礎設施
代表項目:以太坊、hyperledger等。
采用Go的一些國外公司,如Google、Docker、Apple、Cloud Foundry、CloudFlare、Couchbase、CoreOS、Dropbox、MongoDB、AWS等公司;
采用Go開發的國内企業:如阿裡雲CDN、百度、小米、七牛、PingCAP、華為、金山軟體、獵豹移動、餓了麼等公司。
Docker
Docker 是一種作業系統層面的虛拟化技術,可以在作業系統和應用程式之間進行隔離,也可以稱之為容器。Docker 可以在一台實體伺服器上快速運作一個或多個執行個體。基于lxc的一個虛拟打包工具,能夠實作PAAS平台的組建。例如,啟動一個 CentOS 作業系統,并在其内部指令行執行指令後結束,整個過程就像自己在作業系統一樣高效。
項目連結:
https://github.com/docker/docker
go語言
Go 語言自己的早期源碼使用C語言和彙編語言寫成。從 Go 1.5 版本後,完全使用 Go 語言自身進行編寫。Go 語言的源碼對了解 Go 語言的底層排程有極大的參考意義,建議希望對 Go 語言有深入了解的讀者讀一讀。
https://github.com/golang/go
Kubernetes
Google 公司開發的建構于 Docker 之上的容器排程服務,使用者可以通過 Kubernetes 叢集進行雲端容器叢集管理。
https://github.com/kubernetes/kubernetes
etcd
一款分布式、可靠的 KV 存儲系統,可以快速進行雲配置。
https://github.com/coreos/etcd
beego
beego 是一個類似 Python的 Tornado 架構,采用了 RESTFul 的設計思路,使用 Go 語言編寫的一個極輕量級、高可伸縮性和高性能的 Web 應用架構。
https://github.com/astaxie/beego
martini
一款快速構模組化塊化的 Web 應用的 Web 架構。
https://github.com/go-martini/martini
codis
國産的優秀分布式 Redis 解決方案。
https://github.com/CodisLabs/codis
delve
Go語言
強大的調試器,被很多內建環境和編輯器整合。
https://github.com/derekparker/delve
Facebook也在用,為此他們還專門在Github上建立了一個開源組織facebookgo,大家可以通過https://github.com/facebookgo通路檢視facebook開源的項目,比如著名的是平滑更新的grace。
Uber
騰訊
騰訊作為國内的大公司,還是敢于嘗試的,尤其是Docker容器化這一塊,他們在15年已經做了docker萬台規模的實踐,具體可以參考http://www.infoq.com/cn/articles/tencent-millions-scale-docker-application-practice 。
百度
目前所知的百度的使用是在運維這邊,是百度運維的一個BFE項目,負責前端流量的接入。他們的負責人在2016年有分享,大家可以看下這個 http://www.infoq.com/cn/presentations/application-of-golang-in-baidu-frontend 。
其次就是百度的消息系統。負責公司手百消息通訊系統伺服器端開發及維護。
京東
京東雲消息推送系統、雲存儲,以及京東商城等都有使用Go做開發。
小米
小米對Golang的支援,莫過于運維監控系統的開源,也就是 http://open-falcon.com/ 。
此外,小米互娛、小米商城、小米視訊、小米生态鍊等團隊都在使用Golang。
360
360對Golang的使用也不少,一個是開源的日志搜尋系統Poseidon,托管在Github上,https://github.com/Qihoo360/poseidon.
還有360的推送團隊也在使用,他們還寫了篇博文在Golang的官方部落格上 https://blog.golang.org/qihoo。
七牛雲
七牛雲用了近50萬行代碼,來實作整個産品。七牛雲存儲産品網址:http://qiniu.com/。上線時間:2011-9-1。應用範圍:整個産品(包括基礎服務、Web端、統計平台、各類小工具等等)Go代碼行數占比:99.9%日 PV:保密
美團
美團背景流量支撐程式。應用範圍:支撐主站背景流量(排序,推薦,搜尋等),提供負載均衡,cache,容錯,按條件分流,統計運作名額(qps,latency)等功能。
滴滴
基礎服務平台。
###金山微看
應用範圍:服務接口,背景流程服務,消息系統,圖檔系統
搜狗
搜狗推送系統。Push系統中用于維持與用戶端連接配接的部分。
QOR - 子產品化的電商系統
- QOR官網: QOR: E-commerce & CMS SDK written in Go
- github位址: qor/qor · GitHub
- 應用範圍: 整個産品
weico
産品名:weico 3.0, 服務端所有代碼都是用Go實作。
仙俠道
- 産品網址:[仙俠道官網 - 心動遊戲](仙俠道官網 - 心動遊戲)
- 應用範圍: 遊戲服務端(通訊、邏輯、資料存儲)
快玩遊戲
- 網址:快玩小遊戲,單機遊戲,網頁遊戲,快玩遊戲,快玩遊戲盒
- 應用範圍:實時消息系統、使用者認證、使用者會話、統一統計接口
盛大雲CDN
- 網址:盛大雲計算
- 應用範圍:CDN的排程系統、分發系統、監控系統、短域名服務,CDN内部開放平台、營運報表系統以及其他一些小工具等
Bmob移動後端雲服務平台
- 産品網址:Bmob移動後端雲服務平台
- 應用範圍:Restful API(使用Beego)、統計分析平台、常用服務如發郵件、隊列異步處理、統計使用者空間和接口請求
群策
- 網址:[群策 - 統一團隊溝通,高效完成工作](群策 - 統一團隊溝通,高效完成工作)
- 應用範圍:全系統
BiddingX DSP廣告投放系統
- 網址:BiddingX_專業的DSP解決方案供應商
- 應用範圍:競價投放、曝光統計、點選跳轉
街坊四鄰
- 網址:首頁 - 街坊四鄰
- 應用範圍:背景服務
Leanote
- 網址:Leanote
Bearychat
- 網址:BearyChat
宅豆
- 網址:宅豆網 - 自築最美家,宅豆随你搭
白闆- 設計圖讨論工具
- 網址:白闆
實驗樓
- 網址:實驗樓 - 第一家以實驗為核心的IT線上教育平台
新浪微網誌
中間件和彈性排程用 Java 和 Go 編寫,微網誌視訊轉碼及存儲服務用 Go 編寫。
愛奇藝
VR 背景系統中間件,VR 端的 HTTP 接口。
獵豹移動
消息推送
網易
網易蜂巢容器公有雲。
哔哩哔哩
彈幕
巨人網絡
部分手機遊戲的服務端。
今日頭條
Nsq:Nsq 是由Go語言開發的高性能、高可用消息隊列系統,性能非常高,每天能處理數十億條的消息;
Packer:用來生成不同平台的鏡像檔案,例如VM、vbox、AWS等,作者是vagrant的作者
Skynet:分布式排程架構
Doozer:分布式同步工具,類似ZooKeeper
Heka:mazila開源的日志處理系統
Cbfs:couchbase開源的分布式檔案系統
Tsuru:開源的PAAS平台,和SAE實作的功能一模一樣
Groupcache:memcahe作者寫的用于Google下載下傳系統的緩存系統
God:類似redis的緩存系統,但是支援分布式和擴充性
Gor:網絡流量抓包和重放工具
還有很多,比如阿裡中間件、聚美優品、高升控股、探探、鬥魚直播、人人車、亞信、Udesk、方付通、招财貓、三一集團、美餐網等。一般的選擇,都是選擇用于自己公司合适的産品系統來做,比如消息推送的、監控的、容器的等,Golang特别适合做網絡并發的服務,這是他的強項,是以也是被優先用于這些項目。Go語言作為一門大型項目開發語言,在很多大公司相繼使用,甚至完全轉向Go開發。
四、寫在最後
當然,一個技術能不能發展起來,關鍵還要看三點。
- 有沒有一個比較好的社群。像 C、C++、Java、Python 和 JavaScript 的生态圈都是非常豐富和火爆的。尤其是有很多商業機構參與的社群那就更為人氣爆棚了,比如 Linux 的社群。
- 有沒有一個工業化的标準。像 C、C++、Java 都是有标準化組織的。尤其是 Java,其在架構上還搞出了像 J2EE 這樣的企業級标準。
- 有沒有一個或多個殺手級應用。C、C++ 和 Java 的殺手級應用不用多說了,就算是對于 PHP 這樣還不能算是一個好的程式設計語言來說,因為是 Linux 時代的第一個殺手級解決方案 LAMP 中的關鍵技術,是以,也發展起來了。
上述的這三點是非常關鍵的,新的技術隻需要占到其中一到兩點就已經很不錯了,何況有的技術,比如 Java,是三點全占到了,是以,Java 的發展是如此好。當然,除了上面這三點重要的,還有一些其它的影響因素,比如:
- 學習曲線是否低,上手是否快。這點非常重要,C++ 在這點上越做越不好了。
- 有沒有一個不錯的提高開發效率的開發架構。如:Java 的 Spring 架構,C++ 的 STL 等。
- 是否有一個或多個巨型的技術公司作為後盾。如:Java 和 Linux 後面的 IBM、Sun……
- 有沒有解決軟體開發中的痛點。如:Java 解決了 C 和 C++ 的記憶體管理問題。
用這些标尺來量一下 Go 語言,我們可以清楚地看到:
- Go 語言容易上手;
- Go 語言解決了并發程式設計和寫底層應用開發效率的痛點;
- Go 語言有 Google 這個世界一流的技術公司在後面;
- Go 語言的殺手級應用是 Docker,而 Docker 的生态圈在這幾年完全爆棚了。
是以,Go 語言的未來是不可限量的。當然,我個人覺得,Go 可能會吞食很多 C、C++、Java 的項目。不過,Go 語言所吞食主要的項目應該是中間層的項目,既不是非常底層也不會是業務層。
也就是說,Go 語言不會吞食底層到 C 和 C++ 那個級别的,也不會吞食到高層如 Java 業務層的項目。Go 語言能吞食的一定是 PaaS 上的項目,比如一些消息緩存中間件、服務發現、服務代理、控制系統、Agent、日志收集等等,沒有複雜的業務場景,也到不了特别底層(如作業系統)的中間平台層的軟體項目或工具。而 C 和 C++ 會被打到更底層,Java 會被打到更上層的業務層。
好了,我們再用上面的标尺來量一下 Go 語言的殺手級應用 Docker,你會發現基本是一樣的。
- Docker 上手很容易。
- Docker 解決了運維中的環境問題以及服務排程的痛點。
- Docker 的生态圈中有大公司在後面助力。比如 Google。
- Docker 産出了工業界标準 OCI。
- Docker 的社群和生态圈已經出現像 Java 和 Linux 那樣的态勢。
- ……
是以,雖然幾年前的 Docker ,當時的坑兒還很多,但是,相對于這些大的因素來說,那些小坑兒都不是問題。隻是需要一些時間,這些小坑兒在未來 5-10 年就可以完全被填平了。
同樣,我們可以看到 Kubernetes 作為服務和容器排程的關鍵技術一定會是最後的赢家。
最後,我還要說一下,為什麼要早一點地進入這些新技術,而不是等待這些技術成熟了後再進入。原因有這麼幾個。
技術的發展過程非常重要。因為你可以清楚地看到了這種新技術的生态圈發展過程。讓我們收獲最大的并不是這些技術本身,而是一個技術的變遷和行業的發展。
從中,我們看到了非常具體的各種思潮和思路,這些東西比起 技術本身來說更有價值。因為,這不但讓我們重新思考已經掌握的技術以及如何更好地解決已有的問題,而且還讓我看到了未來。不但有了技術優勢,而且這些知識還讓我們的技術生涯多了很多的可能性。