應(yīng)用編程基礎(chǔ)課第四講:Go編程實(shí)踐

今天我給大家介紹下我使用Go語言做過的一些編程實(shí)踐

golog

代碼在:https://github.com/goinbox/golog

無論我們做什么開發(fā)匪蟀,log都是個(gè)強(qiáng)需求,所以先給大家介紹下我開發(fā)的golog

首先看下里面最重要的幾個(gè)數(shù)據(jù)結(jié)構(gòu)間的關(guān)系:

golog.png
  • writer

對底層寫操作的封裝宰僧,寫的對象可以是文件材彪、隊(duì)列、ES等,當(dāng)前提供如下writer實(shí)現(xiàn):

  1. FileWriter寫文件
  2. FileWithSplitWriter寫文件段化,可自動(dòng)按照天嘁捷、小時(shí)為單位分文件寫入
  3. ConsoleWriter寫終端
  • buffer

對寫操作加buffer提升寫性能,實(shí)現(xiàn)時(shí)有如下要點(diǎn):

  1. 實(shí)現(xiàn)為writer的裝飾者
  2. 提供單獨(dú)的goroutine做autoflush
  • formater

formater是將要記錄的log內(nèi)容發(fā)往writer之前做一次格式化显熏,例如添加統(tǒng)一的log日期雄嚣、終端輸出添加顏色等,當(dāng)前有如下實(shí)現(xiàn):

  1. simpleFormater在消息前面加上loglevel和時(shí)間
  2. webFormater在simpleFormater的基礎(chǔ)上添加clientIp和logId
  3. consoleFormater為終端輸出添加顏色
  • logger

這個(gè)是程序中記錄log要使用到的對象喘蟆,當(dāng)前提供了simpleLogger這個(gè)實(shí)現(xiàn)缓升,是一種同步的方式(寫操作阻塞程序執(zhí)行)

  • async

將寫入操作放到單獨(dú)的goroutine中從而提升程序性能,實(shí)現(xiàn)要點(diǎn)如下:

  1. asyncLogger實(shí)現(xiàn)為對logger的裝飾者
  2. 提供單獨(dú)的goroutine做寫操作

更詳細(xì)的使用履肃,可以參考:http://www.reibang.com/p/20d0f74c3c08

shardmap

代碼在:https://github.com/goinbox/shardmap

go中的原生map在多個(gè)goroutine同時(shí)讀寫時(shí)是需要加鎖的仔沿,為了提升性能,核心思想是減少鎖粒度尺棋,shardmap就是這樣開發(fā)的:

shardmap.png

go1.8之后的官方包中提供了sync.Map用于解決map的并發(fā)讀寫問題封锉,但我自己測試沒有shardmap性能好,讀者有興趣可以自己試下膘螟。

更詳細(xì)的使用成福,可以參考:http://www.reibang.com/p/090e00f12b3e

redis

代碼在:https://github.com/goinbox/redis

redis可用的包很多,我自己實(shí)現(xiàn)的這個(gè)包荆残,底層driver部分使用了redigo奴艾,考慮到實(shí)際的生產(chǎn)環(huán)境使用,我自行實(shí)現(xiàn)了如下機(jī)制:

  1. 懶加載機(jī)制内斯,即只有真正和redis做交互時(shí)才創(chuàng)建網(wǎng)絡(luò)連接
  2. 操作失敗自動(dòng)重連機(jī)制
  3. 提供連接池以提高性能
  4. pipeling封裝
  5. 事物封裝

更詳細(xì)的使用蕴潦,可以參考:http://www.reibang.com/p/fb498f30dff2

goconsumer

代碼在:https://github.com/goinbox/goconsumer

對異步隊(duì)列的使用目前在開發(fā)中也是必不可少的,這里提供了一個(gè)消費(fèi)處理框架俘闯,目前支持:

  1. 消息非順序消費(fèi)
  2. 消息順序消費(fèi)

整體處理框架如圖:

goconsumer.png

里面的對象關(guān)系如下:

  • consumer

從各種隊(duì)列中做消費(fèi)的對象潭苞,例如kafka、nsq等

  • dispatcher

分配消息到worker中處理真朗,可以在這里實(shí)現(xiàn)自己的分配算法達(dá)到順序消費(fèi)的目的此疹,當(dāng)前提供下面兩種實(shí)現(xiàn):

  1. simpleDispatcher,這個(gè)做消息的隨機(jī)分發(fā)遮婶,無需順序的消費(fèi)均可以使用
  2. specifyDispatcher蝗碎,自己指定消息的分發(fā)方法,需要順序消費(fèi)等特殊消費(fèi)需求可以使用
  • worker

消息處理對象旗扑,干實(shí)際業(yè)務(wù)工作的蹦骑。

  • task

啟動(dòng)一個(gè)消費(fèi)任務(wù)框架,執(zhí)行的入口肩豁,我在task_test.go中有個(gè)demo實(shí)現(xiàn)脊串,可供大家參考辫呻。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市琼锋,隨后出現(xiàn)的幾起案子放闺,更是在濱河造成了極大的恐慌,老刑警劉巖缕坎,帶你破解...
    沈念sama閱讀 216,496評(píng)論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件怖侦,死亡現(xiàn)場離奇詭異,居然都是意外死亡谜叹,警方通過查閱死者的電腦和手機(jī)匾寝,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,407評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來荷腊,“玉大人艳悔,你說我怎么就攤上這事∨觯” “怎么了猜年?”我有些...
    開封第一講書人閱讀 162,632評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長疾忍。 經(jīng)常有香客問我乔外,道長,這世上最難降的妖魔是什么一罩? 我笑而不...
    開封第一講書人閱讀 58,180評(píng)論 1 292
  • 正文 為了忘掉前任杨幼,我火速辦了婚禮,結(jié)果婚禮上聂渊,老公的妹妹穿的比我還像新娘差购。我一直安慰自己,他們只是感情好汉嗽,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,198評(píng)論 6 388
  • 文/花漫 我一把揭開白布歹撒。 她就那樣靜靜地躺著,像睡著了一般诊胞。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上锹杈,一...
    開封第一講書人閱讀 51,165評(píng)論 1 299
  • 那天撵孤,我揣著相機(jī)與錄音,去河邊找鬼竭望。 笑死邪码,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的咬清。 我是一名探鬼主播闭专,決...
    沈念sama閱讀 40,052評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼奴潘,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了影钉?” 一聲冷哼從身側(cè)響起画髓,我...
    開封第一講書人閱讀 38,910評(píng)論 0 274
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎平委,沒想到半個(gè)月后奈虾,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,324評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡廉赔,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,542評(píng)論 2 332
  • 正文 我和宋清朗相戀三年肉微,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片蜡塌。...
    茶點(diǎn)故事閱讀 39,711評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡碉纳,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出馏艾,到底是詐尸還是另有隱情劳曹,我是刑警寧澤,帶...
    沈念sama閱讀 35,424評(píng)論 5 343
  • 正文 年R本政府宣布攒至,位于F島的核電站厚者,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏迫吐。R本人自食惡果不足惜库菲,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,017評(píng)論 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望志膀。 院中可真熱鬧熙宇,春花似錦、人聲如沸溉浙。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,668評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽戳稽。三九已至馆蠕,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間惊奇,已是汗流浹背互躬。 一陣腳步聲響...
    開封第一講書人閱讀 32,823評(píng)論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留颂郎,地道東北人吼渡。 一個(gè)月前我還...
    沈念sama閱讀 47,722評(píng)論 2 368
  • 正文 我出身青樓,卻偏偏與公主長得像乓序,于是被迫代替她去往敵國和親寺酪。 傳聞我的和親對象是個(gè)殘疾皇子坎背,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,611評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理,服務(wù)發(fā)現(xiàn)寄雀,斷路器得滤,智...
    卡卡羅2017閱讀 134,651評(píng)論 18 139
  • # Python 資源大全中文版 我想很多程序員應(yīng)該記得 GitHub 上有一個(gè) Awesome - XXX 系列...
    aimaile閱讀 26,478評(píng)論 6 427
  • Chapter 8 Goroutines and Channels Go enable two styles of...
    SongLiang閱讀 1,581評(píng)論 0 3
  • 早知道有一處風(fēng)景絕佳的地方脖阵,那里鳥鳴花紅命黔,山泉淙淙。一直向往著經(jīng)由寫作抵達(dá)那里蘑辑。 然寫作路上岔路太多洋魂,困難重重喜鼓。 ...
    松風(fēng)泉吟閱讀 321評(píng)論 4 3
  • 柒涵閱讀 208評(píng)論 0 2