golang練手小項(xiàng)目系列(3)-并發(fā)讀取文件夾信息

問題描述:

實(shí)現(xiàn)一個(gè)程序計(jì)算并打印輸入的目錄下所有文件的總數(shù)和總大小(以GB計(jì)算)擂煞。完成之后你將熟悉select伦连、WaitGroup、ioutil的用法袭异。


要點(diǎn):

并發(fā)讀取文件(夾)信息钠龙。

限制開啟的goroutines的最大數(shù)量。

運(yùn)行時(shí)每隔500ms打印當(dāng)前已經(jīng)統(tǒng)計(jì)的文件數(shù)和總大杏濉(使用命令行參數(shù)指定此功能是否啟用)碴里。


拓展:

在執(zhí)行中在有外部輸入時(shí)退出程序。

實(shí)現(xiàn):

import (

? "flag"

? "fmt"

? "io/ioutil"

? "os"

? "path/filepath"

? "sync"

? "time"

)

var verbose = flag.Bool("v", false, "show verbose progress messages")

var sema = make(chan struct{}, 50)

var done = make(chan struct{})

func dirents(dir string) []os.FileInfo{

? select {

? ? ? case sema <- struct{}{}: //

? ? ? case <- done:

? ? ? ? return nil

? }

? defer func() {<- sema}()

? entries, err := ioutil.ReadDir(dir)

? if err != nil{

? ? ? fmt.Fprintf(os.Stderr, "du1: %v\n", err)

? ? ? return nil

? }

? return entries

}

func walkDir(dir string, n *sync.WaitGroup, fileSizes chan<- int64){

? defer n.Done()

? if cancelled(){

? ? ? return

? }

? for _, entry := range dirents(dir){

? ? ? if entry.IsDir(){

? ? ? ? n.Add(1)

? ? ? ? subdir := filepath.Join(dir, entry.Name())

? ? ? ? go walkDir(subdir, n, fileSizes)

? ? ? } else {

? ? ? ? fileSizes <- entry.Size()

? ? ? }

? }

}

func printDiskUsage(nfiles, nbytes int64){

? fmt.Printf("%d files %.1f GB\n", nfiles, float64(nbytes/1e9))

}

func cancelled() bool{

? select {

? case <- done:

? ? ? return true

? default:

? ? ? return false

? }

}

func main() {

? flag.Parse()

? roots := flag.Args()

? var tick <-chan time.Time

? if *verbose{

? ? ? tick = time.Tick(500 * time.Millisecond)

? }

? if len(roots) == 0{

? ? ? roots = []string{"."}

? }

? fileSizes := make(chan int64)

? var nfiles, nbytes int64

? var n sync.WaitGroup

? for _, root := range roots{

? ? ? n.Add(1)

? ? ? go walkDir(root, &n, fileSizes)

? }

? go func() {

? ? ? n.Wait()

? ? ? close(fileSizes)

? }()

? go func() {

? ? ? os.Stdin.Read(make([]byte, 1))

? ? ? close(done)

? }()

loop:

? ? ? for {

? ? ? ? select {

? ? ? ? ? ? case <-done:

? ? ? ? ? ? ? for range fileSizes{

? ? ? ? ? ? ? ? ? //

? ? ? ? ? ? ? }

? ? ? ? ? ? case size, ok := <- fileSizes:

? ? ? ? ? ? ? if !ok {

? ? ? ? ? ? ? ? ? break loop

? ? ? ? ? ? ? }

? ? ? ? ? ? ? nfiles++

? ? ? ? ? ? ? nbytes += size

? ? ? ? ? ? case <- tick:

? ? ? ? ? ? ? printDiskUsage(nfiles, nbytes)

? ? ? ? }

? ? ? }

? printDiskUsage(nfiles, nbytes)

}

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末上真,一起剝皮案震驚了整個(gè)濱河市咬腋,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌睡互,老刑警劉巖根竿,帶你破解...
    沈念sama閱讀 222,627評(píng)論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異就珠,居然都是意外死亡寇壳,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,180評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門妻怎,熙熙樓的掌柜王于貴愁眉苦臉地迎上來壳炎,“玉大人,你說我怎么就攤上這事逼侦∧浔纾” “怎么了?”我有些...
    開封第一講書人閱讀 169,346評(píng)論 0 362
  • 文/不壞的土叔 我叫張陵榛丢,是天一觀的道長(zhǎng)铲球。 經(jīng)常有香客問我,道長(zhǎng)涕滋,這世上最難降的妖魔是什么睬辐? 我笑而不...
    開封第一講書人閱讀 60,097評(píng)論 1 300
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上溯饵,老公的妹妹穿的比我還像新娘侵俗。我一直安慰自己,他們只是感情好丰刊,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,100評(píng)論 6 398
  • 文/花漫 我一把揭開白布隘谣。 她就那樣靜靜地躺著,像睡著了一般啄巧。 火紅的嫁衣襯著肌膚如雪寻歧。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,696評(píng)論 1 312
  • 那天秩仆,我揣著相機(jī)與錄音码泛,去河邊找鬼。 笑死澄耍,一個(gè)胖子當(dāng)著我的面吹牛噪珊,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播齐莲,決...
    沈念sama閱讀 41,165評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼痢站,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了选酗?” 一聲冷哼從身側(cè)響起阵难,我...
    開封第一講書人閱讀 40,108評(píng)論 0 277
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎芒填,沒想到半個(gè)月后呜叫,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,646評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡氢烘,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,709評(píng)論 3 342
  • 正文 我和宋清朗相戀三年怀偷,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了家厌。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片播玖。...
    茶點(diǎn)故事閱讀 40,861評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖饭于,靈堂內(nèi)的尸體忽然破棺而出蜀踏,到底是詐尸還是另有隱情,我是刑警寧澤掰吕,帶...
    沈念sama閱讀 36,527評(píng)論 5 351
  • 正文 年R本政府宣布果覆,位于F島的核電站,受9級(jí)特大地震影響殖熟,放射性物質(zhì)發(fā)生泄漏局待。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,196評(píng)論 3 336
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望钳榨。 院中可真熱鬧舰罚,春花似錦、人聲如沸薛耻。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,698評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)饼齿。三九已至饲漾,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間缕溉,已是汗流浹背考传。 一陣腳步聲響...
    開封第一講書人閱讀 33,804評(píng)論 1 274
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留证鸥,地道東北人伙菊。 一個(gè)月前我還...
    沈念sama閱讀 49,287評(píng)論 3 379
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像敌土,于是被迫代替她去往敵國(guó)和親镜硕。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,860評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容