簡明writeStream實現(xiàn)

Pro

一個createWriteStream的簡單實現(xiàn)牙甫,以求能增加對可寫流的理解與應(yīng)用滩褥。

參數(shù)配置

/**
 * createWriteStream
 * @param1 path
 * @param2 options
 */
let fs = require('fs');
let ws = fs.createWriteStream('./1.txt',{
  flags:'w'//文件的打開模式
  ,mode:0o666//文件的權(quán)限設(shè)置
  ,encoding:'utf8'//寫入文件的字符的編碼
  ,highWaterMark:3//最高水位線
  ,start:0 //寫入文件的起始索引位置        
  ,autoClose:true//是否自動關(guān)閉文檔
})

createWriteStream類的實例化

  • 實例化一個createWriteStream
    • pathoptions掛載在createWriteStream的實例上炫加,除此之外再在實例上掛載以下屬性
      • self.fd=null:文件打開后返回的文件描述符
      • self.pos=self.start:用于表示文件真正寫入時的指針位置
      • self.Buffer=[]:用來表示文件的緩沖區(qū)
      • self.len=null:用來表示緩沖區(qū)此時的大小
      • self.isWriting=false:用來表示是否正在真正寫入文件
    • 調(diào)用open方法瑰煎,打開文件(發(fā)射open事件)

實例write方法的執(zhí)行流程

  • wirte方法接收三個參數(shù),chunk要寫入的內(nèi)容俗孝,encoding要進行的酒甸,cb回調(diào)函數(shù)。
  • write執(zhí)行流程:
    • 判斷傳入的chunk是否為buffer赋铝,如果不是插勤,則轉(zhuǎn)換成buffer,用于轉(zhuǎn)化編碼依據(jù)傳入的encoding參數(shù)革骨。
    • 更新Buffer緩沖區(qū)的len長度农尖,讓len加上該次chunk的長度
    • 判斷len是否已經(jīng)超過highWaterMark,將值存入flag
    • 判斷是否處于isWriting狀態(tài):
      • 是良哲,則先加chunk寫入實例對象下的Buffer緩沖區(qū)盛卡。
      • 否,更新isWriting筑凫,接將參數(shù)傳遞給實例下的_write方法寫入文件
    • 返回flag

實例_write方法的執(zhí)行流程

此方法用于真正寫入文件

  • 查看實例的fd屬性是否存在(文件是否打開成功)
    • 成功滑沧,調(diào)用fs模塊的write方法正式寫入數(shù)據(jù)
      • 更新實例對象下的len以及pos屬性
      • 調(diào)用clearBuffer方法將緩沖區(qū)的內(nèi)容寫入
      • 調(diào)用write方法傳入的回調(diào)函數(shù)cb
    • 失敗,訂閱一個open事件(open事件將會在open方法中被發(fā)射)巍实,在訂閱中的回調(diào)方法中再次以相同的參數(shù)調(diào)用_write方法

實例clearBuffer方法

  • 從緩沖區(qū)中取出一個數(shù)據(jù)
    • 如果數(shù)據(jù)存在滓技,調(diào)用_write方法
    • 如果數(shù)據(jù)不存在,將isWriting更改為false棚潦,發(fā)射drain事件

實現(xiàn)源碼以及測試文件

let fs = require('fs');
let EventEmitter = require('events');

class WriteStream extends EventEmitter {
  constructor(path, options) {
    super();
    let self = this;
    Object.assign(self, options); //還需設(shè)置默認值
    self.path = path;
    self.isWriting = false;
    self.Buffer = []; //源碼中為鏈表實現(xiàn)的緩沖區(qū)
    self.len = null;
    self.pos = self.start; //初始化寫入位置
    self.fd = null;
    self.open();
  }

  open() {
    let self = this;
    fs.open(self.path, self.flags, self.mode, (err, fd) => {
      self.fd = fd;
      if (err) return self.destroy(err);
      self.emit('open');
    });
  }

  destroy(err) {
    fs.close(this.fd, () => {
      this.emit('error', err);
    });
  }

  write(chunk, encoding, cb) {
    let self = this
      , ret = null;
    encoding = encoding?encoding:self.encoding; //優(yōu)先使用write傳入的編碼方式
    chunk = Buffer.isBuffer(chunk) ? chunk : Buffer.from(chunk, encoding);
    self.len += chunk.length;
    ret = self.highWaterMark > self.len; //判斷當前最新的緩沖區(qū)是否已達到最高水位線

    if (self.isWriting) { //說明正在調(diào)用底層方法真正寫入文件令漂,先寫入Buffer
      self.Buffer.push({
        chunk
        , cb
      });
    } else {
      self.isWriting = true;
      self._write(chunk, cb, () => self.clearBuffer());
    }

    return ret;
  }

  _write(chunk, cb, clear) {
    let self = this;
    if (!self.fd) return self.once('open', () => {
      self._write(chunk, cb, clear)
    });
    fs.write(self.fd, chunk, 0, chunk.length, self.pos, (err, bytesWritten) => {
      if (err) {
        if (self.autoClose) {
          self.destroy();
          self.emit('error', err);
        }
      }
      self.len -= bytesWritten;
      self.pos += bytesWritten;
      cb && cb();
      clear && clear();
    });
  }

  clearBuffer() {
    let self = this
      , data = null;
    data = self.Buffer.shift();
    if (data) {
      self._write(data.chunk, data.cb, () => self.clearBuffer());
    } else { //此時說明緩沖區(qū)已無數(shù)據(jù)
      self.isWriting = false;
      self.emit('drain');
    }
  }
}

module.exports = WriteStream;

測試文件:

let WriteStream = require('./practice');
let ws = new WriteStream('./1.txt',{
  flags:'w'
  ,mode:0o666
  ,start:0
  ,encoding:'utf8'
  ,autoClose:true //當流寫完之后自動關(guān)閉文件
  ,highWaterMark:3
});
let n = 9;
ws.on('error',(err)=>{
  console.log(err)
})
function write(){
  let flag = true;
  while(flag&&n>0){
    flag = ws.write(n+"",'utf8',()=>{
      console.log('ok');
    });
    n--;
    console.log('flag=',flag)
  }
  ws.once('drain',()=>{
    console.log('drain');
    write();
  })
}
// ws.on('drain',()=>{
//   console.log('drain');
//   write();
// })
write();


參考資料:
https://nodejs.org/dist/latest-v9.x/docs/api/stream.html#stream_writable_streams

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市丸边,隨后出現(xiàn)的幾起案子洗显,更是在濱河造成了極大的恐慌,老刑警劉巖原环,帶你破解...
    沈念sama閱讀 216,372評論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件挠唆,死亡現(xiàn)場離奇詭異,居然都是意外死亡嘱吗,警方通過查閱死者的電腦和手機玄组,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,368評論 3 392
  • 文/潘曉璐 我一進店門滔驾,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人俄讹,你說我怎么就攤上這事哆致。” “怎么了患膛?”我有些...
    開封第一講書人閱讀 162,415評論 0 353
  • 文/不壞的土叔 我叫張陵摊阀,是天一觀的道長。 經(jīng)常有香客問我踪蹬,道長胞此,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,157評論 1 292
  • 正文 為了忘掉前任跃捣,我火速辦了婚禮漱牵,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘疚漆。我一直安慰自己酣胀,他們只是感情好,可當我...
    茶點故事閱讀 67,171評論 6 388
  • 文/花漫 我一把揭開白布娶聘。 她就那樣靜靜地躺著闻镶,像睡著了一般。 火紅的嫁衣襯著肌膚如雪丸升。 梳的紋絲不亂的頭發(fā)上儒溉,一...
    開封第一講書人閱讀 51,125評論 1 297
  • 那天,我揣著相機與錄音发钝,去河邊找鬼顿涣。 笑死,一個胖子當著我的面吹牛酝豪,可吹牛的內(nèi)容都是我干的涛碑。 我是一名探鬼主播,決...
    沈念sama閱讀 40,028評論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼孵淘,長吁一口氣:“原來是場噩夢啊……” “哼蒲障!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起瘫证,我...
    開封第一講書人閱讀 38,887評論 0 274
  • 序言:老撾萬榮一對情侶失蹤揉阎,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后背捌,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體毙籽,經(jīng)...
    沈念sama閱讀 45,310評論 1 310
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,533評論 2 332
  • 正文 我和宋清朗相戀三年毡庆,在試婚紗的時候發(fā)現(xiàn)自己被綠了坑赡。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片烙如。...
    茶點故事閱讀 39,690評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖毅否,靈堂內(nèi)的尸體忽然破棺而出亚铁,到底是詐尸還是另有隱情,我是刑警寧澤螟加,帶...
    沈念sama閱讀 35,411評論 5 343
  • 正文 年R本政府宣布徘溢,位于F島的核電站,受9級特大地震影響捆探,放射性物質(zhì)發(fā)生泄漏然爆。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,004評論 3 325
  • 文/蒙蒙 一徐许、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧卒蘸,春花似錦雌隅、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,659評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至趾牧,卻和暖如春检盼,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背翘单。 一陣腳步聲響...
    開封第一講書人閱讀 32,812評論 1 268
  • 我被黑心中介騙來泰國打工吨枉, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人哄芜。 一個月前我還...
    沈念sama閱讀 47,693評論 2 368
  • 正文 我出身青樓貌亭,卻偏偏與公主長得像,于是被迫代替她去往敵國和親认臊。 傳聞我的和親對象是個殘疾皇子圃庭,可洞房花燭夜當晚...
    茶點故事閱讀 44,577評論 2 353

推薦閱讀更多精彩內(nèi)容