[Node] 淡如止水 TypeScript (七):代碼生成

0. 回顧

上文提到蚊荣,performCompilation初狰,做了兩件事情,
createProgramemitFilesAndReportErrorsAndGetExitStatus互例。

第三奢入、四、五篇文章媳叨,我們介紹了 createProgram腥光,
它主要在做詞法分析、語(yǔ)法分析糊秆,最終返回一棵 AST武福。

上一篇(第六篇),我們開(kāi)始介紹 emitFilesAndReportErrorsAndGetExitStatus痘番,
里面包含了類(lèi)型檢查相關(guān)的代碼捉片。

本文繼續(xù)研究 emitFilesAndReportErrorsAndGetExitStatus平痰,
挖一下源碼,看看 TypeScript 是怎么生成 js 文件的伍纫。

1. 靈犀一指:emitSourceFile

把 AST 轉(zhuǎn)換成 js 代碼宗雇,不是一件簡(jiǎn)單的事情,
TypeScript 需要遍歷 AST 的各個(gè)節(jié)點(diǎn)莹规,逐個(gè)進(jìn)行處理赔蒲,
代碼邏輯主要放在了 src/compiler/emitter.ts#L5180 中,它有 5180 行访惜。

此外嘹履,在進(jìn)行調(diào)試的時(shí)候發(fā)現(xiàn),由于 TypeScript 還會(huì)處理一些內(nèi)置 .d.ts 文件债热,
調(diào)試過(guò)程被嚴(yán)重干擾了砾嫉,需找到真正處理源文件 debug/index.ts 的調(diào)用過(guò)程。

經(jīng)過(guò)仔細(xì)的探索窒篱,我們發(fā)現(xiàn)了一個(gè)關(guān)鍵函數(shù)焕刮,emitSourceFilesrc/compiler/emitter.ts#L3485墙杯,
把斷點(diǎn)停在這里之后配并,以后的流程才是真正處理 debug/index.ts

下文我們就以這個(gè)函數(shù)為基礎(chǔ)高镐,向上分析調(diào)用棧溉旋,向下跟進(jìn)執(zhí)行過(guò)程。
事情會(huì)變得簡(jiǎn)單許多嫉髓。

emitSourceFile观腊,位于 src/compiler/emitter.ts#L3485

function emitSourceFile(node: SourceFile) {
  ...
  if (emitBodyWithDetachedComments) {
    ...
    if (shouldEmitDetachedComment) {
      emitBodyWithDetachedComments(node, statements, emitSourceFileWorker);
      return;
    }
  }
  ...
}

我們把其他斷點(diǎn)都去掉算行,只留下該函數(shù)第一行的斷點(diǎn)梧油,然后啟動(dòng)調(diào)試。


我們把調(diào)用棧分成了幾個(gè)部分州邢,

emitSourceFile
pipelineEmitWithHint
...
emitFilesAndReportErrorsAndGetExitStatus
performCompilation
...

之所以把 pipelineEmitWithHint儡陨,src/compiler/emitter.ts#L1217,單獨(dú)拿出來(lái)量淌,是有用意的骗村,
是因?yàn)椋@個(gè)函數(shù)才是控制 emit 的樞紐函數(shù)呀枢。

那么叙身,為什么我不直接在 pipelineEmitWithHint 里面打斷點(diǎn)呢?
這是因?yàn)椋?code>pipelineEmitWithHint 會(huì)在處理 debug/index.ts 文件之前硫狞,處理其他的 .d.ts 文件。
其他處理過(guò)程,并不是我們需要的流程残吩。

因此财忽,我們只能將斷點(diǎn)打在 emitSourceFile 這個(gè)必經(jīng)之路上,
再回過(guò)頭來(lái)看它是怎么過(guò)來(lái)的泣侮。

2. 樞紐函數(shù):pipelineEmitWithHint

我們來(lái)看調(diào)用棧即彪,


emitSourceFile
pipelineEmitWithHint
...
emitFilesAndReportErrorsAndGetExitStatus
performCompilation
...

emitFilesAndReportErrorsAndGetExitStatuspipelineEmitWithHint
我認(rèn)為是暫時(shí)不用過(guò)多關(guān)注的活尊,它只是一堆函數(shù)的調(diào)用過(guò)程隶校。

真正開(kāi)始執(zhí)行 emit 邏輯的,是從 pipelineEmitWithHint 開(kāi)始的蛹锰,
我們來(lái)看深胳,pipelineEmitWithHintsrc/compiler/emitter.ts#L1217铜犬,

function pipelineEmitWithHint(hint: EmitHint, node: Node): void {
  ...
  if (hint === EmitHint.SourceFile) return emitSourceFile(cast(node, isSourceFile));
  ...
  if (hint === EmitHint.Unspecified) {
    if (isKeyword(node.kind)) return writeTokenNode(node, writeKeyword);

    switch (node.kind) {
      ...
      case SyntaxKind.Identifier:
        return emitIdentifier(<Identifier>node);
      ...
      case SyntaxKind.VariableStatement:
        return emitVariableStatement(<VariableStatement>node);
      ...
      case SyntaxKind.VariableDeclaration:
        return emitVariableDeclaration(<VariableDeclaration>node);
      case SyntaxKind.VariableDeclarationList:
        return emitVariableDeclarationList(<VariableDeclarationList>node);
      ...
    }
    ...
  }
  if (hint === EmitHint.Expression) {
    switch (node.kind) {
      ...
      case SyntaxKind.NumericLiteral:
        return emitNumericOrBigIntLiteral(<NumericLiteral | BigIntLiteral>node);
      ...
    }
  }
}

它包含了非常多的 case舞终,它有 419 行,
說(shuō)它是樞紐函數(shù)癣猾,是因?yàn)?pipelineEmitWithHint 會(huì)根據(jù) node.kind 分情況調(diào)用不同的 emitXXX敛劝。

3. parse 與 emit 的對(duì)應(yīng)關(guān)系

在我們的例子中,debug/index.ts 內(nèi)容如下纷宇,

const i: number = 1;

第四篇中夸盟,我們研究了它的解析過(guò)程,可粗略表示如下像捶,

parseList
  parseDeclaration
    parseVariableStatement
      parseVariableDeclarationList
        parseVariableDeclaration
          parseIdentifierOrPattern
            parseIdentifier
          parseTypeAnnotation
            parseType
          parseInitializer
            parseAssignmentExpressionOrHigher
      parseSemicolon

其中上陕,解析過(guò)程與 emit 過(guò)程,有一種微妙的對(duì)應(yīng)關(guān)系作岖,

parseVariableStatement -> emitVariableStatement
parseVariableDeclarationList -> emitVariableDeclarationList
parseVariableDeclaration -> emitVariableDeclaration
parseIdentifier -> emitIdentifier
...

這的確反應(yīng)了一些事實(shí)唆垃,解析器將 TypeScript 源碼結(jié)構(gòu)化,得到了一個(gè)易于分析的數(shù)據(jù)結(jié)構(gòu)(AST)痘儡,
然后辕万,emitter 處理這個(gè)數(shù)據(jù)結(jié)構(gòu),遞歸的分節(jié)點(diǎn)進(jìn)行翻譯沉删。

4. emit 過(guò)程

看清楚了 parse 與 emit 的對(duì)應(yīng)關(guān)系之后渐尿,整個(gè) emit 流程就很清楚了,
代碼首先執(zhí)行到樞紐函數(shù) pipelineEmitWithHint矾瑰,開(kāi)始 emitSourceFile砖茸。

emitSourceFile,位于 src/compiler/emitter.ts#L3485殴穴,

function emitSourceFile(node: SourceFile) {
  ...
  if (emitBodyWithDetachedComments) {
    ...
    if (shouldEmitDetachedComment) {
      emitBodyWithDetachedComments(node, statements, emitSourceFileWorker);
      return;
    }
  }
  ...
}

它調(diào)用了 emitSourceFileWorker凉夯,src/compiler/emitter.ts#L3560货葬,

function emitSourceFileWorker(node: SourceFile) {
  ...
  emitList(node, statements, ListFormat.MultiLine, index === -1 ? statements.length : index);
  ...
}

接著調(diào)用 emitList,然后一系列調(diào)用之后劲够,又回到了 pipelineEmitWithHint震桶。

pipelineEmitWithHint
...
emitList
...
emitSourceFile
pipelineEmitWithHint
...

再回到 pipelineEmitWithHint 之后,它會(huì)根據(jù) node.kind 分情況分析征绎,
接著開(kāi)始調(diào)用 emitVariableStatement蹲姐,src/compiler/emitter.ts#L2519

function emitVariableStatement(node: VariableStatement) {
  emitModifiers(node, node.modifiers);
  emit(node.declarationList);
  writeTrailingSemicolon();
}

就這樣來(lái)回往復(fù)人柿,實(shí)際上是在遞歸的處理 AST 的子節(jié)點(diǎn)柴墩,
緊接著又調(diào)用了 emitVariableDeclarationListsrc/compiler/emitter.ts#L2749凫岖,

function emitVariableDeclarationList(node: VariableDeclarationList) {
  writeKeyword(isLet(node) ? "let" : isVarConst(node) ? "const" : "var");
  writeSpace();
  emitList(node, node.declarations, ListFormat.VariableDeclarationList);
}

后面的調(diào)用過(guò)程江咳,就不再詳細(xì)展開(kāi)了,此后 TypeScript 又依次調(diào)用了隘截,
emitVariableDeclaration扎阶,emitIdentifieremitNumericOrBigIntLiteral婶芭。

emitVariableDeclaration东臀,src/compiler/emitter.ts#L2743

function emitVariableDeclaration(node: VariableDeclaration) {
  emit(node.name);
  emitTypeAnnotation(node.type);
  emitInitializer(node.initializer, node.type ? node.type.end : node.name.end, node);
}

emitIdentifier犀农,src/compiler/emitter.ts#L1808惰赋,

function emitIdentifier(node: Identifier) {
  const writeText = node.symbol ? writeSymbol : write;
  writeText(getTextOfNode(node, /*includeTrivia*/ false), node.symbol);
  emitList(node, node.typeArguments, ListFormat.TypeParameters);
}

emitNumericOrBigIntLiteral赁濒,src/compiler/emitter.ts#L1737孟害,

function emitNumericOrBigIntLiteral(node: NumericLiteral | BigIntLiteral) {
  emitLiteral(node);
}

整條 emit 鏈路如下挨务,

emitSourceFile
emitVariableStatement
emitVariableDeclarationList
emitVariableDeclaration
emitIdentifier
emitNumericOrBigIntLiteral

每一個(gè) emit 由 pipelineEmitWithHint丁侄,src/compiler/emitter.ts#L1217 來(lái)調(diào)度鸿摇。

5. 翻譯示例

emit 完畢后拙吉,得到的 js 代碼如下庐镐,debug/index.js必逆,

var i = 1;

const 為示例名眉,我們來(lái)看一下,TypeScript 到底是怎樣將它翻譯成 var 的福压。

執(zhí)行這個(gè)操作的代碼位置荆姆,其實(shí)上文中已經(jīng)提到了胆筒,emitVariableDeclarationList仆救,src/compiler/emitter.ts#L2749

function emitVariableDeclarationList(node: VariableDeclarationList) {
  writeKeyword(isLet(node) ? "let" : isVarConst(node) ? "const" : "var");
  writeSpace();
  emitList(node, node.declarations, ListFormat.VariableDeclarationList);
}

emitVariableDeclarationList 時(shí)顿痪,會(huì)判斷 isVarConst,結(jié)果為 false叠聋,
于是 writeKeyword 就會(huì)寫(xiě)入 var碌补。

6. 總結(jié)

本文介紹了 TypeScript 的生成 js 代碼的過(guò)程镇匀,是由多個(gè) emitXXX 函數(shù)互相調(diào)用組成幸缕,
每一個(gè) emitXXX 接受 AST 子節(jié)點(diǎn)作為參數(shù)晰韵,翻譯一小段代碼栏尚,最終拼湊出整個(gè) js 目標(biāo)文件译仗。

寫(xiě)入文件時(shí)纵菌,只是讀取所有 emitXXX 的翻譯結(jié)果产艾,
是在 printSourceFileOrBundlesrc/compiler/emitter.ts#L479杠览,這個(gè)函數(shù)中完成的,

function printSourceFileOrBundle(jsFilePath: string, sourceMapFilePath: string | undefined, sourceFileOrBundle: SourceFile | Bundle, printer: Printer, mapOptions: SourceMapOptions) {
  ...
  writeFile(host, emitterDiagnostics, jsFilePath, writer.getText(), !!compilerOptions.emitBOM, sourceFiles);
  ...
}

這個(gè) writer.getText()src/compiler/utilities.ts#L3496佛点,只是返回了已經(jīng)拼湊完畢的 js 結(jié)果超营,

export function ...(newLine: string): EmitTextWriter {
  ...
  return {
    ...
    getText: () => output,
    ...
  };
}

這就是 TypeScript 根據(jù) AST 生成 js 文件的整個(gè)過(guò)程了不跟。

參考

TypeScript v3.7.3

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末聊闯,一起剝皮案震驚了整個(gè)濱河市米诉,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖税朴,帶你破解...
    沈念sama閱讀 206,214評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件颤殴,死亡現(xiàn)場(chǎng)離奇詭異杈绸,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)劫侧,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門(mén)奇瘦,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人次坡,你說(shuō)我怎么就攤上這事。” “怎么了诱篷?”我有些...
    開(kāi)封第一講書(shū)人閱讀 152,543評(píng)論 0 341
  • 文/不壞的土叔 我叫張陵悯辙,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我,道長(zhǎng)瓤狐,這世上最難降的妖魔是什么嗓节? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,221評(píng)論 1 279
  • 正文 為了忘掉前任绸罗,我火速辦了婚禮珊蟀,結(jié)果婚禮上昵宇,老公的妹妹穿的比我還像新娘砸喻。我一直安慰自己,他們只是感情好儡毕,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,224評(píng)論 5 371
  • 文/花漫 我一把揭開(kāi)白布腰湾。 她就那樣靜靜地躺著费坊,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 49,007評(píng)論 1 284
  • 那天秀姐,我揣著相機(jī)與錄音,去河邊找鬼狭瞎。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的仿粹。 我是一名探鬼主播,決...
    沈念sama閱讀 38,313評(píng)論 3 399
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼滑频,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼彤避!你這毒婦竟也來(lái)了董饰?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 36,956評(píng)論 0 259
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤圆米,失蹤者是張志新(化名)和其女友劉穎卒暂,沒(méi)想到半個(gè)月后娄帖,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體也祠,經(jīng)...
    沈念sama閱讀 43,441評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡诈嘿,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,925評(píng)論 2 323
  • 正文 我和宋清朗相戀三年削葱,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了奖亚。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,018評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡析砸,死狀恐怖昔字,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情首繁,我是刑警寧澤李滴,帶...
    沈念sama閱讀 33,685評(píng)論 4 322
  • 正文 年R本政府宣布,位于F島的核電站蛮瞄,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏谆扎。R本人自食惡果不足惜挂捅,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,234評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望堂湖。 院中可真熱鬧闲先,春花似錦、人聲如沸无蜂。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,240評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)斥季。三九已至训桶,卻和暖如春累驮,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背舵揭。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,464評(píng)論 1 261
  • 我被黑心中介騙來(lái)泰國(guó)打工谤专, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人午绳。 一個(gè)月前我還...
    沈念sama閱讀 45,467評(píng)論 2 352
  • 正文 我出身青樓置侍,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親拦焚。 傳聞我的和親對(duì)象是個(gè)殘疾皇子蜡坊,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,762評(píng)論 2 345