llvm cookbook 2.2 實(shí)現(xiàn)lexer

編寫toy.cpp

#include <string>
#include <iostream>

enum Token_type {
  EOF_TOKEN = 0,       // states the end of file
  NUMERIC_TOKEN,       // current token is numeric type
  IDENTIFIER_TOKEN,    // current token is identifier
  PARAN_TOKEN,         // parenthesis
  DEF_TOKEN            // states whatever follows is function definition
};

static int Numeric_Val;
static std::string Identifier_string;
FILE *file;

static int get_token() {
  static int LastChar = ' ';

  while (isspace(LastChar))
    LastChar = fgetc(file);
  if (isalpha(LastChar)) {
    Identifier_string = LastChar;
    while (isalnum((LastChar = fgetc(file))))   {
      Identifier_string += LastChar;
    }
    if (Identifier_string == "def") {
      return DEF_TOKEN;
    }
    return IDENTIFIER_TOKEN;
  }

  if (isdigit(LastChar)) {
    std::string NumStr;
    do {
      NumStr += LastChar;
      LastChar = fgetc(file);
    } while (isdigit(LastChar));
    Numeric_Val = strtod(NumStr.c_str(), 0);
    return NUMERIC_TOKEN;
  }

  if (LastChar == '#') {
    do {
      LastChar = fgetc(file);
    } while (LastChar != EOF && LastChar != '\n'
            && LastChar != '\r');
    if (LastChar != EOF) {
      return get_token();
    }
  }

  if (LastChar != EOF) {
    return EOF_TOKEN;
  }

  int ThisChar = LastChar;
  LastChar = fgetc(file);
  return ThisChar;
}

int main(int argc, char* argv[]) {
  file = fopen(argv[1], "r");
  if (file == NULL) perror("Error opening file");
  else {
      std::cout << get_token() << std::endl;
  }
  return 0;
}

編譯

g++ -std=c++11 toy.cpp -o toy

測試代碼source.ty:

def foo(x, y)
x + y * 16

運(yùn)行

./toy source.ty
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末顺献,一起剝皮案震驚了整個(gè)濱河市摊阀,隨后出現(xiàn)的幾起案子暑始,更是在濱河造成了極大的恐慌,老刑警劉巖兴革,帶你破解...
    沈念sama閱讀 217,277評(píng)論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡根穷,警方通過查閱死者的電腦和手機(jī)姜骡,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,689評(píng)論 3 393
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來屿良,“玉大人圈澈,你說我怎么就攤上這事〕揪澹” “怎么了康栈?”我有些...
    開封第一講書人閱讀 163,624評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長喷橙。 經(jīng)常有香客問我啥么,道長,這世上最難降的妖魔是什么贰逾? 我笑而不...
    開封第一講書人閱讀 58,356評(píng)論 1 293
  • 正文 為了忘掉前任悬荣,我火速辦了婚禮,結(jié)果婚禮上疙剑,老公的妹妹穿的比我還像新娘氯迂。我一直安慰自己,他們只是感情好言缤,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,402評(píng)論 6 392
  • 文/花漫 我一把揭開白布嚼蚀。 她就那樣靜靜地躺著,像睡著了一般轧简。 火紅的嫁衣襯著肌膚如雪驰坊。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,292評(píng)論 1 301
  • 那天哮独,我揣著相機(jī)與錄音拳芙,去河邊找鬼。 笑死皮璧,一個(gè)胖子當(dāng)著我的面吹牛舟扎,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播悴务,決...
    沈念sama閱讀 40,135評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼睹限,長吁一口氣:“原來是場噩夢(mèng)啊……” “哼!你這毒婦竟也來了讯檐?” 一聲冷哼從身側(cè)響起羡疗,我...
    開封第一講書人閱讀 38,992評(píng)論 0 275
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎别洪,沒想到半個(gè)月后叨恨,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,429評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡挖垛,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,636評(píng)論 3 334
  • 正文 我和宋清朗相戀三年痒钝,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了秉颗。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,785評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡送矩,死狀恐怖蚕甥,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情栋荸,我是刑警寧澤菇怀,帶...
    沈念sama閱讀 35,492評(píng)論 5 345
  • 正文 年R本政府宣布,位于F島的核電站蒸其,受9級(jí)特大地震影響敏释,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜摸袁,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,092評(píng)論 3 328
  • 文/蒙蒙 一钥顽、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧靠汁,春花似錦蜂大、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,723評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至踢星,卻和暖如春澳叉,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背沐悦。 一陣腳步聲響...
    開封第一講書人閱讀 32,858評(píng)論 1 269
  • 我被黑心中介騙來泰國打工成洗, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人藏否。 一個(gè)月前我還...
    沈念sama閱讀 47,891評(píng)論 2 370
  • 正文 我出身青樓瓶殃,卻偏偏與公主長得像,于是被迫代替她去往敵國和親副签。 傳聞我的和親對(duì)象是個(gè)殘疾皇子遥椿,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,713評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • 昨晚冠场,《太陽的后裔》已經(jīng)完結(jié)了,今天追劇完在微信發(fā)了一組漫畫版劇圖本砰,配了“好的故事應(yīng)該被記住”簡單的幾個(gè)字慈鸠,表姐在...
    阿吉敘事閱讀 240評(píng)論 0 0
  • 想變成一片葉子 然后就可以在平滑的夜里 睡到天亮 想手握一顆星星 跟著它去海上 迎接一顆嶄新的太陽 想把溢出來的失...
    厘沫沫閱讀 462評(píng)論 2 7
  • 我在的城市,今天的最低氣溫灌具,零下11度青团,這樣的低溫,在這個(gè)冬天咖楣,我已經(jīng)堅(jiān)持了好幾天督笆,真的怕冷,怕自己倒下诱贿,...
    靜謐的夏閱讀 170評(píng)論 0 1