java詞法分析器綠色版

java詞法分析器是由c語言編譯而成，是款比好用的編程軟件，大家可以試用一下，在原有的基礎上增加一些自己的代碼，使其更加完善。需要注意的是，這些代碼中有一些功能還未完善，大家可以自己研究研究。

詞法分析器步驟

先寫其正則式，然后NFA，然后DFA，然后對其進行優化，最后準備工作做好了，就可以開始寫代碼了。

主函數

enum Token_Type {

keyword =1,              //關鍵字

Identifier,            //標識符

operatorr,             //運算符

operatorrd,             //單運算符

constant,              //常量

escape,                //轉義符

separator,              //界限符

notype,                  //沒有類型

zhushi                   //注釋類型

};

對其單詞的類型定義成枚舉。

typedef struct Token {

Token_Type type; //其類型

char *lexeme ;    //字符串

int  value;       //屬性值

}Token;

//返回單詞的結構。

void InitScanner(char *ch){

fp1 = fopen(ch,"r+");

LineNo = 1;

}//初始化分析器。

void CloseScanner(){

fclose(fp1);

}//關閉分析器

void EmptyTokenString(){

memset(TokenBuffer,0,100);

}//清空緩沖區

static void AddCharTokenString(char Char)

{

int TokenLenth=strlen(TokenBuffer);

if(TokenLenth+1==sizeof(TokenBuffer)) return;

TokenBuffer[TokenLenth]=Char;

TokenBuffer[TokenLenth+1]='\0';

} //將一個字符添加到緩沖區

static char Getchar(){

char Char;

Char = fgetc(fp1);

return Char;

}//從文件中讀取一個字符

static void BackChar(char Char) {

if(Char!=EOF){

ungetc(Char,fp1);

}

}//將其字符后退一個。

static Token JudgeKeyToken(char *IDstring)；//這個函數實現對關鍵字進行判斷