【正文】 beyond that last nonEOF token. * * You might want to throw token or char stream * exceptions like: Heh, premature eof or a retry * stream exception (I found the end of this file, * go back to referencing file). */public void uponEOF() throws TokenStreamException, CharStreamException{} | 39。\\39。, 39。)，Unicode字符集(., 39。注釋 ANTLR 接受C語言風(fēng)格的塊注釋和C++風(fēng)格的行注釋。Antlr會自動嵌入生成的java類中。同時(shí)可以看到里面可以互相引用。既把長面條根據(jù)你要的尺寸切成一段一段：）并不對其作任何修改。對應(yīng)的SubRule被加亮成粉紅色，而如果你的光標(biāo)放到的位置是一個(gè)Token的話就會變成淡藍(lán)色，簡直太酷了。功能介紹ANTLR Studio在Eclipse Help提供了比較詳盡的文檔描述。在產(chǎn)生這個(gè)結(jié)果之后，我需要將每一個(gè)語法元素翻譯成字節(jié)序列打包發(fā)送給傳感器網(wǎng)絡(luò)。在生成語法樹的過程中，同步計(jì)算表達(dá)式的值。例如圖中所示代表告訴ANTLR在生成代碼的時(shí)候不要生成缺省的錯(cuò)誤處理部分，這部分將由用戶自己負(fù)責(zé)。 Token部分用來聲明那些在詞法分析器中沒有被聲明的“想象的”token。5.為了更好的使用ANTLR，你還可以下載ANTLR的Eclipse插件來幫助你完成工作。無論是Lexer還是Parser都是一種識別器，Lexer是字符序列識別器而Parser是Token序列識別器。那些宣稱這類事情非常偉大，可以為發(fā)布刊物文章編寫驚人的“一攬子解決方案”，卻會悲慘失敗在實(shí)際項(xiàng)目中。這個(gè)用于定義這些語法的元語言，在所有情況下幾乎一樣的。Antlr簡介06通訊軟件 06382027 鄭毅本文主要介紹了什么是ANTLR，以及ANTLR的使用，其中ANTLR的使用包括了ANTLR的安裝及使用，ANTLR語法文件解析，ANTLR規(guī)則（RULE）解析，ANTLR語法實(shí)例—SensorSQL，ANTLR Studio及其功能介紹等。很自然的它們分別與詞法分析程序(lexers，以下簡稱lexer)，語言解析程序和樹遍歷程序向匹配。例如，在單個(gè)的描述里就不行。語法分析器將收到的Tokens組織起來，并轉(zhuǎn)換成為目標(biāo)語言語法定義所允許的序列。ANTLR語法文件解析下面我們對圖中所描述的ANTLR語法文件做一些詳細(xì)的分析。例如是否建立缺省的抽象語法樹，指定LL（K）中的參數(shù)k的值（缺省為1）等等，更詳細(xì)的參數(shù)請參閱ANTLR自帶的手冊。5：這一可選的部分為我們提供了指定某些可選參數(shù)的能力。對于形如1+23*4/5^6這樣的表達(dá)式，只要寫好語法規(guī)則，就可以在解析過程中直接得到運(yùn)算結(jié)果：首先ANTLR將其編譯成逆波蘭結(jié)構(gòu) ( ( + 1 2 ) ( / ( * 3 4 ) ( ^ 5 6 ) ) ) 。上圖就是剛才演示的SensorSQL語法分析之后產(chǎn)生的結(jié)果。安裝成功之后在Eclipse的工具欄上會出現(xiàn)一個(gè)詞法分析器的導(dǎo)航按鈕： 當(dāng)右鍵單點(diǎn)擊你的工程時(shí)，你會發(fā)現(xiàn)控制是否使用ANTLR Studio的開關(guān)：當(dāng)打開一個(gè)文法文件之后，可以看到如下界面：在右面的大綱窗口，列有所有Parser和Lexer的元素，可以看到Protected Token（例如Number）和其他普通的Token是不一樣的；在左面，不同的區(qū)域是用不同的顏色塊加亮來區(qū)分的。這時(shí)你只需要將光標(biāo)放到脫字符號（^）上面（注：脫字符號用于指明在生成語法樹的時(shí)候，脫字符號所在的SubRule要作為樹或子樹的根節(jié)點(diǎn)）：就會看到：主要用于把讀入的字節(jié)流根據(jù)規(guī)則分段。是分隔字節(jié)流的依據(jù)?！ava語句：指當(dāng)滿足當(dāng)前規(guī)則時(shí)所執(zhí)行的語句。例如，“FirstName LastName”對ANTLR來說兩個(gè)標(biāo)記符而不是一個(gè)標(biāo)記符，空格，然后再接著一個(gè)標(biāo)記符。\37739。\t39。, 39。\n39。你可以在你的詞法分析器語法中覆蓋當(dāng)前，ANTLR實(shí)際上不允許Unicode出現(xiàn)在字符串常量中（你不得不用轉(zhuǎn)義符）。然而，ANTLR不會創(chuàng)建一個(gè)詞法分析器規(guī)則來匹配這些字符串。標(biāo)記引用 以大寫字符開頭的標(biāo)識符稱為標(biāo)記引用。idList : ( ID )+。 // token definition 規(guī)則引用 以小寫字母開頭的標(biāo)識符是為ANTLR的語法規(guī)則。 codeBlock[int scope, String name] // input argumentsreturns [int x] // return values: ... 。這個(gè)主要用在C++的輸出中，因?yàn)镃++需要一些元素在引用之前必須被聲明。一個(gè)語法文件中的語法分析器定義通常是這個(gè)樣子： { optional class code preamble }class YourParserClass extends Parser。這個(gè)超類必須是完整定義的，在雙引號中。可選類的開頭是括在{}中的任意文本。optionstokens{ optional action for instance vars/methods }tree parser rules...你可以定義一個(gè)樹分析器的超類，它可以被用來作為產(chǎn)生的樹解析器的超類。這些就是基本框架了。MUL : ‘*’ 。（注: $setType是ANTLR內(nèi)置函數(shù)，用來設(shè)置token類型。讓我們來生成c++代碼，實(shí)際測試一下.$java cp /usr/share/java/ ANTLR Parser Generator Version (20060528) 19892005$ls $我們可以看到，生成了6個(gè)文件。}}編譯之：$g++ o Calc lantlr測試用例：$ ./Calc1 + 2 * 3 + 5 4/2$ ./Calc(1 + 2) * 3 + 5 4 / (2+2)$ ./Calc(*)+8/(43)*$二．利用ANTLR生成C++描述的分析程序文法文件文法就是語言識別的規(guī)則。規(guī)則的定義形式和編譯理論中的擴(kuò)展巴科斯范式（EBNF）極為相似，包括規(guī)則名、規(guī)則體、一個(gè)用作結(jié)束標(biāo)志的分號和異常處理部分（可省略）。39。例如如下的token定義就表示一個(gè)十進(jìn)制的整數(shù)：NUM:)(39。 。該分析器的功能是分析用戶輸入的一個(gè)算術(shù)表達(dá)式，給出該表達(dá)式的最終結(jié)果。exception catch [ANTLR_USE_NAMESPACE(antlr)ANTLRExceptionamp。 } )* 。 ex] { reportError(())。PLUS :39。NUM :(39。)*(39。\n39。 | 39。在“Commands”里面填入調(diào)用ANTLR編譯文法文件的命令： java cp ANTLRpath\\ o $(WkspDir) $(InputName).g在“Outputs”里面填入ANTLR編譯文法文件后要生成的所有文件的名字，如下： 生成分析器源代碼編譯，執(zhí)行編譯操作。}分析器分析一個(gè)文件里面的字符串的話：include include include iostreaminclude fstreamusing namespace s