言語理論とコンパイラ

第五回: 中間テスト、flex の演習

2006年 5月 26日

© 2005 Martin J. Dürst 青山学院大学

今日の内容

• 中間テスト
• flex の使い方と演習

cygwin の使い方

• ls: ディレクトリの内容をリストアップ
• mkdir: 新しいディレクトリを作る
• cd: 現在のディレクトリを変更する
• pwd: 現在のディレクトリを表示する
• gcc: C のプログラムをコンパイルする
• ./a: コンパイルしたプログラムを実行する
• notepad filename.l &: cygwin からメモ帳を直接、しかも並行に使える用に立ち上げる

cygwin がハードディスクをどう見ているか

cygwin のインストール先が例えば C:\cygwin だとすると、cygwin はまずそこの下しか見せない。

ユーザ用のホームディレクトリは C:\cygwin\home\user1 とかで、pwd で /home/user1 として表示される。

C:\cygwin の下から脱出したい場合には cd /cygdrive/c でできます。

(昔は cygdrive は秘密でしたが、最近は見えるようになりました)

flex の使い方 (1)

• 拡張子 .l で終わる flex 入力ファイルを作る (例: test.l)
• flex で test.l ファイルから lex.yy.c ファイルを作る:
  >flex test.l
• lex.yy.c を (他のファイルと一緒に) コンパイルする

flex の使い方 (2)

• 独自のファイル処理に使う (正規表現によるファイルの一部の認識・変更):

  main から yylex() 関数を一回呼ぶ

• 構文解析から使う:

  構文解析から yylex() を繰り返し読んで、トーケンを返すようにする

flex の勉強の仕方

• マニュアルを読む: 英語、日本語
• flex の出力 (lex.yy.c) を読む
• 違う入力に対する flex の出力を比較
• flex のソースを読む (flex そのものの字句解析は flex 形式で書かれている)

flex の入力の形式

flex 専用の指示と C プログラムの一部の部分が両方ある

主に、二つの %% で区切られている三つの部分からなる:

• 前文 (変数の定義と初期化、良く使う字句の定義など)
• 字句規則とその場合に実行するプログラムの部分
• そのほかの関数など

flex の入力の形式の一例

        int num_lines = 0, num_chars = 0;
%%
\n      ++num_lines; ++num_chars;
.       ++num_chars;
%%
main()
{
        yylex();
        printf( "# of lines = %d, # of chars = %d\n",
                num_lines, num_chars );
}

int yywrap () { return 1; }

flex の演習 1

前のスライドの flex 用プログラムをファイルに入力して、flex と gcc を使って実効ファイルにして、試してみてください。

flex の演習 2

一般のテキストを XML の要素の内容に入れたい場合には次の変換を行う必要がある。flex でその変換と逆変換を行うプログラムをそれぞろ書け。対応表は以下の通り:

flex の演習 3

(flex の入力になる .l のファイルを 6月 2日 (金) 11:00時まで提出。名前、学生番号はコメントとして書く。2ページまでの場合、表と裏に印刷。3ページ以上の場合、ホチキスで止める)

一般の XML ファイルを入力して、その中のものを一行ずつ分かりやすいように書き出す。

例: (入力は <letter>Hello World!</letter> の場合)

開始タグ: <letter>

要素の内容: Hello World!

終了タグ: </letter>

ヒント:

• 入力は半角英語に限る。
• 属性は発展問題。
• コメント、処理命令、などは是非やってください。
• 要素の入れ子構造は出力でも見えるようにしてください。
• 終わりに閉じてない要素がありましたら警告を出してください。