15章：入出力

トップ->Java Applet入門

Java入門内検索

このページの先頭に戻る

トップページに戻る

このページの先頭に戻る
 トップページに戻る

トップ-> Java入門：15章入出力-> StreamTokenizer

前ページへ　:　トップへ　:　次ページへ

34. StreamTokenizer

　　StreamTokenizerは、文字入力ストリームからのデータを解析してトークンに分割するクラスです。似たクラスに StringTokenizerクラスがありますが、こちらのStreamTokenizerの方が高機能です。例えば、数字の解析や、アポストロフィ(')などのような文字を、クォーテーションとして囲い文字として解釈するのか、[it's]のように普通の文字として解釈するのか、といった設定をすることができます。

　　したがって、ソースがStringの場合は、StringReader を使ってストリームとし、StringTokenizerを使う方法もとられます。

　　このStreamTokenizerの基本的な使い方は、次の通りです。

適当な文字入力ストリームをつくる
このストリームをコンストラクタの引数としてStringTokenizerをつくる
どのように文字を解釈するかの設定を行う
nextTokenメソッドを呼び出す
メンバ変数ttypeを読み出して、トークンの型を判断する
メンバ変数nvalやsvalなどからトークンを取り出す
トークンを処理する
nextTokenがStringTokenizer.TT_EOFを返すまで4～7を繰り返す

　　StreamTokenizerを作成した直後は下記のような動作をします。

'\u0000'から'\u0020'までの文字を空白文字として扱う
数字を解析する
'A'から'Z'、'a'から'z'を単語文字として扱う
'/'をコメント文字として扱う
'\''、'\"'を引用符として扱う
"//"や"/*"～"*/"をコメントとして認識しない

import java.io.StreamTokenizer

メンバ変数

int ttype



トークンの型をあらわします。その意味は次の通りです。

StreamTokenizer.TT_EOF ストリームの終端

StreamTokenizer.TT_EOL 行の終端(ただし、eolIsSignificant(true)を実行した場合のみ)

StreamTokenizer.TT_NUMBER 数値

StreamTokenizer.TT_WORD 単語

その他単一文字

static int TT_EOL



ttypeに入る定数で、行の終端を現します。

static int TT_EOF



ttypeに入る定数で、ストリームの終端を現します。

static int TT_NUMBER



ttypeに入る定数で、数値を現します。

static int TT_WORD



ttypeに入る定数で、単語を現します。

double nval



現在のトークンが数値の場合、この変数にその数値が入ります。

String sval



現在のトークンが単語の場合、この変数に、その単語が入ります。

コンストラクタ

StreamTokenizer(Reader r)

読み込み元をrとして、StreamTokenizerを作成します。

メソッド

void resetSyntax()



すべての文字を通常文字として扱います。
通常文字とは１文字で１トークンとなる文字を言います。
これにより[10]みたいに数字が検出されてもttypeにはTT_WORDが入るようになります。

void commentChar(int ch)



引数で指定した文字から行の最後までをコメントとして無視するようになります。

void slashSlashComments(boolean flag)



JavaやCのコメント文字である[//]の処理を決定する。
flagがtrueの場合コメント部分は無視され（破棄され）る。
flagがfalseの場合[//]以降も通常通り認識される。

void slashStarComments(boolean flag)



JavaやCのコメント文字である[/* */]の処理を決定する。
flagがtrueの場合コメント部分は無視され（破棄され）る。
flagがfalseの場合[/*]と[/*]の間も通常通り認識される。

void ordinaryChar(int ch)



chを通常文字として扱うようになります。
通常文字とは１文字で１トークンとなる文字を言います。

void ordinaryChars(int l, int h)



lからhまでの文字を通常文字として扱うようになります。
通常文字とは１文字で１トークンとなる文字を言います。

void wordChars(int l, int h)



lからhまでの文字を単語文字として認識するようになります。

void whitespaceChars(int l, int h)



lからhまでの文字を空白文字として認識するようになります。

void quoteChar(int ch)



chを囲い文字として、その中身を１つのトークンとして処理するようにする。
chで囲まれた文字列を検出すると、nextTokenの呼び出し後、ttypeにはchが入り、svalに囲まれた文字列が入る。
例えば[quoteChar('\"')]を実行し、["This is a pen."]が検出されると、ttype=(int)'\"'となり、sval=This is a pen.となる。

void parseNumbers()



[0,1,2,3,4,5,6,7,8,9,-,.]の12文字を数値と認識し、これらを見つけるとttypeにTT_NUMBERを入れ、nvalにその値を入れるようになる。
デフォルトで有効になっているため、resetSyntaxや上記12種の文字をordinaryCharなどで通常文字と設定したのを戻す時に使われる。

void lowerCaseMode(boolean flag)



引数にtrueを指定するとトークンは自動的に小文字に変換されます。

void eolIsSignificant(boolean flag)



行の終端文字('\r'、'\n')をトークンとするかを指定します。
引数にtrueを指定するとトークンと処理し、ttypeにTT_EOLが入るようになります。

int lineno()



現在の行数を返します。

int nextToken()



次のトークンを読み出します。
読み出したトークンの型がttypeに入れられます。
型によりsval、nvalにトークンが入ります。

int pushBack()



nextTokenで読み取ったトークンをストリームに返す。
ただし、ttype, nval, svalは変更されない。

前ページへ　:　トップへ　:　次ページへ