情報処理学会 第75回全国大会講演要旨

日本語プログラミング言語の字句解析では，分かち書きされていな
いプログラム文から字句を切り出す必要がある．本来，日本語文の
字句の切り出しには形態素解析が使われるが統計情報に基づく区切
り方であり曖昧である．本発表では日本語プログラムの字句解析に
おいて形態素解析の基本的手法を用いた上で，プログラミング言語
構文に従って形態素を切り出すことで字句解析を実現する手法につ
いて議論する．この手法によって分かち書きされていない日本語文
を文法的制約によって正しく切り出せることを，処理系の実現を通
じて評価し，その結果についても議論する．