misima 漢詩作成支援の詩語検索機能で参照する詩語データベースを大幅に拡充した。ここのところ，この漢詩プログラム改造に取り組んでいた延長で，詩語のデータベース拡充のための元ネタがないか探していたら，今月 2 日，ある方から個人的に集めた詩語集をいただいた。入手した Microsoft Excel 形式のファイルを CSV に変換して行数を確認すると，なんと 8 万行もある。長年の労苦が偲ばれる素晴らしい成果をいただいた次第である。これは早速データベースにして，提供してくれた方に使ってもらわないとバチが当たる。昨夜と今日のお休み一日かけて，これに取り組んだのである。
いくつものシートに分けられた Excel データを CSV データに変換するのに，『Excel 一括 CSV』を使わせてもらった。妻の Windows 7 で変換したのち，Mac OS X にコピーして，ここからいくつかプログラムを書いて既存のデータベースにマージした。主な作業手順は以下のとおり。
読み，意味，出典も詩語検索の結果に出力する処理（JavaScript）も追加した。旧字体変換を入れたので，韻字の検索で新旧字体のどちらを指定してもヒットするようデータ構造，クエリを変えた。例えば，韻字が「仏」・平仄「○-●」の検索で，「銅佛」が出て来るようにした。
これまでの詩語データベースは，ネットで漁った『唐詩選』の漢詩データ 470 首程度を Perl HTML::TreeBuilder パーサで処理して二字，三字の詩語に分解し，この結果得た約 4000 語程度しか蓄積してなかった。これがいまや二字 33601 語，三字 53657 語，計 87258 語にまで拡張された。まだまだ使い勝手としては疑問が残るけれども，詩語ブラウザとしてはそれなりの規模が備わったのではないかと思う。
今回作業で使用した『Excel 一括 CSV』ツールでは，残念ながら JIS 第三・第四水準の漢字が文字化けしてしまった。データベースにはこれらは含めなかった。これらを反映するのが次なる課題である。
[ 2012/12/4 付記 ]
その後，JIS X 0213 文字化けの問題は，CSV 抽出ツールを自作することで解消した。記事「Excel ワークシートの一括 CSV 変換」を参照。