XTerm

XTerm は、 XFree86 の配布物に含まれ、世界で最も広く使われているターミナルエミュレータです。私は、この XTerm の国際化にかかわるパッチを書いています。

ここで国際化とは、主に、LC_CTYPE ロケールに従って動作エンコーディングを自動的に決定する、という意味です。たとえば、 LANG=ja_JP.eucJP としておけば、XTerm は自動的に EUC-JP を選択する、ということです。そもそも LANG 変数 (など) は、ソフトウェアがそれを参照して動作を決定するために存在するので、LANG (など) が指定するエンコーディング (など) とは異なるエンコーディング (など) を用いる動作はバグだと考えるべきです。従って、この国際化の作業は、XTerm のバグを修正していく作業だと言えます。

(2002/9/15) これまでのパッチで、XTerm の LC_CTYPE ロケール自動認識はほぼ完成していましたが、フォント設定がまだ自動化されていませんでした。つまり、XTerm が自動的に UTF-8 モードになる場合 (luit を利用した LC_CTYPE ロケール自動認識モードにおいても、 XTerm 内部では UTF-8 モードとなっています)、フォントも自動的に *-iso10646-1 フォントが選択されるべきです。が、従来の XTerm は、8 ビットモード用と UTF-8 モード用に個別のフォント設定を持つことができないため、自動切換えは不可能でした。
そこで、このパッチを使うと、8 ビットモード用と UTF-8 モード用に個別のフォント設定を持つことができ、また、UTF-8 モードでは自動的に UTF-8 モード用のフォント設定が使われるようになります。
ダウンロード → CVS 版 XTerm (20020817)、フォント設定パッチ。
(2002/8/17) 2002/7/18 のパッチが、XFree86 の CVS レポジトリに採用されました。これによって、XFree86 XTerm の国際化はひと段落しました。つまり、追加パッチなしで、ロケールが指定するエンコーディング (ただし、luit がサポートしているもののみ; ISO-8859-{1,2,3,4,5,6,7,8,9,10,11,13,14,15,16}, KOI8-R, CP1251, EUC-{CN,JP,KR}, Big5。以下で紹介する 20020704 パッチによって Shift_JIS と GBK が追加) が使用できるようになりました。
以降の開発は、細かい不具合の修正や改良などがメインとなります。
試用方法は、以下の通りです。
まず、CVS レポジトリから XTerm (xc/programs/xterm) をダウンロードしてください。コンパイルは、sh configure --enable-luit ; make とやってください。従来必要だった --enable-wide-chars は不要になりました。(--enable-luit を指定することで自動的に指定される)。
次に、luit をコンパイルする必要があります。XFree86 の CVS から luit (xc/programs/luit) をダウンロードし、コンパイルしてください。XFree86 4.2 に含まれている luit にはコマンドライン解析部にバグがあるために使えません。必ず CVS 版を用いてください。また、XFree86 4.1 またはそれ以前のバージョンでコンパイルする際には、fontenc パッチ (以下でダウンロード可能) が必要です。コンパイル法は、xmkmf ; make です。作成したバイナリは、XFree86 のバイナリがインストールされるディレクトリ (例えば /usr/X11R6/bin) に置いて下さい。 (別の場所に置くことも可能ですが、その場合、以下で localeFilter リソースの設定が必要になります)。
次にリソースです。詳しくは、マニュアルページを参照して下さい。
- utf8 リソースは、指定しないでください。
- utf8 の代わりに、ロケールに従った動作をするかどうかを指定するための locale リソースが新設されています。 true、false、medium のほか、エンコーディング名を直接指定することもできます。デフォルトは medium で、日本語、中国語、韓国語、タイ語ロケールの場合のみそのロケールに従い、それ以外は従来通りの 8 ビット動作を行います。ですので、日本語を使いたいだけの場合には、locale リソースは無指定で良いでしょう。いろんな言語を使いたい時には、true がおすすめです。
- localeFilter リソースが新設されています。これは、UTF-8 とその他のエンコーディングとの変換を行うフィルタプログラムのパスを指定します。デフォルトでは、 XTerm をコンパイルしたマシンにおいて XFree86 のバイナリが置かれるディレクトリの下の luit です (例、 /usr/X11R6/bin/luit)。もし luit をそれ以外の場所にインストールした場合には、指定が必要となります。
次にフォントです。どのロケールでも、iso10646-1 フォントを用います。例えば、
```
    XTerm*Font: -misc-fixed-medium-r-semicondensed--13-120-75-75-c-60-iso10646-1
    XTerm*Font5: -misc-fixed-medium-r-normal--18-120-100-100-c-90-iso10646-1
    
```
とするとよいでしょう。このとき、上記フォントの平均文字幅 (60 と 90) を倍 (120 と 180) にしたフォント
```
    -misc-fixed-medium-r-normal-ja-13-120-75-75-c-120-iso10646-1
    -misc-fixed-medium-r-normal-ja-18-120-100-100-c-180-iso10646-1
    
```
が自動的に検出され、全角文字の表示に用いられます。これらのフォントはすべて、XFree86 に含まれているものです。
この状態で、ロケールを適切に設定して (例、 LANG=ja_JP.eucJP ; export LANG) XTerm を起動すれば、好きなエンコーディングを用いることができます。ただし、サポートされるエンコーディングの種類は luit がサポートするものに限られます。
既知の問題は、以下のとおりです。
- EUC-JP ロケールにおいては、多くの記号やロシア文字など、全角であるべき文字が半角になります。いかなる規格にも反していないので、「仕様だ」と言ってしまうことも可能ですが、実際上、使いにくいです。
- EUC-JP、EUC-KR、EUC-CN (GB2312)、Big5 で dialog、whiptail などを使って罫線文字を表示させると、それ以降、非 ASCII 文字が表示できなくなります。 (環境依存です。termcap/terminfo の定義が悪いのが原因であり、厳密には XTerm の責任ではありません。詳しくは i18n@xfree86 メーリングリストに流れた記事などを参照してください。)
ダウンロード →
CVS 版 XTerm (20020817)。
CVS 版 luit (20020701) (必須)、 20020704パッチ (Shift_JIS と GBK が使えるようになる拡張)、 fontenc パッチ (XFree86 4.1 以前のみ必須)。
(2002/7/4) XFree86 i18n メーリングリストに、luit の改良パッチを送りました。 Shift_JIS、GBK、UTF-8 の各エンコーディングが使用可能になっています。
ダウンロード → CVS 版 luit (20020701) (必須)、パッチ (必須)、 fontenc パッチ (XFree86 4.1 以前のみ)。

以下は古い内容です。

(2002/7/18) xterm パッチを、patch@xfree86 に送り、整理番号 5328 をもらいました。あとはこれが処理されれば、晴れて XFree86 XTerm で EUC-JP などのエンコーディングが使えるようになります。 (luit の改良しだいで、対応エンコーディングを増やすことができます。たとえば、2002/7/4 パッチを用いると、TCVN、GBK、Shift_JIS が使えるようになります)。
ダウンロード → CVS 版 XTerm (20020513)、パッチ。
(2002/6/7) 2002/6/5 の luit の改良を受けて、 XFree86 i18n メーリングリストとlinux-utf8 メーリングリストに XTerm のパッチを添付したメールを送りました。ここでの議論が終われば、XFree86 のパッチ受付 (patch@xfree86) に送る予定です。
ダウンロード → パッチ。
(2002/5/14) XTerm から luit を呼び出すことで様々なエンコーディング (EUC-JP など) をサポートするためのパッチを作りました。このパッチは、 2002/2/3 に書いたパッチを、XTerm 本体の更新に合わせてリニューアルしたもので、内容的には同じです。
EUC-JP ロケールにおいては、多くの記号やロシア文字など、全角であるべき文字が半角になるという不具合 (現在のところ仕様) があります。「XTerm*Locale: true」というリソース設定が必要です。また、./configure 時に --enable-wide-chars をつける必要があります。
ダウンロード → CVS 版 XTerm (20020513)、 luit パッチ。
(2002/6/5) XFree86 の CVS ツリーに含まれている luit が更新され、2002/5/13 の「種々のバグ修正・改良パッチ」が不要になりました。
ダウンロード → CVS 版 luit (20020606) (必須)、 fontenc パッチ (XFree86 4.1 以前のみ)。
(2002/5/13) XFree86 の CVS ツリーに含まれている luit は、Juliusz さんの luit ページから取得できる luit-0.8.1 よりも新しくなっています。そして、CVS 版 luit に対する「種々のバグ修正・改良パッチ」があります。 "--" コマンドオプションのバグ修正など、XTerm から luit を使う際に必須となる項目を含んでいますので、必ず使用してください。
このパッチは、 2002 年 2 月ごろに XFree86 の i18n メーリングリストで議論され、ここにまとめがあります (これらをまとめて、patch #5279 として再提出しました)。
なお、CVS 版 luit は、XFree86 4.2 以降でないとコンパイルできません。が、それ以前の XFree86 環境でもコンパイルできるようにする「fontenc パッチ」があります。
ダウンロード → CVS 版 luit (20020513) (必須)、種々のバグ修正・改良パッチ (必須)、 fontenc パッチ (XFree86 4.1 以前のみ)。
2002/2/3 に、XTerm から luit を呼び出すことによって、ロケールに依存してエンコーディングを決定するパッチを公開しました。EUC-JP ロケールにおいては、記号など、全角であるべき文字が半角になるという不具合 (現在のところ仕様) があります。「XTerm*Locale: true」というリソース設定が必要です。また、./configure 時に --enable-wide-chars をつける必要があります。
2002/1/20 に、XFree86 4.2 がリリースされました。 luit と呼ばれる、UTF-8 と様々なエンコーディングの変換を行うソフトウェアが含まれています。
2001/9/8 に、 XTerm-158 が公開されています。OverTheSpot スタイルでの XIM が使えるようになっています。また、 XFree86 の CVS 版では、XTerm-158 のXIM 関連バグが修正されています。この修正は、2001/10/7 の XTerm-160 に取り込まれました。
2001/6/14 に、 xterm-156-overthespot2 パッチを公開しました。このパッチは、XTerm-156 に、 OverTheSpotサポートを追加し、Xutf8LookupString() を使って XIM 入力を XTerm の内部コードである UTF-8 で受け取るようにしたものです。機能は少なくても、問題が残っていても、とにかく正規バージョンに早く取り込まれて日本語入力がなんとか使える最低レベルには到達しておきたいと考えて、このようなパッチを作りました。このパッチを使うには、 cstomb fix パッチをあてた XFree86 4.x が必要です。 [このサイトから xterm-156.tar.gz をダウンロード] cstomb fix パッチは、2001/8 に CVS 版の XFree86 に取り込まれました。
2001/3/23 に、 xterm-152-27 が公開されました。 xterm-150-23 に対する私のパッチがすべて取り込まれています。 [このサイトから xterm-152.tar.gz をダウンロード] [このサイトから xterm-152-27.diff.gz をダウンロード]

もっと古い内容

私のパッチを使うには、以下に示すファイルを入手する必要があります。

Thomas Dickey さんのおおもとの XTerm。 [このサイトから xterm-150 をダウンロード]
Robert Brady さんが書いたすばらしいパッチ。 [このサイトから xterm-150-23 をダウンロード]
configure スクリプトを再生成したい場合には、 autoconf の開発版 (2.13.20000819 以降)が必要になります。
iconv() や nl_langinfo() がない OS で使うには、 Bruno Haible さんの libiconv が必要です。

国際化機能を試すには、./configure 時に --enable-wide-chars を指定してください。また、libiconv を使うときは、 --with-libiconv[=DIR] を指定してください。

フォントは、XFree86 4.0 に含まれている、 -misc-fixed-medium-r-semicondensed--13-120-75-75-c-60-iso10646-1 (半角用) と -misc-fixed-medium-r-normal-ja-13-120-75-75-c-120-iso10646-1 (全角用) の組み合わせが使えます。 xterm -fn -misc-fixed-medium-r-semicondensed--13-120-75-75-c-60-iso10646-1 というふうにして起動すると、自動的に -misc-fixed-medium-r-normal-ja-13-120-75-75-c-120-iso10646-1 を検出して使用します。

動作報告、バグ報告、パッチ等おねがいします。とくに、私は Debian GNU/Linux しか使っていませんので、 configure スクリプトまわりのテストが、ほとんどできません。また、開発に興味がある方、私やほかの開発者たちと議論したい方は、 XFree86 Internationalization メーリングリストまでお越し下さい。

既知のバグは以下の通りです。

nl_langinfo(3) が利用できないシステムでは、 UTF-8 モードで XIM 入力ができない。
FreeBSD-4.2-RELEASE + Bruno's libiconv で、 XIM 入力ができない。

以下にパッチとその説明を示します。各パッチは、Robert Brady さん版の XTerm に対するものとなっています。(k1 をあてて k2 をあてて... という必要はない)。

xterm-150-23-k10 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- iconv() が BOM を付加する対策。(BSD 用)
- libxpg4 をチェック (BSD 用)
- aclocal.m4 を -k8 のものに戻す。ただし、--with-libiconv[=DIR] と、locale_charset()/nl_langinfo() のチェックを追加。
xterm-150-23-k9 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- strndup() は標準的な関数ではないので使わないように書き換え。
- iconv_open() の引数として WCHAR_T を使わないようにした。(wcwidth.c)
- (FreeBSD 救済措置?) setlocale(LC_ALL,"") を追加。
- ./configure の iconv() と nl_langinfo() のチェックを書き換え。
- ./configure で、iconv_open() に使える UCS-4 と UTF-8 のエンコーディング名称を取得するようにした。
- ./configure に、 --with-libiconv と --with-libcharset を追加。
xterm-150-23-k8 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- UTF-8 モード時に XIM 入力すると異常終了するバグをなおす。
- マニュアルページを一部書き直し。(-8、-en、-lc、-u8、encodingMode)
xterm-150-23-k7 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- エンコーディングを直接指定するためのコマンドオプション '-en' を追加。これは、iconv() は持っているけど nl_langinfo() は持っていない OS のための救済措置です。
- aclocal.m4 中の AM_ICONV を CF_ICONV に名前変更。
- aclocal.m4 中に nl_langinfo() 判定マクロを書く。もし nl_langinfo() が存在しなければ、Bruno Haible さんの libcharset に含まれる locale_charset() が使えるかどうかを判定する。 (not tested)。
- aclocal.m4 中に wcwidth() 判定マクロを書く。
- k6 パッチで nl_langinfo() が決して使われない問題を修正。
xterm-150-23-k6 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- bidi モードのコマンドオプションを -/+b から -/+bi に変更。
- OS が wcwidth() を持っていないときのデフォルトの wcwidth モードを決めるアルゴリズムを変更。
- オンラインマニュアルの修正:
  コマンドオプション (-/+bi, -fx, -8, -u8, -lc, -wcs, -wcu, -wcc) とリソース (bidi, ximFont, encodingMode, widthMode) の記述を追加。
- オンラインマニュアルからコマンドオプション +u8 とリソース utf8 の記述を削除。
- HAVE_ICONV、HAVE_LANGINFO、HAVE_WCWIDTH の各マクロが使えるという想定のもとでソースを書き直し。
- utf8 リソースの廃止に伴って、UXTerm.ad を修正 ("*VT100*utf8: 1" --> "*VT100*encodingMode: utf8").
- Bruno Haible さんが提供してくれた AM_ICONV マクロを aclocal.m4 に追加。正しいでしょうか？
- configure スクリプトに、nl_langinfo() と wcwidth() のチェックを追加。(従来のバージョンの iconv() のチェックをまねて作った)。正しいでしょうか？
xterm-150-23-k5 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- GNU libc 2.1 の iconv() に関する問題を解決。
xterm-150-23-k4 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- --enable-wide-chars なしで ./configure を実行したときにカラム数が認識されない問題を解決。私の以前のパッチが原因でした。

xterm-150-23-k3 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.

XIM と Unicode keysym とが同居できるようにした。
文字幅を指定する -wc* オプション群をリソースとして定義した。リソース名は 'widthMode' (クラス 'WidthMode')。

-wc* オプション群の名前変更。

   -------------------------------------------------------------------
   オプション  'widthMode'リソース                        注意
   -------------------------------------------------------------------
   -wcs        'system' または 'locale'
   -wcu        'unicode' 'standard' 'markus' のどれか    以前の '-wcm'
   -wcc        'cjk' 'eastasia' 'doublewidth' のどれか   以前の '-wcl'
   -------------------------------------------------------------------

エンコーディング関連のオプションを整理・再構築した。対応するリソースは 'encodingMode' (クラス 'EncodingMode')。

   ----------------------------------------------------------------------
   オプション  'encodingMode'リソース     これがデフォルトとなるのは...
   ----------------------------------------------------------------------
   -8          '8bit'                     ロケールが 'C', 'POSIX',
                                          ISO-8859-* (6 と 8 以外) のとき
   -u8         'utf8' or 'utf-8'          ロケールが UTF-8 のとき
   -lc         'locale' or 'lc_ctype'     その他の場合
   ---------------------------------------------------------------------

それに従って、'+u8' オプションと 'utf8' リソースを廃止。

xterm-150-23-k2 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- オプションなしで ./configure を実行したときのコンパイルエラーを修正。 (Replace PAIRED_CHARS with TRI_CHARS, and so on).
- ./configure --enable-trace 時のコンパイルエラーを修正。 (Replace PAIRED_CHARS with TRI_CHARS, and so on).
- LocalEncodingToUnicode() が wchar_t と UCS-4 を混同していたのを修正。
- LocalEncodingToUnicode() のエンディアン問題を修正。
- my_wcwidth() が wchar_t と UCS-4 を混同していたのを修正。 (Code for conversion from UCS-4 to wchar_t is newly written.)
- do_precomposition() が、Unicode は 16 ビットという仮定で作られていたのを改善。
- ScreenWrite() 中のバグらしきものを修正。 (str3 should be shifted 16, not 8).
- XIM の指定に XMODIFIERS 環境変数が使えるようにした。
xterm-150-23-k1 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #23.
- wcwidth_cjk() がシステムの wcwidth() に依存しているのを修正。
xterm-150-22-xim2 (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #22.
- XIM の入力スタイルとして、OverTheSpot をサポートした。
- XIM のためのフォントを指定する '-fx' オプションと 'ximFont' リソースを導入した。
xterm-150-22-xim (announcement)
Based on Thomas Dickey's XTerm #150 and Robert Brady's patch #22.
- XIM による日本語入力ができるようにした。

Tomohiro KUBOTA <debian at tmail dot plala dot or dot jp>