nDiki : ISO-2022-JP

2003年12月12日 (金)

■ [ Java ] Unicode (UCS) -> 別の charset

スポンサードリンク

Java の String を 'abc' なら US-ASCII (ANSI_X3.4-1968)に、'あいう' なら ISO-2022-JP にしたいという話。やっぱり文字列中の全ての文字について候補の charset に含まれているか見ていくしかないのか?

Mew だとちゃんと、US-ASCIIだけならus-ascii で、日本語が含まれていれば iso-2022-jp でメールを送ってくれるがここら辺はどうやっているんでしょ。ソースを見てみるか。

◇ Twitter やってます。この記事が気にいったらぜひ twitter.com/Naney の follower になってください。

[ permalink ]

[ WiKicker ] 通知メールの Subject: フィールドのエン... (2004-01-25)
メールによる社内コミュニケーションの問題 (2006-04-12)
Linux で使えるデスクトップ検索ツール Beagle でローカルファイ... (2006-08-08)
Windows 上での Apache 2.0.53 では PATH_INF... (2005-04-10)
ISP から Outbound Port25 Blocking を行うとの... (2006-05-23)

[ 12月12日全て ]

2004年1月25日 (日)

■ [ WiKicker ] 通知メールの Subject: フィールドのエンコーディング修正

WiKicker には通知メールの Subject: フィールドがたまに壊れている問題があるのだが、ずっと放置しておいたままだった。そろそろ次のバージョンをリリースしたいと思うので、今回修正しておく。

結果半日かかってしまった。

@ MIME::Words::encode_mimewords

まず現在エンコーディングに使っている MIME::Words::encode_mimewords (5.404)であるが、マニュアルを見ると charset によってはマズいエンコーディングを吐くらしい。 WiKicker で Subject: ヘッダが壊れるのも、この問題のせい。文字境界を無視してぶったぎってエンコードされてしまう。ということで、自前でエンコードする事にする。

@ 自前エンコーダ

まぁたいしたものではないが。最初はエンコードする必要のある部分だけ encoded-word にする事も考えたのだが、面倒なのでやめ。全部エンコードしてしまう事にする。エンコーディングも最初は、"Q" encoding で実装しはじめたのだが(MIME::Words のデフォルトがそうなので、WiKicker でもそれを使っていた)ちょっと面倒なので、"B" encoding に変更。

@ タイトルの途中に空白が入ってしまう?

で、テスト。うーん。途中に余分な空白が入ってしまうな。 mew で受信したメールを見ると folding のところで余分な空白が入って表示される。 RFCとか見ても encoded-word に挟まれた CRLF SPACE は無視されるはずなんだけれどなぁ。

UTF-8 の代わりに ISO-2022-JPにしてみたりとか、エンコーディングを変えてみたり(Q or B)したのだが変わらず。他から受けとっているメールは問題ないから、mew の問題でもなさそうだし。

ん? mew の inbox を確認してみると、他のソフトからのは \n, space でフォールディングされているな。今書いているコードから送ったやつは \r\n, space でフォールディングされている。 RFC的には CRLF space では?

@ 問題は別のところに

WiKicker で \r\n, space でフォールディングしているところを \n, space でフォールディングするようにしたら直る。けど、これでいいのかな?

って良く考えたら、他の部分はヘッダでも本文でも改行には \n を使っているんだった(Perl のヒアドキュメントを使っているので)。ということは今まで、それを標準入力から受けとった sendmail が LF を CRLF にしてくれていたのか。あまり深い事考えてなかったな。今回はフォールディングのところだけで CRLF にしたため一個余分に CR がついてしまい、それがタイトルの文字列中の空白として表示されてしまったと。

結局疑うべきは自分のコード。

[ permalink ]

[ DiKicker ] くっつき BBSをくっつけてみた。 (2004-05-04)
Perl で CR/LF/CRLF 全対応の1行毎読み込み処理 (2006-07-28)
Twitter ベイジアンフィルタプロキシ (2007-12-29)
Rubric でプライベート SBS を立てるも 0.140 では日本語に不具合 (2006-07-22)
Windows 上での Apache 2.0.53 では PATH_INF... (2005-04-10)

[ 1月25日全て ]

2004年7月23日 (金)

■ プロジェクト関連ドキュメントを TeX で

現在進行中のプロジェクトの一つがそろそろ大詰め。ドキュメント書きに突入。前回までは過去の方法を踏襲して MS Word ベースだったのだが、自分がマネージャになった今期からは全面的に TeX ベースへ移行させる。

Subversion で管理
- プロジェクト用 texmf は外部定義 (svn:externals)を使用して共有
Linux、Windows のどちらでもビルドできるように
- tex ファイルのエンコーディングは ISO-2022-JP
- mendex の辞書ファイルは Linux では日本語EUC、Windows ではシフト JIS でないと駄目なようなので、make 時に nkf でコード変換して texmf 以下から手元へコピー