文字コード総合スレ part5

1 ：デフォルトの名無しさん：2009/03/09(月) 01:26:03

プログラマーなら一度は煩わされたことのある文字コードについてのスレです。
ShiftJIS、JIS、EUC、Uincode、 UCS、サロゲートペア、コードポイント、文字コード判定、
合成文字、ソート、TRON、外字コード、その他について語り合いましょう。
各言語での文字列の扱いについての質問もOKです。
基本マッターリ、ささ、茶でもどうぞ。

■過去スレ
文字コード総合スレ part1 http://pc11.2ch.net/test/read.cgi/tech/1031028205/
文字コード総合スレ part2 http://pc11.2ch.net/test/read.cgi/tech/1143375639/
文字コード総合スレ part3 http://pc11.2ch.net/test/read.cgi/tech/1180250376/
文字コード総合スレ part4 http://pc11.2ch.net/test/read.cgi/tech/1228052369/

332 ：デフォルトの名無しさん：2009/10/12(月) 19:30:42

phpからPEARのMail.phpを使用してWeb上から
ソフトバンクのケータイに日本語のメールを送信すると
文字化け？してるのかわかりませんが日本語の部分が表示されません。

ソフトバンクのケータイはutf-8じゃないといけないとどっかのサイトで見つけたので
mb_language("ja");
mb_internal_encoding("UTF-8");
mb_convert_encoding($Message,"UTF-8","auto");
のように変換を行ったのですが、うまく変換されてないのか成功しません。

変換ができてないのか、それとも文字コードの指定事態が間違ってるかすらも検討がつかなくて
どーすればいいかわからない状況です。

333 ：デフォルトの名無しさん：2009/10/13(火) 01:02:39

>>321
音階にも種類があるでよ？

334 ：デフォルトの名無しさん：2009/10/13(火) 01:16:44

12平均律だけならいいけど、31とか53平均律なんてものも世界には存在してだな

335 ：デフォルトの名無しさん：2009/10/13(火) 01:20:14

まだやんの？その話

336 ：デフォルトの名無しさん：2009/10/13(火) 01:25:04

>>332
webprog板だかで聞くべし

337 ：デフォルトの名無しさん：2009/10/13(火) 11:21:41

絵文字は文字で（絵じゃない）、音符は絵の一種に見える（文字でも記号でもない）俺は異端かなぁ……

338 ：デフォルトの名無しさん：2009/10/13(火) 11:31:07

敢えて言おう。音符を入れるくらいなら気象記号を入れてみろ。
どちらも手書きであるが故の美しさがあると言う点で、絵のようなものだ。

339 ：デフォルトの名無しさん：2009/10/13(火) 14:46:20

地図記号が絵文字関連で幾つか入るようだから、天気図記号が入っても悪くはないはず。

ただ、こういうのってXMLとかでの実用が前提じゃなかったっけ？知らんけど。

340 ：デフォルトの名無しさん：2009/10/13(火) 15:01:12

国ごとに微妙に違うからなあ

341 ：デフォルトの名無しさん：2009/10/13(火) 20:26:24

>>338
手書き故の美しさを言い出したら、
文字全部そうじゃね？

342 ：デフォルトの名無しさん：2009/10/13(火) 20:28:43

地図記号って、おまんじゅう工場も入るのか？

343 ：デフォルトの名無しさん：2009/10/13(火) 20:47:41

おまん工場

344 ：デフォルトの名無しさん：2009/10/16(金) 00:37:32

シフトJISの外字領域とMS932の外字領域のコード範囲は同じなのでしょうか？

345 ：デフォルトの名無しさん：2009/10/16(金) 11:47:37

JISのシフトJISに外字領域は無い。

346 ：デフォルトの名無しさん：2009/10/21(水) 09:33:11

>>47
CJKV Information Processing の２版がgoogleブックに登場してた。
Ebook Release: June 2009
この時期に登場したのか？

ttp://books.google.co.jp/books?id=SA92uQqTB-AC
ttp://oreilly.com/catalog/9780596514471/preview

347 ：デフォルトの名無しさん：2009/10/22(木) 18:17:37

最近更新がないと思ったら、小形さんこんなの準備してたんだ。
とうとう単なる傍観者じゃいられなくなりましたか。
しかし来週はこりゃ絵文字の議論だけで終わりそうな勢いだ。

348 ：デフォルトの名無しさん：2009/10/22(木) 21:20:19

http://www.otacky.jp/files/oald7/oald7-pkg.el
ここのページにある記号を自作プログラムで扱いたいんですけど、
firefoxでutf-8で記号が読めるので
テキスト文書を(IE8)でutf-8にして文書全部をコピーして
貼り付けて見たところ数割くらいが？マークになってしまいます．
utf-8って複数あるんでしょうか？どうやったら保存できるんでしょうか．
osはvistaです．

349 ：デフォルトの名無しさん：2009/10/22(木) 21:23:02

どこに貼り付けたんだ？
貼り付けた先のアプリケーションがUnicodeに対応していないのでは？

350 ：デフォルトの名無しさん：2009/10/22(木) 21:29:49

テキスト文書utf8_1.txtというファイルを作って貼り付けたんですけど
クリップボード他入出力がダメなんでしょうか

351 ：348：2009/10/22(木) 21:39:53

すいません、
ブラウザからそのファイルへのリンクを右クリックしてとりあえず
情報が失われないように保存は出来たんで、また自分で
色々やってみますお騒がせしました

352 ：デフォルトの名無しさん：2009/10/26(月) 06:17:08

あれで参加者の反発を買わないよう配慮したつもりなのか…

353 ：デフォルトの名無しさん：2009/10/26(月) 06:24:13

>>347
顔文字ジェネレータ面白いなw
http://fonts.jp/emoji/images/00.02.05.23.26.27.png
http://fonts.jp/emoji/images/00.02.04.25.34.png
無理とは分かっていても合字グリフの方向へ持ってって欲しいなと感じてしまったw

354 ：デフォルトの名無しさん：2009/10/26(月) 06:42:20

http://fonts.jp/emoji/images/00.02.16.23.33.png
http://fonts.jp/emoji/images/00.02.05.25.26.32.png
http://fonts.jp/emoji/images/00.02.03.16.32.png
http://fonts.jp/emoji/images/00.02.08.23.34.png
http://fonts.jp/emoji/images/00.02.15.19.33.png

355 ：デフォルトの名無しさん：2009/10/26(月) 06:55:44

顔だけじゃなくて胴体も入れようぜ→それなんてサウスパークジェネレーター?

356 ：デフォルトの名無しさん：2009/10/27(火) 13:19:23

PSOのシンボルチャットを連想したのは私だけではないはずだ。

357 ：デフォルトの名無しさん：2009/10/28(水) 01:00:41

グリフ変更というeditorialな部分は通ったけど
その他のtechnicalな部分は全部預かられてしまったと

んーどうだろ、一応顔は立ててもらえたようだけど

358 ：デフォルトの名無しさん：2009/10/29(木) 00:05:59

>>356
確かにPSOのシンボルチャットっぽいｗ

359 ：デフォルトの名無しさん：2009/11/01(日) 18:37:16

EUCもSJISもJISも面倒見てくれるktermが、UTF-8以外は排除するxtermに駆逐されたのは納得いかない

360 ：デフォルトの名無しさん：2009/11/03(火) 07:24:03

javaでWindows31-J⇔Unicodeの変換で、外字領域を含めて変換できない文字はあるのでしょうか？

361 ：デフォルトの名無しさん：2009/11/03(火) 12:17:25

バージョンによっても違うからここ読め
http://www.ingrid.org/java/i18n/encoding/

362 ：デフォルトの名無しさん：2009/11/03(火) 17:00:14

>>361
お答えありがとうございます。
Java5なのですが、のっていなかったです。
Shift-JISでいうところの外字領域は対応しているのは実際に確認しました。
変換に失敗するとまずいので、保障が欲しいのです。
また、変換できない文字があれば事前にチェックをしたいので、変換できない文字を知りたいのです。

363 ：デフォルトの名無しさん：2009/11/03(火) 17:07:45

全部変換してみりゃいいだろう

364 ：デフォルトの名無しさん：2009/11/03(火) 18:22:33

>>362
想定する文字セットが提示されていれば、
その中で変換できない文字を調べられるけど
漠然と変換できない文字って言われてもな……

365 ：デフォルトの名無しさん：2009/11/03(火) 18:27:53

Windows 31Jってデーヴァナーガリー文字とかも含んでるの?

366 ：デフォルトの名無しさん：2009/11/03(火) 18:32:31

Windows31JからUnicodeに行って戻ってこれれば十分なのか
⇔記号の見た目通り相互変換を意味しているのか

367 ：デフォルトの名無しさん：2009/11/03(火) 23:50:44

Windows3.1Jってまた懐かしいなｗ

368 ：デフォルトの名無しさん：2009/11/04(水) 01:11:03

>>365
ないよ。要はシフトJISだし。

369 ：デフォルトの名無しさん：2009/11/04(水) 01:33:56

外字ありだぜ？

370 ：デフォルトの名無しさん：2009/11/04(水) 04:24:15

>>367
3.1・・・ってまさか・・・


勘違いしてる気がするｗ

371 ：デフォルトの名無しさん：2009/11/04(水) 18:25:03

OS（XP）の外字エディターで、U+21336の文字（土並）を参照表示させる事は可能？

372 ：デフォルトの名無しさん：2009/11/08(日) 21:23:05

外字エディタってそういう風に使うものなの？

373 ：デフォルトの名無しさん：2009/11/09(月) 10:59:59

単？

374 ：デフォルトの名無しさん：2009/11/09(月) 20:02:26

>>372
Windowsの外字エディタは字形の原形として既存のフォントからグリフを読み込んで
そのビットマップをちょこちょこいじって外字を作ることができるんですよ。読み込み
インタフェースがBMPの符号位置しか選択できないように見えるので、何かSIPの
文字を読む方法ない?っていう相談なんじゃないかな。

>>371
Windows XP SP2しか手元にないけど、SimSun (FounderExtended)から
SIPの漢字を読み取る方法はわかんなかった。MS-IMEの「文字一覧」もそう
だけど、どうもこれの設計はcp932とBMPだけで完結しちゃってる気がする。

この漢字はHKSCSにも入っているようなので、HKSCS対応のフォントだと
強引にBMPのどっかの符号位置にマップしてたりしませんかねえ。。。

375 ：デフォルトの名無しさん：2009/11/09(月) 22:38:02

>>374
＞既存のフォントからグリフを読み込んで
なるほど、知らなかった。ありがとう。

>>371
374の言う通り、HKSCS対応のフォントでU+EB00に[土並]があった。
フォント名で言えばMingLiU_HKSCSとかDfSongStdとかMing(ISO 10646)とか。

376 ：デフォルトの名無しさん：2009/11/10(火) 21:25:30

Oさん意気揚々ですな

377 ：371：2009/11/17(火) 00:59:07

>>374>>375
thx
試してみます

378 ：デフォルトの名無しさん：2009/11/18(水) 18:21:34

UTF-8をSHIFT-JISに変換するコードどこかないでしょうか？
iconv UNIX,LINUX系統以外


C/C++
Windows VC++ 環境で

379 ：デフォルトの名無しさん：2009/11/18(水) 20:24:41

MultiByteToWideChar()
WideCharToMultiByte()

380 ：デフォルトの名無しさん：2009/11/19(木) 00:30:54

自分で書けばええやん

381 ：デフォルトの名無しさん：2009/11/19(木) 00:57:52

>>378
http://pc12.2ch.net/test/read.cgi/tech/1214657360/715
メモリ解放は自分でやれ