文字コード総合スレ part8 [sc] | レス881-931

■ このスレッドは過去ログ倉庫に格納されています

1 2012/11/30(金) 13:16:02.46

プログラマーなら一度は煩わされたことのある文字コードについてのスレ。
UTF-8、ShiftJIS、JIS、EUC、Uincode、 UCS、サロゲートペア、コードポイント、文字コード判定、
合成文字、ソート、TRON、外字コード、その他について語り合いましょう。
各言語での文字列の扱いについての質問もOKです。
基本マッターリ、ささ、茶でもどうぞ。

■過去スレ
文字コード総合スレ part1 http://pc11.2ch.net/test/read.cgi/tech/1031028205/
文字コード総合スレ part2 http://pc11.2ch.net/test/read.cgi/tech/1143375639/
文字コード総合スレ part3 http://pc11.2ch.net/test/read.cgi/tech/1180250376/
文字コード総合スレ part4 http://pc11.2ch.net/test/read.cgi/tech/1228052369/
（スレ再利用）UnicodeとUTF-8の違いは？ http://pc12.2ch.net/test/read.cgi/tech/1177930957/
（隔離スレ）UnicodeとUTF-8の違いは？　その2 http://pc12.2ch.net/test/read.cgi/tech/1274937437/
文字コード総合スレ part5 http://pc12.2ch.net/test/read.cgi/tech/1236529563/
文字コード総合スレ part6 http://hibari.2ch.net/test/read.cgi/tech/1278923059/
文字コード総合スレ part7 http://toro.2ch.net/test/read.cgi/tech/1306595564/

ここまで見た

881 2014/05/07(水) 23:28:11.14: utf-1のオリジナルの仕様書はどこかに無いですかね？

ここまで見た

882 2014/05/08(木) 01:59:00.77: >>881
なにそれ？ 1bit encode?

ここまで見た

883 2014/05/08(木) 02:19:16.15: 8bitだな

ここまで見た

884 2014/05/08(木) 22:39:56.65: 数字の付け方が途中で変わったからねぇ。

ここまで見た

885 2014/05/09(金) 22:59:45.07: JIS X 0201の「ヲ」ってなんであんな位置にあるの？
「ワ」と「ン」の間じゃダメだったの？

ここまで見た

886 2014/05/10(土) 00:58:26.77: 不思議だワン

ここまで見た

887 2014/05/10(土) 01:01:06.78: 今主流は、ISO/IEC 8859-15? Windows-1252 ? unicode?

ここまで見た

888 2014/05/10(土) 01:09:42.82: あらゆる隔たりを越えて使われてるコードってなんだろ

ここまで見た

889 2014/05/10(土) 03:27:31.59: >>888
ASCIIコード

ここまで見た

890 2014/05/10(土) 03:29:41.16: JSON
Base64

ここまで見た

891 2014/05/10(土) 11:13:27.62: せめて文字コードからお願いします

ここまで見た

892 2014/05/10(土) 11:17:48.14: お客さまの文字コードを戴いてもよろしいでしょうか

ここまで見た

893 2014/05/10(土) 11:20:07.72: >>881
英語版ウィキペからのリンクで見つけた。
http://kikaku.itscj.ipsj.or.jp/ISO-IR/178.pdf
>>884
UTF-8はUTF-2という名前だったな

ここまで見た

894 2014/05/10(土) 13:26:02.15: >>893
オリジナルは ISO 10646-1:1993 = Unicode 1.1だな。

ここまで見た

895 2014/05/10(土) 15:12:57.31: Unicode 1.1だけはunicode.orgのサイト上にもないんだね。
http://www.unicode.org/versions/enumeratedversions.html
無慈悲な(paper only)

ここまで見た

896 2014/05/10(土) 20:17:48.99: Adobe-Japan1-6が出てもう10年か
これだけ放置ってことは1-7は実質的にキャンセルされたかな

ここまで見た

897 2014/05/11(日) 00:27:45.38: 世の中はWindows-1252か、それをUTF-8化した文字コードが主流だね。

ここまで見た

898 2014/05/11(日) 14:18:48.58: 㐂驒沪𡈽圡玊琢簞箪簟單俱倶傎叱𠮟
咕吒哎噓嘘墟吞呑櫛樿撣
味噌
葛飾区
祇園
進歩
噂
湮滅
恰好
義捐金
眩惑
激昂
幻惑
渾然
駿足
醇朴
饒舌
食事療法
食餌療法
擡頭
醜名

ここまで見た

899 2014/05/11(日) 14:22:59.36: >>876
外部ツールのgrepが特定の文字コードに対応してなかっただけだろ？

ここまで見た

900 2014/05/11(日) 14:24:59.03: 人名にある漢字
&#164660;　U+28334(D860 DF34)
&#136014;　U+2134E(D844 DF4E)
&#168087;　U+29097(D864 DC97)
&#135963;　U+2131B(D844 DF1B)
&#64069;　 U+FA45
わかりやすい一表式誤字俗字・正字一覧
戸籍の氏又は名の記載・記録に用いる文字
戸籍実務研究会　編　日本加除出版
shift-jisではなくUnicodeで記述してくれ。

むずかしくないぞ！！誤字俗字・正字
小林勝彦　著　日本加除出版
子の名に使える漢字字典
改定常用漢字表対応
戸籍実務研究会　編　日本加除出版
人名用漢字の変遷
子の名に使える漢字の全履歴
日本加除出版株式会社編集部　編
日本加除出版

ＣＪＫＶ日中韓越情報処理　オライリー
新しい国語表記ハンドブック　三省堂
校正必携　日本エディタースクール
記者ハンドブック　共同通信
日本人の知らない日本語

ここまで見た

901 2014/05/11(日) 15:03:04.80: 外字管理と文字同定
合理的な外字作成のために
長村玄　著　日本加除出版

参考
http://blog.livedoor.jp/blackwingcat/archives/983407.html
http://blog.livedoor.jp/blackwingcat/archives/775319.html

&amp;#127924;
サロゲートペア
1F3B4　花札の坊主
1F3B6
1F4A9
1F4B4
1F5FE
1F5FC

ここまで見た

902 2014/05/11(日) 16:31:11.95: 結局、どれがええんじゃ？

ここまで見た

903 2014/05/11(日) 16:59:11.70: >>898
邦題『湮滅』の仏語原文はeのリポグラムで書かれているそうで、
翻訳の方も「い段」の仮名がなかったりのこだわり本。
どうでもいいな、スレチだし

ここまで見た

904 参考 2014/05/11(日) 22:41:39.55: http://www.amazon.co.jp/dp/4899772939/
文字コード「超」研究　改訂第2版
深沢千尋

http://www.amazon.co.jp/dp/477414164X/
プログラマのための文字コード技術入門 (WEB+DB PRESS plus)
矢野啓介

http://www.amazon.co.jp/dp/4891006080/
UnicodeによるJIS X0213実装入門―情報システムの新たな日本語処理環境
(マイクロソフト公式解説書―マイクロソフトITプロフェッショナルシリーズ)
田丸健三郎

http://www.amazon.co.jp/dp/4822294838/
Unicode IVS/IVD入門
田丸健三郎　小林龍生

http://www.amazon.co.jp/Unicode/dp/4798100307/
Unicode標準入門　　発売日　2001/05
トニーグラハム

ここまで見た

905 2014/05/12(月) 01:09:45.43: Unicode IVS/IVD入門は誤植とツッコミどころ満載(著者のせいというよりは編集が仕事してない)なので、
togetterだかにまとめられてるツッコミを確認しながら読むべし。

ここまで見た

906 2014/05/12(月) 11:07:44.74: 互換漢字の表が正規化で全部統合漢字に化けていたのはひどかった

ここまで見た

907 2014/05/12(月) 15:46:50.90: >>897
はあ?

ここまで見た

908 2014/05/12(月) 15:57:25.31: &#29357;&#173866;2A72A&#173880;2A738&#173885;2A73D&#173894;2A746&#173919;2A75F&#173912;2A758

ここまで見た

909 2014/05/12(月) 21:42:02.38: >>885
最初無くて(「オ」で代用してたのかな?)後から追加されたという説がある。

ここまで見た

910 2014/05/13(火) 13:59:51.38: >>906
そりゃ回収すべきだなあ。

つーか著者も中で正規化についてふれてるはずだから、
予め事故が起きないように原稿データを作成する
もしくはゲラで気にして眺めるのが当然。

それができていない、ということは、Excelの入門書とかにありがちな
入門者の「ための」本じゃなく、入門者が「書いた」本の類か。

ここまで見た

911 2014/05/13(火) 15:44:02.57: いや、著者はどっちもそれなりな人。経緯はまとめがあるのでそっちを読んでくれ。

ここまで見た

912 2014/05/13(火) 19:28:52.12: >>909
そんな説があったのか
記号消したのかな

ここまで見た

913 2014/05/13(火) 19:39:30.11: 主に携帯電話絵文字が割り当てられた、UNICODE　u1f330〜u1f36f, u1f400〜u1f41f
をtwitter, mixi, Facebookで表示させてみた。
mixiのWeb serverは前から独自の絵文字表示機能があるが、元からある絵文
字から、その文字コードに対応する絵文字を拾いだしてを画像データ
(恐らくGIF)で表示しているみたい。。
twitterのPC(Windows7)のブラウザによる表示でも同様。

Nexus7でのブラウザ表示、smart phoneでのtwitterでは、Web serverの
絵文字表示機能に対応しておらず、文字コードに対応する絵文字をフォント
で表示させようとしているみたい。
表示させる文字コードに対応する絵文字のフォントデータがその端末にない
場合は表示されない。

ここまで見た

914 2014/05/13(火) 19:47:48.70: UNICODE表示
u1f330〜u1f36f
🌰🌱🌲🌳🌴🌵■🌷🌸🌹🌺🌻🌼🌽🌾🌿
🍀🍁🍂🍃🍄🍅🍆🍇🍈🍉🍊🍋🍌🍍🍎🍏
🍐🍑🍒🍓🍔🍕🍖🍗🍘🍙🍚🍛🍜🍝🍞🍟
🍠🍡🍢🍣🍤🍥🍦🍧🍨🍩🍪🍫🍬🍭🍮🍯

u1f400〜u1f41f
🐀🐁🐂🐃🐄🐅🐆🐇🐈🐉🐊🐋🐌🐍🐎🐏
🐐🐑🐒🐓🐔🐕🐖🐗🐘🐙🐚🐛🐜🐝🐞🐟

ここまで見た

915 2014/05/13(火) 20:17:04.28: そもそもサロゲートペアに対応しているかという話も。

ここまで見た

916 2014/05/14(水) 10:23:36.86: >>913
ブラウザは何？
サーバ側で画像に差し替えてるのは、
UserAgent見て切り替えたりしてんじゃないの？

>>913
> Web serverの絵文字表示機能に対応しておらず、

そうじゃなくてサーバ側で表示できるブラウザと勘違いしてるんでしょ。
UserAgentがそれっぽいから。

ここまで見た

917 2014/05/14(水) 12:07:15.19: JIS2004対応MSゴシック MS明朝フォントパッケージ
Office製品のJIS X 0213:2004への対応状況
go.microsoft.com/fwlink/?LinkID=76814 go.microsoft.com/?LinkID=6179681
JIS X 0213:2004 Unicode 実装ガイド Microsoft
http://www.microsoft.com/china/windows2000/downloads/18030.mspx

http://blog.livedoor.jp/blackwingcat/archives/983407.html
ISO 10646:2003 + 修正 1 繁体字中国語サポート (HKSCS 2004)
Windows XP および Windows Server 2003 用の Windows XP フォントパックhttp://support.microsoft.com/kb/977801/ja
Traditional Chinese ClearType fonts for Windows XP - 繁體中文
http://www.microsoft.com/zh-tw/download/details.aspx?id=12072
Simplified Chinese ClearType fonts for Windows XP
http://www.microsoft.com/en-us/download/details.aspx?id=14577
Korean ClearType fonts for Windows XP
http://www.microsoft.com/en-us/download/details.aspx?id=10490

汎用電子情報交換環境整備プログラム文字対応作業委員会資料
平成19年度経済産業省委託
汎用電子情報交換環境整備プログラム文字対応作業委員会資料（「地名外字」資料）
2008 年3 月発行、独立行政法人国立国語研究所
平成19年度汎用電子情報交換環境整備プログラム文字対応作業委員会資料地名外字資料
http://www.ninjal.ac.jp/archives/hanyo/
http://www.ninjal.ac.jp/archives/hanyo/chimeigaiji.pdf
http://www.ninjal.ac.jp/archives/hanyo/jisyohikeisaiji.pdf

http://kanji-database.sourceforge.net/dict/daikanwa/index.html
http://hp.vector.co.jp/authors/VA000964/html/daikanwa.htm
http://webcat.nacsis.ac.jp/cgi-bin/shsproc?id=BN13621753

ここまで見た

918 2014/05/14(水) 13:26:00.05: これはいったい何の話？

ここまで見た

919 2014/05/14(水) 20:54:01.03: あまぞんのれびゅーって面白いよね。
専門書の場合、みんなちゃんと根拠を出して
貶しているのに必ず一人だけ闇雲に
マンセーする人がいる。
やっぱ、工作員かな。

ここまで見た

920 2014/05/14(水) 20:57:31.09: 漢字データベースはデータファイルへのリンク切れを直してほしいぞ
( /kawabata/kanji-data-base-* → /cjkvi/cjkvi-* )

ここまで見た

921 2014/05/14(水) 21:02:55.66: > http://webcat.nacsis.ac.jp/cgi-bin/shsproc?id=BN13621753

ていうか貼る前に飛べるかどうか確認くらいしろ
botかよ

ここまで見た

922 2014/05/14(水) 21:26:48.11: http://ci.nii.ac.jp/ncid/BN13621753
これなのかな？

ここまで見た

923 2014/05/14(水) 22:29:58.06: サイニーってなんか名前がえろいよね

ここまで見た

924 2014/05/15(木) 00:27:38.91: >>919 一人で言ってろw

ここまで見た

925 2014/05/15(木) 01:21:02.79: Excel から Cのdllに文字列を渡すとき、VBAからは
ByVal as String を渡して C側で LPCSTR で受け取るのがパターンだけど、
ワークシートから直接呼ぶ場合はC側は BSTR等で受けなきゃいけない。
そこで C側は BSTR に統一しておいて、VBAからは
StrConv( xxx, vbUnicode) をかましてやればいいことが分かった。

ところが、StrConv("まみむめも", vbUnicode) を渡したら化ける。
ひらがなだと"め"以降が、かたかなだと"ム"以降がダメなようだ。

ここまで見た

926 2014/05/15(木) 23:22:03.55: http://ci.nii.ac.jp/ncid/BN13621753
大漢和辞典
諸橋轍次著
藍燈文化事業股份有限公司, 1992.6
修訂版 / 鎌田正, 米山寅太郎修訂

出版地：台北

大学図書館所蔵 2件
実践女子大学図書館
函館大谷短期大学図書館