facebook twitter hatena line google mixi email
★お気に入り追加


■ このスレッドは過去ログ倉庫に格納されています

  • 1
  •  
  • 2012/11/30(金) 13:16:02.46
プログラマーなら一度は煩わされたことのある文字コードについてのスレ。
UTF-8、ShiftJIS、JIS、EUC、Uincode、 UCS、サロゲートペア、コードポイント、文字コード判定、
合成文字、ソート、TRON、外字コード、その他について語り合いましょう。
各言語での文字列の扱いについての質問もOKです。
基本マッターリ、ささ、茶でもどうぞ。

■過去スレ
文字コード総合スレ part1 http://pc11.2ch.net/test/read.cgi/tech/1031028205/
文字コード総合スレ part2 http://pc11.2ch.net/test/read.cgi/tech/1143375639/
文字コード総合スレ part3 http://pc11.2ch.net/test/read.cgi/tech/1180250376/
文字コード総合スレ part4 http://pc11.2ch.net/test/read.cgi/tech/1228052369/
(スレ再利用)UnicodeとUTF-8の違いは? http://pc12.2ch.net/test/read.cgi/tech/1177930957/
(隔離スレ)UnicodeとUTF-8の違いは? その2 http://pc12.2ch.net/test/read.cgi/tech/1274937437/
文字コード総合スレ part5 http://pc12.2ch.net/test/read.cgi/tech/1236529563/
文字コード総合スレ part6 http://hibari.2ch.net/test/read.cgi/tech/1278923059/
文字コード総合スレ part7 http://toro.2ch.net/test/read.cgi/tech/1306595564/

ここまで見た
  • 890
  •  
  • 2014/05/10(土) 03:29:41.16
JSON
Base64

ここまで見た
  • 891
  •  
  • 2014/05/10(土) 11:13:27.62
せめて文字コードからお願いします

ここまで見た
  • 892
  •  
  • 2014/05/10(土) 11:17:48.14
お客さまの文字コードを戴いてもよろしいでしょうか

ここまで見た
  • 893
  •  
  • 2014/05/10(土) 11:20:07.72
>>881
英語版ウィキペからのリンクで見つけた。
http://kikaku.itscj.ipsj.or.jp/ISO-IR/178.pdf
>>884
UTF-8はUTF-2という名前だったな

ここまで見た
  • 894
  •  
  • 2014/05/10(土) 13:26:02.15
>>893
オリジナルは ISO 10646-1:1993 = Unicode 1.1だな。

ここまで見た
  • 895
  •  
  • 2014/05/10(土) 15:12:57.31
Unicode 1.1だけはunicode.orgのサイト上にもないんだね。
http://www.unicode.org/versions/enumeratedversions.html
無慈悲な(paper only)

ここまで見た
  • 896
  •  
  • 2014/05/10(土) 20:17:48.99
Adobe-Japan1-6が出てもう10年か
これだけ放置ってことは1-7は実質的にキャンセルされたかな

ここまで見た
  • 897
  •  
  • 2014/05/11(日) 00:27:45.38
世の中はWindows-1252か、それをUTF-8化した文字コードが主流だね。

ここまで見た
  • 898
  •  
  • 2014/05/11(日) 14:18:48.58
㐂驒沪𡈽圡玊琢簞箪簟單俱倶傎叱𠮟
咕吒哎噓嘘墟吞呑櫛樿撣
味噌
葛飾区
祇園
進歩

湮滅
恰好
義捐金
眩惑
激昂
幻惑
渾然
駿足
醇朴
饒舌
食事療法
食餌療法
擡頭
醜名

ここまで見た
  • 899
  •  
  • 2014/05/11(日) 14:22:59.36
>>876
外部ツールのgrepが特定の文字コードに対応してなかっただけだろ?

ここまで見た
  • 900
  •  
  • 2014/05/11(日) 14:24:59.03
人名にある漢字
𨌴 U+28334(D860 DF34)
𡍎 U+2134E(D844 DF4E)
𩂗 U+29097(D864 DC97)
𡌛 U+2131B(D844 DF1B)
海  U+FA45
わかりやすい一表式誤字俗字・正字一覧
戸籍の氏又は名の記載・記録に用いる文字
戸籍実務研究会 編 日本加除出版
shift-jisではなくUnicodeで記述してくれ。

むずかしくないぞ!!誤字俗字・正字
小林勝彦 著 日本加除出版
子の名に使える漢字字典
改定常用漢字表対応
戸籍実務研究会 編 日本加除出版
人名用漢字の変遷
子の名に使える漢字の全履歴
日本加除出版株式会社編集部 編
日本加除出版

CJKV日中韓越情報処理 オライリー
新しい国語表記ハンドブック 三省堂
校正必携 日本エディタースクール
記者ハンドブック 共同通信
日本人の知らない日本語

ここまで見た
  • 901
  •  
  • 2014/05/11(日) 15:03:04.80
外字管理と文字同定
合理的な外字作成のために
長村玄 著 日本加除出版

参考
http://blog.livedoor.jp/blackwingcat/archives/983407.html
http://blog.livedoor.jp/blackwingcat/archives/775319.html

🎴
サロゲートペア
1F3B4 花札の坊主
1F3B6
1F4A9
1F4B4
1F5FE
1F5FC

ここまで見た
  • 902
  •  
  • 2014/05/11(日) 16:31:11.95
結局、どれがええんじゃ?

ここまで見た
  • 903
  •  
  • 2014/05/11(日) 16:59:11.70
>>898
邦題『湮滅 』の仏語原文はeのリポグラムで書かれているそうで、
翻訳の方も「い段」の仮名がなかったりのこだわり本。
どうでもいいな、スレチだし

ここまで見た
  • 904
  • 参考
  • 2014/05/11(日) 22:41:39.55
http://www.amazon.co.jp/dp/4899772939/
文字コード「超」研究 改訂第2版
深沢千尋

http://www.amazon.co.jp/dp/477414164X/
プログラマのための文字コード技術入門 (WEB+DB PRESS plus)
矢野啓介

http://www.amazon.co.jp/dp/4891006080/
UnicodeによるJIS X0213実装入門―情報システムの新たな日本語処理環境
(マイクロソフト公式解説書―マイクロソフトITプロフェッショナルシリーズ)
田丸健三郎

http://www.amazon.co.jp/dp/4822294838/
Unicode IVS/IVD入門
田丸健三郎 小林龍生

http://www.amazon.co.jp/Unicode/dp/4798100307/
Unicode標準入門  発売日 2001/05
トニーグラハム

ここまで見た
  • 905
  •  
  • 2014/05/12(月) 01:09:45.43
Unicode IVS/IVD入門は誤植とツッコミどころ満載(著者のせいというよりは編集が仕事してない)なので、
togetterだかにまとめられてるツッコミを確認しながら読むべし。

ここまで見た
  • 906
  •  
  • 2014/05/12(月) 11:07:44.74
互換漢字の表が正規化で全部統合漢字に化けていたのはひどかった

ここまで見た
  • 907
  •  
  • 2014/05/12(月) 15:46:50.90
>>897
はあ?

ここまで見た
  • 908
  •  
  • 2014/05/12(月) 15:57:25.31
犭𪜪2A72A𪜸2A738𪜽2A73D𪝆2A746𪝟2A75F𪝘2A758

ここまで見た
  • 909
  •  
  • 2014/05/12(月) 21:42:02.38
>>885
最初無くて(「オ」で代用してたのかな?)後から追加されたという説がある。

ここまで見た
  • 910
  •  
  • 2014/05/13(火) 13:59:51.38
>>906
そりゃ回収すべきだなあ。

つーか著者も中で正規化についてふれてるはずだから、
予め事故が起きないように原稿データを作成する
もしくはゲラで気にして眺めるのが当然。

それができていない、ということは、Excelの入門書とかにありがちな
入門者の「ための」本じゃなく、入門者が「書いた」本の類か。

ここまで見た
  • 911
  •  
  • 2014/05/13(火) 15:44:02.57
いや、著者はどっちもそれなりな人。経緯はまとめがあるのでそっちを読んでくれ。

ここまで見た
  • 912
  •  
  • 2014/05/13(火) 19:28:52.12
>>909
そんな説があったのか
記号消したのかな

ここまで見た
  • 913
  •  
  • 2014/05/13(火) 19:39:30.11
主に携帯電話絵文字が割り当てられた、UNICODE u1f330〜u1f36f, u1f400〜u1f41f
をtwitter, mixi, Facebookで表示させてみた。
mixiのWeb serverは前から独自の絵文字表示機能があるが、元からある絵文
字から、その文字コードに対応する絵文字を拾いだしてを画像データ
(恐らくGIF)で表示しているみたい。。
twitterのPC(Windows7)のブラウザによる表示でも同様。

Nexus7でのブラウザ表示、smart phoneでのtwitterでは、Web serverの
絵文字表示機能に対応しておらず、文字コードに対応する絵文字をフォント
で表示させようとしているみたい。
表示させる文字コードに対応する絵文字のフォントデータがその端末にない
場合は表示されない。

ここまで見た
  • 914
  •  
  • 2014/05/13(火) 19:47:48.70
UNICODE表示
u1f330〜u1f36f
🌰🌱🌲🌳🌴🌵■🌷🌸🌹🌺🌻🌼🌽🌾🌿
🍀🍁🍂🍃🍄🍅🍆🍇🍈🍉🍊🍋🍌🍍🍎🍏
🍐🍑🍒🍓🍔🍕🍖🍗🍘🍙🍚🍛🍜🍝🍞🍟
🍠🍡🍢🍣🍤🍥🍦🍧🍨🍩🍪🍫🍬🍭🍮🍯

u1f400〜u1f41f
🐀🐁🐂🐃🐄🐅🐆🐇🐈🐉🐊🐋🐌🐍🐎🐏
🐐🐑🐒🐓🐔🐕🐖🐗🐘🐙🐚🐛🐜🐝🐞🐟

ここまで見た
  • 915
  •  
  • 2014/05/13(火) 20:17:04.28
そもそもサロゲートペアに対応しているかという話も。

ここまで見た
  • 916
  •  
  • 2014/05/14(水) 10:23:36.86
>>913
ブラウザは何?
サーバ側で画像に差し替えてるのは、
UserAgent見て切り替えたりしてんじゃないの?

>>913
> Web serverの 絵文字表示機能に対応しておらず、

そうじゃなくてサーバ側で表示できるブラウザと勘違いしてるんでしょ。
UserAgentがそれっぽいから。

ここまで見た
  • 917
  •  
  • 2014/05/14(水) 12:07:15.19
JIS2004対応MSゴシック MS明朝フォントパッケージ
Office製品のJIS X 0213:2004への対応状況
go.microsoft.com/fwlink/?LinkID=76814 go.microsoft.com/?LinkID=6179681
JIS X 0213:2004 Unicode 実装ガイド Microsoft
http://www.microsoft.com/china/windows2000/downloads/18030.mspx


http://blog.livedoor.jp/blackwingcat/archives/983407.html
ISO 10646:2003 + 修正 1 繁体字中国語サポート (HKSCS 2004)
Windows XP および Windows Server 2003 用の Windows XP フォント パックhttp://support.microsoft.com/kb/977801/ja
Traditional Chinese ClearType fonts for Windows XP - 繁體中文
http://www.microsoft.com/zh-tw/download/details.aspx?id=12072
Simplified Chinese ClearType fonts for Windows XP
http://www.microsoft.com/en-us/download/details.aspx?id=14577
Korean ClearType fonts for Windows XP
http://www.microsoft.com/en-us/download/details.aspx?id=10490

汎用電子情報交換環境整備プログラム文字対応作業委員会資料
平成19年度経済産業省委託
汎用電子情報交換環境整備プログラム文字対応作業委員会資料(「地名外字」資料)
2008 年3 月発行、独立行政法人国立国語研究所
平成19年度 汎用電子情報交換環境整備プログラム文字対応作業委員会資料 地名外字 資料
http://www.ninjal.ac.jp/archives/hanyo/
http://www.ninjal.ac.jp/archives/hanyo/chimeigaiji.pdf
http://www.ninjal.ac.jp/archives/hanyo/jisyohikeisaiji.pdf

http://kanji-database.sourceforge.net/dict/daikanwa/index.html
http://hp.vector.co.jp/authors/VA000964/html/daikanwa.htm
http://webcat.nacsis.ac.jp/cgi-bin/shsproc?id=BN13621753

ここまで見た
  • 918
  •  
  • 2014/05/14(水) 13:26:00.05
これはいったい何の話?

ここまで見た
  • 919
  •  
  • 2014/05/14(水) 20:54:01.03
あまぞんのれびゅーって面白いよね。
専門書の場合、みんなちゃんと根拠を出して
貶しているのに必ず一人だけ闇雲に
マンセーする人がいる。
やっぱ、工作員かな。

ここまで見た
  • 920
  •  
  • 2014/05/14(水) 20:57:31.09
漢字データベースはデータファイルへのリンク切れを直してほしいぞ
( /kawabata/kanji-data-base-* → /cjkvi/cjkvi-* )

ここまで見た
  • 921
  •  
  • 2014/05/14(水) 21:02:55.66
> http://webcat.nacsis.ac.jp/cgi-bin/shsproc?id=BN13621753

ていうか貼る前に飛べるかどうか確認くらいしろ
botかよ

ここまで見た
  • 922
  •  
  • 2014/05/14(水) 21:26:48.11
http://ci.nii.ac.jp/ncid/BN13621753
これなのかな?

ここまで見た
  • 923
  •  
  • 2014/05/14(水) 22:29:58.06
サイニーってなんか名前がえろいよね

ここまで見た
  • 924
  •  
  • 2014/05/15(木) 00:27:38.91
>>919 一人で言ってろw

ここまで見た
  • 925
  •  
  • 2014/05/15(木) 01:21:02.79
Excel から Cのdllに文字列を渡すとき、VBAからは
ByVal as String を渡して C側で LPCSTR で受け取るのがパターンだけど、
ワークシートから直接呼ぶ場合はC側は BSTR等 で受けなきゃいけない。
そこで C側は BSTR に統一しておいて、VBAからは
StrConv( xxx, vbUnicode) をかましてやればいいことが分かった。

ところが、StrConv("まみむめも", vbUnicode) を渡したら化ける。
ひらがなだと"め"以降が、かたかなだと"ム"以降がダメなようだ。

ここまで見た
  • 926
  •  
  • 2014/05/15(木) 23:22:03.55
http://ci.nii.ac.jp/ncid/BN13621753
大漢和辞典
諸橋轍次著
藍燈文化事業股份有限公司, 1992.6
修訂版 / 鎌田正, 米山寅太郎修訂

出版地:台北

大学図書館所蔵 2件
実践女子大学 図書館
函館大谷短期大学 図書館

ここまで見た
  • 927
  •  
  • 2014/05/17(土) 00:34:57.36
毦?厽厸叕忑忐忐臋膐臡娚妕嫏釱?腥觕槀晟猋

ここまで見た
  • 928
  •  
  • 2014/05/17(土) 07:02:20.43
Moji_Johoコレクション登録キター
http://unicode-inc.blogspot.jp/2014/05/new-version-of-unicode-ideographic.html

ここまで見た
  • 929
  •  
  • 2014/05/23(金) 20:30:12.89
>>899
なんで10日もたってから反応してくれたのか知らないけど一応返事しとくよ。
確かに grep はシフトJIS に対応してなかったけど問題はそこではない。

ここまで見た
  • 930
  •  
  • 2014/05/23(金) 22:20:35.88
じゃあ違う所に問題があるってことになるんだが、
それを書かないのはなんで?

ここまで見た
  • 931
  •  
  • 2014/05/25(日) 17:43:33.84
シフトJIS のせいだと理解してくれた人もいるのだから充分だと思う。
それ以上書かなかったのは
「自分のブログでやれ!」
というような内容だから。
20年以上も前の極めて個人的な事情を本当に知りたい?

ここまで見た
  • 932
  •  
  • 2014/05/25(日) 19:07:02.17
A「シフトJISじゃなくツールの問題」
B「いえ問題はそこじゃない」
A「じゃどこだよ」
B「シフトJISの問題だけど詳細は言えませぬ」

なんかオボカタを彷彿させられたわ

ここまで見た
  • 933
  •  
  • 2014/05/25(日) 23:53:20.28
>>869-877を読む限りgrepがウンコだったとしか読めないのだが
マイクロソフトが嫌いな人はなんでもマイクロソフトのせいにしたがるんだろうな

ここまで見た
  • 934
  •  
  • 2014/05/26(月) 01:01:24.96
シフトJISって書くのはShift_JISと区別する意図があるという理解でよろしいか

ここまで見た
  • 935
  •  
  • 2014/05/26(月) 01:05:37.47
シフと辞す

ここまで見た
  • 936
  •  
  • 2014/05/26(月) 04:46:50.66
>>931
氏ね

ここまで見た
  • 937
  •  
  • 2014/05/26(月) 06:15:33.67
>>931
小出しにしないで、何がどうしてどうなったのかを1スレで書けるなら書いてもいいよ。

ここまで見た
  • 938
  •  
  • 2014/05/26(月) 07:02:01.76
>>934
そらそうだろ
Shift_JISなんて使ってる人は見たことがない

ここまで見た
  • 939
  •  
  • 2014/05/26(月) 09:00:03.21
>>931
実に興味深いので、ぜひともうかがいたい

ここまで見た
  • 940
  •  
  • 2014/05/26(月) 09:29:56.46
シフトJIS
Shift_JIS
S-JIS
MS932
他もあったと思うが何がちがうん?

ここまで見た
  • 941
  •  
  • 2014/05/26(月) 11:51:57.08
あだ名が違うだけなんよ

お絵かきランド
フリックラーニング
ここまで見た

★お気に入り追加

このページを共有する
facebook twitter hatena line google mixi email
おすすめワード