Movatterモバイル変換

[0]ホーム

サクサク読めて、
アプリ限定の機能も多数！

アプリで開く

はてなブックマーク

閉じる

テクノロジー
Unicodeを斬りたい

気に入った記事をブックマーク

気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
記事を読んだ感想やメモを書き残せます
非公開でブックマークすることもできます

Unicodeを斬りたい

テクノロジーカテゴリーの変更を依頼記事元:

techblog.yahoo.co.jp

適切な情報に変更

エントリーの編集

エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。

このページのオーナーなので以下のアクションを実行できます

タイトル、本文などの情報を
再取得することができます

コメントを非表示にできますコメント表示の設定

ブックマークしました

ここにツイート内容が記載されますhttps://b.hatena.ne.jp/URLはspanで囲んでください

Twitterで共有

次回からTwitterへ自動リダイレクト

ONにすると、次回以降このダイアログを飛ばしてTwitterに遷移します

275usersがブックマークコメント

コメントするにはログインが必要ですブックマークを追加

ブックマークを追加

よく使うタグ

Unicodeを斬りたい

275 users

techblog.yahoo.co.jp

よく使うタグ

はてなブックマークで
関心をシェアしよう

みんなの興味と感想が集まることで
新しい発見や、深堀りがもっと楽しく

ユーザー登録

アカウントをお持ちの方はログインページへ

記事へのコメント24件

注目コメント
新着コメント

mandel59まずこの記事を斬るべきだろう

2014/04/16リンク

その他

deep_one後ろの方が相当おかしい。UTF-8で「文字コードが何種類もできてしまう」ことがあるのは「合字」とかの例であって、取りあげているのは「一文字あたりのバイト長が一定にならない」という問題の方。全く斬れてない。

2014/04/16リンク

その他

ockeghemあのー、些末な指摘で恐縮ですが、 char *bufp = original; while (bufp < original) { だと、ループには入らないのでは?

2014/04/17リンク

その他

houyhnhmナマクラな感じ。

#|ω・)……

2014/04/16リンク

その他

t-tanaka浅い。これだと「が」が「か゛」の二文字になったりするぞ。NFC/NFDとかIVSとかって知ってます？

文字コード

2014/04/16リンク

その他

kokorohamoeUTF8にはサロゲートペアはありませんが異字体セレクタがあるので最大８バイト　http://revilog.com/2014/04/10896.html

2014/04/16リンク

その他

naga_sawa UTF-8はエンディアンの影響なしでは？/『byte順の影響がない』と言っているのに『どの2つのbyteを見てもビッグエンディアンなのか、リトルエンディアンなのかの順番の区別をつけることができます』って矛盾

2014/04/16リンク

その他

wasaiはてブのコメントを見てさらに勉強する

2014/04/17リンク

その他

totttte“つまりUnicodeがUTF-8よりも上位の概念にあたるわけです。言ってみれば仕様と実装といったところでしょうか。”

2016/09/19リンク

その他

kasumaniUnicodeを斬りたいこんにちは。 Yahoo! JAPANで通知プラットフォームの開発をおこなっています佐々木海（@Lewuathe）と申します。普段は全社向けのPush通知プラットフォームやメール配信プラットフォームの開発、保守をしてい

2014/04/20リンク

その他

UDONCHAN有用情報

2014/04/17リンク

その他

takc923斬るってそういう意味かよ！

2014/04/17リンク

その他

hidex7777はてブ参照

2014/04/17リンク

その他

kat0usiUTF8の文字境界を知りたければ0で始まっているか、1が2つ以上連続しているかをbyte毎に見てあげればいい

unicode

2014/04/17リンク

その他

shodai雑学

2014/04/17リンク

その他

wasaiはてブのコメントを見てさらに勉強する

2014/04/17リンク

その他

enkunkunあんまり納得できなかった

2014/04/17リンク

その他

tengo1985黙って「プログラマのための文字コード技術入門」を読めばいい

2014/04/17リンク

その他

ockeghemあのー、些末な指摘で恐縮ですが、 char *bufp = original; while (bufp < original) { だと、ループには入らないのでは?

2014/04/17リンク

その他

ryonextわかりやすい記事でした

2014/04/17リンク

その他

bayareadこういう記事、いつも読んだ後「へぇ〜」ってなってからブコメを見てはてなの兄貴達の知識に脱帽する

2014/04/16リンク

その他

habarhaba斬ってるようには見えないんですが

2014/04/16リンク

その他

yrkhnshk確かにUnicodeとUncodeは似ている

2014/04/16リンク

その他

rryu合成文字必須のチベット文字に比べれば、ひとつの文字が複数のUnicodeスカラ値から構成されることを忘れられる日本語はまだ簡単な方だと思う。

文字コード

2014/04/16リンク

その他

geraradYahooは会社としてこんなクソみたいな記事を公開してどうしたいんだ？

2014/04/16リンク

その他

y-kawazあぁ、切るってそういうことか。そして浅い。

2014/04/16リンク

その他

houyhnhmナマクラな感じ。

#|ω・)……

2014/04/16リンク

その他

t-tanaka浅い。これだと「が」が「か゛」の二文字になったりするぞ。NFC/NFDとかIVSとかって知ってます？

文字コード

2014/04/16リンク

その他

mandel59まずこの記事を斬るべきだろう

2014/04/16リンク

その他

2014/04/16リンク

その他

2014/04/16リンク

その他

kokorohamoeUTF8にはサロゲートペアはありませんが異字体セレクタがあるので最大８バイト　http://revilog.com/2014/04/10896.html

2014/04/16リンク

その他

コメントするにはログインが必要ですログインしてコメント

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

リンクを埋め込む

以下のコードをコピーしてサイトに埋め込むことができます

プレビュー

はてなブックマークボタンを作成して埋め込むこともできます

規約違反を報告

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

usersに達しました！

さんが1番目にブックマークした記事「Unicodeを斬りたい」が注目されています。

気持ちをシェアしよう

ツイートする

Unicodeを斬りたい

※2014/4/17　記事の内容に関していくつか訂正させていただきました。ご指摘いただいた皆様ありがとうご...※2014/4/17　記事の内容に関していくつか訂正させていただきました。ご指摘いただいた皆様ありがとうございました。誤字脱字を修正しました。ソースコードの間違いを修正しました。 BOMの記述を分かりやすい表現に修正しました。合字に関する記載を追記いたしました。こんにちは。Yahoo! JAPANで通知プラットフォームの開発をおこなっています佐々木海（@Lewuathe）と申します。普段は全社向けのPush通知プラットフォームやメール配信プラットフォームの開発、保守をしています。通知というのはPush通知にしろ、メール配信にしろ基本的には「テキストデータ」を送ることになります。プラットフォーム内ではこれらのテキストに対してさまざまな処理をかけることになるのですが、さすが日本語といったところでしょうか、一筋縄ではいかない部分が出てきました。具体的にはUTF-8でエンコーディング