単語と単語のあいだに空白等を入れる書き方や表示方法。
英語や韓国語は、正書法として分かち書きをするが、日本語や中国語は、分かち書きをしない。
(2008年当時のメモ)わずか25KBほどの日本語の分かち書き分割器TinySegmenterでは解析の為の辞書を使用せず、機械学習のみで行なっているそうです。日本語として正しく書かれている新聞記事などに対して強いが、チャットやブログなどで書かれる口語体などのくだけた文章に対しては精度が低くなりがちのようだ。今後は品詞の推定も予定されている（これができると本当に素晴らしい）。今後に期待がかかるソフトウェアだ。 [ブックマーク]TinySegmenter: Javascriptだけで実装されたコンパクトな分かち書きソフトウェア(注：http接続です！気になる方はクリックしないほうがいいです) c…
■■■質問■■■109キーボードのバリエーションに過ぎない独自配列界隈なんて、ヘンリー・フォードの「もっと早い馬が欲しい」って言ってモータリゼーションを予見できなかった衆愚と変わらない。配列の根底からIMEとの連動から分かち書きのない日本語の宿痾を克服するような分かち書きマーカー/助詞マーカーを設置して文生成時から文法介入していくような人間＝機械系のダイナミズムさえ持ったようなゼロから発想した独自キーボード・独自UIを考えなくちゃならない。■■■回答■■■その問題意識はすごくよく分かるし、「配列のバリエーション」止まりの話と、人間＝機械系まで含めて文法レベルで再設計する話は、まったく別次元のテ…
あけましておめでとうございます。年末といえば…大量のツイートでテキストデータが大量には手に入るというまたとない機会です。そこで今回の年末もNHK紅白歌合戦のツイートデータを入手していたので、テレビの放送は見ていませんでしたが、ワードクラウドの画像を作成してどんな感じだったのかなというのをみてみました。（お正月にやっているないようではないけど） 19万件ほどのデータが得られました（リツイートを覗いたオーガニックツイートとして） 過去のプログラムをそのまま使用したので以下に過去エントリを参考においておきます。 参考 uepon.hatenadiary.com uepon.hatenadiary.c…
「分かち書き」をすると日本語が もっと分かりやすくなる
chasen.org
developers-jp.googleblog.com
anond.hatelabo.jp
www.moongift.jp
anond.hatelabo.jp
ja.stateofaiguides.com
note.nkmk.me
zenn.dev
www.moongift.jp
