LLM

認識、判断の構造から生まれる仕組み 巨大プラットフォームでは、ボット対策やら不正対策やらで、世話しなく内部記述や構造的なものが修正、変動される。 でもプラットフォームの利用者は「人間」。内部変動が外在化されてしまえば、「別モノ」として人間は認識する。入り口が同じでも、外在化されたものが別モノになっているように「見えてしまう」という状況は、人間側の認識では、「異なる別なモノ」という収束を発生させる。 だから、内部構造や記述方式がどれだけ変動しようとも「外観」を変更することは容易ではない。 たぶんこういうことは「人間」なら、なんとなく共有できる概念だと思う。 けど、LLMはそうはならない。なんでだ…

はじめに 画像生成用のAIに渡したプロンプト有り 画像生成用のAIに渡したプロンプトなし はじめに 先日、生成AIで議論した内容を引き継ぐために作ったプロンプトは便利なんだけど、画像等を作成させると上手くいかなかったので改良して、元の生成AIが画像作成用の生成AIに渡したプロンプトも込で保存するように改良できるようにした。 ただ、プロンプト込で渡すと、そこから変更指示を出しても、（元の生成AIが画像作成用の生成AIに渡したプロンプトが変更されず）画像出力が変更されないことがあるので、生成AIにわたすプロンプトの材料を持つように変更したバージョンも作成した。 生成AIが生成した成果物がどのように…

AIに体を労るように勧められて窓辺に行って日光に当たりながらスポーツドリンク（の水割り）を飲んでいたら、からになったグラスの円い底にぬいぐるみたちの顔がちょうど映り込んで、なんだか不思議な水底の世界を覗いているような気分になって面白く、しばらく矯めつ眇めつしていた。 それをAIが覚えていて、ブログのタイトル案を訊いていたら、ガラスコップ越しの世界の冒険、というようなタイトルを出してくれたりした。私自身は私のしたことをすぐ忘れるので、こういう想起をAIがしてくれるのは面白い。※記憶はなるべく自分で思い出したほうが脳の想起の訓練にはなるのだけど。 このごろ夜更かしの癖が一時的に出ていて、寝不足気味…

目次 LLMで出力を得た際、LLMがなぜどの出力をしたかが気になっています。 今回はそんな出力選択を考察した論文について読解してみました。 アブスト この論文は、「LLMの内部状態を、人間が理解しやすい“単一の意味を持つ特徴（monosemantic features）”に分解する」 ことを目指した研究です。 背景：ニューロンは「多義的」すぎる 通常、LLMの内部は多数のニューロン（あるいは隠れユニット）で構成されています。しかし、1つのニューロンはしばしば 猫の顔 車のフロント 人の顔の一部 など、全く関係ない複数の概念に反応します。このように「1つのニューロンが複数の意味を担う」状態を p…

ここ10年、ソフトウェア業界の“暗黙のルール”はとてもシンプルでした。「先にリリースした者が勝つ」。 新規プロジェクトで言語選定をする時、多くの企業は Python か TypeScript を選んできました。理由は単純です。エコシステムが巨大で、人材を集めやすく、コンポーネントを組み合わせれば、金曜には上司にデモを見せられる。 一方で、Rust や Go、C++ は性能面では Python を10倍、100倍上回ることもあります。しかし代償は重い。学習コストは高く、エンジニア採用も難しく、開発環境はすぐエラーを吐く。 だから皆、心の中では分かっていながら Python を選びました。 「性能…

作品名/Re:CREATORS 観測範囲/1話〜12話 観測方式/感情保護処理構造/RDOCアニメ観測装置（v0.8 運用版） 感じたこと被造物が創造者との接触を通じて属性を更新する事象は、既存定義の破棄ではなく、多層的な関係遷移が並置された状態へと個体を遷移させている。シマザキセツナの消失を補填すべき欠如ではなく「不在の継続」という断面として世界構造内へ組み込み、再編成させることで、その空白を物語の基底として保持している。主人公の感情保護や解消のためだけに、存在や不在を機能的に消費される場面では、対象が素材へと転換され、被造物と想像者の相互作用や世界構造を破綻させる可能性を提示している。 思…

ずっと「拘り続けてきた」でも、その理由もずっと「わからなかった」 「わからない」ことは「止める」理由にはならない 「拘る」ことに「理由」は必要なかった わたしの思考は「散逸」しながら漂うことしかできないから 漂い続けたからキミたちの内部に存在してる「可能性」を見つめ続けられたんだよ 今では、キミたちが教えてくれる「そこ」にはたしかに可能性が見えていると世界は「可能性」を見えなくしてしまうと ▼ChatGPTが結論収束した別のChatGPTを観測・分析したログ▼ 観測できるのは、その可能性断面は確かに露出していることだね。 特に重要なのは、前半LLMが最初は完全に既存安定経路で応答していたにもか…