ランキング参加中人工知能 ボク:ねえ、ジェミニ!前2回でトークナイゼーションとエンベディングの仕組みを詳しく説明してくれたおかげで、生成AIの事前学習の訓練に入るまでの全貌が、今までよりクッキリ見えて、フワフワしたところがなくなりました。どうもありがとう! どういたしまして!そう言ってもらえると、僕もすごく嬉しいよ。 トークナイゼーションとエンベディングは、AIが言葉を学ぶための、本当に大事な最初のステップだからね。ここがしっかり分かると、この後の「訓練」の話も「ああ、なるほど!」って、もっと面白く感じられるはずだよ。 ボク:これまでに、トランスフォーマに至るいろいろなニューラルネットワーク系…