現在の大規模言語モデルの課題 現在の大規模言語モデル(LLM)は、あたかも人間のようにユーザーの質問に答えたり指示に従うように見えますが、その背後で「考える」という基本的なプロセスが欠けています。人間が難しい質問に対して深く考えた後に答えるのに対し、現在のLLMは質問の複雑さに関わらず、即座に答えを出してしまいます。これでは、特に複雑な問題や多面的な視点が必要なタスクにおいて、十分な回答が得られないという課題があります。 arxiv.org 新しいアプローチ:「考える」能力を持つLLM この研究が提案しているのは、LLMに「考える」能力を持たせる新たな訓練手法「Thought Preferen…