Hatena Blog Tags
はてなブログ トップ
大規模言語モデル入門
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

大規模言語モデル入門

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
テヘラニのアウトプット•1年前

【大規模言語モデル】LLMの基本をわかりやすく解説！初心者向け！

Illustration by OlFi from Ouch! LLMって何？初心者でもわかる大規模言語モデルの基本 最近、「LLM」という言葉を耳にする機会が増えていますよね。でも、「LLMって何？」と思っている方も多いのではないでしょうか。 この記事では、初心者の方でもわかるように、LLM（大規模言語モデル）について詳しく解説します。基本的な仕組みから実用例、メリット・デメリットまで、わかりやすく説明しますので、ぜひ最後までお読みください！ LLMって何？初心者でもわかる大規模言語モデルの基本 LLMって何？基本を解説 LLMが注目される理由 LLMの実用例 LLMのメリットとデメリット …

#生成AI#大規模言語モデル#LLM#大規模言語モデル入門#大規模言語モデルは新たな知能か

関連ブログ

nikkie-ftnextの日記•1年前

LLMのtemperatureをさがして（この1年で見聞きした情報まとめ）

はじめに #ミリアニムビナナ異文化交流 ほんと最高😭 nikkieです。 LLM文脈で登場するtemperature（温度）なるものに関して、知っていることを書き出します。 読んで誤りに気づかれた場合は、@ftnextまでお知らせいただけると助かります。 目次 はじめに 目次 OpenAIのドキュメントより ドキュメント「Text generation models」 Chat Completions APIのリファレンス 再び「Text generation models」、FAQより 『大規模言語モデル入門』より 松尾研LLM講座より 第1回：Overview of Language Mo…

#LLM#OpenAI#大規模言語モデル#temperature#デコード#大規模言語モデル入門#松尾研LLM講座#Andrew Ng
nikkie-ftnextの日記•2年前

素振りの記：BERT-CRFで固有表現認識したい！『大規模言語モデル入門』6章でクイックツアー

はじめに 無敵級ビリーバー3周年👑👑👑 nikkieです。 「お休みの日にしかできないことを」と追求した結果、最近のお休みは開発合宿感があります。 今回は気になっていた技術、BERT-CRFを触りました。 目次 はじめに 目次 ずっと引っかかっていたBERT-CRF 『大規模言語モデル入門』6章「固有表現認識」 BERT-CRFクイックツアーの感想 書籍への感想 サンプルコードへの感想 終わりに ずっと引っかかっていたBERT-CRF BERT-CRFという技術は固有表現認識でなかなかよいと聞いていました1。 ただずっと「具体的にどう実装すればいいの？」というところがよく分かりませんでした。 …

#固有表現認識#固有表現抽出#BERT#CRF#BERT-CRF#大規模言語モデル#大規模言語モデル入門
nikkie-ftnextの日記•1年前

『大規模言語モデル入門』8章で文埋め込みの理解を更新。単語埋め込みの平均じゃないんですね！

はじめに 色打掛は花嫁衣装、nikkieです 文埋め込み（文のベクトル）について、理解を更新したメモです 文埋め込み同士の距離は意味の類似度を表す （理解 NEW!!）文埋め込みは特徴量として使える （理解 NEW!!）文埋め込みは、単語埋め込みの平均ではない 目次 はじめに 目次 文埋め込みの嬉しい点（2点） 単語のベクトルの平均だと誤解していた 今後：どう作られるかを知りたい 文埋め込みの嬉しい点（2点） 紐解いたのは『大規模言語モデル入門』。 第8章が、ズバリ「文埋め込み」です。 文の意味を表現するベクトル（数字の並び）が文埋め込みです。 文埋め込みの嬉しい点（書籍だと目的）は、ベクトル…

#文埋め込み#文ベクトル#embeddings#大規模言語モデル入門
nikkie-ftnextの日記•1年前

「ITエンジニア本大賞 2024」で投票したおすすめ本は『ちょうぜつソフトウェア設計入門』『評価指標入門』『プロダクトマネージャーのしごと 第2版』『ロバストPython』『Python Distilled』『大規模言語モデル入門』です #itbookaward

はじめに みんなおすすめ本持ってていいなア！！じゃあ、本バトルしようぜ！本バトル！！ 自称 Python界の七尾百合子、nikkieです。 今年も年の瀬の本バトルのお時間です（投票は12/10で締切）。 2023年のおすすめ本を語っていきます！ 「ITエンジニア本大賞 2024」で投票したおすすめの本は6冊です（近日中にブログ書きます） #itbookaward https://t.co/h7WFDWt8VV 今日12/10までらしいので投票忘れなくー— nikkie / にっきー (@ftnext) 2023年12月10日 目次 はじめに 目次 前提：現時点で通読しているわけじゃないよ 『ち…

#ITエンジニア本大賞#おすすめ#ちょうぜつ本#評価指標入門#プロダクトマネージャーのしごと#ロバストPython#Python Distilled#大規模言語モデル入門
nikkie-ftnextの日記•1年前

『大規模言語モデル入門』で要約タスクの評価指標の1つ BERTScore を知り、算出例と仕組みの理解で手を動かしました

はじめに 評価指標、ばーっといってみよー！ nikkieです。 自然言語処理の要約タスクの評価指標に興味を持ち、『大規模言語モデル入門』を参照しました。 要約なので、テキストが生成されるわけです。 これを正解のテキストと比較するわけですが、テキスト同士の定量評価をどうやるのか知りたいと思ったんですね。 目次 はじめに 目次 『大規模言語モデル入門』 7.3 要約タスクの評価指標 BERTScore（7.3.3） 環境構築 『大規模言語モデル入門』に沿ってBERTScore算出 bert-scoreコマンドで算出もできる BERTScore算出の仕組み 論文「BERTScore: Evaluat…

#要約#大規模言語モデル入門#評価指標#BERTScore#BERT