openai-python

はじめに スケルツォ見てスッキリ。nikkieです。 OpenAIから2024年1月のアップデートが来ましたね。 その中の目玉と思われるembedding新モデルのAPIで少しだけ手を動かしました 目次 はじめに 目次 OpenAI embedding新モデルのAPI APIでembeddingを得て、テキストの類似度計算 英語の例（text-embedding-3-small） 日本語の例（text-embedding-3-small） text-embedding-3-large（日本語） text-embedding-3-large（日本語）でdimensionsを指定する 積ん読資料た…

本記事は 虎の穴ラボ Advent Calendar 2023 21日目の記事です。 前回はデザインTさんによる「虎の穴ラボのロゴとサイトをリニューアルしたよ！」でした。 次回はT.Hさんによる「【VOICEVOX × RVC】ずんだもんに自分の声で喋ってもらった 」です。ご期待ください！ はじめに こんにちは！虎の穴ラボのnagaです。 今回は、Advent Calendar 7日目にH.Hさんが投稿した「Whisperを使用した音声ファイルの文字起こしの検証をしてみた」に関連して、Whisper Micというライブラリをご紹介します。 活用例として、ライブ配信者のリスナーをOpenAIに演…

はじめに 「でも、私は天海春香だから。」 nikkieです。 かつてLangChainを使って、ChatGPTと劇場版『THE IDOLM@STER MOVIE 輝きの向こう側へ！』についておしゃべりしました。 OpenAI DevDayによってリリースされたものたちでも同じことができるか素振りしました。 目次 はじめに 目次 MyGPTsでムビマスおしゃべりGPTを作る Configuration設定値 ムビマスおしゃべりGPTをAssistants APIでも作る 動作環境 スクリプト MyGPTsとAssistants APIでムビマスおしゃべりを試した感想 終わりに P.S. MyGP…

はじめに 未来は意外と近くにある。nikkieです。 OpenAI DevDay キーノートの高揚が続いています。 今回はDevDayで発表&リリースされた新概念「Assistants API」についての素振りの模様です。 目次 はじめに 目次 Assistants APIのOverview 動作環境 1. Assistant作成 2. Thread作成 3. ThreadにMessages追加 4. Run（実行して、応答を得る） Runを作って実行をAPI側に投げておく Runの完了を確認する 応答を取得 Runで実行された各ステップを確認できる！ まとめ：Assistants API 終…

本記事では、OpenAIを使用したシステム構築時に遭遇しやすい問題を解説しています。具体的には、消費トークンの計算方法、AIが生成した文章が途中で途切れたときの対策、そしてタイムアウト時間の設定について詳細に説明します。 これらのテクニカルな問題を解決することで、より効果的にOpenAIを活用することが可能になります。 概要 消費トークン数の計算 リクエスト前に消費トークンを計算する リクエスト後の消費トークンを表示する openai LangChain AI生成文章が途切れた時の対処法 文章が途切れたことを検知する 途切れた文章の続きを生成する タイムアウト時間の設定 openai Lang…

はじめに たくさん、どうぞ！1 nikkieです。 毎日夏！って感じですが、今日も元気にOpenAIのAPIを叩いていきたいと思います！ 今回はたくさん送るので、並行処理を模索しました。 現時点での考えのバックアップ目的のエントリです。 目次 はじめに 目次 データセット数千件をChatGPTに固有表現認識させたい ライブラリopenaiをイベントループで利用する コード例（コメント歓迎） 終わりに データセット数千件をChatGPTに固有表現認識させたい 今回の状況の共有です。 論文「Is Information Extraction Solved by ChatGPT?」に興味を持ちました…

はじめに サンシャIN！（朝までラーニング見てます） nikkieです。 ここ最近、OpenAIのAPIでstream呼び出しをしましたが、その中で気になった小さな疑問に取り組んでいきます。 目次 はじめに 目次 OpenAIのChat completions APIをstream呼び出し 結論：SSEDecoderで除かれる 最初の手がかり：テストケース 調査スクリプト stream._iter_events() 落穂拾い 終わりに OpenAIのChat completions APIをstream呼び出し openaiライブラリのクライアントは（同期処理も並行処理も）stream呼び出し…