Azure Cognitive Search

企業が自社のデータベースに蓄積した固有情報を検索する場合、そのままChatGPTに質問を投げても回答を得ることはできません。これはモデル自体が固有の情報を知らないため、うまく回答を返すことができないという課題があるためです。 現在これを解決するため、各社でプラグインの開発などが行われている状況です。 本記事では蓄積されたFAQ情報を用いて、チャット形式で情報を引き出すような仕組みを構築します。 概要 実装方法 アーキテクチャ 実装方法の概要 前準備 ナレッジ検索ChatGPT デモ 使用するデータセット 過去の生成結果（ChatGPT、Fine Tuningモデル） 処理手順 入力する文章 前…

以前、Azure OpenAIのtext-davinci003を利用し、FAQチャットボットのようなシステムを作れないか試したことがあります。 現在はAzure OpenAIからChatGPT APIが公開されたので、再検証してみた結果をお伝えします。 構築方法 検証結果 ソースコードの作成手順 まとめ 構築方法 前回と同様、構築方法は下記のブログに記載されています。 blog.jbs.co.jp 下記条件を満たすソースコードを、GPT-4で作成します。 ユーザーが質問文を入力 Azure OpenAI APIで、質問文からキーフレーズ抽出 Azure OpenAI APIで、キーフレーズの同…

はじめに 構築方法 検証 質問文からキーフレーズを抽出 キーフレーズの同義語を生成 キーフレーズと同義語を使用して検索 ユーザーの質問に対する回答を分析 まとめ はじめに Azure Cognitive Searchを利用することで、データの検索や分析が簡単に行えます。 さらに、Azure OpenAIのAPIと連携すると、より高度な自然言語処理が実現できます。 Azure OpenAIのAPIとAzure Cognitive Searchを連携して、FAQチャットボットのようにユーザーの質問に回答するシステムを構築できるか試してみました。 構築方法 以下の方法を順番に実行すれば、ユーザーが入…

こんにちは。techtekt編集部です。 事業および社会課題を整理し、テクノロジーでサービスの付加価値を高めるプロ集団であるデジタルテクノロジー統括部では、さまざまな開発やソリューションを通じて、数多くの成果を上げてきました。 そのデジタルテクノロジー統括部でシニアエンジニアを務める柿田が、弊社コンプライアンス部門の課題を解決するために提案・開発したのは、Azure Cognitive Search を活用した、AI による情報検索システムです。 今回は、Azure Light-upという超短期間で一気にモックアップまで作成するハッカソンを行い、マイクロソフト様のパートナー企業である株式会社オ…