qdrant

このタグの解説について

この解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。

GMO MAKESHOP engineer blog•6ヶ月前

AIによる文章要約と重複チェックの開発

GMOメイクショップコアグループエンジニアの森です。最近業務効率化のためにOpenAIのAPIを利用して大量の文章データを自動整理するツールを開発をしました。この記事ではAIを使った文章要約と、過去データとの重複チェックを実装した過程について紹介したいと思います。開発の背景課題解決策ツールの概要使用した技術全体像ツールでの処理内容 APIを呼び出すメソッド要約処理処理内容プロンプト出力結果重複チェック処理内容プロンプト出力結果まとめ開発の背景課題 makeshopをご利用いただいているショップ運営者から日々様々なご意見・ご要望をカスタマーサポート（C…

#AI#OpenAI#qdrant

関連ブログ

ROUTE06 Tech Blog•1年前

3分プロトタイピング: Jupyter Notebook, Google Colabの紹介

連載「3分プロトタイピング」 Streamlitを用いたAIチャットアプリ RAGを使ってAIチャットアプリケーションに知識を与えるベクトルデータベース超入門ベクトルデータベースの登録内容を可視化してみる Jupyter Notebook, Google Colabの紹介(この記事です) AIを用いたアプリケーションを開発するためのライブラリの多くはPythonで実装されています。それらのチュートリアルには当たり前のようにJupyter NotebookやGoogle Colabというツール、サービスが出てくるのですが、これまでPythonを使っていない人には、少しハードルがあるかなと思…

#Jupyter Notebook#qdrant

ROUTE06 Tech Blog•1年前

3分プロトタイピング: ベクトルデータベースの登録内容を可視化してみる

連載「3分プロトタイピング」 Streamlitを用いたAIチャットアプリ RAGを使ってAIチャットアプリケーションに知識を与えるベクトルデータベース超入門ベクトルデータベースの登録内容を可視化してみる(この記事です) 前回の投稿では、ベクトルデータベースとベクトル検索の概要を説明し、Qdrantというベクトルデータベースを使って、文章のベクトル計算をした結果を登録して簡単なベクトル検索アプリケーションを実装しました。ベクトルデータベースに登録したデータは、384次元のベクトルデータで、人間が見ても理解することは難しいデータでしたね。 // ベクトル化前タイムマシーンはダメだった:自…

#qdrant

ROUTE06 Tech Blog•1年前

3分プロトタイピング: ベクトルデータベース超入門

連載「3分プロトタイピング」 Streamlitを用いたAIチャットアプリ RAGを使ってAIチャットアプリケーションに知識を与えるベクトルデータベース超入門(この記事です) 前回、前々回とAIアプリケーションのプロトタイプを作る時に便利な2つのフレームワーク: StreamlitとLlamaIndexを紹介しました。この記事では、本格的なAIアプリケーションを作成するときに必要になることの多い、ベクトルデータベースを紹介します。今回も説明が長くなりますが、コード部分は3分で試せることを目指しています！ベクトルデータベース、ベクトル検索とはベクトルデータベースとはどのような技術か、AW…

#qdrant#LLM

検索メモ•2年前

クラスタ構成のQdrantでsnapshotを作成/復元する

クラスタ構成のQdrantでsnapshotを復元する際のめも前提 [重要] Qdrantはクラスタ構成であること。面倒なことにQdrantは1ノードの構成なのかクラスタ構成なのかでsnapshotの復元方法が異なる。環境 github.com 手順 collection作成~point追加これを使ってamazon_reviewというcollectionを作成 HuggingFaceのデータセットからamazonのレビューを取得して5000件ほどembeddingして追加。 github.com data downloadとかembeddingに少し時間かかるので、自分で適当なcoll…

検索メモ•2年前

docker composeでqdrantのクラスタ構成を構築する

ベクトル検索エンジンのqdrantをdocker-composeを使ってクラスタ構築した際のメモ。結論 composeファイルはこんな感じ。 version: "3.9" services: qdrant_primary: image: "qdrant/qdrant:v1.4.1" ports: - "6333:6333" environment: QDRANT__CLUSTER__ENABLED: "true" command: [ "./qdrant", "--uri", "http://qdrant_primary:6335" ] qdrant_secondary: image: "q…