MultiModalPredictor

公開日：2022年8月19日 最終更新日：2022年9月14日 はじめに Pythonスクリプト 結果 その他の学習済みモデル 環境構築 補足 はじめに「MMDetection」は「Detection」という名前の通り物体検出モデルを使うためのツールです。さまざまな学習済みモデルが公開されています。以前「MMDetection」の推論を行う記事を書きました。 touch-sp.hatenablog.com 今回は「AutoGluon」から「MMDetection」を使用する方法を紹介します。 今のところはまだ推論しかできないようです。Pythonスクリプトモデルを指定しない場合は「yolov3…

公開日：2022年7月22日 最終更新日：2022年9月11日 はじめに CLIPについて 方法の概略 データの準備 Pythonスクリプト 画像のベクトル化 version ≦0.5.2 version >0.5.2 テキストのベクトル化と類似度の計算 version ≦0.5.2 version >0.5.2 結果 動作環境 さいごに MultiModalPredictor関連記事 はじめに複数の画像から指定した文字列にマッチする画像を抽出します。OpenAIのCLIP（Contrastive Language-Image Pre-Training）を使うと簡単にできます。そしてそのCLI…

公開日：2022年7月14日 最終更新日：2023年6月21日 はじめに Pythonスクリプト 結果 動作環境 MultiModalPredictor関連記事 はじめにCLIP（Contrastive Language-Image Pre-Training）は自然言語処理の技術を用いて画像とテキストの組み合わせを学習したモデルです。 「ゼロショット画像分類（Zero-Shot Image Classification）」にも使用可能です。 AutoGluonで、「ゼロショット画像分類（Zero-Shot Image Classification）」が簡単に実行できるようになっています。Pyt…

公開日：2022年3月14日 最終更新日：2022年9月14日 はじめに データの準備 学習 Pythonスクリプト 出力 テストデータを用いた検証 Pythonスクリプト 出力 推論 画像 Pythonスクリプト 出力 結果 さいごに 環境 MultiModalPredictor関連記事 はじめに犬と猫の画像分類は何度もやってきました。 touch-sp.hatenablog.com touch-sp.hatenablog.com 今回はMultiModalPredictorを使って挑戦したいと思います。データの準備こちらとおなじ方法でデータを準備しました。 このようなPandasデータフレ…

公開日：2021年1月26日 最終更新日：2022年9月13日 AutoGluonは画像分類にMultiModalPredictorを推奨しています。 ImagePredictorからMultiModalPredictorに変更して記事を書き換えました。はじめに人が絶対に間違えないような簡単な画像分類で深層学習は100%の精度が出せるのか試してみました。今回使用したデータminiJSRT_database | 日本放射線技術学会 画像部会から「Classification > Directions01(128×128,RGB Color:24bit)」をダウンロードさせて頂きました。 胸部X線…