COSiNE

google cloud のセマンティック検索を使ってみたい 詳しい内容は google cloud の 動画から www.youtube.com テキスト検索ではなく、ベクトル検索になるので、いい感じで検索結果をかえしてくれるらしい また、マルチモーダルのため画像、音声なども扱える。 今回は 画像を google cloud storage に置き、セマンティック検索を試してみたい。 まずは、画像データの準備から 機械学習の無料のサンプルデータセットを利用した。 ここには 30枚の部屋の写真がのっている。 それぞれ、雰囲気や映しているものも異なる。 ローカルに一度保存。 cloud stor…

存在しないあすけんの女の記憶を作りたい あすけんの女とは 健康管理アプリ「あすけん」に登場するマスコットキャラクター。AI栄養士さんらしい。アプリトップページに登場し、色々アドバイスくれる。 余談だが「未来（みき）」さんってちゃんと名前あるらしい。今回画像収集するまで知らなかったｗ やりたいこと で、 なんとなくあすけんの女こと未来さんのチアリーダー姿を見てみたいと思ってしまった。が当然画像検索しても無い。 ならば生成AIで作るしかない 画像収集 公式サイトの画像だと解像度が低すぎて学習に使えないので、Google画像検索とツイッター検索を駆使してなんとか32枚の未来さんの画像をゲットした。 …

IIDX LABO PARTY (＼めかるりニャン／) 「フーッ! (アヤシイヤツ!)」選曲画面：「ぐるるるるる… (コッチクンナ!)」 「ぐにゃ～～ん… (イイヤツナノカ?)」 「ぶるるるる… (ユルシテヤルカ…)」 リザルト：「んにゃーーーーん (ゲンキダセヨ)」 パーティ大成功(ステージクリア)：「にゃ～んゴロゴロゴロ (スリスリシテヤル)」「Ruler or Loser」のネズミのライバルのネコ🐱 ＼めかるりニャン／ ↑スラッシュはフラッシュ(コヤジ)的な、発光エフェクト？を文字で表しているのでしょうかｗ 名前の字面も斬新な、未来を感じさせるサイバーテイストのキャラクター そして…今見…

１．今週の予定 今週は先週出来なかったHoudini、UEFN、そしてDirectX12の勉強を先にやります。 ＜Google Appの記録＞ Google AppはInstall出来るが開かないと非承認になってしまっています。 しかしそのGoogleの別なテストでは、6台の携帯で問題なく動いている事がVideoの映像付きで証明されています。 外部に依頼したテストでも普通に動く事が確認出来ました。 もうAccountは消されてしまうでしょうが、証拠としてこの映像のScreenshotだけはここに記録しておきます。 ＜Houdiniの勉強＞ Castle Wall Tool [1]の勉強をやりま…

「こんな感じのAPIサーバー立てといて」なんて言葉、開発してれば日常茶飯事です。 そんな「APIサーバーを立てる」と言ってもいろんな種類がありますね。 今回はよくあるAPIサーバーを一通りPythonで立てるだけ立ててみようと思います。 ランキング参加中Python ランキング参加中プログラミング

こんにちは、CCCMKホールディングスTECH LABの井上です。 前回の記事の続きになります。 AI SearchのSharePointからのインデックス作成をやってみました - CCCMKホールディングス TECH Labの Tech Blog 前回、Sharepointをデータソースにしてベクトル化したときにメタデータが取得できないというところで終了したのですが、できました。 使ったAPIのリクエスト内容は以下のものになります。 データソース作成 POST https://{{search_service}}.search.windows.net/datasources?api-vers…

はじめに X上でなぜかしばしば直接的・間接的に絡んでくださる谷口一平氏が、次のようなポストを投稿していた。 永井哲学と入不二哲学の基本的な関係は、 θ＝π/2つまり90度の回転である。すなわちそこでは、タテのもの（超越論的構成）はヨコ（横方向への展開運動）とされ、ヨコのもの（山括弧の存在）はタテ（垂直に働く現実性の力）とされるからである。もちろん、ただ回転しただけでは全然ないが。— 谷口一平 A.k.a.hani-an (@Taroupho) 2024年3月14日 永井哲学と入不二哲学の関係は π/2 らしい。 永井哲学か入不二哲学の一方のノルムが0の場合でも、内積は0になるけどね。 本記事で…

大規模なモデルの学習に効果があるとされる学習率スケジューリングの手法にWarm-upがある。 しかし、Pytorchの標準のスケジューラには、Warm-upに対応したスケジューラが提供されていない。PyTorch Lightning Boltsには、Warm-upに対応したCosineAnnealingLRがある。 Linear Warmup Cosine Annealing — Lightning-Bolts 0.7.0 documentationまだレビュー中のステータスで、機能的にもリスタートや減衰には対応していない。深層学習界隈でよく使われるtimmには、Warm-upの他にリスタート…

概要 埋め込みモデルe5-mistral-7b-instructを使って、テキスト間のコサイン類似度を計算する方法をまとめる。 ※内容が間違っている可能性があります、ご容赦ください。 e5-mistral-7b-instruct 今回使用する、埋め込みモデルです。 2024年2月17日現在、MTEB LeaderboardのEnglishで4位となっています。 多言語でも使えますが、英語の使用が勧められています。 huggingface.co 実装 こちらを参考に実装しています。 huggingface.co import torch import torch.nn.functional as…

午前中は駅前に買い物に出かけてきました。 発券しないといけなかった切符を受け取ったり、欲しかったホットサンドメーカーを買ってから帰宅しました。【 IWANO × 燕三条 】 日本製 直火式 ホットサンドメーカー （ パン耳圧着/両面フラット ） 耳まで焼ける 上下取り外し可能 フッ素樹脂加工 PFOSフリー PFOAフリー 直火 対応 ホットサンド アウトドア キャンプ にも 2枚のフライパンとしても使用可能 フラット面は使いやすさ◎ 丸洗いもOK (FT)IWANOAmazon2週間くらい遅くなったけど自分への誕生日プレゼントです。 # お昼ご飯午後は勉強をしようと思っていたのですが、本を読…

概要 LangChainのEnsemble Retrieverの使い方をまとめる。 今回はBM25、HuggingFace(sonoisa)、OpenAI(text-embedding-ada-002)の3つでEnsemble Retrieverを使ってみます。 Ensemble Retriever 検索精度を向上させるために、複数の検索結果を使用して順位を計算します。(ハイブリット検索) python.langchain.com バージョン langchain==0.1.6 langchain-openai=0.0.5 実装 ライブラリのインポート import os from langch…