動画解析

最近、過去に放送していたアニメをYoutubeで公開するフル☆アニメTVというチャンネルが存在することを知り、動画として保存したいと思いました。 www.youtube.com ただ、動画は1本に対して複数話まとめているため、できれば話数毎に保存できないかと考えました。 そこで、保存した動画に対して特定シーンの情報(フレーム)を元にトリミングと書き出し処理を実行すれば実現できるのではないかと考え検討することにしました。 作成したもの 処理の流れ 詳細 動画のフレーム情報をopencvとnumpy、pytesseractを使用して分析 分析した情報を元にトリミングするタイムスタンプを作成 タイム…

Index Index 畳み込みニューラルネットワーク 参考 畳み込みニューラルネットワーク CNN を用いた動画像処理についてまとめる. CNN yhayato1320.hatenablog.com 動画像処理 yhayato1320.hatenablog.com 参考 コンピュータービジョン最前線 Spring 2022 1 イマドキノ動画認識 1.2 代表的な認識モデル 1.2.1 動画認識における畳み込み 2 次元畳み込み 3 次元畳み込み (2+1) 次元畳み込み 1.2.2 認識モデル 2 次元畳み込みによる認識モデル Two-Stream CNN CNN + LSTM 3 次元畳…

Index Index 物体追跡 / Object Tracking における精度指標 一般的に利用される精度指標 False Positive False Negative / Misses 物体検出特有の精度指標 ID Switch / ID sw / IDs / Fragmentation Multi Object Tracking Accuracy / MOTA IDP / IDR / IDF1 Number of Mostly Tracked Trajectories / MT Number of Mostly Lost Trajectories / ML 参考 物体追跡 / Obj…

Index Index Simple Online and Realtime Tracking / SORT / 2016 応用 DeepSORT / 2017 Strong SORT / 2022 BoT SORT / 2022 OC SORT / 2022 Deep OC SORT / 2023 Simple Online and Realtime Tracking / SORT / 2016 物体追跡 / Object Tracking のアルゴリズムのひとつ. 物体追跡 #まとめ編 yhayato1320.hatenablog.com 複数の物体を追跡する Multiple Objec…

旅の途中、興味深いオアシスを見つけた。忘れないうちに、この羊皮紙に記しておくとしよう。 前回、我々はMicrosoft Azure AIサービス「Video Analyzer」という、神々の領域に足を踏み入れた。Webという名の神殿から、ビデオという魂を捧げれば、誰でも簡単にAIによる解析という神託を受けられる。しかし、真の冒険者は、そこで満足しない。

Index Index Frame Sampling タスク データセット 実装 実行 環境構築 Frame Sampling 動画像データから画像 (フレーム) をサンプリングし、シーケンシャルな (もしくはシーケンシャルでない) 画像データセットを作成する. Frame Sampling #まとめ編 yhayato1320.hatenablog.com タスク 今回は、動画からのランダムサンプリングを行う. データセット 今回は、Multi Object Tracking 16 / MOT16 を利用してみる. Multi Object Tracking 16 / MOT16 yhayat…

旅の途中、興味深いオアシスを見つけた。忘れないうちに、この羊皮紙に記しておくとしよう。 かつて、私はMicrosoft Azure AIサービスという、広大な神々の領域で、動画ファイルという魂を解析するC#アプリケーションを開発したことがある。しかし、その旅の始まりは、あまりに膨大な情報という名の砂漠の中で、どちらを向けばいいのかさえ分からない、途方に暮れるものだった。