動画の場面検索

動画の場面検索とは？

英語の説明と動画から取り出したサンプル画像を比較し、近い候補を順位付けします。端末内の短い動画で、確認する場所を探すための道具です。候補は提案にとどまり、場面が存在しない場合にも返ります。音声やサンプル間の時点は検索しません。

使い方

1. ブラウザがデコードできる、破損していない MP4 を1本選びます。モデル取得前に、ファイルサイズ、元ファイルの時刻情報、画面サイズ、サンプルの計画を確認します。
2. 100秒までの動画では初期設定の5秒間隔を使います。短い動画では、必要に応じて間隔を狭めてください。「映像の索引を作る」を押します。初回は公開モデルと実行用リソースを取得しますが、動画は端末内にとどまります。
3. 「A red car on a city street」のように、見える内容を簡単な英語で説明します。「場面を検索」を押すか Enter キーを使います。短く具体的な説明のほうが1枚の画像と比較しやすくなります。
4. 候補時刻の元動画確認ボタンを選びます。ブラウザは元動画を再デコードし、ファイルのバイト、表示時刻、PNG バイトを索引と比較します。元動画を再生し、その場面が目的に合うか判断してください。
5. 今回の JSON レポートをコピーまたは保存します。実際の検索文、元ファイルのフィンガープリント、サンプルの範囲、候補時刻、類似度、完了したフレーム確認を含みます。元動画は別に保存してください。レポートに画像は含まれません。

設定の選び方

うまく動かないとき

• サンプルが20回を超える場合は間隔を広げるか、動画のコピーを短くしてください。間隔変更で古い索引は破棄されます。自動で間隔を緩めることはありません。
• ファイルを読めない、またはフレーム確認が失敗する場合は、破損していない対応 MP4 から索引を作り直します。未確認の索引や不完全な索引を完成済みとして扱いません。
• モデル保存領域が使えない、またはいっぱいの場合は、ブラウザの設定でこのサイトの保存領域を空けてから明示的に再試行します。フィンガープリントが一致しないキャッシュ分割データは削除されます。再試行はその部分を取り直し、他の検証済み部分を再利用します。
• 検索文のエラーなら有効な索引は残るため、説明を短くして再検索できます。説明の変更は古い候補とレポートを消去します。制限時間超過やエンジンの失敗では索引の作り直しが必要です。消去とキャンセルはファイルと検索文も空にします。
• クリップボードが使えない場合は JSON のテキストを選んでコピーするか、レポートを保存してください。他で使う前に検索文と元ファイルのフィンガープリントを確認してください。