Loading article…
ビデオフィンガープリンティングまたはビデオハッシュは次元削減技術の一種であり[1]、システムがビデオの特徴的なコンポーネントを識別、抽出し、一意のまたは複数の知覚ハッシュまたはフィンガープリントのセットとして要約することで、そのビデオを一意に識別できるようにします。この技術は、ビデオファイルの検索と比較に効果的であることが証明されています。[2] [3]
歴史とプロセス
ビデオフィンガープリンティングは、2002年にフィリップスによって初めて実用化されました。[4] [検証失敗]
ビデオフィンガープリントにはさまざまな方法があります。Van Oostveen は、連続するビデオフレームの画像強度パターンの変化を利用しました。[4]これにより、ビデオフィンガープリントは、限られた色の変化、または元のビデオの色がグレースケールに変換されることに対して堅牢になります。他の人は、ショットの変更の周りだけを見ることで、フィンガープリントのサイズを縮小しようとしました。[5]
ビデオフィンガープリントはビデオストリームへの追加に依存しません。ビデオフィンガープリントは追加されないため、削除することはできません。さらに、参照ビデオフィンガープリントは、ビデオの任意のコピーからいつでも作成できます。[6] [7]
デジタル透かしと比較して
ビデオ フィンガープリントは、コンテンツに識別機能を挿入してコンテンツを変更するデジタル ウォーターマークと混同しないでください。一部のウォーターマークは、視聴者に気付かれないように挿入できます。堅牢なウォーターマークは検出や削除が困難ですが、目に見えないウォーターマークの削除は大きな弱点となります。
透かしはビデオに挿入する必要があるため、その時点以降に作成された特定のビデオのコピーのみを識別します。たとえば、放送時に透かしが挿入された場合、放送前に作成されたビデオのコピーを識別するために使用することはできません。
透かしには、フィンガープリントに比べていくつかの利点があります。配信プロセスのどの段階でも、コンテンツに固有の透かしを追加できます。また、同じビデオ コンテンツに複数の独立した透かしを挿入できます。これは、ビデオのコピー履歴を追跡する場合に特に便利です。ビデオ内の透かしを検出することで、不正なコピーのソースを特定できます。
ビデオ フィンガープリント システムは、参照フィンガープリントの大規模なデータベースを検索する必要がありますが、透かし検出システムは、透かしを検出するための計算のみを実行する必要があります。この計算は膨大な量になる可能性があり、複数の透かしキーをテストする必要がある場合、透かしは、ユーザー生成ビデオサービスなどの商用アプリケーションに必要なボリュームに拡張できない可能性があります。
アプリケーション
権利管理と配信追跡
ビデオ フィンガープリンティングは、デジタル著作権管理(DRM) の分野で、特にインターネット上での無許可コンテンツの配信に関して注目されています。ビデオ フィンガープリンティング システムにより、コンテンツ プロバイダー (映画スタジオなど) または発行元 (ユーザー生成コンテンツ[UGC] サイトなど) は、発行元のファイルのいずれかにフィンガープリンティング サービスに登録されたコンテンツが含まれているかどうかを判断できます。登録されたコンテンツが検出された場合、発行元は適切なアクション (サイトから削除、収益化、正しい帰属の追加など) を実行できます。
ビデオフィンガープリンティングは、放送監視（広告監視、ニュース監視など）や一般的なメディア監視に使用できます。放送監視ソリューションは、コンテンツプロバイダーやコンテンツ所有者に、ビデオコンテンツがいつどこで使用されたかをプレイリストで通知できます。典型的なアプリケーションについては、この「テレビ制作会社と放送局向けのビデオフィンガープリンティングの使用例」で説明されています。[8]
コンテンツプロバイダーの観点からは、ほとんどのアプリケーションでビデオとオーディオの両方のフィンガープリントを使用する必要があります。[9] 「マッシュアップ」のオンライン公開について考えてみましょう。マッシュアップは、複数のソースからのコンテンツをまとめてコンパイルし、独自のオーディオトラックに設定することで構成できます。オーディオトラックは元のバージョンとは異なるため、これらのマッシュアップ内の著作権で保護された素材は、オーディオフィンガープリント技術のみを使用しても検出されません。他のケースでは、マッシュアップは、映画などの商用ビデオソースのサウンドトラックを別のビデオストリームとともに使用して構成されます。この場合、ビデオフィンガープリントは一致しませんが、オーディオフィンガープリントは一致します。オーディオストリームとビデオストリームが同じ傑作からのものではない場合は、フェアユースの問題が発生する可能性があります。
この矛盾は、映画配給の面で、グローバル オンライン コミュニティで実際に応用されています。原産国以外の国で上映される映画は、多くの場合、他の言語に吹き替えられます。このオーディオの変更により、既知のすべてのバージョンのコピーがフィンガープリントされていない限り、オーディオ フィンガープリント技術では映画を事実上認識できなくなります。ただし、ビデオ フィンガープリントを使用すると、コンテンツ所有者は 1 度フィンガープリントするだけで、それ以降の各バージョンを認識できるようになります。顧客が特定のビデオにどの言語のサウンドトラックが含まれているかを知りたい場合は、オーディオ フィンガープリントを使用する必要があります。
もう 1 つの用途としては、企業が機密の録音やビデオの漏洩を追跡したり、著名人がインターネット上の無許可のビデオ (たとえば、アマチュアがビデオカメラや携帯電話で撮影した自分自身のビデオ) の存在を追跡したりすることが挙げられます。
インタラクティブメディア
スマートテレビにビデオフィンガープリンティングを適用することで、インタラクティブテレビアプリケーションの新しいカテゴリが生まれています。リアルタイムフィンガープリンティングソフトウェアを統合したテレビデバイスは、画面上のビデオコンテンツを自動的に認識し、番組に加えてインタラクティブ機能やアプリケーションを有効にすることができます。起業家のマーク・キューバンは、この技術を活用して、ケーブルネットワークHDNetとその後継AXSのインタラクティブ機能を作成するために投資を行っています。[10]
ビデオ フィンガープリントは、コンテンツ認識型ビデオ広告の作成にも使用できます。 1 つの実装として、ビデオ サービス プロバイダーが全国放送のテレビ コマーシャルを含むコンテンツを配信する場合、テキスト/グラフィックのローカライズされたオーバーレイを全国放送のコマーシャルに実行できます。 こうすることで、全国放送のコマーシャルに、そのコマーシャルに固有のローカルな情報がオーバーレイされます。 たとえば、全国放送のコマーシャルに Ford Explorer SUV の 15 秒スポットが含まれている場合、フィンガープリント技術を使用して、ローカル オペレーターは 15 秒のコマーシャルにローカル ディーラー情報 (電話番号、プロモーションなど) をオーバーレイし、ローカル ユーザーのみをターゲットにしたように見える SUV のローカライズされたコマーシャルを作成できます。
刑事捜査
ビデオフィンガープリンティングは、当局が、ハッピースラッピング、テロリスト、児童性的虐待関連のビデオなどの違法コンテンツの配信を追跡するためにも使用されています。
2008年にオランダのZiuz社は、オランダ警察、TNO、アムステルダム大学と共同で、児童性的虐待関連ビデオを検出するためのビデオフィンガープリンティングを開発した。[11] [12]
2014年4月、英国企業のフレンドMTS社は、児童ポルノ捜査の効率化とインターネット上での類似ファイルの継続的な共有の阻止を目的として、ビデオフィンガープリンティング技術（F1として知られる）を国際行方不明・被搾取児童センター（ICMEC）に寄贈した。 [6] [13] ICMECは、この技術を法執行機関、ソフトウェアプロバイダー、オンラインサービスプロバイダーに配布し、そのような資料の拡散を阻止している。[14] [15]
参照
参考文献
- ^ Wu, Gengshen; Liu, Li; Guo, Yuchen; Ding, Guiguang; Han, Jungong; Shen, Jialie; Shao, Ling (2017 年 8 月)。「バランスのとれた回転による教師なしディープ ビデオ ハッシング」(PDF)。第 26 回人工知能国際合同会議の議事録。pp . 3076–3082。doi :10.24963/ijcai.2017/ 429。ISBN 9780999241103. 2022年11月9日閲覧。
- ^ Liong, Venice Erin; Lu, Jiwen; Tan, Yap-Peng; Zhou, Jie (2017 年 6 月). 「Deep Video Hashing」(PDF) . IEEE Transactions on Multimedia . 19 (+6): 1209–1219. doi :10.1109/TMM.2016.2645404. S2CID 4666560 . 2022 年11 月 9 日閲覧。
- ^ Song, Jingkuan; Zhang, Hanwang; Li, Xiangpeng; Gao, Lianli; Wang, Meng; Hong, Richang (2018). 「階層型バイナリオートエンコーダによる自己教師ありビデオハッシュ」. IEEE Transactions on Image Processing . 27 (7): 3210–3221. arXiv : 1802.02305 . Bibcode :2018ITIP...27.3210S. doi :10.1109/TIP.2018.2814344. PMID 29641401. S2CID 3633912.
- ^ ab Oostveen, J., Kalker, T., & Haitsma, J. (2002 年 3 月)。ビデオ フィンガープリンティングのための特徴抽出とデータベース戦略。International Conference on Advances in Visual Information Systems (pp. 117-128)。Springer、ベルリン、ハイデルベルク。
- ^ Van Rest, JHC (2002)、シグネチャを使用したビデオのインデックス作成と検索、修士論文
- ^ ab Liat Clark (2014年4月30日). 「児童虐待追跡技術が世界に寄贈」. Wired UK .
- ^ 「コンテンツ制御: デジタル透かしとフィンガープリンティング」(PDF) 。 2014年11月14日時点のオリジナル(PDF)からアーカイブ。2017年7月8日閲覧。
- ^ 「テレビ番組制作と放送局向けのビデオフィンガープリンティング技術」ivitec 2017年8月30日。
- ^ 「PhilipsのビデオフィンガープリントがGracenoteのオーディオと並行して機能へ」。Rethink 。2021年10月16日閲覧。
- ^ マーク・キューバンはフリンゴに資金を投じる - CNET
- ^ Eendebak, P.、Kraaij, W.、Raaijmakers, S.、Ranguelova, E.、de Rooij, O.、Thean, A.、および Worring, M. (2008)。児童ポルノ捜査員を支援するための視覚ツール。TNO Science and Industry、デルフト、アムステルダム大学、オランダ。
- ^ ジョン・シェーブメーカー、ピーター・ヤン・ドーツ、ヴェルナー・バイラー、ハラルド・スティグラー、フェリックス・リー、ヘルムート・ノイシュミート、ヴェッセル・クライジ、ポール・ブラント、ピーテル・エエンデバク、エレナ・ランゲロワ、アンディ・テアン。 http://pietereendebak.nl/files/shavemaker-2010-vdFP.pdf、2010 年。
- ^ ジェフ・エルダー（2014年4月30日）。「英国企業が児童ポルノ対策に技術を寄付」ウォール・ストリート・ジャーナル。
- ^ 「児童ポルノをオンラインで削除するための新しいビデオフィンガープリンティング技術が開発されました」。MarketWatch。2014年4月30日。
- ^ 「指紋を使って虐待画像を追跡」スカイニュース、2014年5月5日。2014年5月8日時点のオリジナルよりアーカイブ。