hotdetune: 掲示板とブログ情報を用いた動画メタデータの自動生成と検索システム

1.背景

動画のメタデータを作成する手法として、動きに注目して自動生成する技術 などの研究が行なわれているが、人手によるものと比べれば精度は低い。

しかし、ふと周囲を見渡すと、2ちゃんねるやその周辺で、掲示板によるテレ ビやラジオの実況というのが行なわれている。実況ってのは時系列の情報も (精度は悪いけど)ついているので、どのシーンでどういうコメントが付いたか が自然発生していることになる。

この情報を使ってメタデータを作ると、わりと面白い動画検索システムが 作れるのではないか。

また、放送終了後にブログで「あのシーンが××」とかコメントをつけている 人もおり、動画の「あのカット」に対するリンクが張れるような仕組みを考え てやると、動画アーカイブを中心としたブログツールでのセマンティックウェ ブ(もどき)が結果的にメタデータとして機能することになる。

2. システム概要

• 実況共有サーバ
• 動画リンク

2-1. 実況共有サーバ

実況クライアントでは、動画の再生と、動画に関連付けされた実況データを 同時に再生する。実況データは通常、時刻と短いコメントの集合になる。 実況に参加する場合は、クライアントからコメントを入力する。入力した コメントは時刻情報とともに実況サーバに送られる。 この結果、実況共有サーバには、実況データがどんどん追加されていくことになる。 動画の再生はテレビ放送と異なり決まった時刻に行なう必要はないため、 このシステムは動画放送の実況に後から参加するシステムであるとも言える。 当初のイメージでは、動画の隣りに実況コメントが表示される形式を 考えていたが、石橋氏(創夢)との対話の中で、動画に重ね合わせて表示させた ほうが良いという発想を得た(これはつまりニコニコ動画そのものである)。

2-2. 動画リンク

そのblogに対するリンク、トラックバックはさらにメタデータをして機能する ことが推測できる。このように自然発生的にメタデータのネットワークが 構築されることが期待できる。

検討すべき課題は、シークを含めたリンクの形式、それを再生できる環境の 構築にある。

3. すでにあるじゃん

• ビデオブログが書けるビデオ配信サービス： Synvie

IPA未踏プロジェクトの成果の影響を受けて作られたのがニコニコ動画だそうで、 やりたかったことの半分くらいはニコニコ動画である。

• ニコニコ動画

また実況データからメタデータを作成するという試みとして、以下の論文が2005年9月に 出ている。

「放送番組に対してパブリックオピニオンメタデータを生成する視聴支援エージェント の開発 -- ネットコミュニティからの雰囲気成分の抽出とユーザ間での流通に よる洗練化 --」

岡本直之 (他), 電気情報通信学会 D1 2005年9月号