WO2003088668A1

WO2003088668A1 - Dispositif et procede de transmission de contenu video, dispositif de stockage de contenu video, dispositif et procede de reproduction de contenu video, dispositif de generation de metadonnees, et procede de gestion de contenu video

Info

Publication number: WO2003088668A1
Application number: PCT/JP2003/004520
Authority: WO
Inventors: Shunichi Sekiguchi; Hirofumi Nishikawa; Yoshimi Moriya; Yoshihisa Yamada; Kenji Otoi; Shinichi Kuroda; Fuminobu Ogawa; Kohtaro Asai
Original assignee: Mitsubishi Denki Kabushiki Kaisha
Priority date: 2002-04-12
Filing date: 2003-04-09
Publication date: 2003-10-23
Also published as: US20040246376A1; JP4352653B2; JP2003304473A; EP1482735A1; DE60334079D1; EP1482735A4; EP1482735B1

Description

明細書

映像コンテンツ送出装置およびその方法、映像コンテンツ蓄積装置、映像コンテンッ再生装置およびその方法、メタデータ生成装置、映像コンテンツ管理運用方法技術分野

本発明は、パーソナルなデジタル映像情報の交換を前提とするシステムを始め、膨大な映像コンテンツの中から所望の映像を多様な再生環境が混在するブラットフォーム上で迅速かつ的確に提示するために映像コンテンツを一括管理運用するシステムにおいて、特に、デジタル映像情報の管理■運用 '加工に関わるシステム構築技術に必要な映像コンテンツ送出装置およびその方法、映像コンテンツ蓄積装置、映像コンテンツ再生装置およびその方法、メタデータ生成装置、映像コンテンッ管理運用方法に関する。背景技術

現在、高能率映像圧縮技術の進歩に伴い、デジタル放送 (衛星、地上波、ケーブル）、 DVD、ビデオ CD、インターネット、モパイルなど、放送 '通信■パッケージにまたがる多様なアプリケーションにおいてデジタル映像情報が活用されている。これに伴い、膨大なデジタル映像コンテンツが制作 '消費されているが、インターネットにおける情報資源共有の有効性を鑑みるに、これら制作された映像コンテンツは用途に応じて柔軟に再利用が可能であることが望ましい。

このため、近年の、デジタルカメラの普及とインターネット ·記憶装置の高速大容量化、計算機性能の飛躍的な向上を背景として、インターネット上のサーバにデジタル画像をアップロードし、限定されたコミュニティ内で画像情報の交換を行うサービスが始まっている。

これにより、画像撮影者は焼き増しなどの手間やコストをかけずに、 1つのデジタル画像データを有効に使いまわすことが可能となる。遠隔地にいるコミュニティメンバに瞬時に画像情報を伝達したり、 PCや PDA、携帯電話など多様な端末へ画像データサイズゃ画像符号化方式の変換によって適応化を図ったりすることが可能であり、写真による物理的な情報交換では不可能な高速かつ利便性の高い情報交換が可能になりつつある。

しかしながら、映像情報で同様のサービスを考える場合、静止画像と異なり、時間変化を伴う複雑なコンテンツ内容、膨大なデータ量という問題がある。

また、コンテンツ視聴者の立場からは、場合によっては長時間の映像コンテンッをそのまま視聴できなレ、場合もあり、膨大な映像コンテンツの中から自分の観たいもの ·部分だけを速やかに視聴できるシステムが求められるが、このようなシステムでは、コンテンツ提示形態のバリエーションが極めて多くなり、ありうるバリエーションのうちのいずれを提示するかの判断材料が不足しているために、既存の画像交換サービスの枠組みでは実現できないという問題もある。発明の開示

そこで、本発明は、ある端末の映像再生能力やコンテンツの形式に関わる視聴者の嗜好等の映像を視聴する側の要求条件に基づき、視聴者の求める形態で映像コンテンツを迅速かつ的確に提示することのできる映像コンテンッ送出装置およびその方法と、そのような映像コンテンツを蓄積した映像コンテンツ蓄積装置、そのような映像コンテンツを再生する映像コンテンツ再生装置およびその方法、そのような映像コンテンツのメタデータ生成装置、映像コンテンツ管理運用方法を提供することを目的とする。

前記課題を解決するため、本発明では、映像データと、その映像データに関するメタデータとからなる映像コンテンツを送出する映像コンテンツ送出装置であつて、前記映像コンテンツの提示形態に関する要求条件に基づいて、提示候補となる 1つまたは複数の映像コンテンツを抽出するコンテンツ抽出部と、前記映像コンテンツの提示形態に関する要求条件と前記抽出された映像コンテンツのメタデータとに基づいて、当該抽出された映像コンテンツから提示すべき形態の映像コンテンツへ加工するコンテンツ加工部と、を有し、前記加工された映像コンテンッを所定のプロトコルに従って送出する映像コンテンツ送出装置であることを特徴とする。 -これにより、複数の映像コンテンツを管理するシステムから効率よく所望の映像コンテンツを引き出すことが可能となる。特に、前記映像コンテンツの提示形態に関する要求条件として、少なくとも、視聴希望の映像コンテンツの分類に関する要求条件と、映像コンテンツの形式の嗜好に関する要求条件と、映像コンテンツのデータ形式に関する要求条件とを含む映像コンテンツ送出装置であることを特徴とする。これにより、柔軟な映像コンテンッの加工を可能となる。

また、前記メタデータは、少なくとも、対応する映像データのコンテンツ全体概要と、シーン構成の記述とを含むメタデータであり、前記コンテンツ抽出部は、前記映像コンテンッの提示形態に関する要求条件のうちの前記映像コンテンッの分類に関する要求条件と、前記コンテンツ全体概要を記述するメタデータとのマツチングによって、提示候補となる 1つまたは複数の映像コンテンツを抽出し、前記コンテンツ加工部は、前記映像コンテンツの提示形態に関する要求条件のうちの前記映像コンテンツの形式の嗜好に関する要求条件と、前記シーン構成を記述するメタデータとのマッチングによって、提示すべき映像コンテンツ部位を特定し、提示すベき形態の映像コンテンツへ加工する映像コンテンツ送出装置であることを特徴とする。これにより、要求条件に合致する複数の映像コンテンツをシーンの単位で加工して提示することを可能となる。

また、前記メタデータは、少なくとも、対応する映像データのコンテンツ全体概要と、シーン構成と、メディア属性の記述とを含むメタデータであり、前記コンテンッ抽出部は、前記映像コンテンツの提示形態に関する要求条件のうちの前記映像コンテンツの分類に関する要求条件と、前記コンテンッ全体概要を記述するメタデータとのマッチングによって、提示候補となる 1つまたは複数の映像コンテンッを抽出し、前記コンテンツ加工部は、前記映像コンテンツの提示形態に関する要求条件のうちの前記映像コンテンツの形式の嗜好に関する要求条件と、前記シーン構成を記述するメタデータとのマッチングによって、提示すべき映像コンテンツ部位を特定し、提示すべき形態の映像コンテンツへ加工すると共に、加工した映像コンテンツを前記メディァ属性を記述するメタデータに基づいて映像コンテンツのメディアフォーマットを参照し、前記映像コンテンツの提示形態に関する要求条件のうちの前記映像コンテンツのデータ形式に関する要求条件で指定される再生メディアフォーマツト形式へ変換する映像コンテンツ送出装置であることを特徴とする。これにより、要求条件に合致する複数の映像コンをシーンの単位で加工した結果を、映像コンテンツ受信端末側の再生能力に応じてメディア変換することを可能とする。

また、さらに、映像データの解析処理を行って映像データに関するメタデータを生成するメタデータ生成部と、映像データと前記生成されたその映像データに関するメタデータとからなる映像コンテンツを蓄積する映像コンテンツ蓄積部とを有する映像コンテンツ送出装置であることを特徴とする。

また、映像データと、その映像データに関するメタデータとからなる映像コンテンッを送出する際の映像コンテンツ送出方法であって、前記映像コンテンツの提示形態に関する要求条件に基づいて、提示候補となる 1つまたは複数の映像コンテンッを抽出し、前記映像コンテンツの提示形態に関する要求条件と前記抽出された映像コンテンツのメタデータとに基づいて、当該抽出された映像コンテンッから提示すベき形態の映像コンテンツへ加工して、その加工した映像コンテンッを所定のプロトコルに従って送出する映像コンテンツ送出方法であることを特徴とする。これにより、複数の映像コンテンツを管理するシステムから効率よく所望の映像コンテンツを引き出すことが可能となる。

また、上記いずれかの映像コンテンツ送出装匱の前記コンテンツ抽出部が抽出する映像コンテンッを蓄積した映像コンテンッ蓄積装置であることを特徴とする。また、映像データと、その映像データに関するメタデータとからなる映像コンテンッを要求し受信して再生する映像コンテンツ再生装置であって、映像コンテンッの提示形態に関する要求条件を生成して映像コンテンツの要求を行う映像コンテンッ要求部と、その要求条件に従い提示形態に加工された映像コンテンツを受信して当該映像コンテンツの映像データを復号再生する映像復号再生部と、を有する映像コンテンツ再生装置であることを特徴とする。これにより、映像コンテンッ送出装置へ、生成した映像コンテンツの提示形態に関する要求条件を送出して、映像コンテンツ送出装置にて要求条件に応じて加工された映像コンテンツを受信再生することを可能となる。

特に、前記映像コンテンツの提示形態に関する要求条件として、少なくとも、視聴希望の映像コンテンッの分類に関する要求条件と、映像コンテンッの形式の嗜好に関する要求条件と、映像コンテンツのデータ形式に関する要求条件とを含む映像コンテンツ再生装置であることを特徴とする。これにより、柔軟な映像コンテンッの加工を指示することが可能となる。

また、前記映像コンテンツ要求部は、受信した映像コンテンツのメタデータに基づいて、映像コンテンツ要求条件を再生成して要求する映像コンテンツ再生装置であることを特徴とする。これにより、要求条件に合致する映像コンテンツに関連するコンテンツへのさらなるアクセスの効率化を促進することが可能となる。また、受信した映像コンテンツのメタデータは、少なくとも、映像コンテンツのシーン構成と、個々のシーンの映像信号に関する特徴量を記述するメタデータ' を含み、前記映像コンテンツ要求部は、個々のシーンの映像信号に関する特徴量を記述するメタデータに基づいて、映像コンテンッ要求条件を再生成して要求する映像コンテンツ再生装置であることを特徴とする。これにより、受信した映像コンテンッの絵柄の類似性等をキーとした映像コンテンツの再アクセスを可能とする。

また、さらに、映像コンテンツの構成要素となる映像データを送信する映像送信部を有する映像コンテンツ再生装置であることを特徴とする。これにより、映像コンテンツの双方向利用を実現することが可能となる。

また、映像データと、その映像データに関するメタデータとからなる映像コンテンッを要求し受信して再生する際の映像コンテンツ再生方法であって、映像コンテンッの提示形態に関する要求条件を生成して映像コンテンツの要求を行ない、その要求条件に従い提示形態に加工された映像コンテンツを受信して当該映像コンテンッの映像データを復号再生する映像コンテンッ再生方法であることを特徴とする。これにより、映像コンテンツ送出装置へ、生成した映像コンテンツの提示形態に関する要求条件を送出して、映像コンテンツ送出装置にて要求条件に応じて加工された映像コンテンツを受信再生することを可能となる。

また、映像コンテンツの構成要素となる映像データを受信すると、受信した映像コンテンツに対して信号処理を施し、少なくとも、映像コンテンツのシーン構成と、個々のシーンの映像信号に関する特徴量を記述するメタデータとを生成し、前記信号処理を施した映像データと、前記生成したメタデータを組にして映像コンテンッ蓄積装置に登録するメタデータ生成装置であることを特徴とする。これにより、信号処理を施した映像データと生成したメタデータとが組にして映像コンテンッ蓄積装置に登録されることになり、蓄積される映像コンテンツを異なるユーザ、端末間で相互に効率よく交換することが可能になる

また、映像データと、その映像データに関するメタデータとからなる映像コンテンッを管理運用する際のコンテンツ管理運用方法であって、映像コンテンツの提示形態に関する要求条件を生成して映像コンテンツの要求があると、前記映像コンテンツの提示形態に関する要求条件に基づいて、提示候補となる 1つまたは複数の映像コンテンッを抽出し、前記映像コンテンッの提示形態に関する要求条件と前記抽出された映像コンテンツのメタデータとに基づいて、当該抽出された映像コンテンツから提示すべき形態の映像コンテンッへ加工して、その加工した映像コンテンツを所定のプロトコルに従って映像コンテンツ再生装置へ送出し、当該映像コンテンッ再生装置に送出した映像コンテンツを受信させて当該映像コンテンッの映像データを復号再生させる映像コンテンッ管理運用方法であることを特徴とする。これにより、映像コンテンツをユーザまたはユーザが使用する映像再生端末によって指定される映像コンテンツの提示形態に関する要求条件に従い、迅速かつ的確な映像コンテンツの再生が可能になる。

図面の簡単な説明

図 1は実施の形態 1のシステム構成を示す図面である。

図 2は実施の形態 1のシステム動作手順を示す図面である。

図 3は映像コンテンッ中の映像データに付随されるメタデータの基本構成を示す図面である。

図 4は実施の形態 1におけるコンテンッ配信サーバ 5の内部構成を示す図面である。

図 5は実施の形態 2におけるユーザ端末 6の内部構成を示す図面である。図 6は実施の形態 3における蓄積型放送受信機の内部構成を示す図面である。図 7は本発明による映像コンテンツ運用管理手段を備える D V D再生機の内部構成を示す図面である。

図 8は図 6の蓄積型放送受信機に外部映像入力手段を追加した受信機の内部構成を示す図面である。発明を実施するための最良の形態

以下、この発明の実施の形態を説明する。

実施の形態 1 .

本実施の形態 1では、映像コンテンツ管理運用システムの事例として、 IP網に接続される映像端末から映像コンテンツを集信し、別のユーザに対して個々の要求に応じた提示形態で映像コンテンッの配信を行う映像交換サーバを例に挙げて、その構成について説明する。

図 1に、本発明の映像コンテンツ管理運用システムのシステム構成を示す。同図に示すように、本発明の映像コンテンツ管理運用システムは、本発明の映像コンテンッ再生装置に相当するユーザ端末 1、サービスホスト 2、本発明のメタデータ生成装置に相当するォーサリングプロクシ 3、本発明の映像コンテンツ蓄積装置に相当するコンテンツデータベース 4、本発明の映像コンテンツ送出装置に相当するコンテンツ配信サーバ 5と、が IP網等を介して接続されて構成されている。なお、ユーザ端末 1には、図 1に示すように、制御情報送受信部 1 Aや映像撮像 ·送信部 1 B等を有して登録すべき映像データ 1 Cの送信機能を有するュ一ザ端末と、制御情報送受信部 1 Aや映像撮像 ·送信部 1 B等を有してなく登録すべき映像データ 1 Cの送信機能を備えない受信のみのユーザ端末等がある。図 2に、図 1に示す本発明の映像コンテンツ管理運用システムの動作フローを示す。

これらの図に基づいて、システムの機能および動作を、コンテンツ登録処理、ォーサリング処理、コンテンツ配信処理、コンテンツ再生 ·クエリ処理と分けて説明する。なお、以下、すべての実施の形態において、映像データとは、映像のみのデータだけでなく、それに付随するオーディオデータを含むオーディオビジュアルデータも含むものとする。 ①コンテンツ登録処理

映像送信機能を有するユーザ端末 1は、映像データをァップロード ·登録することにより、本システムに映像データの管理運用を委託する。本システムの全体管理は、サービスホスト 2が担当する。サービスホスト 2は、ユーザ端末 1 とのインタラクションを行い、ユーザ認証を担当するとともに、システム内で利用可能なリソースであるォ一サリングプロクシ 3や、コンテンツデータベース 4、コンテンッ配信サーバ 5等の運用管理を行う。なお、図 1において、サービスホスト 1から各システム内リソースへ接続される破線は、以降、各リソースの運用管理のための制御線とみなす。

はじめに、コンテンツ登録を希望するユーザは、ユーザ端末 1の制御情報送受信部 1 Aからサービスホスト 2へコンテンツ登録の要求を出す（Sl)。この要求情報には、ォーサリングである映像解析を伴うメタデータ生成を希望するか否かの情報も含む。要求を受けたサービスホスト 2は、要求ユーザが本システムのサボート対象か否かを認証する（S2)。認証が OKであれば、システム内の利用可能なォーサリングプロクシ 3、コンテンッデータベース 4を特定する（S3)とともに、要求を受けたユーザのリソース利用状況、例えば当該ユーザが登録済みの映像コンテンッの総データ量が上限値を超えていないかどうか等をチェックし、登録の可否とともに、登録可の場合の利用可能なォーサリングプロクシ 3、コンテンツデータベース 4のァドレスをユーザ端末 1に対し通知する（S4)。

サービスホスト 2からの通知により登録可であることが確認されたら、送信機能を有するユーザ端末 1は、映像撮像■送信部 I Bを通じて、登録すべき映像データ 1 Cをォーサリングプロクシ 3へ転送する（S5)。ここで映像データ 1 Cはュ一ザ端末 1の装置仕様に依存するが種々のデータ形式をとる。例えば、送出先のアクセス回線がモパイル回線などの映像伝送にとってクリティカルな伝送路であることを想定する端末の場合には MPEG - 4ビデオに準拠する映像データが用いられることがある。その一方、十分に広帯域であるアクセス回線に接続される端末の場合は DV形式や MPEG- 2形式の映像データであってもよい。また、伝送プロトコルについては、リアルタイム登録を必要とする場合は、 RTP/UDP/IPなどのリアルタイムメディアに適したプロトコルが用いられ、必ずしもリアルタイム登録を必要としない場合は、 TCP/IPなどの信頼性の高い伝送プロトコルで確実に映像データ 1 cを登録できるようにする。

②ォーサリング処理

本実施の形態 1の場合、ォーサリングプロクシ 3は、映像データ 1 Cの映像解析処理おょぴコンテンツデータベース 4への登録のための映像データ形式変換などの処理負荷がかかるため、 IP網上に分散配置され、システム全体の処理負荷の分散を図るように構成されているが、処理能力が十分であれば、 1つでも勿論良い。尚、ユーザが映像の解析処理を必要とするメタデータ生成を希望しない場合は、登録すべき映像データ 1 Cをォーサリングプロクシ 3へ転送する（S5)代わりに、ォーサリングプロクシ 3における映像解析処理を OFFにできるように、ュ一ザ端末 1からサービスホスト 2へ通知される。

映像データ 1 Cは、該映像データ 1Cに関するメタデータ生成のために、ォーサリングプロクシ 3に送信され受信されると、ォーサリングプロクシ 3は、受信した映像データ 1 Cの解析処理を行う（S6) 。ここで、解析処理とは、映像データ 1 Cの信号特徴を抽出し、それに基づいて映像のシーン構造や、各シーンの信号レベルでの特徴量を自動抽出することを意味する。映像のシーン構造が記述されることで、当該映像コンテンツを視聴する際に、視聴ユーザが望む映像コンテンッの一部分だけを要約再生したり、部分部分をつなげて視聴したりといった柔軟な映像コンテンツの提示を行うことが可能となる。

また、各シーンの映像信号的な特徴量が記述されることで、ある所定のシーンに絵柄的に類似したシーンの候補を瞬時に見つけ出すといったアクセスの効率化が実現できる。映像のシーン構造抽出は、例えば映像のフレーム間相関の連続性に基づいたシーンチェンジ点検出によって実現可能であり、各シーンの信号レべルでの特徴抽出については、例えば、代表色、色のヒストグラム、動きの程度や分布などに関する記述子の値を生成する処理などが用いられる。

また、場合によっては、シーン構造抽出には付随するオーディオデータを補助情報として利用することもありうる。一般に、シーンチェンジ点の自動検出によつて得られるシーン分割結果は、ユーザ端末 1の撮像者が主観的に適当と考える結果と完全に一致させることは難しいため、ユーザ端末 1とォーサリングプロクシ 3との間で、シーン分割結果に対する修正、すなわちメタデータ編集のためのインタラクションを行う（S6a)ように構成してもよい。これは例えば、ユーザ端末 1の制御情報送受信部 1 Aと、ォーサリングプロクシ 3との間の制御情報のやりとりで実現される。特に、ユーザ端末 1の撮像者に対し、個々のシーンの意味内容を説明するためのキーヮード付けなどの処理を可能とするには、このメタデ一タ編集のためのインタラクション（S6a)の系が必須となる。

さらに、映像データ 1 Cの送出とともに、ユーザ端末 1は、コンテンツ登録に必要な情報 1 Dをォーサリングプロクシ 3へ送出する。この種の情報としては、ユーザが明示的にインプットする情報と、端末 1が自動的に送出する情報とがある。前者には、ユーザ名（端末に登録済みならば自動送出可）、撮影した個々の映像のタイトルやジャンルなどがある。後者には、撮影日時、撮影場所（固定端末ならば事前登録で指定可、移動端末であれば GPSなどの手段を用いた自動登録が考えられる）、あるいは端末が送出する映像データ 1 Cの映像符号化方式、映像解像度、フレームレート、ビットレートなどメディアに関する属性情報が含まれる。

ォーサリングプロクシ 3における映像解析処理の結果、映像データ 3 Aとメタデータ 3 Bとが出力される。

図 3に、ォーサリングプロクシ 3にて生成される映像データ 1 Cのメタデータ 3 Bの一例を示す。メタデータ 3 Bは、この図 3に示すように、結果的に、前記コンテンツ登録情報 1 Dをもととする映像データ 1 Cのコンテンツ全体としての属性情報、例えば映像符号化方式や、解像度、フレームレート、 URI、コンテンッ制作情報などと、映像解析処理の結果得られる映像データ 1 Cの時間方向のシーン構成、各シーンの単位で付与されるキーヮード情報や映像信号レベルの特徴量である色や動きなど、といった要素から構成される。これらの情報は国際標準のマルチメディアメタデータフォーマツトである MPEG- 7に準拠した形式で記述される。そして、本システムの構成要素であるすベてのォーサリングプロクシ 3 は、共通の MPEG - 7メタデータフォーマツトでメタデータの記述 ·出力を行うものとする。これにより、コンテンツデータベース 4は異なるォーサリングプロクシ 3から常に統一されたデータ形式でメタデータ 3 Bを受け取ることができるとともに、以後の映像コンテンツ配信に際してのメタデータの利用においてもその処理フォ一マツトを統一することができるため、システム全体および個々のシステム構成要素となる装置のコストを低減することができる。なお、映像データ 3 Aは基本的には映像データ 1 Cと等価であるが、ォーサリング処理のために一時的にォーサリングプロクシ 3に蓄積され、ファイル形式でコンテンツデータベース 4へ登録されるため、映像データ 1 Cとは異なる番号を付与している。また、映像データ 1 Cをコンテンツデータベース 4が指定する映像フォーマツト形式へ変換する場合もある。

以下、映像データ 3 A、メタデータ 3 Bの組を映像コンテンツと呼び、この単位でコンテンツデータベース 4にデータが登録される（S6)。本実施の形態 1では、映像データ 3 Aとメタデータ 3 Bとは独立したデータファイルとして扱われ、映像データ 3 Aとメタデータ 3 Bの関連付けは、メタデータ 3 Bに映像データ 3 Aの URI情報等を明記することで実現されるものとする。メタデータ 3 Bと映像データ 3 Aとは、多重化されて 1本のストリームもしくは 1つのファイルとして扱われるように管理する構成でもよい。コンテンツデータベース 4は IP網上のーノ一ドであり、その内部記憶媒体において所定の管理方法に基づいて映像コンテンッを管理するため、内部記憶媒体に位置付けられた段階で、映像データ 3 Aの URIが決定される。この URI情報は、コンテンツデータベース 4へのコンテンツ登録時に、メタデータ 3 Bに追記されて登録されるように構成できる。また、図には記載されていないが、ォーサリングプロクシ 3における MPEG - 7規定のメタデータ 3 Bの生成の過程で、コンテンツデータベース 4とのインタラクションに基づいて決定されるように構成してもよい。

③コンテンツ配信処理

以上の手順でコンテンツデータベース 4に登録された映像コンテンツは、コンテンッ配信サーバ 5によってユーザが望む視聴形態でユーザ端末 1へ配信される。すなわち、本システムは、ユーザ自らが映像コンテンツを発信してシステムに管理を委託するとともに、他のユーザが同様に管理を委託した映像コンテンツを自分の望む形態で視聴することを可能とする。これにより、従来例に述べた静止画像の交換システムと等価なサービスを、映像コンテンツを対象として構築することが可能である。例えば、ユーザは、映像コンテンツ全体を通して観たい、という場合もあるし、特定の好みの場面だけを集めたダイジエストを観たいという場合もある。また、端末によっては動画再生が不可能な場合、映像コンテンツ中の視聴希望シーンの代表画像（キーフレーム）だけを視聴するといつたことも可能になる。これらの動的な映像コンテンツ提示形態の選択は、映像データに対応付けられたメタデータとユーザからの要求とのマッチングによってはじめて実現される。

図 2のフローでは、配信処理は、ステップ S7のユーザ端末 1からの再生要求によって開始される。コンテンツ登録時と同様、サービスホスト 2は、再生要求を発行したユーザがサポート対象のユーザであるか否かを認証する（S2)。認証が 0Kであれば、次いで、要求ユーザに対して映像コンテンツを配信するためにシステム中最も適したコンテンツ配信サーバ 5を割り当てる（S8)。この結果を、再生要求ユーザに対し再生の可否を含めて通知する（S9)。システムが再生要求を受け付けたことが確認されたら、ユーザ端末 1はコンテンツ配信サーバ 5に対して、図 4に示すように、コンテンツ視聴に関するクエリ情報 1 Eを送出する。

図 4は、コンテンツ配信サーバ 5の内部構成と、コンテンツ配信サーバ 5とュ一ザ端末 1およびコンテンツデータベース 4との関連を示したものである。

クエリ情報 1 Eは、種々の映像コンテンツ再生のための要求条件を構成要素とし、メタデータプロセッサ 1 Gにおいてデータ化され、所定のプロトコルにしたがって、ユーザ端末 1からコンテンツ配信サーバ 5へ伝送される。図には記載されていないが、一般的には、クエリ情報 1 Eは、ユーザ端末 1からユーザインタフェース 1 Fを介してなされる本システムへの Webアクセスによって、クエリ情報生成のもととなるデータが送信され、それに基づいてコンテンツ配信サーバ 5 へ送信される。あるいは、あらかじめユーザが本システムの提供する映像コンテンッ交換サービスに登録している場合には、プッシュ配信の形でクェリ情報 1 E 生成のもととなるデータを提供するように構成してもよい。ここで、クエリ情報 I E生成のもととなるデータは、例えば、コンテンツデータベース 4に登録されていて、かつ当該ユーザが視聴を許可される映像コンテンッのリスト情報などで表現されてもよいし、本システムを用いたサービス提供者がお勧めメニューを提示してもよいし、あるいはユーザが明示的にキーヮード入力などの形態で新たなクエリを創出できるようにしてもよい。ユーザはこのような情報をもとに、明示的あるいは自動的に自らが要求するコンテンツをクエリ情報 1 Eの形式で送出する。

また、クエリ情報 1 Eには 2種類の情報が含まれる。 1つは視聴希望の映像コンテンッの分類に関する要求条件の情報であり、例えば特定のジャンルのコンテンッを指定するための情報である。また、もう 1つの情報として、コンテンツをどのような形態で視聴したいかというコンテンッ提示形態に関する要求条件の情報がある。後者の情報には、後述するユーザの視聴内容にかかわる嗜好に関する要求条件と、ユーザ端末 1自体が機能仕様として持つコンテンツ再生能力の制約に基づくデータ形式等の要求条件とを含む。以下、前者をコンテンツ分類要求 1 E - 1、後者をコンテンッ視聴形態要求 1 E- 2と記す。

コンテンツ配信サーバ 5では、コンテンツ抽出部 5 Aにおいて、はじめにタエリ情報 1 E中のコンテンツ分類要求 1 E-1に基づいて、コンテンツデータベース 4へ要求分類に属する映像コンテンツの有無を照会する。このため、コンテンツ配信サーバ 5は、コンテンツデータベース 4の中で映像コンテンツを検索し (Sll)、映像コンテンツ検索情報 5 Bを生成する。これによつて、要求分類に該当する映像コンテンツのリストアップがなされる。ここで、照会をかけるコンテンッデータべ一ス 4は、 1箇所に限定されず、複数のコンテンツデータベース 4 への照会が可能なように構成することも可能である。このようにコンテンツデータベース 4を分散配置することで、システム全体の映像コンテンツアクセスの負荷を分散させ、システムを安定化させることが可能である。また、データベースアクセス頻度を低減するため、コンテンツ配信サーバ 5は内部的に、過去にヒットした映像コンテンツリストおよびその分類情報をキャッシュしておくように構成してもよい。これによつて、データベースへの問合せ頻度が低くなるため、ュ一ザへの応答を高速化するとともにシステムの負荷を低減させることが可能である。

コンテンツ抽出部 5 Aにおいてリストアップされた映像コンテンツは、コンテンッ URI リスト 5 Cの形式で、コンテンッ視聴形態要求 1 E-2とともに、コンテンッ加工部 5 Dへ送られる。

コンテンツ加工部 5 Dでは、コンテンツ視聴形態要求 1 E-2に基づいて、 URI リスト 5 Cで指定される視聴候補の映像コンテンツのうち、視聴形態に合わせて提示の必要がある映像コンテンツの全体または一部を、映像コンテンツ取込要求 5 Eによりコンテンツデータベース 4へ要求する。

すると、映像コンテンツ取込要求 5 Eによりコンテンツデータベース 4から、はじめて映像データ 3 Aおよびメタデータ 3 Bからなる映像コンテンツがコンテンッ配信サーバ 5へ取り込まれる。

取り込まれた映像コンテンツ素材は、コンテンツ加工部 5 Dにて、コンテンツ視聴形態要求 1 E - 2に合わせて加工される（Sll)。加工処理は、映像コンテンツに含まれるメタデータ 3 Bと、コンテンツ視聴形態要求 1 E- 2のうち特にユーザの視聴内容または視聴形式にかかわる嗜好に関する要求条件情報、例えば「3分間でダイジェストを見たい」、「〇〇が出演している映像」、「△△の景観を含む情報」などとのマッチングで、取り込まれた映像コンテンツ素材の再生する個所を特定する.ことに該当する。

その結果は、例えば、取り込まれた映像コンテンツの再生個所を SMILなどのマルチメディア再生制御記述データとして記述したり、取り込まれた映像コンテンッをユーザの視聴条件に合わせてメディァ変換する処理、例えばユーザが望む内容を含む代表画像を JPEG形式などの静止画像のグループへ変換する、ユーザが視聴可能な別の映像符号化方式への変換を行う、などによって、最終的な視聴形態へ反映される。

以上の処理で映像コンテンツの提示形態が決定されると、ユーザ端末 1へ配信すべき対象となる映像データがコンテンッ配信部 5 Fへ送られ、コンテンッ配信サーバ 5とユーザ端末 1との間の映像（あるいは画像）メディア配信プロトコルにしたがって要求したユーザ端末 1に対し加工済みの映像コンテンッが配信

(S12) 。

④コンテンツ再生 ·再クエリ処理

前記手順でユーザ端末 1へ配信される映像コンテンッは、図 1および図 4に示すように、ユーザが要求する視聴形態にあわせて加工された映像データ 5 Gと、加工元の映像コンテンツに対応付けられていたメタデータ 5 H とから構成される。映像データ 5 Gは、上述のように、クエリ情報 1 Eとしてコンテンツ配信サーバ 5に伝達された映像符号化方式に対応するデータ形式でユーザ端末 1の映像デコーダ 1 Gへ入力される。復号された映像はユーザインタフェース 1 Fを介して再生される。例えば、映像デコーダ 1 Gが MPEG-4ビデオ符号化方式に対応する場合は、映像データ 5 Gはあらかじめ MPEG - 4ビデオデータ形式で配信されてくる。また、 JPEG画像の復号 '表示のみサポートするユーザ端末 1では、映像データ 5 Gは JPEGによるキーフレーム画像系列のデータとして受信される。さらに別の例では、ユーザ端末 1が SMIL準拠のメディア同期再生をサポートする場合には、コンテンッ配信サーバ 5における映像コンテンツ加工処理結果は SMIL ファイルとしてユーザ端末 1へ伝送され、映像デコーダ 1 Fは SMIL規格にしたがってコンテンツ配信サーバ 5との間で映像データ 5 Gをやりとりする役割を果たす。

メタデータ 5 Hは、メタデータプロセッサ 1においてユーザインタフェース 1

Fへ展開され、配信される映像コンテンツがもともといかなる映像コンテンツの集まりから構成されたかを情報提示するために用いることができる。この情報は、もともとクエリ情報 1 Eを生成するためのもととなった情報として再利用可能であり、これを起点として再度クエリ情報 1 Eを生成しなおして再送することにより、映像コンテンツを再リクエストすることが可能となる（S13)。この仕組みにより、ユーザは、実際に視聴する映像コンテンツだけでなく、その全容をメタデータとして受け取ることができることになる。例えば、視聴した映像コンテンツの一部に絵柄的に類似する別の映像コンテンツを検索したいという要求に対して、前記メタデータに含まれる視聴個所の映像シーンの信号レベル特徴量をトリガとして、検索を実行することが可能である。したがって、システムがユーザ要求にしたがって自動的に加工した映像内容を起点として、ユーザの関心の対象となるすべての映像コンテンツへの再アクセスを円滑に実行することが可能となる。図

1には記載されていないが、さらに、映像データ 5 Gおよびメタデータ 5 Hをォーサリングプロクシ 3へ送信し、映像データ 5 Gの映像解析処理を行うことでメタデータ 5 Hの改訂を行わせるとともに、加工された映像コンテンツそのものを再登録するように構成してもよい。

なお、上述したが下ユーザ端末 1は、必ずしも映像アップロードの機能を持たなくてもよく、例えば、制御情報送受信部 1 Aや映像撮像 '送信部 1 B等を有してなく、映像コンテンツを閲覧するだけの機能をもつユーザ端末をシステム構成要素として含めてもよい。なお、本実施の形態 1に詳細は述べていないが、映像コンテンツへのアクセス権管理は十分になされている必要がある。このようなセキユリティの仕組みは本発明の対象外であり、本発明は十分にセキュアな映像コンテンッ管理運用システムを前提とし、その利便性を高める技術を提供するものである。

従って、本実施の形態 1の映像コンテンツ管理運用システムによれば、多様な映像再生環境が混在するプラットフオーム上で、映像コンテンツを視聴する側の要求条件である端末の映像再生能力やコンテンツ内容に関わる視聴者の嗜好等に基づいて、迅速かつ的確に映像コンテンツを提示する映像コンテンッ管理運用システムを実現することが可能となる。

特に、映像データと対応するメタデータの組で映像コンテンツを管理する仕組みにより、視聴要求に動的に適応した映像コンテンツの加工を行うことが可能となる。実施の形態 2 . (P2Pの IP映像交換システム）

実施の形態 1では、コンテンツデータベース 4は、ユーザ端末 1と分離された構成を説明したが、本実施の形態 2では、 IP網に接続されるユーザ端末 1そのものがコンテンツデータベース 4の機能の一部またはすベてを包含し、他のユーザからの要求に応じて映像コンテンツの交換を行うシステム形態について述べる _c 図 5に、本実施の形態 2におけるユーザ端末 6の内部構成を示す。図 5において、 6 Aはコンテンッデータベース部、 6Bは映像符号化部、 6dはォーサリング部、 6Hはコンテンツ配信部、 6Kはメタデータプロセッサ、 ⁶Mは映像デコーダ、 6Nはユーザィンタフェースである。

次に、本実施の形態 2におけるユーザ端末 6の動作を、実施の形態 1の場合と同様に、コンテンツ登録処理、ォーサリング処理、コンテンツ配信処理、コンテンッ再生処理に分けて説明する。

①コンテンツ登録処理

まず、ユーザ端末 6は、映像データを内部のコンテンツデータベース部 6 Aに登録することにより、端末 6内部で映像データの管理を行う。まず、入力映像が映像符号化部 6 Bを通じてコンテンツデータベース部 6 Aに蓄積される映像データ 6 Cに変換され、ォーサリング部 6 Dへ転送される。

②ォーサリング処理

ォーサリング部 6 Dは、映像データ 6 Cの映像解析処理を行い、映像データ 6 C に関するメタデータの生成を行う。ここで解析処理とは、実施の形態 1に記載した内容と同等の処理であるため、ここでは割愛する。メタデータは、映像解析処理の結果と、コンテンツ登録情報 6 Eを統合することによって生成される。コンテンッ登録情報 6 Eとしては、ユーザが明示的にインプットする情報と、端末が自動的に挿入する情報とがある。前者には、ユーザ名（端末に登録済みならば自動送出可）、撮影した個々の映像のタイトルやジャンルなどがある。後者には、撮影日時、撮影場所（固定端末ならば事前登録で指定可、移動端末であれば GPS などの手段を用いた自動登録が考えられる）、あるいは端末が送出する映像データ 1 Cの映像符号化方式、映像解像度、フレームレート、ビットレートなどメディァに関する属性情報が含まれる。

ォーサリング部 6 Dにおける映像解析処理の結果、映像データ 6 Fとメタデータ 6 Gが出力される。メタデータ 6 Gは、結果的に、前記コンテンツ登録情報 6 E をもととする映像データ 6 Cのコンテンツ全体としての属性情報である映像符号化方式や、解像度、フレームレート、 URI、コンテンツ制作情報など、映像解析処理の結果得られる映像データ 6 Cの時間方向のシーン構成、各シーンの単位で付与されるキーヮード情報や映像信号レベルの特徴量である色や動きなど、といつた要素から構成される。これらの情報は、図 3に示すような、国際標準のマルチメディアメタデータフォーマットである MPEG - 7 に準拠した形式で記述される。ここで、映像データ 6 F、メタデータ 6 Gの組を映像コンテンツと呼び、この単位でコンテンツデータベース部 6 Aにデータが登録される。本実施の形態 2では、映像データ 6 F とメタデータ 6 G とは独立したデータファイルとして扱われ、映像データ 6 Fとメタデータ 6 Gの関連付けは、メタデータ 6 Gに映像データ 6 F の URI情報等を明記することで実現されるものとする。メタデータ 6 Gと映像データ 6 Fとは、多重化されて 1本のストリームもしくは 1つのファイルとして扱われるように管理する構成でもよい。

また、ユーザ端末 6は IP網上の一ノードであり、その内部記憶媒体において所定の管理方法に基づいて映像コンテンツを管理するため、内部記憶媒体に位置付けられた段階で、映像データ 6 Fの URIが決定される。この URI情報は、コンテンッデータベース部 6 Aへのコンテンツ登録時に、メタデータ 6 Gに追記されて登録されるように構成できる。

③コンテンツ配信処理

以上の手順で、ユーザ端末 6内のコンテンツデータベース部 6 Aに登録された映像コンテンツは、外部からのアクセスならびに視聴要求条件に応じて、コンテンッ配信部 6 Hによってアクセスのあった別のユーザ端末へ配信される。すなわち、本実施の形態 2におけるユーザ端末は、ユーザ自らが映像コンテンツを端末 6内に蓄積して管理を行うとともに、他のユーザ端末からの要求に基づいて管理する映像コンテンツを配信するものである。

また、映像コンテンツの配信を要求するユーザは、そのユーザ端末 6に対し、実施の形態 1のコンテンツ配信サーバ 5へ要求するのと同様、自分の望む視聴形態を要求することができる。これにより、従来例に述べた静止画像の交換システムと等価なサービスを、映像コンテンツを対象としてピア · ツー■ ピアのシステムとして構築することが可能である。例えば、ユーザ端末 6は大容量の外部記憶媒体を搭載し、映像撮像結果を格納できるデジタルビデオカメラのような形態を考えることができる。また、コンテンツ配信部 6 Hのように、配信要求への応答のメカニズムを備えることにより、個人ユーザの間で自由に映像情報の交換を行うことが可能となる。ユーザは、映像コンテンツ全体を通して観たい、とレヽぅ場合もあるし、特定の好みの場面だけを集めたダイジエストを観たいという場合もある。また、端末によっては動画再生が不可能な場合、映像コンテンツ中の視聴希望シーンの代表画像（キーフレーム）だけを視聴するといつたことも可能になる。これらの動的な映像コンテンッ提示形態の選択は、映像データに対応付けられたメタデータとユーザからの要求とのマッチングによって実現される。

コンテンッ配信部 6 Hの内部構成は、図 4に示す実施の形態 1のコンテンッ配信サーバ 5の構成と同様である。ただし、コンテンツデータベース 4とのインタラタションは、コンテンツデータベース部 6 Aとの内部的なインタラクションに読み替える必要がある。コンテンツ配信部 6 Hは、コンテンツを要求する他のュ一ザ端末 1からのクエリ情報 1 Eに基づレ、て、コンテンツデータベース部 6 A力ら視聴候補となるコンテンツを特定し、それらをクエリ情報 1 Eで要求される視聴形態に加工した結果を、映像データ 6 1、メタデータ 6 Jとして配信する。

すると、実施の形態 1でも説明したように、配信を受けたユーザ端末 1は、メタデータ 6 Jに基づいて、再度クエリ情報を再作成してコンテンツを再要求することが可能である。

④コンテンツ再生処理

ユーザ端末 6は、メタデータプロセッサ 6 K、映像デコーダ 6 Μを備えることにより、内部のコンテンツデータベース部 6 Αに蓄積される映像コンテンツを様々に加工して視聴できるとともに、別のユーザ端末へコンテンツ配信を要求することができる。また、クエリ情報 6 Lに基づいて、コンテンツデータベース部 6 Aまたは他のユーザ端末へ映像コンテンツを要求することにより、映像データとメタデータを受け取ることができる。

従って、本実施の形態 2によれば、ユーザ端末 6に実施の形態 1のコンテンツ配信サーバ 5とコンテンツデータベース 4と同等の機能を持たせるようにしたので、従来のクライアント 'サーバモデルに依存せず、映像コンテンツを保有する複数のユーザ端末間で柔軟な映像コンテンッの交換を実現することが可能となる _c 実施の形態 3 . (ホームサーバモデル）

本実施の形態 3では、映像コンテンツ管理運用システムの事例として、蓄積型放送対応の受信機を例に挙げてその構成について述べる。本実施の形態 3では、実施の形態 1および 2で述べた MPEG- 7メタデータと共通のフォーマットを持つメタデータが放送用映像コンテンツに付与されているケースを想定し、その放送用映像コンテンツを受信機内に蓄積して、受信機内部に蓄積された放送用映像コンテンッの中からユーザが望む映像コンテンツを種々の再生条件に応じて迅速かつ的確に提示する装置構成を提供する。

図 6に、本実施の形態 3における蓄積型放送対応受信機 7の内部構成を示す。図 6において、 7 Cはコンテンツデータベース部、 7 Dは映像符号化部、 7Eはメタデータプロセッサ、 71は映像デコーダ、 7： [はユーザインタフェースである。次に、本実施の形態 3の蓄積型放送対応の受信機 7の動作を、コンテンツ蓄積処理、コンテンツ再生処理とに分けて

説明する。

①コ

受信機 7は、図 1等に示す実施の形態 1のコンテンツ配信サーバは、図 5などに示すユーザ端末 6等から映像データ 7 Aおよびメタデータ 7 Bからなる放送用映像コンテンツを受信して、コンテンツデータベース部 7 Cに蓄積する。メタデータ 7 Bは、実施の形態 1および 2で記載した MPEG- 7準拠メタデータ（図 3参照）に準ずるものとする。

②コンテンツ再生処理

コンテンツデータベース部 7 Cに登録された映像コンテンツは、ユーザの視聴要求条件に応じて、本受信機 7に接続される映像モニタ（図示せず）に表示される。ユーザの視聴要求条件としては、映像コンテンツ全体を通して観たい、という場合もあるし、特定の好みの場面だけを集めたダイジエストを観たいという場合もある。また、映像コンテンツ中の視聴希望シーンの代表画像（キーフレーム）だけを視聴するといつた要求もある。これらの動的な映像コンテンツ提示形態の選択は、映像データに対応付けられたメタデータとユーザからの要求とのマッチングによって実現される。また、特定の好みの場面だけを集める等のコ加工処理は、コンテンツ加工部 7 Dによって行われる。

コンテンッ加工部 7 Dの内部構成のほとんどは、図 4に示すコンテンツ配信サーバ 5の構成と同様であるが、表示系の映像モニタがネットワークを介して接続されない場合は、コンテンツ配信部 5 Fは不要である。また、図 4に示す示すコンテンッ配信サーバ 5におけるコンテンツデータベース 4とのインタラクションは、コンテンツデータベース部 7 C との内部的なインタラクションに読み替える必要がある。

コンテンツ加工部 7 Dは、ユーザインタフェース 7 Jを介しユーザからユーザ嗜好などの要求情報がメタデータプロセッサ 7 Eへ入力すると、メタデータプロセッサ 7 Eにてクエリ情報 7 Fが生成されてコンテンッ加工部 7 Dに入力するので、コンテンツ加工部 7 Dは、そのクエリ情報 7 Fに基づいて、コンテンツデータベース部 7 Cにて視聴候補となるコンテンツを特定し、それらをクエリ情報 7 Fで要求される視聴形態に加工した結果を、映像データ 7 G、メタデータ 7 Hとして出力する。映像データ 7 Gは映像デコーダ 7 1によってユーザィンタフェース 7 J等を介し映像モニタ（図示せず）上に再生される一方、メタデータ 7 Hはメタデータプロセッサ 7 Eに入力して再クエリ情報の素材として利用することが可能である。映像デコーダ 7 1は、様々な視聴形態に対応できるよう、多様な映像フォーマツトに対応するマルチフォーマツトデコーダ、例えば、 MPEG- 2と MPEG- 4や、 MPEG - 2と JPEGなどを備えていてもよい。

なお、前記説明では、図 6に示すように放送用映像コンテンツを入力とするシステムについて述べたが、図 7に示すように、放送用映像コンテンツは、 DVD等の記録媒体に記録された映像コンテンッと解釈することもできる。この場合は、コンテンツデータベース部 7 Cは、そのまま DVD再生部と解釈される。 DVD再生部は、装置内の口一カルな記憶媒体の代わりに、 DVDそのものを記憶媒体とみなし、コンテンツ加工部 7 Dからの要求に基づいて、加工対象となる映像コンテンッを出力する機能を持つ。その他の構成は前記図 6に示したシステムの動作と同じである。さらに、図 8に示すように、本実施の形態 4における受信機 7は、図 6や図 7 に示す映像データ 7 Aおよびメタデータ 7 Bからなる放送用映像コンテンツや記録媒体記録映像コンテンツの外部からの映像入力する機能と（ただし、図 8の場合、図 6に示す放送用映像コンテンツ入力場合を示している）、図 5に示す実施の形態 2のユーザ末 6のように映像符号化部 6Βと、ォーサリング部 6 Dとによるォーサリング機能とを備えることにより、ォーサリング機能によりユーザが自ら制作した映像コンテンツを、放送用映像コンテンツと同様に扱うことが可能となる。同図において、映像符号化部 6 Β、映像データ 6 C、ォーサリング部 6 D は、図 5に示す実施の形態 2のユーザ端末 6の同一名称の部材と等価な機能であるため、同一の番号を付与した。

従って、本実施の形態 3によれば、実施の形態 1や実施の形態 2で述べた MPEG- 7メタデータと共通のフォーマツトを持つメタデータが放送用映像コンテンッに付与されているケースを想定し、その放送用映像コンテンッを受信機 7内に蓄積して、受信機 7内部に蓄積された放送用映像コンテンツの中からユーザが望む映像コンテンッを種々の再生条件に応じて迅速かつ的確に提示するようにしたので、例えば宅内の受信機 7内に蓄積される映像コンテンツを、宅内あるいは屋外などのユーザのあらゆる視聴条件に適応して柔軟に映像コンテンツを提示するシステムを実現することが可能となる。

また、以上説明したシステムは、インターネット接続および映像配信のための IPプロトコル群（RTP/UDP/IP、 TCP/IP、 RTSPなど）をサポートすることにより、「映像データ 7 Aおよびメタデータ 7 Bからなる放送用映像コンテンツ」を、「インターネット配信用映像コンテンツ」に読み替えたシステムとして構成することができる。

さらに、図 5に示す実施の形態 2のユーザ端末 6のコンテンツ配信部 6 Hの機能を備えることにより、宅内もしくは屋外の IP接続された別端末へ映像を配信する機能を実現することができる。このようなシステムにより、データベースに蓄積される映像コンテンツを、いつでもどこでも、動的に変化する視聴条件、例えば端末種別、場所、時間、視聴形態に関する嗜好などに適応させて視聴可能とするシステムを構築することが可能となる。発明の効果

以上説明したように、本発明によれば、映像データと、その映像データに関するメタデータとからなる映像コンテンツを送出する際、その映像コンテンツの提示形態に関する要求条件に基づいて、提示候補となる 1つまたは複数の映像コンテンッを抽出し、前記映像コンテンツの提示形態に関する要求条件と前記抽出された映像コンテンツのメタデータとに基づいて、当該抽出された映像コンテンツから提示すベき形態の映像コンテンツへ加工して、その加工した映像コンテンツを所定のプロトコルに従って送出するようにしたので、多様な映像再生環境が混在するプラットフオーム上で、映像コンテンツを視聴する側の要求条件に基づいて、迅速かつ的確に映像コンテンツを提示することが可能となる。特に、映像データと対応するメタデータの組で映像コンテンツを管理する仕組みにより、視聴要求に動的に適応した映像コンテンツの加工を行うことが可能となる。

また、本発明では、映像データの解析処理を行って映像データに関するメタデータを生成し、映像データと生成されたその映像データに関するメタデータとからなる映像コンテンツを蓄積するようにしたので、その蓄積された放送用映像コンテンッの中からユーザが望む映像コンテンツを種々の再生条件に応じて迅速かつ的確に提示ことができ、例えば宅内の受信機 7内に蓄積される映像コンテンッを、宅内.あるいは屋外などのユーザのあらゆる視聴条件に適応して柔軟に映像コンテンッを提示するシステムを実現することが可能となると一方、その映像データを配信する機能をさらに付与すれば、従来のクライアント ·サーバモデルに依存せず、映像コンテンツを保有する複数のユーザ間で柔軟な映像コンテンツの交換を実現することが可能となる。産業上の利用の可能十生

膨大な映像コンテンツの中から所望の映像を多様な再生環境が混在するプラットフオーム上で、迅速かつ的確に提示するために映像コンテンツを一括管理運用するシステムに適用され、特に、デジタル映像情報の管理'運用 '加工に関わるシステム構築技術に必要な映像コンテンッ送出装置およびその方法、映像コンテンッ蓄積装置、映像コンテンツ再生装置およびその方法、メタデータ生成装置、映像コンテンツ管理運用方法に適用される。

Claims

請求の範囲

1 . 映像データと、その映像データに関するメタデータとからなる映像コンテンッを送出する映像コンテンツ送出装置であって、

前記映像コンテンツの提示形態に関する要求条件に基づいて、提示候補となる

1つまたは複数の映像コンテンツを抽出するコンテンツ抽出部と、

前記映像コンテンツの提示形態に関する要求条件と前記抽出された映像コンテンッのメタデータとに基づいて、当該抽出された映像コンテンツから提示すべき形態の映像コンテンツへ加工するコンテンッ加工部と、

を有し、前記加工された映像コンテンツを所定のプロトコルに従って送出する、ことを特徴とする映像コンテンツ送出装置。

2 . 前記映像コンテンツの提示形態に関する要求条件として、少なくとも、視聴希望の映像コンテンツの分類に関する要求条件と、

映像コンテンツの形式の嗜好に関する要求条件と、

映像コンテンツのデータ形式に関する要求条件とを含むことを特徴とする請求項 1記載の映像コンテンッ送出装置。

3 . 前記メタデータは、少なくとも、対応する映像データのコンテンツ全体概要と、シーン構成の記述とを含むメタデータであり、

前記コンテンッ抽出部は、前記映像コンテンッの提示形態に関する要求条件のうちの前記映像コンテンツの分類に関する要求条件と、前記コンテンツ全体概要を記述するメタデータとのマッチングによって、提示候補となる 1つまたは複数の映像コンテンツを抽出し、

前記コンテンッ加工部は、前記映像コンテンッの提示形態に関する要求条件のうちの前記映像コンテンツの形式の嗜好に関する要求条件と、前記シーン構成を記述するメタデータとのマッチングによって、提示すベき映像コンテンツ部位を特定し、提示すべき形態の映像コンテンツへ加工することを特徴とする請求項 2 記載の映像コンテンツ送出装置。

4 . 前記メタデータは、少なくとも、対応する映像データのコンテンツ全体概要と、シーン構成と、メディア属性の記述とを含むメタデータであり、

前記コンテンツ抽出部は、前記映像コンテンツの提示形態に関する要求条件のうちの前記映像コンテンツの分類に関する要求条件と、前記コンテンツ全体概要を記述するメタデータとのマッチングによって、提示候補となる 1つまたは複数の映像コンテンツを抽出し、

前記コンテンツ加工部は、前記映像コンテンツの提示形態に関する要求条件のうちの前記映像コンテンツの形式の嗜好に関する要求条件と、前記シーン構成を記述するメタデータとのマッチングによって、提示すべき映像コンテンツ部位を特定し、提示すべき形態の映像コンテンツへ加工すると共に、加工した映像コンテンッを前記メディア属性を記述するメタデータに基づいて映像コンテンツのメディアフォーマツトを参照し、前記映像コンテンツの提示形態に関する要求条件のうちの前記映像コンテンツのデータ形式に関する要求条件で指定される再生メディアフォーマット形式へ変換することを特徴とする請求項 2記載の映像コンテンッ送出装置。

5 . さらに、

映像データの解析処理を行って映像データに関するメタデータを生成するメタデータ生成部と、

映像データと前記生成されたその映像データに関するメタデータとからなる映像コンテンツを蓄積する映像コンテンツ蓄積部とを有することを特徴とする請求項 1〜請求項 4のいずれかの請求項に記載の映像コンテンツ送出装置。

6 . 映像データと、その映像データに関するメタデータとからなる映像コンテンッを送出する際の映像コンテンツ送出方法であって、

前記映像コンテンツの提示形態に関する要求条件に基づいて、提示候補となる 1つまたは複数の映像コンテンツを抽出し、前記映像コンテンツの提示形態に関する要求条件と前記抽出された映像コンテンッのメタデータとに基づいて、当該抽出された映像コンテンツから提示すべき形態の映像コンテンツへ加工して、その加工した映像コンテンツを所定のプロトコルに従って送出する、

ことを特徴とする映像コンテンッ送出方法。

7 . 請求項 1〜 4いずれかの請求項に記載の映像コンテンツ送出装置の前記コンテンッ抽出部が抽出する映像コンテンツを蓄積したことを特徴とする映像コンテンッ蓄積装置。

8 . 映像データと、その映像データに関するメタデータとからなる映像コンテンッを要求し受信して再生する映像コンテンッ再生装置であって、

映像コンテンツの提示形態に関する要求条件を生成して映像コンテンツの要求を行う映像コンテンッ要求部と、

その要求条件に従レ、提示形態に加工された映像コンテンツを受信して当該映像コンテンッの映像データを復号再生する映像復号再生部と、

を有することを特徴とする映像コンテンツ再生装置。

9 . 前記映像コンテンツの提示形態に関する要求条件として、少なくとも、視聴希望の映像コンテンツの分類に関する要求条件と、

映像コンテンツの形式の嗜好に関する要求条件と、

映像コンテンツのデータ形式に関する要求条件とを含むことを特徴とする請求項 8記載の映像コンテンッ再生装置。

1 0 . 前記映像コンテンツ要求部は、受信した映像コンテンツのメタデータに基づいて、映像コンテンッ要求条件を再生成して要求することを特徴とする請求項 8または請求項 9記載の映像コンテンツ再生装置。

1 1 . 受信した映像コンテンツのメタデータは、少なくとも、映像コンテンツのシーン構成と、個々のシーンの映像信号に関する特徴量を記述するメタデータを含み、

前記映像コンテンツ要求部は、個々のシーンの映像信号に関する特徴量を記述するメタデータに基づいて、映像コンテンッ要求条件を再生成して要求することを特徴とする請求項 8〜 1 0 、ずれかの請求項に記載の記載の映像コンテンツ再

1 2 . さらに、映像コンテンツの構成要素となる映像データを送信する映像送信部を有することを特徴とする請求項 8〜請求項 1 1のいずれかの請求項に記載の映像コンテンツ再生装置。

1 3 . 映像データと、その映像データに関するメタデータとからなる映像コンテンッを要求し受信して再生する際の映像コンテンツ再生方法であって、

映像コンテンツの提示形態に関する要求条件を生成して映像コンテンッの要求を行ない、その要求条件に従い提示形態に加工された映像コンテンツを受信して当該映像コンテンツの映像データを復号再生する、

ことを特徴とする映像コンテンッ再生方法。

1 4 . 映像コンテンツの構成要素となる映像データを受信すると、

受信した映像コンテンツに対して信号処理を施し、少なくとも、映像コンテンッのシーン構成と、個々のシーンの映像信号に関する特徴量を記述するメタデータとを生成し、

前記信号処理を施した映像データと、前記生成したメタデータを組にして映像コンテンツ蓄積装置に登録することを特徴とするメタデータ生成装置。

1 5 . 映像データと、その映像データに関するメタデータとからなる映像コンテンッを管理運用する際のコンテンツ管理運用方法であって、映像コンテンツの提示形態に関する要求条件を生成して映像コンテンツの要求があると、前記映像コンテンツの提示形態に関する要求条件に基づいて、提示候捕となる 1つまたは複数の映像コンテンツを抽出し、前記映像コンテンツの提示形態に関する要求条件と前記抽出された映像コンテンツのメタデータとに基づいて、当該抽出された映像コンテンツから提示すベき形態の映像コンテンツへ加工して、その加工した映像コンテンツを所定のプロトコルに従って映像コンテンツ再生装置へ送出し、当該映像コンテンツ再生装置に配信した映像コンテンツを受信させて当該映像コンテンツの映像データを復号再生させる、

ことを特徴とする映像コンテンツ管理運用方法。