WO2001097044A1

WO2001097044A1 - Dispositif et procede de recherche/distribution de contenu

Info

Publication number: WO2001097044A1
Application number: PCT/JP2001/004074
Authority: WO
Inventors: Kazuo Sugimoto; Yoshimi Moriya; Yoshihisa Yamada; Kohtaro Asai; Hirofumi Nishikawa; Tokumichi Murakami
Original assignee: Mitsubishi Denki Kabushiki Kaisha
Priority date: 2000-06-14
Filing date: 2001-05-16
Publication date: 2001-12-20
Also published as: US20020107850A1; CA2376266A1; US7310628B2; KR100515542B1; JP2001357008A; CN1196063C; EP1291777A1; EP1291777A4; KR20020020961A; AU5676401A; CN1383512A; TW512632B

Description

明細書コンテンヅ検索配信装置およびコンテンヅ検索配信方法技術分野

この発明は、アナログまたはデジタルで記録された映像情報などのコンテンッから特徴量や付加情報などを抽出して登録用メ夕デ一夕とし、当該登録用メ夕デ一夕を利用してコンテンツの検索を行い、検索の結果得られたコンテンッを端末装置の処理能力に応じて変換し、この変換されたコンテンヅを端末が接続されているネットワークの種類に応じた通信手段を用いて配信するコンテンツ検索配信装置およびコンテンヅ検索配信方法に関するものである。背景技術

従来のネヅトワーク上のコンテンツ検索配信システムとして、例えば「ネットワーク型マルチメディァ情報の媒介を目指した公開型画像デー夕ペース G I R L S」（信学技報， H I 6 7— 6， 1 9 9 6年）に記載されたシステムがある。このシステムはインターネヅト上に散在する画像を収集し、自動的にデータベースを構築し、構築したデ一夕ペースから所望の画像を検索し配信するシステムである。

このシステムでは、サーバ側でデ一夕ベース検索を行う際、デ一夕べ —スに登録されている画像特徴に基づいてユーザからの要求に近い画像を検索し、ユーザ側では、 P C(P e r s o n a l C ompu t e r ) やワークステーションなどで、検索の結果得られた画像を閲覧するようにしている。

従来のコンテンヅ検索配信システムは以上のように構成されているので、検索の結果得られたコンテンヅを受信する端末装置がィン夕一ネット上に接続された P Cやワークステ一ションなどのほぼ同一の処理能力をもつ端末であることを想定し、検索の結果得られたコンテンッはある決められたフォーマツトでのみしか配信されないため、異なる各種のネットワークや、処理能力の異なる各種の端末、例えば、携帯電話ゃテレビ電話、 P C等では、容易に検索の結果得られたコンテンツを閲覧できない等の課題があった。

この発明は上記のような課題を解決するためになされたもので、検索の結果得られたコンテンヅゃ検索結果リストを電話回線や無線などの各種のネットワークを通じて、処理能力の異なる各種の端末、例えば、携帯電話やテレビ電話、 P C(P e r s o na l C ompu t e r )などに応じたフォーマヅトで配信することができるコンテンヅ検索配信装置およびコンテンヅ検索配信方法を得ることを目的とする。発明の開示

この発明に係るコンテンヅ検索配信装置は、コンテンヅやその付加情報等が格納されたデ一夕ペースを端末装置からの情報に基づき検索し、検索の結果抽出したデ一夕を上記端末装置へ配信するコンテンツ検索配信装置であって、検索の結果抽出したデータを端末装置の処理能力に応じて編集し端末装置へ配信するものである。

このことによって、データベースから抽出したデ一夕を、データの処理能力が異なる各種の端末にて容易に出力することができるという効果を奏する。

この発明に係るコンテンヅ検索配信装置は、端末装置からの情報に基づきデータべ一スを検索し、検索の結果得られたコンテンヅの付加情報を抽出して、その付加情報が掲載された検索結果リストを出力するコンテンヅ検索部と、端末装置からの情報に基づきコンテンツ検索部からの検索結果リストを端末装置の処理能力に応じて当該端末装置で表示できる形態に編集する検索結果リスト編集部と、検索結果リスト編集部によつて編集された検索結果リストを端末装置へ配信する検索結果リスト配信部とを有するものである。

このことによって、デ一夕べ一スから抽出したコンテンヅゃ検索結果リストを処理能力が異なる各種の端末にて容易に出力することができるという効果を奏する。

この発明に係るコンテンツ検索配信装置は、データベースが、付加情報として重みの付けられた登録用メタデ一夕を蓄積しており、コンテンッ検索部が、端末装置からの情報に基づき登録用メタデータを参照してデータベースを検索し、検索の結果得られたコンテンツの付加情報を抽出するものである。

このことによって、デ一夕ベースから抽出したコンテンヅゃ検索結果リストを処理能力が異なる各種の端末にて容易に出力することができると共に、高速に検索できるという効果を奏する。

この発明に係るコンテンッ検索配信装置は、端末装置からの情報に基づきコンテンヅ検索用のメ夕デ一夕を生成してコンテンヅ検索部へ出力する検索用メ夕デ一夕生成部を有し、コンテンヅ検索部は、端末装置からの情報と検索用メ夕デ一夕生成部からのメ夕デ一夕に基づきデ一夕べースを検索し、検索の結果得られたコンテンヅの付加情報を抽出して、その付加情報が掲載された検索結果リストを出力するものである。

このことによって、端末装置側には検索用メタデ一夕生成部を備えていなくてもよいので、端末装置の回路規模を小さくすることができるという効果を奏する。

この発明に係るコンテンツ検索配信装置は、端末装置からの情報に基づきデ一夕ベースからコンテンヅを読み出し、読み出したコンテンヅを端末装置の処理能力に応じて当該端末装置で処理できる形態に編集する出力コンテンッ編集部と、出力コンテンヅ編集部によって編集されたコンテンヅを端末装置へ配信するコンテンヅ配信部とを有するものであるこのことによって、データベースから抽出したコンテンヅゃ検索結果リストを処理能力が異なる各種の端末にて容易に出力することができるという効果を奏する。

この発明に係るコンテンヅ検索配信装置は、データベースが、コンテンヅと当該コンテンッの登録用メ夕データとを蓄積している場合と、コンテンッへのリンク情報とそのコンテンヅの登録用メ夕データとを蓄積している場合があり、出力コンテンヅ編集部が、さらに、端末装置からの情報に基づきデータベースからリンク情報を読み出し、そのリンク情報に基づきコンテンヅを読み出すものである。

このことによって、データベースがコンテンヅの代わりに当該コンテンヅのリンク倩報を蓄積するから、デ一夕べ一スにより多くのコンテンヅを登録できるという効果を奏する。

この発明に係るコンテンッ検索配信方法は、コンテンッやその付加情報等が格納されたデ一夕ベースを端末装置からの情報に基づき検索し、検索の結果抽出したデータを端末装置へ配信する際のコンテンヅ検索配信方法であって、検索の結果抽出したデータを端末装置の処理能力に応じて編集し端末装置へ配信するものである。

このことによって、デ一夕ベースから抽出したデータを、デ一夕の処理能力が異なる各種の端末にて容易に出力することができるという効果を奏する。図面の簡単な説明

第 1図は、本発明のコンテンヅ検索配信システムの全体構成を示す図である。

第 2図は、実施の形態 1のコンテンヅ検索配信装置 Aの構成を示す図である。

第 3図は、実施の形態 1のコンテンヅ検索配信装置 Aにおいて新規のコンテンツをデータベース Bに登録する入力データ登録部 1の処理を示すフ口一チヤ一トである。

第 4図は、実施の形態 1のコンテンッ検索配信装置 Aにおける検索配信サービス部 5の処理を示すフローチャートである。

第 5図は、実施の形態 1の画像検索配信システムの端末装置 Dの構成を示す図である。

第 6図は、実施の形態 1のコンテンヅ検索配信システムにおける端末装置 Dの処理を示すフ口一チャートである。

第 7図は、（ a ) , ( b ) 共に、端末装置 Dの検索結果リスト表示部 3 1に表示される検索結果の一例を示す図である。

第 8図は、実施の形態 2のコンテンツ検索配信装置 Aに対応する端末装置 Dの構成を示す図である。

第 9図は、実施の形態 2のコンテンツ検索配信装置 Aの構成を示す図である。

第 1 0図は、実施の形態 3のコンテンツ検索配信装置 Aの構成を示す図である。

第 1 1図は、実施の形態 3のコンテンツ検索配信装置 Aにおいて新規のコンテンツをデ一夕ベース Bに登録する入力デ一夕登録部 1の処理を示すフロ一チヤ一トである。

第 1 2図は、実施の形態 3のコンテンツ検索配信装置 Aの検索配信サ —ビス部 5の処理を示すフローチャートである。

第 1 3図は、実施の形態 4における重み係数テーブルの一例を示す図である。発明を実施するための最良の形態

以下、この発明をより詳細に説明するために、この発明を実施するための最良の形態について、添付の図面に従ってこれを説明する。

実施の形態 1 .

第 1図は、コンテンヅ検索配信システムの全体構成を示す図である。第 1図において、 Aはサーバ等からなる本発明に係るコンテンツ検索配信装置、 Bは各種コンテンヅやその登録用メ夕デ一夕が格納されるデ一夕ペース、 Cはインタ一ネットや I S D N等の電話回線，無線，専用ケ一ブル，地上波ノ衛星 T V放送網などの各種のネットワーク、 Dはコンテンヅ検索配信装置 Aから見るとクライアントに相当する P Cゃ携帯電話、携帯情報端末、デジタルテレビなどの処理能力の異なる各種の端末装置である。

このようなコンテンツ検索配信システムでは、例えば、 P C等の端末装置 Dは L A N等を通じてィン夕一ネット等のネットワーク Cに接続し、また別の端末装置 Dは I S D Nなどの既存の電話回線を通じてィン夕 —ネット等のネットワーク Cに接続し、携帯電話や携帯情報端末等の端末装置 Dは無線系のネットヮ一ク Cに接続し、デジタルテレビ等の端末装置 Dは地上波 Z衛星 T V放送網等のネットワーク Cに接続することが可能である。

第 2図は、この発明の実施の形態 1によるコンテンツ検索配信装置 A の構成を示す図である。第 2図において、 1はコンテンツを入力してメ夕デ一夕を付加しデータベースに入力する入力デ一夕登録部、 2はデー夕ペース Bに登録するコンテンッを入力するデータ入力部、 3はデータ入力部 2に入力したコンテンツからその特徴量や付加情報などを抽出し、抽出した情報を登録用メ夕データとしてコンテンヅに付加する登録用メタデータ生成部である。尚、登録用メ夕デ一夕生成部 3で生成された登録用メ夕デ一夕およびコンテンツはデ一夕ベース Bに蓄積される。

ここで、登録用メタデータ生成部 3は、「コンテンツの特徴量」として、例えば画像の色情報や、画像のテクスチャ情報、動き情報、ォブジェクト形状情報、音声の周波数特性情報、音の大きさに関する情報、音源に関する情報、音声の言語認識情報のいずれか少なくとも一つを含むコンテンヅの特徴量を抽出するものである。また、登録用メ夕デ一夕生成部 3は、「コンテンヅの付加情報 j として、画像の符号化方式、画像のビットレ一ト、画像のフレームレート、画像の解像度、画像の時空間階層化情報などの画像フォーマツトに関する情報、音声の符号化方式、音声のビットレート、コンテンッを構成する要素（画像，音声，テキストなど）の記述情報、コンテンヅの著作権に関する情報、コンテンヅの頒布条件（有償 Z無償など）に関する情報、コンテンツのファイルサイズ、コンテンヅのファイル名、コンテンツの識別番号、コンテンヅ制作者に関するテキスト情報、コンテンツの制作された時刻情報、画像のサムネイル、画像の一部分、音声の一部分のいずれか少なくとも一つを含むコンテンヅの付加情報を抽出するものである。

また、第 2図において、 5はデータベース Bからュ一ザの要求に合つたコンテンヅを検索し、検索の結果得られたコンテンツのリストを端末装置 Dの能力に応じて変換して出力し、ユーザがリストの中から指定するコンテンヅを端末装置 Dで処理できる形態に変換して配信する検索配信サービス部、 6は端末装置 Dから検索を要求する信号やユーザが出力を要求するコンテンヅの識別情報などのユーザ要求のユーザ要求を入力するュ一ザ要求入力部、 7はユーザの指定する検索キーを端末装置 Dより入力する検索キー入力部、 8は端末装置 Dよりユーザ識別情報や端末装置 Dに関するユーザ情報を入力するユーザ情報入力部、 9はユーザ情報入力部 8に入力されたユーザ識別情報や端末装置 Dに関するユーザ情報から端末装置 Dの処理能力に関する情報を端末能力情報として取得する端末能力情報取得部、 1 0は検索キー入力部 7で入力された検索キ一に合致または類似するコンテンヅを、デ一夕ペース Bから検索し、検索の結果選ばれた一つまたは複数のコンテンヅに関する登録用メ夕デ一夕等の情報のリストを検索結果リストとして出力するコンテンヅ検索部である。

また、第 2図において、 1 1は端末能力情報取得部 9で得られた端末能力情報に基づいて、コンテンヅ検索部 1 0より出力された検索結果リストを、端末装置 Dで表示できる形態に編集して出力する検索結果リスト編集部、 1 2は検索結果リスト編集部 1 1より出力された編集後の検索結果リストをユーザに出力する検索結果リスト配信部、 1 3はユーザがュ一ザ要求入力部 6を介して指定したコンテンヅをデータベース Bより入力し、端末能力情報取得部 9で得られた端末能力情報を入力し、デ一夕ペース Bより読み出したコンテンヅを端末装置 Dで処理できる形態に変換するなどの編集処理を行い出力する出力コンテンヅ編集部、 1 4 は出力コンテンヅ編集部 1 3より出力された編集後のコンテンヅを端末装置 Dに配信するコンテンヅ配信部である。

尚、第 2図に示す例では、入力データ登録部 1 と検索配信サービス部 5 とがコンテンツ検索配信装置 Aを構成しているが、本発明では、これに限らず、入力データ登録部 1 と検索配信サービス部 5 とデータベース Bとによりコンテンヅ検索配信装置 Aを構成するようにしても良いし、また、検索配信サービス部 5のみによりコンテンヅ検索配信装置 Aを構成するようにしても良い。

次に動作を説明する。

まず、入力デ一夕登録部 1の処理について詳述する。

第 3図は、本実施の形態 1のコンテンヅ検索配信装置 Aにおいて新規のコンテンツをデータべ一ス Bに登録する入力データ登録部 1の処理を示すフローチャートである。

まず、データ入力部 2は、ネットワーク Cを介してコンテンヅを入力するためのイン夕フェースと、ネットワーク Cを介さずに直接入力するためのィン夕フェースのうち一つまたは両方を有しており、いずれかの方法で外部よりコンテンツを入力し、登録用メタデ一夕生成部 3へ出力する（ステップ S T 1 )。

ここで、新規のコンテンヅは、端末装置 Dよりネットワーク Cを介してこの入力デ一夕登録部 1に対し送信される場合や、この入力データ登録部 1を有するコンテンヅ検索配信装置 Aにおいて直接入力される等、各種場合がある。例えば、端末装置 Dから送信される場合としては、力メラを有する携帯電話で撮った画像や音声などのコンテンヅを登録する場合や、メールなどで受信した画像や音声などのコンテンヅをコンテンヅ検索配信装置 Aに登録する場合などが考えられる。また、コンテンツ検索配信装置 Aに直接入力される場合としては、カメラやビデオカメラ、 P Cなどの出力端子をコンテンツ検索配信装置 Aの入力端子（図示せず。）に直接接続してデ一夕入力部 2を介し入力する場合などが考えられる。このため、デ一夕入力部 2は、上述のように、ネットワーク Cを介してコンテンヅを入力するためのィン夕フエースと、ネヅトワーク C を介さずに直接入力するためのイン夕フェースのうち一つまたは両方を有している。

登録用メ夕デ一夕生成部 3では、読み出したコンテンツからその特徴量や付加情報などの情報を抽出する（ステップ S T 2 )。ここで、抽出される特徴量としては、例えば読み出したコンテンヅに含まれる画像の色やテクスチャ、動き、形状、読み出したコンテンツに含まれる音声の周波数特性などがある。その他、読み出したコンテンツの特徴を記述したキーワードや読み出したコンテンヅに対する付加的な情報が付加される

また、付加情報としては、例えばコンテンツに含まれる画像の符号化方式（MP EG— 1， MP E G— 2 , MP E G— 4， J P EG, G I F ， BMPなど）、ビットレート、フレームレート、解像度、画像の時空間階層化情報などの画像フォーマツトに関する情報や、コンテンツに含まれる音声の符号化方式（G SM— AMR， MP E G— 1 , MP E G— 2 , MPE G— 4など）、ビットレート、コンテンツを構成する要素（画像，音声，テキスト，ソフトゥヱァ）の記述、コンテンヅの著作権に関する情報、読み出したコンテンツの頒布条件（有償 Z無償など）に関する情報、コンテンヅのファイルサイズ、ファイル名、 I D番号、作成者に関する情報、作成された時刻情報、コンテンツに含まれる画像のサムネイル、画像の一部分、音声の一部分などがある。

次に、登録用メタデータ生成部 3は、上述のようにして抽出したコンテンヅの特徴量や付加情報等を用いて、例えば M P E G— 7で規定されるフォ一マツトなどのように、あらかじめ定義されたフォーマツトに従つて記述された登録用メ夕デ一夕（特徴記述子）を生成し（ステップ S T 3 )、生成した登録用メ夕デ一夕を対応するコンテンヅに付加して、そのコンテンヅおよび登録用メ夕デ一夕をデ一夕ペース Bに蓄積する（ステップ S T 4 )。

次に検索配信サービス部 5の処理について詳述する。

第 4図は、本実施の形態 1のコンテンツ検索配信装置 Aにおける検索配信サービス部 5の処理を示すフローチヤ一トである。

まず、端末装置 Dからユーザ情報入力部 8にユーザに関する情報が入力される（ステヅプ S T 1 1 )。ユーザに関ずる情報としては、例えば、ユーザ名、ュ一ザ登録番号、ユーザが所属するグループ名などのュ一ザ識別情報、端末装置 Dの種類、端末装置 Dの処理能力に関する情報などである。

次に、端末装置 Dから検索キーが検索キー入力部 7に入力され（ステヅプ S T 1 2 )、続いて、端末装置 Dから検索を要求する信号がユーザ要求入力部 6に入力される（ステップ S T 1 3 ) 。ここで、検索キーとしては、例えば、キーワードや、コンテンツの特徴量や付加情報を記述した登録用メ夕デ一夕、コンテンッに含まれる画像や音声などのフアイルフォ一マツト、解像度、ファイルサイズなどがある。

検索要求信号および検索キーが入力されると、コンテンツ検索部 1 0 は、その検索キーと、デ一夕ベース Bに含まれる登録用メタデータに記述されたキーヮードゃ特徴量とをマッチング処理して（ステップ S T 1 4 )、検索キーと合致または類似する一つまたは複数のコンテンヅを検索して、検索の結果得られた一つまたは複数のコンテンヅと共に蓄積されている登録用メ夕デ一夕等の付加情報を抽出して、検索結果リストとして検索結果リスト編集部 1 1へ出力する（ステップ S T 1 5 )。

ここで、検索結果リストに掲載される情報としては、例えばコンテンヅに含まれる画像の符号化方式（MPE G— 1， MP E G— 2 , M P E G— 4， J P E G, G I F, BMP等）や、ビヅトレ一ト、フレ一ムレ —ト、解像度、画像の時空間階層化情報等の画像フォーマットに関する情報、コンテンツに含まれる音声の符号化方式（G SM— AMR， MP E G— 1， MP E G— 2 , MPE G— 4等）、ビットレート、コンテンヅを構成する要素（画像，音声，テキスト，ソフトウェア）の記述、コンテンッの著作権に関する情報、読み出したコンテンツの頒布条件（有償/無償等）に関する情報、コンテンヅのファイルサイズ、ファイル名、 I D番号、作成者に関する情報、作成された時刻情報、コンテンツに含まれる画像のサムネイル、画像の一部分、音声の一部分等がある。次に、端末能力情報取得部 9がユーザ倩報入力部 8に入力された端末装置 Dからのユーザ情報に含まれる端末装置 Dの処理能力に関する端末能力情報を取得して、検索結果リスト編集部 1 1へ出力する（ステップ S T 1 6 )。ここで、本実施の形態 1では、端末装置 Dから端末能力情報を取得するようにしているが、本発明では、これに限らず、例えば、コンテンッ検索配信装置 Aがユーザ登録機能を有する場合には、ユーザ登録の際にユーザの受信端末情報をあらかじめ登録しておき、ユーザ識別情報からコンテンツ検索配信装置 Aに登録されている端末能力情報を取得してもよい。尚、端末能力情報としては、端末装置 Dで用いられる画像の符号化方式、端末装置 Dで受信および表示可能な画像の解像度、ビットレート、フレームレート、端末装置 Dで用いられる音声の符号化方式、端末装置 Dで受信および表示等の出力可能な音声のビットレート等がある。

すると、検索結果リスト編集部 1 1では、コンテンヅ検索部 1 0より出力された検索結果リストも入力しているので、端末能力情報取得部 9 からの端末能力情報に基づいて、コンテンッ検索部 1 0からの検索結果リストに含まれる情報のうち端末装置 Dで受信および表示等の出力可能な情報のみ抽出する等の編集を行ない検索結果リスト配信部 1 2へ出力し（ステップ S T 1 7 ) 、検索結果リスト配信部 1 2は、検索結果リスト編集部 1 1によって編集された検索結果リストをネットワーク Cを介してそのコンテンッの検索を要求した端末装置 Dへ配信する（ステップ S T 1 8 ) o 検索結果リストに掲載された端末装置 Dへの配信情報としては、例えば、検索の結果抽出したコンテンヅのファイル名や、コンテンツの画像符号化方式名、および J P E G等で符号化された画像のサムネイル等が含まれている。ただし、端末装置 Dが、例えば携帯電話端末であり、現状では J P E G等の符号化画像を復号して表示する機能を持たない場合には、検索結果リストから J P E G等で符号化された画像のサムネイルを除外して、コンテンツのファイル名や、コンテンツの画像符号化方式名等の携帯電話端末の端末装置 Dのみで表示可能な形態に編集した検索結果リストを端末装置 Dに配信するようにする。

端末装置： Dでは、検索結果リストが表示されると、ユーザは、検索結果リストに記載されているコンテンツの中から特定のコンテンツをコンテンヅ識別情報により指定したユーザ要求を、ネットワーク Cを介してコンテンッ検索配信装置 Aへ送信する。

すると、コンテンツ検索配信装置 Aでは、検索配信サービス部 5のュ —ザ要求入力部 6が端末装置 Dからのユーザ要求を入力して、出力コンテンヅ編集部 1 3へ出力する（ステップ S T 1 9 ) 。

出力コンテンヅ編集部 1 3では、ユーザ要求入力部 6から入力するコンテンヅ識別情報で指定されたコンテンヅおよびそのコンテンツの登録用メ夕デ一夕をデ一夕ベース Bより読み出し（ステップ S T 2 0 )、そのユーザ要求を送信してきた端末装置 Dの端末能力情報に基づいて、読み出したコンテンッが当該端末装置 Dにおいて受信および表示等の出力可能であるか否かを判断する（ステップ S T 2 1 ) 。

ここで、出力コンテンツ編集部 1 3は、デ一夕ベース Bから読み出したコンテンヅがそのまま端末装置 Dで受信および表示等の出力可能であると判断した場合（ステップ S T 2 1 " Y e s " ) 、デ一夕ベース Bから読み出した当該コンテンツをコンテンヅ配信部 1 4へ出力する。すると、コンテンヅ配信部 1 4は、出力コンテンヅ編集部 1 3から出力されたコンテンヅを端末装置 Dに配信する（ステップ S T 2 3 ) 。

これに対し、出力コンテンツ編集部 1 3は、データベース Bから読み出したコンテンツが端末装置 Dで受信および表示等の出力が不可能であると判断した場合（ステップ S T 2 1 " N o " ) 、データベース Bから読み出したコンテンツを端末装置 Dで受信および表示等の出力が可能である形態に変換する等の編集をして（ステップ S T 2 2 )、その後コンテンヅ配信部 1 4へ出力する。その際、出力コンテンツ編集部 1 3で行う変換処理としては、画像の符号化方式変換、解像度変換、ビットレート変換、フレームレート変換、音声の符号化方式変換、ビットレート変換等がある。また、例えば、コンテンツが画像と音声から構成されており、端末装置 Dでは音声デ一夕をサポートしていない場合には、コンテンッに含まれる画像のみを抽出する等、コンテンツの一部分を抽出する処理をしても良い。また、例えば、コンテンツが階層化されたデータであり、ベースレイヤとエンハンスメントレイヤから構成されており、端末装置 Dがペースレイヤのみをサポートしておりェンハンスメントレィャをサポートしていない場合には、ペースレイヤのみを抽出する等の処理をしてもよい。

コンテンッ配信部 1 4では、以上のようにして出力コンテンヅ編集部 1 3において端末装置 Dで受信および表示等の出力が可能な形態に変換されたコンテンツを、端末装置 Dに配信する（ステップ S T 2 3 ) 。第 5図は、実施の形態 1における画像検索配信システムの端末装置 D の構成を示す図である。

第 5図において、 2 1はユーザから検索キーゃュ一ザコマンドを入力し、読み出したコンテンヅの特徴量や付加情報を抽出して登録用メ夕デ一夕として検索キーに付加し、端末能力情報や検索キーやユーザコマンドをコンテンツ検索配信装置 Aに送信する検索要求部、 2 2はユーザが検索を要求するコマンドゃユーザが出力を要求するコンテンヅの識別情報等のユーザ要求を入力するユーザコマンド入力部、 2 3はユーザ識別情報や端末装置！）に関するユーザ情報を出力するユーザ情報出力部、 2 4はデジタルビデオカメラ等から画像や音声等のコンテンヅを検索対象コンテンツとして取り込むコンテンヅ入力部、 2 5はユーザが指定するユーザ検索キーを入力するユーザ検索キー入力部である。

また、第 5図において、 2 6はコンテンヅ入力部 2 4より入力された検索対象コンテンヅの特徴量や付加情報等を抽出し登録用メ夕デ一夕として出力する検索用メ夕デ一夕生成部、 2 7はユーザ検索キー入力部 2 5で入力されたユーザ検索キーと、検索用 "メタデ一夕生成部 2 6で生成された登録用メ夕データを、検索キーとしてコンテンヅ検索配信装置 A に出力する検索キー出力部、 2 8はユーザが検索を要求する信号やユーザが出力を要求するコンテンヅの識別情報等のュ一ザ要求をコンテンヅ検索配信装置 Aに出力するユーザ要求出力部である。

また、第 5図において、 2 9はコンテンツ検索配信装置 Aによって検索が行われた結果得られる情報を受け取り、ュ一ザに出力する検索結果処理部、 3 0はコンテンツ検索配信装置 Aによって検索が行われた結果得られる検索結果リストをコンテンヅ検索配信装置 Aより受け取る検索結果リスト入力部、 3 1は検索結果リスト入力部 3 0に入力された検索結果リストを表示する検索結果リスト表示部、 3 2は検索結果リストの中からユーザが指定したコンテンツをコンテンヅ検索配信装置 Aより受信するコンテンヅ受信部、 3 3はコンテンヅ受信部 3 2で受信されたコンテンッをユーザに表示したり、音声等により出力するコンテンヅ出力部である。尚、本実施の形態 1では、端末装置 Dに検索要求部 2 1 と検索結果処理部 2 9 とを併せて設けるように説明するが、本発明では、これに限らず、検索要求部 2 1 と検索結果処理部 2 9とを別々の端末装置 Dに設けるようにしても勿論よい。

次に、本実施の形態 1の端末装置 Dの処理を詳述する。

第 6図は、実施の形態 1のコンテンヅ検索配信システムにおける端末装置 Dの処理を示すフローチャートである。

ユーザによる端末装置 Dの操作等により、この端末装置 Dとサーバであるコンテンヅ検索配信装置 Aとがネヅトワーク Cを介し接続されると、まず、端末装置： Dのユーザ情報出力部 2 3よりユーザに関する情報がコンテンヅ検索配信装置 Aに送信される（ステヅプ S T 3 1 )。ユーザに関する情報としては、例えば、ユーザ識別情報、端末装置 Dの種類、端末装置 Dの処理能力に関する情報等がある。なお、このユーザ情報は、ュ一ザコマンド入力部 2 2によって入力したもので、コンテンツ検索配信装置 Aとの接続後、ユーザコマンド入力部 2 2によるユーザ情報の入力時にコンテンヅ検索配信装置 Aへ送信されるようにしても良いし、予めユーザコマンド入力部 2 2によって入力したものをユーザ情報出力部 2 3が記憶しておき、コンテンヅ検索配信装置 Aとの接続時、自動的にユーザ情報出力部 2 3がコンテンツ検索配信装置 Aへ送信するように構成しても勿論良い。

次に、ユーザは、端末装置 Dのコンテンヅ入力部 2 4に検索対象とするコンテンツを入力する (ステップ S T 3 2 ) o ここで、コンテンツの入力は、デジタルビデオカメラやマイク等から直接画像や音声等のコンテンヅを取り込む場合や、ネットワーク Cを介して画像や音声等のコンテンッを取り込む場合等がある。

コンテンツ入力部 2 4に入力されたコンテンヅは検索用メ夕データ生成部 2 6へ出力され、検索用メタデ一夕生成部 2 6は、検索対象コンテンヅの特徴量や付加情報等を抽出して登録用メ夕デ一夕として検索キー出力部 2 7へ出力する（ステップ S T 3 3 )。検索用メ夕デ一夕生成部 2 6で抽出される特徴量としては、例えば、検索対象コンテンヅに含まれる画像の色やテクスチャ、動き、形状、読み出したコンテンツに含まれる音声の周波数特性等がある。また、検索用メタデータ生成部 2 6で抽出される付加情報としては、例えばその検索対象コンテンヅに含まれる画像の符号化方式（MP E G— 1 , MP E G— 2 , MP E G— 4 , J P E G, G I F, BMP等）、ビットレート、フレームレート、解像度、コンテンツに含まれる音声の符号化方式（G SM-AMR， MP E G 一 1， MP E G— 2， MPE G— 4等）、ビヅトレート等がある。

次に、ユーザ検索キー入力部 2 5には、ユーザの指定するユーザ検索キーが入力され、検索キ一出力部 2 7へ出力される（ステップ S T 3 4 )。ユーザ検索キ一としては、例えばコンテンツに関するキーワード、ファイル名、ファイルサイズ、コンテンツが生成された時刻の情報、画像のおおまな色やテクスチャ、動き、形状、音声のおおまかな周波数特性等がある。

そして、検索用メ夕デ一夕生成部 2 6で生成された登録用メ夕デ一夕およびユーザ検索キー入力部から入力したユーザ検索キーが、検索キ一として検索キー出力部 2 7へ出力されると、検索キー出力部 2 7は、その登録用メ夕デ一夕およびユーザ検索キ一からなる検索キーをネットヮ —ク Cを介しサーバであるコンテンヅ検索配信装置 Aへ出力する（ステヅプ S T 3 5 )。

また、ユーザがコンテンヅ検索配信装置 Aに対し検索を要求するコマンドをユーザコマンド入力部 2 2により入力すると、その検索要求信号がユーザ要求出力部 2 8を介してコンテンヅ検索配信装置 Aに送られる (ステップ S T 3 6 )。尚、これらステップ S T 3 1， 3 5， 3 6による端末装置 Dからの各種情報の出力は、この順番での出力に限らないものである。

すると、コンテンツ検索配信装置 Aでは、ネットワーク Cを介しュ一ザの操作によって端末装置 Dから送信された検索要求信号や、登録用メ夕デ一夕、ュ一ザ検索キ一を受け取ると、上述したように、ユーザの送信してきた検索キ一に基づいてデ一夕ペース B上でコンテンヅの検索を行う。コンテンツ検索配信装置 Aが検索を行った結果、生成された検索結果リストは、上述したようにネットワーク Cを介し端末装置 Dへ送信され、端末装置 Dでは、検索結果処理部 2 9の検索結果リスト入力部 3 0がコンテンッ検索配信装置 Aから送信され検索結果リストを受信する (ステップ S T 3 7 ) 。

検索結果リスト入力部 3 0は、受信した検索結果リストを検索結果リスト表示部 3 1に表示して、この端末装置 Dのユーザに閲覧させる（ステツプ S T 3 8 )。

ユーザは、検索結果リスト表示部 3 1上に表示された検索結果リストを参照して、その検索結果リストの中から配信を希望するコンテンヅを選択し、その選択したコンテンヅの識別情報を端末装置 Dのュ一ザコマンド入力部 2 2に入力する（ステップ S T 3 9 )。

すると、ユーザコマンド入力部 2 2に入力したコンテンツの識別情報は、ユーザ要求出力部 2 8から出力されて、ネットワーク Cを介しサーバであるコンテンヅ検索配信装置 Aへ送信される（ステップ S T 4 0 ) ο

コンテンヅ検索配信装置 Aでは、上述したようにして、ユーザからコンテンヅ識別情報に従ってユーザの指定したコンテンヅをデータベース Bから読み出し、そのユーザの端末装置 Dに対し配信する。

このため、コンテンツ検索配信装置 Aから配信されたコンテンヅは、そのユーザの端末装置 Dのコンテンヅ受信部 3 2で受信され（ステップ S T 4 1 )、コンテンツ出力部 3 3で表示や音声出力等の各種メディアに応じた出力方式によりユーザに出力される（ステップ S T 4 2 )。尚、このとき、そのコンテンツが、検索結果リスト表示部 3 1上に、検索結果と共に、あるいは検索結果とは別に表示されるようにしてもよい。次に、実施の形態 1におけるコンテンツ検索配信システムを、デジ夕ルビデオカメラ等で撮影したゴルフのティ一ショヅトのシーンから、他の選手のゴルフのティ一ショヅトのシーンや、検索の結果抽出される選手の情報（その選手の名前、正面顔画像、出身地、平均スコア、世界ランキング、過去の受賞履歴等）を調べるため、スポーツのビデオコンテンヅの収録されているコンテンヅ検索配信装置 Aにアクセスして検索する場合を例にとり説明する。

この例では、端末装置 Dで撮影したゴルフのティーショヅトのシーンと類似したシーンを検索することにする。

まず、上述のようにして、端末装置 Dがネヅトワーク Cを介してコンテンヅ検索配信装置 Aに接続すると、ユーザ情報出力部 2 3からユーザ I D、例えばコンテンツ検索配信装置 Aにアクセスするためのログイン名等や、端末装置 Dの処理能力に関する情報、例えば受信し表示できる画像符号化方式が M P E G — 4でサイズが 1 7 6 X 1 4 4画素であり、受信し出力できる音声符号化方式が G S M— A M R等のユーザ情報が、端末装置 Dのユーザ情報出力部 2 3からコンテンヅ検索配信装置 Aにネットワーク Cを介し送信される。

すると、コンテンヅ検索配信装置 Aでは、端末装置 Dのユーザ情報がコンテンッ検索配信装置 Aのユーザ情報入力部 8に入力して、端末能力情報取得部 9がユーザ情報入力部 8に入力された端末装置 Dのユーザ情報より、端末装置 Dの端末能力情報を得る。

また、端末装置 Dが検索対象用に自装置または他装置のカメラ等（図示せず。）により撮影等した画像は、携帯電話等の端末装置 Dのコンテンヅ入力部 2 4に入力される。コンテンヅ入力部 2 4に入力された画像は、検索用メ夕デ一夕生成部 2 6に送られ、画像全体やその画像に含まれているオブジェクトの形状、色、動き、テクスチャ等の特徴量が抽出され、登録用メ夕デ一夕として検索キー出力部 2 7に送られる。

また、ュ一ザ検索キー入力部 2 5には、ユーザが入力した検索キーとして、例えば『検索の結果抽出するコンテンヅは頒布条件に制約が無い。』という条件や、『検索の結果抽出するコンテンヅは世界ランク 1 0 0位以内の選手のビデオコンテンヅに限る。』という条件等が入力され、入力されたュ一ザ検索キ一は検索キー出力部 2 7に送られる。

また、ユーザが検索要求コマンドをユーザコマンド入力部 2 2に入力すると、検索要求信号がユーザ要求出力部 2 8よりコンテンヅ検索配信装置 Aのユーザ要求入力部 6に送信され、続いて検索キー出力部 2 7から出力された登録用メ夕デ一夕およびユーザ検索キーは、検索キーとしてコンテンヅ検索配信装置 Aの検索キー入力部 Ίへ送信される。

コンテンヅ検索配信装置 Aのコンテンッ検索部 1 0では、デ一夕入力部 2に入力した端末装置 Dからの登録用メ夕デ一夕およびユーザ検索キ一に基づき、データベース Bに蓄積されている登録用メタデータに記述されている特徴量と、検索キーに記述されている特徴量とのマッチングを行うことによって、端末装置 Dからの登録用メ夕データおよびュ一ザ検索キーと一致または類似の特徴を持ち、検索キーに記述された条件に該当するビデオコンテンツについてのみ、そのビデオコンテンヅに関する情報を抽出する。

ここで抽出されるビデオコンテンヅに関する情報としては、例えばビデォコンテンツの最初の 1フレームの画像、ビデオコンテンッの登録番号、ファイル名、ファイルサイズ、画像および音声の符号化方式、画像の解像度、ビヅトレート、フレームレート、音声のビヅトレ一ト、ビデォコンテンヅについてのテキストデ一夕等がある。これらのビデオコンテンヅに関する情報は、検索結果リストとして検索結果リスト編集部 1 1に送られる。

検索結果リスト編集部 1 1では、上述したように、コンテンヅ検索部 1 0からの検索結果リストを、端末装置 Dの能力に応じて変換や加工等の編集を行なう。

検索結果リスト編集部 1 1で編集された検索結果リストは、検索結果リスト配信部 1 2よりネットワーク Cを介し端末装置 Dへ送信され、端末装置 Dの検索結果リスト入力部 30に入力される。検索結果リスト入力部 3 0に入力された検索結果リストは、検索結果リスト表示部 3 1により表示される。

第 7図（a) , (b) に、端末装置 Dの検索結果リスト表示部 3 1に表示される検索結果の一例を示す。

第 7図（a) は、 P C等十分に表示処理能力のある端末装置 Dの検索結果リスト表示部 3 1における検索結果リストの表示の一例を示している。第 7図（a) において、 3 l aはユーザがコンテンツ入力部 24等を介し入力した検索対象の映像であり、例えばゴルフのパヅティングシーンなどである。 3 1 bはコンテンヅ検索配信装置 Aの検索結果リスト編集部 1 1から送信されてきたコンテンヅ検索部 1 0が検索して得た検索結果画面であり、 3 1 c 1 ~ 3 1 c 3は検索結果画面 3 1 b上に表示されるその検索の結果得られた検索対象の映像 3 1 aと一致または類似する複数のゴルフのパッティングシーンのサムネイル等である検索結果 1， 2， 3， · · · の映像、 3 1 d l〜3 1 d 3は、その検索結果 1， 2 , 3 , · · · の映像 3 1 c 1〜 3 1 c 3それそれに対応する検索結果 1 , 2， 3 , · · ' に関するテキスト情報等のデ一夕で、パッティングしている選手に関するデ一夕であれば、例えば、その選手の名前や、正面顔画像、出身地、平均スコア、世界ランキング、過去の受賞履歴等を出力するようにする。

第 7図（b )は、携帯電話等の検索結果リスト表示部 3 1における表示画面の小さい、または多くの情報をダウンロードする場合、負荷が大きくダウンロードできない端末装置 Dへ送信した場合の検索結果リスト表示部 3 1における検索結果リストの表示の一例を示している。この場合、例えば第 7図（b )に示すように、検索結果リスト中の例えば検索結果 1 (選手 1 ) に関するテキスト倩報等のデ一夕 3 1 eと、その前の候補である例えば検索結果 0 (選手 0 ) のデータ 3 1 eを呼び出すための " 前候補" ボタンや、その次の候補である例えば検索結果 2 (選手 2 ) のデ一夕 3 1 eを呼び出すための "次候補" ボタン、および現在表示されている検索結果 1 (選手 1 ) の画像を表示させるための "画像表示" ボタン等からなる選択ボタンである。

以上のように検索結果リスト表示部 3 1に表示された検索結果リストを参照して、ュ一ザは、表示された検索結果リストの中から配信を希望するコンテンヅを選択し、選択したコンテンヅの識別情報をユーザコマンド入力部 2 2 に入力する。ここで、コンテンツ識別情報としては、検索結果リストの中から特定コンテンヅのみを識別可能な手段または方法であればよく、例えば検索結果リストに列挙されている個々のコンテンッ情報にインデックス番号等が付加されていれば、そのインデックス番号等を識別情報として用いることができる。

そして、ュ一ザコマンド入力部 2 2に入力したコンテンツ識別情報は、ュ一ザ要求出力部 2 8から出力されて、ネットワーク Cを介しコンテンヅ検索配信装置 Aに送られ、コンテンヅ検索配信装置 Aのユーザ要求入力部 6に入力する。ユーザ要求入力部 6に入力したコンテンヅ識別情報は、出力コンテンヅ編集部 1 3に出力され、出力コンテンッ編集部 1 3は、入力したコンテンヅ識別情報に基づいて、ユーザが配信を希望したコンテンツをデ一夕ベース Bから読み出す。

そして、出力コンテンヅ編集部 1 3は、端末能力情報取得部 9が取得した端末能力情報に基づいて、データベース Bから読み出したコンテンヅに対しフォーマヅト変換等の処理を施して、そのコンテンヅを配信すべき端末装置 Dの能力に適したフォーマツトに変換する。

例えば、データベース Bに登録されているビデオコンテンヅの画像デ一夕の符号化方式が M P E G— 2で、解像度が 7 2 0 x 4 8 0画素であり、音声デ一夕の符号化方式が MP E G— 1 Aud i o L a e r 2であったとする。このとき、端末装置 Dが携帯電話であり、端末装置 Dで処理できる画像符号化方式が MP E G— 4でかつ画面の表示サイズが 1 7 6 x 144画素であり、音声符号化方式が G SM— AMRである場合には、画像の符号化方式を MP E G— 2から MP E G— 4に変換するとともに解像度を 7 2 0 X 4 8 0から 1 7 6 x 1 44画素に変換し、音声デ一夕の符号化方式も MP E G— 1 Au d i o L a y e r 2 から G SM— AMRに変換して端末装置 Dで処理できるデ一夕フォーマットとして出力する。尚、ここでは、符号化方式と解像度とを例にとつて説明したが、出力コンテンヅ編集部 1 3で変換されるものとしては、他にビヅトレートゃフレ一ムレ一ト等もある。

また、読み出したコンテンツのファイルサイズが、例えば端末装置 D が想定する値の上限よりも大きい場合には、出力コンテンツ編集部 1 3 は、例えば画像と音声のうちから画像デ一夕のみを送信することや、画像の一部分のみを切り取って送信したり、例えば画像データが階層化されていてベースレイヤとエンハンスメントレイヤから構成されている場合にはべ一スレイヤのみのデータを送信する等、コンテンツの一部分のみを送信してもよい。

また、例えばユーザからの指定条件により「無償で著作権フリーのコンテンヅのみを検索する」という条件が指定されている場合に、有償のコンテンツに対しては、コンテンヅそのものを配信するのではなくコンテンヅに含まれる無償配信可能な部分のみを抽出するようにしてもよい。コンテンツの無償配信可能な部分としては、例えばコンテンツが「映画」であれば、「映画の予告編」のように代表的なシーンを集めたコンテンヅ等がある。

以上のようにして、出力コンテンツ編集部 1 3は、端末能力情報取得部 9からの端末能力情報に基づいて、データベース Bから読み出したコンテンヅに対しフォーマツト変換等の処理を施し、端末装置 Dの能力に適したフォーマヅトに変換および編集すると、コンテンヅ配信部 1 4がその編集などされたコンテンヅをネットワーク Cを介し端末装置 Dへ送信する。

端末装置 Dでは、コンテンヅ受信部 3 2にてサーバであるコンテンヅ検索配信装置 Aからのコンテンツを受信して、受信されたコンテンヅは、コンテンツ出力部 3 3を介しユーザに対し表示されたり、音声出力されるなど、そのコンテンヅのメディァの種類に応じた出力形式で出力され。

以上のように、この実施の形態 1 によれば、コンテンツ検索配信装置 Aは、検索結果である検索結果リストゃュ一ザの指定したコンテンツを端末装置 Dの処理能力に基づき、当該ユーザの端末装置 Dで受信し表示や出力できるように編集するようにしたので、検索結果リストやユーザにより配信を指定されたコンテンヅを、処理能力が異なる各種の端末にて容易に表示や出力することができる。尚、この実施の形態 1では、ユーザの撮影した検索対象のサンプル映像や画像を用いて検索し、検索の結果、ユーザに配信されるコンテンヅを画像と音声を含むコンテンヅとして説明したが、この発明では、これに限らず、サンプル音声を用いて検索し、画像のみのコンテンヅを配信するよう構成しても良いし、サンプル音声を用いて検索し、画像と音声を含むコンテンヅを配信するよう構成しても勿論良い。

また、この実施の形態 1で述べたコンテンヅ検索配信装置 Aの入力デ一夕登録部 1、デ一夕べ一ス B、および検索配信サービス部 5は、 1つのコンテンヅ検索配信装置 Aに設けるように説明したが、この発明では、これに限らず、それそれ異なるコンテンツ検索配信装置 Aにあってもよい。

また、上述したように入力デ一夕登録部 1で登録用メ夕デ一夕を作成するのではなく、コンテンヅ制作者が個別に作成した登録用メ夕デ一夕をコンテンツとともにデ一夕べ一ス Bへ登録してもよいし、頒布条件等を記述した登録用メ夕デ一夕はコンテンヅ制作者が作成し、コンテンッの特徴量を記述した登録用メ夕デ一夕はコンテンヅ検索配信装置 Aで作成して、それそれデータベース Bへ登録するようにしてもよい。

また、この実施の形態 1で述べた端末装置 Dの検索要求部 2 1 と検索結果処理部 2 9はそれそれ異なる端末装置 Dにあつてもよい。実施の形態 2 .

上記実施の形態 1 に係るコンテンヅ検索配信装置 Aでは、端末装置 D の検索用メ夕デ一夕生成部 2 6で生成された登録用メ夕デ一夕を利用して検索を行うように説明したが、本実施の形態 2のコンテンヅ検索配信装置 Aでは、コンテンヅ検索配信装置 Aに同様の検索用メ夕データ生成部を備え、コンテンツ検索配信装置 A内で、検索用の登録用メ夕デ一夕を生成し、生成された登録用メ夕デ一夕を利用して検索を行うよう構成したことを特徴とする。

第 8図は、実施の形態 2のコンテンヅ検索配信装置 Aに対応する端末装置 Dの構成を示す図である。本実施の形態 2のコンテンツ検索配信装置 Aに対応する端末装置 Dは、第 5図に示す実施の形態 1の端末装置 D とは異なり、検索用メ夕デ一夕生成部 2 6を備えず、コンテンツ入力部 2 4より入力される検索対象のコンテンヅは、ユーザ検索キーとともに検索キ一出力部 2 7を介してコンテンヅ検索配信装置 Aに送られるように構成されている。

第 9図は、実施の形態 2におけるコンテンヅ検索配信装置 Aの構成を示す図である。 4 1は検索キー入力部 5から入力される検索キ一のうち、検索対象のコンテンヅの特徴量や付加情報を抽出して、抽出した情報を検索用の登録用メ夕デ一夕として出力する検索用メ夕デ一夕生成部である。尚、その他の構成は、第 2図に示す実施の形態 1のコンテンツ検索配信装置 Aの構成と同様であるため、同一符号を付してそれらの構成の説明は省略する。

次に動作を説明する。

本実施の形態 2におけるコンテンヅ検索配信装置 Aでは、端末装置 D からの検索キ一を、ネットワーク Cを介し検索配信サービス部 5の検索キー入力部 5が受信し、検索用メ夕デ一夕生成部 4 1へ出力する。ここで、検索キー入力部 5が受信した端末装置 Dからの検索キーには、ユーザ検索キーおよび検索対象のコンテンヅが含まれる。

検索用メ夕デ一夕生成部 4 1は、検索キ一入力部 5から入力される検索キ一のうち、検索対象のコンテンツの特徴量や付加情報を抽出して、抽出した情報を検索用の登録用メタデータとして、ユーザ検索キーと共に、コンテンヅ検索部 1 0に出力する。コンテンツ検索部 1 0では、検索用メ夕デ一夕生成部 4 1から登録用メタデータとユーザ検索キーとを入力するので、その後は、上記実施の形態 1の場合と同様に、登録用メ夕データとユーザ検索キーとに基づきデ—夕ベース Bを検索して関連するビデオコンテンヅに関する情報を抽出し、抽出した情報を検索結果リストとして検索結果リスト編集部 1 1 に出力する。尚、その後は、上記実施の形態 1の場合と同様であるので、動作の説明は省略する。

以上のように、この実施の形態 2によれば、コンテンツ検索配信装置 Aは、上記実施の形態 1の場合と同様に検索結果である検索結果リストやユーザの指定したコンテンヅを端末装置 Dの処理能力に基づき、処理能力が異なる各種の端末にて容易に表示や出力することができると共に、さらにコンテンヅ検索配信装置 Aに検索用メ夕デ一夕生成部 4 1を設けているので、端末装置 D側には検索用メタデータ生成部 2 6を備えてなくても対応でき、端末装置 D側の回路規模を小さくすることができる

実施の形態 3 .

上記実施の形態 1， 2におけるコンテンヅ検索配信装置 Aでは、デー夕べ一ス Bにコンテンヅおよび登録用メ夕デ一夕を蓄積するように構成して説明したが、本実施の形態 3では、ネットワーク C上にコンテンヅが存在、例えばネットワーク Cを介してアクセス可能な他のデータべ一スゃサーバ等に保存されている場合には、デ一夕ペース Bにはコンテンヅの代わりにコンテンツのリンク情報を蓄積するように構成したことを特徴とするものである。

第 1 0図は、実施の形態 3のコンテンヅ検索配信装置 Aの構成を示す図である。第 1 0図において、 5 1はデ—夕べ一ス Bから出力コンテンッ編集部 1 3にコンテンツのリンク情報が入力された場合に、ネットヮ —ク Cからコンテンヅを入力し出力コンテンツ編集部 1 3へ出力する入力制御部である。尚、その他の構成は、第 2図に示す実施の形態 1のコンテンヅ検索配信装置 Aの構成と同様であるため、同一符号を付してそれらの構成の説明は省略する。

次に動作を説明する。

まず、本実施の形態 3の入力データ登録部 1における処理について詳述する。

第 1 1図は、実施の形態 3のコンテンツ検索配信装置 Aにおいて新規のコンテンツをデ一夕べ一ス Bに登録する場合の入力データ登録部 1の処理を示すフローチヤ一トである。

まず、データ入力部 2は、ネットワーク Cを介してコンテンヅをダウンロード等して入力するためのィン夕フェースと、ネットワーク Cを介さずに本装置に接続したツール（図示せず。）等によりコンテンツを直接入力するためのィン夕フェースのいずれかのィン夕フヱ一スとのうち一つまたは両方を有しており、ネットワークから、またはネットヮーク Cを介さずに外部よりコンテンツを入力し、登録用メ夕デ一夕生成部 3へ出力する（ステツプ S T 5 1 )。

登録用メ夕デ一夕生成部 3では、入力したコンテンツから、そのコンテンヅの特徴量や付加情報等の情報を抽出して（ステツプ S T 5 2 )、抽出されたコンテンヅの特徴量や付加情報等の情報をあらかじめ定義されたフォーマットに従って記述した登録用メ夕デ一夕（特徴記述子）を生成する（ステップ S T 5 3 )。尚、ここまでは、上記実施の形態 1等とも同様である。

次に、本実施の形態 3では、デ一夕ベース Bに登録しょうとする、デ一夕入力部 2を介し入力したコンテンヅが、ネットワーク C上に存在してネヅトワーク cから入力したものであるか、あるいはネットワーク C 上に存在してなく直接入力したものであるか否かを判断する（ステップ

S T 5 4 ) o

ここで、登録用メタデータ生成部 3は、登録されたコンテンヅがネヅトワーク C上から入力したと判断した場合には（ステツプ S T 5 4 " Y e s " )、ネットワーク C上に存在する当該コンテンツをダウンロード等するためのリンク情報と、その登録用メ夕データとをデ一夕ペース B に蓄積する一方（ステップ S T 5 5 )、ネットワーク C上に存在してなく直接入力したものである場合には（ステップ S T 5 4 " N o " )、当該コンテンヅとその登録用メ夕データとをデ一夕ペース Bに蓄積する（ステヅプ S T 5 6 )。

次に、本実施の形態 3のコンテンヅ検索配信装置 Aの検索配信サービス部 5の動作について詳述する。

第 1 2図は、本実施の形態 3のコンテンッ検索配信装置 Aの検索配信サ一ビス部 5の処理を示すフローチャートである。

まず、端末装置 Dからコンテンヅ検索配信装置 Aのユーザ情報入力部 8にュ一ザに関するユーザ情報が入力され（ステップ S T 6 1 )、次に端末装置 Dからコンテンヅ検索メ夕デ一夕やユーザ検索キーなどの検索キーがコンテンヅ検索配信装置 Aの検索キー入力部 7に入力され（ステップ S T 6 2 )、さらに端末装置 Dから検索を要求する検索要求信号がコンテンツ検索配信装置 Aのユーザ要求入力部 6 に入力される（ステヅプ S T 6 3 ) 。

コンテンヅ検索部 1 0は、検索要求信号および検索キーが入力されると、入力した検索キーを基に、データベース Bに含まれる登録用メ夕デ一夕に記述されているキーヮ一ドゃ特徴量とのマツチング処理を行って (ステップ S T 6 4 )、入力した検索キーと合致または類似した一つまたは複数のコンテンヅに対して、それぞれのコンテンヅと共に蓄積されている付加情報を抽出したリス卜を検索結果リストとして検索結果リスト編集部 1 1へ出力する（ステップ S T 6 5 )₀ ' また、ュ一ザ情報入力部 8に入力したユーザ情報は端末能力情報取得部 9に送られ、ユーザ情報に含まれる端末装置 Dの処理能力に関する情報が端末能力情報取得部 9により取得される（ステップ S T 6 6 )。尚、ユーザ登録機能を有するコンテンヅ検索配信装置 Aの場合には、端末装置 Dからコンテンヅ検索配信装置 Aにユーザ情報が送られないようにしていても良く、この場合、ュ一ザ登録の際にユーザの受信端末情報をあらかじめ登録しておき、ユーザ識別情報等に基づいて、コンテンヅ検索配信装置 Aに登録されている端末能力情報を取得するようにしてもよい。

そして、コンテンツ検索部 1 0によってデ一夕べ一ス: Bから抽出されて出力された検索結果リストは、検索結果リスト編集部 1 1に出力される。

検索結果リスト編集部 1 1では、端末能力情報取得部 9からの端末能力情報に基づいて、検索結果リストに含まれる情報のうち端末装置 Dで受信して表示や出力可能な情報のみ抽出する等の検索結果リストの編集を行って（ステップ S T 6 7 ) 、編集後の検索結果リストを検索結果リスト出力部 1 2からネットワーク Cを介し端末装置 Dへ配信する（ステヅプ S T 6 8 ) 。

端末装置 Dでは、コンテンヅ検索配信装置 Aからの検索結果リストを検索結果リスト入力部 3 0を介し入力して、検索結果リスト表示部 3 1 に検索結果リストを表示する。

すると、ユーザは、検索結果リスト表示部 3 1に表示された検索結果リストに記載されているコンテンヅの中から特定のコンテンヅをュ一ザコマンド入力部 2 2 により指定して、ユーザの指定するコンテンツの識別情報をユーザ要求としてユーザ要求出力部 2 8 よりネットワーク Cを介しコンテンッ検索配信装置 Aへ送信する。

コンテンヅ検索配信装置 Aでは、端末装置 Dからのユーザ要求をユーザ要求入力部 6を介して検索配信サービス部 5へ入力して、出力コンテンヅ編集部 1 3へ出力する（ステップ S T 6 9 ) 。ここまでの処理は、第 4図に示す実施の形態 1のコンテンヅ検索配信装置 Aにおける検索配信サービス部 5の処理と同じである。

次に、本実施の形態 3の出力コンテンヅ編集部 1 3では、ユーザ要求入力部 6に入力されるコンテンヅ識別情報で指定された登録用メタデー夕のみをデ一夕べ一ス Bから読み出す（ステップ S T 7 0 )。これは、本実施の形態 3では、コンテンヅ識別情報で指定されるコンテンヅほ、データベース Bに蓄積されている場合と、ネットワーク C上に存在、例えばネヅトワーク Cを介してアクセス可能な他のデータペースやサーバ等に保存され、ネットワーク C上に存在するコンテンツへのリンク情報がデ—夕ベース Bに蓄積されている場合とがあるからである。

このため、本実施の形態 3のコンテンツ検索配信装置 Aでは、出力コンテンッ編集部 1 3がコンテンヅ識別情報で指定される検索すぺきコンテンヅがデ一夕ベース Bに蓄積されているか否かを判断する（ステップ S T 7 1 ) o

そして、検索すべきコンテンッがデ一夕ベース Bに蓄積されていない場合には（ステップ S T 7 1 " N o " )、検索すべきコンテンツがネヅトワーク C上に存在する場合であるため、出力コンテンヅ編集部 1 3は、入力制御部 5 1 を介してュ一ザの指定したコンテンヅをネットワーク Cからダウン口一ド等して入力する（ステップ S T 7 2 )。一方、検索すべきコンテンヅがデ一夕べ一ス Bに蓄積されている場合には（ステツプ S T 7 1 " Y e s " )、出力コンテンヅ編集部 1 3は、ユーザの指定したコンテンヅをデ一夕ベース Bから読み出して入力するようにする（ステップ S T 7 3 )。

次に、両場合とも、出力コンテンヅ編集部 1 3は、デ一夕ペース Bまたはネットワーク Cから読み出した、ユーザの指定したコンテンヅが端末装置 Dで受信および表示等の出力可能であるか否かを、端末能力情報取得部 9が取得した端末能力情報に基づいて判断する（ステップ S T 7 4 ) 。

そして、出力コンテンヅ編集部 1 3は、入力コンテンツがそのまま端末装置 Dで受信および表示等の出力可能であると判断した場合には（ステヅプ S T 7 4 " Y e s " ) 、その入力コンテンツをコンテンヅ配信部 1 4へ出力し、コンテンヅ配信部 1 4は、出力コンテンヅ編集部 1 3からのコンテンヅを端末装置 Dに配信する（ステヅプ S T 7 6 ) 。

これに対し、出力コンテンヅ編集部 1 3は、入力コンテンッが端末装置 Dで受信および出力が不可能であると判断した場合には（ステップ S T 7 4 " N o " ) 、その入力コンテンヅを当該端末装置 Dで受信および出力が可能である形態に変換する等の編集をして（ステップ S T 7 5 ) 、コンテンヅ配信部 1 4へ出力する。コンテンヅ配信部 1 4では、出力コンテンツ編集部 1 3 によって当該端末装置 Dで受信および出力が可能である形態に変換する等の編集をされたコンテンヅを当該端末装置 Dへ配信する（ステップ S T 7 6 ) 。

以上のように、この実施の形態 3によれば、上記実施の形態 1 , 2の場合と同様に、コンテンヅ検索配信装置 Aは、ユーザの指定したコンテンヅを端末装置 Dの処理能力に基づき端末装置 Dで受信し出力できるように編集するようにしたので、検索した結果配信するように指定されたコンテンヅを処理能力が異なる各種の端末にて容易に出力することができる。

特に、この実施の形態 3では、ネットワーク C上に存在しているコンテンヅに関しては、デ一夕ベース Bに蓄積せず、デ一夕べ一ス Bにはコンテンヅの代わりにコンテンヅのリンク情報を蓄積するように構成したので、コンテンヅ検索配信装置 Aのデータベース Bに、より多くのコンテンヅを登録できる。実施の形態 4 .

上記の実施の形態 1〜 3のコンテンヅ検索配信装置では、メタデ一夕に記述されている特徴量に重みを付けることなくマッチングを行うことによってコンテンッの検索を行うように説明したが、実施の形態 4のコンテンッ検索配信装置では、メ夕データに記述されている複数種類の特徴量を抽出し、各特徴量の重み付き加算を行って得た和を特徴係数とし、前記加算によって得られた特徴係数を用いてマッチングを行うことによってコンテンヅの検索を行うようにしたことを特徴とする。

尚、本実施の形態 4は、上記実施の形態 1〜 3のどれにも適用可能であるが、ここでは、第 2図に示す実施の形態 1のコンテンツ検索配信装置 Aを例として特徴ある動作のみを説明する。

まず、入力データ登録部 1によるコンテンツの登録の動作から説明する。

コンテンツをデ一夕ベース Bに登録する場合、本実施の形態 4のコンテンヅ検索配信装置 Aの登録用メ夕データ生成部 3では、コンテンツより複数種類の特徴量を抽出し、あらかじめ用意された重み係数テーブル等により、抽出された各特徴量に対応する重み係数を得て、この得られた特徴量および重み係数を乗算して重み付き特徴量とし、前記重み付き特徴量の総和を特徴係数とする。第 1 3図に、本実施の形態 4における重み係数テーブルの一例を示す。本実施の形態 4では、第 1 3図に示すような "画像の色相成分の平均値" や "画像に含まれるオブジェクトの平均動きべクトルの水平成分" 等の各特徴量の種類に対応した重み係数のリストを用意しておき、コンテンッが入力された場合に抽出される特徴量に、第 1 3図のリストから各特徴量に対応する重み係数を乗じて重み付き特徴量を得て、得られた重み付き特徴量の総和を特徴係数とする。この特徴係数は、例えば、デ一夕べ一ス Bにコンテンツまたはコンテンヅのリンク情報と共に蓄積するようにしておく。

次に、検索配信サービス部 5によるコンテンツ検索の動作を説明する ο

コンテンヅ検索部 1 0がデ一夕ベース Bでコンテンツを検索する場合、コンテンヅ検索部 1 0に入力された検索キーに含まれる複数種類の特徴量に対し、上記コンテンツの登録の際に用いた重み係数テ一プルと同じテーブルを用いて重み付き加算を行い、上記と同様の方法で特徴係数を得る。そしてコンテンッ検索部 1 0は、上述のようにして得た特徴係数と、データベース Bに登録されている特徴係数とのマッチングを行うことによって検索を行うよう動作する。その後の動作は、上記実施の形態 1 と同様である。

以上のように、この実施の形態 4によれば、上記実施の形態 1等と同様に、デ一夕べ一ス Bを検索して得られた検索結果リストゃデ一夕べ一ス Bから読み出したコンテンヅを処理能力が異なる各種の端末装置 Dにて容易に表示や出力できると共に、コンテンヅ検索配信装置 Aは、コンテンヅの特徴量を重み付き加算して得られる特徴係数または特徴べクトルをデ一夕ベース Bに登録し、その特徴係数または特徴べクトルを用いて検索するようにしたので、高速に検索できる。なお、この実施の形態 4のコンテンヅ検索配信装置 Aは、実施の形態 1に適用して説明したが、勿論実施の形態 2 , 3についても同様に適用することは可能である。

また、この実施の形態 4のコンテンヅ検索配信装置 Aでは、重み係数を乗算して得られた重み付き特徴量の総和を特徴係数として検索に用いるように説明したが、この発明では、これに限らず、例えば、複数の重み付き特徴量をそれそれ一つまたは数個ずつ加算して複数の特徴係数を得、得られた複数の特徴係数を係数とする特徴べクトルを用いて検索するようにしても良い。

また、この実施の形態 4のコンテンヅ検索配信装置 Aでは、データ登録の際に特徴係数または特徴べクトルを登録するように説明したが、この発明では、これに限らず、例えば、特徴係数または特徴ベクトルを量子化して得られる量子化係数または量子化べクトルを得て、量子化係数またば量子化べクトルに対応するィンデックスを登録するようにしても勿論よい。産業上の利用可能性

以上のように、この発明に係るコンテンツ検索配信装置およびコンテンヅ検索配信方法は、検索の結果得られたコンテンヅゃ検索結果リスドを電話回線や無線などの各種のネットワークを通じて、処理能力の異なる各種の端末に応じたフォ一マヅトで配信するのに適している。

Claims

請求の範囲

1 . コンテンヅやその付加情報等が格納されたデ一夕ベースを端末装置からの情報に基づき検索し、検索の結果抽出したデータを上記端末装置へ配信するコンテンヅ検索配信装置であって、

上記検索の結果抽出したデータを上記端末装置の処理能力に応じて編集し上記端末装置へ配信する、

ことを特徴とするコンテンヅ検索配信装置。

2 . 上記端末装置からの情報に基づき上記データベースを検索し、検索の結果得られたコンテンッの付加情報を抽出して、その付加情報が掲載された検索結果リストを出力するコンテンヅ検索部と、

上記端末装置からの情報に基づき上記コンテンヅ検索部からの検索結果リストを上記端末装置の処理能力に応じて当該端末装置で表示できる形態に編集する検索結果リスト編集部と、

上記検索結果リスト編集部によって編集された検索結果リストを上記端末装置へ配信する検索結果リスト配信部と、

を有することを特徴とする請求の範囲第 1項記載のコンテンヅ検索配

3 . 上記デ一夕ベースには、上記付加情報として重みの付けられた登録用メ夕データが蓄積されており、

上記コンテンヅ検索部は、上記端末装置からの情報に基づき上記登録用メ夕デ一夕を参照して上記デ一夕ベースを検索し、検索の結果得られたコンテンツの付加情報を抽出する、

ことを特徴とする請求の範囲第 2項記載のコンテンヅ検索配信装置。

4 . さらに、上記端末装置からの情報に基づきコンテンヅ検索用のメ夕デ一夕を生成して上記コンテンツ検索部へ出力する検索用メ夕データ生成部を有し、

上記コンテンヅ検索部は、上記端末装置からの情報と上記検索用メ夕データ生成部からのメ夕デ一夕に基づき上記データベースを検索し、検索の結果得られたコンテンヅの付加情報を抽出して、その付加情報が掲載された検索結果リストを出力する、

ことを特徴とする請求の範囲第 2項記載のコンテンツ検索配信装置。

5 . さらに、上記端末装置からの情報に基づきコンテンヅ検索用のメ夕データを生成して上記コンテンヅ検索部へ出力する検索用メ夕デ一夕生成部を有し、

上記コンテンヅ検索部は、上記端末装置からの情報と上記検索用メ夕データ生成部からのメ夕データに基づき上記データベースを検索し、検索の結果得られたコンテンツの付加情報を抽出して、その付加情報が掲載された検索結果リストを出力する、

ことを特徴とする請求の範囲第 3項記載のコンテンヅ検索配信装置。

6 . 上記端末装置からの情報に基づき上記データベースからコンテンッを読み出し、読み出したコンテンヅを上記端末装置の処理能力に応じて当該端末装置で処理できる形態に編集する出力コンテンヅ編集部と、上記出力コンテンツ編集部によって編集されたコンテンヅを上記端末装置へ配信するコンテンヅ配信部と、

を有することを特徴とする請求の範囲第 1項記載のコンテンヅ検索配信装置。

7 . 上記端末装置からの情報に基づき上記デ一夕ベースからコンテンヅを読み出し、読み出したコンテンッを上記端末装置の処理能力に応じて当該端末装置で処理できる形態に編集する出力コンテンツ編集部と、上記出力コンテンヅ編集部によって編集されたコンテンツを上記端末装置へ配信するコンテンヅ配信部と、

を有することを特徴とする請求の範囲第 2項記載のコンテンヅ検索配信装置。

8 . 上記端末装置からの情報に基づき上記データベースからコンテンヅを読み出し、読み出したコンテンヅを上記端末装置の処理能力に応じて当該端末装置で処理できる形態に編集する出力コンテンツ編集部と、上記出力コンテンツ編集部によって編集されたコンテンツを上記端末装置へ配信するコンテンヅ配信部と、

を有することを特徴とする請求の範囲第 3項記載のコンテンヅ検索配信装置。

9 . 上記端末装置からの情報に基づき上記データペースからコンテンヅを読み出し、読み出したコンテンヅを上記端末装置の処理能力に応じて当該端末装置で処理できる形態に編集する出力コンテンヅ編集部と、上記出力コンテンヅ編集部によって編集されたコンテンツを上記端末装置へ配信するコンテンヅ配信部と、

を有することを特徴とする請求の範囲第 4項記載のコンテンヅ検索配信装置。

1 0 . 上記端末装置からの情報に基づき上記デ一夕ベースからコンテンヅを読み出し、読み出したコンテンヅを上記端末装置の処理能力に応じて当該端末装置で処理できる形態に編集する出力コンテンヅ編集部と上記出力コンテンヅ編集部によって編集されたコンテンツを上記端末装置へ配信するコンテンヅ配信部と、

を有することを特徴とする請求の範囲第 5項記載のコンテンツ検索配信装置。

1 1 . 上記データベースは、コンテンツとそのコンテンツの登録用メ夕データとを蓄積している場合と、コンテンツへのリンク情報とそのコンテンヅの登録用メ夕デ一夕とを蓄積している場合があり、

上記出力コンテンヅ編集部は、さらに、上記端末装置からの情報に基づき上記デ一夕ベースから上記リンク情報を読み出し、その上記リンク情報に基づきコンテンヅを読み出す、

ことを特徴とする請求の範囲第 6項記載のコンテンヅ検索配信装置。

1 2 . 上記データベースは、コンテンツとそのコンテンツの登録用メ夕デ一夕とを蓄積している場合と、コンテンヅへのリンク情報とそのコンテンヅの登録用メ夕デ一夕とを蓄積している場合があり、

上記出力コンテンツ編集部は、さらに、上記端末装置からの情報に基づき上記データベースから上記リンク情報を読み出し、その上記リンク情報に基づきコンテンヅを読み出す、

ことを特徴とする請求の範囲第 7項記載のコンテンヅ検索配信装置。

1 3 . 上記デ一夕ベースは、コンテンツとそのコンテンヅの登録用メ夕デ一夕とを蓄積している場合と、コンテンツへのリンク情報とそのコンテンヅの登録用メ夕デ一夕とを蓄積している場合があり、上記出力コンテンヅ編集部は、さらに、上記端末装置からの情報に基づき上記データベースから上記リンク情報を読み出し、その上記リンク情報に基づきコンテンヅを読み出す、

ことを特徴とする請求の範囲第 8項記載のコンテンヅ検索配信装置。

1 4 . 上記データベースは、コンテンツとそのコンテンヅの登録用メ夕デ一夕とを蓄積している場合と、コンテンツへのリンク情報とそのコンテンヅの登録用メ夕デ一夕とを蓄積している場合があり、

上記出力コンテンツ編集部は、さらに、上記端末装置からの情報に基づき上記デ一夕ペースから上記リンク情報を読み出し、その上記リンク情報に基づきコンテンヅを読み出す、

ことを特徴とする請求の範囲第 9項記載のコンテンヅ検索配信装置。

1 5 . 上記データベースは、コンテンツとそのコンテンツの登録用メ夕データとを蓄積している場合と、コンテンヅへのリンク情報とそのコンテンヅの登録用メ夕デ一夕とを蓄積している場合があり、

上記出力コンテンツ編集部は、さらに、上記端末装置からの情報に基づき上記データペースから上記リンク情報を読み出し、その上記リンク情報に基づきコンテンヅを読み出す、

ことを特徴とする請求の範囲第 1 0項記載のコンテンヅ検索配信装置

1 6 . コンテンヅやその付加情報等が格納されたデ一夕ベースを端末装置からの情報に基づき検索し、検索の結果抽出したデ一夕を上記端末装置へ配信する際のコンテンヅ検索配信方法であって、上記検索の結果抽出したデ一夕を上記端末装置の処理能力に応じて編集し上記端末装置へ配信する、

ことを特徴とするコンテンヅ検索配信方法。