JP2002082977A

JP2002082977A - 情報処理装置および情報処理方法、並びに記録媒体

Info

Publication number: JP2002082977A
Application number: JP2000272959A
Authority: JP
Inventors: Tetsujiro Kondo; 哲二郎近藤; Koji Ota; 浩二太田
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2000-09-08
Filing date: 2000-09-08
Publication date: 2002-03-22
Anticipated expiration: 2020-09-08
Also published as: US20020099763A1; EP1197902A3; KR20020020262A; US7580955B2; JP4552296B2; EP1197902A2; US20060015508A1; KR100846252B1; US6990489B2

Abstract

(57)【要約】【課題】付加価値を付けたコンテンツの提供を行う。【解決手段】コンテンツサーバ７では、携帯端末１の
注目ユーザの嗜好が、注目ユーザからのクリックデータ
だけでなく、同じような嗜好を有するユーザからのクリ
ックデータをも加味して認識される。そして、注目ユー
ザが興味がある物体が表示されている画像データについ
ては、その物体が表示されている領域の解像度が高解像
度にされ、注目ユーザの携帯端末１に送信される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、情報処理装置およ
び情報処理方法、並びに記録媒体に関し、特に、例え
ば、ユーザに対して、付加価値を付けたコンテンツの提
供を行うことができるようにする情報処理装置および情
報処理方法、並びに記録媒体に関する。

【０００２】

【従来の技術】例えば、ダイレクトメールなどの商品紹
介情報を、個人の嗜好傾向に合わせて作成し、配布する
ことが一般に行われている。そこで、従来においては、
例えば、アンケートなどで個人情報が収集され、その分
析結果により、個人の嗜好傾向が検出される。

【０００３】しかしながら、上述した従来の方式では、
正確な嗜好情報を得るための質問を作成するのが困難で
あったり、アンケートの採点者によりアンケート結果が
異なり、正確な嗜好傾向を把握することが困難である課
題があった。また、アンケートを作成し、採点し、分析
するのに多大な手間がかかる課題があった。

【０００４】そこで、本件出願人は、例えば、特開２０
００−４８０４６号公報（特願平１１−１４４５０５
号）において、複数のユーザの個人情報から、注目ユー
ザの個人情報と関連度の高い個人情報を抽出し、その個
人情報に基づいて、ＣＤ(Compact Disc)タイトルの一覧
を生成することにより、注目ユーザに、興味がありそう
なＣＤタイトルの一覧を提供する方法を、先に提案して
いる。

【０００５】

【発明が解決しようとする課題】ところで、先に提案し
た方法では、ユーザに対して、そのユーザが興味があり
そうなＣＤや書籍のタイトルが紹介されるだけであっ
た。

【０００６】従って、先に提案した方法において、例え
ば、仮に、ユーザに対して、そのユーザがＣＤタイトル
の一覧から選択したＣＤのコンテンツを提供することが
可能であったとしても、すべてのユーザには、同一のコ
ンテンツが提供されることになる。

【０００７】即ち、ユーザが、同一のＣＤタイトルを選
択する限りは、どのユーザにも、同一のコンテンツが提
供されることになる。

【０００８】しかしながら、ユーザごとに、そのユーザ
の嗜好等にあわせた形でコンテンツを提供することがで
きれば、そのコンテンツに付加価値を付けることがで
き、サービスを利用するユーザが増加することが予想さ
れる。

【０００９】本発明は、このような状況に鑑みてなされ
たものであり、付加価値を付けたコンテンツの提供を行
うことができるようにするものである。

【００１０】

【課題を解決するための手段】本発明の第１の情報処理
装置は、複数の端末から送信されてくる各ユーザの入力
情報を記憶する記憶手段と、記憶手段に記憶された複数
のユーザの入力情報に基づいて、端末に提供するコンテ
ンツを制御する制御手段とを備えることを特徴とする。

【００１１】本発明の第１の情報処理方法は、複数の端
末から送信されてくる各ユーザの入力情報を記憶手段に
記憶させる記憶ステップと、記憶手段に記憶された複数
のユーザの入力情報に基づいて、端末に提供するコンテ
ンツを制御する制御ステップとを備えることを特徴とす
る。

【００１２】本発明の第１の記録媒体は、複数の端末か
ら送信されてくる各ユーザの入力情報を記憶手段に記憶
させる記憶ステップと、記憶手段に記憶された複数のユ
ーザの入力情報に基づいて、端末に提供するコンテンツ
を制御する制御ステップとを備えるプログラムが記録さ
れていることを特徴とする。

【００１３】本発明の第２の情報処理装置は、複数の端
末それぞれが、提供装置から提供されるコンテンツに対
して、所定の入力を与える入力手段と、所定の入力を表
す入力情報を、提供装置に送信する送信手段とを備え、
提供装置が、複数の端末から送信されてくる各ユーザの
入力情報を記憶する記憶手段と、記憶手段に記憶された
複数のユーザの入力情報に基づいて、端末に提供するコ
ンテンツを制御する制御手段とを備えることを特徴とす
る。

【００１４】本発明の第３の情報処理装置は、複数の端
末から送信されてくる各ユーザの入力情報を記憶する記
憶手段と、記憶手段に記憶された複数のユーザの入力情
報に基づいて、複数の端末それぞれに放送する放送デー
タを制御する制御手段とを備えることを特徴とする。

【００１５】本発明の第２の情報処理方法は、複数の端
末から送信されてくる各ユーザの入力情報を記憶手段に
記憶させる記憶ステップと、記憶手段に記憶された複数
のユーザの入力情報に基づいて、複数の端末それぞれに
放送する放送データを制御する制御ステップとを備える
ことを特徴とする。

【００１６】本発明の第２の記録媒体は、複数の端末か
ら送信されてくる各ユーザの入力情報を記憶手段に記憶
させる記憶ステップと、記憶手段に記憶された複数のユ
ーザの入力情報に基づいて、複数の端末それぞれに放送
する放送データを制御する制御ステップとを備えるプロ
グラムが記録されていることを特徴とする。

【００１７】本発明の第４の情報処理装置は、複数の端
末から送信されてくる各ユーザの入力情報を記憶する記
憶手段と、記憶手段に記憶された複数のユーザの入力情
報に基づいて、端末にダウンロードさせるダウンロード
データを制御する制御手段とを備えることを特徴とす
る。

【００１８】本発明の第３の情報処理方法は、複数の端
末から送信されてくる各ユーザの入力情報を記憶手段に
記憶させる記憶ステップと、記憶手段に記憶された複数
のユーザの入力情報に基づいて、端末にダウンロードさ
せるダウンロードデータを制御する制御ステップとを備
えることを特徴とする。

【００１９】本発明の第３の記録媒体は、複数の端末か
ら送信されてくる各ユーザの入力情報を記憶手段に記憶
させる記憶ステップと、記憶手段に記憶された複数のユ
ーザの入力情報に基づいて、端末にダウンロードさせる
ダウンロードデータを制御する制御ステップとを備える
プログラムが記録されていることを特徴とする。

【００２０】本発明の第１の情報処理装置および第１の
情報処理方法、並びに第１の記録媒体においては、複数
の端末から送信されてくる各ユーザの入力情報が記憶さ
れ、その記憶された複数のユーザの入力情報に基づい
て、端末に提供するコンテンツが制御される。

【００２１】本発明の第２の情報処理装置においては、
複数の端末それぞれにおいて、提供装置から提供される
コンテンツに対して、所定の入力が与えられ、その入力
を表す入力情報が、提供装置に送信される。そして、提
供装置において、複数の端末から送信されてくる各ユー
ザの入力情報が記憶され、その記憶された複数のユーザ
の入力情報に基づいて、端末に提供するコンテンツが制
御される。

【００２２】本発明の第３の情報処理装置および第２の
情報処理方法、並びに第２の記録媒体においては、複数
の端末から送信されてくる各ユーザの入力情報が記憶さ
れ、その記憶された複数のユーザの入力情報に基づい
て、複数の端末それぞれに放送する放送データが制御さ
れる。

【００２３】本発明の第４の情報処理装置および第３の
情報処理方法、並びに第３の記録媒体においては、複数
の端末から送信されてくる各ユーザの入力情報が記憶さ
れ、その記憶された複数のユーザの入力情報に基づい
て、端末にダウンロードさせるダウンロードデータが制
御される。

【００２４】

【発明の実施の形態】図１は、本発明を適用したネット
ワークシステム（システムとは、複数の装置が論理的に
集合したものをいい、各構成の装置が同一筐体中にある
か否かは問わない）の一実施の形態の構成例を示してい
る。

【００２５】複数の携帯端末１₁，１₂，・・・，１
_Aは、無線通信が可能な、例えば、携帯電話機や、ＰＨ
Ｓ(Personal Handyphone System)（商標）、ＰＤＡ(Per
sonal Digital Assistants)等で構成されている。

【００２６】基地局２₁，２₂，・・・，２_Bは、通信サ
ービスの提供エリアを所望の大きさに分割したセル内に
それぞれ設置された固定無線局であり、移動無線局であ
る携帯端末１₁，１₂，・・・，１_Aは、それが存在する
セルを担当する基地局に無線接続されるようになってい
る。

【００２７】なお、本実施の形態では、基地局２₁乃至
２_B（以下、特に区別する必要がない限り、基地局２と
記述する）と、携帯端末１₁乃至１_A（以下、特に区別す
る必要がない限り、携帯端末１と記述する）との間で
は、例えば、Ｗ−ＣＤＭＡ（Wideband-Code Division M
ultiple Access）と呼ばれる符号分割多元接続方式によ
って無線通信が行われるようになっており、これによ
り、２ＧＨｚの周波数帯域を使用して、最大で２Ｍｂｐ
ｓのデータ転送速度で、大容量のデータを高速にやりと
りすることができるようになっている。このように、高
速かつ大容量のデータ通信が可能であることにより、携
帯端末１では、音声通話は勿論、電子メールの送受信、
ホームページの閲覧、画像の送受信等の多種多様のデー
タのやりとりを行うことができるようになっている。

【００２８】基地局２は、有線回線を介して、公衆回線
網３に接続されており、公衆回線網３には、インターネ
ット５、図示しない多くの加入者有線端末、コンピュー
タネットワーク、企業内ネットワーク等が接続されてい
る。さらに、公衆回線網３には、インターネットサービ
スプロバイダが保有するアクセスサーバ６およびコンテ
ンツサーバ７も接続されている。

【００２９】アクセスサーバ６は、いわゆるダイヤルア
ップ接続による、インターネット５への接続サービスを
提供する。

【００３０】コンテンツサーバ７は、携帯端末１からの
要求に応じて、あるいは、いわゆるプッシュ型の配信に
よって、例えば、ＷｅｂページとしてのＨＴＭＬ（Hype
r Text Markup Language）形式のファイルや、さらに
は、電子ブックのデータ、ＣＤに収められた曲の音声デ
ータ（オーディオデータ）、動画の画像データ等の各種
のコンテンツを提供する。

【００３１】インターネット５には、多数のＷＷＷ(Wor
ld Wide Web)サーバ４₁，４₂，・・・，４_Cが接続さ
れ、これらのＷＷＷサーバ４₁乃至４_C（以下、特に区別
する必要がない限り、ＷＷＷサーバ４と記載する）に対
しては、加入者有線端末や、携帯端末１から、ＴＣＰ／
ＩＰ（Transmission Control Protocol/Internet Proto
col）のプロトコルにしたがってアクセスすることがで
きるようになっている。ここで、例えば、携帯端末１か
ら基地局２までの間では、２Ｍｂｐｓの簡易トランスポ
ートプロトコルで、基地局２からインターネット５を介
してＷＷＷサーバ４までの間では、ＴＣＰ／ＩＰプロト
コルで、それぞれ通信が行われる。

【００３２】管理制御装置８は、公衆回線網３に接続さ
れており、加入者有線端末や携帯端末１に対する通話料
等の課金処理を行う。

【００３３】図２は、図１の携帯端末１の外観構成例を
示している。

【００３４】即ち、図２は、携帯端末１が、例えば、カ
メラ付ディジタル携帯電話機である場合の外観構成例を
示している。

【００３５】図２において、携帯端末１は、中央のヒン
ジ部１１を境に、表示部１２と本体１３とに分けられて
おり、ヒンジ部１１を介して折り畳み可能に形成されて
いる。

【００３６】表示部１２には、その上端左部に送受信用
のアンテナ１４が引出しおよび収納可能な状態に取り付
けられており、アンテナ１４は、基地局２との間で電波
を送受信する。また、表示部１２には、その上端中央部
に、ほぼ１８０度の角度範囲で回動自在なカメラ部１５
が設けられている。カメラ部１５は、ＣＣＤ(ChargeCou
pled Device)カメラ１６を有しており、これにより、携
帯端末１では、所望の被写体の画像を撮像することがで
きるようになっている。

【００３７】カメラ部１５の、ＣＣＤカメラ１６が設け
られている反対側の面（背面）には、スピーカ１７が設
けられている。即ち、ユーザが、カメラ部１５を、図２
に示した状態から、ほぼ１８０度回動し、その状態に位
置決めすると、図３に示すように、カメラ部１５の背面
側中央に設けられたスピーカ１７が、正面側に位置する
ことになり、これにより、通常の音声通話が可能な状態
に切り換わる。

【００３８】表示部１２には、さらに、その正面に、液
晶ディスプレイ１８が設けられており、液晶ディスプレ
イ１８には、例えば、電波の受信状態、電池残量、電話
帳として登録されている相手先名や電話番号、および発
信履歴などが表示される。さらに、液晶ディスプレイ１
８には、電子メールの内容や、Ｗｅｂページ、ＣＣＤカ
メラ１６で撮像された画像、携帯端末１で受信されたデ
ータ、その他、液晶ディスプレイ１８の表示画面上の所
定の位置を指示するカーソルなども表示される。

【００３９】本体１３には、その表面に「０」乃至
「９」の数字キー、発呼キー、リダイヤルキー、終話及
び電源キー、クリアキー、並びに電子メールキー等の操
作キー１９が設けられており、ユーザは、この操作キー
１９を操作することによって、各種の指示を入力するこ
とができるようになっている。

【００４０】また、本体１３には、操作キー１９の下部
に、メモボタン２０やマイクロフォン２１が設けられて
いる。メモボタン２０は、通話中の相手の音声を録音す
るときに操作される。マイクロフォン２１は、通話時の
ユーザの音声を集音する。

【００４１】さらに、本体１３には、操作キー１９の上
部に、回転自在なトラックボール２２が、本体１３の表
面から僅かに突出した状態で設けられている。トラック
ボール２２が回転操作されると、その操作に応じて、液
晶ディスプレイ１８に表示された電話帳リストや電子メ
ールのスクロール動作、ホームページのページ捲り動
作、画像の送り動作等の種々の動作が行われる。

【００４２】また、トラックボール２２は、本体１３の
内部方向への押圧操作が可能になっている。例えば、ユ
ーザが、トラックボール２２を回転操作することによ
り、液晶ディスプレイ１８に表示された電話帳リストの
複数の電話番号の中から所望の電話番号を選択し、トラ
ックボール２２を本体１３の内部方向に押圧操作する
と、携帯端末１では、選択された電話番号が確定され、
その電話番号に対して自動的に発呼処理が行われる。

【００４３】その他、トラックボール２２は、例えば、
液晶ディスプレイ１８に表示されるカーソルを移動する
ときに回転操作され、カーソルが位置している点をクリ
ックするときに、押圧操作される。

【００４４】本体１３の左側面上部には、抜差自在な
「メモリカード」２３を挿着するためのメモリカードス
ロット２４が設けられている。メモリカードには、メモ
ボタン２０が押下された場合に、通話中の相手の音声が
記録され、あるいは、また、ユーザの操作に応じて、電
子メールや、ホームページ、ＣＣＤカメラ１６で撮像さ
れた画像、携帯端末１で受信されたデータ等が記録され
る。

【００４５】ここで、メモリカード２３は、小型薄型形
状のプラスチックケース内に、電気的に書換えや消去が
可能な不揮発性メモリであるＥＥＰＲＯＭ（Electrical
ly Erasable and Programmable Read Only Memory ）の
一種であるフラッシュメモリ素子を格納したものであ
り、画像データや、音声データ、プログラム等の各種デ
ータの書き込みおよび読み出しが可能となっている。

【００４６】なお、メモリカード２３としては、例え
ば、本件出願人であるソニー株式会社によって開発され
たメモリスティク（ソニー株式会社の商標）を採用する
ことができる。また、メモリカード２３としては、その
他、例えば、他社製品であるＳＤメモリーカードや、コ
ンパクトフラッシュ（登録商標）、スマートメディア、
マルチメディアカード、サムドライブ(Thumb Drive)
（いずれも商標）等を採用することも可能である。ま
た、半導体メモリであるメモリカード２３に替えて、例
えば、マイクロドライブやｉＤフォーマット（いずれも
商標）といった磁気ディスク等を採用することも可能で
ある。

【００４７】メモリカード２３は、メモリスティックス
ロット２４に対して、容易に着脱可能となっており、従
って、メモリカード２３を介することで、他の電子機器
との間で、データを、容易に共有することが可能となっ
ている。

【００４８】なお、本体１３には、背面側に、図示しな
いバッテリパックが挿着されており、終話及び電源キー
がオン状態になると、バッテリパックから各回路部に対
して電力が供給されて動作可能な状態となる。

【００４９】図４は、携帯端末１の電気的構成例を示し
ている。

【００５０】携帯端末１は、表示部１２および本体１３
の各部を統括的に制御する主制御部３０に対して、電源
回路部３１、操作入力制御部３２、画像エンコーダ３
３、カメラインターフェース部３４、ＬＣＤ（Liquid C
rystal Display）制御部３５、画像デコーダ３６、多重
分離部３７、記録再生部４２、変復調回路部３８、およ
び音声コーデック３９が、メインバス４０を介して互い
に接続されると共に、画像エンコーダ３３、画像デコー
ダ３６、多重分離部３７、変復調回路部３８、および音
声コーデック３９が、同期バス４１を介して互いに接続
されて構成されている。

【００５１】電源回路部３１は、ユーザの操作により終
話及び電源キーがオン状態にされると、バッテリパック
から各部に対して電力を供給し、携帯端末１を動作可能
な状態に起動する。

【００５２】主制御部３０は、図示せぬＣＰＵ，ＲＯ
Ｍ、ＲＡＭ等で構成され、ＣＰＵが、ＲＯＭに記憶され
たプログラムを実行することで、各種の処理を行う。

【００５３】即ち、携帯端末１は、主制御部３０の制御
に基づいて、音声通話モード時にマイクロフォン２１で
集音した音声信号を、音声コーデック３９によってディ
ジタル音声データに変換し、これを変復調回路部３８で
スペクトラム拡散処理する。さらに、携帯端末１は、そ
のスペクトラム拡散処理語の信号に対して、送受信回路
部４３でディジタルアナログ変換処理及び周波数変換処
理を施し、アンテナ１４を介して送信する。

【００５４】また、携帯端末１は、音声通話モード時に
アンテナ１４で受信した受信信号を、送受信回路部４３
で増幅し、周波数変換処理及びアナログディジタル変換
処理を施して、変復調回路部３８に供給する。変復調回
路部３８は、送受信回路部４３からの信号をスペクトラ
ム逆拡散処理し、音声コーデック３９に供給する。音声
コーディック３９は、変復調回路部３８からの信号をア
ナログ音声信号に変換し、スピーカ１７に供給して出力
させる。

【００５５】さらに、携帯端末１は、例えば、電子メー
ル等のテキストデータを送信する場合、操作キー１９や
トラックボール２２の操作によって入力されたテキスト
データを、操作入力制御部３２を介して主制御部３０に
送出する。主制御部３０は、そこに供給されるテキスト
データを、上述した音声通話における場合と同様に、変
復調回路部３８および送受信回路部４３で処理した後、
アンテナ１４を介して、基地局２に送信する。

【００５６】また、携帯端末１は、電子メール等のテキ
ストデータを受信する場合、アンテナ１４を介して基地
局２から受信した受信信号を、音声通話における場合と
同様に、送受信回路部４３および変復調回路部３８で処
理することにより、テキストデータに復元した後、ＬＣ
Ｄ制御部３５を介して、液晶ディスプレイ１８に供給し
て、電子メールとして表示させる。

【００５７】さらに、携帯端末１は、例えば、画像デー
タを送信する場合、ＣＣＤカメラ１６で撮像された画像
データを、カメラインターフェース部３４を介して、画
像エンコーダ３３に供給する。画像エンコーダ３３は、
ＣＣＤカメラ１６から供給される画像データを、所定の
符号化方式によって圧縮符号化することにより符号化画
像データに変換し、これを多重分離部３７に送出する。
同時に、携帯端末１は、ＣＣＤカメラ１６による撮像中
にマイクロフォン２１で集音した音声を、音声コーデッ
ク３９を介して、ディジタルの音声データとして、多重
分離部３７に送出する。多重分離部３７は、画像エンコ
ーダ３３から供給された符号化画像データと音声コーデ
ック３９から供給された音声データとを、所定の方式で
多重化する。この結果得られる多重化データは、変復調
回路部３８および送受信回路部４３で処理され、アンテ
ナ１４を介して送信される。

【００５８】なお、上述のようにしてCCDカメラ１６で
撮影される画像データは、同時に、カメラインターフェ
ース部３４及びＬＣＤ制御部３５を介して、液晶ディス
プレイ１８に供給して表示することができる。

【００５９】携帯端末１は、例えば、画像データを受信
する場合、アンテナ１４を介して基地局２から受信した
受信信号を、送受信回路部４３および変復調回路部３８
で処理し、その結果得られる多重化データを、多重分離
部３７に送出する。多重分離部３７は、多重化データ
を、符号化画像データと音声データとに分け、同期バス
４１を介して、符号化画像データを画像デコーダ３６に
供給すると共に、音声データを音声コーデック３９に供
給する。画像デコーダ３６は、符号化画像データを所定
の符号化方式に対応した復号化方式でデコードすること
により、再生動画像データを生成し、ＬＣＤ制御部３５
を介して液晶ディスプレイ１８に供給して表示させる。
音声コーデック３９は、そこに供給される音声データを
アナログ音声信号に変換し、スピーカ１７に供給して出
力させる。

【００６０】その他、携帯端末１では、コンテンツサー
バ７がプッシュ型で配信する電子ブックのデータや、映
画等の画像（動画像）データ等のコンテンツの受信も可
能となっている。

【００６１】ここで、携帯端末１では、受信した各種の
データを、記録再生部４２を介してメモリカード２３に
供給して記録させることが可能である。

【００６２】次に、図５は、図１のコンテンツサーバ７
のハードウェア構成例を示している。

【００６３】CPU５２(Central Processing Unit)には、
バス５１を介して、入出力インタフェース６０が接続さ
れており、CPU５２は、インターネットサービスプロバ
イダの管理者によって、キーボードや、マウス、マイク
等で構成される入力部５７が操作等されることにより、
入出力インタフェース６０を介して指令が入力される
と、それにしたがって、ROM(Read Only Memory)５３に
格納されているプログラムを実行する。あるいは、ま
た、CPU５２は、ハードディスク５５に格納されている
プログラム、衛星若しくはネットワークから転送され、
通信部５８で受信されてハードディスク５５にインスト
ールされたプログラム、またはドライブ５９に装着され
たリムーバブル記録媒体６１から読み出されてハードデ
ィスク５５にインストールされたプログラムを、RAM(Ra
ndom Access Memory)５４にロードして実行する。これ
により、CPU５２は、後述するフローチャートにしたが
った処理、あるいは後述するブロック図の構成により行
われる処理を行う。そして、CPU５２は、その処理結果
を、必要に応じて、例えば、入出力インタフェース６０
を介して、LCD(Liquid CryStal Display)やスピーカ等
で構成される出力部５６から出力、あるいは、通信部５
８から送信、さらには、ハードディスク５５に記録等さ
せる。

【００６４】なお、本明細書において、コンテンツサー
バ７（のCPU５２）に各種の処理を行わせるためのプロ
グラムを記述する処理ステップは、必ずしもフローチャ
ートとして記載された順序に沿って時系列に処理する必
要はなく、並列的あるいは個別に実行される処理（例え
ば、並列処理あるいはオブジェクトによる処理）も含む
ものである。

【００６５】また、プログラムは、コンテンツサーバ７
だけによって処理されるものであっても良いし、コンテ
ンツサーバ７を含む複数のコンピュータによって分散処
理されるものであっても良い。さらに、プログラムは、
遠方のコンピュータに転送されて実行されるものであっ
ても良い。

【００６６】ここで、プログラムは、コンテンツサーバ
７に内蔵されている記録媒体としてのハードディスク５
５やＲＯＭ５３に予め記録しておくことができる。

【００６７】あるいはまた、プログラムは、フロッピー
（登録商標）ディスク、CD-ROM(Compact Disc Read Onl
y Memory)，MO(Magneto optical)ディスク，DVD(Digita
l Versatile Disc)、磁気ディスク、半導体メモリなど
のリムーバブル記録媒体６１に、一時的あるいは永続的
に格納（記録）しておくことができる。このようなリム
ーバブル記録媒体６１は、いわゆるパッケージソフトウ
エアとして提供することができる。

【００６８】さらに、プログラムは、上述したようなリ
ムーバブル記録媒体６１からコンテンツサーバ７にイン
ストールする他、ダウンロードサイトから、ディジタル
衛星放送用の人工衛星を介して、コンテンツサーバ７に
無線で転送したり、LAN(Local Area Network)、インタ
ーネットといったネットワークを介して、コンテンツサ
ーバ７に有線で転送し、コンテンツサーバ７では、その
ようにして転送されてくるプログラムを、通信部５８で
受信し、内蔵するハードディスク５５にインストールす
ることができる。

【００６９】ところで、コンテンツサーバ７は、上述し
たように、例えば、プッシュ型の配信、つまりは、放送
によって、電子ブックのデータや映画の画像データ等の
コンテンツを、携帯端末１に提供するが、その提供する
コンテンツは、複数の携帯端末１₁乃至１_Aそれぞれから
送信されてくる各ユーザのユーザ入力情報に基づいて制
御されるようになっている。

【００７０】即ち、図１において、コンテンツサーバ７
は、例えば、電子ブックのデータを、複数の携帯端末１
₁乃至１_Aのうちの、ある注目している注目ユーザの携帯
端末１（以下、適宜、注目携帯端末１という）に提供す
る場合には、最初は、例えば、各電子ブックの書籍名、
著者、出版社だけを、アクセスサーバ６、公衆回線網
３、および基地局２を介して、注目携帯端末１に提供す
る。

【００７１】この場合、注目携帯端末１では、例えば、
図６（Ａ）に示すように、液晶ディスプレイ１８におい
て、各電子ブックの書籍名、著者、出版社が表示され
る。注目携帯端末１以外の携帯端末１でも、同様の表示
が行われる。

【００７２】複数の携帯端末１₁乃至１_Aそれぞれにおい
て、図６（Ａ）に示した表示が行われている場合に、各
携帯端末１₁乃至１_Aのユーザが、トラックボール２２を
クリックすることにより、自身が所望する電子ブックの
表示部分を選択すると、主制御部３０（図４）は、その
選択された電子ブックを特定する情報を、ユーザからの
ユーザ入力情報として、変復調回路部３８および送受信
回路部４３を制御することにより送信する。即ち、これ
により、ユーザ入力情報は、基地局２、公衆回線網３、
およびアクセスサーバ６を介して、コンテンツサーバ７
に送信される。

【００７３】コンテンツサーバ７は、このようにして複
数の携帯端末１₁乃至１_Aそれぞれから送信されてくる各
ユーザのユーザ入力情報に基づいて、注目ユーザの嗜好
を推定し、その推定した嗜好に基づいて、注目ユーザに
提供する電子ブックのデータを加工する。

【００７４】即ち、コンテンツサーバ７は、提供する電
子ブックのデータから、注目ユーザが興味がないと推測
される書籍に関するものを削除する。さらに、コンテン
ツサーバ７は、提供する電子ブックのデータに対して、
注目ユーザが興味があるであろうと推測される書籍の内
容の一部を追加する。そして、コンテンツサーバ７は、
注目ユーザの注目携帯端末１に、そのような加工を行っ
た電子ブックのデータを提供する。

【００７５】その結果、注目携帯端末１では、例えば、
図６（Ｂ）に示すように、液晶ディスプレイ１８におい
て、注目ユーザが興味のある書籍のみについての電子ブ
ックの書籍名、著者、出版社と、その書籍の内容の一部
が表示される。なお、注目携帯端末１以外の携帯端末１
でも、各ユーザの興味のある書籍について、同様の表示
が行われる。

【００７６】その後も、コンテンツサーバ７は、注目ユ
ーザの嗜好の推定をし続け、より興味があると推定され
た書籍については、その書籍の全内容を提供する。

【００７７】その結果、注目携帯端末１では、例えば、
図６（Ｃ）に示すように、液晶ディスプレイ１８におい
て、注目ユーザがより興味のある書籍のみについての電
子ブックの書籍名、著者、出版社と、その書籍の内容の
全部が表示される。なお、注目携帯端末１以外の携帯端
末１でも、各ユーザの興味のある書籍について、同様の
表示が行われる。

【００７８】ここで、上述の場合には、コンテンツサー
バ７において、注目ユーザの嗜好を推定し、注目ユーザ
に対して、興味があると推定された書籍のみについての
電子ブックのデータを提供するようにしたが、注目ユー
ザに対しては、他の書籍についての電子ブックのデータ
も提供することが可能である。即ち、コンテンツサーバ
７が電子ブックのデータを有している書籍のうち、注目
ユーザが興味があると推定されるものについては、図６
（Ｂ）や図６（Ｃ）で説明したような電子ブックのデー
タを提供し、残りの書籍については、書籍名、著者、お
よび出版社だけの電子ブックのデータを提供するように
することが可能である。

【００７９】さらに、コンテンツサーバ７では、推定し
た注目ユーザの嗜好に応じて、例えば、書籍の内容を表
す文字を、図７（Ａ）に示すような、デフォルトの大き
さから、図７（Ｂ）に示すような、より大きな文字に変
更した電子ブックのデータを提供することが可能であ
る。また、コンテンツサーバ７では、推定した注目ユー
ザの嗜好に応じて、例えば、図７（Ｃ）に示すように、
電子ブックの書籍名、著者、出版社と、その書籍の内容
の全部に、挿絵や、著者の写真、書籍の表紙の写真を含
ませたものに変更した電子ブックのデータを提供するよ
うにすることも可能である。

【００８０】さらに、コンテンツサーバ７においては、
推定した注目ユーザの嗜好に基づいて、注目ユーザが興
味があるであろうと推測される書籍のリスト（お奨め書
籍リスト）を作成し、図８に示すように、そのリストを
含めたものに変更した電子ブックのデータを、注目ユー
ザに対して提供するようにすることも可能である。

【００８１】なお、上述の場合には、コンテンツサーバ
７においては、電子ブックのデータを提供するようにし
たが、他のコンテンツについても、複数のユーザからの
ユーザ入力情報に応じて、各ユーザに提供されるコンテ
ンツの内容が制御される。

【００８２】即ち、例えば、コンテンツサーバ７から複
数の携帯端末１₁乃至１_Aに対して、画像データが提供さ
れる場合には、最初は、例えば、図９（Ａ）に示すよう
な、全体の解像度が低い（あるいは、標準解像度の）画
像データが提供される。

【００８３】複数の携帯端末１₁乃至１_Aそれぞれにおい
て、図９（Ａ）に示した解像度の低い画像データが表示
されている場合に、各携帯端末１₁乃至１_Aのユーザが、
トラックボール２２をクリックすることにより、自身が
所望する物体の表示部分を選択すると、主制御部３０
（図４）は、その選択された表示部分を特定する情報
を、ユーザからのユーザ入力情報として、変復調回路部
３８および送受信回路部４３を制御することにより、コ
ンテンツサーバ７に送信する。

【００８４】コンテンツサーバ７は、このようにして複
数の携帯端末１₁乃至１_Aそれぞれから送信されてくる各
ユーザのユーザ入力情報に基づいて、注目ユーザの嗜好
を推定し、その推定した嗜好に基づいて、注目ユーザに
提供する画像データを加工する。

【００８５】即ち、コンテンツサーバ７は、提供する画
像データの中で、注目ユーザが興味があると推測される
領域の解像度を向上させ、注目ユーザの注目携帯端末１
に、そのように解像度を向上させた画像データを提供す
る。

【００８６】その結果、注目携帯端末１では、例えば、
図９（Ｂ）に示すように、液晶ディスプレイ１８におい
て、注目ユーザが興味のある物体の表示部分の解像度が
向上した画像データが表示される。なお、注目携帯端末
１以外の携帯端末１でも、各ユーザの興味がある物体に
ついて、同様の表示が行われる。

【００８７】また、コンテンツサーバ７から複数の携帯
端末１₁乃至１_Aに対して、例えば、図１０（Ａ）に示す
ように、オブジェクト分離されていない画像データが提
供される場合において、各携帯端末１₁乃至１_Aのユーザ
が、トラックボール２２をクリックすることにより、自
身が所望するオブジェクトの表示部分を選択すると、主
制御部３０（図４）は、その選択された表示部分を特定
する情報を、ユーザからのユーザ入力情報として、変復
調回路部３８および送受信回路部４３を制御することに
より、コンテンツサーバ７に送信する。

【００８８】コンテンツサーバ７は、このようにして複
数の携帯端末１₁乃至１_Aそれぞれから送信されてくる複
数のユーザのユーザ入力情報に基づいて、注目ユーザに
提供する画像データからオブジェクトを抽出し、これに
より、例えば、図１０（Ｂ）に示すように、画像データ
を、オブジェクト（前景）と背景に分離するとともに、
オブジェクト符号化を行って、注目ユーザの注目携帯端
末１に提供する。

【００８９】注目携帯端末１では、オブジェクト符号化
された画像データを構成するオブジェクトと背景とが合
成され、図１０（Ａ）に示したような画像が表示される
が、注目ユーザには、オブジェクトが分離された状態の
画像データが提供されるため、注目ユーザは、そのオブ
ジェクトを再利用することができる。

【００９０】次に、図１１は、携帯端末１に対して、図
６乃至図１０で説明したようなコンテンツの提供が行わ
れる場合の、図５のコンテンツサーバ７の機能的構成例
を示している。なお、この機能的構成は、コンテンツサ
ーバ７において、ハードディスク５５にインストール等
されたプログラムを、ＣＰＵ５２が実行することにより
実現される。

【００９１】コンテンツデータベース７１は、携帯端末
１に提供するコンテンツを記憶している。

【００９２】コンテンツ加工部７２は、携帯端末１に提
供するコンテンツを、コンテンツデータベース７１から
読み出し、そのコンテンツを、検索部７８から供給され
る解析情報に基づいて加工する。そして、コンテンツ加
工部７２は、加工後のコンテンツ（以下、適宜、加工コ
ンテンツという）を、送受信制御部７３に供給する。

【００９３】送受信制御部７３は、コンテンツ加工部７
２からの加工コンテンツを、いわゆるプッシュ型の配信
によって、携帯端末１に送信する。また、送受信制御部
７３は、ユーザ端末１から送信されてくるユーザ入力情
報を受信し、登録部７４に供給する。その他、送受信制
御部７３は、ユーザ登録のためのデータの送受信等も行
う。

【００９４】登録部７４は、送受信制御部７３から供給
されるユーザ入力情報を、ユーザ入力情報データベース
７５に供給して登録する。さらに、登録部７４は、ユー
ザＩＤ(Identification)やパスワードの発行等のユーザ
登録のための処理も行う。また、登録部７４は、必要に
応じて、携帯端末１のユーザを特定するユーザＩＤを、
課金処理部７９に供給する。

【００９５】ユーザ入力情報データベース７５は、登録
部７４から供給されるユーザ入力情報を、そのユーザ入
力情報を送信してきた携帯端末のユーザのユーザＩＤと
対応付けて記憶する。

【００９６】解析部７６は、ユーザ入力情報データベー
ス７５に記憶された複数のユーザの入力情報を解析し、
注目ユーザの嗜好等の解析情報を、注目ユーザのユーザ
ＩＤと対応付けて、解析情報データベース７７に供給す
る。

【００９７】解析情報データベース７７は、解析部７６
から供給される解析情報およびユーザＩＤを一時記憶す
る。

【００９８】検索部７８は、注目ユーザのユーザＩＤに
対応付けられている解析情報を、解析情報データベース
７７から検索し、コンテンツ加工部７２に供給する。

【００９９】課金処理部７９は、ユーザ入力情報データ
ベース７５に記憶されたユーザＩＤのユーザについて、
課金処理を行う。なお、コンテンツサーバ７がユーザに
提供するサービスは、その内容によって、有料または無
料にすることができる。ユーザ入力情報データベース７
５には、ユーザが、有料のサービスを受けるもの（有料
ユーザ）であるか、または無料のサービスを受けるもの
（無料ユーザ）であるかの有料／無料情報を、各ユーザ
のユーザＩＤと対応付けて登録することができ、この場
合、課金処理部７９は、有料ユーザに対してのみ、課金
処理を行う。

【０１００】以上のように構成されるコンテンツサーバ
７では、コンテンツサーバ７が提供するサービスを受け
るためのユーザ登録処理、ユーザ入力情報データベース
７５に記憶されたユーザ入力情報の解析処理、ユーザ
（携帯端末１）へのプッシュ型によるコンテンツ提供処
理等が行われる。

【０１０１】即ち、図１２は、コンテンツサーバ７が行
うユーザ登録処理を説明するフローチャートである。

【０１０２】ユーザ登録処理では、携帯端末１から、ユ
ーザ登録の要求があると、ステップＳ１において、送受
信制御部７３が、ユーザ登録に必要な情報（以下、適
宜、登録情報という）をユーザに入力してもらうため
の、例えばＨＴＭＬ等で記述されたユーザ登録画面を、
ユーザ登録の要求があった携帯端末１に送信する。

【０１０３】このユーザ登録画面は、携帯端末１で受信
され、液晶ディスプレイ１８において表示される。そし
て、ユーザが、液晶ディスプレ１８に表示されたユーザ
登録画面に対して、ユーザの氏名や、代金引き落としの
ための口座番号あるいはクレジットカード番号、その他
の必要な登録情報を入力し、その登録情報が、携帯端末
１からコンテンツサーバ７に送信されてくると、送受信
制御部７３は、ステップＳ２において、携帯端末１から
送信されてくる登録情報を受信し、登録部７４に供給す
る。登録部７４は、登録情報を受信すると、ステップＳ
３において、ユニークなユーザＩＤとパスワードを発行
し、ステップＳ４に進む。

【０１０４】ステップＳ４では、登録部７４が、ユーザ
入力情報データベース７５に、新たなエントリを生成し
（登録情報を送信してきたユーザのユーザ入力情報を記
憶するための記憶領域を確保し）、そのエントリに、ス
テップＳ３で発行したユーザＩＤおよびパスワードと、
送受信制御部７３からの登録情報とを対応付けて登録す
る。

【０１０５】そして、登録部７４は、発行したユーザＩ
Ｄとパスワードを、送受信制御部７３に供給し、送受信
制御部７４は、ステップＳ５において、登録部７４から
のユーザＩＤとパスワードを、登録情報を送信してきた
携帯端末１に送信して、ユーザ登録処理を終了する。

【０１０６】なお、ユーザＩＤとパスワードを受信した
携帯端末１では、例えば、主制御部３０において、その
ユーザＩＤとパスワードが記憶され、必要な場合に、コ
ンテンツサーバ７に送信される。

【０１０７】次に、図１３のフローチャートを参照し
て、解析部７６が行う、ユーザ入力情報データベース７
５に記憶されたユーザ入力情報を解析する解析処理につ
いて説明する。

【０１０８】コンテンツサーバ７が提供するコンテンツ
について、携帯端末１₁乃至１_Aそれぞれのユーザが、図
６乃至図１０で説明したように、トラックボール２２を
クリックすると、携帯端末１₁乃至１_Aは、そのクリック
されたコンテンツの部分を表す情報を、ユーザ入力情報
として、その主制御部３０に登録されたユーザＩＤとと
もに、コンテンツサーバ７に送信する。このユーザ入力
情報とユーザＩＤは、コンテンツサーバ７の送受信制御
部７３で受信され、登録部７４に供給される。登録部７
４は、送受信制御部７３からのユーザ入力情報を、それ
に対応付けられているユーザＩＤに対応する、ユーザ入
力情報データベース７５のエントリに登録する。

【０１０９】解析部７６は、以上のようにして、１以上
のユーザ入力情報がユーザ入力情報データベース７５に
登録されているユーザを、順次、注目ユーザとして、解
析処理を行う。

【０１１０】即ち、ステップＳ１１では、解析部７６
は、注目ユーザのユーザ入力情報を、ユーザ入力情報デ
ータベース７５から読み出し、そのユーザ入力情報に関
連する他のユーザのユーザ入力情報を、ユーザ入力情報
データベース７５から抽出する。そして、ステップＳ１
２に進み、解析部７６は、注目ユーザのユーザ入力情報
と、ステップＳ１１で抽出したユーザ入力情報とをまと
めて解析情報とし、注目ユーザのユーザＩＤと対応付け
て、解析情報データベース７７に登録して、解析処理を
終了する。

【０１１１】次に、図１４のフローチャートを参照し
て、注目ユーザの注目携帯端末１にコンテンツを提供す
るコンテンツ提供処理について説明する。

【０１１２】コンテンツ提供処理では、まず最初に、ス
テップＳ２１において、検索部７８が、注目ユーザのユ
ーザＩＤに対応付けられている解析情報を、解析情報デ
ータベース７７から検索し、コンテンツ加工部７２に供
給する。コンテンツ加工部７２は、ステップＳ２２にお
いて、所定のスケジュール情報にしたがい、コンテンツ
データベース７１からコンテンツを読み出し、そのコン
テンツを、検索部７８からの解析情報に基づいて加工す
る。

【０１１３】コンテンツ加工部７２は、その加工の結果
得られた加工コンテンツを、送受信制御部７３に供給
し、送受信制御部７３は、ステップＳ２３においてコン
テンツ加工部７２からの加工コンテンツを、注目ユーザ
の注目携帯端末１に対して、プッシュ型で送信して、コ
ンテンツ提供処理を終了する。

【０１１４】次に、図１５は、コンテンツとして、電子
ブックのデータを提供するコンテンツサーバ７の機能的
構成例を示している。なお、以下においては、ユーザ登
録処理および課金処理については、図１１における場合
と同様であるため、その説明は省略する。

【０１１５】図１５のコンテンツサーバ７において、電
子ブックデータベース８１、電子ブックデータ処理部８
２、送受信制御部８３、登録部８４、嗜好データベース
８５、同一嗜好ユーザ抽出部８６、統合嗜好データベー
ス８７、嗜好情報検索部８８は、図１１におけるコンテ
ンツデータベース７１、コンテンツ加工部７２、送受信
制御部７３、登録部７４、ユーザ入力情報データベース
７５、解析部７６、解析情報データベース７７、検索部
７８に、それぞれ対応している。

【０１１６】即ち、電子ブックデータベース８１は、電
子ブックのデータとして、各書籍について、その書籍
名、著者、出版社、内容その他のデータを記憶してい
る。電子ブックデータ処理部８２は、電子ブックデータ
ベース８１から電子ブックのデータ（電子ブックデー
タ）を読み出し、その電子ブックデータを、嗜好情報検
索部８８からの嗜好情報に基づいて加工して、送受信制
御部８３に供給する。

【０１１７】送受信制御部８３は、電子ブックデータ処
理部８２からの電子ブックデータを、プッシュ型で、携
帯端末１に送信する。また、送受信制御部８３は、携帯
端末１から送信されてくるユーザ入力情報としてのクリ
ックデータと、その携帯端末１のユーザに発行されたユ
ーザＩＤを受信する。

【０１１８】即ち、携帯端末１においては、図６乃至図
８で説明したように、コンテンツサーバ７から提供され
る電子ブックデータが表示されるが、携帯端末１のユー
ザが、そのようにして表示される電子ブックデータのう
ち、自身の興味がある表示部分を、トラックボール２２
を操作してクリックすると、携帯端末１は、クリックが
行われたことを表すクリックデータに、そのクリックが
行われた電子ブックデータを特定する情報を含め、その
主制御部３０に記憶されているユーザＩＤと対応付け
て、コンテンツサーバ７に送信する。送受信制御部８３
は、このようにして、携帯端末１から送信されてくるク
リックデータとユーザＩＤを受信し、登録部８４に供給
する。

【０１１９】登録部８４は、送受信制御部８３からのク
リックデータに基づいて、ユーザがクリックすることに
より選択した電子ブックデータとしての書籍を認識し、
その書籍を特定するための情報としての、例えば、ＩＳ
ＢＮコードを、送受信制御部８３からのクリックデータ
に対応付けられていたユーザＩＤに対応する嗜好データ
ベース８５のエントリに登録する。嗜好データベース８
５は、登録部８４から、このようにして供給されるＩＳ
ＢＮコードを記憶する。

【０１２０】同一嗜好ユーザ抽出部８６は、注目ユーザ
と同様の嗜好を有する他のユーザを抽出する。即ち、同
一嗜好ユーザ抽出部８６は、嗜好データベース８５の注
目ユーザのエントリと、他のユーザのエントリとを比較
し、注目ユーザのエントリに登録されているＩＳＢＮコ
ードと一致するＩＳＢＮコードが所定数以上登録されて
いる、他のユーザのエントリを抽出する。そして、同一
嗜好ユーザ抽出部８６は、その抽出した他のユーザのエ
ントリに登録されているＩＳＢＮコードと、注目ユーザ
のエントリに登録されているＩＳＢＮコードとの論理和
をとることにより統合し、注目ユーザのユーザＩＤと対
応付けて、統合嗜好データベース８７に供給して記憶さ
せる。

【０１２１】従って、この場合、統合嗜好データベース
８７には、注目ユーザが興味があるとして、自身が直接
選択した書籍のＩＳＢＮコードとともに、そのＩＳＢＮ
コードにより特定される書籍を選択した他のユーザが選
択した書籍のＩＳＢＮコードも、注目ユーザのユーザＩ
Ｄと対応付けられて登録される。

【０１２２】即ち、注目ユーザが直接選択した書籍と同
一の書籍を所定数以上選択した他のユーザは、注目ユー
ザと同じような嗜好を有すると推測され、従って、その
ようなユーザが選択した書籍は、注目ユーザも興味がひ
かれるものであると推測されることから、同一嗜好ユー
ザ抽出部８６は、上述のように、注目ユーザのエントリ
に登録されているＩＳＢＮコードと一致するＩＳＢＮコ
ードが所定数以上登録されている、他のユーザのエント
リを抽出し、その抽出した他のユーザのエントリに登録
されているＩＳＢＮコードと、注目ユーザのエントリに
登録されているＩＳＢＮコードとの論理和をとることに
より統合し、統合嗜好データベース８７に登録する。

【０１２３】なお、ここでは、注目ユーザと他のユーザ
とが、同じような嗜好を有するかどうかを、注目ユーザ
と他のユーザとが選択した同一の書籍の数に基づいて判
断するようにしたが、注目ユーザと他のユーザとが、同
じような嗜好を有するかどうかは、その他、例えば、注
目ユーザと他のユーザとが選択した書籍のジャンルその
他を総合的に考慮して判断することが可能である。即
ち、例えば、注目ユーザと他のユーザが選択した書籍の
ジャンルや、著者、出版社等についてヒストグラムを作
成し、そのヒストグラムに基づいて、注目ユーザと他の
ユーザとが、同じような嗜好を有するかどうかを判断す
るようにすることが可能である。

【０１２４】統合嗜好データベース８７は、同一嗜好ユ
ーザ抽出部８６から供給されるＩＳＢＮコードとユーザ
ＩＤとのセットを、統合嗜好情報として記憶する。嗜好
情報検索部８８は、注目ユーザの統合嗜好情報を、統合
嗜好データベース８７から検索し、電子ブックデータ処
理部８２に供給する。

【０１２５】次に、図１６のフローチャートを参照し
て、図１５の同一嗜好ユーザ抽出部８６の処理について
説明する。

【０１２６】同一嗜好ユーザ抽出部８６は、まず最初
に、ステップＳ３１において、嗜好データベース８５の
注目ユーザのエントリと、他のユーザのエントリとを比
較し、注目ユーザのエントリに登録されているＩＳＢＮ
コードと一致するＩＳＢＮコードが所定数以上登録され
ているエントリのユーザを、注目ユーザと同一の嗜好を
有するユーザとして抽出する。

【０１２７】そして、ステップＳ３２に進み、同一嗜好
ユーザ抽出部８６は、ステップＳ８６で抽出したユーザ
のエントリに登録されているＩＳＢＮコードと、注目ユ
ーザのエントリに登録されているＩＳＢＮコードとの論
理和をとることにより統合し、その統合の結果得られる
各ＩＳＢＮコードに対して、統合前のＩＳＢＮコードの
数（以下、適宜、重複数という）を付加する。

【０１２８】即ち、例えば、注目ユーザUser0と同一の
嗜好を有するユーザとして３人のユーザUser1,User2,Us
er3が抽出された場合において、注目ユーザUser0のエン
トリに登録されているＩＳＢＮコードが、code0,code1,
code2、ユーザUser1のエントリに登録されているＩＳＢ
Ｎコードが、code0,code1,code2,code3、ユーザUser2の
エントリに登録されているＩＳＢＮコードが、code1,co
de2,code3、ユーザUser3のエントリに登録されているＩ
ＳＢＮコードが、code1,code2,code3,code4であるとす
ると、同一嗜好ユーザ抽出部８６は、これらの注目ユー
ザを含む４人のユーザのエントリに登録されているＩＳ
ＢＮコードを統合することにより、code0,code1,code2,
code3,code4とする。さらに、同一嗜好ユーザ抽出部８
６は、code0に対して２を、code1に対して４を、code2
に対して４を、code3に対して３を、code4に対して１
を、それぞれ重複数として付加する。

【０１２９】そして、同一嗜好ユーザ抽出部８６は、重
複数を付加したＩＳＢＮコードを、注目ユーザのユーザ
ＩＤと対応付けて、統合嗜好データベース８７に供給し
て記憶させ、処理を終了する。

【０１３０】なお、同一嗜好ユーザ抽出部８６は、嗜好
データベース８５にユーザＩＤが登録されているユーザ
すべてを、順次、注目ユーザとして処理を行う。

【０１３１】次に、図１７は、図１５の電子ブックデー
タ処理部８２の構成例を示している。

【０１３２】スケジューラ９１は、電子ブックデータを
プッシュ型で配信するスケジューリングを行い、そのス
ケジューリング結果に基づいて、電子ブックデータ読み
出し部９２を制御する。電子ブックデータ読み出し部９
２は、スケジューラ９１の制御にしたがい、電子ブック
データベース８１から、送信すべき電子ブックデータを
読み出し、データ選択部９３に供給する。データ選択部
９３は、嗜好情報検索部８８から供給される統合嗜好情
報に基づいて、電子ブックデータ読み出し部９２からの
電子ブックデータを取捨選択して出力する。

【０１３３】以上のように構成される電子ブックデータ
処理部８２では、図１８のフローチャートに示すよう
に、まず最初に、ステップＳ４１において、電子ブック
データ読み出し部９２は、スケジューラ９１の制御にし
たがい、電子ブックデータベース８１から、送信すべき
電子ブックデータを読み出し、データ選択部９３に供給
する。そして、ステップＳ４２に進み、データ選択部９
３は、嗜好情報検索部８８から供給される統合嗜好情報
に基づいて、電子ブックデータ読み出し部９２からの電
子ブックデータを取捨選択する。

【０１３４】即ち、データ選択部９３は、嗜好情報検索
部８８から統合嗜好情報として供給されるユーザＩＤに
対応付けられたＩＳＢＮコードの重複数を、そのＩＳＢ
Ｎコードによって特定される書籍に対する注目ユーザの
興味の度合いとし、その興味の度合いに応じて、電子ブ
ックデータ読み出し部９２からの電子ブックデータを取
捨選択する。

【０１３５】具体的には、データ選択部９３は、注目ユ
ーザが非常に興味があると推定される書籍の電子ブック
データについては、例えば、その全部を選択して出力す
る。また、データ選択部９３は、注目ユーザが少し興味
があると推定される電子ブックデータについては、例え
ば、その書籍名、著者、出版社、および内容の一部だけ
を選択して出力する。さらに、データ選択部９３は、注
目ユーザがあまり興味がないと推定される電子ブックデ
ータについては、例えば、その書籍名、著者、および出
版社だけを選択して出力する。また、データ選択部９３
は、注目ユーザがまったく興味がないと推定される電子
ブックデータについては、例えば、一切出力しない。

【０１３６】これにより、注目ユーザの注目携帯端末１
には、図６で説明したような形で、電子ブックデータが
提供される。

【０１３７】その後は、ステップＳ４１に戻り、以下、
同様の処理が繰り返される。

【０１３８】なお、統合嗜好情報における重複数の最大
値が小さい場合には、注目ユーザについて、十分な数の
クリックデータが、嗜好データベース８５に登録されて
いないと考えられるが、この場合は、データ選択部９３
において、デフォルトの処理を行わせることができる。
即ち、この場合、データ選択部９３には、電子ブックデ
ータ読み出し部９２から供給されるすべての電子ブック
データについて、例えば、その書籍名、著者、および出
版社だけを選択して出力させるようにすることができ
る。

【０１３９】以上のように、コンテンツサーバ７では、
注目ユーザの嗜好が、注目ユーザからのクリックデータ
だけでなく、同じような嗜好を有するユーザからのクリ
ックデータをも加味して認識される。そして、注目ユー
ザが興味がある書籍については、全内容を含む電子ブッ
クデータが、注目ユーザに提供され、あまり興味がない
書籍については、内容の一部を含む電子ブックデータ
や、内容を一切含まない電子ブックデータが、注目ユー
ザに提供される。

【０１４０】従って、同じような嗜好を有するユーザか
らのクリックデータに基づいて、注目ユーザの嗜好を、
迅速に推定し、注目ユーザの嗜好にあわせた形で電子ブ
ックデータを提供することができる。また、注目ユーザ
は、興味のある書籍の表示部分を、トラックボール２２
でクリックするだけで、その興味のある書籍について、
より詳細な電子ブックデータを得ることができる。

【０１４１】次に、図１９は、コンテンツとして、映画
等の動画の画像データを提供するコンテンツサーバ７の
第１の機能的構成例を示している。

【０１４２】図１９のコンテンツサーバ７において、画
像データベース１０１、画像データ処理部１０２、送受
信制御部１０３、登録部１０４、クリック位置データベ
ース１０５、特徴量抽出部１０６、特徴量データベース
１０７、特徴量検索部１０８は、図１１におけるコンテ
ンツデータベース７１、コンテンツ加工部７２、送受信
制御部７３、登録部７４、ユーザ入力情報データベース
７５、解析部７６、解析情報データベース７７、検索部
７８に、それぞれ対応している。

【０１４３】即ち、画像データベース１０１は、映画等
の動画の画像データを記憶している。画像データ処理部
１０２は、画像データベース１０１から画像データを読
み出し、その画像データを、特徴量検索部１０８からの
特徴量に基づいて加工して、送受信制御部１０３に供給
する。

【０１４４】送受信制御部１０３は、画像データ処理部
１０２からの画像データを、プッシュ型で、携帯端末１
に送信する。また、送受信制御部１０３は、携帯端末１
から送信されてくるユーザ入力情報としてのクリックデ
ータとユーザＩＤを受信する。

【０１４５】即ち、携帯端末１においては、図９で説明
したように、コンテンツサーバ７から提供される画像デ
ータが表示されるが、携帯端末１のユーザが、そのよう
にして表示される画像データのうち、自身の興味がある
表示部分を、トラックボール２２を操作してクリックす
ると、携帯端末１は、クリックが行われたことを表すク
リックデータに、そのクリックが行われた画像データの
位置を特定する情報を含め、その主制御部３０に記憶さ
れているユーザＩＤと対応付けて、コンテンツサーバ７
に送信する。送受信制御部１０３は、このようにして、
携帯端末１から送信されてくるクリックデータとユーザ
ＩＤを受信し、登録部１０４に供給する。

【０１４６】登録部１０４は、送受信制御部１０３から
のクリックデータから、ユーザがクリックすることによ
り選択した画像データの時間的および空間的位置、即
ち、ユーザがクリックした画像データのフレームと、そ
のフレームにおける座標を認識し、クリック位置情報と
して、送受信制御部１０３からのクリックデータに対応
付けられていたユーザＩＤに対応する嗜好データベース
１０５のエントリに登録する。嗜好データベース１０５
は、登録部１０４から、このようにして供給されるクリ
ック位置情報を記憶する。

【０１４７】特徴量抽出部１０６は、クリック位置デー
タベース１０５に記憶された複数のユーザについてのク
リック位置情報に基づいて、注目ユーザの興味をひく画
像データの領域の特徴量を認識する。

【０１４８】即ち、特徴量抽出部１０６は、クリック位
置データベース１０５に登録されているクリック位置情
報により表される位置（クリック位置）を中心とする小
領域の画像データを、画像データベース１０１から読み
出し、その特徴量を抽出する。ここで、小領域の画像デ
ータの特徴量としては、例えば、その小領域における色
や、動き、その小領域に表示された物体の種類（例え
ば、人間であるとか、自動車であるとか等）、アクティ
ビティ等がある。

【０１４９】特徴量抽出部１０６は、クリック位置を中
心とする小領域の画像データについて、例えば、複数の
特徴量を抽出し、さらに、注目ユーザによるクリック位
置を中心とする小領域の画像データの特徴量の１種類以
上と類似する特徴量が得られた他のユーザを抽出する。
そして、特徴量抽出部１０６は、抽出したユーザによる
クリック位置から得られた特徴量のうちの、注目ユーザ
によるクリック位置から得られた特徴量と類似していな
い特徴量を、注目ユーザによるクリック位置から得られ
た特徴量として追加し、さらに、注目ユーザのユーザＩ
Ｄと対応付けて、特徴量データベース１０７に供給して
記憶させる。

【０１５０】従って、この場合、特徴量データベース１
０７には、注目ユーザが興味があるとして、自身が直接
選択した画像データの特徴量とともに、その特徴量と類
似する特徴量の画像データを選択した他のユーザが選択
した画像データの特徴量が、注目ユーザのユーザＩＤと
対応付けられて登録される。

【０１５１】即ち、注目ユーザが直接選択した画像デー
タの特徴量と類似する特徴量の画像データを選択した他
のユーザは、注目ユーザと同じような嗜好を有すると推
測され、従って、そのようなユーザが選択した特徴量の
画像データは、注目ユーザも興味がひかれるものである
と推測されることから、特徴量抽出部１０６は、上述の
ように、注目ユーザによるクリック位置の特徴量と類似
する特徴量の位置をクリックした他のユーザを抽出し、
その抽出した他のユーザがクリックしたクリック位置の
特徴量を、注目ユーザのエントリに登録されているクリ
ック位置の特徴量に追加し、特徴量データベース１０７
に登録する。

【０１５２】特徴量データベース１０７は、特徴量抽出
部１０６から供給される特徴量とユーザＩＤとのセット
を記憶する。特徴量検索部１０８は、注目ユーザのユー
ザＩＤと対応付けられている特徴量を、特徴量データベ
ース１０７から検索し、画像データ処理部１０２に供給
する。

【０１５３】次に、図２０のフローチャートを参照し
て、図１９の特徴量抽出部１０６の処理について説明す
る。

【０１５４】特徴量抽出部１０６は、まず最初に、ステ
ップＳ５１において、クリック位置データベース１０５
に登録されているクリック位置を中心とする小領域の画
像データを、画像データベース１０１から読み出し、そ
の特徴量を抽出する。そして、ステップＳ５２に進み、
特徴量抽出部１０６は、注目ユーザによるクリック位置
を中心とする小領域の画像データの特徴量の１種類以上
と類似する特徴量が得られた他のユーザを抽出し、ステ
ップＳ５３に進む。ステップＳ５３では、特徴量抽出部
１０６は、抽出したユーザについて得られた特徴量を、
注目ユーザについて得られた特徴量として追加し、さら
に、注目ユーザのユーザＩＤと対応付けて、特徴量デー
タベース１０７に供給して記憶させ、処理を終了する。

【０１５５】なお、特徴量抽出部１０６は、クリック位
置データベース１０５にユーザＩＤが登録されているユ
ーザすべてを、順次、注目ユーザとして処理を行う。

【０１５６】次に、図２１は、図１９の画像データ処理
部１０２の構成例を示している。

【０１５７】スケジューラ１１１は、画像データをプッ
シュ型で配信するスケジューリングを行い、そのスケジ
ューリング結果に基づいて、画像データ読み出し部１１
２を制御する。画像データ読み出し部１１２は、スケジ
ューラ１１１の制御にしたがい、画像データベース１０
１から、送信すべき画像データを読み出し、特徴抽出部
１１３および解像度変換部１１５に供給する。特徴量抽
出部１１３は、画像データ読み出し部１１２からの画像
データを小領域に区分し、各小領域について、図１９の
特徴量抽出部１０６と同様の処理を行うことにより、そ
の特徴量を抽出して、特徴近似領域検出部１１４に供給
する。特徴近似領域検出部１１４は、特徴量抽出部１１
３から供給される特徴量の中から、特徴量検索部１０８
（図１９）より供給される注目ユーザについての特徴量
と近似（類似）するものを検出し、その近似する特徴量
を有する画像データの領域を特定する領域情報を、解像
度変換部１１５に供給する。解像度変換部１１５は、画
像データ読み出し部１１２から供給される画像データの
領域のうちの、特徴近似領域検出部１１４から供給され
る領域情報によって特定される領域の解像度を高解像度
に変換して出力する。

【０１５８】以上のように構成される画像データ処理部
１０２では、図２２のフローチャートに示すように、ま
ず最初に、ステップＳ６１において、画像データ読み出
し部１１２は、スケジューラ１１１の制御にしたがい、
画像データベース１０１から、送信すべき画像データを
読み出し、特徴量抽出部１１３と解像度変換部１１５に
供給する。その後、ステップＳ６２において、特徴量抽
出部１１３は、画像データ読み出し部１１２からの画像
データを小領域に区分し、各小領域の特徴量を抽出し
て、特徴近似領域検出部１１４に供給する。特徴近似領
域検出部１１４は、ステップＳ６３において、特徴量抽
出部１１３から供給される特徴量の中から、特徴量検索
部１０８（図１９）より供給される注目ユーザについて
の特徴量と近似するものを検出し、その近似する特徴量
を有する画像データの領域を特定する領域情報を、解像
度変換部１１５に供給する。そして、ステップＳ６４に
おいて、解像度変換部１１５は、画像データ読み出し部
１１２から供給される画像データから、特徴近似領域検
出部１１４より供給される領域情報によって特定される
領域を認識し、その領域の解像度を高解像度に変換して
出力する。

【０１５９】これにより、注目ユーザの注目携帯端末１
には、図９で説明したような形で、画像のデータが提供
される。

【０１６０】その後は、ステップＳ６１に戻り、以下、
同様の処理が繰り返される。

【０１６１】以上のように、コンテンツサーバ７では、
注目ユーザの嗜好が、注目ユーザからのクリックデータ
だけでなく、同じような嗜好を有するユーザからのクリ
ックデータをも加味して認識される。そして、注目ユー
ザが興味がある物体等が表示されている画像データにつ
いては、その物体が表示されている領域の解像度が高解
像度にされて、注目ユーザに提供される。

【０１６２】従って、同じような嗜好を有するユーザか
らのクリックデータに基づいて、注目ユーザの嗜好を、
迅速に推定し、注目ユーザの嗜好にあわせた形で画像デ
ータを提供することができる。また、注目ユーザは、興
味のある物体等の表示部分を、トラックボール２２でク
リックするだけで、その興味のある物体について、より
高解像度の画像データを得ることができる。

【０１６３】ここで、ユーザには、そのユーザが画像上
のある位置をクリックした場合に、そのクリック位置に
対応する、その後に送信されるフレームの位置を含む領
域の解像度を高解像度にして提供することが可能であ
る。

【０１６４】さらに、この場合、注目ユーザがクリック
した画像上の位置と時空間的に近い画像上の位置をクリ
ックした他のユーザを、注目ユーザと同じような嗜好を
有するものとして抽出することが可能である。そして、
注目ユーザと同じような嗜好を有する他のユーザ（以
下、適宜、同一嗜好ユーザという）が、その後に画像上
のある位置をクリックした場合には、注目ユーザがクリ
ックを行っていなくても、同一嗜好ユーザがクリックし
た位置に対応する、その後に送信されるフレームの位置
を含む領域の解像度を高解像度にして、注目ユーザに提
供することが可能である。

【０１６５】この場合、同じような嗜好を有する複数の
ユーザのうちの１以上が、画像上のある位置をクリック
すると、その１以上のユーザに対して、所定の領域の解
像度が高くなった画像が提供されるだけでなく、同じよ
うな嗜好を有する他のユーザに対しても、同様に、所定
の領域の解像度が高くなった画像が提供されることにな
る。また、この場合、コンテンツサーバ７では、クリッ
クを行ったユーザに提供するのと同一の画像を、同じよ
うな嗜好を有する他のユーザに提供するだけで良く、従
って、送信しようとしている画像の特徴量を抽出せずに
済むので、処理負担を軽減することができる。

【０１６６】なお、解像度変換部１１５における解像度
の変換には、例えば、本件出願人が先に提案しているク
ラス分類適応処理を採用することができる。

【０１６７】クラス分類適応処理は、クラス分類処理と
適応処理とからなり、クラス分類処理によって、データ
を、その性質に基づいてクラス分けし、各クラスごとに
適応処理を施すものであり、適応処理は、以下のような
手法のものである。

【０１６８】即ち、適応処理では、例えば、標準解像度
または低解像度の画像（ＳＤ(Standard Density)画像）
を構成する画素（以下、適宜、ＳＤ画素という）と、所
定の予測係数との線形結合により、そのＳＤ画像の解像
度を向上させた高解像度の画像（ＨＤ(High Density)画
像）の画素の予測値を求めることで、そのＳＤ画像の解
像度を向上させた画像が得られる。

【０１６９】具体的には、例えば、いま、あるＨＤ画像
を教師データとするとともに、そのＨＤ画像の解像度を
劣化させたＳＤ画像を生徒データとして、ＨＤ画像を構
成する画素（以下、適宜、ＨＤ画素という）の画素値ｙ
の予測値Ｅ［ｙ］を、幾つかのＳＤ画素（ＳＤ画像を構
成する画素）の画素値ｘ₁，ｘ₂，・・・の集合と、所定
の予測係数ｗ₁，ｗ₂，・・・の線形結合により規定され
る線形１次結合モデルにより求めることを考える。この
場合、予測値Ｅ［ｙ］は、次式で表すことができる。

【０１７０】Ｅ［ｙ］＝ｗ₁ｘ₁＋ｗ₂ｘ₂＋・・・・・・（１）

【０１７１】式（１）を一般化するために、予測係数ｗ
_jの集合でなる行列Ｗ、生徒データｘ_ijの集合でなる行
列Ｘ、および予測値Ｅ［ｙ_j］の集合でなる行列Ｙ’
を、

【数１】で定義すると、次のような観測方程式が成立する。

【０１７２】ＸＷ＝Ｙ’・・・（２）ここで、行列Ｘの成分ｘ_ijは、ｉ件目の生徒データの集
合（ｉ件目の教師データｙ_iの予測に用いる生徒データ
の集合）の中のｊ番目の生徒データを意味し、行列Ｗの
成分ｗ_jは、生徒データの集合の中のｊ番目の生徒デー
タとの積が演算される予測係数を表す。また、ｙ_iは、
ｉ件目の教師データを表し、従って、Ｅ［ｙ_i］は、ｉ
件目の教師データの予測値を表す。なお、式（１）の左
辺におけるｙは、行列Ｙの成分ｙ_iのサフィックスｉを
省略したものであり、また、式（１）の右辺におけるｘ
₁，ｘ₂，・・・も、行列Ｘの成分ｘ_ijのサフィックスｉ
を省略したものである。

【０１７３】そして、この観測方程式に最小自乗法を適
用して、ＨＤ画素の画素値ｙに近い予測値Ｅ［ｙ］を求
めることを考える。この場合、教師データとなるＨＤ画
素の真の画素値ｙの集合でなる行列Ｙ、およびＨＤ画素
の画素値ｙに対する予測値Ｅ［ｙ］の残差ｅの集合でな
る行列Ｅを、

【数２】で定義すると、式（２）から、次のような残差方程式が
成立する。

【０１７４】ＸＷ＝Ｙ＋Ｅ・・・（３）

【０１７５】この場合、ＨＤ画素の画素値ｙに近い予測
値Ｅ［ｙ］を求めるための予測係数ｗ_jは、自乗誤差

【数３】を最小にすることで求めることができる。

【０１７６】従って、上述の自乗誤差を予測係数ｗ_jで
微分したものが０になる場合、即ち、次式を満たす予測
係数ｗ_jが、ＨＤ画素の画素値ｙに近い予測値Ｅ［ｙ］
を求めるため最適値ということになる。

【０１７７】

【数４】・・・（４）

【０１７８】そこで、まず、式（３）を、予測係数ｗ_j
で微分することにより、次式が成立する。

【０１７９】

【数５】・・・（５）

【０１８０】式（４）および（５）より、式（６）が得
られる。

【０１８１】

【数６】・・・（６）

【０１８２】さらに、式（３）の残差方程式における生
徒データｘ_ij、予測係数ｗ_j、教師データｙ_i、および残
差ｅ_iの関係を考慮すると、式（６）から、次のような
正規方程式を得ることができる。

【０１８３】

【数７】・・・（７）

【０１８４】なお、式（７）に示した正規方程式は、行
列（共分散行列）Ａおよびベクトルｖを、

【数８】で定義するとともに、ベクトルＷを、数１で示したよう
に定義すると、式ＡＷ＝ｖ・・・（８）で表すことができる。

【０１８５】式（７）における各正規方程式は、生徒デ
ータｘ_ijおよび教師データｙ_iのセットを、ある程度の
数だけ用意することで、求めるべき予測係数ｗ_jの数Ｊ
と同じ数だけたてることができ、従って、式（８）を、
ベクトルＷについて解くことで（但し、式（８）を解く
には、式（８）における行列Ａが正則である必要があ
る）、最適な予測係数ｗ_jを求めることができる。な
お、式（８）を解くにあたっては、例えば、掃き出し法
（Gauss-Jordanの消去法）などを用いることが可能であ
る。

【０１８６】以上のようにして、最適な予測係数ｗ_jを
求めておき、さらに、その予測係数ｗ_jを用い、式
（１）により、ＨＤ画素の画素値ｙに近い予測値Ｅ
［ｙ］を求めるのが適応処理である。

【０１８７】ここで、適応処理は、ＳＤ画像には含まれ
ていないが、ＨＤ画像に含まれる成分が再現される点
で、例えば、単なる補間処理とは異なる。即ち、適応処
理では、式（１）だけを見る限りは、いわゆる補間フィ
ルタを用いての補間処理と同一に見えるが、その補間フ
ィルタのタップ係数に相当する予測係数ｗが、教師デー
タｙを用いての、いわば学習により求められるため、Ｈ
Ｄ画像に含まれる成分を再現することができる。このこ
とから、適応処理は、いわば画像の創造（解像度創造）
作用がある処理ということができる。

【０１８８】なお、ここでは、注目ユーザが興味がある
領域の解像度を向上させるようにしたが、その他、画像
データベース１０１に、あらかじめ高解解度の画像デー
タを記憶させておき、注目ユーザが興味がある領域以外
の画像データの解像度をロンパスフィルタ等により低下
させることにより、相対的に、注目ユーザが興味がある
領域の解像度を向上させてもよい。また、注目ユーザに
は、解像度を向上させた画像データそのものではなく、
クラス分類適応処理により解像度を向上させるための予
測係数を提供し、携帯端末１において、その予測係数を
用いてクラス分類適応処理を行うことにより、画像デー
タの解像度を向上させることも可能である。

【０１８９】次に、図２３は、コンテンツとして、映画
等の動画の画像データを提供するコンテンツサーバ７の
第２の機能的構成例を示している。なお、図中、図１９
における場合と対応する部分については、同一の符号を
付してあり、以下では、その説明は、適宜省略する。

【０１９０】図２３のコンテンツサーバ７において、画
像データ処理部１２２、近接フレームクリックデータ抽
出部１２６、近接フレームクリックデータベース１２
７、近接フレームクリック検索部１２８は、図１１にお
けるコンテンツ加工部７２、解析部７６、解析情報デー
タベース７７、検索部７８に、それぞれ対応している。

【０１９１】即ち、画像データ処理部１２２は、画像デ
ータベース１０１から画像データを読み出し、その画像
データを、近接フレームクリック検索部１２８からのク
リックデータに基づいて加工して、送受信制御部１０３
に供給する。

【０１９２】近接フレームクリックデータ抽出部１２６
は、クリック位置データベース１０５に記憶された複数
のユーザについてのクリックデータから、注目ユーザに
ついてのクリックデータが表すクリック位置に時間的に
近接するフレームに対するものを抽出する。さらに、近
接フレームクリックデータ抽出部１２６は、その抽出し
たクリックデータを、注目ユーザについてのクリックデ
ータに追加し、さらに、注目ユーザのユーザＩＤと対応
付けて、近接フレームクリックデータベース１２７に供
給して記憶させる。

【０１９３】従って、この場合、近接フレームクリック
データベース１２７には、注目ユーザが、自身によって
直接選択した画像データ上のクリック位置を表すクリッ
クデータとともに、そのクリック位置に近接するフレー
ムの他のユーザが選択した画像データ上のクリック位置
を表すクリックデータが、注目ユーザのユーザＩＤと対
応付けられて登録される。

【０１９４】近接フレームクリックデータベース１２７
は、このように、近接フレームクリックデータ抽出部１
２６から供給されるクリックデータとユーザＩＤとのセ
ットを記憶し、近接フレームクリック検索部１２８は、
注目ユーザのユーザＩＤと対応付けられているクリック
データを、近接フレームクリックデータベース１２７か
ら検索して、画像データ処理部１２２に供給する。

【０１９５】次に、図２４のフローチャートを参照し
て、図２３の近接フレームクリックデータ抽出部１２６
の処理について説明する。

【０１９６】近接フレームクリックデータ抽出部１２６
は、まず最初に、ステップＳ７１において、クリック位
置データベース１０５から、注目ユーザについてのクリ
ックデータ（注目ユーザのユーザＩＤと対応付けられて
いるクリックデータ）を読み出し、そのクリックデータ
が表すクリック位置と時間的に近接する位置をクリック
したクリックデータが登録されている他のユーザを抽出
する。そして、ステップＳ７２に進み、近接フレームク
リックデータ抽出部１２６は、抽出したユーザについて
のクリックデータを、注目ユーザについてのクリックデ
ータに追加し、さらに、注目ユーザのユーザＩＤと対応
付けて、近接フレームクリックデータベース１２７に供
給して記憶させ、処理を終了する。

【０１９７】なお、近接フレームクリックデータ抽出部
１２６は、クリック位置データベース１０５にユーザＩ
Ｄが登録されているユーザすべてを、順次、注目ユーザ
として処理を行う。

【０１９８】次に、図２５は、図２３の画像データ処理
部１２２の構成例を示している。

【０１９９】スケジューラ１３１は、画像データをプッ
シュ型で配信するスケジューリングを行い、そのスケジ
ューリング結果に基づいて、画像データ読み出し部１３
２を制御する。画像データ読み出し部１３２は、スケジ
ューラ１３１の制御にしたがい、画像データベース１０
１から、送信すべき画像データを読み出し、背景抽出部
１３３、オブジェクト抽出部１３４、および付加情報算
出部１３５に供給する。

【０２００】オブジェクト抽出部１３４は、近接フレー
ムクリックデータ検索部１２８から供給されるクリック
データに基づいて、画像データ読み出し部１３２からの
画像の中で、携帯端末１のユーザが注目している画像領
域を、興味対象領域として抽出（特定）し、その抽出
（特定）した興味対象領域に対応する画像データを、送
信処理部１３６に供給する。なお、画像データ読み出し
部１３２から供給される画像の中に、携帯端末１のユー
ザが注目する興味対象領域が複数存在する場合、オブジ
ェクト抽出部１３４は、その複数の興味対象領域の画像
データを、送信処理部１３６に供給する。また、オブジ
ェクト抽出部１３４で抽出された興味対象領域の画像デ
ータは、付加情報算出部１３５にも供給される。

【０２０１】ここで、ユーザが注目する興味対象領域と
しては、例えば、物体などのオブジェクトを挙げること
ができる。以下、オブジェクト抽出部１３４において興
味対象領域の一例としてオブジェクト（以下、適宜、オ
ブジェクト画像と呼ぶ）を抽出する場合を例に挙げて説
明することにする。但し、興味対象領域は、必ずしもオ
ブジェクトである必要はなく、オブジェクト以外の画像
領域やオブジェクト内の画像領域、後述する背景画像部
分等であっても良い。なお、オブジェクト抽出部１３４
において行われるオブジェクト抽出（興味対象領域の特
定）処理の詳細についての説明は後述する。

【０２０２】背景抽出部１３３は、オブジェクト抽出部
１３４によるオブジェクト抽出結果に基づいて、画像デ
ータ読み出し部１３２から供給される画像データから、
画像の背景部分（興味対象領域以外の画像領域、以下、
背景画像と呼ぶ）に相当する信号（以下、背景画像デー
タと呼ぶ）を抽出し、その抽出した背景画像データを、
送信処理部１３６と付加情報算出部１３５に供給する。
即ち、本実施の形態では、背景抽出部１３３は、画像デ
ータ読み出し部１３２が出力する画像データから、オブ
ジェクト抽出部１３４が出力するオブジェクト画像を除
いた残りを、背景画像として抽出する。

【０２０３】付加情報算出部１３５は、背景抽出部１３
３から供給された背景画像データに基づいて、背景の動
き（画像の撮影時に、画像データ読み出し部１３２の撮
影方向が動くことによる背景の動き）を表す背景動きベ
クトルを検出し、また、オブジェクト抽出部１３４から
供給されたオブジェクト画像の画像データ（以下、オブ
ジェクト画像データと呼ぶ）に基づいて、オブジェクト
の動きを表すオブジェクト動きベクトルを検出し、それ
ら動きベクトルを付加情報の一つとして、送信処理部１
３６に供給する。また、付加情報算出部１３５は、オブ
ジェクト抽出部１３４から供給されたオブジェクト画像
データに基づいて、画像データ読み出し部１３２のビデ
オカメラ部６により撮影された画像（フレーム）内にお
けるオブジェクトの位置や輪郭等のようなオブジェクト
に関連する情報も、付加情報として送信処理部１３６に
供給する。すなわち、オブジェクト抽出部１３４は、オ
ブジェクト画像を抽出する際に、そのオブジェクトの位
置や輪郭等のオブジェクトに関連する情報も抽出し、付
加情報算出部１３５に供給するようになっており、付加
情報算出部１３５は、そのオブジェクトに関連する情報
も付加情報として出力するようになっている。

【０２０４】送信処理部１３６は、オブジェクト抽出部
１３４からのオブジェクト画像データ、背景抽出部１３
３からの背景画像データ、付加情報算出部１３５からの
付加情報に基づいて、画像データをオブジェクト符号化
して出力する。

【０２０５】以上のように構成される画像データ処理部
１２２では、図２６のフローチャートに示すように、ま
ず最初に、ステップＳ８１において、画像データ読み出
し部１３２は、スケジューラ１３１の制御にしたがい、
画像データベース１０１から、送信すべき画像データを
読み出し、背景抽出部１３３、オブジェクト抽出部１３
４、および付加情報算出部１３５に供給する。そして、
ステップＳ８２に進み、オブジェクト抽出部１３４は、
画像データ読み出し部１３２の画像データから、近接フ
レームクリックデータ検索部１２８より供給される注目
ユーザについてのクリックデータに基づいて、オブジェ
クト画像データを抽出し、背景抽出部１３３、付加情報
算出部１３５、および送信処理部１３６に供給する。

【０２０６】背景抽出部１３３は、ステップＳ８３にお
いて、画像データ読み出し部１３２から供給される画像
データから、オブジェクト抽出部１３４より供給される
オブジェクト画像データを減算することで、背景画像デ
ータを抽出し、付加情報算出部１３５および送信処理部
１３６に供給する。

【０２０７】付加情報算出部１３５は、ステップＳ８４
において、画像データ読み出し部１３２、背景抽出部１
３３、およびオブジェクト抽出部１３４の出力に基づい
て、付加情報を算出し、送信処理部１３６に供給する。

【０２０８】送信処理部１３６は、ステップＳ８５にお
いて、オブジェクト抽出部１３４からのオブジェクト画
像データ、背景抽出部１３３からの背景画像データ、付
加情報算出部１３５からの付加情報に基づいて、データ
読み出し部１３２が画像データベース１０１から読み出
した画像データをオブジェクト符号化して出力する。

【０２０９】これにより、注目ユーザの注目携帯端末１
には、図１０で説明したような形で、画像のデータが提
供される。

【０２１０】その後は、ステップＳ８１に戻り、以下、
同様の処理が繰り返される。

【０２１１】以上のように、コンテンツサーバ７では、
注目ユーザがクリックしたクリック位置と時間的に近接
する他のユーザによるクリック位置が抽出され、注目ユ
ーザによるクリック位置だけでなく、他のユーザによる
クリック位置をも加味して、オブジェクトの抽出が行わ
れ、注目ユーザに提供される。

【０２１２】従って、同じオブジェクトをクリックした
複数のユーザからのクリックデータに基づいて、注目ユ
ーザがクリックしたオブジェクトを、迅速に抽出し、注
目ユーザに提供することができる。また、注目ユーザ
は、興味のある物体の表示部分を、トラックボール２２
でクリックするだけで、その興味のある物体についての
画像データ（オブジェクト画像データ）を得ることがで
きる。

【０２１３】次に、オブジェクト抽出部１３４における
オブジェクトの抽出方法について説明する。

【０２１４】図２７は、図２５のオブジェクト抽出部１
３４の構成例を示している。

【０２１５】画像データ読み出し部１３２から供給され
る画像データは、画像用メモリ２０１に蓄積される。画
像用メモリ２０１に記憶された画像データは、そこから
読み出され、静動判定部２０３、オブジェクト画像抽出
部２１３、および切換選択スイッチ２０７の共通端子に
送られる。なお、画像用メモリ２０１には、後段の静動
判定部２０３で行われる静動判定の際に必要となる、少
なくとも数フレーム分の画像データが蓄積される。

【０２１６】また、近接フレームクリックデータ検索部
１２８から供給されるクリックデータは、クリックデー
タ用メモリ２０２に蓄積される。そして、クリックデー
タは、クリックデータ用メモリ２０２から読み出され、
静動判定部２０４、連続クリック判定部２０４、および
切換選択スイッチ２０６の共通端子に送られる。なお、
このクリックデータ用メモリ２０２には、後段の連続ク
リック判定部２０４における連続クリック判定の際に必
要となる、所定の時間分（例えば、５００〜７００ｍ秒
以上）のクリックデータが蓄積される。

【０２１７】静動判定部２０３は、クリックデータ用メ
モリ２０２に記憶されたクリックデータのうちの、所定
のものに注目し、その注目した注目クリックデータを読
み出す。さらに、静動判定部２０３は、その注目クリッ
クデータが示すクリック位置（画像上の座標値）を中心
とした局所的な小ブロック（例えば１６×１６画素）の
画像領域が、動きがある動き領域であるか、または動き
のない静止領域であるかの静動判定を行う。すなわち、
静動判定部２０３は、クリック位置を中心とした１６×
１６画素について、数フレーム前の画像領域と現フレー
ムの画像領域との間でフレーム間差分を求め、このフレ
ーム間差分値が所定のしきい値以下である場合には静止
と判定し、フレーム間差分が所定のしきい値より大きい
場合には動きと判定する静動判定を行う。なお、扱う画
像がカラー画像である場合、静動判定の際には、例え
ば、Ｒ，Ｇ，Ｂの各１６×１６画素の画像について、そ
れぞれフレーム間差分を求め、それらのＲ，Ｇ，Ｂ毎に
求めたフレーム間差分の絶対値の平均値が所定のしきい
値（例えば値１０）以下のときは静止と判定し、そのし
きい値より大きいときは動きと判定するようにすること
ができる。静動判定部２０３は、静動判定により静止と
判定した場合には、注目クリックデータを静止クリック
（静止領域のクリック）であるとし、静動判定により動
きと判定した場合には、注目クリックデータを動きクリ
ック（動き領域のクリック）であるとして、その静止ク
リック又は動きクリックを示す情報を、静動判定結果と
して、処理判定部２０５に送る。

【０２１８】連続クリック判定部２０４は、注目クリッ
クデータのクリック時刻に基づいて、ユーザが行ったク
リック操作が連続的なクリック操作であるか否かの連続
クリック判定を行う。すなわち、連続クリック判定部２
０４は、連続クリック判定として、注目クリックデータ
のクリック時刻と、その直前（前回）のクリックデータ
のクリック時刻との時間差（クリック時間間隔）を求
め、その時間差が所定のしきい値以下である場合には連
続的なクリックであると判定し、クリック時刻の時間差
が所定のしきい値より大きい場合には連続クリックでな
いと判定する。そして、連続クリック判定部２０４は、
連続クリック判定により連続的なクリックであると判定
した場合には、注目クリックデータを連続クリックと
し、一方、連続クリック判定により連続的なクリックで
ない（クリック時刻の時間差が所定のしきい値以上であ
る）と判定した場合には、注目クリックデータを不連続
クリックとし、それら連続クリック又は不連続クリック
の情報を、連続クリック判定結果として処理判定部２０
５に送る。

【０２１９】処理判定部２０５は、静動判定部２０３か
らの静動判定結果と、連続クリック判定部２０４からの
連続クリック判定結果とに基づいて、切換選択スイッチ
２０６乃至２０８の切換制御を行う。

【０２２０】即ち、例えば、静動判定結果と連続クリッ
ク判定結果により、注目クリックデータが、静止クリッ
クであり、且つ連続クリックであることが判った場合、
処理判定部２０５は、注目クリックデータが、静止オブ
ジェクト連結処理部２１１に送られるように、切換選択
スイッチ２０６を切換制御すると共に、画像用メモリ２
０１から出力される画像データが、静止オブジェクト連
結処理部２１１に送られるように、切換選択スイッチ２
０７を切換制御する。さらに、処理判定部２０５は、後
述するオブジェクト抽出結果用メモリ２１４から出力さ
れる前回のクリックデータ、そのクリックデータに割り
当てられたオブジェクト番号（オブジェクトを分類（識
別）する番号）、およびそのオブジェクト番号に対応す
るオブジェクト画像データが、静止オブジェクト連結処
理部２１１に送られるように、切換選択スイッチ２０８
を切換制御する。

【０２２１】また、静動判定結果と連続クリック判定結
果により、注目クリックデータが、動きクリックであ
り、且つ連続クリックであることが判った場合、処理判
定部２０５は、注目クリックデータが、動きオブジェク
ト連結処理部２１０に送られるように、切換選択スイッ
チ２０６を切換制御すると共に、画像用メモリ２０１か
ら出力される画像データが、動きオブジェクト連結処理
部２１０に送られるように、切換選択スイッチ２０７を
切換制御する。さらに、処理判定部２０５は、後述する
オブジェクト抽出結果用メモリ２１４から出力される前
回のクリックデータ、そのクリックデータに割り当てら
れたオブジェクト番号、およびそのオブジェクト番号に
対応するオブジェクト画像データが、動きオブジェクト
連結処理部２１０に送られるように、切換選択スイッチ
２０８を切換制御する。

【０２２２】さらに、静動判定結果と連続クリック判定
結果により、注目クリックデータが、静止クリックであ
り、且つ不連続クリック（クリック時刻の時間差が所定
のしきい値以上となるクリック）であることが判った場
合、処理判定部２０５は、注目クリックデータが、オブ
ジェクト番号割り当て部２０９に送られるように、切換
選択スイッチ２０６を切換制御すると共に、画像用メモ
リ２０１から出力される画像データが、静止オブジェク
ト連結処理部２１１に送られるように、切換選択スイッ
チ２０７を切換制御する。なお、このとき、オブジェク
ト抽出結果用メモリ２１４から出力される前回のクリッ
クデータ、オブジェクト番号、およびオブジェクト画像
データについては、静止オブジェクト連結処理部２１１
に送らないように、切換選択スイッチ２０８を切換制御
する（切換選択スイッチ２０８をオープン状態にす
る）。

【０２２３】また、静動判定結果と連続クリック判定結
果により、注目クリックデータが、動きクリックであ
り、且つ不連続クリック（クリック時刻の時間差が所定
のしきい値以上となるクリック）であることが判った場
合、処理判定部２０５は、注目クリックデータが、オブ
ジェクト番号割り当て部２０９に送られるように、切換
選択スイッチ２０６を切換制御すると共に、画像用メモ
リ２０１から出力される画像データが、動きオブジェク
ト連結処理部２１０に送られるように、切換選択スイッ
チ２０７を切換制御する。なお、このとき、オブジェク
ト抽出結果用メモリ２１４から出力される前回のクリッ
クデータと、オブジェクト番号、およびオブジェクト画
像データについては、動きオブジェクト連結処理部２１
０に送らないように、切換選択スイッチ２０８を切換制
御する（切換選択スイッチ２０８をオープン状態にす
る）。

【０２２４】オブジェクト番号割り当て部２０９は、静
止オブジェクト連結処理部２１１と、動きオブジェクト
連結処理部２１０において、後述するような連結処理の
対象となるもの以外の不連続クリックとなっているクリ
ックデータに対して、新たなオブジェクト番号を割り当
て、そのオブジェクト番号とクリックデータをオブジェ
クト番号用メモリ２１２に送る。

【０２２５】動きオブジェクト連結処理部２１０は、処
理判定部２０５により、注目クリックデータが動きクリ
ックであり、且つ連続クリックと判定された場合に、前
回のクリックデータが動きクリックであり、さらに、注
目クリックデータが表すクリック位置付近の画像の特徴
が、前回のクリックデータに割り当てられたオブジェク
ト番号で構成される動きオブジェクト画像の領域の特徴
に含まれているか、または近似しているか否かを判定す
る。そして、動きオブジェクト連結処理部２１０は、そ
の判定結果が真である場合、注目クリックが、同一のオ
ブジェクト画像をクリックしているものであると判断
し、注目クリックデータに対して、前回のクリックデー
タと同一のオブジェクト番号を割り当てる動きオブジェ
クト連結処理を行い、そのオブジェクト番号と注目クリ
ックデータを、オブジェクト番号用メモリ２１２に送
る。

【０２２６】静止オブジェクト連結処理部２１１は、処
理判定部２０５により、注目クリックデータが静止クリ
ックであり、且つ連続クリックと判定された場合に、前
回のクリックが静止クリックであり、さらに、注目クリ
ックデータが表すクリック位置が、前回のクリックデー
タに割り当てられたオブジェクト番号で構成される静止
オブジェクト画像の領域内に含まれているか、またはそ
の近傍であるか否かを判定する。そして、静止オブジェ
クト連結処理部２１１は、その判定結果が真である場
合、注目クリックが、前回のクリックと同一のオブジェ
クト画像をクリックしているものであると判断し、注目
クリックデータに対して、前回のクリックデータと同一
のオブジェクト番号を割り当てる静止オブジェクト連結
処理を行い、そのオブジェクト番号と注目クリックデー
タを、オブジェクト番号用メモリ２１２に送る。

【０２２７】オブジェクト番号用メモリ２１２は、オブ
ジェクト番号割り当て部２０９、動きオブジェクト連結
処理部２１０、および静止オブジェクト連結処理部２１
１においてオブジェクト番号が割り当てられた過去複数
フレーム分に相当するクリックデータを蓄積し、その蓄
積したクリックデータ及びオブジェクト番号を、オブジ
ェクト画像抽出部２１３に送る。

【０２２８】オブジェクト画像抽出部２１３は、画像用
メモリ２０１より供給された画像データから、オブジェ
クト番号用メモリ２１２より供給された、オブジェクト
番号が割り当てられた過去複数フレームのクリックデー
タに基づいて、静止オブジェクト画像、動きオブジェク
ト画像、背景画像等を抽出し、その抽出結果を、オブジ
ェクト抽出結果用メモリ２１４に供給する。

【０２２９】すなわち、オブジェクト画像抽出部２１３
は、オブジェクト番号用メモリ２１２より供給された、
オブジェクト番号が割り当てられた過去複数フレームの
クリックデータに基づいて、静止クリックとされたクリ
ックデータの密度が高い画像部分の中で支配的なオブジ
ェクト番号を求める。そして、オブジェクト画像抽出部
２１３は、その支配的なオブジェクト番号が割り当てら
れているクリックデータの画像上における分布からオブ
ジェクトの形状を生成し、生成したオブジェクトの形状
内の画像を、オブジェクト画像として、画像データから
抽出する。

【０２３０】また、オブジェクト画像抽出部２１３は、
動きクリックとされたクリックデータの中で、同一オブ
ジェクト番号が割り当てられているクリック位置付近の
画像同士のフレーム間パターンマッチング等を行い、そ
のマッチング結果に基づいて、動き補償を行う。さら
に、オブジェクト画像抽出部２１３は、パターンマッチ
ングで近似していると判定された画像領域（動き補償に
よって、いわば位置合わせを行った画像領域）において
クリック密度が高く支配的なオブジェクト番号を求め
る。そして、オブジェクト画像抽出部２１３は、その支
配的なオブジェクト番号が割り当てられているクリック
データの画像上での分布からオブジェクトの形状を生成
し、生成したオブジェクトの形状内の画像を、オブジェ
クト画像として、画像データから抽出する。

【０２３１】さらに、オブジェクト画像抽出部２１３
は、上述したような静止クリックや、動きクリックのク
リック密度が低い画像部分を、背景画像とする。

【０２３２】オブジェクト抽出結果用メモリ２１４は、
オブジェクト画像抽出部２１３が抽出したオブジェクト
画像データを、クリックデータおよびオブジェクト番号
等とともに蓄積し、必要に応じて、図２５の背景抽出部
１３３、付加情報算出部１３５、および送信処理部１３
６に供給する。

【０２３３】次に、図２８のフローチャートを参照し、
図２７に示したオブジェクト抽出部１３４において、ク
リックデータに基づいて、画像データから、携帯端末１
のユーザが注目しているオブジェクト画像（興味対象領
域）を抽出する処理の詳細について説明する。

【０２３４】先ずステップＳ１３１として、画像用メモ
リ２０１は、画像データ読み出し部１３２（図２５）よ
り入力されるフレームの画像データ（送信時刻毎のフレ
ーム画像データ）を蓄積する。なお、画像用メモリ２０
１は、後段のステップＳ１３３で行われる静動判定処理
の際に必要となる、少なくとも数フレーム分の画像デー
タを蓄積する。

【０２３５】また、ステップＳ１３１では、クリックデ
ータ用メモリ２０２は、近接フレームクリックデータ検
索部１２８から供給されるクリックデータを受信して蓄
積する。なお、このクリックデータ用メモリ２０２に
は、後段のステップＳ１３３で行われる連続クリック判
定処理の際に必要となる、少なくとも所定の時間分（例
えば５００〜７００ｍ秒以上）のクリックデータが蓄積
される。

【０２３６】その後、ステップＳ１３２に進み、クリッ
クデータ用メモリ２０２に、まだ処理していないクリッ
クデータが記憶されているか否かが判定される。ステッ
プＳ１３２において、まだ処理していないクリックデー
タが、クリックデータ用メモリ２０２に無いと判定され
た場合は、ステップＳ１３１に戻って入力待ち状態とな
る。一方、ステップＳ１３２において、まだ処理してい
ないクリックデータが、クリックデータ用メモリ２０２
に有ると判定された場合、ステップＳ１３３に進み、そ
の処理されていないクリックデータのうちの、例えば、
時間的に最も過去のものを、注目クリックデータとし
て、その注目クリックデータを対象に、静動判定部２０
３、連続クリック判定部２０４、および処理判定部２０
５による静動判定処理と連続クリック判定処理が行われ
る。

【０２３７】即ち、ステップＳ１３３において、静動判
定部２０３は、静動判定処理として、注目クリックデー
タに含まれるクリック位置（画像上の座標値）情報を用
い、そのクリック位置を中心とした局所的な小ブロック
の画像領域に動きがあるか、或いは静止しているかの判
定を行う。

【０２３８】より具体的に説明すると、図２８のステッ
プＳ１３３の処理に進んで静動判定処理に移行したとき
の静動判定部２０３は、図２９のフローチャートに示す
ように、先ずステップＳ１４１として、画像用メモリ２
０１とクリックデータ用メモリ２０２に蓄積されている
画像データとクリックデータを、数フレーム分だけ読み
出す。即ち、静動判定部２０３は、注目クリックデータ
に対応するクリックが行われたフレームを含む、過去数
フレーム分の画像データと、その数フレームに対して行
われたクリックに対応するクリックデータを、画像デー
タ用メモリ２０１とクリックデータ用メモリ２０２か
ら、それぞれ読み出す。なお、扱う画像がカラー画像で
ある場合、静動判定部２０３は、図３０（Ａ）に示すよ
うに、数フレームのＲ（赤），Ｇ（緑），Ｂ（青）の画
像データを読み出す。

【０２３９】次に、静動判定部２０３は、ステップＳ１
４２として、現在のクリックデータが示すクリック位置
を中心とした、例えば水平方向１６画素及び垂直方向１
６画素からなる局所的な小ブロックの画像領域につい
て、数フレーム前の画像領域と現フレームの画像領域と
の間のフレーム間差分を計算する。なお、扱う画像がカ
ラー画像である場合、静動判定部２０３は、ステップＳ
１４２の処理として、図３０（Ｂ）および図３０（Ｃ）
に示すように、Ｒ，Ｇ，Ｂの各１６×１６画素の画像に
ついて、フレーム間差分を求め、そのＲ，Ｇ，Ｂ毎に求
めたフレーム間差分それぞれの絶対値の平均値を求め
る。

【０２４０】次に、静動判定部２０３は、ステップＳ１
４３の処理として、ステップＳ１４２の計算により求め
たフレーム間差分値が、所定のしきい値以下であるかど
うかを判定する。そして、ステップＳ１４４に進み、静
動判定部２０３は、フレーム間差分値が、所定のしきい
値以下である場合には、注目クリックデータが示すクリ
ック位置を含む小ブロック（以下、適宜、現在ブロック
という）が、静止であると判定し、一方、フレーム間差
分が所定のしきい値より大きい場合には、動きがあると
判定する。さらに、静動判定部２０３は、現在ブロック
を静止と判定したときには、その静止と判定された現在
ブロックの画像領域に対応したクリックデータを静止ク
リックとし、動きと判定したときには、その動きと判定
された現在ブロックの画像領域に対応したクリックデー
タを動きクリックとし、静動判定結果として出力する。

【０２４１】なお、扱う画像がカラー画像である場合、
静動判定部２０３は、ステップＳ１４４において、図３
０（Ｄ）に示すように、Ｒ，Ｇ，Ｂの各１６×１６画素
の現在ブロック毎に求められているフレーム間差分の絶
対値の平均値が、所定のしきい値（例えば、値１０）以
下のときは、例えば、所定のフラグを”０”とし、逆
に、しきい値より大きいときは、例えば所定のフラグ
を”１”にする。さらに、静動判定部２０３は、ステッ
プＳ１４４において、図３０（Ｅ）に示すように、Ｒ，
Ｇ，Ｂの各１６×１６画素の現在ブロック毎に設定され
ている所定フラグのうち全てが”０”となっている場合
には、現在ブロックが静止であると判定し、その静止と
判定された現在ブロックの画像領域に対応したクリック
データを静止クリックとする。一方、Ｒ，Ｇ，Ｂの各１
６×１６画素の現在ブロック毎に設定されている所定フ
ラグのうち何れか一つにでも”１”が立っている場合に
は、静動判定部２０３は、現在ブロックに、動きがある
と判定し、その動きと判定された現在ブロックの、画像
領域に対応したクリックデータを動きクリックとする。
そして、静動判定部２０３は、静止クリックまたは動き
クリックの情報を、静動判定結果として出力する。

【０２４２】図２８に戻り、ステップＳ１３３では、さ
らに、連続クリック判定部２０４において、注目クリッ
クデータに含まれるクリック時刻に基づいて、ユーザが
行ったクリック操作が連続的なクリック操作であるか否
かの連続クリック判定が行われる。

【０２４３】より具体的に説明すると、図２８のステッ
プＳ１３３における連続クリック判定部２０４は、図３
１のフローチャートに示すように、先ず、ステップＳ１
５１として、クリックデータ用メモリ２０２に蓄積され
ているクリックデータを読み出す。

【０２４４】次に、連続クリック判定部２０４は、ステ
ップＳ１５２として、注目クリックデータのクリック時
刻と、その直前（前回）のクリックデータのクリック時
刻との時間差（クリック間隔）を求める。

【０２４５】次に、連続クリック判定部２０４は、ステ
ップＳ１５３として、その時間差が所定のしきい値以下
であるか否か判定を行う。このステップＳ１５３におい
て、その時間差が所定のしきい値以下であると判定され
た場合には、連続クリック判定部２０４は、注目クリッ
クデータが、連続的なクリックであると判定し、一方、
クリック時刻の時間差が所定のしきい値より大きいと判
定された場合には、連続クリック判定部２０４は、注目
クリックデータが、連続的なクリックでないと判定す
る。そして、連続クリック判定部２０４は、ステップＳ
１５４に進み、連続クリックまたは不連続クリックを表
す情報を、連続クリック判定結果として出力する。

【０２４６】即ち、ステップＳ１５３において、連続的
なクリックであると判定された場合、ユーザは、ある一
つのオブジェクト画像に対するクリック操作を連続して
行っている可能性が高い。これは、携帯端末１のユーザ
が、空間解像度を高くすることを望むオブジェクト画像
部分（興味対象領域）を連続的にクリックする傾向があ
ると考えられるからである。したがって、連続クリック
判定部２０４は、連続クリック判定処理において連続的
なクリックであると判定した場合には、現在のクリック
データを連続クリックとし、一方、連続的なクリックで
ない（クリック時刻の時間差が所定のしきい値以上であ
る）と判定した場合には、注目クリックデータを不連続
クリックとし、連続クリック判定結果として出力する。

【０２４７】図２８に戻り、処理判定部２０５は、静動
判定部２０３及び連続クリック判定部２０４でのステッ
プＳ１３３の静動判定及び連続クリック判定により、注
目クリックデータが、連続クリックであり且つ静止クリ
ックであると判定した場合には、切換選択スイッチ２０
６乃至２０８を上述のように制御することにより、ステ
ップＳ１３５として、静止オブジェクト連結処理部２１
１に、静止オブジェクト連結処理を行わせる。また、処
理判定部２０５は、注目クリックデータが、連続クリッ
クであり且つ動きクリックであると判定した場合には、
切換選択スイッチ２０６乃至２０８を制御することによ
り、ステップＳ１３６として、動きオブジェクト連結処
理部２１０に、動きオブジェクト連結処理を行わせる。
さらに、処理判定部２０５は、注目クリックデータが、
不連続クリックであると判定した場合には、切換選択ス
イッチ２０６を制御することにより、ステップＳ１３４
として、オブジェクト番号割り当て部２０９に、新たな
オブジェクト番号割り当て処理を行わせる。

【０２４８】即ち、ステップＳ１３３において、注目ク
リックデータが不連続クリックであると判定され、ステ
ップＳ１３４の処理に進むと、オブジェクト番号割り当
て部２０９は、その注目クリックデータに対して新たな
オブジェクト番号を割り当て、ステップＳ１３１に戻
る。

【０２４９】具体例を挙げて説明すると、例えば図３２
（Ａ）のように、図中実線の×印で示す前回のクリック
データＣＬ１に対して割り当てられているオブジェクト
番号が、例えば「０」となされているとした場合におい
て、図３２（Ａ）において点線の×印で示す注目クリッ
クデータＣＬ２（オブジェクト番号が割り当てられる前
のクリックデータ）が、不連続クリックであると判定さ
れたとき、オブジェクト番号割り当て部２０９は、図３
２（Ｂ）中の実線の×印で示す現在のクリックデータＣ
Ｌ２に対して、新たなオブジェクト番号（この例では
「１」）を割り当てる。

【０２５０】一方、ステップＳ１３３において、注目ク
リックデータが、連続クリックであり且つ静止クリック
であると判定された場合、静止オブジェクト連結処理部
２１１は、前回のクリックが静止クリックとなってお
り、さらに、注目クリックデータが表すクリック位置
が、前回のクリックデータに割り当てられているオブジ
ェクト番号で構成される画像領域内に含まれるか又はそ
の領域に近ければ、注目クリックデータに対応するクリ
ックが前回のクリックが含まれるものと同一のオブジェ
クト画像をクリックしたものであると判断し、ステップ
Ｓ１３５において、注目クリックデータに対して、前回
のクリックデータと同一のオブジェクト番号を割り当て
る静止オブジェクト連結処理を行う。

【０２５１】すなわち、静止オブジェクト連結処理部２
１１は、図３３のフローチャートに示すように、先ず、
ステップＳ１６１として、前回のクリックデータ（前
回、注目クリックデータとされたクリックデータ）が、
連続クリックであり且つ静止クリックであったか否かの
判定を行う。このステップＳ１６１において、前回のク
リックデータが、連続クリックで且つ静止クリックであ
ると判定された場合は、ステップＳ１６２の処理に進
み、一方、前回のクリックデータが連続クリックで且つ
静止クリックでないと判定された場合は、ステップＳ１
６４の処理に進む。

【０２５２】ステップＳ１６１にて前回のクリックデー
タが連続クリックで且つ静止クリックでないと判定する
と、静止オブジェクト連結処理部２１１は、ステップＳ
１６４の処理として、図３２（Ａ）及び（Ｂ）で説明し
たのと同様にして、注目クリックデータに対して、新た
なオブジェクト番号を割り当てる。このステップＳ１６
４の処理後は、図２８のステップＳ１３７の処理に進
む。

【０２５３】また、ステップＳ１６１にて前回のクリッ
クデータが、連続クリックで且つ静止クリックであると
判定されてステップＳ１６２の処理に進むと、静止オブ
ジェクト連結処理部２１１は、注目クリックデータが表
すクリック位置と、前回のクリックデータに割り当てら
れているオブジェクト番号で構成される画像領域との間
の空間的な距離を求め、この距離に基づいて、注目クリ
ックデータが表すクリック位置が、前回のクリックデー
タに割り当てられているオブジェクト番号で構成される
画像領域内に含まれるか又はその領域に近い場合は、注
目クリックデータは前回のクリックが含まれるものと同
一のオブジェクト画像をクリックしたものであると判定
する。一方、注目クリックデータが表すクリック位置
が、前回のクリックデータに割り当てられているオブジ
ェクト番号で構成されるオブジェクト画像領域内に含ま
れず、且つその領域からも遠い場合は、静止オブジェク
ト連結処理部２１１は、注目クリックデータは、前回の
クリックが含まれるものとは異なる別オブジェクト画像
をクリックしたものである判定する。ステップＳ１６２
において、注目クリックデータが、前回のクリックが含
まれるものと同一のオブジェクト画像をクリックしたデ
ータであると判定された場合、ステップＳ１６３の処理
に進み、一方、注目クリックデータが、前回のクリック
が含まれるものとは別のオブジェクト画像をクリックし
たデータであると判定された場合は、ステップＳ１６４
の処理に進む。

【０２５４】ステップＳ１６２にて注目クリックデータ
が、前回のクリックが含まれるものとは別のオブジェク
ト画像をクリックしたデータであると判定され、ステッ
プＳ１６４の処理に進むと、静止オブジェクト連結処理
部２１１は、注目クリックデータに対して新たなオブジ
ェクト番号を割り当てた後、図２８のステップＳ１３７
の処理に進む。

【０２５５】また、ステップＳ１６２にて注目クリック
データが、前回のクリックが含まれるものと同一のオブ
ジェクト画像をクリックしたデータであると判定する
と、静止オブジェクト連結処理部２１１は、ステップＳ
１６３の処理として、注目クリックデータに対して、前
回のクリックデータと同一のオブジェクト番号を割り当
てる静止オブジェクト連結処理を行う。

【０２５６】具体例を挙げて説明すると、例えば図３２
（Ｃ）のように、図中実線の×印で示す前回のクリック
データＣＬ１に対して割り当てられているオブジェクト
番号が例えば「０」とされているとした場合において、
図３２（Ｃ）において点線の×印で示す注目クリックデ
ータＣＬ２（オブジェクト番号が割り当てられる前のク
リックデータ）が、連続クリックで且つ静止クリックで
あると判定され、前回のクリックが静止クリックとなっ
ており、さらに注目クリックデータが表すクリック位置
が、前回のクリックデータに割り当てられているオブジ
ェクト番号で構成される画像領域内に含まれるか又はそ
の領域に近いとき、静止オブジェクト連結処理部２１１
は、図３２（Ｄ）中の実線の×印で示す注目クリックデ
ータＣＬ２に対して、前回のクリックデータと同一のオ
ブジェクト番号（この例では「０」）を割り当てる。

【０２５７】このようにステップＳ１６３にて、注目ク
リックデータに、前回のクリックデータと同一のオブジ
ェクトを割り当てた後は、図２８のステップＳ１３７の
処理に進む。

【０２５８】また、図２８のステップＳ１３３におい
て、注目クリックデータが、連続クリックであり且つ動
きクリックであると判定し、前回のクリックが動きクリ
ックとなっており、さらに注目クリックデータが表すク
リック位置付近の画像の特徴が、前回のクリックに割り
当てられたオブジェクト番号で構成される画像領域（１
６×１６画素）の特徴に含まれているか又はそれに近い
場合、動きオブジェクト連結処理部２１０は、注目クリ
ックデータが、前回のクリックが含まれるものと同一の
オブジェクト画像をクリックしたものであると判断し、
ステップＳ１３６として、注目クリックデータに対し
て、前回のクリックデータと同一のオブジェクト番号を
割り当てる動きオブジェクト連結処理を行う。

【０２５９】すなわち、ステップＳ１３３において、注
目クリックデータが連続クリックであり且つ動きクリッ
クであると判定したとき、動きオブジェクト連結処理部
２１０は、図３４に示すように、先ず、ステップＳ１７
１として、前回のクリックデータが、連続クリックであ
り且つ動きクリックであったか否かの判定を行う。この
ステップＳ１７１において、前回のクリックデータが、
連続クリックで且つ動きクリックであると判定された場
合は、ステップＳ１７２の処理に進み、一方、前回のク
リックデータが、連続クリックで且つ動きクリックでな
いと判定された場合は、ステップＳ１７４の処理に進
む。

【０２６０】ステップＳ１７１にて、前回のクリックデ
ータが、連続クリックで且つ動きクリックでないと判定
されてステップＳ１７４の処理に進むと、動きオブジェ
クト連結処理部２１０は、図３１（Ａ）及び（Ｂ）で説
明したのと同様にして、注目クリックデータに対して新
たなオブジェクト番号を割り当てる。このステップＳ１
７４の処理後は、図２８のステップＳ１３７の処理に進
む。

【０２６１】また、ステップＳ１７１にて、前回のクリ
ックデータが、連続クリックで且つ動きクリックである
と判定されてステップＳ１７２の処理に進むと、動きオ
ブジェクト連結処理部２１０は、注目クリックデータが
表すクリック位置付近の画像領域（１６×１６画素）の
特徴と、前回のクリックに割り当てられたオブジェクト
番号で構成される画像領域の特徴とを求め、この特徴に
基づいて、注目クリックデータが表すクリック位置付近
の画像領域の特徴が、前回のクリックに割り当てられた
オブジェクト番号で構成される画像領域の特徴に含まれ
ているか又はそれに近い場合に、注目クリックデータ
が、前回のクリックが含まれるものと同一のオブジェク
ト画像をクリックしていると判断する。一方、注目クリ
ックデータが表すクリック位置付近の画像領域の特徴
が、前回のクリックに割り当てられたオブジェクト番号
で構成される画像領域の特徴に含まれず、且つその特徴
からも遠い場合は、動きオブジェクト連結処理部２１０
は、注目クリックデータが、前回のクリックとは異なる
別オブジェクト画像をクリックしたデータであると判定
する。

【０２６２】なお、ここでの画像領域の特徴とは、例え
ばクリック位置付近の局所領域（１６×１６画素）にお
ける色（平均色、代表色など）のヒストグラムや、パタ
ーン等のことである。また、上述のように、複数の動き
クリックに、同一オブジェクト番号を割り当てるという
ことは、これらのクリックデータの間でオブジェクトの
トラッキングをしていると言い換えることができる。

【０２６３】ステップＳ１７２において、注目クリック
データが、前回のクリックが含まれるものと同一のオブ
ジェクト画像をクリックしたデータであると判定された
場合は、ステップＳ１７３の処理に進み、一方、注目ク
リックデータが、前回のクリックとは別のオブジェクト
画像をクリックしたデータであると判定された場合は、
ステップＳ１７４の処理に進む。

【０２６４】ステップＳ１７２にて、注目クリックデー
タが、前回のクリックとは別のオブジェクト画像をクリ
ックしたデータであると判定されてステップＳ１７４の
処理に進むと、動きオブジェクト連結処理部２１０は、
上述の場合と同様に、注目クリックデータに対して、新
たなオブジェクト番号を割り当てを行い、その後、図２
８のステップＳ１３７の処理に進む。

【０２６５】また、ステップＳ１７２にて、注目クリッ
クデータが、前回の各クリックが含まれるものと同一の
オブジェクト画像をクリックしたデータであると判定さ
れてステップＳ１７３の処理に進むと、動きオブジェク
ト連結処理部２１０は、注目クリックデータに対して、
前回のクリックデータと同一のオブジェクト番号を割り
当てる。

【０２６６】具体例を挙げて説明すると、例えば図３２
（Ｅ）のように、図中実線の×印で示す前回のクリック
データＣＬ１に対して割り当てられているオブジェクト
番号が、例えば「０」とされているとした場合におい
て、図３２（Ｅ）中点線の×印で示す注目クリックデー
タＣＬ２（オブジェクト番号が割り当てられる前のクリ
ックデータ）が、連続クリックで且つ動きクリックであ
ると判定され、前回のクリックが動きクリックとなって
おり、さらに注目クリックデータが表すクリック位置付
近の画像の特徴が、前回のクリックに割り当てられたオ
ブジェクト番号で構成されるオブジェクト画像の特徴に
含まれているか又はそれに近い場合、動きオブジェクト
連結処理部２１０は、図３２（Ｆ）中の実線の×印で示
す注目クリックデータＣＬ２に対して、前回のクリック
データと同一のオブジェクト番号（この例では「０」）
を割り当てる。

【０２６７】ステップＳ１７３にて、注目クリックデー
タに、前回のクリックデータと同一のオブジェクトを割
り当てた後は、図２８のステップＳ１３７の処理に進
む。

【０２６８】次に、図２８のステップＳ１３５からステ
ップＳ１３７の処理に進んだ場合、オブジェクト画像抽
出部２１３は、オブジェクト番号用メモリ２１２に記憶
された、オブジェクト番号が割り当てられた過去数フレ
ーム分に相当する各クリックデータと、画像用メモリ２
０１に記憶された過去数フレームの画像データとに基づ
いて、注目ユーザの注目携帯端末１に送信するフレーム
（以下、適宜、注目フレームという）の画像データから
静止しているオブジェクト画像（静止オブジェクト画
像）、動きのあるオブジェクト画像（動きオブジェクト
画像）、それら以外の背景画像を抽出する。すなわち、
注目携帯端末１に送信する注目フレームの画像中で、静
止クリックとされたクリックデータの密度が高い画像部
分には、静止オブジェクト画像が存在すると考えられる
ため、オブジェクト画像抽出部２１３は、オブジェクト
番号が割り当てられた過去複数フレームのクリックデー
タに基づいて、静止クリックとされたクリックデータの
密度（クリック密度）を求め、さらにクリック密度が高
い画像部分の中で支配的なオブジェクト番号を求める。
そして、オブジェクト画像抽出部２１３は、その支配的
なオブジェクト番号が割り当てられているクリックデー
タの分布からオブジェクトの形状を生成し、生成したオ
ブジェクトの形状内の画像を、静止オブジェクト画像と
して、注目フレームの画像データから抽出する。

【０２６９】また、ステップＳ１３６からステップＳ１
３７の処理に進んだ場合、オブジェクト画像抽出部２１
３は、動きクリックと判定されたクリックデータの中
で、同一オブジェクト番号が割り当てられているクリッ
ク位置付近の画像同士のフレーム間パターンマッチング
等を行い、動き補償を行った後、パターンマッチングで
近似しているとみなされた画像領域においてクリック密
度が高く支配的なオブジェクト番号を求める。さらに、
オブジェクト画像抽出部２１３は、その支配的なオブジ
ェクト番号が割り当てられているクリックデータの分布
からオブジェクトの形状を生成し、生成したオブジェク
トの形状内の画像を、動きオブジェクト画像として、注
目フレームの画像データから抽出する。

【０２７０】また、オブジェクト画像抽出部２１３は、
ステップＳ１３７において、上述した静止クリック、動
きクリックと判定されたクリックデータのクリック密度
が低い画像部分を注目フレームの背景画像とみなす。言
い換えると、オブジェクト画像抽出部２１３は、注目フ
レームから、静止オブジェクト画像、動きオブジェクト
画像が抽出された残りの画像部分を背景画像とする。

【０２７１】ステップＳ１３７の処理を詳細に説明する
と、オブジェクト画像抽出部２１３は、図３５のフロー
チャートに示すように、先ず、ステップＳ１８１とし
て、オブジェクト番号が割り当てられた過去複数フレー
ム分に相当する各クリックデータと画像データとを取り
込み、次いで、ステップＳ１８２にて、各クリックデー
タを静止クリックと動きクリック毎に分類する。ここ
で、図２８のステップＳ１３５からステップＳ１３７の
処理に進んだ場合には、ステップＳ１８２からステップ
Ｓ１８３以降の処理に進むことになり、図２８のステッ
プＳ１３６からステップＳ１３７の処理に進んだ場合に
は、ステップＳ１８２からステップＳ１８４以降の処理
に進むことになる。

【０２７２】図２８のステップＳ１３５からステップＳ
１３７の処理に進み、図３５においてステップＳ１８２
からステップＳ１８４以降の処理に進むと、オブジェク
ト画像抽出部２１３は、先ず、過去複数フレーム分の画
像に対し、オブジェクト番号が割り当てられた各クリッ
クデータの中で静止クリックとされているクリックデー
タの密度（以下、クリック密度と呼ぶ）を、例えば、１
６×１６画素のブロック毎に求める。

【０２７３】次に、オブジェクト画像抽出部２１３は、
ステップＳ１８５として、図３６（Ａ）に示すように、
画像内の図中点線で示すような各１６×１６画素のブロ
ックｂｋについて、図中×印で示す静止クリックのクリ
ック密度が所定値以上あるか否かの判定を行う。

【０２７４】ここで、注目携帯端末１に送信する画像中
で、静止クリックとなされたクリックデータの密度が高
い画像部分には、静止オブジェクト画像が存在すると考
えられる。このため、オブジェクト画像抽出部２１３
は、静止クリックのクリック密度が所定値以上となって
いるブロックについては、ステップＳ１８６の処理を行
い、一方、静止クリックのクリック密度が所定値未満と
なっているブロックについては、ステップＳ１９０の処
理を行う。

【０２７５】ステップＳ１８６の処理に進むと、オブジ
ェクト画像抽出部２１３は、静止クリックのクリック密
度が所定値以上となっているブロックについて、図３６
（Ｂ）に示すように、ブロック内の各クリックデータに
割り当てられているオブジェクト番号のうちで発生頻度
が最も高い支配的なオブジェクト番号を求め、さらに図
３６（Ｃ）に示すように、それぞれ支配的なオブジェク
ト番号が同じとなるブロック（ＢＫ０、ＢＫ２、ＢＫ
４、ＢＫ５）をまとめてオブジェクトの形状を生成す
る。そして、オブジェクト画像抽出部２１３は、生成し
たオブジェクトの形状に基づき、静止オブジェクト画像
を、注目フレームの画像データから抽出する。このステ
ップＳ１８６の処理後は、図２８のステップＳ１３８の
処理へ進む。

【０２７６】一方、図２８のステップＳ１３６からステ
ップＳ１３７の処理に進み、図３５においてステップＳ
１８２からステップＳ１８３以降の処理に進むと、オブ
ジェクト画像抽出部２１３は、図３６（Ｄ）に示すよう
に、過去複数フレーム分の画像において、図中×印で示
す各動きクリックとされているクリックデータのうち、
それぞれ同じオブジェクト番号が割り当てられているク
リック位置付近の画像同士のフレーム間パターンマッチ
ングを行い、さらに動き補償を行う。

【０２７７】次いで、オブジェクト画像抽出部２１３
は、ステップＳ１８７として、パターンマッチングで近
似しているとみなされた画像領域内の動きクリックのク
リック密度を求める。

【０２７８】その後、オブジェクト画像抽出部２１３
は、ステップＳ１８８として、図３６（Ｄ）に示すよう
に、画像内において図中×印で示す動きクリックのクリ
ック密度が、所定値以上あるか否かの判定を行う。

【０２７９】ここで、動き補償を行った後において、動
きクリックとされたクリックデータの密度が高い画像部
分には、動きオブジェクト画像が存在すると考えられ
る。このため、オブジェクト画像抽出部２１３は、動き
補償後の画像において動きクリックのクリック密度が所
定値以上となっている画像領域については、ステップＳ
１８９の処理を行い、一方、動きクリックのクリック密
度が所定値未満となっている画像領域については、ステ
ップＳ１９０の処理を行う。

【０２８０】ステップＳ１８９の処理に進むと、オブジ
ェクト画像抽出部２１３は、動きクリックのクリック密
度が所定値以上となっている画像領域について、各クリ
ックデータに割り当てられているオブジェクト番号のう
ちで発生頻度が最も高い支配的なオブジェクト番号を求
め、さらに図３６（Ｅ）に示すように、それぞれ支配的
なオブジェクト番号が同じとなるブロック（ＢＫ３，Ｂ
Ｋ６）をまとめてオブジェクトの形状を生成する。そし
て、オブジェクト画像抽出部２１３は、生成したオブジ
ェクトの形状に基づき、動きオブジェクト画像を、注目
フレームの画像データから抽出する。このステップＳ１
８９の処理後は、図２８のステップＳ１３８の処理へ進
む。

【０２８１】なお、ステップＳ１８５及びステップＳ１
８８において共にクリック密度が所定値未満となされて
いるとき、すなわち、静止クリック及び動きクリックの
クリック密度が低い画像部分に対応する注目フレームの
領域は、ステップＳ１９０の処理として、背景画像領域
として扱われる。言い換えると、オブジェクト画像抽出
部２１３は、注目フレームから、静止オブジェクト画
像、動きオブジェクト画像が抽出された残りの画像部分
を背景画像とする。このステップＳ１９０の処理後は、
図２８のステップＳ１３８の処理へ進む。

【０２８２】このようにしてオブジェクト画像抽出部２
１３により静止オブジェクト画像、動きオブジェクト画
像、背景画像の抽出がなされた後は、図２８のステップ
Ｓ１３１に戻り、以下、次のフレームを注目フレームと
して、同様の処理を繰り返す。

【０２８３】なお、図２８のフローチャートに示した処
理は、各ユーザを注目ユーザとして行われる。

【０２８４】以上説明した処理の流れのように、オブジ
ェクト抽出部１３４では、携帯端末１のユーザによるク
リックデータに基づいて、送信する画像の静止オブジェ
クト画像、動きオブジェクト画像、背景画像の抽出が行
われる。但し、オブジェクト抽出部１３４では、十分な
数のクリックデータがないと、オブジェクト抽出が困難
であることから、十分な数のクリックデータがない場合
には、画像データは、そのまま、後段の送信処理部１３
６に供給される。従って、この場合は、図１０（Ａ）に
示した状態で、画像データが提供される。

【０２８５】なお、本発明は、電子ブックデータや画像
データの他、楽曲その他の音声データや、プログラム等
の提供にも適用可能である。音声データについては、ユ
ーザ入力情報に基づいて、例えば、そのサンプリング周
波数や、量子化ビット数、周波数帯域幅等を変化させる
ことにより、提供する音声データの音質を制御するよう
にすることができる。また、プログラムについては、ユ
ーザ入力情報に基づいて、例えば、提供するプログラム
を、いわゆるデモ版や製品版とするようにすることがで
きる。

【０２８６】また、コンテンツサーバ７から携帯端末１
に提供されるデータは、携帯端末１において、メモリカ
ード２３に記憶することができる。即ち、コンテンツサ
ーバ７が提供するデータは、携帯端末１においてダウン
ロードし、後で、その再生等を行うようにすることが可
能である。なお、携帯端末１では、コンテンツサーバ７
からプッシュ型で配信されるデータをダウンロードする
ようにすることもできるし、また、携帯端末１からコン
テンツサーバ７に対してダウンロードを要求し、その結
果、コンテンツサーバ７から送信されてくるデータをダ
ウンロードするようにすることも可能である。

【０２８７】さらに、上述したように、複数のユーザか
らのユーザ入力情報に基づいて加工されるコンテンツの
提供は、有料ユーザにのみ対して行うようにすることが
可能である。

【０２８８】

【発明の効果】本発明の第１の情報処理装置および第１
の情報処理方法、並びに第１の記録媒体によれば、複数
の端末から送信されてくる各ユーザの入力情報が記憶さ
れ、その記憶された複数のユーザの入力情報に基づい
て、端末に提供するコンテンツが制御される。従って、
端末に対して、付加価値をつけたコンテンツの提供が可
能となる。

【０２８９】本発明の第２の情報処理装置によれば、複
数の端末それぞれにおいて、提供装置から提供されるコ
ンテンツに対して、所定の入力が与えられ、その入力を
表す入力情報が、提供装置に送信される。そして、提供
装置において、複数の端末から送信されてくる各ユーザ
の入力情報が記憶され、その記憶された複数のユーザの
入力情報に基づいて、端末に提供するコンテンツが制御
される。従って、端末に対して、付加価値をつけたコン
テンツの提供が可能となる。

【０２９０】本発明の第３の情報処理装置および第２の
情報処理方法、並びに第２の記録媒体によれば、複数の
端末から送信されてくる各ユーザの入力情報が記憶さ
れ、その記憶された複数のユーザの入力情報に基づい
て、複数の端末それぞれに放送する放送データが制御さ
れる。従って、端末に対して、付加価値をつけた放送デ
ータの提供が可能となる。

【０２９１】本発明の第４の情報処理装置および第３の
情報処理方法、並びに第３の記録媒体によれば、複数の
端末から送信されてくる各ユーザの入力情報が記憶さ
れ、その記憶された複数のユーザの入力情報に基づい
て、端末にダウンロードさせるダウンロードデータが制
御される。従って、端末において、付加価値のついたダ
ウンロードデータをダウンロードすることが可能とな
る。

【図面の簡単な説明】

【図１】本発明を適用したネットワークシステムの一実
施の形態の構成例を示す図であある。

【図２】携帯端末１の外観構成例を示す斜視図である。

【図３】携帯端末１のカメラ部１５を回動した状態を示
す斜視図である。

【図４】携帯端末１の電気的構成例を示すブロック図で
ある。

【図５】コンテンツサーバ７のハードウェア構成例を示
すブロック図である。

【図６】コンテンツサーバ７が提供する電子ブックデー
タを説明する図である。

【図７】コンテンツサーバ７が提供する電子ブックデー
タを説明する図である。

【図８】コンテンツサーバ７が提供する電子ブックデー
タを説明する図である。

【図９】コンテンツサーバ７が提供する画像データを説
明する図である。

【図１０】コンテンツサーバ７が提供する画像データを
説明する図である。

【図１１】コンテンツサーバ７の機能的構成例を示すブ
ロック図である。

【図１２】コンテンツサーバ７によるユーザ登録処理を
説明するフローチャートである。

【図１３】コンテンツサーバ７による解析処理を説明す
るフローチャートである。

【図１４】コンテンツサーバ７によるコンテンツ提供処
理を説明するフローチャートである。

【図１５】電子ブックデータを提供するコンテンツサー
バ７の機能的構成例を示すブロック図である。

【図１６】同一嗜好ユーザ抽出部８６の処理を説明する
フローチャートである。

【図１７】電子ブックデータ処理部８２の構成例を示す
ブロック図である。

【図１８】電子ブックデータ処理部８２の処理を説明す
るフローチャートである。

【図１９】画像データを提供するコンテンツサーバ７の
第１の機能的構成例を示すブロック図である。

【図２０】特徴量抽出部１０６の処理を説明するフロー
チャートである。

【図２１】画像データ処理部１０２の構成例を示すブロ
ック図である。

【図２２】画像データ処理部１０２の処理を説明するフ
ローチャートである。

【図２３】画像データを提供するコンテンツサーバ７の
第２の機能的構成例を示すブロック図である。

【図２４】近接フレームクリックデータ抽出部１２６の
処理を説明するフローチャートである。

【図２５】画像データ処理部１２２の構成例を示すブロ
ック図である。

【図２６】画像データ処理部１２２の処理を説明するフ
ローチャートである。

【図２７】オブジェクト抽出部１３４の構成例を示すブ
ロック図である。

【図２８】動きオブジェクト画像および静止オブジェク
ト画像の抽出処理を説明するフローチャートである。

【図２９】静動判定処理を説明するフローチャートであ
る。

【図３０】フレーム間差分の計算方法を説明する図であ
る。

【図３１】連続クリック判定処理を説明するフローチャ
ートである。

【図３２】オブジェクト番号の付け方を説明する図であ
る。

【図３３】静止オブジェクト連結処理を説明するフロー
チャートである。

【図３４】動きオブジェクト連結処理を説明するフロー
チャートである。

【図３５】オブジェクト抽出処理を説明するフローチャ
ートである。

【図３６】オブジェクト抽出方法を説明する図である。

【符号の説明】

１₁乃至１_A 携帯端末，２₁乃至２_B 基地局，３
公衆回線網，４₁乃至４_C ＷＷＷサーバ，５イン
ターネット，６アクセスサーバ，７コンテンツサ
ーバ，８管理制御装置，１１ヒンジ部，１２
表示部，１３本体，１４アンテナ，１５カ
メラ部，１６ＣＣＤカメラ，１７スピーカ，１
８液晶ディスプレイ，１９操作キー，２０メ
モボタン，２１マイクロフォン，２２トラック
ボール，２３メモリカード，２４メモリスティ
ックスロット，３０主制御部，３１電源回路
部，３２操作入力制御部，３３画像エンコー
ダ，３４カメラＩ／Ｆ，３５ＬＥＤ制御部，
３６画像デコーダ，３７多重分離部，３８変復
調回路部，３９音声コーデック，４０メインバ
ス，４１同期バス，４２記録再生部，４３送
受信回路部，５１バス，５２CPU，５３ ROM，
５４ RAM，５５ハードディスク，５６出力
部，５７入力部，５８通信部，５９ドライ
ブ，６０入出力インタフェース，６１リムーバ
ブル記録媒体，７１コンテンツデータベース，７２
コンテンツ加工部，７３送受信制御部，７４
登録部，７５ユーザ入力情報データベース，７６
解析部，７７解析情報データベース，７８検索
部，７９課金処理部，８１電子ブックデータベ
ース，８２電子ブックデータ処理部，８３送受信
制御部，８４登録部，８５嗜好データベース，
８６同一嗜好ユーザデータベース，８７統合嗜
好データベース，８８嗜好情報検索部，９１ス
ケジューラ，９２電子ブックデータ読み出し部，
９３データ選択部，１０１画像データベース，
１０２画像データ処理部，１０３送受信制御部，
１０４登録部，１０５クリック位置データベー
ス，１０６特徴量抽出部，１０７特徴量データベ
ース，１０８特徴量検索部，１１１スケジュー
ラ，１１２画像データ読み出し部，１１３特徴
量抽出部，１１４特徴近似領域検出部，１１５
解像度変換部，１２２画像データ処理部，１２６
近接フレームクリックデータ抽出部，１２７近接フ
レームクリックデータベース，１２８近接フレーム
クリックデータ検索部，１３１スケジューラ，１
３２画像データ読み出し部，１３３背景抽出部，
１３４オブジェクト抽出部，１３５付加情報算
出部，１３６送信処理部，２０１画像用メモリ，
２０２クリックデータ用メモリ，２０３静動判
定部，２０４連続クリック判定部，２０５処理判
定部，２０６乃至２０８切換選択スイッチ，２０
９オブジェクト番号割り当て部，２１０動きオブ
ジェクト連結処理部，２１１静止オブジェクト連結
処理部，２１２オブジェクト番号用メモリ，２１
３オブジェクト画像抽出部，２１４オブジェクト
抽出結果用メモリ

───────────────────────────────────────────────────── フロントページの続きＦターム(参考） 5B049 AA06 BB15 EE05 FF01 GG00 GG06 5B075 PP02 PP03 PP13 PQ02 PQ04 PQ05 UU11

Claims

【特許請求の範囲】

【請求項１】端末にコンテンツを提供する情報処理装
置であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶する記憶手段と、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、前記端末に提供するコンテンツを制御する制御
手段とを備えることを特徴とする情報処理装置。
【請求項２】前記制御手段は、前記コンテンツの質を
変更することを特徴とする請求項１に記載の情報処理装
置。
【請求項３】前記制御手段は、前記コンテンツの内容
を変更することを特徴とする請求項１に記載の情報処理
装置。
【請求項４】前記制御手段は、前記コンテンツの内容
の少なくとも一部を削除または追加することを特徴とす
る請求項１に記載の情報処理装置。
【請求項５】前記制御手段において制御されたコンテ
ンツは、前記端末に放送されることを特徴とする請求項
１に記載の情報処理装置。
【請求項６】前記制御手段において制御されたコンテ
ンツは、前記端末にダウンロードされることを特徴とす
る請求項１に記載の情報処理装置。
【請求項７】前記入力情報は、前記ユーザが前記端末
を選択操作することにより得られる情報であることを特
徴とする請求項１に記載の情報処理装置。
【請求項８】注目しているユーザの入力情報と関連す
る入力情報を抽出する抽出手段をさらに備え、前記制御手段は、前記抽出手段において抽出された入力
情報に基づいて、前記コンテンツを制御することを特徴
とする請求項１に記載の情報処理装置。
【請求項９】前記コンテンツは、電子ブックのデータ
であることを特徴とする請求項１に記載の情報処理装
置。
【請求項１０】注目している注目ユーザが前記端末を
操作することにより指定した電子ブックと関連する電子
ブックを指定したことを表す複数のユーザの入力情報を
抽出し、その入力情報から、電子ブックについての前記
注目ユーザの嗜好を解析する解析手段をさらに備え、前記制御手段は、前記注目ユーザの嗜好に基づいて、そ
の注目ユーザの端末に提供する電子ブックのデータを制
御することを特徴とする請求項９に記載の情報処理装
置。
【請求項１１】前記コンテンツは、画像データまたは
音声データであることを特徴とする請求項１に記載の情
報処理装置。
【請求項１２】注目している注目ユーザが前記端末を
操作することにより指定した画像上の所定の位置におけ
る特徴量と関連する特徴量を有する画像上の位置を指定
したことを表す複数のユーザの入力情報を抽出し、その
入力情報から、画像の特徴量についての前記注目ユーザ
の嗜好を解析する解析手段をさらに備え、前記制御手段は、前記注目ユーザの嗜好に基づいて、そ
の注目ユーザの端末に提供する画像データの画質を制御
することを特徴とする請求項１１に記載の情報処理装
置。
【請求項１３】注目している注目ユーザが前記端末を
操作することにより指定した画像上の位置と関連する画
像上の位置を指定したことを表す複数のユーザの入力情
報を抽出する抽出手段をさらに備え、前記制御手段は、前記抽出手段において抽出された複数
のユーザの入力情報が表す画像上の複数の位置に基づい
て、前記注目ユーザの端末に提供する画像データから所
定の領域を抽出することを特徴とする請求項１１に記載
の情報処理装置。
【請求項１４】端末にコンテンツを提供する情報処理
方法であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶手段に記憶させる記憶ステップと、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、前記端末に提供するコンテンツを制御する制御
ステップとを備えることを特徴とする情報処理方法。
【請求項１５】端末にコンテンツを提供する情報処理
を、コンピュータに行わせるプログラムが記録されてい
る記録媒体であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶手段に記憶させる記憶ステップと、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、前記端末に提供するコンテンツを制御する制御
ステップとを備えるプログラムが記録されていることを
特徴とする記録媒体。
【請求項１６】コンテンツが提供される複数の端末
と、前記コンテンツを提供する提供装置とからなる情報
処理装置であって、前記複数の端末それぞれは、前記提供装置から提供されるコンテンツに対して、所定
の入力を与える入力手段と、前記所定の入力を表す入力情報を、前記提供装置に送信
する送信手段とを備え、前記提供装置は、複数の端末から送信されてくる各ユーザの入力情報を記
憶する記憶手段と、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、前記端末に提供するコンテンツを制御する制御
手段とを備えることを特徴とする情報処理装置。
【請求項１７】複数の端末に放送される放送データを
処理する情報処理装置であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶する記憶手段と、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、複数の端末それぞれに放送する前記放送データ
を制御する制御手段とを備えることを特徴とする情報処
理装置。
【請求項１８】前記制御手段は、前記放送データの質
を制御することを特徴とする請求項１７に記載の情報処
理装置。
【請求項１９】前記制御手段は、前記放送データの内
容を制御することを特徴とする請求項１７に記載の情報
処理装置。
【請求項２０】前記制御手段は、前記放送データの内
容の少なくとも一部を削除または追加することを特徴と
する請求項１７に記載の情報処理装置。
【請求項２１】前記入力情報は、前記ユーザが前記端
末を選択操作することにより得られる情報であることを
特徴とする請求項１７に記載の情報処理装置。
【請求項２２】注目しているユーザの入力情報と関連
する入力情報を抽出する抽出手段をさらに備え、前記制御手段は、前記抽出手段において抽出された入力
情報に基づいて、前記放送データを制御することを特徴
とする請求項１７に記載の情報処理装置。
【請求項２３】前記放送データは、電子ブックのデー
タであることを特徴とする請求項１７に記載の情報処理
装置。
【請求項２４】注目している注目ユーザが前記端末を
操作することにより指定した電子ブックと関連する電子
ブックを指定したことを表す複数のユーザの入力情報を
抽出し、その入力情報から、電子ブックについての前記
注目ユーザの嗜好を解析する解析手段をさらに備え、前記制御手段は、前記注目ユーザの嗜好に基づいて、そ
の注目ユーザの端末に提供する電子ブックのデータを制
御することを特徴とする請求項２３に記載の情報処理装
置。
【請求項２５】前記放送データは、画像データまたは
音声データであることを特徴とする請求項１７に記載の
情報処理装置。
【請求項２６】注目している注目ユーザが前記端末を
操作することにより指定した画像上の所定の位置におけ
る特徴量と関連する特徴量を有する画像上の位置を指定
したことを表す複数のユーザの入力情報を抽出し、その
入力情報から、画像の特徴量についての前記注目ユーザ
の嗜好を解析する解析手段をさらに備え、前記制御手段は、前記注目ユーザの嗜好に基づいて、そ
の注目ユーザの端末に提供する画像データの画質を制御
することを特徴とする請求項２５に記載の情報処理装
置。
【請求項２７】注目している注目ユーザが前記端末を
操作することにより指定した画像上の位置と関連する画
像上の位置を指定したことを表す複数のユーザの入力情
報を抽出する抽出手段をさらに備え、前記制御手段は、前記抽出手段によって抽出された複数
のユーザの入力情報が表す画像上の複数の位置に基づい
て、前記注目ユーザの端末に提供する画像データから所
定の領域を抽出することを特徴とする請求項２５に記載
の情報処理装置。
【請求項２８】複数の端末に放送される放送データを
処理する情報処理方法であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶手段に記憶させる記憶ステップと、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、複数の端末それぞれに放送する前記放送データ
を制御する制御ステップとを備えることを特徴とする情
報処理方法。
【請求項２９】複数の端末に放送される放送データを
処理する情報処理を、コンピュータに行わせるプログラ
ムが記録されている記録媒体であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶手段に記憶させる記憶ステップと、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、複数の端末それぞれに放送する前記放送データ
を制御する制御ステップとを備えるプログラムが記録さ
れていることを特徴とする記録媒体。
【請求項３０】端末で受信されて記録されるダウンロ
ードデータを処理する情報処理装置であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶する記憶手段と、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、前記端末にダウンロードさせる前記ダウンロー
ドデータを制御する制御手段とを備えることを特徴とす
る情報処理装置。
【請求項３１】前記制御手段は、前記ダウンロードデ
ータの質を制御することを特徴とする請求項３０に記載
の情報処理装置。
【請求項３２】前記制御手段は、前記ダウンロードデ
ータの内容を制御することを特徴とする請求項３０に記
載の情報処理装置。
【請求項３３】前記制御手段は、前記ダウンロードデ
ータの内容の少なくとも一部を削除または追加すること
を特徴とする請求項３０に記載の情報処理装置。
【請求項３４】前記入力情報は、前記ユーザが前記端
末を選択操作することにより得られる情報であることを
特徴とする請求項３０に記載の情報処理装置。
【請求項３５】注目しているユーザの入力情報と関連
する入力情報を抽出する抽出手段をさらに備え、前記制御手段は、前記抽出手段において抽出された入力
情報に基づいて、前記ダウンロードデータを制御するこ
とを特徴とする請求項３０に記載の情報処理装置。
【請求項３６】前記ダウンロードデータは、電子ブッ
クのデータであることを特徴とする請求項３０に記載の
情報処理装置。
【請求項３７】注目している注目ユーザが前記端末を
操作することにより指定した電子ブックと関連する電子
ブックを指定したことを表す複数のユーザの入力情報を
抽出し、その入力情報から、電子ブックについての前記
注目ユーザの嗜好を解析する解析手段をさらに備え、前記制御手段は、前記注目ユーザの嗜好に基づいて、そ
の注目ユーザの端末に提供する電子ブックのデータを制
御することを特徴とする請求項３６に記載の情報処理装
置。
【請求項３８】前記ダウンロードデータは、画像デー
タまたは音声データであることを特徴とする請求項３０
に記載の情報処理装置。
【請求項３９】注目している注目ユーザが前記端末を
操作することにより指定した画像上の所定の位置におけ
る特徴量と関連する特徴量を有する画像上の位置を指定
したことを表す複数のユーザの入力情報を抽出し、その
入力情報から、画像の特徴量についての前記注目ユーザ
の嗜好を解析する解析手段をさらに備え、前記制御手段は、前記注目ユーザの嗜好に基づいて、そ
の注目ユーザの端末に提供する画像データの画質を制御
することを特徴とする請求項３８に記載の情報処理装
置。
【請求項４０】注目している注目ユーザが前記端末を
操作することにより指定した画像上の位置と関連する画
像上の位置を指定したことを表す複数のユーザの入力情
報を抽出する抽出手段をさらに備え、前記制御手段は、前記抽出手段において抽出された複数
のユーザの入力情報が表す画像上の複数の位置に基づい
て、前記注目ユーザの端末に提供する画像データから所
定の領域を抽出することを特徴とする請求項３８に記載
の情報処理装置。
【請求項４１】端末で受信されて記録されるダウンロ
ードデータを処理する情報処理方法であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶手段に記憶させる記憶ステップと、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、前記端末にダウンロードさせる前記ダウンロー
ドデータを制御する制御ステップとを備えることを特徴
とする情報処理方法。
【請求項４２】端末で受信されて記録されるダウンロ
ードデータを処理する情報処理を、コンピュータに行わ
せるプログラムが記録されている記録媒体であって、複数の端末から送信されてくる各ユーザの入力情報を記
憶手段に記憶させる記憶ステップと、前記記憶手段に記憶された複数のユーザの入力情報に基
づいて、前記端末にダウンロードさせる前記ダウンロー
ドデータを制御する制御ステップとを備えるプログラム
が記録されていることを特徴とする記録媒体。