JP2017506523A

JP2017506523A - 画像表示方法及び装置

Info

Publication number: JP2017506523A
Application number: JP2016525885A
Authority: JP
Inventors: ▲チェン▼ ▲劉▼
Original assignee: ▲華▼▲為▼▲終▼端有限公司
Priority date: 2013-10-24
Filing date: 2013-10-24
Publication date: 2017-03-09
Anticipated expiration: 2033-10-24
Also published as: JP6807744B2; US20160267801A1; US10283005B2; EP3047882A1; EP3047882A4; CN103959805A; WO2015058388A1; CN103959805B

Abstract

本発明は、画像表示方法及び装置を開示し、インターネット通信の分野に関連する。方法は、ソース画像とソース画像に対応するユーザ画像を取得するステップであって、ユーザ画像は、ユーザが前記ソース画像を模倣した後に生成された動画像である、ステップと、ソース画像とユーザ画像を処理するステップと、端末がソース画像とユーザ画像を同時に表示できるように、処理されたソース画像とユーザ画像を端末に送信するステップを含む。装置は、取得モジュール、処理モジュール、及び送信モジュールを含む。本発明において、ユーザがソース画像を模倣するために便利であるように、ユーザがユーザ画像とソース画像との差を視覚的に比較でき、ユーザの学習速度を加速できるように、端末は、ソース画像とユーザ画像を、ユーザに同時に提示する。

Description

本発明は、インターネット通信の分野に関連し、特に、画像表示方法及び装置に関する。

人生の質が向上してきたため、ユーザはヨガやダンスを学ぶなどの余暇におけるいくつかのレクレーション活動に従事し始めている。しかし、専門的なトレーニング施設での学習のために、ユーザは特定の場所に行くために特定の時間を割く必要があり、さらにはトレーニング費用を支払う必要もある。したがって、テレビジョンデバイスを使用することにより、家庭でヨガを学ぶこと又はダンスを学ぶことは、ユーザにとって良い選択となる。

ユーザは、以下の方法において、家庭においてテレビジョンデバイスを使用してヨガを学習又はダンスを学習する：テレビジョンデバイスがヨガ又はダンスの画像を表示し、ユーザは、ヨガやダンスを学習するために、そのテレビジョンデバイスにより表示されたヨガ又はダンス画像に従って、動きの模倣を行う。

本発明の実施において、発明者は、従来技術には少なくとも以下の様な問題点があることに気づいた：ユーザがヨガやダンスを学習するために、テレビジョンデバイスに表示されたヨガ又はダンス画像に従って、動きの模倣を行うとき、ユーザは身体の動作を行っている間に、テレビジョンデバイス上の画像の動きを見るが、ユーザの集中を散らしてしまい、これにより学習速度が低くなるとともにユーザの望ましくない学習効果を引き起こす。

従来技術における問題を解消するために、本発明は、画像表示方法及び装置を提供する。技術的ソリューションは以下のとおりである：

第１の態様によると、本発明は、画像表示方法を提供し、前記方法は、
ソース画像と前記ソース画像に対応するユーザ画像を取得するステップであって、前記ユーザ画像は、前記ユーザが前記ソース画像を模倣した後に生成された動画像である、ステップと、
端末が前記ソース画像と前記ユーザ画像を同時に表示できるように、前記処理されたソース画像とユーザ画像を前記端末へ送信するステップと、
を含む。

第１の態様に関連し、第１の態様の第１の可能な実装様式において、前記ソース画像と前記ユーザ画像を処理する前記ステップは、
前記ソース画像の記述情報と前記ユーザ画像の記述情報を取得するステップと、前記ソース画像の記述情報と前記ユーザ画像の記述情報に従って、前記ユーザ画像と前記ソース画像との差を判定するステップ、又は、
サーバが前記ソース画像と前記ユーザ画像に従って、前記ソース画像の記述情報と前記ユーザ画像の記述情報を生成でき、前記サーバが前記ユーザ画像と前記ソース画像との差を判定できるように、前記ソース画像と前記ユーザ画像をサーバへ送信するステップと、前記サーバにより送信される、前記ソース画像の記述情報、前記ユーザ画像の記述情報、及び前記ユーザ画像と前記ソース画像との差を受信するステップ、
を含む。

第１の態様に関連し、第１の態様の第２の可能な実装様式において、前記ソース画像と前記ユーザ画像を処理する前記ステップは、
前記ユーザ画像の画像サイズと前記ソース画像の画像サイズを同じサイズに設定するステップを含む。

第１の態様の第１の可能な実装様式に関連し、第１の態様の第３の可能な実装様式において、前記端末が前記ソース画像と前記ユーザ画像を同時に表示できるように、前記処理されたソース画像とユーザ画像を端末へ送信する前記ステップは、
前記ソース画像と前記ソース画像の記述情報、及び、前記ユーザ画像と前記ユーザ画像の記述情報を同時に表示でき、前記端末が前記ユーザ画像と前記ソース画像との差を、前記ユーザ画像にマークできるように、前記端末へ、前記ソース画像と前記ソース画像の記述情報、前記ユーザ画像と前記ユーザ画像の記述情報、及び、前記ユーザ画像と前記ソース画像との間の差を送信するステップ、
を含む。

第１の態様に関連し、第１の態様の第４の可能な実装様式において、ソース画像と前記ソース画像に対応するユーザ画像を取得する前記ステップは、
前記ソース画像と、前記ソース画像に対応するタイムスタンプを取得するステップと、
画像取得デバイスにより送信された前記タイムスタンプに対応するユーザ画像を受信するステップと、
を含む。

第２の態様によると、本発明は、画像表示装置を提供し、前記装置は、
画像表示装置であって、前記装置は、
ソース画像と前記ソース画像に対応するユーザ画像を取得するように構成されている取得モジュールであって、前記ユーザ画像は、前記ユーザが前記ソース画像を模倣した後に生成された動画像である、取得モジュールと、
前記ソース画像と前記ユーザ画像を処理するように構成されている処理モジュールと、
端末が前記ソース画像と前記ユーザ画像を同時に表示できるように、前記処理されたソース画像とユーザ画像を前記端末に送信するように構成されている送信モジュールと、
を含む。

第２の態様に関連し、第２の態様の第１の可能な実装様式において、前記処理モジュールは、
前記ソース画像の記述情報と前記ユーザ画像の記述情報を取得するように構成されている第１取得ユニットと、
前記ソース画像の記述情報と前記ユーザ画像の記述情報に従って、前記ユーザ画像と前記ソース画像との差を判定するように構成されている判定ユニット、又は、
サーバが前記ソース画像と前記ユーザ画像に従って、前記ソース画像の記述情報と前記ユーザ画像の記述情報を生成でき、前記サーバが前記ユーザ画像と前記ソース画像との差を判定できるように、前記サーバに前記ソース画像と前記ユーザ画像を送信するように構成されている送信ユニットと、
前記サーバにより送信された、前記ソース画像の記述情報、前記ユーザ画像の記述情報、及び前記ユーザ画像と前記ソース画像との差を受信するように構成されている第１受信ユニットと、
を含む。

第２の態様に関連し、第２の態様の第２の可能な実装様式において、前記処理モジュールは、前記ユーザ画像の画像サイズと前記ソース画像の画像サイズを同じサイズに設定するように構成されている設定ユニット
を含む。

第２の態様の第１の可能な実装様式に関連し、第２の態様の第３の可能な実装様式において、前記送信モジュールは、前記ソース画像と前記ソース画像の記述情報、及び、前記ユーザ画像と前記ユーザ画像の記述情報を同時に表示し、前記端末が、前記ユーザ画像と前記ソース画像との差を、前記ユーザ画像にマークできるように、前記端末に、前記ソース画像と前記ソース画像の記述情報、前記ユーザ画像と前記ユーザ画像の記述情報、及び、前記ユーザ画像と前記ソース画像との間の差、を送信するように構成されている。

第２の態様に関連し、第２の態様の第４の可能な実装様式において、前記取得モジュールは、
ソース画像及び前記ソース画像に対応するタイムスタンプを取得するように構成されている第２取得ユニットと、
前記タイムスタンプに対応するとともに画像取得デバイスにより送信されたユーザ画像を受信するように構成されている第２受信ユニットと、
を含む。

第３の態様によると、本発明は、画像表示装置を提供し、前記装置は、メモリと、プロセッサを含み、前記第１の態様にしたがう画像表示方法を実行するように構成されている。

第３の態様に関連し、第３の態様の第１の可能な実装様式において、前記装置は、セットトップボックスデバイスである。

本発明の実施形態において、セットトップボックスは、ソース画像と、前記ソース画像に対応するユーザ画像とを取得し、前記ソース画像と前記ユーザ画像を処理し、前記処理されたソース画像とユーザ画像を端末へ送信し、前記端末は、前記セットトップボックスにより送信されたソース画像とユーザ画像を受信し、前記ソース画像と前記ユーザ画像とを同時に表示する。端末は、ユーザがソース画像を模倣するために便利であるように、ユーザがユーザ画像とソース画像との差を視覚的に比較でき、ユーザの学習速度を加速できるように、ユーザに、ソース画像とユーザ画像を同時に提示する。

本発明の実施形態における技術的ソリューションをより明確に説明するために、以下で実施形態を説明するために必要な添付の図面について簡単に紹介する。以下の説明における添付の図面は本発明のいくつかの実施形態を示すものにすぎず、それでもなお、当業者が創造的な努力なしにこれらの添付の図面から他の図面を得ることができることは明らかである。

図１は、本発明の実施形態１に係る画像表示方法のフローチャートである。図２は、本発明の実施形態２に係る画像表示方法のフローチャートである。図３は、本発明の実施形態３に係る画像表示方法のフローチャートである。図４は、本発明の実施形態４に係る画像表示装置の構造の概略図である。図５は、本発明の実施形態４に係る装置の処理モジュールの構造の概略図である。図６は、本発明の実施形態４に係る装置の処理モジュールの他の概略図である。図７は、本発明の実施形態４に係る装置の処理モジュールの他の概略図である。図８は、本発明の実施形態４に係る装置の取得モジュールの構造の概略図である。図９は、本発明の実施形態５に係る他の画像表示装置の構造の概略図である。

本発明の目的、技術的ソリューション、及び利点を明確にするために、以下において、添付の図面を参照しながら本発明の実施形態が詳細にさらに説明される。

本発明の実施形態は、ユーザが、運動トレーニングを実行することを助けるために、リビングルームにおけるテレビジョンアプリケーションに適用可能である。

［実施形態１］
本発明のこの実施形態は、画像表示方法を提供する。この実施形態は、例えば、セットトップボックスの機能を備えた携帯電話やタブレットコンピュータなどのセットトップボックスの機能を備えた任意のデバイスにより実行される。本発明のこの実施形態において、セットトップボックスを実行体（execution body）として使用する例を用いて説明が提供される。図１を参照すると、方法は以下を含む。

１０１：セットトップボックスは、ソース画像と、ソース画像に対応するユーザ画像とを取得し、ユーザ画像は、ユーザがソース画像を模倣した後に生成された動画像（movement image）である。

１０２：セットトップボックスは、ソース画像とユーザ画像を処理する。

１０３：セットトップボックスは、端末がソース画像とユーザ画像を同時に表示できるように、処理されたソース画像とユーザ画像を端末に送信する。

本発明のこの実施形態において、セットトップボックスは、ソース画像と、ソース画像に対応するユーザ画像を取得し、ソース画像とユーザ画像を処理し、処理されたソース画像とユーザ画像を端末へ送信し、端末は、セットトップボックスにより送信されたソース画像とユーザ画像を受信し、ソース画像と、ユーザ画像を同時に表示する。ユーザがソース画像を模倣するために便利であるように、ユーザがユーザ画像とソース画像との差を視覚的に比較でき、ユーザの学習速度を加速できるように、端末は、ユーザに、ソース画像とユーザ画像を提示する。

［実施形態２］
本発明のこの実施形態は、画像表示方法を提供する。図２を参照すると、方法は以下を含む。

２０１：セットトップボックスは、ソース画像と、ソース画像に対応するユーザ画像とを取得する。

ソース画像は、デジタル画像編集及び圧縮アプリケーションプログラムによりアクセスされるオリジナル画像をさし、ソース画像は、ビデオテープ、レーザディスク（登録商標）、デジタル画像ファイル、等であり得る。ユーザ画像は、ユーザがソース画像を模倣した後に生成された動画像である。

セットトップボックスによる、ソース画像とソース画像に対応するユーザ画像を取得するステップの動作は、
セットトップボックスにより、デジタルビデオブロードキャストサーバ又はＩＰ（インターネットプロトコル, Internet Protocol）ネットワークサーバにより送信される画像ストリームを受信するステップと、ソース画像を得るために、格納されている解読パスワードにしたがって、画像ストリームに解読処理を実施するステップと、セットトップボックスにより、ソース画像に対応するタイムスタンプを取得するステップと、タイムスタンプに従って、タイムスタンプに対応するとともに画像取得デバイスにより送信された、ユーザ画像を受信するステップ、
であり得る。

セットトップボックスが、デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバにより送信された画像ストリームを受信する前又は後に、デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバは、画像ストリームの解読パスワードをセットトップボックスに送信し、セットトップボックスは、ビデオブロードキャストサーバ又はＩＰネットワークサーバにより送信された解読パスワードを受信し、解読パスワードを格納することに留意すべきである。

さらに、セットトップボックスがソース画像を取得した後、セットトップボックスは、ソース画像を端末に送信する。端末は、セットトップボックスにより送信されたソース画像を受信し、ソース画像を表示する。ユーザは、端末に表示されているソース画像に従ってソース画像を模倣し得る。画像取得デバイスは、ビデオ撮影やスキャニングによりユーザ画像を生成する。

本発明のこの実施形態において、ユーザ画像は、ユーザがソース画像を模倣した後に生成された動画像である。端末がソース画像を表示した後、ユーザは端末により表示されているソース画像に従って、画像における動作を模倣する。画像取得デバイスは、ビデオ撮影やスキャニングによりユーザ画像を生成する。したがって、ユーザ画像とソース画像は完全には同期しない。ユーザ画像とソース画像の間には遅延が通常存在する。画像取得デバイスにより送信されるとともにタイムスタンプに対応するユーザ画像を、タイムスタンプに従ってセットトップボックスにより受信するステップの動作は、
ソース画像に対応するタイムスタンプに従ってセットトップボックスにより、タイムスタンプに対応するとともにプリセット時間後に生成されるユーザ画像を受信するステップであり得る。

プリセット時間は、ユーザがソース画像に反応し模倣するための時間である。プリセット時間は、ユーザの要求に応じて設定および変更することができる。本発明のこの実施形態において、プリセット時間に特定の制限は設定されていない。

画像取得デバイスは、画像取得機能を有している任意のデバイスである。画像取得デバイスは、カメラ、マルチチャネルカメラ等であってよい。本発明のこの実施形態において、画像取得デバイスが一例としてのみ提供され、画像取得デバイスに制限は設定されていない。

さらに、ソース画像とユーザ画像を取得したのち、セットトップボックスは、ユーザ画像の画像サイズとソース画像の画像サイズを同じサイズに設定する。

セットトップボックスにより、ユーザ画像の画像サイズとソース画像の画像サイズを同じサイズに設定するステップの動作は、
ソース画像の画像サイズに従ってセットトップボックスにより、ユーザ画像上でズームインまたはズームアウト処理を実施して、ユーザ画像の画像サイズとソース画像の画像サイズを同じサイズに設定するステップ
であり得る。

ユーザ画像の画像サイズがソース画像の画像サイズより大きい場合には、ズームアウト処理が比率に応じてユーザ画像に実施され、ユーザ画像の画像サイズがソース画像の画像サイズより大きい場合には、ズームイン処理が特定の比率に応じてユーザ画像に実施されることに留意すべきである。このようにして、ユーザ画像の画像サイズとソース画像の画像サイズは同じ大きさとなる。

２０２：セットトップボックスは、ソース画像の記述情報と、ユーザ画像の記述情報を取得する。

セットトップボックスにより、ソース画像の記述情報と、ユーザ画像の記述情報を取得するステップの動作は、
セットトップボックスにより、ソース画像及び認識アルゴリズムに従って、ソース画像の記述情報を生成するステップと、ユーザ画像及び認識アルゴリズムに従って、ユーザ画像の記述情報を生成するステップ、又は、
セットトップボックスにより、受信した画像ストリームからソース画像の記述情報を取得するステップと、ユーザ画像及び認識アルゴリズムに従って、ユーザ画像の記述情報を生成するステップ、又は、
セットトップボックスがサーバへ、取得されたソース画像と、取得されたソース画像に対応するユーザ画像を送信するステップと、セットトップボックスにより送信されたソース画像とソース画像に対応するユーザ画像をサーバにより受信するステップと、ソース画像及び認識アルゴリズムに従って、ソース画像の記述情報を生成するステップと、ユーザ画像及び認識アルゴリズムに従って、ユーザ画像の記述情報を生成するステップと、サーバがセットトップボックスへ、ソース画像の記述情報と、ユーザ画像の記述情報を送信するステップと、サーバにより送信されたソース画像の記述情報と、ユーザ画像の記述情報をセットトップボックスにより受信するステップ、
であり得る。

セットトップボックスが、受信した画像ストリームからソース画像の記述情報を取得するステップの動作は、以下のようになり得る：
デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバにより送信された画像ストリームは、ソース画像の記述情報を含んでおり、セットトップボックスは、デジタルビデオブロードキャスト又はＩＰネットワークにより送信された画像ストリームを受信するとともに、格納されている解読パスワードに従って、画像ストリームに解読処理を実施し、ソース画像と、ソース画像の記述情報を取得する。

認識アルゴリズムは、画像における動作を認識するために使用できる、例えば、画像における動作を認識するために人体画像モデルを確立する任意のアルゴリズムであることに留意すべきである。本発明のこの実施形態において、認識アルゴリズムに特定の制限は設定されていない。

画像における動作を認識するために人体画像モデルを設定するための方法は、
人体の主要部分を追跡する前に、３次元人体画像モデルを確立するステップ、例えば、頭、腕、肩、及び足などの主要部分を追跡するためにモデルを確立するステップと、重要な動作情報、例えば、頭、腕、肩、及び足などの主要部分の運動の幅、角度及び方向の変化、を座標として供給される画像時間とともに追跡するステップ、
であり得る。

ソース画像において複数の個々の画像があり、人体画像モデルが確立されると、セットトップボックスは人体画像モデルとして任意の人体画像を選択し得る。好適には、セットトップボックスは、画像の中央又は画像の主要部分を占めている人体画像を人体画像モデルとして選択し得、又はユーザが人体画像モデルを選択することを可能にするように焦点を提示（prompt a focus）し得る。

例えば、セットトップボックスは、ソース画像に従うとともに座標として提供される画像時間の人体画像モデルを使用することにより、重要な動作情報、例えば、ソース画像における頭、腕、肩、及び足などの主要部分の運動の幅、角度及び方向の変化を追跡する。タイムスタンプにおいて、セットトップボックスにより取得されたソース画像の記述情報は以下のとおりである：左腕が水平線と４５度の角度を形成し、右腕は垂直下方向である。同じタイムスタンプにおいて、セットトップボックスにより取得されたユーザ画像の記述情報は以下の通りである：左腕が水平線と３０度の角度を形成し、右腕は垂直下方向である。

２０３：セットトップボックスは、ソース画像の記述情報とユーザ画像の記述情報に従って、ユーザ画像とソース画像との差を判定する。

具体的には、セットトップボックスは、ソース画像の記述情報に従って、人体の主要部分と、ソース画像内にある主要部分に対応する動作を取得する。セットトップボックスは、ユーザ画像の記述情報に従って、ユーザの主要部分及び主要部分に対応する動作を取得し、ソース画像における主要部分に対応する動作と、ユーザ画像における主要部分に対応する動作とを比較し、ユーザ画像とソース画像との差を判定する。

例えば、ソース画像の記述情報は以下のとおりである：左腕が水平線と４５度の角度を形成し、右腕は垂直下方向である。ユーザ画像の記述情報は以下のとおりである：左腕が水平線と３０度の角度を形成し、右腕は垂直下方向である。セットトップボックスは、ソース画像の記述情報に従ってソース画像において以下を取得する：人体の主要部分は、左腕及び右腕であり、左腕の動作は、水平線と４５度の角度を形成し、右腕の動作は、垂直下方向である。セットトップボックスは、ユーザ画像の記述情報に従って、ユーザ画像において以下を取得する：人体の主要部分は、左腕及び右腕であり、左腕の動作は、水平線と３０度の角度を形成し、右腕の動作は、垂直下方向である。セットトップボックスは、ソース画像における主要部分に対応する動作：左腕は水平線と４５度の角度を形成し、右腕は垂直下方向である、と、ユーザ画像における主要部分に対応する動作：左腕は、水平線と３０度の角度を形成し、右腕は垂直下方向である、とを比較する。セットトップボックスは、ユーザ画像とソース画像との差は、左腕と水平線の間が形成する角度が異なっていることである、と判定する。

２０４：セットトップボックスは、端末へ、ソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を送信する。

端末は、表示機能を備えた任意の端末であってよい。例えば、端末は、テレビジョンデバイス、携帯電話端末、パーソナルコンピュータ（personal computer, PC）端末等であってよい。本発明のこの実施形態において、端末に、特定の制限は設定されていない。

２０５：端末は、セットトップボックスにより送信された、ソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を受信する。

端末は、セットトップボックスにより送信されたソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を受信し、その後、ステップ２０６の実施を開始する。

２０６：端末は、ソース画像とソース画像の記述情報、及び、ユーザ画像とユーザ画像の記述情報を同時に表示し、ユーザ画像とソース画像との差を、ユーザ画像にマークする。

具体的には、同一のディスプレイインターフェース上で、端末がソース画像とユーザ画像を同時に表示し、ソース画像の記述情報とユーザ画像の記述情報を表示し、ユーザ画像とソース画像との差を、ユーザ画像にマークする。

端末は、ソース画像におけるユーザ画像とソース画像との差もマークし得るとともに、ユーザ画像とソース画像との差の記述情報を端末上に表示する。

例えば、以下が端末上に表示される：ソース画像と、ソース画像の記述情報：左腕は水平線と４５度の角度を形成し、右腕は垂直下方向である、及びユーザ画像と、ユーザ画像の記述情報：左腕は水平線と３０度の角度を形成し、右腕は垂直下方向である。ユーザ画像とソース画像との差は、端末により表示されるユーザ画像においてマークされる。ユーザ画像とソース画像との差に関する記述情報が、表示される：左腕と水平線の間で形成される角度が異なっている。

本発明のこの実施形態において、セットトップボックスは、ソース画像と、ソース画像に対応するユーザ画像を取得し、ソース画像とユーザ画像を処理し、処理されたソース画像とユーザ画像を端末へ送信し、端末は、セットトップボックスにより送信されたソース画像とユーザ画像を受信し、ソース画像と、ユーザ画像を同時に表示する。端末は、ユーザがソース画像を模倣するために便利であるように、ユーザがユーザ画像とソース画像との差を視覚的に比較でき、ユーザの学習速度を加速できるように、ソース画像とユーザ画像をユーザに同時に提示する。

［実施形態３］
本発明のこの実施形態は、画像表示方法を提供する。図３を参照すると、方法は以下を含む：

３０１：セットトップボックスは、ソース画像と、ソース画像に対応するユーザ画像とを取得する。

セットトップボックスによる、ソース画像とソース画像に対応するユーザ画像を取得するステップの動作は、
セットトップボックスにより、デジタルビデオブロードキャストサーバ又はＩＰ（インターネットプロトコル, Internet Protocol）ネットワークサーバにより送信される画像ストリームを受信するステップと、ソース画像を得るために、格納されている解読パスワードにしたがって、画像ストリームに解読処理を実施するステップと、セットトップボックスにより、ソース画像に対応するタイムスタンプを取得するステップと、タイムスタンプに従って、タイムスタンプに対応するとともに、画像取得デバイスにより送信された、ユーザ画像を受信するステップ、
であり得る。

本発明のこの実施形態において、ユーザ画像は、ユーザがソース画像を模倣した後に生成された動画像である。端末がソース画像を表示した後、ユーザは端末により表示されているソース画像に従って、画像における動作を模倣する。画像取得デバイスは、ビデオ撮影やスキャニングによりユーザ画像を生成する。したがって、ユーザ画像とソース画像は完全には同期しない。ユーザ画像とソース画像の間には特定の遅延が通常存在する。画像取得デバイスにより送信されるとともにタイムスタンプに対応するユーザ画像を、タイムスタンプに従ってセットトップボックスにより受信するステップの動作は、
ソース画像に対応するタイムスタンプに従ってセットトップボックスにより、タイムスタンプに対応するとともにプリセット時間後に生成されるユーザ画像を受信するステップ、
であり得る。

画像取得デバイスは、画像取得機能を有している任意のデバイスである。画像取得デバイスは、カメラ、マルチチャネルカメラ等であってよい。本発明のこの実施形態において、画像取得デバイスが一例としてのみ提供され、画像取得デバイスに制限は設定されない。

セットトップボックスにより、ユーザ画像の画像サイズとソース画像の画像サイズを同じサイズに設定するステップの動作は、
ソース画像の画像サイズに従ってセットトップボックスにより、ユーザ画像上でズームインまたはズームアウト処理を実施して、ユーザ画像の画像サイズとソース画像の画像サイズを同じサイズに設定するステップ、
であり得る。

ユーザ画像の画像サイズがソース画像の画像サイズより大きい場合には、ズームアウト処理が特定の比率に応じてユーザ画像に実施され、ユーザ画像の画像サイズがソース画像の画像サイズより大きい場合には、ズームイン処理が特定の比率に応じてユーザ画像に実施されることに留意すべきである。このようにして、ユーザ画像の画像サイズとソース画像の画像サイズは同じ大きさとなる。

３０２：セットトップボックスは、ソース画像と、ユーザ画像をサーバへ送信する。

サーバは、画像処理機能を備えた任意のサーバである。本発明のこの実施形態において、サーバは特定の制限は設定されていない。

サーバがソース画像及びユーザ画像の処理を実施できるように、セットトップボックスは、ソース画像と、ユーザ画像をサーバへ送信し、したがって、セットトップボックスの負担を軽減することが可能であるとともに、セットトップボックス上でブレークダウンが生じる状況を回避することが可能である。

３０３：サーバは、セットトップボックスにより送信された、ソース画像とユーザ画像を受信する。

３０４：サーバは、ソース画像とユーザ画像に従って、ソース画像の記述情報とユーザ画像の記述情報を生成する。

具体的には、サーバは、ソース画像及び認識アルゴリズムに従って、ソース画像の記述情報を生成し、ユーザ画像及び認識アルゴリズムに従って、ユーザ画像の記述情報を生成する。

画像における動作を認識するために人体画像モデルを設定するための方法は、
人体の主要部分を追跡する前に、３次元人体画像モデルを確立するステップ、例えば、頭、腕、肩、及び足などの主要部分を追跡するためにモデルを確立するステップと、重要な動作情報、例えば、頭、腕、肩、及び足などの主要部分の運動の幅、角度及び方向の変化、を座標として供給される画像時間とともに追跡するステップ、であり得る。

ソース画像において複数の個々の画像があり、人体画像モデルが確立されると、サーバは人体画像モデルとして任意の人体画像を選択し得る。好適には、サーバは、画像の中央又は画像の主要部分を占めている人体画像を人体画像モデルとして選択し得、又はユーザが人体画像モデルを選択することを可能にするように焦点を提示し得る。

３０５：サーバは、ソース画像の記述情報とユーザ画像の記述情報に従って、ユーザ画像とソース画像との差を判定する。

具体的には、サーバは、ソース画像の記述情報に従って、ソース画像内にある人体の主要部分及び主要部分に対応する動作を取得する。サーバは、ユーザ画像の記述情報に従って、ユーザの主要部分及び主要部分に対応する動作を取得し、ソース画像における主要部分に対応する動作と、ユーザ画像における主要部分に対応する動作とを比較し、ユーザ画像とソース画像との差を判定する。

３０６：サーバは、セットトップボックスへ、ソース画像の記述情報、ユーザ画像の記述情報、及びユーザ画像とソース画像との差を送信する。

３０７：セットトップボックスは、サーバにより送信された、ソース画像の記述情報、ユーザ画像の記述情報、及びユーザ画像とソース画像との差を受信する。

３０８：セットトップボックスは、端末へ、ソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を送信する。

３０９：端末は、セットトップボックスにより送信された、ソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を受信する。

端末は、セットトップボックスにより送信された、ソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を受信し、その後、ステップ３１０の実施を開始する。

３１０：端末は、ソース画像とソース画像の記述情報、及び、ユーザ画像とユーザ画像の記述情報を同時に表示し、ユーザ画像とソース画像との差を、ユーザ画像にマークする。

本発明のこの実施形態において、セットトップボックスは、ソース画像と、ソース画像に対応するユーザ画像を取得し、ソース画像とユーザ画像を処理し、処理されたソース画像とユーザ画像を端末へ送信し、端末は、セットトップボックスにより送信されたソース画像とユーザ画像を受信し、ソース画像と、ユーザ画像を同時に表示する。端末は、ユーザがソース画像を模倣するために便利であるように、ユーザがユーザ画像とソース画像との差を視覚的に比較でき、ユーザの学習速度を加速できるように、ソース画像とユーザ画像をユーザに同時に提示する。加えて、セットトップボックスは、ソース画像とユーザ画像をサーバに送信し、サーバは、ソース画像の記述情報とユーザ画像の記述情報を生成し、サーバは、ユーザ画像とソース画像との差を判定し、したがって、セットトップボックスの付加が軽減される。

［実施形態４］
本発明のこの実施形態は、画像表示装置を提供する。図４を参照すると、装置は：
画像とソース画像に対応するユーザ画像を取得するように構成されている取得モジュールであって、ユーザ画像は、ユーザがソース画像を模倣した後に生成された動画像である、取得モジュール４０１と、
ソース画像とユーザ画像を処理するように構成されている処理モジュール４０２と、
端末がソース画像とユーザ画像を同時に表示できるように、処理されたソース画像とユーザ画像を端末に送信するように構成されている送信モジュール４０３と、
を含む。

さらに、図５を参照すると、処理モジュール４０２は、
ソース画像の記述情報とユーザ画像の記述情報を取得するように構成されている第１取得ユニット４０２１と、
ソース画像の記述情報とユーザ画像の記述情報に従って、ユーザ画像とソース画像との差を判定するように構成されている判定ユニット４０２２と、
を含む。

あるいは、図６を参照すると、処理モジュール４０２は、
サーバがソース画像とユーザ画像に従ってソース画像の記述情報とユーザ画像の記述情報を生成し、サーバがユーザ画像とソース画像との差を判定できるように、ソース画像とユーザ画像をサーバに送信するように構成されている送信ユニット４０２３と、
サーバにより送信された、ソース画像の記述情報、ユーザ画像の記述情報、及びユーザ画像とソース画像との差を受信するように構成されている第１受信ユニット４０２４と、
を含む。

さらに、図７を参照すると、処理モジュール４０２は、
ユーザ画像の画像サイズとソース画像の画像サイズを同じサイズに設定するように構成されている設定ユニット４０２５
を含む。

さらに、送信モジュール４０３は、端末が、ソース画像とソース画像の記述情報、及び、ユーザ画像とユーザ画像の記述情報を同時に表示し、端末がユーザ画像とソース画像との差を、ユーザ画像にマークできるように、端末に、ソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を送信するように構成されている。

さらに、図８を参照すると、取得モジュール４０１は、
ソース画像及びソース画像に対応するタイムスタンプを取得するように構成されている第２取得ユニット４０１１と、
タイムスタンプに対応するとともに画像取得デバイスにより送信されたユーザ画像を受信するように構成されている第２受信ユニット４０１２と、
を含む。

［実施形態５］
本発明のこの実施形態は、画像表示装置を提供する。図９を参照すると、装置は、メモリ５０１と、プロセッサ５０２と、を含み、以下の画像表示方法を実行するように構成されている:
ソース画像とソース画像に対応するユーザ画像を取得するステップであって、ユーザ画像は、ユーザがソース画像を模倣した後に生成された動画像である、ステップと、
ソース画像とユーザ画像を処理するステップと、
端末がソース画像とユーザ画像を同時に表示できるように、処理されたソース画像とユーザ画像を端末に送信するステップ。

さらに、ソース画像とユーザ画像の処理は、
ソース画像の記述情報とユーザ画像の記述情報を取得するステップと、ソース画像の記述情報とユーザ画像の記述情報に従って、ユーザ画像とソース画像との差を判定するステップ、又は、
サーバがソース画像とユーザ画像に従ってソース画像の記述情報とユーザ画像の記述情報を生成するとともにサーバがユーザ画像とソース画像との差を判定できるように、ソース画像とユーザ画像をサーバに送信するステップと、サーバにより送信された、ソース画像の記述情報、ユーザ画像の記述情報、及びユーザ画像とソース画像との差を受信するステップと、
を含む。

さらに、ソース画像とユーザ画像の処理は、
ユーザ画像の画像サイズとソース画像の画像サイズを同じサイズに設定するステップ
を含む。

さらに、端末がソース画像とユーザ画像を同時に表示できるように、処理されたソース画像とユーザ画像を端末に送信するステップは、
端末がソース画像とソース画像の記述情報、及び、ユーザ画像とユーザ画像の記述情報を同時に表示し、端末がユーザ画像とソース画像との差を、ユーザ画像にマークできるように、端末に、ソース画像とソース画像の記述情報、ユーザ画像とユーザ画像の記述情報、及び、ユーザ画像とソース画像との間の差を送信するステップと、
を含む。

さらに、ソース画像とソース画像に対応するユーザ画像を取得するステップは、
ソース画像と、ソース画像に対応するタイムスタンプを取得するステップと、
タイムスタンプに対応するとともに画像取得デバイスにより送信されたユーザ画像を受信するステップと、
を含む。

さらに、装置は、セットトップボックスデバイスである。

実施形態のステップのすべて又はいくつかは、ハードウェア、又は関連するハードウェアに指示するプログラムにより実装され得ることは、当業者であれば理解し得る。プログラムは、コンピュータ可読記録媒体に格納され得る。記録媒体は、リードオンリーメモリ、磁気ディスク、光学ディスク、などを含み得る。

上記の説明は本発明の例示的な実施形態にすぎないが、本発明を限定するものではない。本発明の精神と原理を逸脱することなく当業者によって行われるいかなる変形、等価な置換、又は改良も、本発明の保護範囲内に入るものとする。

４０１取得モジュール
４０１１第２取得ユニット
４０１２第２受信ユニット
４０２処理モジュール
４０２１第１取得ユニット
４０２２判定ユニット
４０２３送信ユニット
４０２４第１受信ユニット
４０２５設定ユニット
４０３送信モジュール
５０１メモリ
５０２プロセッサ

本発明の実施において、従来技術には少なくとも以下の様な問題点がある：ユーザがヨガやダンスを学習するために、テレビジョンデバイスに表示されたヨガ又はダンス画像に従って、動きの模倣を行うとき、ユーザは身体の動作を行っている間に、テレビジョンデバイス上の画像の動きを見るが、ユーザの集中を散らしてしまい、これにより学習速度が低くなるとともにユーザの望ましくない学習効果を引き起こす。

セットトップボックスが、デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバにより送信された画像ストリームを受信する前又は後に、デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバは、画像ストリームの解読パスワードをセットトップボックスに送信し、セットトップボックスは、デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバにより送信された解読パスワードを受信し、解読パスワードを格納することに留意すべきである。

ユーザ画像の画像サイズがソース画像の画像サイズより大きい場合には、ズームアウト処理が比率に応じてユーザ画像に実施され、ユーザ画像の画像サイズがソース画像の画像サイズより小さい場合には、ズームイン処理が特定の比率に応じてユーザ画像に実施されることに留意すべきである。このようにして、ユーザ画像の画像サイズとソース画像の画像サイズは同じ大きさとなる。

セットトップボックスが、受信した画像ストリームからソース画像の記述情報を取得するステップの動作は、以下のようになり得る：
デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバにより送信された画像ストリームは、ソース画像の記述情報を含んでおり、セットトップボックスは、デジタルビデオブロードキャストサーバ又はＩＰネットワークサーバにより送信された画像ストリームを受信するとともに、格納されている解読パスワードに従って、画像ストリームに解読処理を実施し、ソース画像と、ソース画像の記述情報を取得する。

ユーザ画像の画像サイズがソース画像の画像サイズより大きい場合には、ズームアウト処理が特定の比率に応じてユーザ画像に実施され、ユーザ画像の画像サイズがソース画像の画像サイズより小さい場合には、ズームイン処理が特定の比率に応じてユーザ画像に実施されることに留意すべきである。このようにして、ユーザ画像の画像サイズとソース画像の画像サイズは同じ大きさとなる。

上記の説明は本発明の例示的な実施形態にすぎないが、本発明を限定するものではない。本発明の原理を逸脱することなく当業者によって行われるいかなる変形、等価な置換、又は改良も、本発明の保護範囲内に入るものとする。

Claims

画像表示方法であって、前記方法は、
ソース画像と前記ソース画像に対応するユーザ画像を取得するステップであって、前記ユーザ画像は、前記ユーザが前記ソース画像を模倣した後に生成された動画像である、ステップと、
前記ソース画像と前記ユーザ画像を処理するステップと、
端末が前記ソース画像と前記ユーザ画像を同時に表示できるように、前記処理されたソース画像とユーザ画像を前記端末へ送信するステップと、
を具備することを特徴とする画像表示方法。
前記ソース画像と前記ユーザ画像を処理する前記ステップは、
前記ソース画像の記述情報と前記ユーザ画像の記述情報を取得するステップと、前記ソース画像の記述情報と前記ユーザ画像の記述情報に従って、前記ユーザ画像と前記ソース画像との差を判定するステップ、又は、
サーバが前記ソース画像と前記ユーザ画像に従って、前記ソース画像の記述情報と前記ユーザ画像の記述情報を生成でき、前記サーバが前記ユーザ画像と前記ソース画像との差を判定できるように、前記ソース画像と前記ユーザ画像をサーバへ送信するステップと、前記サーバにより送信される、前記ソース画像の記述情報、前記ユーザ画像の記述情報、及び前記ユーザ画像と前記ソース画像との差を受信するステップ、
を具備することを特徴とする請求項１に記載の方法。
前記ソース画像と前記ユーザ画像を処理する前記ステップは、
前記ユーザ画像の画像サイズと前記ソース画像の画像サイズを同じサイズに設定するステップ、
を具備することを特徴とする請求項１に記載の方法。
前記端末が前記ソース画像と前記ユーザ画像を同時に表示できるように、前記処理されたソース画像とユーザ画像を端末へ送信する前記ステップは、
前記ソース画像と前記ソース画像の記述情報、及び、前記ユーザ画像と前記ユーザ画像の記述情報を同時に表示でき、前記端末が前記ユーザ画像と前記ソース画像との差を、前記ユーザ画像にマークできるように、前記端末へ、前記ソース画像と前記ソース画像の記述情報、前記ユーザ画像と前記ユーザ画像の記述情報、及び、前記ユーザ画像と前記ソース画像との間の差を送信するステップ、
を具備することを特徴とする請求項２に記載の方法。
ソース画像と前記ソース画像に対応するユーザ画像を取得する前記ステップは、
前記ソース画像と、前記ソース画像に対応するタイムスタンプを取得するステップと、
画像取得デバイスにより送信された前記タイムスタンプに対応するユーザ画像を受信するステップと、
を具備することを特徴とする請求項１に記載の方法。
画像表示装置であって、前記装置は、
ソース画像と前記ソース画像に対応するユーザ画像を取得するように構成されている取得モジュールであって、前記ユーザ画像は、前記ユーザが前記ソース画像を模倣した後に生成された動画像である、取得モジュールと、
前記ソース画像と前記ユーザ画像を処理するように構成されている処理モジュールと、
端末が前記ソース画像と前記ユーザ画像を同時に表示できるように、前記処理されたソース画像とユーザ画像を前記端末に送信するように構成されている送信モジュールと、
を具備することを特徴とする画像表示装置。
前記処理モジュールは、
前記ソース画像の記述情報と前記ユーザ画像の記述情報を取得するように構成されている第１取得ユニットと、
前記ソース画像の記述情報と前記ユーザ画像の記述情報に従って、前記ユーザ画像と前記ソース画像との差を判定するように構成されている判定ユニット、又は、
サーバが前記ソース画像と前記ユーザ画像に従って、前記ソース画像の記述情報と前記ユーザ画像の記述情報を生成でき、前記サーバが前記ユーザ画像と前記ソース画像との差を判定できるように、前記サーバに前記ソース画像と前記ユーザ画像を送信するように構成されている送信ユニットと、
前記サーバにより送信された、前記ソース画像の記述情報、前記ユーザ画像の記述情報、及び前記ユーザ画像と前記ソース画像との差を受信するように構成されている第１受信ユニットと、
を具備することを特徴とする請求項６に記載の装置。
前記処理モジュールは、
前記ユーザ画像の画像サイズと前記ソース画像の画像サイズを同じサイズに設定するように構成されている設定ユニットを具備することを特徴とする請求項６に記載の装置。
前記送信モジュールは、前記ソース画像と前記ソース画像の記述情報、及び、前記ユーザ画像と前記ユーザ画像の記述情報を同時に表示し、前記端末が、前記ユーザ画像と前記ソース画像との差を、前記ユーザ画像にマークできるように、前記端末に、前記ソース画像と前記ソース画像の記述情報、前記ユーザ画像と前記ユーザ画像の記述情報、及び、前記ユーザ画像と前記ソース画像との間の差、を送信するように構成されていることを特徴とする請求項７に記載の装置。
前記取得モジュールは、
ソース画像及び前記ソース画像に対応するタイムスタンプを取得するように構成されている第２取得ユニットと、
前記タイムスタンプに対応するとともに画像取得デバイスにより送信されたユーザ画像を受信するように構成されている第２受信ユニットと、
を具備することを特徴とする請求項６に記載の装置。
画像表示装置であって、
前記装置は、メモリと、プロセッサを具備し、請求項１から５のいずれか一項にしたがう画像表示方法を実行するように構成されていることを特徴とする画像表示装置。
前記装置は、セットトップボックスデバイスであることを特徴とする請求項１１に記載の装置。