JP2002216148A - Image display controller, image display control method and program to make computer execute the same method - Google Patents

Image display controller, image display control method and program to make computer execute the same method

Info

Publication number
JP2002216148A
JP2002216148A JP2001005753A JP2001005753A JP2002216148A JP 2002216148 A JP2002216148 A JP 2002216148A JP 2001005753 A JP2001005753 A JP 2001005753A JP 2001005753 A JP2001005753 A JP 2001005753A JP 2002216148 A JP2002216148 A JP 2002216148A
Authority
JP
Japan
Prior art keywords
image
character
feature amount
unit
display control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001005753A
Other languages
Japanese (ja)
Inventor
Takaaki Sakaguchi
隆明 坂口
Masahiro Takeda
昌弘 竹田
Yasushi Kage
裕史 鹿毛
Kenichi Tanaka
健一 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2001005753A priority Critical patent/JP2002216148A/en
Publication of JP2002216148A publication Critical patent/JP2002216148A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To more attractively and automatically display and control an action of a character. SOLUTION: This image display controller is provided with an image acquiring part 1 to acquire an image, a feature extracting part 2 to extract features at least of hue contrast of the image, color components of the image and shape of a specifying object in the image from the image acquired by the image acquiring part 1, a data base 3 at least to hold character attribute data 3a and action pattern data 3b of the character, a character processing part 4 to change the character attribute data 3a based on the features extracted by the feature extracting part 2, a decide the action of the character based on the features and the character attribute data 3a to acquire the action pattern data 3b corresponding to the decided action and to perform an image processing of the character, and a video display part 5 to display the character to which the image processing is performed by the character processing part 4.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、ゲーム装置など
の表示部に表示されるキャラクタ画像などの画像に対す
る表示制御処理を自動かつ適切に行うことができる画像
表示制御装置、画像表示制御方法およびその方法をコン
ピュータに実行させるプログラムに関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image display control device, an image display control method, and an image display control method capable of automatically and appropriately performing a display control process on an image such as a character image displayed on a display unit of a game device or the like. The present invention relates to a program for causing a computer to execute the method.

【0002】[0002]

【従来の技術】従来から、キャラクタを育成するゲーム
装置などでは、入力ボタンなどの押下によるコマンド入
力や、呼びかけなどの音声入力によって、キャラクタを
育成し、この育成されたキャラクタを表示出力するよう
にしていた。
2. Description of the Related Art Conventionally, in a game device for raising a character, a character is raised by a command input by pressing an input button or a voice input such as a call, and the raised character is displayed and output. I was

【0003】一般的にキャラクタを取り扱うゲーム装置
においても、コマンド入力という操作を介してキャラク
タに対する指示を行い、表示処理を行うようにしていた
(特開平6−327835号公報参照)。
In general, a game apparatus that handles a character also instructs the character through a command input operation and performs a display process (see Japanese Patent Application Laid-Open No. Hei 6-327835).

【0004】ここで、たとえば特開2000−1058
40号公報には、取り込んだ画像の形状および動きを解
析し、この画像とシンボルとの対応関係を記録したデー
タベースをもとに、この画像の形状および動きを、シン
ボルの形状および動きに対応させ、複雑な人間の表情
を、シンボルの強調された表情に変換する画像処理方法
が記載されている。
Here, for example, Japanese Patent Application Laid-Open No. 2000-1058
No. 40 discloses an analysis of the shape and movement of a captured image, and associating the shape and movement of this image with the shape and movement of a symbol based on a database that records the correspondence between the image and the symbol. Describes an image processing method for converting a complex human expression into a symbol-emphasized expression.

【0005】[0005]

【発明が解決しようとする課題】しかしながら、上述し
た従来のキャラクタを取り扱う装置において、キャラク
タとユーザとの間のインタラクションは、コマンドや音
声による入力のみに限定されており、操作に手間がかか
り、ユーザにかかる手間が大きいという問題点があっ
た。
However, in the above-described conventional device for handling a character, the interaction between the character and the user is limited to only input by a command or a voice, and the operation is troublesome. Has a problem that it takes much time.

【0006】一方、上述した特開2000―10584
0号公報に記載された画像処理方法では、画像を取り込
んで、複雑な人間の表情を、シンボルの強調された表情
に変換するようにしているが、画像の形状および動きの
みによってシンボルが強調された表情に変換するのみで
あって、キャラクタの育成などにはさらに多様な情報が
必要であり、魅力的なキャラクタの動作を表示制御する
には、満足できる程度のものではないという問題点があ
った。
On the other hand, Japanese Patent Laid-Open No. 2000-10584 mentioned above
According to the image processing method described in Japanese Patent Application Publication No. 0-204, an image is fetched and a complicated human expression is converted into a symbol-enhanced expression, but the symbol is emphasized only by the shape and movement of the image. However, there is a problem that it is not enough to convert the attractive facial expressions and to control the display of attractive character movements. Was.

【0007】この発明は上記に鑑みてなされたもので、
一層、魅力的かつ自動的にキャラクタの動作を表示制御
することができる画像表示制御装置、画像表示制御方法
およびその方法をコンピュータに実行させるプログラム
を得ることを目的とする。
[0007] The present invention has been made in view of the above,
It is still another object of the present invention to obtain an image display control device, an image display control method, and a program for causing a computer to execute the method, which can more attractively and automatically control the display of the movement of a character.

【0008】[0008]

【課題を解決するための手段】上記目的を達成するた
め、この発明にかかる画像表示制御装置は、画像を取得
する画像取得手段と、前記画像取得手段によって取得さ
れた画像から、少なくとも該画像の明暗、該画像の色成
分および該画像内の特定対象の形状の特徴量を抽出する
特徴量抽出手段と、所定のキャラクタの行動パターン情
報を少なくとも保持するデータベースと、前記特徴量抽
出手段が抽出した特徴量および前記所定のキャラクタの
属性情報をもとに前記所定のキャラクタの行動を決定
し、該決定した行動に対応する前記行動パターン情報を
取得して前記所定のキャラクタの画像処理を行うキャラ
クタ処理手段と、前記キャラクタ処理手段によって画像
処理された前記所定のキャラクタの画像表示を行う画像
表示手段とを備えたことを特徴とする。
In order to achieve the above object, an image display control device according to the present invention comprises: an image acquiring means for acquiring an image; and at least an image acquired by the image acquiring means. A feature amount extracting unit for extracting feature amounts of light and dark, a color component of the image, and a shape of a specific target in the image; a database holding at least action pattern information of a predetermined character; and the feature amount extracting unit. Character processing for determining an action of the predetermined character based on a characteristic amount and attribute information of the predetermined character, acquiring the action pattern information corresponding to the determined action, and performing image processing of the predetermined character Means for displaying an image of the predetermined character image-processed by the character processing means. The features.

【0009】この発明によれば、画像取得手段が、画像
を取得し、特徴量抽出手段が、前記画像取得手段によっ
て取得された画像から、少なくとも該画像の明暗、該画
像の色成分および該画像内の特定対象の形状の特徴量を
抽出し、キャラクタ処理手段が、前記特徴量抽出手段が
抽出した特徴量および所定のキャラクタの属性情報をも
とに前記所定のキャラクタの行動を決定し、該決定した
行動に対応する前記行動パターン情報を取得して前記所
定のキャラクタの画像処理を行い、画像表示手段が、前
記キャラクタ処理手段によって画像処理された前記所定
のキャラクタの画像表示を行うようにしている。
According to the present invention, the image obtaining means obtains an image, and the feature amount extracting means obtains at least the brightness of the image, the color components of the image and the image from the image obtained by the image obtaining means. The characteristic amount of the shape of the specific target in the character is extracted, and the character processing unit determines the behavior of the predetermined character based on the characteristic amount extracted by the characteristic amount extraction unit and attribute information of the predetermined character. The action pattern information corresponding to the determined action is obtained, and image processing of the predetermined character is performed, and image display means performs image display of the predetermined character image-processed by the character processing means. I have.

【0010】つぎの発明にかかる画像表示制御装置は、
上記の発明において、前記データベースは、所定のキャ
ラクタの属性情報をさらに備え、前記キャラクタ処理手
段は、前記特徴量抽出手段が抽出した特徴量をもとに前
記所定のキャラクタの属性情報を変更する属性変更手段
をさらに備え、前記キャラクタ処理手段は、前記特徴量
抽出手段が抽出した特徴量および前記属性変更手段によ
って変更された所定のキャラクタの属性情報をもとに前
記所定のキャラクタの行動を決定し、該決定した行動に
対応する前記行動パターン情報を取得して前記所定のキ
ャラクタの画像処理を行うことを特徴とする。
[0010] The image display control device according to the next invention comprises:
In the above invention, the database further includes attribute information of a predetermined character, and the character processing unit changes the attribute information of the predetermined character based on the feature amount extracted by the feature amount extraction unit. The character processing means further comprises: a character processing means for determining an action of the predetermined character based on the characteristic amount extracted by the characteristic amount extracting means and attribute information of the predetermined character changed by the attribute changing means. Acquiring the action pattern information corresponding to the determined action and performing image processing of the predetermined character.

【0011】この発明によれば、前記データベースは、
所定のキャラクタの属性情報をさらに備え、キャラクタ
処理手段の属性変更手段が、前記特徴量抽出手段が抽出
した特徴量をもとに所定のキャラクタの属性情報を変更
し、前記特徴量抽出手段が抽出した特徴量および前記属
性変更手段によって変更された所定のキャラクタの属性
情報をもとに前記所定のキャラクタの行動を決定し、該
決定した行動に対応する前記行動パターン情報を取得し
て前記所定のキャラクタの画像処理を行うようにしてい
る。
According to the invention, the database is:
The apparatus further comprises attribute information of the predetermined character, wherein the attribute changing means of the character processing means changes the attribute information of the predetermined character based on the characteristic amount extracted by the characteristic amount extracting means, and the characteristic amount extracting means The action of the predetermined character is determined based on the determined feature amount and the attribute information of the predetermined character changed by the attribute changing unit, and the action pattern information corresponding to the determined action is obtained to obtain the predetermined action. Image processing of the character is performed.

【0012】つぎの発明にかかる画像表示制御装置は、
上記の発明において、前記キャラクタ処理手段は、前記
特徴量抽出手段が抽出した特徴量をもとに前記行動パタ
ーン情報を変形して画像処理を行うことを特徴とする。
[0012] An image display control device according to the next invention comprises:
In the above invention, the character processing means performs image processing by deforming the action pattern information based on the feature quantity extracted by the feature quantity extracting means.

【0013】この発明によれば、キャラクタ処理手段
が、前記特徴量抽出手段が抽出した特徴量をもとに前記
行動パターン情報を変形して画像処理を行うようにして
いる。
According to the present invention, the character processing means performs the image processing by transforming the action pattern information based on the feature quantity extracted by the feature quantity extracting means.

【0014】つぎの発明にかかる画像表示制御装置は、
上記の発明において、前記特徴量抽出手段は、前記画像
取得手段が取得した画像であって所定時間差を有する複
数の画像をもとに該複数の画像間における特定対象の動
き情報を抽出し、該動き情報を前記特徴量として出力す
ることを特徴とする。
[0014] The image display control device according to the next invention comprises:
In the above invention, the feature amount extracting unit extracts motion information of a specific target between the plurality of images based on the plurality of images having a predetermined time difference, the images being obtained by the image obtaining unit, It is characterized in that motion information is output as the feature amount.

【0015】この発明によれば、前記特徴量抽出手段
が、前記画像取得手段が取得した画像であって所定時間
差を有する複数の画像をもとに該複数の画像間における
特定対象の動き情報を抽出し、該動き情報を前記特徴量
として出力するようにしている。
According to the present invention, the feature amount extracting means obtains, based on a plurality of images obtained by the image obtaining means and having a predetermined time difference, motion information of a specific object among the plurality of images. The motion information is extracted and output as the feature amount.

【0016】つぎの発明にかかる画像表示制御装置は、
上記の発明において、前記特徴量抽出手段は、前記動き
情報が示す特定対象の動きに含まれる特定パターンを抽
出し、該特定パターンを前記特徴量として出力すること
を特徴とする。
[0016] The image display control device according to the next invention comprises:
In the above invention, the characteristic amount extracting means extracts a specific pattern included in the specific target motion indicated by the motion information, and outputs the specific pattern as the characteristic amount.

【0017】この発明によれば、前記特徴量抽出手段
が、前記動き情報が示す特定対象の動きに含まれる特定
パターンを抽出し、該特定パターンを前記特徴量として
出力するようにしている。
According to the present invention, the characteristic amount extracting means extracts a specific pattern included in the specific target motion indicated by the motion information, and outputs the specific pattern as the characteristic amount.

【0018】つぎの発明にかかる画像表示制御装置は、
上記の発明において、前記画像取得手段は、撮像装置を
備え、前記画像取得手段は、前記撮像装置が撮像した画
像を取得することを特徴とする。
An image display control device according to the next invention comprises:
In the above invention, the image acquisition unit includes an imaging device, and the image acquisition unit acquires an image captured by the imaging device.

【0019】この発明によれば、前記画像取得手段が、
該画像取得手段内の撮像装置が撮像した画像を取得する
ようにしている。
According to the present invention, the image obtaining means includes:
An image picked up by an image pickup device in the image obtaining means is obtained.

【0020】つぎの発明にかかる画像表示制御装置は、
上記の発明において、前記画像取得手段は、無線回線お
よび/または有線回線に接続され、前記画像取得手段
は、前記無線回線および/または前記有線回線を介して
転送された画像を取得することを特徴とする。
[0020] An image display control device according to the next invention comprises:
In the above invention, the image acquisition unit is connected to a wireless line and / or a wired line, and the image acquisition unit acquires an image transferred via the wireless line and / or the wired line. And

【0021】この発明によれば、前記画像取得手段が、
無線回線および/または有線回線を介して転送された画
像を取得するようにしている。
According to the present invention, the image obtaining means includes:
An image transferred via a wireless line and / or a wired line is acquired.

【0022】つぎの発明にかかる画像表示制御装置は、
上記の発明において、画像を保持する画像保持手段をさ
らに備え、前記画像取得手段は、前記画像保持手段が保
持する画像を取得することを特徴とする。
[0022] The image display control device according to the next invention comprises:
In the above invention, an image holding means for holding an image is further provided, and the image obtaining means obtains an image held by the image holding means.

【0023】この発明によれば、前記画像取得手段が、
画像保持手段が保持する画像を取得するようにしてい
る。
According to the present invention, the image acquisition means includes:
The image held by the image holding means is acquired.

【0024】つぎの発明にかかる画像表示制御方法は、
所定のキャラクタの行動パターン情報を少なくとも保持
する保持工程と、画像を取得する画像取得工程と、前記
画像取得工程によって取得された画像から、少なくとも
該画像の明暗、該画像の色成分および該画像内の特定対
象の形状の特徴量を抽出する特徴量抽出工程と、前記特
徴量抽出工程が抽出した特徴量をもとに前記所定のキャ
ラクタの行動を決定し、該決定した行動に対応する行動
パターン情報を取得して前記所定のキャラクタの画像処
理を行うキャラクタ処理工程と、前記キャラクタ処理工
程によって画像処理された前記所定のキャラクタの画像
表示を行う画像表示工程とを含むことを特徴とする。
An image display control method according to the next invention comprises:
A holding step of holding at least action pattern information of a predetermined character; an image obtaining step of obtaining an image; and an image obtained by the image obtaining step, wherein at least the brightness of the image, the color components of the image, and the A feature amount extracting step of extracting a feature amount of the shape of the specific target, and determining an action of the predetermined character based on the feature amount extracted by the feature amount extracting step; and an action pattern corresponding to the determined action. A character processing step of acquiring information and performing image processing of the predetermined character; and an image display step of displaying an image of the predetermined character image-processed by the character processing step.

【0025】この発明によれば、保持工程によって、所
定のキャラクタの行動パターン情報を少なくとも保持
し、画像取得工程によって、画像を取得し、特徴量抽出
工程によって、前記画像取得工程によって取得された画
像から、少なくとも該画像の明暗、該画像の色成分およ
び該画像内の特定対象の形状の特徴量を抽出し、キャラ
クタ処理工程によって、前記特徴量抽出工程が抽出した
特徴量をもとに前記所定のキャラクタの行動を決定し、
該決定した行動に対応する行動パターン情報を取得して
前記所定のキャラクタの画像処理を行い、画像表示工程
によって、前記キャラクタ処理工程によって画像処理さ
れた前記所定のキャラクタの画像表示を行うようにして
いる。
According to the present invention, at least the action pattern information of the predetermined character is held in the holding step, the image is obtained in the image obtaining step, and the image obtained in the image obtaining step is obtained in the feature amount extracting step. Extracting at least the lightness and darkness of the image, the color components of the image, and the characteristic amount of the shape of the specific target in the image, and performing the character processing step on the basis of the characteristic amount extracted by the characteristic amount extracting step. Character's behavior,
Acquiring action pattern information corresponding to the determined action, performing image processing of the predetermined character, and displaying an image of the predetermined character image-processed by the character processing step by an image display step. I have.

【0026】つぎの発明にかかる画像表示制御方法は、
上記の発明において、前記保持工程は、前記所定のキャ
ラクタの属性情報をさらに保持し、前記キャラクタ処理
工程は、前記特徴量抽出工程が抽出した特徴量をもとに
前記所定のキャラクタの属性情報を変更する属性変更工
程をさらに含み、前記キャラクタ処理工程は、前記特徴
量抽出工程が抽出した特徴量および前記属性変更工程に
よって変更された所定のキャラクタの属性情報をもとに
前記所定のキャラクタの行動を決定し、該決定した行動
に対応する前記行動パターン情報を取得して前記所定の
キャラクタの画像処理を行うことを特徴とする。
An image display control method according to the next invention comprises:
In the above invention, the holding step further holds attribute information of the predetermined character, and the character processing step stores the attribute information of the predetermined character based on the feature amount extracted by the feature amount extracting step. The character processing step further includes an attribute changing step of changing, wherein the character processing step is based on the characteristic amount extracted by the characteristic amount extracting step and the attribute information of the predetermined character changed by the attribute changing step. Is determined, the action pattern information corresponding to the determined action is obtained, and image processing of the predetermined character is performed.

【0027】この発明によれば、前記保持工程が、前記
所定のキャラクタの属性情報をさらに保持し、前記キャ
ラクタ処理工程の属性変更工程が、前記特徴量抽出工程
が抽出した特徴量をもとに前記所定のキャラクタの属性
情報を変更し、前記キャラクタ処理工程によって、前記
特徴量抽出工程が抽出した特徴量および前記属性変更工
程によって変更された所定のキャラクタの属性情報をも
とに前記所定のキャラクタの行動を決定し、該決定した
行動に対応する前記行動パターン情報を取得して前記所
定のキャラクタの画像処理を行うようにしている。
According to this invention, the holding step further holds attribute information of the predetermined character, and the attribute changing step of the character processing step is based on the feature amount extracted by the feature amount extracting step. The attribute information of the predetermined character is changed, and the character processing step is performed based on the characteristic amount extracted by the characteristic amount extraction step and the attribute information of the predetermined character changed by the attribute change step. Is determined, the behavior pattern information corresponding to the determined behavior is obtained, and image processing of the predetermined character is performed.

【0028】つぎの発明にかかる画像表示制御方法は、
上記の発明において、前記キャラクタ処理工程は、前記
特徴量抽出工程が抽出した特徴量をもとに前記行動パタ
ーン情報を変形して画像処理を行うことを特徴とする。
An image display control method according to the next invention is as follows.
In the above invention, the character processing step performs image processing by deforming the action pattern information based on the feature amount extracted by the feature amount extraction step.

【0029】この発明によれば、前記キャラクタ処理工
程によって、前記特徴量抽出工程が抽出した特徴量をも
とに前記行動パターン情報を変形して画像処理を行うよ
うにしている。
According to the present invention, in the character processing step, the action pattern information is transformed based on the feature quantity extracted in the feature quantity extraction step to perform image processing.

【0030】つぎの発明にかかる画像表示制御方法は、
上記の発明において、前記特徴量抽出工程は、前記画像
取得工程が取得した画像であって所定時間差を有する複
数の画像をもとに該複数の画像間における特定対象の動
き情報を抽出し、該動き情報を前記特徴量として出力す
ることを特徴とする。
An image display control method according to the next invention is as follows.
In the above invention, the feature amount extraction step extracts motion information of a specific target between the plurality of images based on the plurality of images having a predetermined time difference, which are images acquired by the image acquisition step, It is characterized in that motion information is output as the feature amount.

【0031】この発明によれば、前記特徴量抽出工程
が、前記画像取得工程が取得した画像であって所定時間
差を有する複数の画像をもとに該複数の画像間における
特定対象の動き情報を抽出し、該動き情報を前記特徴量
として出力するようにしている。
According to the present invention, the feature amount extracting step includes, based on a plurality of images acquired by the image acquiring step and having a predetermined time difference, motion information of a specific target among the plurality of images. The motion information is extracted and output as the feature amount.

【0032】つぎの発明にかかる画像表示制御方法は、
上記の発明において、前記特徴量抽出工程は、前記動き
情報が示す特定対象の動きに含まれる特定パターンを抽
出し、該特定パターンを前記特徴量として出力すること
を特徴とする。
An image display control method according to the next invention comprises:
In the above invention, the characteristic amount extracting step is characterized in that a specific pattern included in the specific target motion indicated by the motion information is extracted, and the specific pattern is output as the characteristic amount.

【0033】この発明によれば、前記特徴量抽出工程
が、前記動き情報が示す特定対象の動きに含まれる特定
パターンを抽出し、該特定パターンを前記特徴量として
出力するようにしている。
According to the present invention, the characteristic amount extracting step extracts a specific pattern included in the specific target motion indicated by the motion information, and outputs the specific pattern as the characteristic amount.

【0034】つぎの発明にかかる画像表示制御方法は、
上記の発明において、前記画像取得工程は、撮像装置が
撮像した画像を取得することを特徴とする。
An image display control method according to the next invention is as follows.
In the above invention, the image acquisition step acquires an image captured by an imaging device.

【0035】この発明によれば、前記画像取得工程が、
撮像装置が撮像した画像を取得するようにしている。
According to the present invention, the image obtaining step includes:
An image captured by the imaging device is obtained.

【0036】つぎの発明にかかる画像表示制御方法は、
上記の発明において、前記画像取得工程は、無線回線お
よび/または有線回線を介して転送された画像を取得す
ることを特徴とする。
An image display control method according to the next invention is as follows.
In the above invention, the image acquiring step acquires an image transferred via a wireless line and / or a wired line.

【0037】この発明によれば、前記画像取得工程が、
無線回線および/または有線回線を介して転送された画
像を取得するようにしている。
According to the present invention, the image obtaining step includes:
An image transferred via a wireless line and / or a wired line is acquired.

【0038】つぎの発明にかかる画像表示制御方法は、
上記の発明において、前記画像取得工程は、画像保持手
段が保持した画像を取得することを特徴とする。
An image display control method according to the next invention is as follows.
In the above invention, the image acquiring step acquires an image held by an image holding unit.

【0039】この発明によれば、前記画像取得工程が、
画像保持手段が保持した画像を取得するようにしてい
る。
According to the present invention, the image obtaining step includes:
The image held by the image holding means is acquired.

【0040】つぎの発明にかかるプログラムは、上記に
記載された方法をコンピュータに実行させるプログラム
であり、そのプログラムが機械読み取り可能となり、こ
れによって、上記の動作をコンピュータによって実行す
ることができる。
A program according to the next invention is a program for causing a computer to execute the method described above, and the program becomes machine-readable, whereby the above operation can be executed by the computer.

【0041】[0041]

【発明の実施の形態】以下に添付図面を参照して、この
発明にかかる画像表示制御装置、画像表示制御方法およ
びその方法をコンピュータに実行させるプログラムの好
適な実施の形態を詳細に説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Preferred embodiments of an image display control device, an image display control method and a program for causing a computer to execute the method according to the present invention will be described below in detail with reference to the accompanying drawings.

【0042】実施の形態1.図1は、この発明の実施の
形態1である画像表示制御装置の構成を示すブロック図
である。図1において、この画像表示制御装置は、画像
を取得する画像取得部1、画像取得部1が取得した画像
から、この画像の特徴量を抽出する特徴抽出部2、キャ
ラクタを記録するデータベース部3、データベース部3
から、特定のデータを抽出し、あるいは変形処理するキ
ャラクタ処理部4、およびキャラクタ処理部4が処理し
たデータを表示する画像表示部5を有する。
Embodiment 1 FIG. 1 is a block diagram showing a configuration of the image display control device according to the first embodiment of the present invention. In FIG. 1, the image display control device includes an image acquiring unit 1 for acquiring an image, a feature extracting unit 2 for extracting a feature amount of the image from the image acquired by the image acquiring unit 1, and a database unit 3 for recording a character. , Database part 3
A character processing unit 4 for extracting or transforming specific data from the image processing unit, and an image display unit 5 for displaying data processed by the character processing unit 4.

【0043】画像取得部1は、たとえばCCD型やCM
OS型のイメージセンサによって実現される。なお、画
像取得部1は、無線回線や有線回線に接続され、これら
無線回線や有線回線に接続されたネットワークを介して
画像を取得するようにしてもよい。さらに、スマートメ
ディアやコンパクトフラッシュ(登録商標)などのメデ
ィアに書き込まれた画像を取得するようにしてもよい。
The image acquisition unit 1 is, for example, a CCD type or a CM
This is realized by an OS type image sensor. Note that the image acquiring unit 1 may be connected to a wireless line or a wired line, and acquire an image via a network connected to the wireless line or the wired line. Further, an image written on a medium such as a smart media or a compact flash (registered trademark) may be obtained.

【0044】特徴抽出部2は、画像取得部1が取得した
画像から、この画像の明暗、主要な色成分、この画像内
の特定対象の形状などの特徴量を抽出し、抽出結果をキ
ャラクタ処理部4に出力する。データベース部3には、
上述したキャラクタ自体の情報としてキャラクタの性格
などを示すキャラクタ属性データ3aと、キャラクタに
対する所定の行動をパターンとして記録した行動パター
ンデータ3bとを有する。
The feature extraction unit 2 extracts features such as light and darkness, main color components, and the shape of a specific object in the image from the image acquired by the image acquisition unit 1, and characterizes the extraction result. Output to section 4. In the database unit 3,
The information of the character itself includes character attribute data 3a indicating the character of the character and the like, and action pattern data 3b in which a predetermined action on the character is recorded as a pattern.

【0045】キャラクタ処理部4は、行動パターン決定
部4bを有し、行動パターン決定部4bは、特徴抽出部
2から入力された特徴量をもとに、行動パターンを決定
し、この行動パターンに対応する行動パターンデータ3
bを選択して取得し、この行動パターンデータ3bによ
ってキャラクタを行動させる表示処理を行い、その表示
処理結果を画像表示部5に出力する。画像表示部5は、
入力された表示処理結果を、LCDなどの表示部に表示
出力する。なお、キャラクタ処理部4は、変形処理部4
cを有し、変形処理部4cは、行動パターン決定部4b
によって決定された行動パターンに対する表示処理が行
われる際、行動パターンデータ3bを適切に変形する変
形処理を行うようにしてもよい。すなわち、行動パター
ンデータ3bそのものを用いるのではなく、行動パター
ンデータをアレンジしてキャラクタの行動を表示処理す
るようにしてもよい。また、行動パターン決定部4b
は、行動パターンを決定する際、現在のキャラクタ属性
データ3aを加味して行動パターンを決定するようにし
てもよいし、変形処理部4cが変形処理する際、キャラ
クタ属性データ3aを加味して変形処理するようにして
もよい。
The character processing unit 4 has an action pattern determination unit 4b, which determines an action pattern based on the feature amount input from the feature extraction unit 2, and determines this action pattern. Corresponding action pattern data 3
b is selected and acquired, a display process for causing the character to act based on the action pattern data 3b is performed, and the display process result is output to the image display unit 5. The image display unit 5
The input display processing result is displayed and output on a display unit such as an LCD. Note that the character processing unit 4 is
c, and the deformation processing unit 4c includes an action pattern determination unit 4b
When the display process is performed on the behavior pattern determined by the above, a deformation process for appropriately deforming the behavior pattern data 3b may be performed. That is, instead of using the action pattern data 3b itself, the action pattern data may be arranged to display the action of the character. In addition, the behavior pattern determination unit 4b
May determine the action pattern in consideration of the current character attribute data 3a when determining the action pattern, or may perform the deformation in consideration of the character attribute data 3a when the deformation processing unit 4c performs the deformation process. Processing may be performed.

【0046】ここで、図2に示すフローチャートを参照
して、図1に示した画像表示制御装置による画像表示制
御処理手順について説明する。なお、データベース部3
には、予めキャラクタ属性データ3aと行動パターンデ
ータ3bとが保持されているものとする。まず、画像取
得部1は、画像を取得し、この取得した画像を特徴抽出
部2に出力する(ステップS101)。
Here, an image display control processing procedure by the image display control device shown in FIG. 1 will be described with reference to a flowchart shown in FIG. The database unit 3
Is assumed to hold character attribute data 3a and action pattern data 3b in advance. First, the image acquiring unit 1 acquires an image and outputs the acquired image to the feature extracting unit 2 (Step S101).

【0047】その後、特徴抽出部2は、画像取得部1か
ら順次入力される画像の明暗、画像の主要な色成分、画
像内の特定対象の形状などの特徴量を抽出する(ステッ
プS102)。この形状の抽出は、たとえば、テンプレ
ートとして予め用意されている丸や四角などの画像との
テンプレートマッチングを行うことによって実現され
る。その後、キャラクタ処理部4の行動パターン決定部
4bは、入力された特徴量に基づいて行動パターンを決
定する(ステップS103)。たとえば、特徴量として
の形状が、キャラクタにとって「餌」と判断される場
合、「食べる」という行動パターンを決定し、特徴量と
しての色成分が、キャラクタにとっての好みの色である
場合、「喜ぶ」という行動パターンを決定する。この場
合、キャラクタにとって好みの色であるか否かは、キャ
ラクタ属性データ3aを参照して判断する。
After that, the feature extracting unit 2 extracts features such as the brightness of the image, the main color components of the image, and the shape of the specific object in the image, which are sequentially input from the image acquiring unit 1 (step S102). The extraction of the shape is realized, for example, by performing template matching with an image such as a circle or a square prepared in advance as a template. Thereafter, the action pattern determination unit 4b of the character processing unit 4 determines an action pattern based on the input feature amount (Step S103). For example, when the shape as the feature amount is determined to be “bait” for the character, an action pattern of “eat” is determined, and when the color component as the feature amount is a favorite color for the character, “pleasant” Is determined. In this case, whether or not the color is a favorite color for the character is determined by referring to the character attribute data 3a.

【0048】なお、特徴抽出部2は、画像取得部1が取
得した画像であって所定時間差(時系列変化)を有する
複数の画像をもとに該複数の画像間における特定対象の
動きの方向の情報、すなわちオプティカルフローを求
め、該動き情報を特徴量として出力する。この場合、こ
の動き情報が示す特定対象の動きに含まれる特定パター
ンを抽出し、該特定パターンを特徴量として出力する。
この特定パターンの抽出は、DPマッチングによって実
現できる。たとえば、上述した人間の手が特定対象であ
った場合、この人間の動きのパターンをDPマッチング
によって円の動きパターンとの類似度を求め、特徴量を
抽出する。その際に、円の動きであると判定された場
合、行動パターン決定部4bは、キャラクタの行動とし
て「目を回す」という行動パターンを決定する。
The feature extracting unit 2 determines the direction of the movement of the specific object between the plurality of images based on the plurality of images having a predetermined time difference (time-series change), which are images acquired by the image acquiring unit 1. , That is, an optical flow, and outputs the motion information as a feature value. In this case, a specific pattern included in the specific target motion indicated by the motion information is extracted, and the specific pattern is output as a feature amount.
The extraction of the specific pattern can be realized by DP matching. For example, when the above-mentioned human hand is a specific target, the degree of similarity between the human motion pattern and the circular motion pattern is obtained by DP matching, and the feature amount is extracted. At this time, if it is determined that the movement is a circle, the action pattern determination unit 4b determines an action pattern of “turning eyes” as the action of the character.

【0049】その後、キャラクタ処理部4は、行動パタ
ーン決定部4bによって決定された行動パターンに対応
する行動パターンデータ3bをデータベース部3から取
得し(ステップS104)、さらに、この行動パターン
データ3bをもとに、キャラクタの表示処理を行い、こ
の表示処理結果を画像表示部5に出力する(ステップS
105)。その後、画像表示部5は、キャラクタ処理部
4から出力された表示処理結果を表示出力し(ステップ
S106)、本処理を終了する。
After that, the character processing section 4 acquires from the database section 3 the action pattern data 3b corresponding to the action pattern determined by the action pattern determination section 4b (step S104). At this time, a character display process is performed, and the display process result is output to the image display unit 5 (Step S).
105). After that, the image display unit 5 displays and outputs the display processing result output from the character processing unit 4 (step S106), and ends this processing.

【0050】なお、上述した実施の形態1では、画像入
力に対応したキャラクタ処理について説明しているが、
これに限らず、音声入力によってキャラクタ処理を並行
的に行うようにしてもよい。
In the first embodiment, character processing corresponding to image input has been described.
The present invention is not limited to this, and character processing may be performed in parallel by voice input.

【0051】この実施の形態1では、画像から、形状の
みならず、画像の明暗および色成分を加味した特徴量を
抽出し、この特徴量をもとにキャラクタの行動を適正か
つ自動的に行うようにしているので、一層、魅力的なキ
ャラクタの動作を機に応じて表示することができる。
In the first embodiment, not only the shape but also the feature amount taking into account the light and darkness and the color components of the image are extracted from the image, and the character's action is appropriately and automatically performed based on the feature amount. As a result, more attractive character movements can be displayed according to the machine.

【0052】実施の形態2.つぎに、この発明の実施の
形態2について説明する。上述した実施の形態1では、
特徴抽出部2が抽出した特徴量をもとに、行動パターン
決定部4bが行動パターンを決定するようにしていた
が、この実施の形態2では、さらに、この特徴量をもと
にキャラクタ属性データ3aを変更し、さらには、この
キャラクタ属性データ3aをもとに行動パターンを決定
するようにしている。
Embodiment 2 Next, a second embodiment of the present invention will be described. In the first embodiment described above,
Although the action pattern determination unit 4b determines the action pattern based on the feature amount extracted by the feature extraction unit 2, in the second embodiment, the character attribute data is further determined based on the feature amount. 3a is changed, and an action pattern is determined based on the character attribute data 3a.

【0053】図3は、この発明の実施の形態2である画
像表示制御装置の構成を示すブロック図である。図3に
おいて、キャラクタ処理部4は、特徴抽出部2から出力
された特徴量をもとにキャラクタ属性データ3aの内容
を変更する属性変更部4aを有している。その他の構成
は、実施の形態1と同じであり、同一構成部分には同一
符号を付している。
FIG. 3 is a block diagram showing a configuration of an image display control device according to the second embodiment of the present invention. In FIG. 3, the character processing unit 4 has an attribute changing unit 4a that changes the contents of the character attribute data 3a based on the feature amount output from the feature extracting unit 2. Other configurations are the same as those of the first embodiment, and the same components are denoted by the same reference numerals.

【0054】ここで、図4に示すフローチャートを参照
して、図3に示した画像表示制御装置による画像表示制
御処理手順について説明する。なお、データベース部3
には、予めキャラクタ属性データ3aと行動パターンデ
ータ3bとが保持されているものとする。まず、画像取
得部1は、画像を取得し、この取得した画像を特徴抽出
部2に出力する(ステップS201)。
Here, an image display control processing procedure by the image display control device shown in FIG. 3 will be described with reference to a flowchart shown in FIG. The database unit 3
Is assumed to hold character attribute data 3a and action pattern data 3b in advance. First, the image acquiring unit 1 acquires an image, and outputs the acquired image to the feature extracting unit 2 (Step S201).

【0055】その後、特徴抽出部2は、画像取得部1か
ら順次入力される画像の明暗、画像の主要な色成分、画
像内の特定対象の形状などの特徴量を抽出する(ステッ
プS202)。その後、属性変更部4aは、入力された
特徴量に基づいてキャラクタ属性データ3aを変更する
(ステップS203)。たとえば、画像の主要な色成分
が「赤」であった場合、キャラクタ属性データ3aの
「性格」属性を、「怒りやすい」に変更し、画像の明暗
が、暗い状態が続く場合には、キャラクタ属性データ3
aの「性格」属性を「暗い」に変更する。なお、この場
合、変形処理部4cが、既に記録されている「性格」属
性を加味して、順次修正するようにしてもよい。すなわ
ち、急激にキャラクタ属性データ3aを変更するのでは
なく、順次修正するようにしてもよい。
After that, the feature extracting unit 2 extracts features such as the brightness of the image sequentially input from the image acquiring unit 1, the main color components of the image, and the shape of a specific object in the image (step S202). Thereafter, the attribute changing unit 4a changes the character attribute data 3a based on the input feature amount (Step S203). For example, if the main color component of the image is "red", the "personality" attribute of the character attribute data 3a is changed to "easy to be angry". Attribute data 3
Change the “personality” attribute of “a” to “dark”. Note that, in this case, the deformation processing unit 4c may sequentially make corrections in consideration of the “character” attribute already recorded. That is, instead of suddenly changing the character attribute data 3a, the character attribute data 3a may be sequentially corrected.

【0056】その後、キャラクタ処理部4の行動パター
ン決定部4bは、入力された特徴量に基づいて行動パタ
ーンを決定する(ステップS204)。たとえば、特徴
量としての形状が、キャラクタにとって「餌」と判断さ
れる場合、「食べる」という行動パターンを決定し、特
徴量としての色成分が、キャラクタにとっての好みの色
である場合、「喜ぶ」という行動パターンを決定する。
この場合、キャラクタにとって好みの色であるか否か
は、現在のキャラクタ属性データ3aを参照して判断す
る。
After that, the action pattern determining section 4b of the character processing section 4 determines an action pattern based on the input feature amount (step S204). For example, when the shape as the characteristic amount is determined to be “bait” for the character, an action pattern of “eating” is determined. When the color component as the characteristic amount is a favorite color for the character, “pleasant” Is determined.
In this case, whether the color is a favorite color for the character is determined by referring to the current character attribute data 3a.

【0057】その後、キャラクタ処理部4は、行動パタ
ーン決定部4bによって決定された行動パターンに対応
する行動パターンデータ3bをデータベース部3から取
得し(ステップS205)、さらに、この行動パターン
データ3bをもとに、キャラクタの表示処理を行い、こ
の表示処理結果を画像表示部5に出力する(ステップS
206)。その後、画像表示部5は、キャラクタ処理部
4から出力された表示処理結果を表示出力し(ステップ
S207)、本処理を終了する。
Thereafter, the character processing section 4 acquires from the database section 3 behavior pattern data 3b corresponding to the behavior pattern determined by the behavior pattern determination section 4b (step S205), and further acquires the behavior pattern data 3b. At this time, a character display process is performed, and the display process result is output to the image display unit 5 (Step S).
206). After that, the image display unit 5 displays and outputs the display processing result output from the character processing unit 4 (step S207), and ends this processing.

【0058】なお、上述した実施の形態2では、画像入
力に対応したキャラクタ処理について説明しているが、
これに限らず、音声入力によってキャラクタ処理を並行
的に行うようにしてもよい。
In the second embodiment, character processing corresponding to image input has been described.
The present invention is not limited to this, and character processing may be performed in parallel by voice input.

【0059】この実施の形態2では、画像から、形状の
みならず、画像の明暗および色成分を加味した特徴量を
抽出し、この特徴量をもとにキャラクタの属性を変更す
るとともに、キャラクタの行動を適正かつ自動的に行う
ようにしているので、一層、魅力的なキャラクタの動作
を機に応じて表示することができる。
According to the second embodiment, not only a shape but also a feature value taking into account the light and darkness and color components of the image are extracted from the image, and the attribute of the character is changed based on the feature value. Since the action is performed appropriately and automatically, the action of the more attractive character can be displayed according to the machine.

【0060】特に、この実施の形態2では、画像の取得
のみで、キャラクタ属性データ3aを自動更新するよう
にしているので、キャラクタを育成させるゲーム装置な
どに好適である。
In particular, in the second embodiment, the character attribute data 3a is automatically updated only by acquiring an image, so that the present invention is suitable for a game device for raising a character.

【0061】[0061]

【発明の効果】以上説明したように、この発明によれ
ば、画像取得手段が、画像を取得し、特徴量抽出手段
が、前記画像取得手段によって取得された画像から、少
なくとも該画像の明暗、該画像の色成分および該画像内
の特定対象の形状の特徴量を抽出し、キャラクタ処理手
段が、前記特徴量抽出手段が抽出した特徴量および所定
のキャラクタの属性情報をもとに前記所定のキャラクタ
の行動を決定し、該決定した行動に対応する前記行動パ
ターン情報を取得して前記所定のキャラクタの画像処理
を行い、画像表示手段が、前記キャラクタ処理手段によ
って画像処理された前記所定のキャラクタの画像表示を
行うようにしているので、ユーザとキャラクタとのイン
タラクションを容易に行うことができ、しかも、画像の
明暗や色成分を加味した特徴量をもとにキャラクタの行
動を決定して表示処理するようにしているので、一層、
魅力的なキャラクタの動作を表現し、表示することがで
きるという効果を奏する。
As described above, according to the present invention, the image obtaining means obtains an image, and the feature amount extracting means determines at least the brightness and darkness of the image from the image obtained by the image obtaining means. A color component of the image and a characteristic amount of a shape of a specific target in the image are extracted, and the character processing unit extracts the predetermined amount based on the characteristic amount extracted by the characteristic amount extracting unit and attribute information of a predetermined character. The action of the character is determined, the action pattern information corresponding to the determined action is obtained, and the image processing of the predetermined character is performed, and the image display unit is configured to execute the predetermined character image processing by the character processing unit. Because the image is displayed, the interaction between the user and the character can be easily performed, and the brightness and color components of the image are taken into account. Since the operator displays processed to determine the action based on the character feature amount, more,
This has the effect that the action of the attractive character can be expressed and displayed.

【0062】つぎの発明によれば、前記データベース
は、所定のキャラクタの属性情報をさらに備え、キャラ
クタ処理手段の属性変更手段が、前記特徴量抽出手段が
抽出した特徴量をもとに所定のキャラクタの属性情報を
変更し、前記特徴量抽出手段が抽出した特徴量および前
記属性変更手段によって変更された所定のキャラクタの
属性情報をもとに前記所定のキャラクタの行動を決定
し、該決定した行動に対応する前記行動パターン情報を
取得して前記所定のキャラクタの画像処理を行うように
しているので、ユーザとキャラクタとのインタラクショ
ンを容易に行うことができ、しかも、キャラクタの属性
情報を適切に自動変更することができるという効果を奏
する。
According to the next invention, the database further includes attribute information of a predetermined character, and the attribute change unit of the character processing unit determines the attribute of the predetermined character based on the feature amount extracted by the feature amount extraction unit. Of the predetermined character, and determines the action of the predetermined character based on the characteristic amount extracted by the characteristic amount extraction unit and the attribute information of the predetermined character changed by the attribute change unit. Since the action pattern information corresponding to the character is acquired and the image processing of the predetermined character is performed, the interaction between the user and the character can be easily performed, and the attribute information of the character can be appropriately automatically set. This has the effect of being able to be changed.

【0063】つぎの発明によれば、キャラクタ処理手段
が、前記特徴量抽出手段が抽出した特徴量をもとに前記
行動パターン情報を変形して画像処理を行うようにして
いるので、柔軟なキャラクタの行動の表示処理あるいは
キャラクタの属性変更を行うことができるという効果を
奏する。
According to the next invention, the character processing means performs image processing by transforming the action pattern information on the basis of the feature quantity extracted by the feature quantity extracting means. The effect of this is that it is possible to perform the action display processing or change the attribute of the character.

【0064】つぎの発明によれば、前記特徴量抽出手段
が、前記画像取得手段が取得した画像であって所定時間
差を有する複数の画像をもとに該複数の画像間における
特定対象の動き情報を抽出し、該動き情報を前記特徴量
として出力するようにしているので、画像内の動く情報
を的確に抽出することができ、その動き情報をキャラク
タの動作に反映できるという効果を奏する。
According to the next invention, the feature amount extracting means determines the motion information of the specific object between the plurality of images based on the plurality of images which are obtained by the image obtaining means and have a predetermined time difference. Is extracted and the motion information is output as the feature amount. Therefore, it is possible to accurately extract the motion information in the image, and it is possible to obtain the effect that the motion information can be reflected on the motion of the character.

【0065】つぎの発明によれば、前記特徴量抽出手段
が、前記動き情報が示す特定対象の動きに含まれる特定
パターンを抽出し、該特定パターンを前記特徴量として
出力するようにしているので、動きパターンの決定が容
易かつ的確に行うことができるという効果を奏する。
According to the next invention, the characteristic amount extracting means extracts a specific pattern included in the movement of the specific object indicated by the motion information, and outputs the specific pattern as the characteristic amount. This has the effect that the motion pattern can be easily and accurately determined.

【0066】つぎの発明によれば、前記画像取得手段
が、該画像取得手段内の撮像装置が撮像した画像を取得
するようにしているので、ユーザとキャラクタとのイン
タラクションを容易に行うことができるという効果を奏
する。
According to the next invention, since the image acquiring means acquires an image taken by the image pickup device in the image acquiring means, the interaction between the user and the character can be easily performed. This has the effect.

【0067】つぎの発明によれば、前記画像取得手段
が、無線回線および/または有線回線を介して転送され
た画像を取得するようにしているので、遠隔地の画像の
情報をキャラクタの動作に反映することができるという
効果を奏する。
According to the next invention, since the image acquiring means acquires the image transferred via the wireless line and / or the wired line, the information of the image of the remote place is used for the movement of the character. This has the effect of being able to be reflected.

【0068】つぎの発明によれば、前記画像取得手段
が、画像保持手段が保持する画像を取得するようにして
いるので、ユーザ間で画像のやりとりを行うことができ
るという効果を奏する。
According to the next invention, since the image acquiring means acquires the image held by the image holding means, it is possible to exchange images between users.

【0069】つぎの発明によれば、保持工程によって、
所定のキャラクタの行動パターン情報を少なくとも保持
し、画像取得工程によって、画像を取得し、特徴量抽出
工程によって、前記画像取得工程によって取得された画
像から、少なくとも該画像の明暗、該画像の色成分およ
び該画像内の特定対象の形状の特徴量を抽出し、キャラ
クタ処理工程によって、前記特徴量抽出工程が抽出した
特徴量をもとに前記所定のキャラクタの行動を決定し、
該決定した行動に対応する行動パターン情報を取得して
前記所定のキャラクタの画像処理を行い、画像表示工程
によって、前記キャラクタ処理工程によって画像処理さ
れた前記所定のキャラクタの画像表示を行うようにして
いるので、ユーザとキャラクタとのインタラクションを
容易に行うことができ、しかも、画像の明暗や色成分を
加味した特徴量をもとにキャラクタの行動を決定して表
示処理するようにしているので、一層、魅力的なキャラ
クタの動作を表現し、表示することができるという効果
を奏する。
According to the next invention, by the holding step,
An image is acquired by an image acquiring step, and at least the brightness and darkness of the image and the color components of the image are acquired from the image acquired by the image acquiring step. And extracting a feature amount of a shape of a specific target in the image, and determining a behavior of the predetermined character based on the feature amount extracted by the feature amount extracting step by a character processing step;
Acquiring action pattern information corresponding to the determined action, performing image processing of the predetermined character, and displaying an image of the predetermined character image-processed by the character processing step by an image display step. Therefore, the interaction between the user and the character can be easily performed, and the action of the character is determined and displayed based on the characteristic amount in consideration of the brightness and color components of the image. Further, it is possible to express and display an attractive character action.

【0070】つぎの発明によれば、前記保持工程が、前
記所定のキャラクタの属性情報をさらに保持し、前記キ
ャラクタ処理工程の属性変更工程が、前記特徴量抽出工
程が抽出した特徴量をもとに前記所定のキャラクタの属
性情報を変更し、前記キャラクタ処理工程によって、前
記特徴量抽出工程が抽出した特徴量および前記属性変更
工程によって変更された所定のキャラクタの属性情報を
もとに前記所定のキャラクタの行動を決定し、該決定し
た行動に対応する前記行動パターン情報を取得して前記
所定のキャラクタの画像処理を行うようにしているの
で、ユーザとキャラクタとのインタラクションを容易に
行うことができ、しかも、キャラクタの属性情報を適切
に自動変更することができるという効果を奏する。
According to the next invention, the holding step further holds attribute information of the predetermined character, and the attribute changing step of the character processing step is based on the feature amount extracted by the feature amount extracting step. The attribute information of the predetermined character is changed to the predetermined character based on the characteristic amount extracted by the characteristic amount extracting step and the attribute information of the predetermined character changed by the attribute changing step in the character processing step. Since the action of the character is determined, and the action pattern information corresponding to the determined action is obtained and the image processing of the predetermined character is performed, the interaction between the user and the character can be easily performed. In addition, there is an effect that the attribute information of the character can be appropriately and automatically changed.

【0071】つぎの発明によれば、前記キャラクタ処理
工程によって、前記特徴量抽出工程が抽出した特徴量を
もとに前記行動パターン情報を変形して画像処理を行う
ようにしているので、柔軟なキャラクタの行動の表示処
理あるいはキャラクタの属性変更を行うことができると
いう効果を奏する。
According to the next invention, the character processing step performs the image processing by deforming the action pattern information based on the feature amount extracted by the feature amount extracting step. It is possible to display the action of the character or change the attribute of the character.

【0072】つぎの発明によれば、前記特徴量抽出工程
が、前記画像取得工程が取得した画像であって所定時間
差を有する複数の画像をもとに該複数の画像間における
特定対象の動き情報を抽出し、該動き情報を前記特徴量
として出力するようにしているので、画像内の動く情報
を的確に抽出することができ、その動き情報をキャラク
タの動作に反映できるという効果を奏する。
According to the next invention, the feature amount extracting step includes the step of acquiring motion information of a specific object between the plurality of images based on the plurality of images obtained by the image obtaining step and having a predetermined time difference. Is extracted and the motion information is output as the feature amount. Therefore, it is possible to accurately extract the motion information in the image, and it is possible to obtain the effect that the motion information can be reflected on the motion of the character.

【0073】つぎの発明によれば、前記特徴量抽出工程
が、前記動き情報が示す特定対象の動きに含まれる特定
パターンを抽出し、該特定パターンを前記特徴量として
出力するようにしているので、動きパターンの決定が容
易かつ的確に行うことができるという効果を奏する。
According to the next invention, the characteristic amount extracting step extracts a specific pattern included in the movement of the specific object indicated by the motion information, and outputs the specific pattern as the characteristic amount. This has the effect that the motion pattern can be easily and accurately determined.

【0074】つぎの発明によれば、前記画像取得工程
が、撮像装置が撮像した画像を取得するようにしている
ので、ユーザとキャラクタとのインタラクションを容易
に行うことができるという効果を奏する。
According to the next invention, since the image acquiring step acquires an image captured by the image capturing apparatus, an effect is provided that the interaction between the user and the character can be easily performed.

【0075】つぎの発明によれば、前記画像取得工程
が、無線回線および/または有線回線を介して転送され
た画像を取得するようにしているので、遠隔地の画像の
情報をキャラクタの動作に反映することができるという
効果を奏する。
According to the next invention, since the image acquiring step acquires an image transferred via a wireless line and / or a wired line, information of an image at a remote place can be used for character movement. This has the effect of being able to be reflected.

【0076】つぎの発明によれば、前記画像取得工程
が、画像保持手段が保持した画像を取得するようにして
いるので、ユーザ間で画像のやりとりを行うことができ
るという効果を奏する。
According to the next invention, since the image acquiring step acquires the image held by the image holding means, it is possible to exchange images between users.

【0077】つぎの発明によれば、上記に記載された方
法をコンピュータに実行させるプログラムとし、そのプ
ログラムが機械読み取り可能となり、これによって、上
記の動作をコンピュータによって実行することができる
という効果を奏する。
According to the next invention, a program for causing a computer to execute the above-described method is provided, and the program becomes machine-readable, so that the above operation can be executed by the computer. .

【図面の簡単な説明】[Brief description of the drawings]

【図1】 この発明の実施の形態1である画像表示制御
装置の構成を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration of an image display control device according to a first embodiment of the present invention.

【図2】 図1に示した画像表示制御装置による画像表
示制御手順を示すフローチャートである。
FIG. 2 is a flowchart illustrating an image display control procedure performed by the image display control device illustrated in FIG. 1;

【図3】 この発明の実施の形態2である画像表示制御
装置の構成を示すブロック図である。
FIG. 3 is a block diagram illustrating a configuration of an image display control device according to a second embodiment of the present invention;

【図4】 図3に示した画像表示制御装置による画像表
示制御手順を示すフローチャートである。
FIG. 4 is a flowchart illustrating an image display control procedure performed by the image display control device illustrated in FIG. 3;

【符号の説明】[Explanation of symbols]

1 画像取得部、2 特徴抽出部、3 データベース
部、3a キャラクタ属性データ、3b 行動パターン
データ、4 キャラクタ処理部、4a 属性変更部、4
b 行動パターン決定部、4c 変形処理部、5 画像
表示部。
1 image acquisition section, 2 feature extraction section, 3 database section, 3a character attribute data, 3b action pattern data, 4 character processing section, 4a attribute change section, 4
b Behavior pattern determination unit, 4c deformation processing unit, 5 image display unit.

───────────────────────────────────────────────────── フロントページの続き (72)発明者 鹿毛 裕史 東京都千代田区丸の内二丁目2番3号 三 菱電機株式会社内 (72)発明者 田中 健一 東京都千代田区丸の内二丁目2番3号 三 菱電機株式会社内 Fターム(参考) 2C001 AA17 BA02 BB04 BC05 BC06 CB08 5B050 BA08 DA04 EA06 EA07 FA02 FA05 5C054 AA01 DA07 DA08 FA02 FC00 FC01 FC04 FC08 FC13 GB01 GB12 HA15  ──────────────────────────────────────────────────続 き Continuing on the front page (72) Inventor Hiroshi Kage 2-3-2 Marunouchi, Chiyoda-ku, Tokyo Mitsui Electric Co., Ltd. (72) Inventor Kenichi Tanaka 2-3-2 Marunouchi, Chiyoda-ku, Tokyo 3 Rishi Electric Co., Ltd. F term (reference) 2C001 AA17 BA02 BB04 BC05 BC06 CB08 5B050 BA08 DA04 EA06 EA07 FA02 FA05 5C054 AA01 DA07 DA08 FA02 FC00 FC01 FC04 FC08 FC13 GB01 GB12 HA15

Claims (17)

【特許請求の範囲】[Claims] 【請求項1】 画像を取得する画像取得手段と、 前記画像取得手段によって取得された画像から、少なく
とも該画像の明暗、該画像の色成分および該画像内の特
定対象の形状の特徴量を抽出する特徴量抽出手段と、 所定のキャラクタの行動パターン情報を少なくとも保持
するデータベースと、 前記特徴量抽出手段が抽出した特徴量および前記所定の
キャラクタの属性情報をもとに前記所定のキャラクタの
行動を決定し、該決定した行動に対応する前記行動パタ
ーン情報を取得して前記所定のキャラクタの画像処理を
行うキャラクタ処理手段と、 前記キャラクタ処理手段によって画像処理された前記所
定のキャラクタの画像表示を行う画像表示手段と、 を備えたことを特徴とする画像表示制御装置。
1. An image acquisition unit for acquiring an image, and extracting at least brightness and darkness of the image, a color component of the image, and a feature amount of a shape of a specific target in the image from the image acquired by the image acquisition unit. A feature amount extracting unit, a database holding at least action pattern information of a predetermined character, and a feature amount extracted by the feature amount extracting unit and an action of the predetermined character based on attribute information of the predetermined character. Character processing means for determining, acquiring the action pattern information corresponding to the determined action, and performing image processing of the predetermined character, and displaying an image of the predetermined character image-processed by the character processing means An image display control device, comprising: image display means.
【請求項2】 前記データベースは、 所定のキャラクタの属性情報をさらに備え、 前記キャラクタ処理手段は、 前記特徴量抽出手段が抽出した特徴量をもとに前記所定
のキャラクタの属性情報を変更する属性変更手段をさら
に備え、 前記キャラクタ処理手段は、前記特徴量抽出手段が抽出
した特徴量および前記属性変更手段によって変更された
所定のキャラクタの属性情報をもとに前記所定のキャラ
クタの行動を決定し、該決定した行動に対応する前記行
動パターン情報を取得して前記所定のキャラクタの画像
処理を行うことを特徴とする請求項1に記載の画像表示
制御装置。
2. The method according to claim 1, wherein the database further includes attribute information of a predetermined character, and the character processing unit changes the attribute information of the predetermined character based on the feature amount extracted by the feature amount extraction unit. The character processing unit further determines a behavior of the predetermined character based on the characteristic amount extracted by the characteristic amount extracting unit and attribute information of the predetermined character changed by the attribute changing unit. 2. The image display control device according to claim 1, wherein the action pattern information corresponding to the determined action is obtained and image processing of the predetermined character is performed.
【請求項3】 前記キャラクタ処理手段は、 前記特徴量抽出手段が抽出した特徴量をもとに前記行動
パターン情報を変形して画像処理を行うことを特徴とす
る請求項1または2に記載の画像表示制御装置。
3. The character processing unit according to claim 1, wherein the character processing unit performs image processing by deforming the action pattern information based on the feature amount extracted by the feature amount extracting unit. Image display control device.
【請求項4】 前記特徴量抽出手段は、 前記画像取得手段が取得した画像であって所定時間差を
有する複数の画像をもとに該複数の画像間における特定
対象の動き情報を抽出し、該動き情報を前記特徴量とし
て出力することを特徴とする請求項1〜3のいずれか一
つに記載の画像表示制御装置。
4. The feature amount extracting unit extracts motion information of a specific target among the plurality of images based on a plurality of images which are obtained by the image obtaining unit and have a predetermined time difference. The image display control device according to claim 1, wherein motion information is output as the feature amount.
【請求項5】 前記特徴量抽出手段は、 前記動き情報が示す特定対象の動きに含まれる特定パタ
ーンを抽出し、該特定パターンを前記特徴量として出力
することを特徴とする請求項4に記載の画像表示制御装
置。
5. The feature amount extracting unit according to claim 4, wherein the feature amount extracting unit extracts a specific pattern included in the motion of the specific target indicated by the motion information, and outputs the specific pattern as the feature amount. Image display control device.
【請求項6】 前記画像取得手段は、撮像装置を備え、 前記画像取得手段は、前記撮像装置が撮像した画像を取
得することを特徴とする請求項1〜5のいずれか一つに
記載の画像表示制御装置。
6. The image processing apparatus according to claim 1, wherein the image acquisition unit includes an imaging device, and the image acquisition unit acquires an image captured by the imaging device. Image display control device.
【請求項7】 前記画像取得手段は、無線回線および/
または有線回線に接続され、 前記画像取得手段は、前記無線回線および/または前記
有線回線を介して転送された画像を取得することを特徴
とする請求項1〜6のいずれか一つに記載の画像表示制
御装置。
7. The image acquisition means according to claim 1, wherein
7. The apparatus according to claim 1, wherein the image acquisition unit is connected to a wired line, and the image acquiring unit acquires an image transferred via the wireless line and / or the wired line. 8. Image display control device.
【請求項8】 画像を保持する画像保持手段をさらに備
え、 前記画像取得手段は、前記画像保持手段が保持する画像
を取得することを特徴とする請求項1〜7のいずれか一
つに記載の画像表示制御装置。
8. The image processing apparatus according to claim 1, further comprising an image holding unit for holding an image, wherein the image obtaining unit obtains an image held by the image holding unit. Image display control device.
【請求項9】 所定のキャラクタの行動パターン情報を
少なくとも保持する保持工程と、 画像を取得する画像取得工程と、 前記画像取得工程によって取得された画像から、少なく
とも該画像の明暗、該画像の色成分および該画像内の特
定対象の形状の特徴量を抽出する特徴量抽出工程と、 前記特徴量抽出工程が抽出した特徴量をもとに前記所定
のキャラクタの行動を決定し、該決定した行動に対応す
る行動パターン情報を取得して前記所定のキャラクタの
画像処理を行うキャラクタ処理工程と、 前記キャラクタ処理工程によって画像処理された前記所
定のキャラクタの画像表示を行う画像表示工程と、 を含むことを特徴とする画像表示制御方法。
9. A holding step of holding at least action pattern information of a predetermined character; an image obtaining step of obtaining an image; and an image obtained by the image obtaining step, at least the brightness of the image and the color of the image. A feature value extracting step of extracting a component and a feature value of a shape of a specific target in the image; and determining an action of the predetermined character based on the feature quantity extracted by the feature value extracting step. A character processing step of acquiring action pattern information corresponding to the character processing and performing image processing of the predetermined character; and an image display step of displaying an image of the predetermined character image-processed by the character processing step. An image display control method characterized by the following.
【請求項10】 前記保持工程は、 前記所定のキャラクタの属性情報をさらに保持し、 前記キャラクタ処理工程は、 前記特徴量抽出工程が抽出した特徴量をもとに前記所定
のキャラクタの属性情報を変更する属性変更工程をさら
に含み、 前記キャラクタ処理工程は、前記特徴量抽出工程が抽出
した特徴量および前記属性変更工程によって変更された
所定のキャラクタの属性情報をもとに前記所定のキャラ
クタの行動を決定し、該決定した行動に対応する前記行
動パターン情報を取得して前記所定のキャラクタの画像
処理を行うことを特徴とする請求項9に記載の画像表示
制御方法。
10. The holding step further holds attribute information of the predetermined character, and the character processing step stores the attribute information of the predetermined character based on the feature amount extracted by the feature amount extracting step. The character processing step further includes an attribute changing step of changing, wherein the character processing step is based on the characteristic amount extracted by the characteristic amount extracting step and the attribute information of the predetermined character changed by the attribute changing step. 10. The image display control method according to claim 9, wherein the action pattern information corresponding to the determined action is acquired, and image processing of the predetermined character is performed.
【請求項11】 前記キャラクタ処理工程は、 前記特徴量抽出工程が抽出した特徴量をもとに前記行動
パターン情報を変形して画像処理を行うことを特徴とす
る請求項9または10に記載の画像表示制御方法。
11. The character processing step according to claim 9, wherein in the character processing step, the action pattern information is transformed based on the feature quantity extracted in the feature quantity extraction step to perform image processing. Image display control method.
【請求項12】 前記特徴量抽出工程は、 前記画像取得工程が取得した画像であって所定時間差を
有する複数の画像をもとに該複数の画像間における特定
対象の動き情報を抽出し、該動き情報を前記特徴量とし
て出力することを特徴とする請求項9〜11のいずれか
一つに記載の画像表示制御方法。
12. The feature amount extracting step extracts motion information of a specific target between the plurality of images based on a plurality of images obtained by the image obtaining step and having a predetermined time difference. The image display control method according to claim 9, wherein motion information is output as the feature amount.
【請求項13】 前記特徴量抽出工程は、 前記動き情報が示す特定対象の動きに含まれる特定パタ
ーンを抽出し、該特定パターンを前記特徴量として出力
することを特徴とする請求項12に記載の画像表示制御
方法。
13. The method according to claim 12, wherein the feature amount extracting step extracts a specific pattern included in the motion of the specific target indicated by the motion information, and outputs the specific pattern as the feature amount. Image display control method.
【請求項14】 前記画像取得工程は、撮像装置が撮像
した画像を取得することを特徴とする請求項9〜13の
いずれか一つに記載の画像表示制御方法。
14. The image display control method according to claim 9, wherein said image obtaining step obtains an image captured by an imaging device.
【請求項15】 前記画像取得工程は、無線回線および
/または有線回線を介して転送された画像を取得するこ
とを特徴とする請求項9〜14のいずれか一つに記載の
画像表示制御方法。
15. The image display control method according to claim 9, wherein said image obtaining step obtains an image transferred via a wireless line and / or a wired line. .
【請求項16】 前記画像取得工程は、画像保持手段が
保持した画像を取得することを特徴とする請求項9〜1
5のいずれか一つに記載の画像表示制御方法。
16. The image acquisition step according to claim 9, wherein the image acquisition step acquires an image held by an image holding unit.
5. The image display control method according to any one of 5.
【請求項17】 請求項9〜16のいずれか一つに記載
された方法をコンピュータに実行させるプログラム。
17. A program for causing a computer to execute the method according to claim 9. Description:
JP2001005753A 2001-01-12 2001-01-12 Image display controller, image display control method and program to make computer execute the same method Pending JP2002216148A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001005753A JP2002216148A (en) 2001-01-12 2001-01-12 Image display controller, image display control method and program to make computer execute the same method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001005753A JP2002216148A (en) 2001-01-12 2001-01-12 Image display controller, image display control method and program to make computer execute the same method

Publications (1)

Publication Number Publication Date
JP2002216148A true JP2002216148A (en) 2002-08-02

Family

ID=18873752

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001005753A Pending JP2002216148A (en) 2001-01-12 2001-01-12 Image display controller, image display control method and program to make computer execute the same method

Country Status (1)

Country Link
JP (1) JP2002216148A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005034318A (en) * 2003-07-18 2005-02-10 Uizu:Kk Game using image information
JP2009095677A (en) * 2007-10-17 2009-05-07 Sony Computer Entertainment Inc Methods for generating asset for interactive entertainment using digital image capture
JP2010012036A (en) * 2008-07-03 2010-01-21 Ricoh Co Ltd Information processor, game system, image processor, information processing method, information processing program, and recording medium
JP2010246650A (en) * 2009-04-13 2010-11-04 Square Enix Co Ltd Game device, method of advancing game, and game program
JP2016087349A (en) * 2014-11-11 2016-05-23 株式会社コロプラ Game device, program, and method

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005034318A (en) * 2003-07-18 2005-02-10 Uizu:Kk Game using image information
JP2009095677A (en) * 2007-10-17 2009-05-07 Sony Computer Entertainment Inc Methods for generating asset for interactive entertainment using digital image capture
US8395614B2 (en) 2007-10-17 2013-03-12 Sony Computer Entertainment Inc. Generating an asset for interactive entertainment using digital image capture
JP2010012036A (en) * 2008-07-03 2010-01-21 Ricoh Co Ltd Information processor, game system, image processor, information processing method, information processing program, and recording medium
JP2010246650A (en) * 2009-04-13 2010-11-04 Square Enix Co Ltd Game device, method of advancing game, and game program
JP2016087349A (en) * 2014-11-11 2016-05-23 株式会社コロプラ Game device, program, and method

Similar Documents

Publication Publication Date Title
JP4645685B2 (en) Camera, camera control program, and photographing method
JP5880182B2 (en) Image generating apparatus, image generating method, and program
JP4577252B2 (en) Camera, best shot shooting method, program
JP5050465B2 (en) Imaging apparatus, imaging control method, and program
JP2006012062A (en) Image processor and its method, program and imaging device
JP2005086516A (en) Imaging device, printer, image processor and program
US20090251557A1 (en) Image pickup control method and apparatus for camera
JP5949030B2 (en) Image generating apparatus, image generating method, and program
JP2010171797A (en) Imaging apparatus and program
JP2007249132A (en) Imaging apparatus, automatic focusing method, and program
JP2001127990A (en) Information communication system
JP4115177B2 (en) Image processing method, image processing apparatus, and image processing program
JP2005250977A (en) Photographing apparatus, image reproducing device, image appreciation room, data accumulation/analysis apparatus, silver salt camera, and scanner
JP2011128643A (en) Imaging apparatus, method for automatically adjusting focus, and program
US20110292062A1 (en) Image processing apparatus, method, and storage medium storing a program
JP2002216148A (en) Image display controller, image display control method and program to make computer execute the same method
CN106845472A (en) A kind of novel intelligent wrist-watch scans explanation/interpretation method and novel intelligent wrist-watch
JP2010252374A (en) Camera, art of shooting great photographs, and programs
JP2010199968A (en) Digital camera
JPH10254904A (en) Image retrieval method and device
JP2001008072A (en) Electronic camera and its control method
JP5267645B2 (en) Imaging apparatus, imaging control method, and program
JP5181935B2 (en) Image processing apparatus, program, and subject detection method
JP5447134B2 (en) Image processing apparatus, reply image generation system, and program
US20190074035A1 (en) Interface device for data edit, capture device, image processing device, data editing method and recording medium recording data editing program