JP2010211094A - Image display control device, method and program - Google Patents

Image display control device, method and program Download PDF

Info

Publication number
JP2010211094A
JP2010211094A JP2009059045A JP2009059045A JP2010211094A JP 2010211094 A JP2010211094 A JP 2010211094A JP 2009059045 A JP2009059045 A JP 2009059045A JP 2009059045 A JP2009059045 A JP 2009059045A JP 2010211094 A JP2010211094 A JP 2010211094A
Authority
JP
Japan
Prior art keywords
person
recognition
recognized
display control
image display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009059045A
Other languages
Japanese (ja)
Other versions
JP5321162B2 (en
Inventor
Etsuteru Inoue
悦照 井上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2009059045A priority Critical patent/JP5321162B2/en
Publication of JP2010211094A publication Critical patent/JP2010211094A/en
Application granted granted Critical
Publication of JP5321162B2 publication Critical patent/JP5321162B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image display control device, method and program, capable of displaying an image registered for every person among a plurality of persons while avoiding complexity of user's operation such as a log-on operation. <P>SOLUTION: The device includes a database for associating registrant information with image data and for registering them, a recognition means for recognizing a person present in a predetermined place, a decision means for determining whether the registrant information corresponding to the person recognized by the recognition means is registered in the database, and a control means for displaying the image data associated with the registrant information when determined by the decision means that the registrant information is registered. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、複数の人毎に登録された画像を表示する表示装置等の技術分野に関する。   The present invention relates to a technical field such as a display device that displays images registered for a plurality of people.

この種の技術として、例えば特許文献1には、ユーザ名などユーザ識別情報の入力が行われログオンが実行されると、ユーザの認証をしてユーザを特定し、係るユーザに対応する表示調整情報に基づいて表示面に画像を表示する技術が提案されている。このような技術によれば、複数人が表示装置等を共用する場合であっても、ログオンする人毎に画像の表示調整を行うことができる。   As this type of technology, for example, in Patent Document 1, when user identification information such as a user name is input and logon is performed, the user is authenticated to identify the user, and display adjustment information corresponding to the user A technique for displaying an image on a display surface based on the above has been proposed. According to such a technique, even when a plurality of people share a display device or the like, image display adjustment can be performed for each person who logs on.

特開2002−268623号公報JP 2002-268623 A

しかしながら、従来の技術では、複数人で表示装置を共用する場合に、ログオンした人以外の他の人に応じた画像を表示させるためには、該他の人により再度ログオンしなおさなければならず煩雑であった。   However, in the conventional technology, when a display device is shared by a plurality of people, in order to display an image corresponding to another person other than the person who has logged on, the person must log on again. It was complicated.

本発明は、以上の点等に鑑みてなされたものであり、ログオン等のユーザ操作の煩雑さを回避しつつ、複数の人毎に登録された画像を表示させることが可能な画像表示制御装置、画像表示制御方法、及び画像表示制御プログラムを提供することを課題とする。   The present invention has been made in view of the above points and the like, and is capable of displaying an image registered for each of a plurality of persons while avoiding the complexity of user operations such as logon. An object is to provide an image display control method and an image display control program.

上記課題を解決するために、請求項1に記載の発明は、登録者情報と画像データを対応付けて登録するデータベースと、所定の場所に存在する人を認識する認識手段と、前記認識手段により前記認識された人に対応する登録者情報が前記データベースに登録されているか否かを判断する判断手段と、前記判断手段により前記登録者情報が登録されていると判断された場合には、当該登録者情報に対応付けられた画像データを表示させる制御手段と、を備えることを特徴とする。   In order to solve the above problem, the invention described in claim 1 includes a database for registering registrant information and image data in association with each other, a recognition unit for recognizing a person existing in a predetermined place, and the recognition unit. A determination means for determining whether or not registrant information corresponding to the recognized person is registered in the database; and when the determination means determines that the registrant information is registered, And control means for displaying image data associated with the registrant information.

請求項2に記載の発明は、請求項1に記載の画像表示制御装置において、前記認識手段により複数の人が認識され、当該認識された夫々の人に対応する登録者情報が前記データベースに登録されている場合には、前記制御手段は、当該認識された夫々の人に対応する画像データを順番に表示させることを特徴とする。   According to a second aspect of the present invention, in the image display control apparatus according to the first aspect, a plurality of persons are recognized by the recognition means, and registrant information corresponding to each of the recognized persons is registered in the database. If so, the control means displays the image data corresponding to each recognized person in order.

請求項3に記載の発明は、請求項2に記載の画像表示制御装置において、前記認識手段により認識された時刻を示す情報を記憶する認識時刻記憶手段と、前記認識時刻から現在時刻までの滞在時間を前記認識された夫々の人毎に算出する滞在時間算出手段と、を更に備え、前記制御手段は、前記認識された夫々の人に対応する画像データの表示時間又は表示順序を、前記夫々の人の前記滞在時間に応じて決定することを特徴とする。   According to a third aspect of the present invention, in the image display control apparatus according to the second aspect, a recognition time storage unit that stores information indicating a time recognized by the recognition unit, and a stay from the recognition time to the current time A residence time calculating means for calculating a time for each recognized person, and the control means sets the display time or display order of the image data corresponding to each recognized person. It is determined according to the stay time of the person.

請求項4に記載の発明は、請求項2に記載の画像表示制御装置において、前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、前記認識時刻に基づいて、前記認識された夫々の人の当該認識された順序を決定する認識順序決定手段と、を更に備え、前記制御手段は、前記認識された夫々の人に対応する画像データの表示時間又は表示順序を、前記認識順序決定手段により決定された順序に応じて決定することを特徴とする。   According to a fourth aspect of the present invention, in the image display control device according to the second aspect of the present invention, a recognition time storage unit that stores information indicating a recognition time when recognized by the recognition unit, and the recognition time Recognition order determining means for determining the recognized order of each recognized person, and the control means displays the display time or display order of the image data corresponding to each recognized person Is determined according to the order determined by the recognition order determining means.

請求項5に記載の発明は、請求項2に記載の画像表示制御装置において、前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、前記認識時刻から現在時刻までの滞在時間を前記認識された夫々の人毎に算出する滞在時間算出手段と、を更に備え、前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記夫々の人の前記滞在時間に応じて決定することを特徴とする。   According to a fifth aspect of the present invention, in the image display control apparatus according to the second aspect, a recognition time storage unit that stores information indicating a recognition time when the recognition unit recognizes the current time from the recognition time. A stay time calculation means for calculating the stay time until each recognized person, and the control means is the amount or size of the image data to be displayed corresponding to each recognized person Is determined according to the staying time of each person.

請求項6に記載の発明は、請求項2に記載の画像表示制御装置において、前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、前記認識時刻に基づいて、前記認識された夫々の人の当該認識された順序を決定する認識順序決定手段と、を更に備え、前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記認識順序決定手段により決定された順序に応じて決定することを特徴とする。   According to a sixth aspect of the present invention, in the image display control device according to the second aspect of the present invention, a recognition time storage unit that stores information indicating a recognition time when recognized by the recognition unit, and the recognition time Recognition order determining means for determining the recognized order of each recognized person, wherein the control means is an amount of image data to be displayed corresponding to each recognized person or The size is determined according to the order determined by the recognition order determining means.

請求項7に記載の発明は、請求項1に記載の画像表示制御装置において、前記検知手段により複数の人が認識され、当該認識された夫々の人に対応する登録者情報が前記データベースに登録されている場合には、前記制御手段は、当該認識された夫々の人に対応する画像データを同一画面上に表示させることを特徴とする。   According to a seventh aspect of the present invention, in the image display control apparatus according to the first aspect, a plurality of persons are recognized by the detecting means, and registrant information corresponding to each of the recognized persons is registered in the database. If so, the control means displays the image data corresponding to each recognized person on the same screen.

請求項8に記載の発明は、請求項7に記載の画像表示制御装置において、前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、前記認識時刻から現在時刻までの滞在時間を前記認識された夫々の人毎に算出する滞在時間算出手段と、を更に備え、前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記夫々の人の前記滞在時間に応じて決定することを特徴とする。   According to an eighth aspect of the present invention, in the image display control device according to the seventh aspect, a recognition time storage unit that stores information indicating a recognition time when the recognition unit recognizes the current time from the recognition time. A stay time calculation means for calculating the stay time until each recognized person, and the control means is the amount or size of the image data to be displayed corresponding to each recognized person Is determined according to the staying time of each person.

請求項9に記載の発明は、請求項7に記載の画像表示制御装置において、前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、前記認識時刻に基づいて、前記認識された夫々の人の当該認識された順序を決定する認識順序決定手段と、を更に備え、前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記認識順序決定手段により決定された順序に応じて決定することを特徴とする。   According to a ninth aspect of the present invention, in the image display control device according to the seventh aspect of the present invention, a recognition time storage unit that stores information indicating a recognition time when recognized by the recognition unit, and the recognition time Recognition order determining means for determining the recognized order of each recognized person, wherein the control means is an amount of image data to be displayed corresponding to each recognized person or The size is determined according to the order determined by the recognition order determining means.

請求項10に記載の発明は、請求項1乃至9の何れか一項に記載の画像表示制御装置において、前記判断手段により登録者情報が登録されていないと判断された場合には、前記登録者情報と対応付けられていない画像データを表示させることを特徴とする。   According to a tenth aspect of the present invention, in the image display control device according to any one of the first to ninth aspects, if the registrant information is determined not to be registered by the determining means, the registration is performed. Image data that is not associated with person information is displayed.

請求項11に記載の発明は、請求項1乃至10の何れか一項に記載の画像表示制御装置において、前記認識手段は、カメラにより撮像された画像より前記人を認識することを特徴とする。   The invention according to claim 11 is the image display control device according to any one of claims 1 to 10, wherein the recognition means recognizes the person from an image captured by a camera. .

請求項12に記載の発明は、請求項1乃至10の何れか一項に記載の画像表示制御装置において、前記認識手段は、マイクにより集音された音声より前記人を認識することを特徴とする。   A twelfth aspect of the present invention is the image display control device according to any one of the first to tenth aspects, wherein the recognition means recognizes the person from a sound collected by a microphone. To do.

請求項13に記載の発明は、請求項1乃至10の何れか一項に記載の画像表示制御装置において、前記認識手段は、電子情報読取器により読み取られたIDより前記人を認識することを特徴とする。   According to a thirteenth aspect of the present invention, in the image display control device according to any one of the first to tenth aspects, the recognition means recognizes the person based on an ID read by an electronic information reader. Features.

請求項14に記載の画像表示制御プログラムの発明は、コンピュータを請求項1乃至13のいずれか一項に記載の画像表示制御装置として機能させることを特徴とする。   An invention of an image display control program according to a fourteenth aspect causes a computer to function as the image display control device according to any one of the first to thirteenth aspects.

請求項15に記載の発明は、登録者情報と画像データを対応付けて登録する工程と、所定の場所に存在する人を認識する工程と、前記認識された人に対応する登録者情報が前記データベースに登録されているか否かを判断する工程と、前記登録者情報が登録されていると判断された場合には、当該登録者情報に対応付けられた画像データを表示させる工程と、を備えることを特徴とする。   The invention described in claim 15 includes a step of registering registrant information and image data in association with each other, a step of recognizing a person existing at a predetermined location, and registrant information corresponding to the recognized person Determining whether or not the information is registered in a database, and displaying image data associated with the registrant information when it is determined that the registrant information is registered. It is characterized by that.

請求項1、14、又は15に記載の発明によれば、所定の場所に存在する人を認識し、認識された人に対応する登録者情報がデータベースに登録されているか否かを判断し、前記登録者情報が登録されていると判断された場合には、当該登録者情報に対応付けられた画像データを表示させるように構成したので、ログオン等のユーザ操作の煩雑さを回避しつつ、認識された人毎に登録された画像を表示させることができる。これにより、上記所定の場所に存在する人に対して、その人に関する画像を効果的に見せることができる。   According to the invention described in claim 1, 14, or 15, the person existing in the predetermined place is recognized, it is determined whether or not the registrant information corresponding to the recognized person is registered in the database, When it is determined that the registrant information is registered, the image data associated with the registrant information is configured to be displayed, thus avoiding the complexity of user operations such as logon, Images registered for each recognized person can be displayed. Thereby, it is possible to effectively show an image relating to the person existing in the predetermined place.

請求項2に記載の発明によれば、複数人で表示装置を共用する場合であっても、ログオン等のユーザ操作の煩雑さを回避しつつ、複数の人毎に登録された画像を順番に表示させることができる。これにより、上記所定の場所に存在する夫々の人に対して、夫々の人に関する画像を効果的に見せることができる。   According to the second aspect of the present invention, even when a display device is shared by a plurality of people, images registered for each of a plurality of people are sequentially displayed while avoiding the complexity of user operations such as logon. Can be displayed. Thereby, the image regarding each person can be effectively shown to each person existing in the predetermined place.

請求項3に記載の発明によれば、認識された夫々の人に対応する画像データを、前記夫々の人の滞在時間に応じた表示時間又は表示順序で表示させるので、滞在時間の長短に応じた効果的な画像表示を実現することができる。   According to the third aspect of the invention, the image data corresponding to each recognized person is displayed in the display time or display order corresponding to the stay time of each person. Effective image display can be realized.

請求項4に記載の発明によれば、認識された夫々の人に対応する画像データを、前記夫々の人が認識された順序に応じた表示時間又は表示順序で表示させるので、当該夫々の人が認識された順序に応じた効果的な画像表示を実現することができる。   According to the fourth aspect of the present invention, the image data corresponding to each recognized person is displayed in the display time or the display order corresponding to the order in which the respective persons are recognized. It is possible to realize an effective image display according to the order in which the images are recognized.

請求項5に記載の発明によれば、認識された夫々の人に対応する画像データを、前記夫々の人の滞在時間に応じた量又はサイズで表示させるので、滞在時間の長短に応じた効果的な画像表示を実現することができる。   According to the invention described in claim 5, since the image data corresponding to each recognized person is displayed in an amount or size corresponding to the stay time of each person, the effect according to the length of stay time Image display can be realized.

請求項6に記載の発明によれば、認識された夫々の人に対応する画像データを、前記夫々の人が認識された順序に応じた量又はサイズで表示させるので、当該夫々の人が認識された順序に応じた効果的な画像表示を実現することができる。   According to the invention described in claim 6, since the image data corresponding to each recognized person is displayed in an amount or size according to the order in which each person is recognized, each person is recognized. An effective image display according to the order in which it is performed can be realized.

請求項7に記載の発明によれば、複数人で表示装置を共用する場合であっても、ログオン等のユーザ操作の煩雑さを回避しつつ、複数の人毎に登録された画像を同一画面上に表示させることができる。これにより、上記所定の場所に存在する夫々の人に対して、夫々の人に関する画像を効果的に見せることができる。   According to the seventh aspect of the present invention, even when a display device is shared by a plurality of persons, images registered for a plurality of persons are displayed on the same screen while avoiding the complexity of user operations such as logon. Can be displayed above. Thereby, the image regarding each person can be effectively shown to each person existing in the predetermined place.

請求項8に記載の発明によれば、認識された夫々の人に対応する画像データを、前記夫々の人の滞在時間に応じた量又はサイズで同一画面上に表示させるので、滞在時間の長短に応じた効果的な画像表示を実現することができる。   According to the eighth aspect of the present invention, since the image data corresponding to each recognized person is displayed on the same screen in an amount or size corresponding to the staying time of each person, the length of staying time is shortened. It is possible to realize effective image display according to the above.

請求項9に記載の発明によれば、認識された夫々の人に対応する画像データを、前記夫々の人が認識された順序に応じた量又はサイズで同一画面上で表示させるので、当該夫々の人が認識された順序に応じた効果的な画像表示を実現することができる。   According to the invention described in claim 9, since the image data corresponding to each recognized person is displayed on the same screen in an amount or size according to the order in which each person is recognized. It is possible to realize an effective image display according to the order in which the person is recognized.

請求項10に記載の発明によれば、上記登録者情報が登録されていないと判断された場合には、例えば、視覚的に個人を特定不能な画像を効果的に表示することができる。   According to the tenth aspect of the present invention, when it is determined that the registrant information is not registered, for example, an image that cannot visually identify an individual can be effectively displayed.

請求項11に記載の発明によれば、カメラにより撮像された画像を利用して所定の場所に存在する人を自動的に認識することができ、より一層のユーザ操作の煩雑さを回避することができる。   According to the eleventh aspect of the present invention, it is possible to automatically recognize a person existing at a predetermined location using an image captured by a camera, and to avoid further complicated user operations. Can do.

請求項12に記載の発明によれば、マイクにより集音された音声を利用して所定の場所に存在する人を自動的に認識することができ、より一層のユーザ操作の煩雑さを回避することができる。   According to the twelfth aspect of the present invention, it is possible to automatically recognize a person existing at a predetermined place by using the sound collected by the microphone, and to avoid further complexity of the user operation. be able to.

請求項13に記載の発明によれば、電子情報読取器により読み取られたIDを利用して所定の場所に存在する人を自動的に認識することができ、より一層のユーザ操作の煩雑さを回避することができる。   According to the thirteenth aspect of the present invention, it is possible to automatically recognize a person existing in a predetermined place by using the ID read by the electronic information reader, further reducing the complexity of the user operation. It can be avoided.

本実施形態に係る画像表示装置の概要構成例を示す図である。It is a figure which shows the example of a schematic structure of the image display apparatus which concerns on this embodiment. 登録者情報データベース41に登録された内容の一例を示す図である。It is a figure which shows an example of the content registered into the registrant information database. 本実施形態に係る画像表示装置の制御部7における画像表示処理の一例を示すフローチャートである。It is a flowchart which shows an example of the image display process in the control part 7 of the image display apparatus which concerns on this embodiment. 図3のステップS6に示す「在宅者が複数人の場合の表示制御処理」の具体例を示すフローチャートである。It is a flowchart which shows the specific example of "the display control process in case a plurality of people are at home" shown in step S6 of FIG. マルチ表示形式で画像が表示された画面例を示す図である。It is a figure which shows the example of a screen as which the image was displayed by the multi display format.

以下、本発明の実施形態を図面に基づいて説明する。なお、以下に説明する実施の形態は、画像表示装置に対して本発明を適用した場合の実施形態である。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. The embodiment described below is an embodiment when the present invention is applied to an image display device.

1.画像表示装置の構成及び機能
始めに、図1等を参照して、本実施形態に係る画像表示装置の構成及び機能について説明する。
[ 1. Configuration and function of image display apparatus ]
First, the configuration and function of the image display apparatus according to the present embodiment will be described with reference to FIG.

図1は、本実施形態に係る画像表示装置の概要構成例を示す図である。   FIG. 1 is a diagram illustrating a schematic configuration example of an image display apparatus according to the present embodiment.

図1に示すように、画像表示装置Sは、ディスプレイ(表示装置)1、カメラ2、マイク3、記憶部4、操作部5、通信I/F6、制御部7、及び電子情報読取器8等を備えて構成されている。   As shown in FIG. 1, an image display device S includes a display (display device) 1, a camera 2, a microphone 3, a storage unit 4, an operation unit 5, a communication I / F 6, a control unit 7, an electronic information reader 8, and the like. It is configured with.

ディスプレイ1は、例えばフォトフレームに装着されており、例えば住宅やオフィスの部屋内において複数の人(在宅者)が当該ディスプレイ1の画面を見ることができる位置に設置されている。カメラ1は上記部屋内の所定の場所に存在する人(例えば、部屋に出入りする人)を撮像できる位置に、マイク3は上記部屋内の所定の場所に存在する人が発した音声を集音できる位置に、電子情報読取器8は上記部屋の出入り口など所定の場所に存在することが確認できる位置に、夫々設置されている。   The display 1 is attached to, for example, a photo frame, and is installed at a position where a plurality of people (residents) can see the screen of the display 1 in a room of a house or office, for example. The camera 1 picks up the sound uttered by the person existing in the predetermined place in the room, and the microphone 3 collects the sound emitted by the person existing in the predetermined place in the room. The electronic information reader 8 is installed at a position where it can be confirmed that the electronic information reader 8 exists at a predetermined place such as the entrance of the room.

記憶部4は、例えばハードディスクや不揮発性半導体メモリ等からなり、各種プログラム及びデータが記憶されている。また、記憶部4には、登録者情報データベース(DB)41が構築されている。   The storage unit 4 includes, for example, a hard disk or a nonvolatile semiconductor memory, and stores various programs and data. In addition, a registrant information database (DB) 41 is constructed in the storage unit 4.

図2は、登録者情報データベース41に登録された内容の一例を示す図である。   FIG. 2 is a diagram illustrating an example of contents registered in the registrant information database 41.

登録者情報データベース41には、登録者情報と、画像データ(例えば、TIFF、GIF、又はJPEG等の形式の画像ファイル)が対応付けられて登録(記憶)されている。登録者情報には、例えば在宅者となることが予想される者の名前、識別情報(ID)、及び登録者を特定するための登録者特徴情報(例えば、登録者の顔画像データ、音声特徴データ、カードのID)等が含まれる。登録者情報に含まれる名前及び識別情報(ID)は、例えば在宅者により操作部5から入力され登録される。また、画像データ及び登録者特徴情報は、在宅者による操作部5からの指示にしたがって制御部7により、通信I/F6及び通信手段を介して外部機器(例えば、デジカメ、携帯端末、パーソナルコンピュータ、サーバ等)から読み込まれ登録される。なお、登録者情報データベース41に登録者情報が登録された者を、以下、「登録者」という。   In the registrant information database 41, registrant information and image data (for example, an image file in a format such as TIFF, GIF, or JPEG) are registered (stored) in association with each other. The registrant information includes, for example, the name of a person who is expected to be at home, identification information (ID), and registrant feature information for identifying the registrant (for example, registrant face image data, voice feature) Data, card ID) and the like. The name and identification information (ID) included in the registrant information are input and registered from the operation unit 5 by, for example, a person at home. Further, the image data and the registrant characteristic information are transmitted by the control unit 7 in accordance with an instruction from the operation unit 5 by a person at home via the communication I / F 6 and communication means (for example, a digital camera, a portable terminal, a personal computer, Server). A person whose registrant information is registered in the registrant information database 41 is hereinafter referred to as a “registrant”.

また、登録者情報に対応付けられる画像データに係る画像は、例えば各登録者の容姿を写した画像(写真画像)や各登録者により撮影された画像等であり、一人の登録者に対して複数の画像データを登録することができる。   Further, the image related to the image data associated with the registrant information is, for example, an image (photo image) showing the appearance of each registrant or an image taken by each registrant. Multiple image data can be registered.

制御部7は、例えばマイクロコンピュータ等からなり、当該コンピュータにより所定のプログラム(本発明の画像表示制御プログラム)が実行されることにより、在宅者判定部71(本発明における認識手段、及び判断手段の一例)、滞在時間算出部72(滞在時間算出手段の一例)、認識順序決定部73(認識順序決定手段の一例)、及び表示制御部74等(本発明における制御手段の一例)として機能する。   The control unit 7 includes, for example, a microcomputer and the like, and when a predetermined program (the image display control program of the present invention) is executed by the computer, the occupant determination unit 71 (the recognition unit and the determination unit of the present invention). An example), a stay time calculation unit 72 (an example of stay time calculation means), a recognition order determination unit 73 (an example of recognition order determination means), a display control unit 74, and the like (an example of a control means in the present invention).

在宅者判定部71は、上記部屋内の所定の場所に存在する(例えば、当該部屋に入ってきた)人を認識する。例えば、カメラ2により撮像された画像から人の顔画像が抽出できれば、人が認識できたことになる(この時点は誰であるか未知)。なお、人の顔画像の抽出方法は、公知であるため詳しい説明を省略する。   The at-home person determination unit 71 recognizes a person existing at a predetermined location in the room (for example, entering the room). For example, if a person's face image can be extracted from the image captured by the camera 2, the person can be recognized (who is unknown at this time). Since the method for extracting a human face image is well known, detailed description thereof is omitted.

そして、在宅者判定部71は、認識した人に対応する登録者情報が登録者情報データベース41に登録されているか否かを判断する。例えば在宅者判定部71は、上記抽出された顔画像と、登録者情報データベース41に登録された各登録者特徴情報に含まれる顔画像との類似性の有無を判断し、当該類似性が有る登録者特徴情報が、登録者情報データベース41に登録されている場合に、上記認識した人に対応する登録者情報が登録者情報データベース41に登録されていると判断する。   Then, the resident determination unit 71 determines whether or not the registrant information corresponding to the recognized person is registered in the registrant information database 41. For example, the resident determination unit 71 determines whether or not there is a similarity between the extracted face image and the face image included in each registrant feature information registered in the registrant information database 41, and there is the similarity. When the registrant characteristic information is registered in the registrant information database 41, it is determined that the registrant information corresponding to the recognized person is registered in the registrant information database 41.

ここで、類似性有無の判断手法は、公知であるので詳しい説明を省略するが、例えば、上記抽出された顔画像から顔の特徴をよく表す顔特徴点(例えば、目、鼻、口等)が抽出され、これらの特徴点を結ぶ顔グラフが作成される。そして、作成された顔グラフと、登録者情報データベース41に登録された顔画像に基づき上記と同じように作成された顔グラフ(当該顔グラフを登録者情報データベース41に予め登録しておいてもよい)との一致度の割合が算出され、その割合が所定値以上である場合に、類似性有と判断される。なお、上記抽出された顔画像と上記登録されている顔画像の向きが異なると、類似性が失われてしまうだけでなく、顔特徴点の検出もうまく行えなくなるという問題が生じるため、最初に顔の向きを推定(例えば、右目、左目、及び口の3点を頂点とする三角形の形状から顔の向きを推定)し、その向きに応じて顔グラフを変換することで当該問題を解消することができる。   Here, since the method for determining the presence / absence of similarity is well known, detailed description thereof is omitted. For example, facial feature points (for example, eyes, nose, mouth, etc.) that well represent facial features from the extracted face image. Are extracted, and a face graph connecting these feature points is created. Then, based on the created face graph and the face image registered in the registrant information database 41, a face graph created in the same manner as described above (even if the face graph is registered in the registrant information database 41 in advance). If the ratio is equal to or greater than a predetermined value, it is determined that there is similarity. Note that if the orientation of the extracted face image and the registered face image is different, not only will the similarity be lost, but there will also be a problem that face feature points cannot be detected well. Estimate the orientation of the face (for example, estimate the orientation of the face from the shape of a triangle with the right eye, left eye, and mouth as vertices), and convert the face graph according to the orientation to solve the problem be able to.

こうして、上記認識された人に対応する登録者情報が登録者情報データベース41に登録されていると判断された場合、当該人(登録者)が認識された時の認識時刻を示す情報が登録者情報に対応付けられてメモリ(認識時刻記憶手段)に記憶され、かつ、メモリに記憶されている、当該登録者に対応する在宅者フラグが“0”→“1”に変更される。   Thus, when it is determined that the registrant information corresponding to the recognized person is registered in the registrant information database 41, information indicating the recognition time when the person (registrant) is recognized is the registrant. The at-home person flag corresponding to the registrant stored in the memory (recognition time storage means) in association with the information and stored in the memory is changed from “0” to “1”.

ところで、上記部屋に複数の人が、例えば、時間を隔てて入ってきた場合には、在宅者判定部71は、これらの複数の人を順次認識し、当該認識された夫々の人に対応する登録者情報が登録者情報データベース41に登録されているか否かを上述したように判断する。そして、上記認識された複数の人のうち、登録者情報が登録者情報データベース41に登録されている登録者については、上記認識時刻を示す情報が夫々の登録者情報に対応付けられてメモリに記憶され、かつ、メモリに記憶されている、当該登録者に対応する在宅者フラグが“0”→“1”に変更される。   By the way, when a plurality of people enter the room at, for example, intervals, the resident determination unit 71 sequentially recognizes the plurality of people and corresponds to each recognized person. Whether or not the registrant information is registered in the registrant information database 41 is determined as described above. And about the registrant whose registrant information is registered into the registrant information database 41 among the recognized several person, the information which shows the said recognition time is matched with each registrant information, and is stored in memory. The at-home person flag stored in the memory and corresponding to the registrant is changed from “0” to “1”.

また、滞在時間算出部72は、上記認識時刻から現在時刻までの滞在時間を上記認識された夫々の人毎に算出する。   In addition, the stay time calculation unit 72 calculates the stay time from the recognition time to the current time for each recognized person.

認識順序決定部73は、上記認識時刻に基づいて、当該認識された夫々の人の当該認識された順序を決定する。   The recognition order determination unit 73 determines the recognized order of each recognized person based on the recognition time.

そして、表示制御部74は、上記認識された人に対応する登録者情報が登録者情報データベース41に登録されていると判断された場合には、当該登録者情報に対応付けられた画像データに係る画像をディスプレイ1上に表示させる。一方、上記認識された人であって、上記登録者情報の登録されている人が複数である場合には、当該認識された夫々の人に対応する画像データに係る画像を、所定の表示順序で、例えばスライドショー形式で順番に表示させたり、或いはこれらの画像データに係る画像を所定のサイズで、例えばマルチ表示形式で同一画面上に表示させる。かかる表示制御処理の詳細については後述する。   When it is determined that the registrant information corresponding to the recognized person is registered in the registrant information database 41, the display control unit 74 adds the image data associated with the registrant information to the image data. Such an image is displayed on the display 1. On the other hand, when there are a plurality of recognized persons who are registered in the registrant information, an image related to the image data corresponding to each recognized person is displayed in a predetermined display order. Thus, for example, the images are sequentially displayed in a slide show format, or images related to these image data are displayed on the same screen in a predetermined size, for example, a multi display format. Details of such display control processing will be described later.

なお、部屋から出て行く登録者がカメラ2により撮影され、在宅者判定部71により認識された場合には、当該登録者に対応する認識時刻を示す情報がメモリから削除され、かつ、メモリに記憶されている、当該登録者に対応する在宅者フラグが“1”→“0”に変更される。   In addition, when the registrant who goes out of the room is photographed by the camera 2 and recognized by the resident determination unit 71, the information indicating the recognition time corresponding to the registrant is deleted from the memory and stored in the memory. The stored home flag corresponding to the registrant is changed from “1” to “0”.

2.画像表示装置Sの動作
次に、図3を参照して、本実施形態に係る画像表示装置の動作について説明する。
[ 2. Operation of image display device S ]
Next, the operation of the image display apparatus according to the present embodiment will be described with reference to FIG.

図3は、本実施形態に係る画像表示装置の制御部7における画像表示処理の一例を示すフローチャートであり、図4は、図3のステップS6に示す「在宅者が複数人の場合の表示制御処理」の具体例を示すフローチャートであり、図4(A)はスライドショー形式の表示制御処理を、図4(B)はマルチ表示形式の表示制御処理を、夫々示す。   FIG. 3 is a flowchart showing an example of image display processing in the control unit 7 of the image display apparatus according to the present embodiment. FIG. 4 shows “display control in the case where there are a plurality of people at home” shown in step S6 of FIG. 4A is a flowchart illustrating a specific example of “process”, FIG. 4A illustrates a slide control display control process, and FIG. 4B illustrates a multi display display control process.

図3に示す処理は、例えば、制御部7がカメラ2により撮像された画像を周期的に取り込み、当該画像中から人(顔画像)を認識することにより開始される。当該処理が開始されると、制御部7(在宅者判定部71)は、例えば、上述したように、抽出した顔画像と、登録者情報データベース41に登録された各登録者特徴情報に含まれる顔画像との類似性の有無を判断することにより、上記認識した人に対応する登録者情報が登録者情報データベース41に登録されているか否かを判断する(ステップS1)。そして、制御部7(在宅者判定部71)は、登録者情報が登録者情報データベース41に登録されていると判断した場合には(ステップS1:YES)、当該登録者の登録者情報に対応付けて、認識時刻を示す情報をメモリに記憶し、当該登録者に対応する在宅者フラグを“0”→“1”に変更する(ステップS2)。   The process illustrated in FIG. 3 is started, for example, when the control unit 7 periodically captures an image captured by the camera 2 and recognizes a person (face image) from the image. When the processing is started, the control unit 7 (at-home person determination unit 71) is included in the extracted face image and each registrant characteristic information registered in the registrant information database 41 as described above, for example. By determining whether there is similarity to the face image, it is determined whether or not the registrant information corresponding to the recognized person is registered in the registrant information database 41 (step S1). When the control unit 7 (at-home person determination unit 71) determines that the registrant information is registered in the registrant information database 41 (step S1: YES), it corresponds to the registrant information of the registrant. In addition, information indicating the recognition time is stored in the memory, and the resident flag corresponding to the registrant is changed from “0” to “1” (step S2).

なお、制御部7(在宅者判定部71)は、画像中から複数の人(顔画像)を認識した場合には、夫々の人の顔画像と、登録者情報データベース41に登録された各登録者特徴情報に含まれる顔画像との類似性の有無を判断することにより、当該夫々の人に対応する登録者情報が登録者情報データベース41に登録されているか否かを判断し、登録者情報が登録されている人(登録者)の登録者情報に対応付けて、認識時刻を示す情報をメモリに記憶し、当該登録者に対応する在宅者フラグを“0”→“1”に変更することになる。   When the control unit 7 (at-home person determination unit 71) recognizes a plurality of people (face images) from the image, each person's face image and each registration registered in the registrant information database 41 are displayed. It is determined whether or not registrant information corresponding to each person is registered in the registrant information database 41 by determining whether or not there is similarity to the face image included in the person feature information. The information indicating the recognition time is stored in the memory in association with the registrant information of the person (registrant) who is registered, and the resident flag corresponding to the registrant is changed from “0” to “1”. It will be.

一方、登録者情報が登録者情報データベース41に登録されていない場合(ステップS1:NO)、制御部7(在宅者判定部71)は、当該未登録者に対して登録者と区別可能な一時的な識別情報(ID)を発行し、当該識別情報に対応付けて、認識時刻を示す情報をメモリに記憶し、当該未登録者に対応する在宅者フラグ“1”をメモリに記憶する(ステップS3)。   On the other hand, when the registrant information is not registered in the registrant information database 41 (step S1: NO), the control unit 7 (at-home person determination unit 71) temporarily distinguishes the unregistered person from the registrant. Specific identification information (ID) is issued, information indicating the recognition time is stored in the memory in association with the identification information, and a resident flag “1” corresponding to the unregistered person is stored in the memory (step) S3).

次いで、制御部7(在宅者判定部71)は、在宅者が複数であるか否かを、例えば在宅者フラグを参照することにより判別し(ステップS4)、複数でない(1人)場合には(ステップS4:NO)、ステップS5に進み、複数である場合には(ステップS4:YES)、ステップS8に進む。   Next, the control unit 7 (at-home person determination unit 71) determines whether there are a plurality of at-home persons, for example, by referring to the at-home person flag (step S4). (Step S4: NO), the process proceeds to Step S5, and when there are a plurality (Step S4: YES), the process proceeds to Step S8.

ステップS5では、制御部7(在宅者判定部71)は、在宅者が未登録者であるか否かを、識別情報を参照することにより判別し、在宅者が未登録者でない、すなわち、登録者である場合には(ステップS5:NO)、ステップS6に進み、在宅者が未登録者である場合には(ステップS5:YES)、ステップS7に進む。   In step S5, the control unit 7 (at-home person determination unit 71) determines whether the at-home person is an unregistered person by referring to the identification information, and the at-home person is not an unregistered person, that is, registered. When the person is a person (step S5: NO), the process proceeds to step S6. When the person at home is an unregistered person (step S5: YES), the process proceeds to step S7.

ステップS6では、制御部7(表示制御部74)は、上記在宅者フラグが“1”である登録者の登録者情報に対応付けられた画像データを記憶部12から読み込み、当該画像をディスプレイ1上に表示させる(在宅者が1人の場合の表示制御処理)。このとき、制御部7(表示制御部74)は、当該登録者情報に複数の画像データが対応付けられて登録されている場合、これらの画像データに係る画像を、例えばスライドショー形式で順番に繰り返し表示させたり、或いはこれらの画像データに係る画像をマルチ表示形式で同一画面上に表示(継続表示)させる。   In step S 6, the control unit 7 (display control unit 74) reads image data associated with the registrant information of the registrant whose home-in-home flag is “1” from the storage unit 12 and displays the image on the display 1. It is displayed on the top (display control processing when there is only one resident). At this time, when a plurality of pieces of image data are registered in association with the registrant information, the control unit 7 (display control unit 74) sequentially repeats the images related to these image data in a slide show format, for example. Or display images related to these image data in the multi-display format on the same screen (continuous display).

ステップS7では、上記在宅者フラグが“1”である未登録者の場合に表示するべき未登録者用の画像データを記憶部12から読み込み、当該画像をディスプレイ1上に表示させる。ここで、未登録者用の画像としては、例えば、視覚的に個人を特定不能な画像(複数人の集合写真画像や風景画像等)が挙げられる。   In step S <b> 7, the image data for the unregistered person to be displayed in the case of the unregistered person whose home flag is “1” is read from the storage unit 12 and the image is displayed on the display 1. Here, as an image for an unregistered person, for example, an image (such as a group photo image or a landscape image of a plurality of persons) in which an individual cannot be identified visually can be cited.

なお、当該図3に示す処理終了後はその他の処理に移行することになるが上記ステップS6又はS7の処理による画像の表示は維持され、この間に再び人が認識されると図3に示す処理が再び開始される。   Note that after the process shown in FIG. 3 is completed, the process proceeds to other processes. However, the display of the image by the process of step S6 or S7 is maintained, and if a person is recognized again during this process, the process shown in FIG. Will start again.

一方、ステップS8では、制御部7(在宅者判定部71)は、上記複数の在宅者中に未登録者が含まれるか否かを、識別情報を参照することにより判別し、上記複数の在宅者中に未登録者が含まれる場合には(ステップS8:YES)、ステップS7に進み、個人を特定不能な例えば風景画像が表示される。つまり、在宅者中に、登録者と未登録者がいる場合、未登録者用の画像が優先されることになる。これにより、例えば、部屋にいる在宅者が、家族(登録者)とセールスマン(未登録者)とすると、風景画像が優先的に表示され、セールスマンに見られたくない登録者の写真画像等が表示されてしまうことを回避することができる。   On the other hand, in step S8, the control unit 7 (at-home person determination unit 71) determines whether or not an unregistered person is included in the plurality of at-home persons by referring to the identification information, and the plurality of at-home places. If an unregistered person is included in the person (step S8: YES), the process proceeds to step S7, and for example, a landscape image incapable of specifying an individual is displayed. In other words, when there are registered persons and unregistered persons among the home-staying persons, the image for unregistered persons is given priority. Thus, for example, if the staying person in the room is a family (registrant) and a salesman (unregistered person), the landscape image is preferentially displayed, and the registrant's photo image that the salesman does not want to see Can be prevented from being displayed.

一方、ステップS9では、制御部7(表示制御部74)は、上記在宅者フラグが“1”である各登録者の登録者情報に対応付けられた画像データを記憶部12から読み込み、当該画像をディスプレイ1上に表示させる(在宅者が複数人の場合の表示制御処理)。   On the other hand, in step S9, the control unit 7 (display control unit 74) reads the image data associated with the registrant information of each registrant with the resident flag being “1” from the storage unit 12, and the image Is displayed on the display 1 (display control processing when there are a plurality of people at home).

ここで、図4(A)に示すスライドショー形式の表示制御処理例では、制御部7(表示制御部74)は、上記在宅者フラグが“1”である各登録者に対応する画像の表示順序(1画面上に1つずつ表示される際の表示順)を決定する(ステップS91)。   Here, in the display control processing example in the slide show format shown in FIG. 4A, the control unit 7 (display control unit 74) displays the image corresponding to each registrant whose home-in-home flag is “1”. (Display order when one image is displayed on one screen) is determined (step S91).

例えば、制御部7(表示制御部74)は、当該登録者に対応する画像の表示順序を、当該部屋における夫々の登録者の滞在時間に応じて決定する。この滞在時間は、滞在時間算出部72により、例えば、上記記憶された認識時刻から現在時刻までの時間として算出される。この場合において、例えば、上記在宅者フラグが“1”である人が、登録者A、登録者B、登録者Cの3人であり、登録者Aの滞在時間が2時間、登録者Bの滞在時間が3時間、登録者Cの滞在時間が1時間であるとすると、登録者B→登録者A→登録者Cの順で表示順序が決定される。この場合、滞在時間が長い人ほど先に(優先して)画像を表示することができる。つまり、滞在時間の長短に応じた効果的な画像表示を実現することができる。   For example, the control part 7 (display control part 74) determines the display order of the image corresponding to the said registrant according to the stay time of each registrant in the said room. The stay time is calculated by the stay time calculation unit 72 as, for example, the time from the stored recognition time to the current time. In this case, for example, there are three people whose resident person flag is “1”, that is, registrant A, registrant B, and registrant C. If the stay time is 3 hours and the stay time of the registrant C is 1 hour, the display order is determined in the order of registrant B → registrant A → registrant C. In this case, an image can be displayed earlier (priority) as the staying time is longer. That is, it is possible to realize effective image display according to the length of stay time.

或いは、制御部7(表示制御部74)は、当該各登録者に対応する画像の表示順序を、認識された順序に応じて決定する。この認識された順序は、認識順序決定部73により、上記記憶された認識時刻に基づき決定される(つまり、部屋に入ってきた順)。この場合において、例えば、上記と同様、上記在宅者フラグが“1”である人が3人であり、登録者Aの認識時刻が19:00、登録者Bの認識時刻が同日の18:00、登録者Cの認識時刻が同日の20:00であるとすると、登録者B→登録者A→登録者Cの順で表示順序が決定される。この場合、部屋に早く入ってきた(認識時刻が早い)人ほど先に(優先して)画像を表示することができる。つまり、夫々の人が認識された順序に応じた効果的な画像表示を実現することができる。   Or the control part 7 (display control part 74) determines the display order of the image corresponding to the said each registrant according to the recognized order. The recognized order is determined by the recognition order determining unit 73 based on the stored recognition time (that is, the order of entering the room). In this case, for example, similarly to the above, there are three people whose home flag is “1”, the registrant A's recognition time is 19:00, and the registrant B's recognition time is 18:00 on the same day. If the recognition time of the registrant C is 20:00 on the same day, the display order is determined in the order of registrant B → registrant A → registrant C. In this case, an image can be displayed earlier (prioritized) as the person enters the room earlier (the recognition time is earlier). That is, an effective image display according to the order in which each person is recognized can be realized.

なお、かかる表示順序は、初期設定に応じて決定(例えば、画像データの登録順に決定)されるように構成してもよい。   The display order may be determined according to the initial setting (for example, determined in the order of registration of image data).

次いで、制御部7(表示制御部74)は、上記表示順序が決定された各登録者に対応する画像の表示時間(1回の表示の時間的な長さ)を決定する(ステップS92)。   Next, the control unit 7 (display control unit 74) determines the display time (the time length of one display) of the image corresponding to each registrant whose display order has been determined (step S92).

例えば、制御部7(表示制御部74)は、各登録者に対応する画像の表示時間を、当該部屋における夫々の登録者の滞在時間に応じて決定する。この場合、滞在時間が長い人ほど長い時間、画像を表示することができる。例えば、登録者Bの画像が20秒間表示された時に登録者Aの画像に切り替わり、当該登録者Aの画像が30秒間表示された時に登録者Cの画像に切り替わる。これにより、滞在時間の長短に応じた効果的な画像表示を実現することができる。   For example, the control part 7 (display control part 74) determines the display time of the image corresponding to each registrant according to the stay time of each registrant in the said room. In this case, the longer the staying time, the longer the image can be displayed. For example, when the image of the registrant B is displayed for 20 seconds, the image is switched to the image of the registrant A, and when the image of the registrant A is displayed for 30 seconds, the image is switched to the image of the registrant C. Thereby, the effective image display according to the length of stay time is realizable.

或いは、制御部7(表示制御部74)は、上記表示順序が決定された各登録者に対応する画像の表示時間を、上記記憶された認識時刻に基づき、認識された順序に応じて決定する。この場合、部屋に早く入ってきた人ほど長い時間、画像を表示することができる。つまり、夫々の人が認識された順序に応じた効果的な画像表示を実現することができる。   Or the control part 7 (display control part 74) determines the display time of the image corresponding to each registrant whose said display order was determined based on the said recognized recognition time according to the recognized order. . In this case, an image can be displayed for a longer time as the person enters the room earlier. That is, an effective image display according to the order in which each person is recognized can be realized.

なお、かかる表示時間は、初期設定に応じて決定(例えば、全ての登録者の表示時間は同じ時間に決定)されるように構成してもよい。   The display time may be determined according to the initial setting (for example, the display time of all registrants is determined at the same time).

次いで、制御部7(表示制御部74)は、上記表示順序及び表示時間が決定された各登録者の登録者情報に対応付けられた画像データ等を記憶部12から読み込み、当該画像を、上記決定した表示順序及び表示時間にしたがって、例えばスライドショー形式でディスプレイ1上に表示させる(ステップS93)。   Next, the control unit 7 (display control unit 74) reads image data or the like associated with the registrant information of each registrant whose display order and display time are determined from the storage unit 12, and reads the image as described above. According to the determined display order and display time, for example, it is displayed on the display 1 in a slide show format (step S93).

なお、図4(A)及び図3に示す処理終了後はその他の処理に移行することになるが各登録者に対応する画像は上記決定された表示順序で繰り返し表示されることになり、この間に再び人が認識されると図3に示す処理が再び開始される。   In addition, after the process shown in FIG. 4A and FIG. 3 is finished, the process shifts to another process, but the image corresponding to each registrant is repeatedly displayed in the determined display order. When the person is recognized again, the process shown in FIG. 3 is started again.

一方、図4(B)に示すマルチ表示形式の表示制御処理例では、例えば、制御部7(表示制御部74)は、上記在宅者フラグが“1”である各登録者に対応する画像の表示順序(1画面上に複数表示される際の並び順)を決定する(ステップS95)。   On the other hand, in the display control processing example of the multi-display format shown in FIG. 4B, for example, the control unit 7 (display control unit 74) displays an image corresponding to each registrant with the resident flag being “1”. The display order (arrangement order when a plurality of images are displayed on one screen) is determined (step S95).

例えば、当該表示順序は、上記ステップS91の処理と同様、当該部屋における夫々の人の滞在時間、又は認識された順序に応じて決定される。   For example, the display order is determined according to the stay time of each person in the room or the recognized order, as in the process of step S91.

なお、かかる表示順序は、初期設定に応じて決定(例えば、画像データの登録順に決定)されるように構成してもよい。   The display order may be determined according to the initial setting (for example, determined in the order of registration of image data).

次いで、制御部7(表示制御部74)は、上記表示順序が決定された各登録者に対応する画像の表示すべき量又はサイズを決定する(ステップS96)。   Next, the control unit 7 (display control unit 74) determines the amount or size of the image to be displayed corresponding to each registrant whose display order has been determined (step S96).

例えば、制御部7(表示制御部74)は、各登録者に対応する画像の表示すべき量(例えば、数)、又はサイズを、当該部屋における夫々の登録者の滞在時間に応じて決定する。画像の表示すべき量を決定する場合において、例えば、各人の画像データが夫々複数記憶されている場合、滞在時間が長い人ほど同一画面上に多くの画像を表示することができる。また、画像の表示すべきサイズ(言い換えれば、1画面上に占める画像の面積)を決定する場合において、滞在時間が長い人ほど同一画面上に複数配列表示される画像のサイズを大きくすることができる。つまり、滞在時間の長短に応じた効果的な画像表示を実現することができる。   For example, the control unit 7 (display control unit 74) determines the amount (for example, the number) or the size of the image corresponding to each registrant according to the stay time of each registrant in the room. . When determining the amount of images to be displayed, for example, when a plurality of pieces of image data for each person are stored, the longer the staying time, the more images can be displayed on the same screen. Further, when determining the size of an image to be displayed (in other words, the area of the image on one screen), the longer the staying time, the larger the size of the images displayed on the same screen. it can. That is, it is possible to realize effective image display according to the length of stay time.

或いは、制御部7(表示制御部74)は、上記表示順序が決定された各登録者に対応する画像の表示すべき量又はサイズを、上記記憶された認識時刻に基づき、認識された順序に応じて決定する。画像の表示すべき量を決定する場合において、例えば、各人の画像データが夫々複数記憶されている場合、部屋に早く入ってきた人ほど同一画面上に多くの画像を表示することができる。また、画像の表示すべきサイズを決定する場合において、部屋に早く入ってきた人ほど同一画面上に複数配列表示される画像のサイズを大きくすることができる。つまり、夫々の人が認識された順序に応じた効果的な画像表示を実現することができる。   Alternatively, the control unit 7 (display control unit 74) sets the amount or size of the image corresponding to each registrant whose display order is determined in the recognized order based on the stored recognition time. Decide accordingly. When determining the amount of images to be displayed, for example, when a plurality of pieces of image data for each person are stored, a person who enters the room earlier can display more images on the same screen. In addition, when determining the size of an image to be displayed, the person who enters the room earlier can increase the size of a plurality of images displayed on the same screen. That is, an effective image display according to the order in which each person is recognized can be realized.

なお、かかる画像の表示すべき量又はサイズは、初期設定に応じて決定(例えば、各登録者の画像の表示すべき量及びサイズは同一に決定)されるように構成してもよい。   The amount or size of the image to be displayed may be determined according to the initial setting (for example, the amount and size of each registrant's image to be displayed are determined to be the same).

次いで、制御部7(表示制御部74)は、上記表示順序、及び画像の表示すべき量又はサイズが決定された各登録者の登録者情報に対応付けられた画像データ等を記憶部12から読み込み、当該画像を、上記決定した表示順序、及び画像の表示すべき量又はサイズにしたがって、例えばマルチ表示形式でディスプレイ1の同一画面上に表示させる(ステップS97)。   Next, the control unit 7 (display control unit 74) stores the image data and the like associated with the registrant information of each registrant for which the display order and the amount or size of the image to be displayed are determined from the storage unit 12. The image is read and displayed on the same screen of the display 1 in the multi-display format, for example, according to the determined display order and the amount or size of the image to be displayed (step S97).

図5は、マルチ表示形式で画像が表示された画面例を示す図である。図5に示す例では、登録者B→登録者A→登録者Cの順に画像のサイズが小さくなっている。   FIG. 5 is a diagram illustrating an example of a screen on which an image is displayed in a multi display format. In the example shown in FIG. 5, the image size decreases in the order of registrant B → registrant A → registrant C.

なお、図4(A)に示すスライドショー形式の表示制御処理においても、上記決定された表示順序(1画面上に1つずつ表示される際の表示順)及び表示時間で表示されるべき画像の量又はサイズを、各画像に対応する夫々の人の滞在時間、又は認識された順序に応じて決定し、例えばマルチ表示形式で同一画面上に表示させるように構成してもよい。この場合、例えば、登録者Bの画像→登録者Aの画像→登録者Cの画像の順で表示されるときに、例えば、ある画面上に表示される登録者Bの画像の量又はサイズが、次の画面上に表示される登録者Aの画像の量又はサイズによりも多く又は大きくすることができる。   Note that also in the slide show format display control process shown in FIG. 4A, the above-determined display order (display order when one image is displayed on one screen) and the display time of images to be displayed are displayed. The amount or size may be determined according to the stay time of each person corresponding to each image or the recognized order, and may be configured to be displayed on the same screen in a multi-display format, for example. In this case, for example, when the image of the registrant B → the image of the registrant A → the image of the registrant C is displayed in this order, for example, the amount or size of the image of the registrant B displayed on a certain screen is It can be increased or increased depending on the amount or size of the image of the registrant A displayed on the next screen.

以上説明したように、上記実施形態によれば、ログオン等のユーザ操作の煩雑さを回避しつつ、認識された人毎に登録された画像を表示させることができ、特に、複数人でディスプレイ1を共用する場合であっても、ログオン等のユーザ操作の煩雑さを回避しつつ、複数の人毎に登録された画像を順番に表示させることができる。これにより、上記所定の場所に存在する夫々の人に対して、夫々の人に関する画像を効果的に見せることができる。   As described above, according to the above embodiment, it is possible to display an image registered for each recognized person while avoiding the complexity of user operations such as logon, and in particular, the display 1 can be displayed by a plurality of persons. Even when sharing images, images registered for a plurality of people can be displayed in order while avoiding the complexity of user operations such as logon. Thereby, the image regarding each person can be effectively shown to each person existing in the predetermined place.

なお、上記実施形態においては、撮像された画像より人を認識するように構成したが、別の方法により人を認識するように構成してもよい。例えば、マイク3により集音された音声より人を認識するように構成してもよい。この場合、上述した登録者特徴情報として登録者の音声特徴データを登録しておき、集音された音声から人の音声の特徴(例えば、音声波形パターン)を表す音声特徴データを抽出し、抽出された音声特徴データと、登録者情報データベース41に登録された各登録者特徴情報に含まれる音声特徴データとの類似性の有無を判断することにより、上記認識した人に対応する登録者情報が登録者情報データベース41に登録されているか否かを判断することなる。   In the above-described embodiment, the person is recognized from the captured image. However, the person may be recognized by another method. For example, you may comprise so that a person may be recognized from the audio | voice collected with the microphone 3. FIG. In this case, the registrant's voice feature data is registered as the above-described registrant feature information, and voice feature data representing a human voice feature (for example, a voice waveform pattern) is extracted from the collected voice and extracted. The registrant information corresponding to the recognized person is determined by determining whether or not there is similarity between the recorded voice feature data and the voice feature data included in each registrant feature information registered in the registrant information database 41. It is determined whether or not it is registered in the registrant information database 41.

また、別の例として、電子情報読取器8(例えば、ICカードリーダ)により、在宅者が所持するICカード(或いはICタグ)から読み取られたカードのIDより人を認識するように構成してもよい。更に別の例として、画像表示装置Sに登録者毎に登録された番号を入力させ、当該番号より人を認識するように構成してもよい。   As another example, the electronic information reader 8 (for example, an IC card reader) is configured to recognize a person based on an ID of a card read from an IC card (or IC tag) possessed by a person at home. Also good. As yet another example, the image display device S may be configured to input a number registered for each registrant and recognize a person from the number.

1 ディスプレイ
2 カメラ
3 マイク
4 記憶部
5 操作部
6 通信I/F
7 制御部
8 電子情報読取器
41 登録者情報データベース
71 在宅者判定部
72 滞在時間算出部
73 認識順序決定部
74 表示制御部
S 画像表示装置
1 Display 2 Camera 3 Microphone 4 Storage Unit 5 Operation Unit 6 Communication I / F
7 control unit 8 electronic information reader 41 registrant information database 71 resident determination unit 72 stay time calculation unit 73 recognition order determination unit 74 display control unit S image display device

Claims (15)

登録者情報と画像データを対応付けて登録するデータベースと、
所定の場所に存在する人を認識する認識手段と、
前記認識手段により前記認識された人に対応する登録者情報が前記データベースに登録されているか否かを判断する判断手段と、
前記判断手段により前記登録者情報が登録されていると判断された場合には、当該登録者情報に対応付けられた画像データを表示させる制御手段と、
を備えることを特徴とする画像表示制御装置。
A database for registering registrant information and image data in association with each other;
A recognition means for recognizing a person present in a predetermined place;
Judgment means for judging whether or not registrant information corresponding to the person recognized by the recognition means is registered in the database;
Control means for displaying image data associated with the registrant information when the judgment means determines that the registrant information is registered;
An image display control device comprising:
請求項1に記載の画像表示制御装置において、
前記認識手段により複数の人が認識され、当該認識された夫々の人に対応する登録者情報が前記データベースに登録されている場合には、前記制御手段は、当該認識された夫々の人に対応する画像データを順番に表示させることを特徴とする画像表示制御装置。
The image display control device according to claim 1,
When a plurality of people are recognized by the recognition means and registrant information corresponding to each recognized person is registered in the database, the control means corresponds to each recognized person. An image display control apparatus that sequentially displays image data to be displayed.
請求項2に記載の画像表示制御装置において、
前記認識手段により認識された時刻を示す情報を記憶する認識時刻記憶手段と、
前記認識時刻から現在時刻までの滞在時間を前記認識された夫々の人毎に算出する滞在時間算出手段と、
を更に備え、
前記制御手段は、前記認識された夫々の人に対応する画像データの表示時間又は表示順序を、前記夫々の人の前記滞在時間に応じて決定することを特徴とする画像表示制御装置。
The image display control device according to claim 2,
Recognition time storage means for storing information indicating the time recognized by the recognition means;
A stay time calculating means for calculating a stay time from the recognition time to the current time for each recognized person;
Further comprising
The control means determines the display time or display order of image data corresponding to each recognized person according to the stay time of each person.
請求項2に記載の画像表示制御装置において、
前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、
前記認識時刻に基づいて、前記認識された夫々の人の当該認識された順序を決定する認識順序決定手段と、
を更に備え、
前記制御手段は、前記認識された夫々の人に対応する画像データの表示時間又は表示順序を、前記認識順序決定手段により決定された順序に応じて決定することを特徴とする画像表示制御装置。
The image display control device according to claim 2,
A recognition time storage means for storing information indicating a recognition time when recognized by the recognition means;
Recognition order determination means for determining the recognized order of each recognized person based on the recognition time;
Further comprising
The image display control apparatus, wherein the control means determines the display time or display order of the image data corresponding to each recognized person according to the order determined by the recognition order determination means.
請求項2に記載の画像表示制御装置において、
前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、
前記認識時刻から現在時刻までの滞在時間を前記認識された夫々の人毎に算出する滞在時間算出手段と、
を更に備え、
前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記夫々の人の前記滞在時間に応じて決定することを特徴とする画像表示制御装置。
The image display control device according to claim 2,
A recognition time storage means for storing information indicating a recognition time when recognized by the recognition means;
A stay time calculating means for calculating a stay time from the recognition time to the current time for each recognized person;
Further comprising
The image display control apparatus, wherein the control means determines an amount or size of image data to be displayed corresponding to each recognized person according to the staying time of each person.
請求項2に記載の画像表示制御装置において、
前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、
前記認識時刻に基づいて、前記認識された夫々の人の当該認識された順序を決定する認識順序決定手段と、
を更に備え、
前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記認識順序決定手段により決定された順序に応じて決定することを特徴とする画像表示制御装置。
The image display control device according to claim 2,
A recognition time storage means for storing information indicating a recognition time when recognized by the recognition means;
Recognition order determination means for determining the recognized order of each recognized person based on the recognition time;
Further comprising
The control means determines the amount or size of image data to be displayed corresponding to each recognized person in accordance with the order determined by the recognition order determination means. .
請求項1に記載の画像表示制御装置において、
前記検知手段により複数の人が認識され、当該認識された夫々の人に対応する登録者情報が前記データベースに登録されている場合には、前記制御手段は、当該認識された夫々の人に対応する画像データを同一画面上に表示させることを特徴とする画像表示制御装置。
The image display control device according to claim 1,
When a plurality of people are recognized by the detection means and registrant information corresponding to each recognized person is registered in the database, the control means corresponds to each recognized person. An image display control apparatus for displaying image data to be displayed on the same screen.
請求項7に記載の画像表示制御装置において、
前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、
前記認識時刻から現在時刻までの滞在時間を前記認識された夫々の人毎に算出する滞在時間算出手段と、
を更に備え、
前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記夫々の人の前記滞在時間に応じて決定することを特徴とする画像表示制御装置。
The image display control device according to claim 7,
A recognition time storage means for storing information indicating a recognition time when recognized by the recognition means;
A stay time calculating means for calculating a stay time from the recognition time to the current time for each recognized person;
Further comprising
The image display control apparatus, wherein the control means determines an amount or size of image data to be displayed corresponding to each recognized person according to the staying time of each person.
請求項7に記載の画像表示制御装置において、
前記認識手段により認識された時の認識時刻を示す情報を記憶する認識時刻記憶手段と、
前記認識時刻に基づいて、前記認識された夫々の人の当該認識された順序を決定する認識順序決定手段と、
を更に備え、
前記制御手段は、前記認識された夫々の人に対応する画像データの表示すべき量又はサイズを、前記認識順序決定手段により決定された順序に応じて決定することを特徴とする画像表示制御装置。
The image display control device according to claim 7,
A recognition time storage means for storing information indicating a recognition time when recognized by the recognition means;
Recognition order determination means for determining the recognized order of each recognized person based on the recognition time;
Further comprising
The control means determines the amount or size of image data to be displayed corresponding to each recognized person in accordance with the order determined by the recognition order determination means. .
請求項1乃至9の何れか一項に記載の画像表示制御装置において、
前記判断手段により登録者情報が登録されていないと判断された場合には、前記登録者情報と対応付けられていない画像データを表示させることを特徴とする画像表示制御装置。
In the image display control device according to any one of claims 1 to 9,
An image display control apparatus that displays image data not associated with the registrant information when the registrant information is determined not to be registered by the determination means.
請求項1乃至10の何れか一項に記載の画像表示制御装置において、
前記認識手段は、カメラにより撮像された画像より前記人を認識することを特徴とする画像表示制御装置。
In the image display control device according to any one of claims 1 to 10,
The image display control device, wherein the recognition means recognizes the person from an image captured by a camera.
請求項1乃至10の何れか一項に記載の画像表示制御装置において、
前記認識手段は、マイクにより集音された音声より前記人を認識することを特徴とする画像表示制御装置。
In the image display control device according to any one of claims 1 to 10,
The image display control apparatus according to claim 1, wherein the recognizing means recognizes the person from a sound collected by a microphone.
請求項1乃至10の何れか一項に記載の画像表示制御装置において、
前記認識手段は、電子情報読取器により読み取られたIDより前記人を認識することを特徴とする画像表示制御装置。
In the image display control device according to any one of claims 1 to 10,
The image display control apparatus, wherein the recognition means recognizes the person based on an ID read by an electronic information reader.
コンピュータを請求項1乃至13のいずれか一項に記載の画像表示制御装置として機能させることを特徴とする画像表示制御プログラム。   An image display control program for causing a computer to function as the image display control device according to any one of claims 1 to 13. 登録者情報と画像データを対応付けて登録する工程と、
所定の場所に存在する人を認識する工程と、
前記認識された人に対応する登録者情報が前記データベースに登録されているか否かを判断する工程と、
前記登録者情報が登録されていると判断された場合には、当該登録者情報に対応付けられた画像データを表示させる工程と、
を備えることを特徴とする画像表示制御方法。
Registering registrant information and image data in association with each other;
Recognizing people present in a given location;
Determining whether registrant information corresponding to the recognized person is registered in the database;
If it is determined that the registrant information is registered, displaying image data associated with the registrant information;
An image display control method comprising:
JP2009059045A 2009-03-12 2009-03-12 Image display control device, image display control method, and image display control program Expired - Fee Related JP5321162B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009059045A JP5321162B2 (en) 2009-03-12 2009-03-12 Image display control device, image display control method, and image display control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009059045A JP5321162B2 (en) 2009-03-12 2009-03-12 Image display control device, image display control method, and image display control program

Publications (2)

Publication Number Publication Date
JP2010211094A true JP2010211094A (en) 2010-09-24
JP5321162B2 JP5321162B2 (en) 2013-10-23

Family

ID=42971303

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009059045A Expired - Fee Related JP5321162B2 (en) 2009-03-12 2009-03-12 Image display control device, image display control method, and image display control program

Country Status (1)

Country Link
JP (1) JP5321162B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012089983A (en) * 2010-10-18 2012-05-10 Casio Comput Co Ltd Image display device and program

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06208562A (en) * 1993-01-08 1994-07-26 Toshiba Corp Room entrance and exit management system
JP2000259307A (en) * 1999-03-09 2000-09-22 Toshiba Corp Operation supporting system
JP2001022857A (en) * 1999-07-02 2001-01-26 Inaba Engineering Kk Order guidance display system
JP2002268623A (en) * 2001-03-07 2002-09-20 Fujitsu Ltd Display system, display device, and computer
JP2003195845A (en) * 2001-09-27 2003-07-09 Fuji Photo Film Co Ltd Image display method
JP2006202067A (en) * 2005-01-21 2006-08-03 Hitachi Ltd Information processor
WO2006092945A1 (en) * 2005-02-10 2006-09-08 Fujitsu Limited Information providing device, and information providing system
JP2007293418A (en) * 2006-04-21 2007-11-08 Toshiba Corp Display controller, image processor, and display control method
JP2008229244A (en) * 2007-03-23 2008-10-02 Konica Minolta Medical & Graphic Inc Medical imaging system
JP2008281361A (en) * 2007-05-08 2008-11-20 Sony Corp Electronic apparatus and screen switch control method

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06208562A (en) * 1993-01-08 1994-07-26 Toshiba Corp Room entrance and exit management system
JP2000259307A (en) * 1999-03-09 2000-09-22 Toshiba Corp Operation supporting system
JP2001022857A (en) * 1999-07-02 2001-01-26 Inaba Engineering Kk Order guidance display system
JP2002268623A (en) * 2001-03-07 2002-09-20 Fujitsu Ltd Display system, display device, and computer
JP2003195845A (en) * 2001-09-27 2003-07-09 Fuji Photo Film Co Ltd Image display method
JP2006202067A (en) * 2005-01-21 2006-08-03 Hitachi Ltd Information processor
WO2006092945A1 (en) * 2005-02-10 2006-09-08 Fujitsu Limited Information providing device, and information providing system
JP2007293418A (en) * 2006-04-21 2007-11-08 Toshiba Corp Display controller, image processor, and display control method
JP2008229244A (en) * 2007-03-23 2008-10-02 Konica Minolta Medical & Graphic Inc Medical imaging system
JP2008281361A (en) * 2007-05-08 2008-11-20 Sony Corp Electronic apparatus and screen switch control method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012089983A (en) * 2010-10-18 2012-05-10 Casio Comput Co Ltd Image display device and program

Also Published As

Publication number Publication date
JP5321162B2 (en) 2013-10-23

Similar Documents

Publication Publication Date Title
US8762659B2 (en) Storage apparatus and method, program, and playback apparatus and method
JP5872142B2 (en) UI providing method and display device using the same
US9912870B2 (en) Method for transmitting image and image pickup apparatus applying the same
TWI496092B (en) Face identifying device, character image searching system, program for controlling face identifying device, computer readable recording medium, and method for controlling face identifying device
US20190205624A1 (en) Electronic device, electronic device control method, and computer-readable recording medium having stored thereon electronic device control program
WO2018015988A1 (en) Person painting identification system, person painting identification method, and program
WO2010103735A1 (en) Face collation device, electronic appliance, method of controlling face collation device, and control program of face collation device
US8626782B2 (en) Pattern identification apparatus and control method thereof
CN101262561B (en) Imaging apparatus and control method thereof
EP3410258B1 (en) Method for pushing picture, mobile terminal and storage medium
JP2009075999A (en) Image recognition device, method, and program
JP2009211556A (en) Biometric authentication apparatus
US20160156854A1 (en) Image processing method and apparatus, and electronic device
US20160189413A1 (en) Image creation method, computer-readable storage medium, and image creation apparatus
US20190147251A1 (en) Information processing apparatus, monitoring system, method, and non-transitory computer-readable storage medium
JP5339631B2 (en) Digital photo display apparatus, system and program having display
US9202131B2 (en) Information processing apparatus, information processing method, computer program, and image display apparatus
JP2010113682A (en) Visitor information search method, visitor information search device, and intercom system
JP2007072647A (en) Security system
JP6794819B2 (en) Image print system
JP5321162B2 (en) Image display control device, image display control method, and image display control program
JP2017188787A (en) Imaging apparatus, image synthesizing method, and image synthesizing program
JP5267136B2 (en) Electronic camera
KR101456488B1 (en) Method of setting the publication of image file and the apparatus adopting the same
KR20210095291A (en) Electronic device and method for generating a story

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110921

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130311

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130618

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130701

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees