JP2006171600A - Projector, image projection system, and image projection method - Google Patents

Projector, image projection system, and image projection method Download PDF

Info

Publication number
JP2006171600A
JP2006171600A JP2004367204A JP2004367204A JP2006171600A JP 2006171600 A JP2006171600 A JP 2006171600A JP 2004367204 A JP2004367204 A JP 2004367204A JP 2004367204 A JP2004367204 A JP 2004367204A JP 2006171600 A JP2006171600 A JP 2006171600A
Authority
JP
Japan
Prior art keywords
image
projector
attention level
unit
attention
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2004367204A
Other languages
Japanese (ja)
Inventor
Hirotaka Ohashi
洋貴 大橋
Fumiaki Mukoyama
文昭 向山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2004367204A priority Critical patent/JP2006171600A/en
Publication of JP2006171600A publication Critical patent/JP2006171600A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Liquid Crystal (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To control the operation of a projector from the degree of attention with which a person visually observes a projected image of the projector. <P>SOLUTION: A projector 100 includes an imaging and input part 201 for inputting a photographic image, obtained by photographing the person viewing an image projected by the projector 100; an attention degree analyzing part 202 for analyzing the degree of attention, with which the photographed person visually observes the projected image from the photographic image; an attention degree determining part 203 for determining the degree of attention of the person on the basis of an analysis result; and an operation control part 105 for controlling the operation of the projector 100 according to the determination of the degree of attention. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、会議場のような人物が集合する場所に好適なプロジェクタ、画像投影システム、及び画像投影方法に関する。   The present invention relates to a projector, an image projection system, and an image projection method suitable for a place where people gather such as a conference hall.

プロジェクタにより、プレゼンテーション資料を投影して参加者に説明し、その説明に基づいて議事検討を行う会議方法が一般化している。
ところが、プレゼンテーション資料の投影が終了して、議事検討を開始した以降においては、プロジェクタから投影される画像の明るさやプロジェクタのファンから発する騒音は、会議の進行の妨げになった。従って、会議の進行者は、プロジェクタを操作して投影を停止するスタンバイモードに移行させたり、下記特許文献1に記載のように、投影する画像を供給するパソコンからの映像信号が無信号の状態になることを検出して、プロジェクタを待機モードに移行させてランプやファンの出力を制御していた。
A meeting method has been generalized in which presentation materials are projected by projectors and explained to participants, and discussions are conducted based on the explanations.
However, after the presentation of the presentation material was completed and the discussion was started, the brightness of the image projected from the projector and the noise generated by the projector fan hindered the progress of the conference. Therefore, the conference proceeding person moves to the standby mode in which the projection is stopped by operating the projector, or the video signal from the personal computer supplying the image to be projected is in the no signal state as described in Patent Document 1 below. The projector is shifted to the standby mode to control the lamp and fan output.

特開2002−182304号公報JP 2002-182304 A

しかしながら、従来の方法では、パソコンの映像信号は、設定した時間によって無信号状態に遷移していたために、プレゼンテーションの途中でプロジェクタが待機モードに切替わることを防止するために、パソコンで設定する時間を充分長くする必要があった。一方で、会議参加者がプレゼンテーション資料の投影画像を短時間で理解し、すぐに議事検討を開始した場合においても、パソコンに設定した時間が経過する間は、プロジェクタは待機モードに移行しなかった。このように、会議に参加する人物の状況を検出して、プロジェクタの動作を状況に応じて制御することは、従来の方法では困難であった。   However, in the conventional method, since the video signal of the personal computer transitions to the no-signal state according to the set time, the time set by the personal computer is used to prevent the projector from switching to the standby mode during the presentation. Needed to be long enough. On the other hand, even if the meeting participants understood the projection image of the presentation material in a short time and immediately started the discussion, the projector did not enter standby mode while the time set on the PC passed . As described above, it is difficult to detect the situation of the person participating in the conference and control the operation of the projector according to the situation by the conventional method.

上記した課題を解決するために、本発明のプロジェクタは、画像を投影するプロジェクタであって、投影された前記画像を目視する人物が撮影された撮影画像を入力する撮像入力部と、前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析部と、前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定部と、前記注目度の判定に応じて自身の動作を制御する動作制御部とを備えることを特徴とする。
この発明によれば、このプロジェクタが投影する画像を目視する人物が撮影された画像から、投影した画像に対する人物の注目度を分析して、注目度を判定し、判定した注目度に応じてプロジェクタの動作を制御する。従って、プロジェクタは、このプロジェクタが投影した画像に対する人物の注目度に応じて、プロジェクタ自身の動作を制御できる。
In order to solve the above-described problems, a projector according to the present invention is a projector that projects an image, and includes an imaging input unit that inputs a captured image obtained by capturing a person who views the projected image, and the person An attention level analysis unit that analyzes the attention level of the projected image from the captured image, an attention level determination unit that determines the attention level of the person based on the analysis result, and the attention level And an operation control unit that controls its own operation according to the determination.
According to the present invention, the attention level of the person with respect to the projected image is analyzed from the image of the person who views the image projected by the projector, the attention level is determined, and the projector is determined according to the determined attention level. To control the operation. Therefore, the projector can control the operation of the projector itself according to the degree of attention of the person to the image projected by the projector.

本発明では、前記動作制御部は、前記投影する画像の輝度を制御することが好ましい。
この発明によれば、投影した画像に対する人物の注目度により、投影する画像の輝度を制御できるため、人物が投影画像を注目しない場合は輝度を下げることにより、プロジェクタの消費電力を削減できることに加え、光源装置の発熱による周囲の温度上昇を抑止できる。
In this invention, it is preferable that the said operation control part controls the brightness | luminance of the said image to project.
According to the present invention, since the brightness of the projected image can be controlled according to the degree of attention of the person with respect to the projected image, the power consumption of the projector can be reduced by reducing the brightness when the person does not pay attention to the projected image. In addition, an increase in ambient temperature due to heat generation of the light source device can be suppressed.

本発明では、前記プロジェクタの内部を冷却する冷却部を更に備え、前記動作制御部は、前記冷却部が冷却する強度を制御することが好ましい。
この発明によれば、投影した画像に対する人物の注目度により、冷却部が冷却する強度を制御できるため、人物が投影画像を注目しない場合は冷却する強度を下げることにより、プロジェクタの消費電力を削減できることに加え、冷却部で冷却することにより発生する音や振動を低減できる。
In the present invention, it is preferable that the projector further includes a cooling unit that cools the inside of the projector, and the operation control unit controls the strength that the cooling unit cools.
According to the present invention, since the cooling unit can control the cooling intensity based on the degree of attention of the person to the projected image, the power consumption of the projector is reduced by reducing the cooling intensity when the person does not pay attention to the projection image. In addition to being able to do so, it is possible to reduce noise and vibration generated by cooling in the cooling section.

本発明では、予め設定された音響データに基づいて音響を発生させる音響発生部を更に備え、前記音響発生部は、前記注目度により制御されることが好ましい。
この発明によれば、音響発生部は、投影した画像に対する人物の注目度に応じて、例えば、効果音のような音響を発生させることができる。
In the present invention, it is preferable that a sound generation unit that generates sound based on preset sound data is further provided, and the sound generation unit is controlled by the degree of attention.
According to this invention, the sound generation unit can generate sound such as sound effects, for example, according to the degree of attention of the person to the projected image.

本発明では、前記撮影画像は、撮影対象の表面温度を色調、又は濃淡の変化に置き換えることで得られる画像であってもよい。
この発明によれば、人物の周囲の明るさに係らず、投影した画像に対する人物の注目度を取得できる。
In the present invention, the photographed image may be an image obtained by replacing the surface temperature of the subject to be photographed with a change in color tone or shading.
According to the present invention, it is possible to acquire the degree of attention of a person with respect to a projected image regardless of the brightness around the person.

本発明では、前記注目度分析部は、前記人物の顔が前記投影された画像を向いているか、否かの状態を示す方向情報と、前記状態の継続時間とにより前記注目度を分析してもよい。
また、本発明では、前記注目度分析部は、前記注目度を分析する対象の人物か否かの情報に基き、前記対象である人物の前記注目度を分析してもよい。
更に、本発明では、前記投影された画像の切替を検出する投影画像切替検出部と、前記検出してから経過した時間に基づいて、前記画像の切替の終了を判定する投影画像切替終了判定部とを更に備え、前記注目度分析部は、前記終了の判定を受けて前記分析を開始することが好ましい。
この発明によれば、画像の切替のために所定の待ち時間を設けるため、注目度を効率的に分析できる。
In the present invention, the attention level analysis unit analyzes the attention level based on direction information indicating a state of whether or not the face of the person faces the projected image and a duration of the state. Also good.
In the present invention, the attention level analysis unit may analyze the attention level of the target person based on information about whether or not the target person is the target of the attention level analysis.
Furthermore, in the present invention, a projection image switching detection unit that detects switching of the projected image, and a projection image switching end determination unit that determines the end of switching of the image based on the time elapsed since the detection. It is preferable that the attention level analysis unit starts the analysis upon receiving the end determination.
According to the present invention, since a predetermined waiting time is provided for switching images, the degree of attention can be efficiently analyzed.

上記した課題を解決するために、本発明の画像投影システムは、画像を投影するプロジェクタとホストコンピュータと撮像装置とを含む画像投影システムであって、前記撮像装置は、前記画像を目視する人物を撮影して撮影画像を生成する撮像部を備え、前記ホストコンピュータは、前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析部と、前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定部とを備え、前記プロジェクタは、前記注目度の判定に応じて自身の動作を制御する動作制御部を備えることを特徴とする。
上記した課題を解決するために、本発明の画像投影システムは、画像を投影するプロジェクタと撮像装置とを含む画像投影システムであって、前記撮像装置は、前記画像を目視する人物を撮影して撮影画像を生成する撮像部と、前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析部と、前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定部とを備え、前記プロジェクタは、前記注目度の判定に応じて自身の動作を制御する動作制御部を備えることを特徴とする画像投影システム。
上記した課題を解決するために、本発明の画像投影方法は、プロジェクタによる画像投影方法であって、前記プロジェクタが投影する画像を目視する人物が撮影された撮影画像を取得する撮影画像取得ステップと、前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析ステップと、前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定ステップと、前記注目度の判定に応じて前記プロジェクタを制御する制御ステップとを含むことを特徴とする。
上記した画像投影システムおよび画像投影方法では、上述したプロジェクタと同様の作用および効果を享受できる。
In order to solve the above-described problems, an image projection system of the present invention is an image projection system including a projector that projects an image, a host computer, and an imaging device, and the imaging device detects a person who views the image. The host computer includes an imaging unit that shoots and generates a captured image, and the host computer analyzes a degree of attention that the person pays attention to the projected image from the captured image, and a result of the analysis An attention level determination unit that determines the level of attention of the person, and the projector includes an operation control unit that controls its own operation according to the determination of the level of attention.
In order to solve the above problems, an image projection system of the present invention is an image projection system including a projector that projects an image and an imaging device, and the imaging device photographs a person who views the image. An imaging unit that generates a captured image, an attention level analysis unit that analyzes the degree of attention that the person focuses on the projected image, and an attention level of the person based on the result of the analysis An image projection system comprising: an attention level determination unit for determining; and the projector includes an operation control unit that controls its own operation in accordance with the determination of the attention level.
In order to solve the above-described problem, an image projecting method of the present invention is an image projecting method by a projector, and a captured image acquiring step of acquiring a captured image taken by a person viewing the image projected by the projector; , An attention level analysis step of analyzing the attention level of the person who focuses on the projected image from the captured image; and an attention level determination step of determining the attention level of the person based on the analysis result; And a control step of controlling the projector according to the determination of the attention level.
The image projection system and the image projection method described above can enjoy the same operations and effects as the projector described above.

以下、本発明を図面に基づいて説明する。図1乃至図9は、本発明に係るプロジェクタ、画像投影システム、および画像投影方法の実施の形態を示す図である。
(実施例1)
Hereinafter, the present invention will be described with reference to the drawings. 1 to 9 are diagrams showing embodiments of a projector, an image projection system, and an image projection method according to the present invention.
Example 1

図1は、本実施例1の画像投影システムの構成を示す概観図である。
この画像投影システムは、パソコン200と、プロジェクタ100と、カメラ130とを備えて構成される。
パソコン200は、プロジェクタ100に投影する画像を記憶すると共に、画像投影システムの処理演算を行うホストコンピュータである。また、プロジェクタ100は、パソコン200から入力された画像をスクリーン120に拡大して投影する。また、カメラ130は、撮像部を含み、スクリーン120近傍の上方に設置され、スクリーン120に投影された画像を目視する人物(A〜F)を撮影する。
尚、本実施例1では、画像投影システムは会議室に設置され、会議で使用されることを想定している。従って、投影された画像を目視する人物(A〜F)は、会議参加者である。
会議は、プロジェクタ100とパソコン200とが設置された会議机150を中心にして、スクリーン120が設置された一方の側を除いた三方を会議参加者が取り囲んだ状態で開催される。画像投影システムを使用する会議では、大別してプレゼンテーションの工程と、議事検討の工程とが存在する。即ち、プレゼンテーションの工程とは、会議参加者A〜Fがスクリーン120の方向を向き、プロジェクタ100に投影された画像に注目すると共に、説明者から説明を受ける工程であり、議事検討の工程とは、会議参加者はスクリーン120の投影画像を見る事無く、互いに向かい合って議題を検討する工程である。また、これらの2つの工程は、会議によっては、交互に繰返されることもある。
FIG. 1 is an overview diagram illustrating the configuration of the image projection system according to the first embodiment.
The image projection system includes a personal computer 200, a projector 100, and a camera 130.
The personal computer 200 is a host computer that stores an image to be projected onto the projector 100 and performs processing operations of the image projection system. The projector 100 enlarges and projects the image input from the personal computer 200 on the screen 120. The camera 130 includes an imaging unit, is installed above the vicinity of the screen 120, and photographs a person (A to F) who views the image projected on the screen 120.
In the first embodiment, it is assumed that the image projection system is installed in a conference room and used in a conference. Therefore, the persons (A to F) viewing the projected image are conference participants.
The conference is held in a state where conference participants surround three sides except for one side where the screen 120 is installed, with the conference desk 150 where the projector 100 and the personal computer 200 are installed as the center. In a meeting using an image projection system, there are roughly divided a presentation process and an agenda review process. In other words, the presentation process is a process in which the conference participants A to F face the screen 120 and pay attention to the image projected on the projector 100 and receive an explanation from the explainer. In this step, the conference participants face each other and examine the agenda without looking at the projection image on the screen 120. In addition, these two steps may be repeated alternately depending on the conference.

この画像投影システムは、詳細は後述するが、会議参加者の顔や頭部の画像をカメラ130が撮影し、その撮影画像をパソコン200が分析し、会議参加者全体の投影画像への注目度を判定して、プロジェクタ100の動作を待機状態に制御する。ここで、待機状態とは、プロジェクタ100が投影する画面の輝度を低下させたり、プロジェクタ100内部を冷却する冷却部の冷却強度を低下させる動作などを含む。
また、カメラ130からパソコン200への接続方法は図示していないが、ケーブルを用いた有線での接続であっても、無線や光を用いたワイヤレス方式であってもよい。更に、カメラ130の設置方法は、スクリーン120と別に設置しても、スクリーン120と一体化した構成であってもよい。
加えて、カメラ130の設置位置は、スクリーン120近傍の上方に限らず、スクリーン120の周囲であっても、スクリーン120内にあって、その裏側から透過的に撮影する位置であってもよい。
尚、カメラ130の検出方式は、光学的に高感度であることが望ましく、可視光で撮影する方式に限定されず、撮影対象の表面温度を色調、又は濃淡の変化に置き換える画像を出力するカメラ、例えば、赤外線カメラを用いても良い。これによって、照明を落として投影を行っている場合にも、より確実に会議参加者の撮影を行うことができる。
Although the details of this image projection system will be described later, the camera 130 captures images of the faces and heads of the conference participants, the personal computer 200 analyzes the captured images, and the degree of attention to the projected images of the entire conference participants And the operation of the projector 100 is controlled to a standby state. Here, the standby state includes an operation of reducing the brightness of the screen projected by the projector 100 or reducing the cooling strength of the cooling unit that cools the inside of the projector 100.
Further, although a connection method from the camera 130 to the personal computer 200 is not illustrated, a wired connection using a cable or a wireless system using radio or light may be used. Further, the camera 130 may be installed separately from the screen 120 or may be configured to be integrated with the screen 120.
In addition, the installation position of the camera 130 is not limited to the upper part in the vicinity of the screen 120, and may be a position around the screen 120, a position in the screen 120, and a transparent image from the back side.
The detection method of the camera 130 is desirably optically high sensitivity, and is not limited to a method of photographing with visible light, but a camera that outputs an image that replaces the surface temperature of the subject to be photographed with a change in color tone or shade. For example, an infrared camera may be used. As a result, even when the projection is performed with the illumination turned off, the conference participants can be more reliably photographed.

図2は、画像投影システムの機能構成を示すブロック図である。
プロジェクタ100は、光源(ランプ)101と、レンズを具備して画像をスクリーン120上に拡大して投影する光学変調部102と、画像を入力し光学変調部102が投影できるように投影処理を行う投影処理部103と、プロジェクタ100の内部の冷却を行う冷却部であるファン104と、ランプ101の電力制御やファン104の回転数制御などの全体動作を制御する動作制御部105とにより構成される。そして、動作制御部105は、キー入力やリモコン機能を備えた操作部140により操作される。
また、プロジェクタ100は、図示しないハードウエアとしてのCPUおよびメモリ機能を有するROMとRAMを備え、これらのハードウェアと、メモリに格納されているプログラムとが有機的に協働することにより、動作制御部105の制御や、投影処理部103などの演算処理を実行する。
FIG. 2 is a block diagram showing a functional configuration of the image projection system.
The projector 100 includes a light source (lamp) 101, a lens and an optical modulation unit 102 that enlarges and projects an image on a screen 120, and performs a projection process so that the optical modulation unit 102 can input an image and project it. The projection processing unit 103 includes a fan 104 that is a cooling unit that cools the inside of the projector 100, and an operation control unit 105 that controls overall operations such as power control of the lamp 101 and rotation speed control of the fan 104. . The operation control unit 105 is operated by an operation unit 140 having a key input and a remote control function.
The projector 100 includes a CPU (not shown) and a ROM and a RAM having a memory function, and the hardware and the program stored in the memory cooperate with each other to control the operation. Control of the unit 105 and arithmetic processing such as the projection processing unit 103 are executed.

パソコン200は、撮像入力部201と、注目度分析部202と、注目度判定部203と、音響発生部204と、制御I/F(インターフェイス)部205と、データ記憶部206と、画像処理部207と、画像出力部208と、PC入力部209と、表示制御部210とを備える。ここで、撮像入力部201は、カメラ130の撮像信号を入力し前処理を行う。データ記憶部206は、投影する画像を記憶する。また、画像処理部207は、データ記憶部206の画像データを、プロジェクタ100に適合するように画像処理を行う。画像出力部208は、画像処理部207で画像処理した画像のデータをプロジェクタ100に出力する。また、このパソコン200に接続可能な入力機器であるキーボード220やマウス221から操作した情報および入力したデータは、PC入力部209を介して表示制御部210に伝わり、この表示制御部210で情報およびデータが解釈されて所定の操作が実行される。また、音響発生部204は、音響データとスピーカを具備し、注目度判定部203の判定結果により、音響を発生させる。制御I/F部205は、USB等を介してプロジェクタ100の動作制御部105や、パワーコントローラ230に接続され、注目度判定部203の判定結果に従い、音響を発生させたり、外部の機器を制御する。尚、注目度分析部202および注目度判定部203の機能については、後述する。   The personal computer 200 includes an imaging input unit 201, an attention level analysis unit 202, an attention level determination unit 203, a sound generation unit 204, a control I / F (interface) unit 205, a data storage unit 206, and an image processing unit. 207, an image output unit 208, a PC input unit 209, and a display control unit 210. Here, the imaging input unit 201 inputs an imaging signal of the camera 130 and performs preprocessing. The data storage unit 206 stores an image to be projected. Further, the image processing unit 207 performs image processing on the image data in the data storage unit 206 so as to be compatible with the projector 100. The image output unit 208 outputs the image data processed by the image processing unit 207 to the projector 100. Further, information and input data operated from the keyboard 220 and the mouse 221 which are input devices connectable to the personal computer 200 are transmitted to the display control unit 210 via the PC input unit 209, and the display control unit 210 receives information and information. The data is interpreted and a predetermined operation is performed. The sound generation unit 204 includes sound data and a speaker, and generates sound based on the determination result of the attention level determination unit 203. The control I / F unit 205 is connected to the operation control unit 105 of the projector 100 and the power controller 230 via a USB or the like, and generates sound or controls external devices according to the determination result of the attention level determination unit 203. To do. The functions of the attention level analysis unit 202 and the attention level determination unit 203 will be described later.

このパソコン200は、図示しないハードウエアとしてのCPUおよびメモリ機能を有するROMとRAMを備え、これらのハードウェアと、メモリに格納されているプログラムとが有機的に協働することにより、前記した機能を実現している。
このように、本実施例の画像投影システムは、カメラ130が撮影した撮影画像から、パソコン200が投影画像への会議参加者の注目度の分析と判定を行い、プロジェクタ100の動作制御部105を介してプロジェクタ100のランプ101の輝度制御やファン104の回転数を制御する。
また、パソコン200の制御I/F部205を介して外部へ注目度判定結果の信号を出力し、パワーコントローラ230の制御を行って電灯線を電力とする機器を操作することもできる。具体例として、議事検討の工程になった場合は、投影のために暗くしてあった会議室の照明を自動的に明るい状態に戻すことなどが可能になる。
The personal computer 200 includes a CPU (not shown) and a ROM and a RAM having a memory function, and these hardware and a program stored in the memory cooperate with each other in an organic manner. Is realized.
As described above, in the image projection system according to the present embodiment, the personal computer 200 analyzes and determines the attention level of the conference participant on the projection image from the captured image captured by the camera 130, and the operation control unit 105 of the projector 100 is controlled. The brightness control of the lamp 101 of the projector 100 and the rotational speed of the fan 104 are controlled via the control unit.
It is also possible to output a signal of interest level determination result to the outside via the control I / F unit 205 of the personal computer 200 and control the power controller 230 to operate a device using the power line as power. As a specific example, in the case of the agenda review process, it is possible to automatically return the illumination of the conference room that has been darkened for projection to a bright state.

次に、図3は、注目度分析部202の処理を示すフローチャートである。注目度の分析処理は、会議参加者の顔の向きを抽出し、スクリーン120に投影されている投影画像に注目している向きかどうかを分析するまでの処理であって、会議参加者の向きを分析するステップS310までの注目度分析ステップと、会議参加者ごとの注目度分析結果を参加者分析表に記録しておくステップS312以降とに分かれている。
注目度分析の処理は、会議参加者を撮影して注目度の分析を行う処理であって、パソコン200に記憶されたプログラムにおいて実行されると、まず、ステップS300に移行するようになっている。
ステップS300は、撮影画像取得ステップであり、カメラ130が会議参加者の撮影を開始し、撮像入力部201で処理された信号は静止画の画像データとして、注目度分析部202に送られ、次にステップS302に移行する。
ステップS302では、会議参加者の画像データを分析し、会議参加者ごとに顔画像を抽出して、ステップS304に移行する。ここで、画像データから顔画像を抽出する方法としては、例えば、特開平9−81732に開示されている技術、即ち、確率密度関数を参照することで、3点以上の網領域を収縮変形させることにより顔領域を抽出する技術、を採用できる。
ステップS304では、顔画像から顔の輪郭線を抽出し、ステップS306に移行する。ここで、顔画像から顔の輪郭線を抽出する方法としては、例えば、特開平6−187455に開示されている技術、即ち、輝度や色差で肌色領域を検出して抽出する技術、を採用できる。
Next, FIG. 3 is a flowchart showing processing of the attention level analysis unit 202. The attention degree analysis process is a process from extracting the orientation of the meeting participant's face and analyzing whether or not the orientation is paying attention to the projected image projected on the screen 120. The attention level analysis step up to step S310 is analyzed, and the attention level analysis result for each conference participant is recorded in the participant analysis table after step S312.
The attention degree analysis process is a process of photographing a conference participant and analyzing the attention degree. When the attention degree analysis is executed in a program stored in the personal computer 200, the process first proceeds to step S300. .
Step S300 is a captured image acquisition step, in which the camera 130 starts capturing a conference participant, and the signal processed by the imaging input unit 201 is sent to the attention level analysis unit 202 as image data of a still image. The process proceeds to step S302.
In step S302, the image data of the conference participant is analyzed, a face image is extracted for each conference participant, and the process proceeds to step S304. Here, as a method for extracting a face image from image data, for example, a technique disclosed in Japanese Patent Laid-Open No. 9-81732, that is, a mesh area of three or more points is contracted and deformed by referring to a probability density function. Thus, a technique for extracting a face region can be employed.
In step S304, a face outline is extracted from the face image, and the process proceeds to step S306. Here, as a method for extracting a face outline from a face image, for example, a technique disclosed in Japanese Patent Laid-Open No. 6-187455, that is, a technique for detecting and extracting a skin color region by luminance or color difference can be adopted. .

ステップS306では、顔画像から目の位置を検出し、ステップS304で求めた顔の輪郭線に対する2つの目の相対位置を計算し、ステップS308に移行する。ここで、目を抽出する方法としては、例えば、特開平10−63850に開示されている技術、即ち、顔の上下方向に算出した明度が急峻に変化するエッジを抽出することで目を検出する技術、を採用できる。
ステップS308では、ステップS300で予め撮影してある全体画像から会議参加者の会議机の席位置を求め、席位置によってステップ306の顔と目との相対位置の補正を行う。例えば、スクリーン120に向かって右に座っている会議参加者は、斜め右方向に顔を傾けていることになるため、その会議参加者が座っている席位置とスクリーン120との遠近関係も加味しながら顔画像に対して右方向に所定量の補正を行って、より正面の画像になるように補正する。
更に、会議参加者全員がスクリーン120を上向きで見る姿勢であるため、顔画像に対して下方向へ所定量の補正を行い、より正面の画像になるように補正を行う。このようにして、会議参加者が投影画像を見ていると想定できる場合には、顔の輪郭と目との相対位置が正面画像となっているものとして扱うことができるようになる。ステップS308の処理を終えると、次にステップS310に移行する。
ステップS310では、顔の輪郭と目との相対位置が求められた顔画像の上記分析結果を用い、正面画像で予測される中心位置に対し、目の位置が左右方向、上下方向の所定の許容範囲にあるか、否かを判断し、許容範囲にあると判断(YES)されれば、ステップS312に進む。一方、ステップS310で、許容範囲に無いと判断(NO)されれば、ステップS314に進む。
In step S306, the eye position is detected from the face image, the relative position of the two eyes with respect to the face outline obtained in step S304 is calculated, and the process proceeds to step S308. Here, as a method of extracting the eyes, for example, the technique disclosed in Japanese Patent Laid-Open No. 10-63850, that is, the eyes are detected by extracting edges whose brightness calculated in the vertical direction of the face changes sharply. Technology, can be adopted.
In step S308, the seat position of the conference desk of the conference participant is obtained from the entire image previously captured in step S300, and the relative position between the face and eyes in step 306 is corrected based on the seat position. For example, since a conference participant sitting to the right toward the screen 120 is tilted to the right, the perspective relationship between the seat position where the conference participant is sitting and the screen 120 is taken into consideration. The face image is corrected rightward by a predetermined amount to correct the front image.
Furthermore, since all the participants in the conference are in an attitude of looking at the screen 120 upward, the face image is corrected downward by a predetermined amount, and the correction is performed so as to obtain a more frontal image. In this way, when it can be assumed that the conference participant is looking at the projection image, the relative position between the face contour and the eyes can be treated as a front image. When the process of step S308 is completed, the process proceeds to step S310.
In step S310, using the above-described analysis result of the face image for which the relative position between the face contour and the eyes is obtained, the eye position is set to a predetermined allowable value in the horizontal direction and the vertical direction with respect to the center position predicted in the front image. Whether it is within the range or not is determined, and if it is determined that it is within the allowable range (YES), the process proceeds to step S312. On the other hand, if it is determined in step S310 that it is not within the allowable range (NO), the process proceeds to step S314.

ここで、正面画像で予測される、顔の輪郭に対する目の上下方向位置には、統計的な値を用いることができるが、実際に会議参加者を撮影しておいた参照画像を利用すれば、個人差を解消することができる。参照画像を得るためには、会議開始前に、会議参加者が所定の席に座り、投影画像をみる姿勢を撮影しておけばよい。
ステップS312では、分析を行った会議参加者のデータを0として参加者分析表に記録し、ステップS316に移行する。
また、ステップS314では、分析を行った会議参加者のデータを1として参加者分析表に記録し、ステップS316に移行する。
ステップS316では、会議参加者全員の注目度分析が終了し、参加者分析表に記録されたか、否かを判断し、参加者全員の注目度分析結果が記録されたと判断(YES)されれば、一連の処理を終了する。
一方、ステップS316で、参加者全員の注目度分析結果が記録されたと判断されない(NO)場合は、ステップS302に戻って残りの会議参加者の注目度分析を行う。
このように、ステップS316を終了し終えると、一連の処理を終了して元の処理に復帰させる。上記一連の処理は、会議参加者のサンプリングを行う周期ごとにステップ300の処理がスタートし、参加者分析表の結果が付加されていく。
ここで、図4は、本実施の形態に適用する参加者分析表を示す。この参加者分析表は、図3の注目度分析がサンプリングごとに行われる度に新しく生成され、そのサンプリング時における会議参加者全体の注目度を注目度分析フラグが示すようになっている。図4の全体分析の結果は、注目度分析フラグが1である場合に、会議参加者全員が投影画像を注目していないことを示している。
Here, a statistical value can be used for the vertical position of the eye with respect to the face contour predicted in the front image, but if a reference image that actually captured the conference participants is used, , Individual differences can be eliminated. In order to obtain a reference image, it is only necessary to take a picture of a posture in which a conference participant sits in a predetermined seat and sees a projected image before the start of the conference.
In step S312, the data of the conference participant who has performed the analysis is recorded as 0 in the participant analysis table, and the process proceeds to step S316.
Further, in step S314, the data of the conference participant who performed the analysis is recorded as 1 in the participant analysis table, and the process proceeds to step S316.
In step S316, it is determined whether or not the attention level analysis of all the participants in the conference is completed and recorded in the participant analysis table. If it is determined that the attention level analysis result of all the participants is recorded (YES). Then, a series of processing is completed.
On the other hand, if it is not determined in step S316 that the attention level analysis result of all the participants has been recorded (NO), the process returns to step S302 to perform the attention level analysis of the remaining conference participants.
In this way, when step S316 is finished, a series of processing is finished and the original processing is restored. In the series of processes described above, the process of step 300 is started every time a conference participant is sampled, and the result of the participant analysis table is added.
Here, FIG. 4 shows a participant analysis table applied to the present embodiment. This participant analysis table is newly generated every time the attention level analysis of FIG. 3 is performed for each sampling, and the attention level analysis flag indicates the attention level of the entire conference participant at the time of sampling. The result of the overall analysis in FIG. 4 indicates that when the attention level analysis flag is 1, all the conference participants are not paying attention to the projected image.

この図4において、横方向、即ちA〜Fは会議参加者を表し、縦方向にそれぞれの会議参加者のデータが入る。即ち、上段の「設定ウエイト」は、参加者別にその参加者の注目度の分析を行うか否かの情報を設定するデータ欄である。この「設定ウエイト」は会議開始前に入力設定され、データが1であれば、注目度分析を行う対象とし、0であれば注目度分析の対象外とする。この図4では、会議参加者のEとFが注目度分析の対象外に該当しており、参加者分析表のウエイト付結果を無条件に1とする。従って、会議の聴講者やオブザーバーのような参加者は注目度分析から除くことができるので、注目度分析の処理をより軽減し、分析対象者数が絞られることによって、総合的な判定精度をより高めている。
「設定ウエイト」の下段の「分析結果」は、図3で説明した注目度分析の結果が記録されたものであり、データが1であれば、注目がされなくなったということを示している。
更に下段の「ウエイト付結果」は、それぞれの「分析結果」の値と「設定ウエイト」の値とを掛け合わせた論理積であって、これらが会議参加者すべてに渡り1であった場合に、参加者分析表最下段の「全体分析」として、注目度分析フラグが1となる。
ここで、「設定ウエイト」が0であった会議参加者は、注目度を分析する必要がなくなるので、その会議参加者に対する一連の注目度分析処理を省くことができる。また、サンプリングごとに生成される参加者分析表は、表のデータをすべて保存しておく必要はなく、注目度分析フラグのみを残せばよい。
In FIG. 4, horizontal directions, that is, A to F represent conference participants, and data of each conference participant enters in the vertical direction. That is, the “setting weight” in the upper row is a data column for setting information as to whether or not to analyze the attention level of each participant for each participant. This “setting weight” is input and set before the start of the conference. If the data is 1, the attention level analysis is performed, and if the data is 0, the attention level analysis is not performed. In FIG. 4, E and F of the conference participants are not subject to the attention level analysis, and the weighted result of the participant analysis table is set to 1 unconditionally. Therefore, participants such as conference attendees and observers can be excluded from the attention level analysis, so the processing of the attention level analysis is further reduced and the number of subjects to be analyzed is reduced, so that the overall judgment accuracy is improved. It is higher.
The “analysis result” in the lower part of the “setting weight” is a record of the result of the attention level analysis described with reference to FIG. 3. If the data is 1, it indicates that the attention is not received.
Furthermore, the “weighted result” in the lower row is a logical product of the respective “analysis result” value and the “set weight” value, which is 1 for all the conference participants. As the “whole analysis” at the bottom of the participant analysis table, the attention level analysis flag is 1.
Here, since it is not necessary for the conference participant whose “setting weight” is 0 to analyze the attention level, a series of attention level analysis processing for the conference participant can be omitted. Further, the participant analysis table generated for each sampling need not store all the data in the table, and only the attention level analysis flag may be left.

図5は、本実施例1に適用する画面切替の停止検出の処理を示すフローチャートである。注目度の分析処理は、前述したようにサンプリングごとに行われるが、無条件でサンプリングするのは非効率であるため、以下に示すように、投影画像の切替が停止したと判断した時点でサンプリングを開始する。
画面切替の停止検出の処理は、パソコン200に記憶されたプログラムにおいて実行されると、まず、ステップS500に移行するようになっている。
ステップS500では、画面切替の停止検出の処理に用いるタイマーである画面切替タイマーを初期リセットし、次にステップS502に移行する。
ステップS502では、画面切替の停止検出結果を示す画面切替停止フラグを0にリセットし、次にステップS504に移行する。
ステップS504では、画面切替タイマーを0にリセットするとともにタイマーの計時動作を開始させるリスタート動作を行い、次にステップS506に移行する。
ステップS506では、パソコン200の処理により、画像処理部207からの出力である投影画像が切替わったか、否かを判断し、投影画像が切替わったと判断(YES)されればステップS504に戻って画面切替タイマーを再度リスタートさせ、一方、投影画像が切替わらないと判断(NO)されれば、ステップS508に移行する。尚、上記したステップS500〜ステップS506は、図示を略した投影画像切替検出部での処理である。
FIG. 5 is a flowchart illustrating processing for detecting stoppage of screen switching applied to the first embodiment. The attention level analysis process is performed for each sampling as described above. However, since it is inefficient to sample unconditionally, sampling is performed when it is determined that the switching of the projection image is stopped as shown below. To start.
When the screen switching stop detection process is executed in a program stored in the personal computer 200, the process first proceeds to step S500.
In step S500, a screen switching timer, which is a timer used for screen switching stop detection processing, is initially reset, and then the process proceeds to step S502.
In step S502, a screen switching stop flag indicating a screen switching stop detection result is reset to 0, and then the process proceeds to step S504.
In step S504, the screen switching timer is reset to 0 and a restart operation for starting the timer timing operation is performed, and then the process proceeds to step S506.
In step S506, it is determined whether or not the projection image output from the image processing unit 207 has been switched by the processing of the personal computer 200. If it is determined that the projection image has been switched (YES), the process returns to step S504. If the screen switching timer is restarted again, and it is determined that the projection image is not switched (NO), the process proceeds to step S508. Steps S500 to S506 described above are processes performed by the projection image switching detection unit (not shown).

ステップS508では、計時動作を行っている画面切替タイマーが所定値に達したか、否かの判断を行う。画面切替タイマーが所定値に達したと判断(YES)されれば、ステップS510に移行する。
一方、所定値に達していないと判断(NO)されれば、ステップS506に戻って投影画像の画面切替検出を行う。
ステップS510では、画面切替フラグを1にセットして処理を終了する。このように、投影画像の画面切替が検出され、一連の処理を終了して元の処理に復帰させる。尚、上記したステップS508〜ステップS510は、図示を略した投影画像切替終了判定部での処理である。
In step S508, it is determined whether or not the screen switching timer performing the timing operation has reached a predetermined value. If it is determined that the screen switching timer has reached the predetermined value (YES), the process proceeds to step S510.
On the other hand, if it is determined that the predetermined value has not been reached (NO), the process returns to step S506 to detect the screen switching of the projected image.
In step S510, the screen switching flag is set to 1 and the process ends. In this way, the screen switching of the projected image is detected, the series of processing is terminated, and the original processing is restored. Steps S508 to S510 described above are processes performed by the projection image switching end determination unit (not shown).

図6は、注目度判定部203で処理する注目度判定ステップのフローチャートである。注目度の判定の処理は、参加者分析表の一連の時系列結果を用いて注目度の判定を行う処理であって、パソコン200に記憶されたプログラムにおいて実行されると、まず、ステップS600に移行するようになっている。
ステップS600では、注目度判定の処理に用いるタイマーである判定タイマーを初期リセットし、次にステップS604に移行する。
ステップS604では、注目度判定の判定結果を示す注目度判定フラグを0にリセットし、次にステップS606に移行する。
ステップS606では、所定時間ごとに会議参加者の注目度分析の結果が記録されている参加者分析表の結果を読み出す。所定時間の間隔を長めに設定すれば読み出される参加者分析表の結果は時系列的に多数となり、所定時間の間隔を短めに設定すれば、読み出される参加者分析表の結果は時系列的に少なくなる。ステップS606により参加者分析表を読み終えると次にステップS608に移行する。
FIG. 6 is a flowchart of the attention level determination step processed by the attention level determination unit 203. The attention level determination process is a process of determining the attention level using a series of time-series results of the participant analysis table. When the attention level determination process is executed in a program stored in the personal computer 200, first, the process proceeds to step S600. It is supposed to migrate.
In step S600, a determination timer, which is a timer used for attention degree determination processing, is initially reset, and then the process proceeds to step S604.
In step S604, the attention level determination flag indicating the determination result of the attention level determination is reset to 0, and then the process proceeds to step S606.
In step S606, the result of the participant analysis table in which the result of the attention degree analysis of the conference participant is recorded every predetermined time is read. If the predetermined time interval is set longer, the number of participant analysis tables that are read out will be many in time series, and if the predetermined time interval is set shorter, the results of the participant analysis table will be read out in time series. Less. After reading the participant analysis table in step S606, the process proceeds to step S608.

ステップS608では、読み出した参加者分析表の参加者分析フラグの所定時間内の時系列結果を判断する。注目度分析フラグがすべて1か、否かの判断を行い、すべてが1であると判断(YES)されれば、ステップS610に移行する。
一方、注目度分析フラグの中に0が含まれ、全てが1でないと判断(NO)された場合は、ステップS614に移行する。このステップS614では、判断タイマーをリスタートさせた後、ステップS606に戻り、再度参加者分析表の読み出しを行う。
ステップS610では、判定タイマーが所定値に達しているか、否かの判断を行う。判定タイマーが所定値に達していると判断(YES)されれば、ステップS612に移行する。即ち、人物の顔が所定の方向を向いているか、否かを示す方向情報が、所定の継続時間の間、維持されたことを示す。一方、判定タイマーが所定値に達していないと判断(NO)された場合は、ステップS606に戻り、再度参加者分析表の読み出しを行う。
ステップS612では、注目度判定フラグを1にセットし、一連の処理を終了して元の処理に復帰させる。
In step S608, a time series result within a predetermined time of the participant analysis flag of the read participant analysis table is determined. It is determined whether the attention level analysis flags are all 1 or not. If it is determined that all are 1 (YES), the process proceeds to step S610.
On the other hand, if it is determined that the attention level analysis flag includes 0 and all are not 1 (NO), the process proceeds to step S614. In step S614, after the determination timer is restarted, the process returns to step S606, and the participant analysis table is read again.
In step S610, it is determined whether or not the determination timer has reached a predetermined value. If it is determined that the determination timer has reached the predetermined value (YES), the process proceeds to step S612. That is, the direction information indicating whether or not the person's face is facing a predetermined direction is maintained for a predetermined duration. On the other hand, if it is determined that the determination timer has not reached the predetermined value (NO), the process returns to step S606, and the participant analysis table is read again.
In step S612, the attention level determination flag is set to 1, the series of processes is terminated, and the process returns to the original process.

図7は、本実施例1に適用するプロジェクタ100を制御する制御ステップの処理を示すフローチャートである。プロジェクタ制御の処理は、パソコン200から動作制御部105に入力された注目度判定フラグのデータを用いてプロジェクタ100の制御を行う処理であって、プロジェクタ100に記憶されたプログラムにおいて実行されると、まず、ステップS700に移行するようになっている。
ステップS700では、注目度判定フラグを読み出し、ステップS702に移行する。
ステップS702では、読み出した注目度判定フラグが1であるか、否かの判断を行い、注目度判定フラグが1と判断(YES)されれば、ステップS704に移行する。
一方、注目度判定フラグが1でないと判断(NO)されれば、ステップS700に戻って注目度判定フラグの再チェックを行う。
ステップS704では、プロジェクタ100のランプ101を制御して投影画像の輝度を低下させ、ステップS706に移行する。
ステップS706では、プロジェクタ100のファン104を制御して回転数を低下させ、ステップS708に移行する。
ステップS708では、再度プロジェクタ100への投影指示がされたか、否かを判断する。
ここで、再投影の指示は、プロジェクタ100の操作部140によって指示される以外に、キーボード220やマウス221の操作によりパソコン200がプロジェクタ100の動作制御部105に指示する場合も含まれる。
FIG. 7 is a flowchart illustrating processing of a control step for controlling the projector 100 applied to the first embodiment. The projector control process is a process for controlling the projector 100 using the attention degree determination flag data input from the personal computer 200 to the operation control unit 105. When the projector control process is executed in a program stored in the projector 100, First, the process proceeds to step S700.
In step S700, the attention level determination flag is read, and the process proceeds to step S702.
In step S702, it is determined whether or not the read attention level determination flag is 1. If the attention level determination flag is determined to be 1 (YES), the process proceeds to step S704.
On the other hand, if it is determined that the attention level determination flag is not 1 (NO), the process returns to step S700 to recheck the attention level determination flag.
In step S704, the lamp 101 of the projector 100 is controlled to reduce the brightness of the projected image, and the process proceeds to step S706.
In step S706, the fan 104 of the projector 100 is controlled to reduce the rotational speed, and the process proceeds to step S708.
In step S708, it is determined whether or not a projection instruction to the projector 100 has been issued again.
Here, the reprojection instruction includes a case where the personal computer 200 instructs the operation control unit 105 of the projector 100 by operating the keyboard 220 or the mouse 221 in addition to the instruction of the operation unit 140 of the projector 100.

ステップS708において、再投影指示がされたと判断(YES)されれば、ステップS710に移行し、一方、再投影指示がされないと判断(NO)されれば、ステップS708の判断を繰返して、再投影指示が検出されるのを待つ。
ステップS710では、プロジェクタ100のランプ101を制御して通常の投影を行う輝度に復帰させ、ステップS712に移行する。このステップS712では、ファン104の回転数を通常の投影を行う回転数に復帰させ、一連の処理を終了して元の処理に復帰させる。
次に、画像投影システムの動作を説明する。最初に、会議の進行者は、会議の開始前にパソコン200に対して会議参加者ごとの「設定ウエイト」を設定し、カメラ130が会議参加者を撮影するようにした後に、用意した説明資料をプロジェクタ100がスクリーン120に投影するようにして会議をスタートさせる。
If it is determined in step S708 that a reprojection instruction has been issued (YES), the process proceeds to step S710. If it is determined that a reprojection instruction has not been issued (NO), the determination in step S708 is repeated to perform reprojection. Wait for the indication to be detected.
In step S710, the lamp 101 of the projector 100 is controlled to return to the luminance for performing normal projection, and the process proceeds to step S712. In step S712, the rotational speed of the fan 104 is returned to the rotational speed at which normal projection is performed, and a series of processing is terminated and the original processing is restored.
Next, the operation of the image projection system will be described. First, the conference organizer sets a “setting weight” for each conference participant in the personal computer 200 before the conference starts, and the camera 130 captures the conference participants before preparing the explanatory material. Is started so that the projector 100 projects the image onto the screen 120.

説明資料がスクリーン120に投影されると、注目度分析部202では、ステップS316を経て、カメラ130が撮影した会議参加者の撮影画像が分析されて注目度分析表(図4)に記録される。この注目度判定部203では、ステップS612を経て、注目度分析表の注目度分析フラグが判定され、注目度の判定結果が得られる。
次に、会議参加者は、投影画像による説明資料の説明が終わると、投影画像の方には目を向けずに、会議参加者間での議事検討の工程に移行する。
注目度判定部203では、会議参加者が投影画像に注目しなくなったことを判定するのでプロジェクタ100に対し、判定結果を出力する。プロジェクタ100は、注目度判定部203の判定結果を受け、プロジェクタの輝度を低下させたり、ファン104の回転数を低下させる。
When the explanatory material is projected on the screen 120, the attention level analysis unit 202 analyzes the captured image of the conference participant captured by the camera 130 through step S316 and records it in the attention level analysis table (FIG. 4). . In the attention level determination unit 203, the attention level analysis flag of the attention level analysis table is determined through step S612, and the determination result of the attention level is obtained.
Next, when the explanation of the explanatory material using the projection image is completed, the conference participant shifts to the agenda review process between the conference participants without paying attention to the projection image.
The attention level determination unit 203 determines that the conference participant has stopped paying attention to the projection image, and outputs a determination result to the projector 100. The projector 100 receives the determination result of the attention level determination unit 203 and decreases the brightness of the projector or the rotation speed of the fan 104.

以上述べたような実施例1によれば、次のような効果がある。
(1)会議参加者が投影画像を注視するプレゼンテーションの工程や、会議参加者が議論と共に投影画像を再確認する中間状態から、投影画像を見る事無く、議論される議事検討の工程へと変化したタイミングを適切に判定できるため、プロジェクタ100をそれぞれの工程に適した状態に制御できる。
According to the first embodiment as described above, there are the following effects.
(1) A transition from a presentation process in which a conference participant watches the projection image or an intermediate state in which the conference participant reconfirms the projection image together with a discussion to a discussion proceeding process that is discussed without looking at the projection image. Therefore, the projector 100 can be controlled in a state suitable for each process.

(実施例2)
次に、本発明の実施例2について、図8を参照して説明する。尚、以下の説明では、既に説明した部分と同一な部分については、同一符号を付してその説明を省略する。この図8は、本実施例2の画像投影システムの構成を示すブロック図である。前記した実施例1では、注目度分析部202及び注目度判定部203は、パソコン200側に具備されたが、本実施例2では、注目度分析部302及び注目度判定部303は、カメラ130を含む撮像装置300側に具備される。
撮像装置300は、撮像入力部301と、注目度分析部302と、注目度判定部303と、注目度判定部303の判定結果をパソコン200またはプロジェクタ100に出力する送信部304とを備える。ここで、注目度分析部302及び注目度判定部303の機能は、実施例1で説明した注目度分析部202及び注目度判定部203のそれぞれの機能と略同一であるため、これらの機能の説明は省略する。
この撮像装置300は、同一筐体にカメラ130を含んでいる構成に限らず、撮像装置300の筐体にカメラ130を含まない構成であってもよい。さらに、撮像装置300は、図示しないハードウエアとしてのCPUと、メモリとしてのROMとRAMを備え、メモリに格納されているプログラムにより、撮像入力部301から送信部304までの演算処理を実行する。
上記構成により、本実施例1で説明した注目度分析の処理と注目度判定の処理を、撮像装置300で実行できる。
(Example 2)
Next, a second embodiment of the present invention will be described with reference to FIG. In the following description, parts that are the same as those already described are given the same reference numerals and description thereof is omitted. FIG. 8 is a block diagram showing the configuration of the image projection system of the second embodiment. In the first embodiment, the attention level analysis unit 202 and the attention level determination unit 203 are provided on the personal computer 200 side. However, in the second embodiment, the attention level analysis unit 302 and the attention level determination unit 303 include the camera 130. Is provided on the imaging device 300 side.
The imaging apparatus 300 includes an imaging input unit 301, an attention level analysis unit 302, an attention level determination unit 303, and a transmission unit 304 that outputs a determination result of the attention level determination unit 303 to the personal computer 200 or the projector 100. Here, the functions of the attention level analysis unit 302 and the attention level determination unit 303 are substantially the same as the functions of the attention level analysis unit 202 and the attention level determination unit 203 described in the first embodiment. Description is omitted.
The imaging apparatus 300 is not limited to the configuration in which the camera 130 is included in the same casing, and may be in a configuration in which the camera 130 is not included in the casing of the imaging apparatus 300. Furthermore, the imaging apparatus 300 includes a CPU (not shown) as hardware, ROM and RAM as memories, and executes arithmetic processing from the imaging input unit 301 to the transmission unit 304 by a program stored in the memory.
With the above configuration, the attention level analysis process and the attention level determination process described in the first embodiment can be executed by the imaging apparatus 300.

尚、送信部304は、USBなどのインタフェースを備え、注目度判定の結果をパソコン200に出力して、パソコン200の音響発生部204を制御し、制御I/F部205を介してプロジェクタ100を制御できる。また、パソコン200のキーボード220から入力された「設定ウエイト」の情報を送信部304に送ることで、参加者分析表のウエイト情報もセットできる。   The transmission unit 304 includes an interface such as a USB, outputs a result of attention level determination to the personal computer 200, controls the sound generation unit 204 of the personal computer 200, and controls the projector 100 via the control I / F unit 205. Can be controlled. Further, by sending the “setting weight” information input from the keyboard 220 of the personal computer 200 to the transmission unit 304, the weight information of the participant analysis table can also be set.

以上述べたような実施例2によれば、実施例1で述べた(1)の効果に加え、以下のような効果を奏する。
(2)会議システムの主な演算処理が専用の撮像装置300として一体構成されているので、専用の処理回路をハードウエアで構成し会議システムの演算処理を高速化することができ、パソコン200の処理負荷も低減することができる。
(3)パソコン200に会議システムのソフトウエアをインストールする必要がないので、会議で用いるパソコンは限定されない。
According to the second embodiment as described above, in addition to the effect (1) described in the first embodiment, the following effects can be obtained.
(2) Since the main arithmetic processing of the conference system is integrally configured as the dedicated imaging device 300, the dedicated processing circuit can be configured by hardware to speed up the arithmetic processing of the conference system. Processing load can also be reduced.
(3) Since it is not necessary to install the conference system software on the personal computer 200, the personal computer used in the conference is not limited.

(実施例3)
次に、本発明の実施例3について、図9を参照して説明する。この図9は、本実施例3のプロジェクタ400の構成を示すブロック図である。前記した実施例1では、撮像入力部201、注目度分析部202、注目度判定部203、音響発生部204、データ記憶部206および画像処理部207は、パソコン200側に具備された。本実施例3では、実施例1でプロジェクタ100側に具備された各機能に加えて、撮像入力部401、注目度分析部402、注目度判定部403、音響発生部404、データ記憶部406および画像処理部407は、プロジェクタ400側に具備される。尚、撮像入力部401、注目度分析部402、注目度判定部403、音響発生部404、データ記憶部406および画像処理部407の機能は、実施例1で説明した撮像入力部201、注目度分析部202、注目度判定部203、音響発生部204、データ記憶部206および画像処理部207と略同一であるため、これらの機能の説明は省略する。
データ入力部405は、例えば、DVDプレーヤのような画像出力機器450から画像信号を入力する。入力された画像信号は、データ記憶部406に記憶される。また、操作部440は、動作制御部105に加えて、注目度分析部402も操作できる。
(Example 3)
Next, Embodiment 3 of the present invention will be described with reference to FIG. FIG. 9 is a block diagram illustrating a configuration of the projector 400 according to the third embodiment. In the first embodiment, the imaging input unit 201, the attention level analysis unit 202, the attention level determination unit 203, the sound generation unit 204, the data storage unit 206, and the image processing unit 207 are provided on the personal computer 200 side. In the third embodiment, in addition to the functions provided on the projector 100 side in the first embodiment, the imaging input unit 401, the attention level analysis unit 402, the attention level determination unit 403, the sound generation unit 404, the data storage unit 406, and The image processing unit 407 is provided on the projector 400 side. The functions of the imaging input unit 401, the attention level analysis unit 402, the attention level determination unit 403, the sound generation unit 404, the data storage unit 406, and the image processing unit 407 are the same as the imaging input unit 201 and the attention level described in the first embodiment. Since the analysis unit 202, the attention level determination unit 203, the sound generation unit 204, the data storage unit 206, and the image processing unit 207 are substantially the same, description of these functions is omitted.
The data input unit 405 inputs an image signal from an image output device 450 such as a DVD player, for example. The input image signal is stored in the data storage unit 406. The operation unit 440 can also operate the attention level analysis unit 402 in addition to the operation control unit 105.

このプロジェクタ400には、図示を略したハードウエアとしてのCPUと、メモリとしてのROMおよびRAMとを備え、これらのハードウェアと、メモリに格納されているプログラムとが有機的に協働することにより、前記したそれぞれの機能を実現している。
以上述べたような実施例3によれば、実施例1で述べた(1)の効果に加え、以下のような効果を奏する。
(4)プロジェクタ400単体で注目度の分析および判定を行うため、パソコン200は不要であり、会議場の移動や会議の準備が容易にできる。
(5)操作部440は、注目度分析部402を操作できるので、例えば「設定ウエイト」のような参加者分析表のデータを直接入力できる。
The projector 400 includes a CPU (not shown) as hardware and ROM and RAM as memories, and these hardware and a program stored in the memory cooperate in an organic manner. Each of the functions described above is realized.
According to the third embodiment as described above, in addition to the effect (1) described in the first embodiment, the following effects can be obtained.
(4) Since the attention level is analyzed and determined by the projector 400 alone, the personal computer 200 is not necessary, and it is easy to move the conference hall and prepare for the conference.
(5) Since the operation unit 440 can operate the attention level analysis unit 402, for example, data of a participant analysis table such as “setting weight” can be directly input.

以上、本発明を図示した実施例に基づいて説明したが、本発明は、これに限定されるものではなく、以下に述べるような変形例も想定できる。
(1)実施例1および実施例3において、また、カメラ130の設置台数は1台として説明したが、これに限定されるものではなく、複数台で撮影エリアを分担して撮影する構成であってもよい。
(2)実施例1および実施例3において、参加者分析表での、「設定ウエイト」と「分析結果」から判定結果を求める演算や、注目度判定フラグを求める演算処理は、注目度分析における処理として説明したが、注目度判定の処理に含めてもよい。
(3)実施例1において、注目度分析や注目度判定の演算処理は、投影画像を扱うパソコン200が処理するように構成したが、これに限定されるものではなく、通信回線により接続されたサーバーなどの他のコンピュータで演算処理を行うように構成することもできる。
(4)実施例1および実施例3において、図3及び図5〜図7のフローチャートを実行するにあたっては、ROMに予め格納されている制御プログラムを実行する場合に限らず、これらの手順を示したプログラムが記憶された記憶媒体から、そのプログラムをRAMに読込んで実行するようにしてもよい。ここで、記憶媒体とは、RAM,ROM等の半導体記憶媒体、FD,HD等の磁気記憶型記憶媒体、CD,DVD等の光学的読み取り方式記憶媒体、MO等の磁気記憶型/光学的読取方式記憶媒体であって、電子的、磁気的、光学的等の読み取り方式のいかんにかかわらず、コンピュータで読み取り可能な記憶媒体であれば、あらゆる記憶媒体を含む。
The present invention has been described above based on the illustrated embodiment. However, the present invention is not limited to this, and modifications described below can be assumed.
(1) In the first and third embodiments, the number of cameras 130 is set as one. However, the number of cameras 130 is not limited to this. May be.
(2) In the first and third embodiments, the calculation for obtaining the determination result from the “setting weight” and the “analysis result” in the participant analysis table and the calculation processing for obtaining the attention level determination flag are performed in the attention level analysis. Although described as processing, it may be included in the attention degree determination processing.
(3) In the first embodiment, the calculation processing of attention level analysis and attention level determination is configured to be performed by the personal computer 200 that handles projection images, but is not limited to this, and is connected by a communication line. It can also be configured to perform arithmetic processing on another computer such as a server.
(4) In the first and third embodiments, the flowcharts of FIGS. 3 and 5 to 7 are not limited to the case where the control program stored in advance in the ROM is executed. The program may be read from the storage medium storing the program into the RAM and executed. Here, the storage medium is a semiconductor storage medium such as RAM or ROM, a magnetic storage type storage medium such as FD or HD, an optical reading type storage medium such as CD or DVD, or a magnetic storage type / optical reading such as MO. Regardless of the reading method such as electronic, magnetic, optical, etc., any type of storage medium can be used as long as it is a computer-readable storage medium.

本発明の実施例1に係る画像投影システムを示す概観図。1 is a schematic view showing an image projection system according to Embodiment 1 of the present invention. 実施例1に係る画像投影システムの機能構成を示すブロック図。1 is a block diagram illustrating a functional configuration of an image projection system according to Embodiment 1. FIG. 実施例1に係る注目度分析の処理を示すフローチャート。5 is a flowchart illustrating attention degree analysis processing according to the first embodiment. 実施例1に係る参加者分析表。The participant analysis table | surface which concerns on Example 1. FIG. 実施例1に係る画面切替の停止検出の処理を示すフローチャート。5 is a flowchart illustrating processing for detecting stoppage of screen switching according to the first embodiment. 実施例1に係る注目度判定の処理を示すフローチャート。5 is a flowchart illustrating attention level determination processing according to the first embodiment. 実施例1に係るプロジェクタ制御の処理を示すフローチャート。5 is a flowchart illustrating projector control processing according to the first embodiment. 実施例2に係る画像投影システムの機能構成を示すブロック図。FIG. 9 is a block diagram illustrating a functional configuration of an image projection system according to a second embodiment. 実施例3に係るプロジェクタの機能構成を示すブロック図。FIG. 10 is a block diagram illustrating a functional configuration of a projector according to a third embodiment.

符号の説明Explanation of symbols

100,400…プロジェクタ、101…ランプ(光源)、102…光学変調部、103…投影処理部、104…ファン、105…動作制御部、120…スクリーン、130…カメラ、140,440…操作部、150…会議机、200…パソコン、201,301,401…撮像入力部、202,302,402…注目度分析部、203,303,403…注目度判定部、204,404…音響発生部、205…制御I/F部、206,406…データ記憶部、207,407…画像処理部、208…画像出力部、209…PC入力部、210…表示制御部、220…キーボード、221…マウス、230…パワーコントローラ、300…撮像装置、304…送信部、405…データ入力部、450…画像出力機器、A〜F…会議参加者。
DESCRIPTION OF SYMBOLS 100,400 ... Projector, 101 ... Lamp (light source), 102 ... Optical modulation part, 103 ... Projection processing part, 104 ... Fan, 105 ... Operation control part, 120 ... Screen, 130 ... Camera, 140, 440 ... Operation part, 150 ... Conference desk, 200 ... Personal computer, 201, 301, 401 ... Imaging input unit, 202, 302, 402 ... Attention level analysis unit, 203, 303, 403 ... Attention level determination unit, 204, 404 ... Sound generation unit, 205 Control I / F unit 206, 406 Data storage unit 207 407 Image processing unit 208 Image output unit 209 PC input unit 210 Display control unit 220 Keyboard 221 Mouse 230 DESCRIPTION OF SYMBOLS ... Power controller, 300 ... Imaging apparatus, 304 ... Transmission part, 405 ... Data input part, 450 ... Image output apparatus, AF ... Meeting participant.

Claims (11)

画像を投影するプロジェクタであって、
投影された前記画像を目視する人物が撮影された撮影画像を入力する撮像入力部と、
前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析部と、
前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定部と、
前記注目度の判定に応じて自身の動作を制御する動作制御部とを備えることを特徴とするプロジェクタ。
A projector for projecting an image,
An imaging input unit for inputting a captured image of a person who views the projected image;
An attention level analysis unit that analyzes the attention level at which the person focuses on the projected image from the captured image;
An attention level determination unit that determines the attention level of the person based on the analysis result;
A projector comprising: an operation control unit that controls its own operation according to the determination of the attention level.
請求項1に記載のプロジェクタにおいて、
前記動作制御部は、前記投影する画像の輝度を制御することを特徴とするプロジェクタ。
The projector according to claim 1, wherein
The operation control unit controls brightness of the projected image.
請求項1乃至2に記載のプロジェクタにおいて、
前記プロジェクタの内部を冷却する冷却部を更に備え、
前記動作制御部は、前記冷却部が冷却する強度を制御することを特徴とするプロジェクタ。
The projector according to claim 1 or 2,
A cooling unit for cooling the inside of the projector;
The projector according to claim 1, wherein the operation control unit controls an intensity of cooling by the cooling unit.
請求項1乃至3のいずれか1項に記載のプロジェクタにおいて、
予め設定された音響データに基づいて音響を発生させる音響発生部を更に備え、
前記音響発生部は、前記注目度により制御されることを特徴とするプロジェクタ。
The projector according to any one of claims 1 to 3,
A sound generator that generates sound based on preset sound data;
The projector is characterized in that the sound generation unit is controlled by the degree of attention.
請求項1乃至4のいずれか1項に記載のプロジェクタにおいて、
前記撮影画像は、撮影対象の表面温度を色調、又は濃淡の変化に置き換えることで得られる画像であることを特徴とするプロジェクタ。
The projector according to any one of claims 1 to 4,
The projector is characterized in that the photographed image is an image obtained by replacing the surface temperature of the subject to be photographed with a change in color tone or shading.
請求項1乃至5のいずれか1項に記載のプロジェクタにおいて、
前記注目度分析部は、前記人物の顔が前記投影された画像を向いているか、否かの状態を示す方向情報と、前記状態の継続時間とにより前記注目度を分析することを特徴とするプロジェクタ。
The projector according to any one of claims 1 to 5,
The attention level analysis unit analyzes the attention level based on direction information indicating a state of whether or not the person's face is facing the projected image and a duration of the state. projector.
請求項1乃至6のいずれか1項に記載のプロジェクタにおいて、
前記注目度分析部は、
前記注目度を分析する対象の人物か否かの情報に基き、
前記対象である人物の前記注目度を分析することを特徴とするプロジェクタ。
The projector according to any one of claims 1 to 6,
The attention level analysis unit
Based on the information on whether or not the person is the subject of the attention degree analysis,
A projector that analyzes the degree of attention of a person who is the object.
請求項1乃至7のいずれか1項に記載のプロジェクタにおいて、
前記投影された画像の切替を検出する投影画像切替検出部と、
前記検出してから経過した時間に基づいて、前記画像の切替の終了を判定する投影画像切替終了判定部とを更に備え、
前記注目度分析部は、前記終了の判定を受けて前記分析を開始することを特徴とするプロジェクタ。
The projector according to any one of claims 1 to 7,
A projected image switching detection unit for detecting switching of the projected image;
A projection image switching end determination unit that determines the end of switching of the image based on the time elapsed since the detection;
The degree-of-attention analysis unit starts the analysis upon receiving the end determination.
画像を投影するプロジェクタとホストコンピュータと撮像装置とを含む画像投影システムであって、
前記撮像装置は、
前記画像を目視する人物を撮影して撮影画像を生成する撮像部を備え、
前記ホストコンピュータは、
前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析部と、
前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定部とを備え、
前記プロジェクタは、
前記注目度の判定に応じて自身の動作を制御する動作制御部を備えることを特徴とする画像投影システム。
An image projection system including a projector that projects an image, a host computer, and an imaging device,
The imaging device
An imaging unit that shoots a person who views the image and generates a captured image;
The host computer
An attention level analysis unit that analyzes the attention level at which the person focuses on the projected image from the captured image;
An attention level determination unit that determines the level of attention of the person based on the result of the analysis,
The projector is
An image projection system comprising: an operation control unit that controls its own operation in accordance with the determination of the attention level.
画像を投影するプロジェクタと撮像装置とを含む画像投影システムであって、
前記撮像装置は、
前記画像を目視する人物を撮影して撮影画像を生成する撮像部と、
前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析部と、
前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定部とを備え、
前記プロジェクタは、
前記注目度の判定に応じて自身の動作を制御する動作制御部を備えることを特徴とする画像投影システム。
An image projection system including a projector for projecting an image and an imaging device,
The imaging device
An imaging unit that shoots a person who views the image and generates a captured image;
An attention level analysis unit that analyzes the attention level at which the person focuses on the projected image from the captured image;
An attention level determination unit that determines the level of attention of the person based on the result of the analysis,
The projector is
An image projection system comprising: an operation control unit that controls its own operation in accordance with the determination of the degree of attention.
プロジェクタによる画像投影方法であって、
前記プロジェクタが投影する画像を目視する人物が撮影された撮影画像を取得する撮影画像取得ステップと、
前記人物が前記投影された画像を注目する注目度を、前記撮影画像から分析する注目度分析ステップと、
前記分析の結果に基づいて、前記人物の注目度を判定する注目度判定ステップと、
前記注目度の判定に応じて前記プロジェクタを制御する制御ステップとを含むことを特徴とする画像投影方法。


An image projection method using a projector,
A captured image acquisition step of acquiring a captured image of a person who views the image projected by the projector;
Attention level analysis step of analyzing the attention level at which the person focuses on the projected image from the captured image;
Attention level determination step for determining the attention level of the person based on the result of the analysis;
And a control step of controlling the projector according to the determination of the attention level.


JP2004367204A 2004-12-20 2004-12-20 Projector, image projection system, and image projection method Withdrawn JP2006171600A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004367204A JP2006171600A (en) 2004-12-20 2004-12-20 Projector, image projection system, and image projection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004367204A JP2006171600A (en) 2004-12-20 2004-12-20 Projector, image projection system, and image projection method

Publications (1)

Publication Number Publication Date
JP2006171600A true JP2006171600A (en) 2006-06-29

Family

ID=36672410

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004367204A Withdrawn JP2006171600A (en) 2004-12-20 2004-12-20 Projector, image projection system, and image projection method

Country Status (1)

Country Link
JP (1) JP2006171600A (en)

Similar Documents

Publication Publication Date Title
CN101311962B (en) Image editing apparatus and method for controlling image editing apparatus
CN101753822B (en) Imaging apparatus and image processing method used in imaging device
US9747492B2 (en) Image processing apparatus, method of processing image, and computer-readable storage medium
JP4431547B2 (en) Image display control device, control method therefor, and control program therefor
JP2008040710A (en) Face detector, image pickup device, and face detecting method
JP2010010936A (en) Image recording apparatus, image recording method, image processing apparatus, image processing method, and program
JP2008040709A (en) Face detector, image pickup device, and face detecting method
JP2008015915A (en) Image processing method, input interface device
JP2011082966A (en) Imaging apparatus
JP2010041435A (en) Image device and control method thereof
JP5200821B2 (en) Imaging apparatus and program thereof
JP2007124399A (en) Image processing apparatus, electronic camera and image processing program
JP2012257112A (en) Imaging apparatus and program
JP2015012535A (en) Imaging equipment and imaging method
JP2008054031A (en) Digital camera and display control method
JP2007215086A (en) Camera capable of taking moving picture
JP2006171600A (en) Projector, image projection system, and image projection method
JP5826953B2 (en) Photographing equipment and photographing method
JP2008160280A (en) Imaging apparatus and automatic imaging method
JP2020115679A (en) Object detection device, detection control method, and program
JP2010087572A (en) Imaging apparatus, and program
JP2009094686A (en) Camera having projector
JP2009118084A (en) Digital camera
US11762532B2 (en) Image processing device, control method therefor, imaging device, and recording medium
JP2012027302A (en) Imaging apparatus with projection function

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20070403

A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20080304