JP2011215441A - Projecting device - Google Patents

Projecting device Download PDF

Info

Publication number
JP2011215441A
JP2011215441A JP2010084763A JP2010084763A JP2011215441A JP 2011215441 A JP2011215441 A JP 2011215441A JP 2010084763 A JP2010084763 A JP 2010084763A JP 2010084763 A JP2010084763 A JP 2010084763A JP 2011215441 A JP2011215441 A JP 2011215441A
Authority
JP
Japan
Prior art keywords
projection
unit
shooting
imaging
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010084763A
Other languages
Japanese (ja)
Other versions
JP5517705B2 (en
JP2011215441A5 (en
Inventor
Tachio Ono
太刀雄 小野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2010084763A priority Critical patent/JP5517705B2/en
Publication of JP2011215441A publication Critical patent/JP2011215441A/en
Publication of JP2011215441A5 publication Critical patent/JP2011215441A5/ja
Application granted granted Critical
Publication of JP5517705B2 publication Critical patent/JP5517705B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

PROBLEM TO BE SOLVED: To understandably inform an associate participant of a photographing state, in a projecting device which can photograph and project an object on a projection surface.SOLUTION: A projection surface detecting part (308) detects that a paper document is placed on and removed from the projection surface. A photographing processing part (310) allows a camera part (311) to photograph the paper document on the projection surface. A CPU (303) allows a projection processing part (301) and a liquid crystal panel (312) to project an information icon for showing the photographing state of the paper document by the camera part (311) onto the projection surface.

Description

本発明は、投影装置に関し、特に、投影面に配置された物体を撮影する投影装置に関する。   The present invention relates to a projection apparatus, and more particularly to a projection apparatus that captures an object placed on a projection plane.

特開２００６−１９７３６９号公報JP 2006-197369 A

従来、液晶プロジェクタに代表される投影装置に、カメラなどの撮像手段を備えたものが知られている（特許文献１）。プロジェクタとカメラからなり、撮影範囲を示す撮影枠を投影面に投影し、カメラが撮影枠内の被写体を撮影するようにしたシステムが記載されている。   2. Description of the Related Art Conventionally, a projection apparatus typified by a liquid crystal projector is known that includes an imaging unit such as a camera (Patent Document 1). A system is described which includes a projector and a camera, projects a shooting frame indicating a shooting range onto a projection plane, and the camera takes a picture of a subject within the shooting frame.

従来技術では、複数の被写体の画像を順次取り込むことができない。また、各被写体の撮影中と撮影終了などのステータスを表示することができず、ユーザが撮影のステータスを適切に認識するのが困難であった。   In the prior art, images of a plurality of subjects cannot be captured sequentially. In addition, it is difficult to display statuses such as the end of shooting and the end of shooting for each subject, and it is difficult for the user to properly recognize the shooting status.

本発明は、このような不都合を解消した投影装置を提示することを目的とする。   It is an object of the present invention to provide a projection apparatus that eliminates such inconveniences.

この様な課題を解決するために、本発明に係る投影装置は、画像を投影する投影手段と、前記投影手段の投影面上に物体が置かれたこと及び取り去られたことを検出する投影面検出手段と、前記投影面を撮影する撮影手段と、前記投影面検出手段によって前記投影面上に物体が置かれたことを検出した場合、前記撮影手段に前記物体を撮影させ電子データとして取得する撮影制御手段と、前記撮影手段による前記物体の撮影の際に、撮影状態を示す情報アイコンを前記投影手段により投影させる投影制御手段とを具備することを特徴とする。   In order to solve such a problem, a projection apparatus according to the present invention includes a projection unit that projects an image, and a projection that detects that an object is placed on and removed from the projection plane of the projection unit. When detecting that the object is placed on the projection plane by the plane detection unit, the imaging unit for imaging the projection plane, and the projection plane detection unit, the imaging unit is used to capture the object and obtain it as electronic data. And a projection control unit that projects an information icon indicating a shooting state by the projection unit when the object is captured by the imaging unit.

本発明によれば、投影面上に複数の物体を配置しただけで自動的に検出し、撮影すると共に、各物体の撮影状況のステータスを投影物の配置された位置に関連する位置に表示するので、ユーザの使い勝手が向上する。   According to the present invention, it is possible to automatically detect and shoot only by arranging a plurality of objects on the projection surface, and display the status of the shooting state of each object at a position related to the position where the projection is arranged. Therefore, user convenience is improved.

本実施例を用いた会議の一形態図である。It is one form figure of the meeting using a present Example. 本実施例による机面投影状態の平面図である。It is a top view of the desk surface projection state by a present Example. 本実施例の概略構成ブロック図である。It is a schematic block diagram of a present Example. 本実施例による机面投影状態であって、紙資料を置いた状態の平面図である。It is a top view of the state which is the desk surface projection state by a present Example, and has set | placed the paper material. 差分画像による物体検出の模式図である。It is a schematic diagram of the object detection by a difference image. 斜め撮影の場合の補正処理の説明図であるIt is explanatory drawing of the correction process in the case of diagonal imaging | photography. 撮影された紙資料の説明図である。It is explanatory drawing of the photographed paper material. 本実施例の動作フローチャートである。It is an operation | movement flowchart of a present Example. 本実施例の情報アイコンの表示フローチャートである。It is a display flowchart of the information icon of a present Example. 本実施例による机面投影状態であって、撮影中アイコンを表示する状態の平面図である。It is a top view of the state which is a desk surface projection state by a present Example, and displays the icon during imaging | photography. 本実施例による机面投影状態であって、撮影完了アイコンと表示アイコンを表示する状態の平面図である。It is a top view of the state which is a desk surface projection state by a present Example, and displays a photography completion icon and a display icon. 本実施例による机面投影状態であって、投影中アイコンを表示する状態の平面図である。It is a top view of the state which is a desk surface projection state by a present Example, and displays the in-projection icon. 本実施例による机面投影状態であって、撮影画像を拡大表示する状態の平面図である。It is a top view of the state which is a desk surface projection state by a present Example, and expands and displays a picked-up image. 本実施例による机面投影状態であって、複数の紙資料が置かれた状態の平面図である。It is a top view of the state by which the paper projection state by the present Example was carried out, and several paper materials were put. 投影面上に複数の紙資料が置かれた場合の差分画像である。It is a difference image when a plurality of paper materials are placed on the projection surface. 本実施例による机面投影状態であって、複数の紙資料に撮影完了アイコンを表示する状態の平面図である。It is a top view of the state which is the desk surface projection state by a present Example, and displays the photography completion icon on several paper materials. 本実施例による机面投影状態であって、複数の紙資料に撮影完了アイコン又は撮影中アイコンを表示する状態の平面図である。FIG. 6 is a plan view of a state in which a photographing completion icon or a photographing icon is displayed on a plurality of paper materials in a desk projection state according to the embodiment.

以下、図面を参照して、本発明の実施例を詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図１は、本発明に係る投影装置の一実施例であるプロジェクタを用いた会議システムの構成例である。本発明に係る投影装置の一実施例であるプロジェクタ１０１は天井に吊り下げられている。プロジェクタ１０１は、映像伝送ケーブル１０４によってＰＣ（パーソナルコンピュータ）１０３からの出力された画像データをテーブル１０２に投影する。   FIG. 1 is a configuration example of a conference system using a projector, which is an embodiment of a projection apparatus according to the present invention. A projector 101 which is an embodiment of a projection apparatus according to the present invention is suspended from a ceiling. The projector 101 projects the image data output from the PC (personal computer) 103 onto the table 102 by the video transmission cable 104.

図２は、テーブル１０２の俯瞰図である。投影画面２０１には、ＰＣ１０３から出力される画像データがプロジェクタ１０１により投影されている。会議の参加者２１１〜２１４は、投影画面２０１に表示される共有情報資料２０２を参照しながら会議を進行する。   FIG. 2 is an overhead view of the table 102. Image data output from the PC 103 is projected on the projection screen 201 by the projector 101. The conference participants 211 to 214 proceed with the conference while referring to the shared information material 202 displayed on the projection screen 201.

図３は、プロジェクタ１０１の概略構成ブロック図を示す。投影処理部３０１は、映像処理部３０２からの投影画像データに従い液晶パネル３１２を駆動することで、画像を投影面に投影する。映像処理部３０２は、映像入力部３０６からの画像データにＯＳＤ制御部３０７によって生成される画像データを重畳して投影画像データを生成し、投影処理部３０１に転送する。   FIG. 3 shows a schematic block diagram of the projector 101. The projection processing unit 301 projects the image on the projection plane by driving the liquid crystal panel 312 according to the projection image data from the video processing unit 302. The video processing unit 302 generates projection image data by superimposing the image data generated by the OSD control unit 307 on the image data from the video input unit 306, and transfers the projection image data to the projection processing unit 301.

ＣＰＵ３０３はプロジェクタ１０１の全体を制御し、投影制御手段として情報アイコンの投影を制御する。メモリ部３０４は、データ及びＣＰＵ３０３により実行されるプログラムを格納する。赤外線受信部３２１は、リモコン３２２からのコマンドを搬送する赤外線信号を受信する。操作部３０５は、赤外受光用の赤外線受信部３２１による受信信号をＣＰＵ３０３に転送する。操作部３０５は、プロジェクタ１０１の筐体に装備される操作スイッチ又は操作ボタン類を含んでも良い。   The CPU 303 controls the entire projector 101 and controls the projection of information icons as projection control means. The memory unit 304 stores data and a program executed by the CPU 303. The infrared receiving unit 321 receives an infrared signal that carries a command from the remote controller 322. The operation unit 305 transfers a reception signal from the infrared receiving unit 321 for receiving infrared light to the CPU 303. The operation unit 305 may include operation switches or operation buttons that are provided in the housing of the projector 101.

映像入力部３０６は、外部機器（本実施例では、ＰＣ１０３）からの画像データを受信し、映像処理部３０２に転送する。ＯＳＤ制御部３０７は、ＧＵＩ表示のための画像データを生成し、メモリ部３０４に格納されている撮影画像データから投影用の画像データを生成する。   The video input unit 306 receives image data from an external device (PC 103 in this embodiment) and transfers the image data to the video processing unit 302. The OSD control unit 307 generates image data for GUI display, and generates image data for projection from captured image data stored in the memory unit 304.

投影面検出部３０８は、投影面上に物が置かれたことを検出し、投影面に置かれた物が取り除かれたことを検出する。投影面検出部３０８はまた、投影面上に置かれた物の位置と大きさを検出する。   The projection plane detection unit 308 detects that an object has been placed on the projection plane, and detects that an object placed on the projection plane has been removed. The projection plane detection unit 308 also detects the position and size of an object placed on the projection plane.

投影面撮影制御部３０９は、カメラ部３１１を制御する。撮影処理部３１０は、カメラ部３１１による撮影処理を行い、カメラ部３１１からの撮影画像データを取得して補正処理し、メモリ部３０４に格納する。カメラ部３１１は、投影面撮影制御部３０９によって駆動され、撮像素子、撮影レンズ、並びにパン、チルト及びズームの駆動部によって構成される。   The projection plane imaging control unit 309 controls the camera unit 311. The imaging processing unit 310 performs imaging processing by the camera unit 311, acquires captured image data from the camera unit 311, performs correction processing, and stores it in the memory unit 304. The camera unit 311 is driven by the projection plane imaging control unit 309, and includes an imaging element, an imaging lens, and pan, tilt, and zoom driving units.

以下、本実施例の特徴的な動作を説明する。図４は、会議中に、必要となった紙資料４０１を参加者２１３が投影テーブル１０２上に置いた状態を示す。この状態では、参加者２１１、２１２、２１４は、その紙資料４０１を確認することが困難である。   Hereinafter, characteristic operations of the present embodiment will be described. FIG. 4 shows a state in which the participant 213 places the necessary paper material 401 on the projection table 102 during the conference. In this state, it is difficult for the participants 211, 212, and 214 to check the paper material 401.

この状態から会議を円滑に進めるための、プロジェクタ１０１の動作フローを図８及び図９のフローチャートを用いて説明する。図８は、投影面上への物の載置又は除去に応じて、撮影と電子データ投影処理プロセス（図９）への通知を実行する投影面検出処理プロセスを示す。ＣＰＵ３０３上のプログラムが、図８及び図９に示すプロセスを実行する。図８に示すプロセスは、プロジェクタ１０１の起動後に実行される。   The operation flow of the projector 101 for smoothly proceeding with the conference from this state will be described with reference to the flowcharts of FIGS. FIG. 8 shows a projection plane detection processing process that executes imaging and notification to the electronic data projection processing process (FIG. 9) in accordance with the placement or removal of an object on the projection plane. A program on the CPU 303 executes the processes shown in FIGS. The process shown in FIG. 8 is executed after the projector 101 is activated.

起動後、投影面検出部３０８が、物体検出の処理を開始する（８０１）。具体的には、投影面検出部３０８は、メモリ部３０４上に展開されるカメラ部３１１からのライブビュー画像のフレーム間の変化から、物体の有無を検出する。この際、投影中の画像が変化したことによる差分を検出しないように、ＣＰＵ３０３は、映像処理部３０２の画像データまたは、映像入力部３０６に入力された画像データを投影面検出部３０８に入力する。そして、投影面検出部３０８は、投影画像の変化を除いたライブビュー画像のフレーム間変化から物体の有無を検出する。ライブビュー画像とは、その後の処理負荷を軽くするために縮小された画像列によって構成されている。図５は、２値化された差分画像５０１を示す。投影面検出部３０８は、差分画像により、投影面上に物が置かれたかどうかを判定し（８０２）、置かれていたものが取り除かれたかどうかを判定する（８０３）。   After activation, the projection plane detection unit 308 starts object detection processing (801). Specifically, the projection plane detection unit 308 detects the presence / absence of an object from a change between frames of a live view image from the camera unit 311 developed on the memory unit 304. At this time, the CPU 303 inputs the image data of the video processing unit 302 or the image data input to the video input unit 306 to the projection plane detection unit 308 so as not to detect a difference due to a change in the image being projected. . Then, the projection plane detection unit 308 detects the presence / absence of an object from the inter-frame change of the live view image excluding the change of the projection image. The live view image is composed of an image sequence reduced in order to reduce the subsequent processing load. FIG. 5 shows a binarized difference image 501. The projection plane detection unit 308 determines whether an object is placed on the projection plane based on the difference image (802), and determines whether the placed object is removed (803).

投影面上に物が置かれたと判定した場合、投影面検出部３０８は、差分画像５０１の画素を探索することによって、物体が置かれている対象領域５０２を特定する（Ｓ８０３）。対象領域５０２が特定されると、この領域５０２に対して電子データ投影処理プロセスを生成する（８０４）。   If it is determined that an object has been placed on the projection plane, the projection plane detection unit 308 searches the pixels of the difference image 501 to identify the target area 502 where the object is placed (S803). When the target area 502 is specified, an electronic data projection process is generated for the area 502 (804).

図９は、電子データ投影処理プロセスの処理フローを示す。ＣＰＵ３０３が、投影制御手段として、この電子データ投影処理プロセスを実行する。   FIG. 9 shows a processing flow of the electronic data projection processing process. The CPU 303 executes this electronic data projection processing process as projection control means.

投影面検出部３０８は、生成された電子データ投影処理プロセスに対し、検出された対象領域の撮影を開始する旨を示す撮影開始イベントを通知する。このイベントには、対象領域の座標情報が含まれる。   The projection plane detection unit 308 notifies the generated electronic data projection processing process of a shooting start event indicating that shooting of the detected target area is started. This event includes the coordinate information of the target area.

電子データ投影処理プロセスは、撮影開始イベントを受信すると、図１０に示すような、撮影中であることを示す撮影中アイコン１００１を投影面に表示させる（９０１）。すなわち、撮影中アイコン１００１がＯＳＤ制御部３０７によって生成される。映像処理部３０２は映像入力部３０６から転送される画像データに撮影中アイコン１００１をオーバーレイし、得られた合成画像が投影処理部３０１によって投影される。参加者は、撮影中アイコン１００１を表示することによって、紙資料の撮影が開始されること、従って、その紙資料を移動してはいけないことを判断できる。   Upon receiving the shooting start event, the electronic data projection processing process displays a shooting icon 1001 indicating that shooting is in progress as shown in FIG. 10 on the projection plane (901). That is, the shooting icon 1001 is generated by the OSD control unit 307. The video processing unit 302 overlays the shooting icon 1001 on the image data transferred from the video input unit 306, and the resultant composite image is projected by the projection processing unit 301. The participant can determine that the shooting of the paper material is started by displaying the shooting icon 1001, and therefore the paper material should not be moved.

投影面撮影制御部３０９は、投影面検出部３０８によって特定された対象領域５０２に向けて撮影方向を制御する（８０６）。すなわち、投影面撮影制御部３０９は、対象領域５０２が撮影領域の中心になるように、カメラ部３１１のパン及びチルトを制御する。もちろん、撮影方向を電子的に制御してもよい。投影面撮影制御部３０９は、投影面検出部３０８によって特定された対象領域５０２に対してズームを制御する（８０７）。すなわち、投影面撮影制御部３０９は、対象領域５０２が撮影領域の中で適切に大きなサイズになるようにカメラ部３１１のズームを制御する。もちろん、ズーム（画角）を電子的に制御しても良い。撮影方向及びズームを制御した後の撮影画像は、図７に示すような画像７０１となる。   The projection plane imaging control unit 309 controls the imaging direction toward the target area 502 specified by the projection plane detection unit 308 (806). That is, the projection plane imaging control unit 309 controls the pan and tilt of the camera unit 311 so that the target area 502 becomes the center of the imaging area. Of course, the shooting direction may be controlled electronically. The projection plane imaging control unit 309 controls zooming on the target area 502 specified by the projection plane detection unit 308 (807). That is, the projection plane imaging control unit 309 controls the zoom of the camera unit 311 so that the target area 502 has an appropriately large size within the imaging area. Of course, the zoom (field angle) may be controlled electronically. A photographed image after controlling the photographing direction and zoom is an image 701 as shown in FIG.

撮影状態が確定すると、プロジェクタ１０１は、画像の投影を停止する（８０８）。これは、投影したまま撮影すると、紙資料４０１に投影している画像も映りこんでしまうからである。投影面撮影制御部３０９は、カメラ部３１１を制御して、カメラ部３１１に撮影を実行させる（８０９）。   When the shooting state is confirmed, the projector 101 stops projecting an image (808). This is because if the image is taken while being projected, the image projected on the paper material 401 is also reflected. The projection plane imaging control unit 309 controls the camera unit 311 to cause the camera unit 311 to perform imaging (809).

カメラ部３１１による撮影が完了すると、プロジェクタ１０１は、停止していた投影を再開する（８１０）。また、撮影が完了すると、投影面撮影制御部３０９は、ＣＰＵ３０３の電子データ投影処理プロセスに撮影完了イベントを通知する（８１１）。   When the photographing by the camera unit 311 is completed, the projector 101 resumes the stopped projection (810). When shooting is completed, the projection plane shooting control unit 309 notifies the shooting completion event to the electronic data projection process of the CPU 303 (811).

電子データ投影処理プロセスは、撮影完了イベントを受信すると、図１１に示すような、撮影完了を示す撮影完了アイコン１１０１を表示させる（９０２）。同時に、電子データ化された紙資料（撮影画像データ）の表示開始を示す表示開始アイコン１１０２も表示させる。本実施例では、表示開始アイコン１１０２は各辺に対して表示され、リモコン３２２によって、カーソル１１０３を移動させ、選択できる。これに限らず、表示開始アイコン１１０２の表示位置を動的に変更してもいいし、またタッチセンサを利用して、参加者が直接選択指定できるようにしても良い。   Upon receiving the shooting completion event, the electronic data projection process displays a shooting completion icon 1101 indicating shooting completion as shown in FIG. 11 (902). At the same time, a display start icon 1102 indicating the display start of the paper material (photographed image data) converted into electronic data is also displayed. In this embodiment, a display start icon 1102 is displayed for each side, and the cursor 1103 can be moved and selected by the remote controller 322. However, the present invention is not limited to this, and the display position of the display start icon 1102 may be dynamically changed, or the participant may be directly selected and designated using a touch sensor.

撮影完了アイコン１１０１を表示することによって、参加者は、紙資料の撮影が完了したこと、従って、その紙資料を取り除いても良いことを判断できる。   By displaying the shooting completion icon 1101, the participant can determine that the shooting of the paper material has been completed, and therefore that the paper material may be removed.

撮影完了イベントを通知した後、ＣＰＵ３０３は、撮影処理部３１０にカメラ部３１１による撮影画像データの補正処理を実行させる（８１２）。図６は、プロジェクタ１０１とカメラ部３１１の画角の関係例を示す。この状態で撮影すると、撮影画像６０１は歪んだ画像となる。この撮影画像６０１を正しい画像に補正するために、撮影処理部３１０は、撮影光軸に対して垂直な仮想投影面６０２に３次元射影変換する（８１２）。仮想投影面６０２は、カメラ部３１１のパン及びチルト角と射影面角度６０３によって確定される。補正された撮影画像データは、投影すべき画像データとしてメモリ部３０４に格納される（８１３）。   After notifying the shooting completion event, the CPU 303 causes the shooting processing unit 310 to execute correction processing of the shot image data by the camera unit 311 (812). FIG. 6 shows an example of the relationship between the angle of view of the projector 101 and the camera unit 311. When shooting in this state, the shot image 601 becomes a distorted image. In order to correct the captured image 601 to a correct image, the imaging processing unit 310 performs three-dimensional projective transformation on the virtual projection plane 602 perpendicular to the imaging optical axis (812). The virtual projection plane 602 is determined by the pan and tilt angles of the camera unit 311 and the projection plane angle 603. The corrected captured image data is stored in the memory unit 304 as image data to be projected (813).

投影面検出部３０８は、投影面上に置かれていた物が取り除かれたかどうかを判定する（８１４）。これは、前述の通り差分画像における対象領域が無くなることで判定できる。投影面上からそれまで置かれていた物が取り除かれたと判定された場合、投影面検出部３０８は、非検出イベントを電子データ投影処理プロセスに通知する（８１５）。   The projection plane detection unit 308 determines whether or not an object placed on the projection plane has been removed (814). This can be determined by the absence of the target area in the difference image as described above. When it is determined that the object placed on the projection plane has been removed, the projection plane detection unit 308 notifies the electronic data projection process of the non-detection event (815).

電子データ投影処理プロセスは、非検出イベントを受信すると、対象領域に関連付けて表示されていたアイコンの表示を停止させる（９０３）。これは、紙資料４０１を退けることにより、参加者に何も通知する必要がなくなるからである。   When receiving the non-detection event, the electronic data projection process stops the display of the icon displayed in association with the target area (903). This is because it is not necessary to notify the participant by retreating the paper material 401.

紙資料４０１の撮影画像をすべての参加者が確認できるように、図１３に示すように、拡大した画像１３０１として表示する（Ｓ９０７）。これにより、参加者は、紙資料を投影面上に置き、撮影完了を確認して紙資料を投影面から退けるだけで、会議に参加している全員で、紙資料を表示画像として共有できる様になる。   As shown in FIG. 13, the photographed image of the paper material 401 is displayed as an enlarged image 1301 so that all participants can confirm (S907). In this way, participants can share paper materials as display images with all participants in the meeting simply by placing paper materials on the projection surface, confirming the completion of shooting, and moving the paper material away from the projection surface. become.

一方、いきなり拡大表示されるのが煩わしい場合もあるので、拡大表示を選択できるようにしてもよい。例えば、表示開始アイコン１１０２を選択することにより、その表示開始アイコン１１０２に近い場所に撮影画像を表示する。図１２は、その表示例を示す。会議の参加者２１１が表示アイコン１２０２を選択すると、紙資料の撮影画像１２０１が表示される。このとき、ＣＰＵ３０３は、表示アイコン１２０２の選択を投影開始要求と認識し、紙資料の上に撮影画像が表示されていることを示す投影中アイコン１２０３を表示させる（９０４）。これにより、紙資料４０１を他の参加者が参照していることと、どの紙資料を自分が参照しているのかが容易に認識できる。   On the other hand, since it may be bothersome to suddenly enlarge the display, it may be possible to select the enlarged display. For example, when a display start icon 1102 is selected, a captured image is displayed at a location near the display start icon 1102. FIG. 12 shows an example of the display. When the conference participant 211 selects the display icon 1202, a photographed image 1201 of paper material is displayed. At this time, the CPU 303 recognizes the selection of the display icon 1202 as a projection start request, and displays a projecting icon 1203 indicating that a photographed image is displayed on the paper material (904). Thereby, it is possible to easily recognize that other participants are referring to the paper material 401 and which paper material is being referred to by the participant.

図１４を参照して、複数の紙資料を投影面上に置いた場合の動作を説明する。会議差の参加者２１１〜２１３は、それぞれ異なる紙資料１４０１〜１４０３を持参している。   The operation when a plurality of paper materials are placed on the projection surface will be described with reference to FIG. The conference difference participants 211 to 213 bring different paper materials 1401 to 1403, respectively.

この時の差分画像は、図１５の様になる。それぞれの紙資料は、２値化された差分領域として認識され、それぞれ対象領域１５０１〜１５０３として特定される。この時、電子データ投影処理プロセスは、各対象領域に対して個別に実行される。撮影処理は、同時には行えないので、順番に行われる。その結果、図１６に示す様に、撮影が完了した紙資料１４０１、１４０２に撮影完了アイコン１６０１，１６０２が表示され、撮影中の紙資料１４０３には撮影中アイコン１６０３が表示される。   The difference image at this time is as shown in FIG. Each paper material is recognized as a binarized difference area and specified as target areas 1501 to 1503, respectively. At this time, the electronic data projection process is executed individually for each target area. Since the photographing processes cannot be performed at the same time, they are performed in order. As a result, as shown in FIG. 16, shooting completion icons 1601 and 1602 are displayed on the paper materials 1401 and 1402 for which shooting has been completed, and a shooting icon 1603 is displayed on the paper material 1403 being shot.

これにより、参加者２１２，２１３は、自分の紙資料１４０１，１４０２が既に撮影されたので取り除いても良いことがわかる。また、参加者２１１は、撮影中なので、紙資料１４０３を取り除いてはいけないことを認識できる。   Thus, the participants 212 and 213 can understand that their paper materials 1401 and 1402 have already been photographed and may be removed. Further, the participant 211 can recognize that the paper material 1403 should not be removed because the photographing is in progress.

各紙資料１４０１，１４０２，１４０３の撮影画像を表示するには、表示すべき撮影画像を選択するためのユーザインターフェースが必要である。図１７はそのユーザインターフェース例である。   In order to display the captured images of the paper materials 1401, 1402, and 1403, a user interface for selecting a captured image to be displayed is necessary. FIG. 17 shows an example of the user interface.

撮影画像の表示開始を指示する表示アイコン１７０１〜１７０３が、各紙資料（撮影対象）に関連付けて表示される。参加者はそのうちの１つを選択すると、その表示アイコンに関連付けられている撮影画像が表示される。このとき、選択された撮影画像のオリジナルとなる紙資料（例えば、１４０２）がまだ投影面に置いてある場合、その紙資料の撮影画像を表示していることを示す投影中アイコン１７０４を、当該紙資料上に表示する。これにより、参加者２１４は、表示中の画像がどの資料に対応するものかを識別できる。   Display icons 1701 to 1703 for instructing to start displaying the captured image are displayed in association with each paper material (photographing target). When the participant selects one of them, a captured image associated with the display icon is displayed. At this time, if the paper material (for example, 1402) that is the original of the selected photographed image is still placed on the projection surface, the projecting icon 1704 indicating that the photographed image of the paper document is being displayed is displayed. Display on paper material. Thereby, the participant 214 can identify which material the displayed image corresponds to.

また、元の紙資料が取り除かれている場合には、表示アイコン１７０１〜１７０３に、撮影画像を縮小したサムネイル画像を付加して表示しても良い。   Further, when the original paper material is removed, a thumbnail image obtained by reducing the photographed image may be added to the display icons 1701 to 1703 and displayed.

撮影画像を表示中に表示アイコンを選択すると、表示停止要求となり、撮影画像の表示が停止される（Ｓ９０６)。また、関連して表示されているアイコンの表示も停止される（９０５）。   If a display icon is selected while a captured image is displayed, a display stop request is issued, and the display of the captured image is stopped (S906). In addition, the display of the icons displayed in association is also stopped (905).

本実施例によれば、投影面上に紙資料を置くと、当該紙資料が自動的に検出され、撮影され、画像として投影するので、紙資料をコピーする必要がなく、円滑な会議進行ができるようになる。   According to the present embodiment, when a paper material is placed on the projection surface, the paper material is automatically detected, photographed, and projected as an image. become able to.

Claims (13)

画像を投影する投影手段と、
前記投影手段の投影面上に物体が置かれたこと及び取り去られたことを検出する投影面検出手段と、
前記投影面を撮影する撮影手段と、
前記投影面検出手段によって前記投影面上に物体が置かれたことを検出した場合、前記撮影手段に前記物体を撮影させ電子データとして取得する撮影制御手段と、
前記撮影手段による前記物体の撮影の際に、撮影状態を示す情報アイコンを前記投影手段により投影させる投影制御手段
とを具備することを特徴とする投影装置。 Projection means for projecting an image;
Projection plane detection means for detecting that an object is placed on and removed from the projection plane of the projection means;
Photographing means for photographing the projection plane;
When the projection plane detection unit detects that an object is placed on the projection plane, the shooting control unit acquires the electronic data by shooting the object with the shooting unit;
A projection apparatus comprising: a projection control unit configured to project an information icon indicating a shooting state by the projection unit when the object is captured by the imaging unit. 前記撮影制御手段は前記撮影手段のズームを制御でき、前記物体にズームしてから前記物体を撮影することを特徴とする請求項１に記載の投影装置。   The projection apparatus according to claim 1, wherein the photographing control unit is capable of controlling zooming of the photographing unit, and photographs the object after zooming to the object. 前記撮影制御手段は、前記撮影手段の撮影方向及びズームを制御でき、前記物体に前記撮影手段の撮影方向を向け、且つズームしてから、前記物体を撮影することを特徴とする請求項１に記載の投影装置。   The imaging control means can control the imaging direction and zoom of the imaging means, and directs the imaging direction of the imaging means to the object and zooms before imaging the object. The projection device described. 前記情報アイコンが、撮影中を示す撮影中アイコン、撮影完了を示す撮影完了アイコン及び撮影完了を示す撮影完了アイコンの少なくとも１つを含むことを特徴とする請求項１乃至３の何れか１項に記載の投影装置。   4. The information icon according to claim 1, wherein the information icon includes at least one of a shooting icon indicating shooting, a shooting completion icon indicating shooting completion, and a shooting completion icon indicating shooting completion. The projection device described. 前記投影制御手段は、前記情報アイコンを前記物体に重ねて又は対応する位置に投影させることを特徴とする請求項１乃至４の何れか１項に記載の投影装置。   5. The projection apparatus according to claim 1, wherein the projection control unit projects the information icon on the object or on a corresponding position. 6. 前記投影制御手段は、ユーザによる投影開始要求に応じて、前記電子データに応じた画像を前記投影手段に投影させることを特徴とする請求項１乃至５の何れか１項に記載の投影装置。   6. The projection apparatus according to claim 1, wherein the projection control unit causes the projection unit to project an image corresponding to the electronic data in response to a projection start request from a user. 前記投影制御手段は、前記投影面検出手段による前記投影面からの前記物体の取り除きに応じて、前記電子データに応じた画像を前記投影手段に投影させることを特徴とする請求項１乃至６の何れか１項に記載の投影装置。   The projection control unit causes the projection unit to project an image corresponding to the electronic data in accordance with the removal of the object from the projection plane by the projection plane detection unit. The projection device according to any one of the above. 前記投影制御手段は、前記電子データに応じた画像を前記投影手段に投影させている間に、投影中を示す情報アイコンを前記投影手段に投影させることを特徴とする請求項１乃至７の何れか１項に記載の投影装置。   The projection control unit causes the projection unit to project an information icon indicating that the projection is being performed while the projection unit projects an image corresponding to the electronic data. The projection device according to claim 1. 前記投影面に複数の物体が置かれている場合に、前記投影制御手段は、各物体に対して撮影状態を示す情報アイコンを前記投影手段により投影させることを特徴とする請求項１乃至８の何れか１項に記載の投影装置。   9. The projector according to claim 1, wherein when a plurality of objects are placed on the projection surface, the projection control unit causes the projection unit to project an information icon indicating a photographing state with respect to each object. The projection device according to any one of the above. 前記投影面に複数の物体が置かれている場合に、前記投影制御手段は、前記投影面から取り除かれた物体に対し、前記取り除かれた物体の前記撮影手段による撮影で得られる前記電子データに応じた画像を前記投影手段に投影させることを特徴とする請求項１乃至９の何れか１項に記載の投影装置。   When a plurality of objects are placed on the projection surface, the projection control unit adds the electronic data obtained by photographing the removed object by the photographing unit to the object removed from the projection surface. The projection apparatus according to claim 1, wherein a corresponding image is projected on the projection unit. 前記投影制御手段は、前記撮影手段による撮影の間、前記投影手段による投影を停止し、撮影完了の後に投影を再開することを特徴とする請求項１乃至１０の何れか１項に記載の投影装置。   11. The projection according to claim 1, wherein the projection control unit stops projection by the projection unit during imaging by the imaging unit, and resumes projection after completion of imaging. apparatus. 前記撮影手段により撮影された画像データの、前記撮影手段の撮影方向による歪みを補正する補正手段を具備することを特徴とする請求項１乃至１１の何れか１項に記載の投影装置。   12. The projection apparatus according to claim 1, further comprising a correction unit that corrects distortion of the image data captured by the imaging unit according to a shooting direction of the shooting unit. 前記情報アイコンが、対応する物体を撮影してられる撮影画像のサムネイル画像からなることを特徴とする請求項１乃至１２の何れか１項に記載の投影装置。   The projection apparatus according to claim 1, wherein the information icon includes a thumbnail image of a photographed image obtained by photographing the corresponding object.
JP2010084763A 2010-04-01 2010-04-01 Projection device Active JP5517705B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010084763A JP5517705B2 (en) 2010-04-01 2010-04-01 Projection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010084763A JP5517705B2 (en) 2010-04-01 2010-04-01 Projection device

Publications (3)

Publication Number Publication Date
JP2011215441A true JP2011215441A (en) 2011-10-27
JP2011215441A5 JP2011215441A5 (en) 2013-05-16
JP5517705B2 JP5517705B2 (en) 2014-06-11

Family

ID=44945206

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010084763A Active JP5517705B2 (en) 2010-04-01 2010-04-01 Projection device

Country Status (1)

Country Link
JP (1) JP5517705B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013149023A (en) * 2012-01-18 2013-08-01 Nikon Corp Display system, display program, and display method
JP2015097074A (en) * 2013-10-08 2015-05-21 キヤノンマーケティングジャパン株式会社 Information processing apparatus, control method of the same, and program, and projection system, control method of the same, and program
CN104735378A (en) * 2013-12-18 2015-06-24 精工爱普生株式会社 Projection device and projection method
JP2016119073A (en) * 2014-12-22 2016-06-30 キヤノンマーケティングジャパン株式会社 Information processing apparatus, control method of the same, and program
JP2017062849A (en) * 2014-12-22 2017-03-30 キヤノンマーケティングジャパン株式会社 Information processing system, control method of the same, and program, and information processing apparatus, control method of the same, and program

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06245207A (en) * 1993-02-16 1994-09-02 Nippon Telegr & Teleph Corp <Ntt> Video telephone system having projecting function
JP2002094836A (en) * 2000-09-14 2002-03-29 Victor Co Of Japan Ltd Data presenting device
JP2005005920A (en) * 2003-06-11 2005-01-06 Nec Viewtechnology Ltd Camera for painting and calligraphy, and its operation control method
JP2005318268A (en) * 2004-04-28 2005-11-10 Fuji Electric Systems Co Ltd Device and system for projection display
JP2008048377A (en) * 2006-07-18 2008-02-28 Fuji Xerox Co Ltd Remote instruction system and program for remote instruction system
JP2009223107A (en) * 2008-03-18 2009-10-01 Seiko Epson Corp Projector and image display method thereof
JP2010039656A (en) * 2008-08-04 2010-02-18 Kyocera Mita Corp Display and image forming apparatus equipped therewith

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06245207A (en) * 1993-02-16 1994-09-02 Nippon Telegr & Teleph Corp <Ntt> Video telephone system having projecting function
JP2002094836A (en) * 2000-09-14 2002-03-29 Victor Co Of Japan Ltd Data presenting device
JP2005005920A (en) * 2003-06-11 2005-01-06 Nec Viewtechnology Ltd Camera for painting and calligraphy, and its operation control method
JP2005318268A (en) * 2004-04-28 2005-11-10 Fuji Electric Systems Co Ltd Device and system for projection display
JP2008048377A (en) * 2006-07-18 2008-02-28 Fuji Xerox Co Ltd Remote instruction system and program for remote instruction system
JP2009223107A (en) * 2008-03-18 2009-10-01 Seiko Epson Corp Projector and image display method thereof
JP2010039656A (en) * 2008-08-04 2010-02-18 Kyocera Mita Corp Display and image forming apparatus equipped therewith

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013149023A (en) * 2012-01-18 2013-08-01 Nikon Corp Display system, display program, and display method
JP2015097074A (en) * 2013-10-08 2015-05-21 キヤノンマーケティングジャパン株式会社 Information processing apparatus, control method of the same, and program, and projection system, control method of the same, and program
CN104735378A (en) * 2013-12-18 2015-06-24 精工爱普生株式会社 Projection device and projection method
JP2015118211A (en) * 2013-12-18 2015-06-25 セイコーエプソン株式会社 Projection device and projection method
US9658519B2 (en) 2013-12-18 2017-05-23 Seiko Epson Corporation Projection device and projection method
CN104735378B (en) * 2013-12-18 2019-05-10 精工爱普生株式会社 Projection arrangement and projecting method
JP2016119073A (en) * 2014-12-22 2016-06-30 キヤノンマーケティングジャパン株式会社 Information processing apparatus, control method of the same, and program
JP2017062849A (en) * 2014-12-22 2017-03-30 キヤノンマーケティングジャパン株式会社 Information processing system, control method of the same, and program, and information processing apparatus, control method of the same, and program

Also Published As

Publication number Publication date
JP5517705B2 (en) 2014-06-11

Similar Documents

Publication Publication Date Title
CN106605195B (en) Communication apparatus and control method of communication apparatus
JP5591006B2 (en) Control device for automatic tracking camera system and automatic tracking camera system having the same
US10218897B2 (en) Display control device and method to display a panoramic image
JP2007079028A (en) Projection type image display apparatus and multi-projection system
JP6808529B2 (en) Imaging device and its control method
JP6079695B2 (en) Image display photographing system, photographing device, display device, image display and photographing method, and computer program
JP5517705B2 (en) Projection device
JP2013219525A (en) Imaging device, control method therefor, and program
JP2012235225A (en) Imaging apparatus and image data recording method
JP2014039166A (en) Controller of automatic tracking camera and automatic tracking camera equipped with the same
JP2014062932A (en) Attitude control device, operation device, attitude control system, control method, control program, and recording medium
JP5963571B2 (en) Image display device and surveillance camera system
JP2002034032A (en) Controller for monitoring camera system
JP2015062052A (en) Imaging apparatus and imaging method
JP6304029B2 (en) Apparatus, system, method, and program for outputting angle of view of imaging apparatus
JP6836306B2 (en) Imaging control device, its control method, program and recording medium
JP2010087613A (en) Presentation-image distribution system
JPS62226786A (en) Supervisory equipment
JP6319081B2 (en) Terminal device, photographing system, and photographing method
JP2012027302A (en) Imaging apparatus with projection function
JP2013126180A (en) Video apparatus
JP5344604B2 (en) Imaging apparatus and control method thereof
JP2015186015A (en) image processing apparatus, image processing method, program and camera
JP2015186016A (en) image processing apparatus, image processing method, program and camera
JP2021056652A (en) Projection device, projection method and program

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130328

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130328

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131126

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140304

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140401

R151 Written notification of patent or utility model registration

Ref document number: 5517705

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: R3D03