JP5656002B2 - Projector and control method - Google Patents

Projector and control method Download PDF

Info

Publication number
JP5656002B2
JP5656002B2 JP2010110363A JP2010110363A JP5656002B2 JP 5656002 B2 JP5656002 B2 JP 5656002B2 JP 2010110363 A JP2010110363 A JP 2010110363A JP 2010110363 A JP2010110363 A JP 2010110363A JP 5656002 B2 JP5656002 B2 JP 5656002B2
Authority
JP
Japan
Prior art keywords
unit
image
projector
target
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010110363A
Other languages
Japanese (ja)
Other versions
JP2011239291A (en
Inventor
佐枝子 井上
佐枝子 井上
中山 哲
哲 中山
裕子 藤川
裕子 藤川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2010110363A priority Critical patent/JP5656002B2/en
Publication of JP2011239291A publication Critical patent/JP2011239291A/en
Application granted granted Critical
Publication of JP5656002B2 publication Critical patent/JP5656002B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、プロジェクターおよび制御方法に関する。   The present invention relates to a projector and a control method.

一般的に、ユーザーは、リモコン(リモートコントローラー)を操作することにより、プロジェクターによる画像の投写を開始させたり、終了させたり、画像を変更したりする操作を行う。また、例えば、特開2004−271966号公報では、人感センサーを用いて電源の供給を制御するプロジェクターが記載されている。   Generally, a user operates a remote controller (remote controller) to start or stop projecting an image by a projector, or to change an image. For example, Japanese Patent Application Laid-Open No. 2004-271966 describes a projector that controls supply of power using a human sensor.

特開2004−271966号公報JP 2004-271966 A

しかし、近年、会議室での会議等のフォーマルコミュニケーションだけでなく、ミーティングエリアでの立ち話等のインフォーマルコミュニケーションの重要性が高まっている。同じ室内であればインフォーマルコミュニケーションは可能であるが、異なる部屋にいるユーザー同士がインフォーマルコミュニケーションを行うことは困難である。また、インフォーマルコミュニケーションで、プロジェクターを用いて画像を投写する場合、リモコンは備えられていないため、ユーザーは、リモコンを用いないでプロジェクターを使用する必要がある。また、このようなインフォーマルコミュニケーションの場合、必要な時だけプロジェクターを使用する必要があるため、人感センサーを用いて人の有無に応じて電源の供給を制御する手法等は適切ではない。   However, in recent years, the importance of not only formal communication such as conferences in conference rooms but also informal communication such as talking in a meeting area has increased. Informal communication is possible in the same room, but it is difficult for users in different rooms to perform informal communication. In addition, when projecting an image using a projector in informal communication, since the remote controller is not provided, the user needs to use the projector without using the remote controller. In addition, in such informal communication, since it is necessary to use a projector only when necessary, a technique for controlling the supply of power according to the presence or absence of a person using a human sensor is not appropriate.

本発明にかかるいくつかの態様は、上記課題を解決することにより、リモコン等の指示具を用いることなく画像の投写制御等を行うことが可能なプロジェクターおよび制御方法を提供するものである。   Some aspects according to the present invention provide a projector and a control method capable of performing image projection control and the like without using an indicator such as a remote controller by solving the above-described problems.

本発明の態様の1つであるプロジェクターは、投写対象領域における動作を検出する検出部と、当該検出部による検出に基づき、前記動作が対象動作に該当するかどうかを判定する判定部と、当該判定部によって前記動作が対象動作に該当すると判定された場合、当該対象動作に応じた制御を行う制御部と、を含むことを特徴とする。   A projector that is one aspect of the present invention includes a detection unit that detects an operation in a projection target region, a determination unit that determines whether the operation corresponds to the target operation based on detection by the detection unit, And a control unit that performs control according to the target operation when the determination unit determines that the operation corresponds to the target operation.

また、本発明の態様の1つである制御方法は、プロジェクターが、投写対象領域における動作を検出し、当該検出部による検出に基づき、前記動作が対象動作に該当するかどうかを判定し、前記動作が対象動作に該当する場合、当該対象動作に応じた制御を行うことを特徴とする。   Further, according to the control method that is one aspect of the present invention, the projector detects an operation in the projection target region, determines whether the operation corresponds to the target operation based on the detection by the detection unit, and When the motion corresponds to the target motion, control according to the target motion is performed.

本発明によれば、プロジェクターは、投写対象領域における動作を検出し、当該動作が適合する対象動作に応じた制御を行うことにより、リモコン等の指示具を用いることなく画像の投写制御等を行うことができる。   According to the present invention, the projector performs an image projection control and the like without using a pointing tool such as a remote controller by detecting an operation in the projection target region and performing a control according to the target operation to which the operation is compatible. be able to.

また、前記プロジェクターは、画像を投写する投写部を含み、前記対象動作は、開動作および閉動作を含み、前記制御部は、前記判定部によって前記動作が前記開動作に該当すると判定された場合、前記投写部に対し、画像の投写を開始させる制御を行い、前記判定部によって前記動作が前記閉動作に該当すると判定された場合、前記投写部に対し、画像の投写を終了させる制御を行ってもよい。これによれば、プロジェクターは、リモコン等の指示具を用いることなく、開動作または閉動作に応じて画像の投写制御等を行うことができる。   The projector includes a projection unit that projects an image, the target operation includes an opening operation and a closing operation, and the control unit determines that the operation corresponds to the opening operation by the determination unit The projector is controlled to start projecting an image, and when the determination unit determines that the operation corresponds to the closing operation, the projection unit is controlled to end image projection. May be. According to this, the projector can perform image projection control or the like according to the opening operation or the closing operation without using an indicator such as a remote controller.

また、前記検出部は、ブラインドの操作部を模した回転操作が可能な操作部材を含み、前記判定部は、前記操作部材が開方向に回転操作された場合、前記動作が前記開動作に該当すると判定し、前記操作部材が閉方向に回転操作された場合、前記動作が前記閉動作に該当すると判定してもよい。これによれば、プロジェクターは、リモコン等の指示具を用いることなく、回転操作に応じて画像の投写制御等を行うことができる。   Further, the detection unit includes an operation member capable of rotating operation imitating a blind operation unit, and the determination unit corresponds to the opening operation when the operation member is rotated in the opening direction. Then, when the operation member is rotated in the closing direction, it may be determined that the operation corresponds to the closing operation. According to this, the projector can perform image projection control and the like according to the rotation operation without using an indicator such as a remote controller.

また、前記投写部は、複数の個別画像を含む全体画像を投写し、前記検出部は、前記動作の行われた位置を検出し、前記判定部は、前記検出部によって検出された位置に基づき、対象の個別画像を決定し、前記制御部は、前記判定部によって前記動作が前記開動作に該当すると判定された場合、前記投写部に対し、前記判定部によって決定された個別画像を含む全体画像を投写させる制御を行い、前記判定部によって前記動作が前記閉動作に該当すると判定された場合、前記投写部に対し、前記判定部によって決定された個別画像を含まない全体画像を投写させる制御を行ってもよい。これによれば、プロジェクターは、所望の個別画像の投写制御等を行うことができる。   The projection unit projects an entire image including a plurality of individual images, the detection unit detects a position where the operation is performed, and the determination unit is based on the position detected by the detection unit. The target individual image is determined, and when the determination unit determines that the operation corresponds to the opening operation, the control unit includes the individual image determined by the determination unit with respect to the projection unit. Control for projecting an image, and when the determination unit determines that the operation corresponds to the closing operation, control for causing the projection unit to project an entire image that does not include the individual image determined by the determination unit May be performed. According to this, the projector can perform projection control of a desired individual image.

また、前記プロジェクターは、他の装置と通信を行う通信部を含み、前記対象動作は、ノック動作を含み、前記制御部は、前記動作が前記ノック動作に該当すると判定された場合、前記通信部に対し、前記ノック動作に対応した装置との通信を開始させる制御を行ってもよい。これによれば、プロジェクターは、リモコン等の指示具を用いることなく、通信制御を行うことができる。   Further, the projector includes a communication unit that communicates with another device, the target operation includes a knock operation, and the control unit determines that the operation corresponds to the knock operation, the communication unit On the other hand, you may perform control which starts communication with the apparatus corresponding to the said knock operation | movement. According to this, the projector can perform communication control without using an indicator such as a remote controller.

また、前記プロジェクターは、他の表示装置と通信を行う通信部を含み、前記制御部は、前記対象動作に応じた制御として、前記通信部に対し、前記表示装置における画像の表示を変更させる表示制御情報を前記表示装置へ向け送信させる制御を行ってもよい。これによれば、プロジェクターは、対象動作に応じて他の表示装置における画像の表示を変更させる制御を行うことができる。   Further, the projector includes a communication unit that communicates with another display device, and the control unit causes the communication unit to change display of an image on the display device as control according to the target operation. You may perform control which transmits control information toward the said display apparatus. According to this, the projector can perform control to change display of an image on another display device in accordance with the target operation.

第1の実施例における投写状況の一例を示す図である。It is a figure which shows an example of the projection condition in a 1st Example. 第1の実施例におけるプロジェクターの外観図である。1 is an external view of a projector according to a first embodiment. 第1の実施例におけるプロジェクターの機能ブロック図である。It is a functional block diagram of the projector in a 1st Example. 第1の実施例におけるプロジェクターのハードウェアブロック図である。FIG. 2 is a hardware block diagram of the projector in the first embodiment. 第1の実施例における投写手順を示すフローチャートである。It is a flowchart which shows the projection procedure in a 1st Example. 第1の実施例における投写状況の他の一例を示す図である。It is a figure which shows another example of the projection condition in a 1st Example. 第1の実施例における投写状況の他の一例を示す図である。It is a figure which shows another example of the projection condition in a 1st Example. 第1の実施例における投写状況の他の一例を示す図である。It is a figure which shows another example of the projection condition in a 1st Example. 第2の実施例における投写状況の一例を示す図である。It is a figure which shows an example of the projection condition in a 2nd Example. 第2の実施例におけるプロジェクターの機能ブロック図である。It is a functional block diagram of the projector in a 2nd Example. 第2の実施例における投写状況の他の一例を示す図である。It is a figure which shows another example of the projection condition in a 2nd Example. 第2の実施例における投写状況の他の一例を示す図である。It is a figure which shows another example of the projection condition in a 2nd Example. その他の実施例における全体画像の一例を示す図である。It is a figure which shows an example of the whole image in another Example. その他の実施例における全体画像の他の一例を示す図である。It is a figure which shows another example of the whole image in another Example.

以下、本発明をプロジェクターに適用した実施例について、図面を参照しつつ説明する。なお、以下に示す実施例は、特許請求の範囲に記載された発明の内容を何ら限定するものではない。また、以下の実施例に示す構成のすべてが、特許請求の範囲に記載された発明の解決手段として必須であるとは限らない。   Embodiments in which the present invention is applied to a projector will be described below with reference to the drawings. In addition, the Example shown below does not limit the content of the invention described in the claim at all. In addition, all of the configurations shown in the following embodiments are not necessarily essential as means for solving the problems described in the claims.

(第1の実施例)
図1は、第1の実施例における投写状況の一例を示す図である。ここでは、遠隔地間でプロジェクター100等を用いた会話が行われているものとする。例えば、東京にあるキャビネット70が置かれた資料室にいる社員60が、大阪にある机50が置かれた休憩室にいる社員40と会話している。東京の資料室にある壁10には、金具30によって上方に単焦点型のプロジェクター100が取り付けられている。また、東京の資料室の天井に取り付けられたカメラ300は、壁10の方向を撮像し、プロジェクター100は、カメラ300による撮像データを大阪の休憩室に設置されたプロジェクターに送信する。また、プロジェクター100は、投写対象領域の一種である壁10に、大阪のプロジェクターから送信された画像情報に基づく画像20を投写している。画像20は、大阪にある休憩室の様子を示している。
(First embodiment)
FIG. 1 is a diagram illustrating an example of a projection situation in the first embodiment. Here, it is assumed that a conversation using the projector 100 or the like is performed between remote locations. For example, an employee 60 in a document room with a cabinet 70 in Tokyo has a conversation with an employee 40 in a break room with a desk 50 in Osaka. A single-focus projector 100 is mounted on the wall 10 in the Tokyo data room by a metal fitting 30. The camera 300 attached to the ceiling of the document room in Tokyo takes an image of the direction of the wall 10, and the projector 100 transmits the image data taken by the camera 300 to the projector installed in the break room in Osaka. Further, the projector 100 projects an image 20 based on image information transmitted from a projector in Osaka on a wall 10 that is a kind of projection target area. Image 20 shows a state of a break room in Osaka.

図2は、第1の実施例におけるプロジェクター100の外観図である。図2のプロジェクター100は、図1の設置状態が上下逆になった状態(底面が天面になった状態)を示す。プロジェクター100は、撮像部114、投写部190等を含む。なお、図1に示す設置状態では、プロジェクター100の底面における壁10に向かう斜面に撮像部114、投写部190等が設けられている。   FIG. 2 is an external view of the projector 100 according to the first embodiment. The projector 100 in FIG. 2 shows a state in which the installation state in FIG. 1 is upside down (a state in which the bottom surface is a top surface). The projector 100 includes an imaging unit 114, a projection unit 190, and the like. In the installed state shown in FIG. 1, the imaging unit 114, the projection unit 190, and the like are provided on the slope facing the wall 10 on the bottom surface of the projector 100.

次に、プロジェクター100の機能ブロックについて説明する。図3は、第1の実施例におけるプロジェクター100の機能ブロック図である。プロジェクター100は、投写対象領域における動作を検出する検出部110と、検出部110による検出に基づき、上記動作が対象動作に該当するかどうかを判定する判定部120と、記憶部130と、通信部140と、記憶部130内のデータを更新する更新部150と、判定部120によって上記動作が対象動作に該当すると判定された場合、当該対象動作に応じた制御を行う制御部160と、音声入力部170と、音声出力部180と、投写部190を含んで構成されている。また、検出部110は、撮像部114を含む。また、記憶部130は、画像情報132、撮像情報134、判定データ136等を記憶している。   Next, functional blocks of the projector 100 will be described. FIG. 3 is a functional block diagram of the projector 100 according to the first embodiment. The projector 100 includes a detection unit 110 that detects an operation in the projection target region, a determination unit 120 that determines whether the operation corresponds to the target operation based on detection by the detection unit 110, a storage unit 130, and a communication unit. 140, an update unit 150 that updates data in the storage unit 130, a control unit 160 that performs control according to the target operation when the determination unit 120 determines that the operation corresponds to the target operation, and voice input The unit 170, the audio output unit 180, and the projection unit 190 are configured. In addition, the detection unit 110 includes an imaging unit 114. In addition, the storage unit 130 stores image information 132, imaging information 134, determination data 136, and the like.

なお、プロジェクター100は、以下のハードウェアを用いてこれらの各部として機能してもよい。図4は、第1の実施例におけるプロジェクター100のハードウェアブロック図である。例えば、プロジェクター100は、撮像部114はCMOSカメラ920等、判定部120、更新部150、制御部160はCPU910等、記憶部130はRAM930等、通信部140は無線通信ユニット940、有線通信ユニット942等、音声入力部170はマイク950、コンバーター952等、音声出力部180は音声処理回路960、アンプ962、スピーカー964等、投写部190はランプ980、液晶パネル982、液晶駆動回路984、レンズ986等を用いてもよい。   The projector 100 may function as each of these units using the following hardware. FIG. 4 is a hardware block diagram of the projector 100 according to the first embodiment. For example, in the projector 100, the imaging unit 114 is a CMOS camera 920, the determination unit 120, the update unit 150, the control unit 160 is a CPU 910, the storage unit 130 is a RAM 930, the communication unit 140 is a wireless communication unit 940, and a wired communication unit 942. The audio input unit 170 is a microphone 950, a converter 952, etc., the audio output unit 180 is an audio processing circuit 960, an amplifier 962, a speaker 964, etc., and the projection unit 190 is a lamp 980, a liquid crystal panel 982, a liquid crystal drive circuit 984, a lens 986, etc. May be used.

次に、本実施例における画像20の投写手順について説明する。図5は、第1の実施例における投写手順を示すフローチャートである。撮像部114は、投写対象領域である壁10を撮像し、更新部150は、撮像部114による撮像画像を示す撮像情報134を記憶部130に記憶する(ステップS1)。なお、撮像部114の撮像範囲は、画像20と同じ範囲であってもよいし、画像20を含み、画像20よりも広い範囲であってもよい。また、投写対象領域は、壁10の表面に限定されず、壁10から離れ、壁10に近接した領域であってもよい。   Next, a procedure for projecting the image 20 in the present embodiment will be described. FIG. 5 is a flowchart showing a projection procedure in the first embodiment. The imaging unit 114 images the wall 10 that is the projection target area, and the update unit 150 stores the imaging information 134 indicating the image captured by the imaging unit 114 in the storage unit 130 (step S1). Note that the imaging range of the imaging unit 114 may be the same range as the image 20, or may include the image 20 and a wider range than the image 20. Further, the projection target area is not limited to the surface of the wall 10, and may be an area away from the wall 10 and close to the wall 10.

判定部120は、撮像情報134に基づき、社員60の動作が対象動作に該当するかどうかを判定する。例えば、判定部120は、異なる時点の撮像画像の差分画像を用いることにより、社員60の動作が対象動作に該当するかどうかを判定してもよい。より具体的には、判定部120は、社員60が、通信開始を示すノック動作を行ったかどうかを判定し(ステップS2)、画像の投写開始を示す開動作を行ったかどうかを判定し(ステップS4)、画像の投写終了を示す閉動作を行ったかどうかを判定する(ステップS11)。なお、ノック動作、開動作、閉動作は制御の対象になる対象動作である。   The determination unit 120 determines whether the operation of the employee 60 corresponds to the target operation based on the imaging information 134. For example, the determination unit 120 may determine whether the operation of the employee 60 corresponds to the target operation by using a difference image of the captured images at different times. More specifically, the determination unit 120 determines whether the employee 60 has performed a knocking operation indicating the start of communication (step S2), and determines whether an opening operation indicating the start of image projection has been performed (step S2). S4) It is determined whether or not a closing operation indicating the end of image projection has been performed (step S11). Note that the knocking operation, the opening operation, and the closing operation are target operations to be controlled.

ここで、ノック動作について説明する。図6は、第1の実施例における投写状況の他の一例を示す図である。例えば、図6に示すように、社員60が壁10を2回連続して叩く動作を行った場合、投写対象領域でノック動作が行われたことに該当するため、制御部160は、通信部140に対し、大阪にある通信先のプロジェクターとの通信を開始させる制御を行う(ステップS3)。   Here, the knocking operation will be described. FIG. 6 is a diagram showing another example of the projection situation in the first embodiment. For example, as shown in FIG. 6, when the employee 60 performs an operation of hitting the wall 10 twice in succession, it corresponds to the knocking operation being performed in the projection target area. 140 is controlled to start communication with a communication destination projector in Osaka (step S3).

次に、開動作について説明する。図7は、第1の実施例における投写状況の他の一例を示す図である。通信開始後、社員60が画像の左端にある壁10に5秒以上手を置いてから壁10に沿って手を左から右に移動させた場合、投写対象領域で開動作が行われたことに該当する。開動作が行われた場合、投写部190は、カーテンを模した画像24を投写し、社員60が壁10に沿って手を左から右に移動させた場合、当該手の移動に応じて、徐々に画像情報132に基づく画像23の領域を増加させ、徐々に画像24の領域を減少させる画像21を投写する。   Next, the opening operation will be described. FIG. 7 is a diagram showing another example of the projection situation in the first embodiment. After the start of communication, when the employee 60 places his / her hand on the wall 10 at the left end of the image for 5 seconds or longer and then moves his / her hand along the wall 10 from left to right, the opening operation has been performed in the projection target area. It corresponds to. When the opening operation is performed, the projection unit 190 projects the image 24 imitating the curtain, and when the employee 60 moves the hand from the left to the right along the wall 10, according to the movement of the hand, An image 21 is projected which gradually increases the area of the image 23 based on the image information 132 and gradually decreases the area of the image 24.

また、この場合、更新部150は、通信部140によってカメラ300から受信された撮像データ135を記憶部130に記憶する(ステップS5)。また、音声入力部170は、マイクによって入力される社員60の音声を示す音声データ139を記憶部130に記憶する(ステップS6)。また、制御部160は、通信部140に対し、撮像データ135および音声データ139を、通信先のプロジェクター(ノック動作に対応した装置)へ向け送信させる制御を行う(ステップS7)。これにより、大阪のプロジェクターは、社員60等を示す画像を投写し、社員60の音声を出力することができる。   In this case, the update unit 150 stores the imaging data 135 received from the camera 300 by the communication unit 140 in the storage unit 130 (step S5). In addition, the voice input unit 170 stores voice data 139 indicating the voice of the employee 60 input by the microphone in the storage unit 130 (step S6). Further, the control unit 160 controls the communication unit 140 to transmit the imaging data 135 and the audio data 139 to a communication destination projector (a device corresponding to a knock operation) (step S7). Thereby, the projector in Osaka can project an image showing the employee 60 and output the sound of the employee 60.

また、通信部140は、通信先のプロジェクターから画像情報132および音声情報138を受信し、更新部150は、これらの情報を記憶部130に記憶する(ステップS8)。なお、画像情報132は、社員40、机50等が撮像された撮像画像を示す情報であり、音声情報138は、社員40の音声を示す情報である。   Further, the communication unit 140 receives the image information 132 and the audio information 138 from the communication destination projector, and the update unit 150 stores the information in the storage unit 130 (step S8). The image information 132 is information indicating a captured image obtained by capturing the employee 40, the desk 50, and the like, and the sound information 138 is information indicating the sound of the employee 40.

投写部190は、画像情報132に基づき、画像を生成し、当該画像を壁10に投写する(ステップS9)。また、音声出力部180は、音声情報138に基づく音声を出力する(ステップS10)。   The projection unit 190 generates an image based on the image information 132 and projects the image on the wall 10 (step S9). Moreover, the audio | voice output part 180 outputs the audio | voice based on the audio | voice information 138 (step S10).

次に、閉動作について説明する。図8は、第1の実施例における投写状況の他の一例を示す図である。例えば、開動作後、社員60が画像の右端にある壁10に5秒以上手を置いてから壁10に沿って手を右から左に移動させた場合、投写対象領域で閉動作が行われたことに該当する。この場合、投写部190は、カーテンを模した画像24を投写し、社員60が壁10に沿って手を左から右に移動させた場合、当該手の移動に応じて、徐々に画像情報132に基づく画像23の領域を減少させ、徐々に画像24の領域を増加させる画像22を投写する。また、この場合、制御部160は、投写部190に対し、画像情報132に基づく画像の生成、投写を終了させる制御を行い(ステップS12)、通信部140に対し、大阪にある通信先のプロジェクターとの通信を終了させる制御を行う(ステップS13)。   Next, the closing operation will be described. FIG. 8 is a diagram showing another example of the projection situation in the first embodiment. For example, when the employee 60 places his / her hand on the wall 10 at the right end of the image for 5 seconds or more after the opening operation and then moves his / her hand along the wall 10 from right to left, the closing operation is performed in the projection target area. It corresponds to that. In this case, the projection unit 190 projects the image 24 imitating a curtain, and when the employee 60 moves the hand from the left to the right along the wall 10, the image information 132 is gradually increased according to the movement of the hand. An image 22 is projected in which the area of the image 23 based on the above is reduced and the area of the image 24 is gradually increased. In this case, the control unit 160 controls the projection unit 190 to end the generation and projection of an image based on the image information 132 (step S12), and the communication unit 140 is a communication destination projector in Osaka. Control to end communication with is performed (step S13).

以上のように、本実施例によれば、プロジェクター100は、投写対象領域における動作を検出し、当該動作が適合する対象動作に応じた制御を行うことにより、リモコン等の指示具を用いることなく画像の投写制御等を行うことができる。これにより、プロジェクター100は、インフォーマルコミュニケーションを活性化させることができる。また、画像20の観察者にとっても、常に壁10の方向を見ていればよいため、会話等に集中することができる。   As described above, according to the present embodiment, the projector 100 detects an operation in the projection target region and performs control according to the target operation to which the operation is compatible, so that the pointing device such as a remote controller is not used. Image projection control and the like can be performed. Thereby, the projector 100 can activate informal communication. Moreover, since it is sufficient for the observer of the image 20 to always look at the direction of the wall 10, it is possible to concentrate on conversation and the like.

また、本実施例によれば、プロジェクター100は、リモコン等の指示具を用いることなく、開動作または閉動作に応じて画像の投写制御等を行うことができる。また、本実施例によれば、プロジェクター100は、リモコン等の指示具を用いることなく、ノック動作に応じて通信制御を行うことができる。   Further, according to the present embodiment, the projector 100 can perform image projection control or the like according to the opening operation or the closing operation without using an indicator such as a remote controller. Further, according to the present embodiment, the projector 100 can perform communication control according to the knocking operation without using an indicator such as a remote controller.

さらに、本実施例によれば、プロジェクター100は、画像情報132、撮像データ135、音声情報138、音声データ139を遠隔地にある他の表示装置と送受信することにより、遠隔地間のコミュニケーションを活性化させることができる。   Further, according to the present embodiment, the projector 100 activates communication between remote locations by transmitting and receiving the image information 132, the imaging data 135, the audio information 138, and the audio data 139 to and from other display devices at remote locations. It can be made.

(第2の実施例)
第1の実施例では、プロジェクター100が社員60の開閉動作に応じて画像の投写制御を行う例について説明したが、プロジェクターは、操作部材を用いたブラインドの開閉動作に応じて画像の投写制御を行ってもよい。次に、操作部材を用いたブラインドの開閉動作に応じた画像の投写制御について説明する。
(Second embodiment)
In the first embodiment, the example in which the projector 100 performs the projection control of the image according to the opening / closing operation of the employee 60 has been described. However, the projector performs the projection control of the image according to the opening / closing operation of the blind using the operation member. You may go. Next, image projection control according to the opening / closing operation of the blind using the operation member will be described.

図9は、第2の実施例における投写状況の一例を示す図である。プロジェクター101が投写する画像25の外側に回転操作可能な操作部材90が設けられ、操作部材90の回転操作が伝達部材80を介してプロジェクター101に伝達される。社員60は、操作部材90を回転させることにより、画像25の投写を開始したり、終了したりすることができる。次に、このような機能を有するプロジェクター101の機能ブロックについて説明する。図10は、第2の実施例におけるプロジェクター101の機能ブロック図である。プロジェクター101は、操作部材90の操作を検出する検出部111を有している。その他の構成は第1の実施例と同様であるため、説明を省略する。   FIG. 9 is a diagram illustrating an example of a projection situation in the second embodiment. An operation member 90 that can be rotated is provided outside the image 25 projected by the projector 101, and the rotation operation of the operation member 90 is transmitted to the projector 101 via the transmission member 80. The employee 60 can start and end the projection of the image 25 by rotating the operation member 90. Next, functional blocks of the projector 101 having such functions will be described. FIG. 10 is a functional block diagram of the projector 101 in the second embodiment. The projector 101 includes a detection unit 111 that detects an operation of the operation member 90. Since other configurations are the same as those of the first embodiment, the description thereof is omitted.

図11は、第2の実施例における投写状況の他の一例を示す図である。また、図12は、第2の実施例における投写状況の他の一例を示す図である。例えば、社員60が、操作部材90を回転させた場合、検出部111は、当該回転操作を検出し、判定部120は、当該回転操作による回転角度に応じて画像の表示方法を決定し、投写部190は、当該表示方法に応じて画像を生成し、投写する。   FIG. 11 is a diagram illustrating another example of the projection situation in the second embodiment. FIG. 12 is a diagram showing another example of the projection situation in the second embodiment. For example, when the employee 60 rotates the operation member 90, the detection unit 111 detects the rotation operation, and the determination unit 120 determines an image display method according to the rotation angle by the rotation operation, and performs projection. The unit 190 generates and projects an image according to the display method.

例えば、社員60が操作部材90を時計回りに90度回転させた場合、投写部190は、ブラインド状であって、画像の半分の領域が隠れた画像26を投写する。また、例えば、社員60が操作部材90を時計回りに180度回転させた場合、投写部190は、有効な画像のすべての領域が隠れた画像27を投写する。一方、社員60が操作部材90を反時計回りに回転させた場合、投写部190は、回転角度に応じて徐々に表示される画像を投写する。   For example, when the employee 60 rotates the operation member 90 by 90 degrees in the clockwise direction, the projection unit 190 projects the image 26 that is blind and has a half area of the image hidden. For example, when the employee 60 rotates the operation member 90 by 180 degrees clockwise, the projection unit 190 projects the image 27 in which all areas of the effective image are hidden. On the other hand, when the employee 60 rotates the operation member 90 counterclockwise, the projection unit 190 projects an image that is gradually displayed according to the rotation angle.

以上のように、本実施例によれば、プロジェクター101は、第1の実施例と同様の作用効果を奏する。また、本実施例によれば、プロジェクター101は、リモコン等の指示具を用いることなく、操作部材90の回転操作に応じて画像の投写制御を行うことができる。   As described above, according to the present embodiment, the projector 101 has the same operational effects as the first embodiment. In addition, according to the present embodiment, the projector 101 can perform image projection control according to the rotation operation of the operation member 90 without using an indicator such as a remote controller.

(その他の実施例)
なお、本発明の適用は上述した実施例に限定されず、変形が可能である。例えば、上述した実施例の構成を組み合わせてもよい。また、上述した実施例では、画像の全体に対する表示制御が行われたが、画像の一部に対する表示制御が行われてもよい。図13は、その他の実施例における全体画像200の一例を示す図である。また、図14は、その他の実施例における全体画像201の他の一例を示す図である。例えば、投写部190は、ロンドン支社に対応した個別画像210と、パリ支社に対応した個別画像212を含む全体画像200を壁10に投写する。
(Other examples)
In addition, application of this invention is not limited to the Example mentioned above, A deformation | transformation is possible. For example, you may combine the structure of the Example mentioned above. In the above-described embodiments, display control is performed on the entire image, but display control may be performed on a part of the image. FIG. 13 is a diagram illustrating an example of the entire image 200 in another embodiment. Moreover, FIG. 14 is a figure which shows another example of the whole image 201 in another Example. For example, the projection unit 190 projects an entire image 200 including an individual image 210 corresponding to the London branch office and an individual image 212 corresponding to the Paris branch office on the wall 10.

例えば、社員60が壁10に表示された個別画像210に対してノック動作または開動作を行った場合、検出部110、111は、壁10に投写された全体画像200におけるこれらの動作の行われた位置を検出し、判定部120は、当該位置に基づき、対象の個別画像210を決定し、投写部190は、判定部120の決定に応じて、ロンドン支社の休憩室の様子を示す個別画像211と、個別画像212を含む全体画像201を投写する。これによれば、プロジェクター100は、所望の個別画像210〜212の投写制御等を行うことができる。   For example, when the employee 60 performs a knocking operation or an opening operation on the individual image 210 displayed on the wall 10, the detection units 110 and 111 perform these operations on the entire image 200 projected on the wall 10. The determination unit 120 determines the target individual image 210 based on the position, and the projection unit 190 indicates the individual image of the rest room of the London branch office according to the determination by the determination unit 120. 211 and the entire image 201 including the individual image 212 are projected. According to this, the projector 100 can perform projection control and the like of desired individual images 210 to 212.

また、制御部160は、開閉動作に応じて通信対象を切り替えてもよい。例えば、通信部140は、開動作が行われた場合にロンドン支社にあるプロジェクターとの通信を行い、閉動作が行われた場合にパリ支社にあるプロジェクターとの通信を行ってもよい。また、上述した実施例では、開動作および閉動作があった場合、手の移動に応じて有効な画像の領域を増減させたが、制御部160は、開動作または閉動作があった場合、手の移動とは関係なく、自動的に有効な画像の領域を増減させてもよく、瞬時に有効な画像(開動作時)と無効な画像(閉動作時)を切り替えてもよい。また、上述した実施例では、プロジェクター100、101は、画像と音声の両方を送受信したが、画像情報のみを送受信したり、音声情報のみを送受信したりしてもよい。   Moreover, the control part 160 may switch communication object according to opening / closing operation | movement. For example, the communication unit 140 may perform communication with a projector in the London branch office when the opening operation is performed, and may perform communication with a projector in the Paris branch office when the closing operation is performed. Further, in the above-described embodiment, when there is an opening operation and a closing operation, the effective image area is increased or decreased according to the movement of the hand, but the control unit 160, when there is an opening operation or a closing operation, Regardless of the movement of the hand, the area of the effective image may be automatically increased or decreased, and the effective image (when opening) and the invalid image (when closing) may be switched instantaneously. In the above-described embodiment, the projectors 100 and 101 transmit and receive both images and sound. However, only the image information may be transmitted or received, and only the sound information may be transmitted and received.

また、制御部160は、対象動作に応じた制御として、通信部140に対し、他の表示装置(1台でも2台以上でもよい。)における画像の表示を変更させる表示制御情報を当該表示装置へ向け送信させる制御を行ってもよい。より具体的には、例えば、表示制御情報は、ノック動作に応じた表示装置における画像の表示開始、電源のオン等を行わせる情報、ブラインドやカーテンの開閉動作に応じた表示装置における画像の表示開始終了等をを行わせる情報等であってもよい。   The control unit 160 also provides display control information for changing the display of an image on another display device (one or two or more) to the communication unit 140 as control corresponding to the target operation. You may perform control to transmit to. More specifically, for example, the display control information includes information for starting display of an image on the display device according to the knocking operation, turning on the power, and the like, and displaying the image on the display device according to the opening / closing operation of the blind or curtain. The information etc. which perform a start end etc. may be sufficient.

また、検出部は、上述したノック動作、開動作、閉動作、操作部材90を用いた動作以外にも、例えば、接触する動作、離れる動作、振る動作、静止する動作、素早い動作、体を使って特定の形状を形成する動作等を対象動作として検出し、投写部190は、これらの動作に応じた画像を投写してもよい。また、検出部による動作の検出方法は、上述した手法に限定されず、例えば、赤外センサー等のセンサーを用いて体の位置を検出する手法、タッチパネル等を用いて接触や接触位置の変化を検出する手法等であってもよい。   In addition to the above-described knock operation, opening operation, closing operation, and operation using the operation member 90, the detection unit uses, for example, a contact operation, a separation operation, a shaking operation, a stationary operation, a quick operation, and a body. Thus, an operation for forming a specific shape or the like may be detected as a target operation, and the projection unit 190 may project an image corresponding to these operations. In addition, the detection method of the operation by the detection unit is not limited to the above-described method. A detection method or the like may be used.

また、第2の実施例では、検出部は、伝達部材80を介して操作部材90の回転操作を検出したが、操作部材を撮像したり、操作部材の近接を検出したりすることによって操作部材の回転操作を検出してもよい。例えば、社員がペンを持っている場合、検出部は、当該ペンの回転操作を検出し、制御部は当該回転操作に応じて、投写部に対し、画像の投写を開始させる制御を行ったり、画像の投写を終了させる制御を行ったりしてもよい。これによれば、プロジェクターは、特別な指示具ではなく、ペン等のその場にあるものを操作部材として適用することができるため、インフォーマルコミュニケーションを活性化することができる。   In the second embodiment, the detection unit detects the rotation operation of the operation member 90 via the transmission member 80. However, the detection member captures the operation member or detects the proximity of the operation member. The rotation operation may be detected. For example, when an employee has a pen, the detection unit detects a rotation operation of the pen, and the control unit performs control to start projection of an image to the projection unit according to the rotation operation, Control for terminating the projection of the image may be performed. According to this, since the projector can apply what is in place, such as a pen, as an operation member instead of a special pointing tool, it can activate informal communication.

また、壁10の複数箇所にスピーカーが設置されている場合、制御部160は、壁10に投写される画像に含まれる社員40の位置に最も近い位置にあるスピーカーから社員40の音声を出力させてもよい。また、同様に、制御部160は、指向性があり、出力方向を調整可能なスピーカーを用いて投写対象領域にある画像内の話者の位置から音声が聞こえるように当該スピーカーを制御してもよい。   When speakers are installed at a plurality of locations on the wall 10, the control unit 160 causes the speaker 40 to output the sound of the employee 40 from the speaker closest to the position of the employee 40 included in the image projected on the wall 10. May be. Similarly, the control unit 160 may control the speaker so that sound can be heard from the position of the speaker in the image in the projection target area using a speaker that has directivity and the output direction can be adjusted. Good.

また、投写対象領域は、壁10に限定されず、例えば、スクリーン、ホワイトボード、黒板、窓ガラス、柱等であってもよく、プロジェクター100、101と投写対象との間にある立体的空間であってもよい。また、投写対象領域が窓、柱等の異なる素材によって構成されている場合、投写部190は、撮像部114からの撮像情報に基づき、上記素材に応じて色や明るさを調整して画像を投写してもよい。また、通信対象となるノック動作に対応した装置は、プロジェクターに限定されず、例えば、サーバー、PC(Personal Computer)、テレビ等であってもよい。   The projection target area is not limited to the wall 10 and may be, for example, a screen, a whiteboard, a blackboard, a window glass, a pillar, or the like, and is a three-dimensional space between the projectors 100 and 101 and the projection target. There may be. In addition, when the projection target area is composed of different materials such as windows and pillars, the projection unit 190 adjusts the color and brightness according to the material based on the imaging information from the imaging unit 114 to display the image. You may project. Further, the device corresponding to the knock operation to be communicated is not limited to the projector, and may be a server, a PC (Personal Computer), a television, or the like, for example.

また、プロジェクター100、101の有するコンピューターは、情報記憶媒体に記憶されたプログラムを読み取って判定部120等として機能してもよい。このような情報記憶媒体としては、例えば、CD−ROM、DVD−ROM、ROM、RAM、HDD等を適用できる。   The computer included in the projectors 100 and 101 may function as the determination unit 120 by reading a program stored in the information storage medium. As such an information storage medium, for example, a CD-ROM, DVD-ROM, ROM, RAM, HDD, or the like can be applied.

また、プロジェクター100、101は、液晶プロジェクター(透過型、LCOS等の反射型)に限定されず、例えば、デジタルマイクロミラーデバイスを用いたプロジェクター等であってもよい。また、投写部190は、ランプの代わりに有機EL素子、シリコン発光素子、レーザーダイオード、LED等の固体光源を含む自己発光素子を採用してもよい。また、プロジェクター100、101の機能を複数の装置(例えば、PCとプロジェクター等)に分散してもよい。   Further, the projectors 100 and 101 are not limited to liquid crystal projectors (transmission type, reflection type such as LCOS), and may be projectors using a digital micromirror device, for example. The projection unit 190 may employ a self-light emitting element including a solid light source such as an organic EL element, a silicon light emitting element, a laser diode, and an LED instead of the lamp. Further, the functions of the projectors 100 and 101 may be distributed to a plurality of devices (for example, a PC and a projector).

10 壁(投写対象領域)、20〜27 画像、30 金具、40、60 社員、50 机、70 キャビネット、80 伝達部材、90 操作部材、100、101 プロジェクター、110、111 検出部、114 撮像部、120 判定部、130 記憶部、132 画像情報、134 撮像情報、135 撮像データ、136 判定データ、138 音声情報、139 音声データ、140 通信部、150 更新部、160 制御部、170 音声入力部、180 音声出力部、190 投写部、200、201 全体画像、210〜212 個別画像、300 カメラ、910 CPU、920 CMOSカメラ、930 RAM、940 無線通信ユニット、942 有線通信ユニット、950 マイク、952 コンバーター、960 音声処理回路、962 アンプ、964 スピーカー、980 ランプ、982 液晶パネル、984 液晶駆動回路、986 レンズ   10 walls (projection target area), 20-27 images, 30 brackets, 40, 60 employees, 50 desks, 70 cabinets, 80 transmission members, 90 operation members, 100, 101 projectors, 110, 111 detection units, 114 imaging units, 120 determination unit, 130 storage unit, 132 image information, 134 imaging information, 135 imaging data, 136 determination data, 138 audio information, 139 audio data, 140 communication unit, 150 update unit, 160 control unit, 170 audio input unit, 180 Audio output unit, 190 projection unit, 200, 201 whole image, 210-212 individual image, 300 camera, 910 CPU, 920 CMOS camera, 930 RAM, 940 wireless communication unit, 942 wired communication unit, 950 microphone, 952 converter, 960 Audio processing times , 962 amplifier, 964 a speaker, 980 lamp, 982 a liquid crystal panel, 984 liquid crystal driving circuit, 986 a lens

Claims (6)

投写対象領域における動作を検出する検出部と、
当該検出部による検出に基づき、前記動作が対象動作に該当するかどうかを判定する判定部と、
当該判定部によって前記動作が対象動作に該当すると判定された場合、当該対象動作に応じた制御を行う制御部と、
画像を投写する投写部と、を含み、
前記投写部は、複数の個別画像を含む全体画像を投写し、
前記検出部は、前記動作の行われた位置を検出し、
前記判定部は、前記検出部によって検出された位置に基づき、対象の個別画像を決定し、
前記制御部は、前記判定部によって前記動作が対象動作に該当すると判定された場合、前記判定部によって決定された個別画像に対して、前記対象動作に応じた表示制御を行う、
プロジェクター。
A detection unit for detecting an operation in the projection target area;
A determination unit that determines whether the operation corresponds to a target operation based on detection by the detection unit;
A control unit that performs control according to the target operation when the determination unit determines that the operation corresponds to the target operation;
A projection unit for projecting an image,
The projection unit projects an entire image including a plurality of individual images,
The detection unit detects a position where the operation is performed,
The determination unit determines a target individual image based on the position detected by the detection unit,
The control unit performs display control according to the target motion on the individual image determined by the determination unit when the determination unit determines that the motion corresponds to the target motion.
projector.
請求項1に記載のプロジェクターにおいて、
前記対象動作は、開動作および閉動作を含み、
前記制御部は、前記判定部によって前記動作が前記開動作に該当すると判定された場合、前記投写部に対し、前記判定部によって決定された個別画像が前記検出部によって検出された位置に対応する領域に投写されるように当該個別画像を含む全体画像を投写させる制御を行い、前記判定部によって前記動作が前記閉動作に該当すると判定された場合、前記投写部に対し、前記判定部によって決定された個別画像を含まない全体画像を投写させる制御を行う、
プロジェクター。
The projector according to claim 1.
The target motion includes an opening motion and a closing motion,
When the determination unit determines that the operation corresponds to the opening operation, the control unit corresponds to the position at which the individual image determined by the determination unit is detected by the detection unit with respect to the projection unit. Control is performed to project the entire image including the individual image so as to be projected onto the area, and when the determination unit determines that the operation corresponds to the closing operation, the determination unit determines the projection unit. Control to project the entire image that does not include the individual images
projector.
請求項1または請求項2に記載のプロジェクターにおいて、The projector according to claim 1 or 2,
他の装置と通信を行う通信部を含み、Including a communication unit that communicates with other devices,
前記複数の個別画像は、それぞれ異なる装置から前記通信部が受信した画像情報に基づThe plurality of individual images are based on image information received by the communication unit from different devices.
く画像である、Is an image,
プロジェクター。projector.
請求項1〜のいずれかに記載のプロジェクターにおいて、
他の装置と通信を行う通信部を含み、
前記対象動作は、ノック動作を含み、
前記制御部は、前記動作が前記ノック動作に該当すると判定された場合、前記通信部に対し、前記ノック動作に対応した装置との通信を開始させる制御を行う、
プロジェクター。
The projector according to any one of claims 1 to 3
Including a communication unit that communicates with other devices,
The target motion includes a knock motion,
The control unit, when it is determined that the operation corresponds to the knock operation, performs control to start communication with the device corresponding to the knock operation to the communication unit,
projector.
請求項1〜のいずれかに記載のプロジェクターにおいて、
他の表示装置と通信を行う通信部を含み、
前記制御部は、前記対象動作に応じた制御として、前記通信部に対し、前記表示装置における画像の表示を変更させる表示制御情報を前記表示装置へ向け送信させる制御を行う、
プロジェクター。
The projector according to any one of claims 1 to 3
Including a communication unit that communicates with other display devices,
The control unit controls the communication unit to transmit display control information for changing display of an image on the display device to the display device as control corresponding to the target operation.
projector.
プロジェクターが、
複数の個別画像を含む全体画像を投写し、
投写対象領域における動作を検出し、
検出した前記動作が対象動作に該当するかどうかを判定し、
前記動作の行われた位置を検出し、
検出した位置に基づき、対象の個別画像を決定し、
前記動作が対象動作に該当すると判定された場合、決定された個別画像に対して、当該対象動作に応じた表示制御を行う、
制御方法。
The projector
Project an entire image including multiple individual images,
Detect motion in the projection area,
Determine whether the detected motion corresponds to the target motion,
Detecting the position where the operation was performed;
Based on the detected position, determine the target individual image,
When it is determined that the motion corresponds to the target motion, display control corresponding to the target motion is performed on the determined individual image .
Control method.
JP2010110363A 2010-05-12 2010-05-12 Projector and control method Active JP5656002B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010110363A JP5656002B2 (en) 2010-05-12 2010-05-12 Projector and control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010110363A JP5656002B2 (en) 2010-05-12 2010-05-12 Projector and control method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2014085749A Division JP5790959B2 (en) 2014-04-17 2014-04-17 Projector and control method

Publications (2)

Publication Number Publication Date
JP2011239291A JP2011239291A (en) 2011-11-24
JP5656002B2 true JP5656002B2 (en) 2015-01-21

Family

ID=45326761

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010110363A Active JP5656002B2 (en) 2010-05-12 2010-05-12 Projector and control method

Country Status (1)

Country Link
JP (1) JP5656002B2 (en)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4296606B2 (en) * 1997-07-23 2009-07-15 ソニー株式会社 Electronic device and display method
JP2003295749A (en) * 2002-04-03 2003-10-15 Ecc Co Ltd Method and device for image processing in remote learning system
JP2005141151A (en) * 2003-11-10 2005-06-02 Seiko Epson Corp Projector and method for setting projector function
WO2006038577A1 (en) * 2004-10-05 2006-04-13 Nikon Corporation Electronic device
JP4829855B2 (en) * 2007-09-04 2011-12-07 キヤノン株式会社 Image projection apparatus and control method thereof
JP5258399B2 (en) * 2008-06-06 2013-08-07 キヤノン株式会社 Image projection apparatus and control method thereof

Also Published As

Publication number Publication date
JP2011239291A (en) 2011-11-24

Similar Documents

Publication Publication Date Title
EP3326362B1 (en) Distributed projection system and method of operating thereof
CN110383214B (en) Information processing apparatus, information processing method, and recording medium
US9134598B2 (en) Electronic device
US9918042B2 (en) Performing electronic conferencing operations using electronic portals at different locations
TWI504931B (en) Projection system and projection method thereof
CN104865778A (en) Projector and electronic equipment
JP5656002B2 (en) Projector and control method
JP5790959B2 (en) Projector and control method
JP6394958B2 (en) Communication apparatus and communication method
JP2010085688A (en) Projector, conference system, sound source direction determination method, and camera control method
KR101347802B1 (en) Network lighting system capable of advertising and discussion learning using led and projector, and operating method using the same
JP7400531B2 (en) Information processing system, information processing device, program, information processing method and room
JP6552978B2 (en) Image composition apparatus and image composition program
JP2015159461A (en) Communication device, communication system, image segmentation method, and program
JP5263476B2 (en) Projector, conference support system, and conference support method
JP5741754B2 (en) Image projection device
JP2004147307A (en) Display device, terminal equipment and bidirectional interactive system
JP5880763B2 (en) Image projection device
JP5609605B2 (en) Image projection device
JP2024002781A (en) Robot, conference system, and control method
TWI422227B (en) System and method for multimedia meeting
JP2013034050A (en) Notification system, emergency notification method, and display device
JP2011237678A (en) Projector and projection method
JP2005005878A (en) Remote control method of audio-visual apparatus
JP2016114956A (en) Image projection device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130411

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140219

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140417

RD07 Notification of extinguishment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7427

Effective date: 20140619

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141029

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141111

R150 Certificate of patent or registration of utility model

Ref document number: 5656002

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350