JP2013149205A

JP2013149205A - Electronic equipment

Info

Publication number: JP2013149205A
Application number: JP2012011268A
Authority: JP
Inventors: Junji Tanaka; 淳史田中; Kumiko Ishida; 久美子石田; Toru Miyakoshi; 徹宮越; Chiori Saito; チオリ齋藤; Michiyo Ogawa; 倫代小川; Masaichi Sekiguchi; 政一関口
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2012-01-23
Filing date: 2012-01-23
Publication date: 2013-08-01

Abstract

PROBLEM TO BE SOLVED: To provide electronic equipment for achieving the proper notification of content corresponding to the use situation of a seat in a vehicle or an airplane.SOLUTION: The electronic equipment includes: detection devices (10, 30) for detecting the use situations of a seat; and an instruction device (30) for giving an instruction corresponding to the detection result of the detection device to a notification device (20) which performs notification to at least one of the seat and the neighborhood of the seat.

Description

本発明は、電子機器に関する。 The present invention relates to an electronic device.

従来より、使用者の動きに応じて誘導照明をすることが提案されている（例えば、特許文献１）。 Conventionally, it has been proposed to perform guided illumination according to the movement of the user (for example, Patent Document 1).

特開２０１１-９０６６号公報JP 2011-9066 A

しかしながら、従来の誘導照明は通路が確保されている自宅での例であり、例えば混雑した電車のように座席から出口までの通路が確保されていない場合や、飛行機の機内において移動通路が確保されていない場合（座席や人などが邪魔な場合）の誘導については何ら提案されていなかった。 However, the conventional guidance lighting is an example at home where a passage is secured. For example, when a passage from the seat to the exit is not secured as in a crowded train, or a moving passage is secured in an airplane. There was no suggestion of guidance when it was not (when seats or people were in the way).

そこで、本発明は上記の課題に鑑みてなされたものであり、座席の使用状況に応じた適切な内容の報知を実現することが可能な電子機器を提供することを目的とする。 Therefore, the present invention has been made in view of the above-described problems, and an object thereof is to provide an electronic device capable of realizing notification of appropriate contents according to the use state of a seat.

本発明の電子機器は、座席（２，２Ａ，２Ｂ，２Ｃ，２Ｄ）の使用状況を検出する検出装置（１０，３０）と、前記座席と前記座席の近傍との少なくとも一つに向けた報知を行う報知装置（２０）に対して、前記検出装置の検出結果に応じた指示を出す指示装置（３０）と、を備えたことを特徴とする電子機器である。 The electronic device according to the present invention provides a detection device (10, 30) for detecting a use situation of a seat (2, 2A, 2B, 2C, 2D) and a notification directed to at least one of the seat and the vicinity of the seat. An electronic device comprising: an instruction device (30) that issues an instruction according to a detection result of the detection device to a notification device (20) that performs the above.

本発明の電子機器では、前記検出装置は、複数の座席間の間隔の変化を検出してもよい。また、前記検出装置は、前記座席の姿勢の変化を検出してもよい。また、前記検出装置は、前記座席に付随する部分の使用状況の変化を検出してもよい。この場合、前記検出装置は、前記座席におけるテーブル（３Ｂ，３Ｃ）の使用状況の変化を検出してもよい。 In the electronic apparatus according to the aspect of the invention, the detection device may detect a change in the interval between a plurality of seats. Further, the detection device may detect a change in the posture of the seat. Further, the detection device may detect a change in a usage state of a portion associated with the seat. In this case, the detection device may detect a change in usage status of the tables (3B, 3C) in the seat.

本発明の電子機器では、前記検出装置は、前記座席周辺に位置する物体の状態を検出してもよい。この場合、前記検出装置の少なくとも一部は、前記座席の上方に配置されていてもよい。また、前記検出装置は、撮像を行う撮像部（１１）を備えていてもよい。この場合、前記撮像部は、撮像領域の一部が重複するように複数設けられていてもよい。更に、前記撮像部は、面積が既知の基準物体（６）を撮像し、前記指示装置は、前記基準物体の撮像結果から求められる、前記撮像部が撮像した前記基準物体とは異なる物体の面積に関する量に基づいて、前記報知装置に対する指示を変更してもよい。また、前記検出装置は、前記座席に関するリファレンスデータを記憶するメモリ（３５）を備えていてもよい。 In the electronic apparatus of the present invention, the detection device may detect the state of an object located around the seat. In this case, at least a part of the detection device may be disposed above the seat. Moreover, the said detection apparatus may be provided with the imaging part (11) which images. In this case, a plurality of the imaging units may be provided so that a part of the imaging region overlaps. Further, the imaging unit images a reference object (6) having a known area, and the pointing device obtains an area of an object different from the reference object imaged by the imaging unit, obtained from an imaging result of the reference object. The instruction to the notification device may be changed based on the amount related to Moreover, the said detection apparatus may be provided with the memory (35) which memorize | stores the reference data regarding the said seat.

本発明の電子機器では、前記報知装置は、報知内容を投影する投影部（２１）を備えており、前記指示装置は、前記投影部が投影する位置に応じた投影内容を指示することとしてもよい。また、前記報知装置は、報知内容を投影する複数の投影部を備えており、前記指示装置は、前記検出装置の検出結果に応じて前記複数の投影部から投影を行う投影部を選択することとしてもよい。また、前記報知装置は、前後に配置された座席間の通路を確保するための行動依頼情報を、当該前後に配置された座席に着席している人に対して報知してもよい。この場合、前記指示装置は、指示後に前記座席の使用状況が指示通りに変化したか否かを判断し、変化していない場合には、前記座席の使用状況を変更する駆動機構へ前記座席の使用状況の変更を指示してもよい。 In the electronic apparatus according to the aspect of the invention, the notification device includes a projection unit (21) that projects the notification content, and the instruction device may indicate the projection content according to the position projected by the projection unit. Good. In addition, the notification device includes a plurality of projection units that project notification contents, and the instruction device selects a projection unit that performs projection from the plurality of projection units according to a detection result of the detection device. It is good. In addition, the notification device may notify action request information for securing a passage between seats arranged at the front and rear to a person seated in the seat arranged at the front and rear. In this case, the instruction device determines whether or not the usage status of the seat has changed as instructed after the instruction. If the usage status has not changed, the instruction device moves the seat usage status to the drive mechanism that changes the usage status of the seat. The usage status may be changed.

本発明の電子機器では、前記検出装置は、移動する物体の位置を検出することとしてもよい。この場合、前記報知装置は、移動する物体へ目的地への誘導情報を報知することとしてもよい。 In the electronic apparatus according to the aspect of the invention, the detection device may detect a position of a moving object. In this case, the notification device may notify the moving object of the guide information to the destination.

なお、本発明をわかりやすく説明するために、上記においては一実施形態を表す図面の符号に対応つけて説明したが、本発明は、これに限定されるものではなく、後述の実施形態の構成を適宜改良しても良く、また、少なくとも一部を他の構成物に代替させても良い。更に、その配置について特に限定のない構成要件は、実施形態で開示した配置に限らず、その機能を達成できる位置に配置することができる。 In addition, in order to explain the present invention in an easy-to-understand manner, the above description has been made in association with the reference numerals of the drawings representing one embodiment. However, the present invention is not limited to this, and the configuration of an embodiment described later is provided. May be modified as appropriate, or at least a part thereof may be replaced with another component. Further, the configuration requirements that are not particularly limited with respect to the arrangement are not limited to the arrangement disclosed in the embodiment, and can be arranged at a position where the function can be achieved.

本発明の電子機器は、座席の使用状況に応じた適切な内容の報知を実現することができるという効果を奏する。 The electronic device of the present invention has an effect that it is possible to realize notification of appropriate contents according to the use situation of the seat.

一実施形態に係る誘導システムの概要図である。It is a schematic diagram of the guidance system concerning one embodiment. 図２（ａ）〜図２（ｃ）は、座席の状態の変化を示す図である。Fig.2 (a)-FIG.2 (c) are figures which show the change of the state of a seat. 一実施形態に係る誘導システムのブロック図である。It is a block diagram of the guidance system concerning one embodiment. ＣＰＵの制御を示すフローチャートである。It is a flowchart which shows control of CPU. 図４の処理を説明するための図（座席を平面的に示した模式図）である。FIG. 5 is a diagram for explaining the processing in FIG. 4 (a schematic diagram showing a seat in plan). 図６（ａ）〜図６（ｃ）は、変形例を説明するための図である。FIG. 6A to FIG. 6C are diagrams for explaining a modification.

以下、一実施形態に係る誘導システム１について、図１〜図５に基づいて詳細に説明する。 Hereinafter, the guidance system 1 which concerns on one Embodiment is demonstrated in detail based on FIGS.

本実施形態の誘導システム１は、列車やバス、飛行機などの乗り物内において、乗客を誘導する装置である。なお、以下においては、誘導システム１が、図１に示す飛行機の機内に搭載された場合を例に採り説明する。なお、飛行機内の座席は、図１に示すように、全乗客が進行方向前方を向いた状態で着席するような配置とされている。なお、以下の説明においては、任意の座席を示す場合には、「座席２」と記述し、特定の座席を示す場合には、「座席２Ａ，２Ｂ…」と記述するものとする。 The guidance system 1 of this embodiment is a device that guides passengers in a vehicle such as a train, bus, or airplane. In the following description, the guidance system 1 will be described by taking as an example the case where the guidance system 1 is installed in the airplane shown in FIG. As shown in FIG. 1, the seats in the airplane are arranged so that all passengers are seated in a state of facing forward in the traveling direction. In the following description, “seat 2” is described when an arbitrary seat is indicated, and “seats 2A, 2B...” Is indicated when a specific seat is indicated.

ここで、機内に配置されている座席２は、乗客の操作等により種々の形態に変化することが可能である。図２（ａ）〜図２（ｃ）には、座席の形態の例が示されている。これらの図に示すように、座席２は、乗客の操作等により、初期状態（図２（ａ）の状態）と、図２（ｂ）に示すリクライニングの状態（シートの背もたれを後方へ傾斜させた状態）との間で遷移する。また、座席２の背もたれにはテーブル３が設けられており、当該テーブル３は、乗客（後ろの座席２’の乗客）の操作等により、図２（ａ）、図２（ｂ）の閉状態（非使用状態）と、図２（ｃ）の開状態（使用状態）のいずれかの状態をとりうる。 Here, the seat 2 arranged in the aircraft can be changed into various forms by the passenger's operation or the like. FIGS. 2A to 2C show examples of seat configurations. As shown in these drawings, the seat 2 has an initial state (the state shown in FIG. 2A) and a reclining state shown in FIG. Transition between the two states. In addition, a table 3 is provided on the back of the seat 2, and the table 3 is in a closed state shown in FIGS. 2A and 2B by an operation of a passenger (passenger in the rear seat 2 ′) or the like. Either the (non-use state) or the open state (use state) of FIG.

以下、誘導システム１について、図１及び図３に基づいて詳細に説明する。図３は、誘導システム１のブロック図である。 Hereinafter, the guidance system 1 will be described in detail with reference to FIGS. 1 and 3. FIG. 3 is a block diagram of the guidance system 1.

本実施形態の誘導システム１は、図３に示すように、複数の撮像装置１０と、複数の投影装置２０と、制御装置３０と、を有する。なお、撮像装置１０と投影装置２０とは、図１に示すように、一体的にパッケージングされたユニット構造とされ、機内の天井部に設置されているものとする。 As shown in FIG. 3, the guidance system 1 of the present embodiment includes a plurality of imaging devices 10, a plurality of projection devices 20, and a control device 30. As shown in FIG. 1, the imaging device 10 and the projection device 20 have a unit structure that is integrally packaged, and are installed on the ceiling in the machine.

撮像装置１０は、図３に示すように、撮像部１１と、通信部１２とを有する。撮像部１１は、撮影レンズや、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの撮像素子およびこの撮像素子を制御する制御回路などを有している。撮像部１１は、機内の天井部から下方を撮像する。 As illustrated in FIG. 3, the imaging device 10 includes an imaging unit 11 and a communication unit 12. The imaging unit 11 includes an imaging lens, an imaging device such as a charge coupled device (CCD) or a complementary metal oxide semiconductor (CMOS), a control circuit that controls the imaging device, and the like. The imaging unit 11 images the lower part from the ceiling part in the aircraft.

撮像部１１は、機内の広さ、撮像レンズの撮像範囲（撮影レンズの画角）に応じて複数設けることができる（図３のブロック図においては、一例として３つの撮像部１１を示している）。なお、各撮像部１１は、撮像範囲の一部が他の撮像部１１の撮像範囲と重複するように配置されている。このような配置とすることにより、例えば、ある座席に座っている乗客が席から離れて、再び座席に戻るまでの間、乗客の頭を複数の撮像部１１により連続的又は断続的に撮像することにより、乗客の移動軌跡をモニターすることができる。すなわち、乗客を追跡することができる。この場合、それぞれの撮像部１１の撮像範囲の一部が重複する量は、頭の大きさ（頭囲５０ｃｍから６０ｃｍ）に基づいて決定するようにすればよい。この撮像範囲の重複については、本願出願人が先に出願した特願２０１０−２５９５２８号に記載されている。 A plurality of imaging units 11 can be provided according to the size in the machine and the imaging range of the imaging lens (the angle of view of the imaging lens) (in the block diagram of FIG. 3, three imaging units 11 are shown as an example. ). Each imaging unit 11 is arranged so that a part of the imaging range overlaps the imaging range of the other imaging units 11. With this arrangement, for example, the passenger's head is imaged continuously or intermittently by the plurality of imaging units 11 until the passenger sitting in a certain seat leaves the seat and returns to the seat again. Thus, the movement trajectory of the passenger can be monitored. That is, passengers can be tracked. In this case, the amount by which a part of the imaging range of each imaging unit 11 overlaps may be determined based on the size of the head (head circumference 50 cm to 60 cm). This overlapping imaging range is described in Japanese Patent Application No. 2010-259528 filed earlier by the present applicant.

なお、撮像部１１の位置を調節するために不図示の駆動装置（例えばボイスコイルモータ）を設けるようにしてもよい。具体的には、撮像部１１をチルト方向（垂直方向の首振り）およびパン方向（水平方向の首振り）に駆動するための駆動装置を設ければよい。 Note that a drive device (not shown) (for example, a voice coil motor) may be provided to adjust the position of the imaging unit 11. Specifically, a driving device for driving the imaging unit 11 in the tilt direction (vertical swing) and the pan direction (horizontal swing) may be provided.

通信部１２は、後述する制御装置３０の通信部３６と通信（例えば双方向通信）を行うものであり、無線、有線、電気通信回線などの通信を適用することができる。本実施形態において、通信部１２は、撮像部１１が撮像した画像データを制御装置３０へ転送する。 The communication unit 12 performs communication (for example, bidirectional communication) with a communication unit 36 of the control device 30 described later, and communication such as wireless, wired, and telecommunication lines can be applied. In the present embodiment, the communication unit 12 transfers the image data captured by the imaging unit 11 to the control device 30.

投影装置２０は、投影部２１と、通信部２２と、を有する。投影部２１は、光源、照明光学系、光変調素子、投射光学系、および投影画像調整部を有しており、床面や、座席２のテーブル、座席の肘掛の側面などに向けてメッセージ（図形や文字）を投影する。投影部２１は、例えば、乗客を座席からトイレまで誘導するためのマーク（図１の矢印４など）を座席の肘掛の側面や床に投影する。なお、投影装置２０は、投影部２１の位置をチルト方向（垂直方向の首振り）およびパン方向（水平方向の首振り）に調節するための不図示の駆動装置（例えばボイスコイルモータ）を有していてもよい。 The projection device 20 includes a projection unit 21 and a communication unit 22. The projection unit 21 includes a light source, an illumination optical system, a light modulation element, a projection optical system, and a projection image adjustment unit. A message (such as a floor surface, a table of the seat 2, a side surface of an armrest of the seat) Project figures and characters. For example, the projection unit 21 projects a mark (such as an arrow 4 in FIG. 1) for guiding a passenger from the seat to the toilet on the side surface of the armrest of the seat and the floor. The projection device 20 has a driving device (not shown) (for example, a voice coil motor) for adjusting the position of the projection unit 21 in the tilt direction (vertical swing) and the pan direction (horizontal swing). You may do it.

通信部２２は、後述する制御装置３０の通信部３６と通信を行うものであり、無線、有線、電気通信回線などの通信を適用することができる。 The communication part 22 communicates with the communication part 36 of the control apparatus 30 mentioned later, and communication, such as a radio | wireless, a wire, and a telecommunication line, can be applied.

なお、投影装置２０は、機内の広さ、投影部２１の投影範囲に応じて複数設けることができる（図３のブロック図においては、一例として３つの投影装置２０を示している）。 Note that a plurality of projection devices 20 can be provided according to the size of the apparatus and the projection range of the projection unit 21 (three projection devices 20 are shown as an example in the block diagram of FIG. 3).

なお、上記においては、撮像装置１０と投影装置２０とが、一体化されたユニット構造であるものとしたが、これに限らず、それぞれ独立していてもよい。また、撮像装置１０と投影装置２０の配置数は同一でもよいし、異なっていてもよい。 In the above description, the imaging device 10 and the projection device 20 have an integrated unit structure. However, the present invention is not limited to this, and may be independent from each other. Further, the number of the imaging device 10 and the projection device 20 may be the same or different.

制御装置３０は、スイッチ３１、ジェスチャー認識部３２、画像比較部３３、照明制御部３４、メモリ３５、通信部３６およびＣＰＵ３７を有し、誘導システム１全体を制御するものである。 The control device 30 includes a switch 31, a gesture recognition unit 32, an image comparison unit 33, an illumination control unit 34, a memory 35, a communication unit 36, and a CPU 37, and controls the entire guidance system 1.

スイッチ３１は、例えば窓側の座席に設けられている。窓側の座席の乗客により当該スイッチ３１が押されると、ＣＰＵ３７による乗客の誘導処理（後述）が開始される。なお、スイッチ３１は、窓側の座席以外（例えば、通路側の座席と窓側の座席に挟まれた座席（３列シートの真ん中など））に設けてもよい。 The switch 31 is provided, for example, in a window seat. When the switch 31 is pressed by a passenger in the window seat, a passenger guidance process (described later) by the CPU 37 is started. The switch 31 may be provided in a seat other than the window seat (for example, a seat sandwiched between the aisle seat and the window seat (such as the middle of a three-row seat)).

ジェスチャー認識部３２は、撮像装置１０により撮像された画像に基づいて、乗客が撮像装置１０に向けて所定のジェスチャー（例えば、手を振る、小指を立てる）を行っているかどうかを認識（判別）する。なお、ジェスチャー認識部３２は、メモリ３５に格納されているジェスチャー認識用の画像に基づいて、所定のジェスチャーがされているかどうかを認識（判別）する。ジェスチャー認識部３２において所定のジェスチャーが行われていることが認識された場合には、ＣＰＵ３７は、スイッチ３１が押された場合と同様、乗客の誘導処理を開始する。なお、スイッチ３１とジェスチャー認識部３２とを両方設ける場合に限らず、いずれか一方を省略するようにしてもよい。 The gesture recognizing unit 32 recognizes (determines) whether or not a passenger is making a predetermined gesture (for example, waving a hand or raising a little finger) toward the imaging device 10 based on the image captured by the imaging device 10. To do. The gesture recognizing unit 32 recognizes (determines) whether or not a predetermined gesture is being made based on the gesture recognition image stored in the memory 35. When the gesture recognizing unit 32 recognizes that a predetermined gesture is being performed, the CPU 37 starts the passenger guidance process in the same manner as when the switch 31 is pressed. In addition, you may make it abbreviate | omit not only the case where both the switch 31 and the gesture recognition part 32 are provided.

画像比較部３３は、メモリ３５に記憶されているリファレンス画像と、撮像装置１０が撮像した画像とを比較する。本実施形態において、画像比較部３３は、窓側の乗客が移動するための通路（スペース）を確保されているかどうかを判別するため、撮像装置１０が撮像した画像がリファレンス画像からどの程度変化しているかを検出する。すなわち、前後の座席の間隔（図１のＸ方向）を検出することになる。ここで、リファレンス画像とは、機内に乗客がいない状態で、座席のリクライニングが使用されておらず、また、座席のテーブルが閉じられた状態を予め撮像しておいた画像である。したがって、画像比較部３３は、リファレンス画像と撮像装置１０が撮像した画像との比較により、乗客が座席に着席しているか否か、立っている乗客が存在するか否か、リクライニングやテーブルを使用しているか否かを判別することができる。また、画像比較部３３は、座席上や座席周辺に物体（荷物など）が存在するか否かについても判別することができる。なお、飛行機や電車の座席間隔は、座席のクラスにより決まっているので、リファレンス画像は座席間隔の規則性（繰り返しパターン）がわかる程度の範囲で撮像されていればよく、機内、車内全体を撮像する必要はない、 The image comparison unit 33 compares the reference image stored in the memory 35 with the image captured by the imaging device 10. In the present embodiment, the image comparison unit 33 determines how much the image captured by the imaging device 10 has changed from the reference image in order to determine whether a passage (space) for the passenger on the window side to move is secured. Detect whether or not That is, the distance between the front and rear seats (X direction in FIG. 1) is detected. Here, the reference image is an image in which a seat reclining is not used and there is no passenger in the aircraft, and the seat table is closed in advance. Therefore, the image comparison unit 33 uses a reclining or a table based on the comparison between the reference image and the image captured by the imaging device 10, whether the passenger is seated in the seat, whether there is a standing passenger, or not. It can be determined whether or not. The image comparison unit 33 can also determine whether or not an object (such as a luggage) is present on or around the seat. In addition, since the seat spacing of airplanes and trains is determined by the seat class, it is sufficient that the reference image is captured within a range where the regularity (repetition pattern) of the seat spacing can be understood, and the entire interior of the cabin is captured. do not have to,

照明制御部３４は、一例として電気回路から構成されており、照明部３４２を制御する。具体的には、照明制御部３４は、照明部３４２近傍に設けられた照度計３４１又は照明部のスイッチ３４３のオン/オフの状態から投影装置２０が情報を投影する部分の明るさを検出又は推定する。そして、照明制御部３４は、検出又は推定した明るさが明るすぎる（投影に適さない）場合には、照明部３４２を制御して、照明を落とす（少し暗くする）。なお、投影装置２０を照明部３４２として兼用（例えば、光源の兼用）してもよい。 The illumination control unit 34 includes an electric circuit as an example, and controls the illumination unit 342. Specifically, the illumination control unit 34 detects the brightness of a portion where the projection apparatus 20 projects information from the on / off state of the illuminometer 341 provided in the vicinity of the illumination unit 342 or the switch 343 of the illumination unit. presume. If the detected or estimated brightness is too bright (not suitable for projection), the illumination control unit 34 controls the illumination unit 342 to turn off the illumination (make it slightly darker). Note that the projection device 20 may also be used as the illumination unit 342 (for example, as a light source).

メモリ３５は、不揮発性のメモリであり、前述したリファレンス画像、ジェスチャー認識用の画像および各種プログラム等を記憶している。 The memory 35 is a non-volatile memory, and stores the above-described reference image, gesture recognition image, various programs, and the like.

通信部３６は、撮像装置１０の通信部１２および投影装置２０の通信部２２と通信を行うものであり、無線、有線、電気通信回線などの通信を適用することができる。 The communication unit 36 communicates with the communication unit 12 of the imaging device 10 and the communication unit 22 of the projection device 20, and communication such as wireless, wired, and electric communication lines can be applied.

次に、本実施形態の誘導システム１の動作について、図４のフローチャートに沿って詳細に説明する。なお、図５は、図４の処理を説明するための図であり、図１の座席を平面的に示した模式図である。以下においては、図５の窓側の座席２Ａの乗客がトイレに行く場合を例に採り説明する。なお、図５に示すように、座席２Ｂ，２Ｃには乗客が着席しているものとする。また、座席２Ｂの乗客はテーブルを使用しており、座席２Ｃの乗客は座席をリクライニングしつつテーブルを使用しているものとする。 Next, operation | movement of the guidance system 1 of this embodiment is demonstrated in detail along the flowchart of FIG. FIG. 5 is a diagram for explaining the processing of FIG. 4, and is a schematic diagram illustrating the seat of FIG. 1 in a plan view. In the following, a case where a passenger of the window side seat 2A in FIG. 5 goes to the toilet will be described as an example. As shown in FIG. 5, it is assumed that passengers are seated in the seats 2B and 2C. In addition, it is assumed that the passenger of the seat 2B uses a table and the passenger of the seat 2C uses the table while reclining the seat.

図４の処理では、まず、ステップＳ１において、ＣＰＵ３７が、スイッチ３１がオンになったかどうかを検出する。このステップＳ１は、窓側の乗客が移動する際にサポートを必要としているかどうかを判断するためのステップである。なお、ＣＰＵ３７は、スイッチ３１がオンになった段階でステップＳ２に移行する。なお、前述したように、乗客は、スイッチ３１をオンにする代わりに所定のジェスチャーをすることとしてもよい。この場合、ＣＰＵ３７は、乗客によって所定のジェスチャーがされたことをジェスチャー認識部３２が認識した段階で、ステップＳ２に移行するようにすればよい。 In the process of FIG. 4, first, in step S1, the CPU 37 detects whether or not the switch 31 is turned on. This step S1 is a step for determining whether or not the window side passenger needs support when moving. Note that the CPU 37 proceeds to step S2 when the switch 31 is turned on. As described above, the passenger may perform a predetermined gesture instead of turning on the switch 31. In this case, the CPU 37 may move to step S2 when the gesture recognition unit 32 recognizes that a predetermined gesture has been made by the passenger.

乗客によってスイッチ３１がオンにされ（又は所定のジェスチャーがされ）、ステップＳ２に移行すると、ＣＰＵ３７は、撮像装置１０による撮像を開始する。なお、ＣＰＵ３７は、スイッチ３１がオンにされた座席に基づいて、複数の撮像装置１０の少なくとも１つを選択し、撮像を行う。この場合、選択すべき撮像装置１０は、スイッチ３１をオンにした乗客の通路を確保するのに障害となりうる座席を撮像する撮像装置である。本実施形態では、座席２Ａの乗客がスイッチ３１をオンしているので、その隣の座席２Ｂ、及び座席２Ｂの前の座席２Ｃ付近を撮像可能な撮像装置１０が選択される。なお、メモリ３５には、スイッチがオンされたときに選択すべき撮像装置及び撮像すべき座席を座席ごとに定義したテーブルを格納しておいてもよい。ＣＰＵ３７は、当該テーブルに基づいて撮像装置１０の選択等を行うこととすればよい。 When the switch 31 is turned on (or a predetermined gesture is made) by the passenger and the process proceeds to step S 2, the CPU 37 starts imaging by the imaging device 10. The CPU 37 selects at least one of the plurality of imaging devices 10 based on the seat where the switch 31 is turned on, and performs imaging. In this case, the image pickup apparatus 10 to be selected is an image pickup apparatus that picks up an image of a seat that may be an obstacle to securing a passage for a passenger whose switch 31 is turned on. In the present embodiment, since the passenger in the seat 2A turns on the switch 31, the imaging device 10 capable of imaging the adjacent seat 2B and the vicinity of the seat 2C in front of the seat 2B is selected. Note that the memory 35 may store a table in which an imaging device to be selected when the switch is turned on and a seat to be imaged are defined for each seat. The CPU 37 may select the imaging device 10 based on the table.

次いで、ステップＳ３では、ＣＰＵ３７が、画像比較部３３に指示を出し、撮像部１１Ａが撮像した画像と、メモリ３５に記憶されているリファレンス画像とを比較させる。前述したように、リファレンス画像は、座席がリクライニングされておらず、また、座席のテーブルが開いていない状態のときの画像である。ＣＰＵ３７は、画像比較部３３の比較結果に基づいて、図５の座席２Ｂ、２Ｃのリクライニングの有無、座席２Ｂ、２Ｃの乗客がテーブルを開いているかどうか、及び座席２Ｂの乗客の足の位置を確認する。 Next, in step S 3, the CPU 37 instructs the image comparison unit 33 to compare the image captured by the imaging unit 11 A with the reference image stored in the memory 35. As described above, the reference image is an image when the seat is not reclining and the seat table is not open. Based on the comparison result of the image comparison unit 33, the CPU 37 determines whether or not the seats 2B and 2C in FIG. 5 are reclining, whether the passengers in the seats 2B and 2C are opening the table, and the position of the passenger's foot in the seat 2B. Check.

次いで、ステップＳ４では、ＣＰＵ３７が、ステップＳ３の画像比較結果に基づいて、投影装置２０による投影領域・投影位置を決定する。以下、ステップＳ４の処理を具体的に説明する。まず、ＣＰＵ３７は、投影装置２０により座席２Ａの乗客の移動に協力が必要な乗客を決定する。図５では、座席２Ｃがリクライニング状態であるとともに、座席２Ｃの背もたれに設けられたテーブル（座席２Ｂの乗客が使用するテーブル）３Ｂと、座席２Ｄの背もたれに設けられたテーブル（座席２Ｃの乗客が使用するテーブル）３Ｃが使用され、また、座席２Ｂの乗客の足が座席２Ｃ側に向けて伸びている。したがって、図５の場合には、座席２Ａの乗客の移動に協力が必要な乗客が、座席２Ｂ，２Ｃの乗客に決定されることになる。そして、ＣＰＵ３７は、当該決定に基づいて、テーブル３Ｂの上面、テーブル３Ｃの上面を投影領域・投影位置として決定する。なお、ステップＳ４における投影位置の決定は、投影に用いる投影部を選択し、決定しているともいえる。 Next, in step S4, the CPU 37 determines a projection region / projection position by the projection device 20 based on the image comparison result in step S3. Hereinafter, the process of step S4 is demonstrated concretely. First, the CPU 37 determines a passenger who needs cooperation for the movement of the passenger in the seat 2 A by the projection device 20. In FIG. 5, while the seat 2C is in a reclining state, a table (table used by a passenger of the seat 2B) 3B provided on the back of the seat 2C and a table (passenger of the seat 2C) provided on the back of the seat 2D The table used) 3C is used, and the passenger's feet of the seat 2B extend toward the seat 2C. Therefore, in the case of FIG. 5, the passengers who need cooperation for the movement of the passengers in the seat 2A are determined as the passengers in the seats 2B and 2C. Based on the determination, the CPU 37 determines the upper surface of the table 3B and the upper surface of the table 3C as projection areas / projection positions. It can be said that the determination of the projection position in step S4 is performed by selecting a projection unit used for projection.

なお、テーブル３Ｂ，３Ｃが閉じられている場合もある。このような場合にはＣＰＵ３７は、撮像装置１０が撮像した座席２Ｂ，２Ｃの乗客の頭の位置から乗客の目の位置を推定して、目の前の物体（例えば座席の背もたれ）を投影領域として決定してもよい。また、撮像装置１０が床を撮像している場合には、撮像できた床部分を投影領域として決定してもよい。この場合、メモリ３５に床のリファレンス画像を記憶させておくこととすればよい。なお、目の位置は、特開２０１１−１４１７３０号に開示されているように撮像した頭の大きさから推定されるＺ方向（高さ方向）の頭の位置と、乗客が前方を向いて座席２に座ることを考慮して推定することができる。 The tables 3B and 3C may be closed. In such a case, the CPU 37 estimates the position of the passenger's eyes from the position of the passenger's head in the seats 2B and 2C captured by the imaging device 10, and projects an object in front of the eyes (for example, the back of the seat). May be determined as Further, when the imaging device 10 is imaging the floor, the floor portion that can be imaged may be determined as the projection area. In this case, the floor reference image may be stored in the memory 35. The positions of the eyes are the position of the head in the Z direction (height direction) estimated from the size of the imaged head as disclosed in JP 2011-141730, and the seat where the passenger faces forward. It can be estimated in consideration of sitting at 2.

次いで、ステップＳ５では、ＣＰＵ３７が、投影条件の決定を行う。ＣＰＵ３７は、テーブル３Ｂ，３Ｃ付近が明るすぎないかどうかを検出して、必要に応じて照明制御部３４によりテーブル３Ｂ，３Ｃ付近を照明している照明部の明るさを調節したり、投影装置２０の光源の出力を調節したりする。 Next, in step S5, the CPU 37 determines a projection condition. The CPU 37 detects whether or not the vicinity of the tables 3B and 3C is too bright, and adjusts the brightness of the illuminating unit that illuminates the vicinity of the tables 3B and 3C by the illumination control unit 34 as necessary. The output of 20 light sources is adjusted.

次いで、ステップＳ６では、ＣＰＵ３７が、投影装置２０による投影を行う。図５の場合、ステップＳ４においてテーブル３Ｂ，３Ｃの上面が、投影する領域として決定されているので、ＣＰＵ３７は、投影装置２０に対して、当該テーブル３Ｂ，３Ｃに対する投影を行わせる。なお、テーブル３Ｂ，３Ｃにコップや食器などが載っている場合がある。このような場合には、本願出願人が先に出願した特願２０１１-２８９２５５号に記載されているように投影領域に物があるかどうかを検出してから投影するようにすればいい。 Next, in step S 6, the CPU 37 performs projection by the projection device 20. In the case of FIG. 5, since the upper surfaces of the tables 3B and 3C are determined as projection areas in step S4, the CPU 37 causes the projection device 20 to perform projection on the tables 3B and 3C. There may be a case where a cup or tableware is placed on the tables 3B and 3C. In such a case, as described in Japanese Patent Application No. 2011-289255 filed earlier by the applicant of the present application, it may be projected after detecting whether there is an object in the projection region.

ここで、ＣＰＵ３７は、テーブル３Ｂに対して、“前を人が通りますので、テーブルを閉めて下さい。”というメッセージまたはそれを連想させるようなマークやアイコンもしくはアニメーション（図５のテーブル３Ｂ参照）を表示する。また、ＣＰＵ３７は、テーブル３Ｃに対しては、“後ろを人が通りますので、リクライニングを戻して下さい。”というメッセージまたはそれを連想させるようなマークやアイコンもしくはアニメーション（図５のテーブル３Ｃ参照）を表示する。なお、マークやアイコンもしくはアニメーションを用いるのは、座席に座っている人の国籍、使用言語にかかわらず、メッセージを伝えることができるからである。なお、メッセージを言語にて表示する場合には、乗客が用いる代表的な言語（例えば英語、日本語、中国語など）を用いることが好ましい。 Here, the CPU 37 gives a message “Please close the table because a person passes in front of” to the table 3B, or a mark, icon or animation reminiscent of it (see table 3B in FIG. 5). Is displayed. In addition, the CPU 37 gives a message to the table 3C “A person passes behind, please return reclining.” Or a mark, icon or animation reminiscent of it (see table 3C in FIG. 5). Is displayed. Note that the mark, icon, or animation is used because a message can be transmitted regardless of the nationality or language of the person sitting on the seat. In addition, when displaying a message in a language, it is preferable to use the typical languages (for example, English, Japanese, Chinese, etc.) which a passenger uses.

このように、本実施形態においては、座席の位置に応じて投影装置２０により投影する内容を変えている。なお、ＣＰＵ３７は、投影装置２０がテーブル３Ｂ（３Ｃ）に投影する場合と、床などに投影する場合とで投影する内容を変えてもよい。例えば、ＣＰＵ３７は、床への投影の際には、乗客の目を惹くように、注意を喚起するような点滅パターンを投影するようにしてもよいし、テーブルに投影する場合よりも目立つ色で投影することとしてもよい。 Thus, in this embodiment, the content projected by the projection device 20 is changed according to the position of the seat. Note that the CPU 37 may change the content to be projected between when the projection device 20 projects onto the table 3B (3C) and when onto the floor. For example, when projecting on the floor, the CPU 37 may project a blinking pattern that calls attention so as to attract the eyes of the passengers, or in a more conspicuous color than when projecting on the table. It may be projected.

次いで、ステップＳ７では、ＣＰＵ３７は、ステップＳ６による投影から所定時間（数秒から数十秒）経過するまで待機する。そして、所定時間経過した後は、ステップＳ８に移行して、ＣＰＵ３７は、乗客が通る通路が確保されたかどうかを判断する。この場合、ＣＰＵ３７は、画像比較部３３に、撮像装置１０による直前の撮像結果とリファレンス画像との比較を行わせ、当該比較結果に基づいて、乗客が通る通路が確保されたかどうかの判断を行う。なお、これに代えて、ＣＰＵ３７は、座席２Ａの乗客の頭の位置を撮像装置１０の撮像画像を利用して追尾し、座席２Ａの乗客の移動が済んだかどうかに基づいて、ステップＳ８の判断を行うこととしても良い。 Next, in step S7, the CPU 37 stands by until a predetermined time (several seconds to several tens of seconds) elapses from the projection in step S6. And after predetermined time passes, it transfers to step S8 and CPU37 judges whether the channel | path through which a passenger passes was ensured. In this case, the CPU 37 causes the image comparison unit 33 to compare the previous imaging result obtained by the imaging device 10 with the reference image, and determines whether a passage through which the passenger passes is secured based on the comparison result. . Instead of this, the CPU 37 tracks the position of the passenger's head in the seat 2A using the captured image of the imaging device 10, and determines whether or not the passenger in the seat 2A has moved in step S8. It is also good to do.

ステップＳ８の判断が否定された場合、すなわち座席２Ａの乗客が通る通路が確保されていないと判断された場合には、ステップＳ４に戻り、再度投影領域を決定する。例えば、座席２Ｃのリクライニングは元に戻ったものの、座席２Ｃの背もたれに設けられたテーブル３Ｂが開かれた状態のままであったとする。この場合、ＣＰＵ３７は、テーブル３Ｂを投影領域と決定する（ステップＳ４）。そして、ＣＰＵ３７は、テーブル３Ｂに投影するための投影条件を決定し（ステップＳ５）、投影を行う（ステップＳ６）。ここで、テーブル３Ｂへの投影は２度目であるので、注意をより喚起するために、ＣＰＵ３７は、点滅パターンを投影した後に前述のメッセージまたはマークを投影してもよい。そして、ＣＰＵ３７は、ステップＳ８において、通路が確保されたかどうか再度確認する。なお、ステップＳ８の判断が複数回否定されるような場合には、乗客が寝ている場合もある。このような場合には、ＣＰＵ３７は、不図示のコール装置によりアテンダントをコールするようにしてもよい。また、移動しようとする乗客が３列シートの真ん中の座席にいる場合には、最初に右方向の座席の乗客に向けて投影を行い、通路の確保を試みることとしてもよい。右方向の座席の乗客に向けて投影しても通路の確保ができないときには、次に左方向の座席の乗客に向けて投影を行い、通路の確保を試みることにしてもよい。 If the determination in step S8 is negative, that is, if it is determined that the passage through which the passenger of the seat 2A passes is not secured, the process returns to step S4, and the projection area is determined again. For example, it is assumed that the reclining of the seat 2C has been restored, but the table 3B provided on the backrest of the seat 2C remains open. In this case, the CPU 37 determines that the table 3B is a projection area (step S4). Then, the CPU 37 determines a projection condition for projecting onto the table 3B (step S5), and performs projection (step S6). Here, since the projection onto the table 3B is the second time, the CPU 37 may project the aforementioned message or mark after projecting the blinking pattern in order to draw more attention. Then, in step S8, the CPU 37 confirms again whether a passage is secured. If the determination in step S8 is denied more than once, the passenger may be sleeping. In such a case, the CPU 37 may call the attendant with a call device (not shown). In addition, when the passenger to be moved is in the middle seat of the three-row seat, projection may be first made toward the passenger in the right seat to try to secure the passage. If the passage cannot be secured even when projected toward the passenger in the rightward seat, projection may be performed next to the passenger in the leftward seat to try to secure the passage.

一方、ステップＳ８の判断が肯定された場合、すなわち、座席２Ａの乗客が通る通路が確保されたと判断された場合には、ステップＳ９に移行する。ステップＳ９では、ＣＰＵ３７は、撮像装置１０により撮像された画像に基づいて、乗客（移動者）の位置を確認する。このステップＳ９では、ＣＰＵ３７は、座席２Ａの乗客が移動を開始したことを検出してもよく、また、乗客が立ち上がったことを検出してもよい。乗客が立ち上がったかどうかは、撮像部１１で撮像された頭の大きさの変化から検出することができる。乗客の姿勢に応じて、頭と撮像部１１の距離が変化し、撮像される頭の大きさも変化するからである。なお、撮像装置１０による乗客の撮像は、上部から頭を撮像するものである。このように、撮像装置１０は乗客の顔の撮像を行わないので、乗客のプライバシーを守ることができる。 On the other hand, if the determination in step S8 is affirmative, that is, if it is determined that a passage through which the passenger of the seat 2A passes is secured, the process proceeds to step S9. In step S 9, the CPU 37 confirms the position of the passenger (moving person) based on the image captured by the imaging device 10. In this step S9, the CPU 37 may detect that the passenger of the seat 2A has started moving, or may detect that the passenger has stood up. Whether the passenger has stood up can be detected from a change in the size of the head imaged by the imaging unit 11. This is because the distance between the head and the imaging unit 11 changes according to the posture of the passenger, and the size of the imaged head also changes. In addition, the passenger's imaging by the imaging device 10 images a head from the top. Thus, since the imaging device 10 does not capture the passenger's face, the privacy of the passenger can be protected.

次いで、ステップＳ１０では、ＣＰＵ３７が、ステップＳ９で取得した乗客の位置に応じて、乗客に対して投影装置２０を用いた案内を行う。具体的には、ＣＰＵ３７は、投影装置２０を用いて図１や図５に示すように、座席の肘掛の側面や床に移動方向を示す矢印４を投影する。この場合、ＣＰＵ３７は、トイレの施錠状態や、トイレ付近の撮像装置１０が撮像した頭からその人数を判定して、空いているトイレに案内するようにすればよい。なお、座席の肘掛の側面や床に矢印４を投影することにより、他の乗客にも機内の通路を移動する人がいることを認識させることができる。 Next, in step S10, the CPU 37 provides guidance using the projection device 20 to the passenger according to the position of the passenger acquired in step S9. Specifically, the CPU 37 projects the arrow 4 indicating the movement direction on the side surface of the armrest of the seat or the floor using the projection device 20 as shown in FIGS. In this case, the CPU 37 may determine the number of persons from the locked state of the toilet or the head imaged by the imaging device 10 in the vicinity of the toilet and guide it to an empty toilet. In addition, by projecting the arrow 4 on the side of the armrest or the floor of the seat, other passengers can recognize that there is a person who moves in the in-flight passage.

次いで、ステップＳ１１では、ＣＰＵ３７は、複数の撮像装置１０の撮像結果から乗客がトイレ（目的地）に到着したかどうか判断を行う。ここでの判断が否定された場合には、ステップＳ９に戻る。そして、乗客がトイレ（目的地）に着くまでステップＳ９、Ｓ１０の処理を繰り返す。その後は、ステップＳ１１の判断が肯定された段階で、図４の全処理を終了する。 Next, in step S 11, the CPU 37 determines whether the passenger has arrived at the toilet (destination) from the imaging results of the plurality of imaging devices 10. When judgment here is denied, it returns to step S9. And the process of step S9, S10 is repeated until a passenger arrives at a toilet (destination). Thereafter, when the determination in step S11 is affirmed, all the processes in FIG. 4 are terminated.

なお、ＣＰＵ３７は、乗客がトイレから座席２Ａに戻るまでの間も、複数の撮像装置１０により乗客の頭を追尾して、座席２Ａまでの移動方向を矢印４で示すようにしてもよい。また、乗客が座席２Ａに近づいた時点で、投影装置２０によりテーブル３Ｂ，３Ｃに乗客が戻って来る旨の表示を行うようにしてもよい。更に、ＣＰＵ３７は、座席２Ａに乗客が戻った後に、テーブル３Ｃにリクライニングの使用が可能になったことを示すメッセージを投影するようにしてもよい。 The CPU 37 may track the passenger's head with the plurality of imaging devices 10 until the passenger returns from the toilet to the seat 2 A, and the direction of movement to the seat 2 A may be indicated by the arrow 4. Further, when the passenger approaches the seat 2A, the projection device 20 may display that the passenger returns to the tables 3B and 3C. Further, the CPU 37 may project a message indicating that the reclining can be used on the table 3C after the passenger returns to the seat 2A.

以上詳細に説明したように、本実施形態によると、誘導システム１は、座席２の使用状況を撮像する撮像装置１０と、撮像装置１０による撮像された画像から座席２の使用状況を検出する制御装置３０とを備え、制御装置３０は、座席と座席の近傍との少なくとも一つに向けた投影を行う投影装置２０に対して、座席２の使用状況の検出結果に応じた指示を出す。これにより、本実施形態では、投影装置２０に対して、座席２の使用状況に応じた適切な内容の投影（報知）を行わせることができる。この結果、飛行機の機内において移動通路が確保されていない場合（座席や人などが邪魔な場合）であっても、移動者にストレス等を感じさせることなく、移動者をトイレなどの目的地へ誘導することが可能である。また、混雑した電車やバスのように座席や通路から出口までの通路が確保されていない場合などにおいても同様である。 As described above in detail, according to the present embodiment, the guidance system 1 controls the imaging device 10 that images the usage status of the seat 2 and the usage status of the seat 2 from the image captured by the imaging device 10. The control device 30 issues an instruction according to the detection result of the use status of the seat 2 to the projection device 20 that performs projection toward at least one of the seat and the vicinity of the seat. Thereby, in this embodiment, the projection apparatus 20 can be made to perform projection (notification) of appropriate contents according to the usage status of the seat 2. As a result, even if a moving passage is not secured in the plane of the airplane (when a seat or a person is in the way), the traveler can be moved to a destination such as a toilet without feeling stressed. It is possible to guide. The same applies to a case where a passage from a seat or passage to an exit is not secured, such as a crowded train or bus.

また、本実施形態の誘導システム１では、制御装置３０が、撮像装置１０の撮像結果を用いて、複数の座席（例えば、座席２Ｂ，２Ｃ）間の間隔の変化を検出する。また、制御装置３０は、撮像結果を用いて、座席の姿勢の変化を検出する。さらに、制御装置３０は、撮像結果を用いて、座席２に付随する部分の使用状況の変化を検出する。このように、本実施形態では、座席の使用状況を種々の観点から検出するので、移動者の移動を妨げる座席に座っている人に対して、適切な内容の報知（投影装置２０による投影）を行うことが可能である。 In the guidance system 1 of the present embodiment, the control device 30 detects a change in the interval between a plurality of seats (for example, the seats 2B and 2C) using the imaging result of the imaging device 10. Moreover, the control apparatus 30 detects the change of the attitude | position of a seat using an imaging result. Furthermore, the control device 30 detects a change in the usage state of a portion associated with the seat 2 using the imaging result. As described above, in the present embodiment, the use situation of the seat is detected from various viewpoints, so that appropriate information is notified to the person sitting on the seat that prevents the movement of the moving person (projection by the projection device 20). Can be done.

また、本実施形態の誘導システム１では、制御装置３０が、撮像装置１０の撮像結果を用いて、座席２周辺に位置する乗客の位置や姿勢、荷物の位置を検出する。これにより、乗客の位置や姿勢の変更を要求する報知や、荷物の位置等の変更を要求する報知が可能となる。また、本実施形態では、制御装置３０は、座席２に関するリファレンスデータを記憶するメモリ３５を備えている。したがって、制御装置３０は、リファレンスデータ（画像）と撮像された画像とを比較することにより、乗客が座席に着席しているか否か、立っている乗客が存在するか否か、リクライニングやテーブルを使用しているか否か、荷物等があるか否かなどを簡易に判別することが可能となる。 Further, in the guidance system 1 of the present embodiment, the control device 30 detects the position and posture of a passenger located around the seat 2 and the position of the luggage using the imaging result of the imaging device 10. As a result, a notification requesting a change in the position or posture of the passenger and a notification requesting a change in the position of the luggage can be made. In the present embodiment, the control device 30 includes a memory 35 that stores reference data related to the seat 2. Therefore, the control device 30 compares the reference data (image) with the captured image to determine whether the passenger is seated in the seat, whether there is a standing passenger, reclining or a table. It is possible to easily determine whether or not the user is using the baggage or the like.

また、本実施形態では、各撮像部１１の撮像範囲の一部が他の撮像部１１の撮像範囲と重複するように配置されている。このような配置とすることにより、ある座席に座っている乗客が席から離れて、再び座席に戻るまでの間、乗客の頭を複数の撮像部１１により連続的又は断続的に撮像することにより、乗客を追跡（追尾）することができる。 Further, in the present embodiment, a part of the imaging range of each imaging unit 11 is arranged so as to overlap with the imaging range of other imaging units 11. By adopting such an arrangement, the passenger's head is imaged continuously or intermittently by the plurality of imaging units 11 until the passenger sitting in a certain seat leaves the seat and returns to the seat again. , Can track (track) passengers.

また、本実施形態では、制御装置３０は、座席の使用状況の検出結果に応じて投影を行う投影部２１を選択する。これにより、投影箇所が複数ある場合にも、それぞれの投影箇所に対して、適した投影内容（例えば、座席毎にそれぞれ異なるメッセージやマークなど）を投影することが可能となる。 Moreover, in this embodiment, the control apparatus 30 selects the projection part 21 which performs projection according to the detection result of the use condition of a seat. Thereby, even when there are a plurality of projection locations, it is possible to project suitable projection contents (for example, different messages and marks for each seat) on each projection location.

また、本実施形態では、制御装置３０が、投影装置２０に対して、移動する乗客へ目的地（トイレ等）への誘導情報（矢印４など）を投影させるので、乗客の目的地への誘導を行うことができる。 Further, in the present embodiment, the control device 30 causes the projection device 20 to project guidance information (such as an arrow 4) to the destination (toilet or the like) to the moving passenger, so that the guidance to the passenger's destination is performed. It can be performed.

なお、上記実施形態においては、テーブル３を自動で開閉するための開閉機構を座席２に設けてもよい。この場合、例えば、トイレへ立つ乗客をサポートする際に、ＣＰＵ３７は、乗客の邪魔になるテーブルを開閉機構を介して自動的に閉じるようにしてもよい。この場合、ＣＰＵ３７は、撮像装置１０の撮像結果に基づいて、テーブルの上に物が載置されているかどうかを判断し、物が載置されていない場合にのみ、テーブルを自動的に閉じるようにしてもよい。また、ＣＰＵ３７は、乗客が通った後に、開閉機構を介してテーブルを自動的に開けるようにしてもよい。 In the above embodiment, an opening / closing mechanism for automatically opening / closing the table 3 may be provided in the seat 2. In this case, for example, when supporting a passenger standing in a toilet, the CPU 37 may automatically close a table that obstructs the passenger via an opening / closing mechanism. In this case, the CPU 37 determines whether or not an object is placed on the table based on the imaging result of the imaging device 10, and automatically closes the table only when no object is placed. It may be. The CPU 37 may automatically open the table via an opening / closing mechanism after the passenger passes.

なお、上記実施形態では、寝ている乗客（投影したメッセージに気づかない乗客）がいる場合には、アテンダントをコールする場合について説明したが、これに限られるものではない。例えば、座席を回転、スライドすることが可能な駆動機構を座席に設けておき、当該駆動機構により、寝ている乗客の座席を回転、スライド等することで、トイレに行く乗客の通路を確保することとしてもよい。 In the above embodiment, the case where an attendant is called when there is a sleeping passenger (passenger who does not notice the projected message) is described, but the present invention is not limited to this. For example, a drive mechanism capable of rotating and sliding the seat is provided in the seat, and the passenger's passage to the toilet is secured by rotating and sliding the seat of the sleeping passenger by the drive mechanism. It is good as well.

なお、乗客や荷物の存在、及び座席間の状態の変化を認識するために、撮像部１１が撮像する床面や座席に、図６（ａ）に示すような一辺が既知の白黒の正方形が交互に配置された市松模様６を描画しておくこととしてもよい。撮像装置１０は、予め、乗客がいない状態で、かつ座席のリクライニングやテーブルが使用されていない状態を撮像したリファレンス画像を取得しておく。そして、ＣＰＵ３７は、乗客や荷物の存在、座席間の状態の変化を判断する際に、撮像した画像（図６（ｂ）参照）とリファレンス画像との差分から、市松模様６を構成する正方形が何個隠されているかを算出する。更に、ＣＰＵ３７は、算出した正方形の個数と面積の変化から、乗客や荷物の存在、及び座席間の状態の変化を判断する。このようにすることで、移動する乗客の体格や、通路の幅などを考慮したメッセージの投影等を行うことが可能となる。なお、乗客が座っている場合と立ち上がった場合とでも、市松模様６の正方形の隠れ方は変化する（図６（ｂ）が座った状態であり、図６（ｃ）が立った状態であるとする）。したがって、市松模様６を利用することで乗客の姿勢を考慮したメッセージの投影等を行うことも可能となる。なお、市松模様を用いたスペース検出については、本願出願人が先に出願した特願２０１１−２６３１５９号にもその開示がある。 In order to recognize the presence of passengers and luggage and changes in the state between seats, a black and white square with a known side as shown in FIG. It is also possible to draw checkered patterns 6 arranged alternately. The imaging device 10 acquires in advance a reference image obtained by imaging a state where there are no passengers and a seat reclining or table is not used. When the CPU 37 determines the presence of passengers, luggage, or changes in the state between the seats, the squares constituting the checkered pattern 6 are determined from the difference between the captured image (see FIG. 6B) and the reference image. Calculate how many are hidden. Further, the CPU 37 determines the presence of passengers and luggage and the change in the state between the seats from the calculated change in the number of squares and the area. By doing so, it is possible to project a message in consideration of the physique of the moving passenger, the width of the passage, and the like. It should be noted that the method of hiding the square of the checkered pattern 6 changes depending on whether the passenger is sitting or standing up (FIG. 6B is in a sitting state and FIG. 6C is in a standing state). And). Therefore, by using the checkered pattern 6, it is possible to project a message in consideration of the posture of the passenger. Note that space detection using a checkered pattern is also disclosed in Japanese Patent Application No. 2011-263159 filed earlier by the present applicant.

なお、上記実施形態では、投影装置２０により乗客に対するメッセージを投影する場合について説明したが、これに代えて又はこれとともに、音声を用いて、乗客にメッセージを報知することとしてもよい。また、座席２（背もたれの背面など）にモニターが搭載されている場合には、当該モニターを用いて、乗客に対する報知を行うこととしてもよい。 In addition, although the said embodiment demonstrated the case where the message with respect to a passenger was projected by the projection apparatus 20, it is good also as alert | reporting a message to a passenger using a voice instead of this or with this. Further, when a monitor is mounted on the seat 2 (such as the back of the backrest), the passenger may be notified using the monitor.

なお、上記実施形態では、制御装置３０は、撮像装置１０により撮像された画像に基づいて、座席の使用状況等を検出することとしたが、これに限らず、座席の各部にセンサを設け、背もたれの角度やテーブルの角度などを検出するようにしてもよい。 In the above-described embodiment, the control device 30 detects the use status of the seat based on the image captured by the imaging device 10, but is not limited thereto, and a sensor is provided in each part of the seat. You may make it detect the angle of a backrest, the angle of a table, etc.

また、上記実施形態の誘導システム１は、映画館、コンサートホール、競技場、電車やバスなどでも適用することができる。例えば、トイレの案内や緊急時の避難経路の案内（避難誘導）にも応用することができる。上記実施形態の誘導システム１を電車に適用する場合には、ＣＰＵ３７は、撮像装置１０により撮像された画像から座席を立った乗客を検出し、当該乗客を出口まで誘導することとしてもよい。これにより、混雑した車内でも他の乗客に降りる人がいることを案内することができる。 In addition, the guidance system 1 of the above embodiment can also be applied to movie theaters, concert halls, stadiums, trains, buses, and the like. For example, it can be applied to toilet guidance and emergency evacuation route guidance (evacuation guidance). When the guidance system 1 of the above embodiment is applied to a train, the CPU 37 may detect a passenger standing on the seat from the image captured by the imaging device 10 and guide the passenger to the exit. Thereby, it can be guided that there are people who get off to other passengers even in a crowded vehicle.

上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。 The above-described embodiment is an example of a preferred embodiment of the present invention. However, the present invention is not limited to this, and various modifications can be made without departing from the scope of the present invention.

１誘導システム
２，２Ａ，２Ｂ，２Ｃ，２Ｄ座席
３，３Ｂ，３Ｃテーブル
６市松模様
１０撮像装置
１１撮像部
２０投影装置
２１投影部
３５メモリ
３０制御装置

DESCRIPTION OF SYMBOLS 1 Guidance system 2,2A, 2B, 2C, 2D Seat 3,3B, 3C Table 6 Checkered pattern 10 Imaging device 11 Imaging unit 20 Projection device 21 Projection unit 35 Memory 30 Control device

Claims

A detection device for detecting the use status of the seat;
An electronic apparatus comprising: an instruction device that issues an instruction according to a detection result of the detection device to a notification device that performs notification toward at least one of the seat and the vicinity of the seat. .

The electronic device according to claim 1, wherein the detection device detects a change in an interval between a plurality of seats.

The electronic device according to claim 1, wherein the detection device detects a change in the posture of the seat.

The electronic device according to claim 1, wherein the detection device detects a change in a usage state of a portion associated with the seat.

The electronic device according to claim 4, wherein the detection device detects a change in usage status of the table in the seat.

The electronic device according to claim 1, wherein the detection device detects a state of an object located around the seat.

The electronic device according to claim 1, wherein at least a part of the detection device is disposed above the seat.

The electronic device according to claim 1, wherein the detection device includes an imaging unit that performs imaging.

The electronic apparatus according to claim 8, wherein a plurality of the imaging units are provided so that a part of the imaging region overlaps.

The imaging unit images a reference object having a known area,
The instruction device changes an instruction to the notification device based on an amount related to an area of an object different from the reference object imaged by the imaging unit, which is obtained from an imaging result of the reference object. Item 10. The electronic device according to Item 8 or 9.

The electronic device according to claim 1, wherein the detection device includes a memory that stores reference data related to the seat.

The notification device includes a projection unit that projects notification content,
The electronic device according to claim 1, wherein the instruction device instructs a projection content according to a position projected by the projection unit.

The notification device includes a plurality of projection units that project notification contents;
The electronic apparatus according to claim 1, wherein the instruction device selects a projection unit that performs projection from the plurality of projection units according to a detection result of the detection device.

2. The notification device notifies action request information for securing a passage between seats arranged at the front and rear to a person seated in the seat arranged at the front and rear. The electronic device according to any one of 1 to 13.

The instruction device determines whether or not the seat usage status has changed as instructed after the command, and if not, determines whether the seat usage status is changed to a drive mechanism that changes the seat usage status. 15. The electronic apparatus according to claim 14, wherein a change is instructed.

The electronic device according to claim 1, wherein the detection device detects a position of a moving object.

The electronic device according to claim 16, wherein the notification device notifies guide information to a destination to a moving object.