WO2023229001A1 - 投影システム - Google Patents

投影システム Download PDF

Info

Publication number
WO2023229001A1
WO2023229001A1 PCT/JP2023/019463 JP2023019463W WO2023229001A1 WO 2023229001 A1 WO2023229001 A1 WO 2023229001A1 JP 2023019463 W JP2023019463 W JP 2023019463W WO 2023229001 A1 WO2023229001 A1 WO 2023229001A1
Authority
WO
WIPO (PCT)
Prior art keywords
projection
occupant
information
trajectory
projection area
Prior art date
Application number
PCT/JP2023/019463
Other languages
English (en)
French (fr)
Inventor
郁代 笹島
Original Assignee
日本精機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本精機株式会社 filed Critical 日本精機株式会社
Publication of WO2023229001A1 publication Critical patent/WO2023229001A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators

Definitions

  • the present invention relates to a projection system that displays a desired display inside a vehicle such as an automobile.
  • Patent Document 1 an in-car conversation support device described in Patent Document 1 is known.
  • This support device collects the sounds uttered by passengers in the rear seats using a sound collector and outputs them from speakers installed in the doors of the driver's or passenger's seats, thereby transmitting information from the rear seats to the driver's or passenger's seats. transmission is carried out.
  • the present invention has been made in view of the above problems, and it is an object of the present invention to provide a projection system that allows the receiver side of the information to easily recognize that the information has been transmitted.
  • the present invention is a projection system 1 that includes a projection section 4 provided in an interior 21 of a vehicle 2, and a control section 70 that controls the projection section 4 to display a desired display. , a primary projection process in which the acquired predetermined information is projected and displayed by the projection unit 4 onto a predetermined primary projection area of the room 21; and after displaying the predetermined information by the primary projection process, a trajectory projection process in which the projection unit 4 performs a trajectory display in a direction from the next projection area to a predetermined secondary projection area in the room 21; and after execution of the trajectory display by the trajectory projection process;
  • the present invention is characterized in that a secondary projection process is performed in which the predetermined information is projected and displayed by the projection unit onto the projection area.
  • the information projected in the primary projection area is transmitted to the secondary projection area which is the receiver. This can be easily recognized by the receiver.
  • FIG. 1 is a functional block diagram showing the configuration of a projection system according to a first embodiment of the present invention.
  • FIG. 1 is a schematic diagram of the interior of a vehicle equipped with a projection system according to a first embodiment.
  • FIG. 3 is a diagram illustrating an example of a state in which projection information is displayed in a primary projection area of a transmission source in the projection system according to the first embodiment.
  • FIG. 3 is a diagram showing an example of a state in which projection information for selecting a destination is displayed in the projection system according to the first embodiment.
  • FIG. 3 is a diagram illustrating an example of a state in which a trajectory display from a transmission source to a transmission destination is projected in the projection system according to the first embodiment.
  • FIG. 1 is a functional block diagram showing the configuration of a projection system according to a first embodiment of the present invention.
  • FIG. 1 is a schematic diagram of the interior of a vehicle equipped with a projection system according to a first embodiment.
  • FIG. 3 is a diagram
  • FIG. 3 is a diagram illustrating an example of a state in which an alarm is displayed on a transmission destination in the projection system according to the first embodiment.
  • FIG. 3 is a diagram illustrating an example of a state in which information to be transmitted is projected onto a secondary projection area of a transmission destination in the projection system according to the first embodiment.
  • FIG. 2 is a functional block diagram showing the configuration of a projection system according to a second embodiment of the present invention.
  • FIG. 7 is a diagram illustrating an example of a state in which externally acquired information is projected onto a primary projection area located at a specific location in the projection system according to the second embodiment.
  • FIG. 7 is a diagram illustrating an example of a state in which a trajectory display from a specific location to a destination is projected in the projection system according to the second embodiment.
  • FIG. 7 is a diagram illustrating an example of a state in which an alarm is displayed on a destination in the projection system according to the second embodiment.
  • FIG. 7 is a diagram illustrating an example of a state in which externally acquired information is projected onto a secondary projection area of a transmission destination in the projection system according to the second embodiment.
  • FIG. 7 is a diagram illustrating an example of a state in which externally acquired information is projected onto a primary projection area located at a specific location in a projection system according to a third embodiment of the present invention.
  • FIG. 7 is a diagram illustrating an example of a state in which a trajectory display from a specific location to a destination is projected in the projection system according to the third embodiment.
  • FIG. 7 is a diagram illustrating an example of a state in which an alarm is displayed on a destination in the projection system according to the third embodiment.
  • FIG. 7 is a diagram illustrating an example of a state in which externally acquired information is projected onto a secondary projection area of a transmission destination in a projection system according to a third embodiment.
  • the projection system according to the first embodiment is a system that can visually recognize the state in which the information is moving from the source of the information toward the destination in the cabin of a vehicle by projecting a trajectory display, for example. It is.
  • FIG. 1 is a functional block diagram showing the configuration of a projection system according to the first embodiment
  • FIG. 2 is a schematic diagram of the interior of a vehicle in which the projection system according to the first embodiment is installed.
  • the projection system 1 includes a non-contact sensor 3 that measures a measurement target in a vehicle interior 21 of a vehicle 2, and a projection unit that is provided within the vehicle interior 21 and projects projection information PD onto a predetermined location of the vehicle interior 21.
  • the non-contact sensor 3 includes, for example, a visible light camera, an infrared camera, a TOF (Time of Flight) camera, a millimeter wave sensor, and the like.
  • the objects to be measured by the non-contact sensor 3 are the occupants 100 on board the vehicle 2 and the projection information PD displayed at a predetermined location in the vehicle interior 21 by the projection of the projector 4, and these two-dimensional or three-dimensional information Information is measured.
  • the non-contact sensor 3 is installed on the ceiling (roof) 22 of the vehicle 2, and measures the projection information PD displayed on the dashboard 23 and the hand movements of the occupant 100 on the projection information PD. do.
  • the measurement area measured by the non-contact sensor 3 may be a fixed area set in advance, or may be a variable area according to the movement of the occupant 100. Specifically, for example, if it is a fixed area, the measurement area may be an area where the projector 4 displays projection information PD (corresponding to the surface of the dashboard 23 on the passenger seat side in FIG. 2) as described later. .
  • the shape of the hand of the occupant 100 may be detected by image recognition, and the region including the hand may be set as the measurement region of the non-contact sensor 3 according to the movement thereof.
  • the projector 4 is configured as an example of a projection unit, and for example, a known projector using a liquid crystal device, a digital mirror device, etc. can be used.
  • the projector 4 is installed on the ceiling 22 of the vehicle 2, but there are also pillars 24 (A (front) pillar, B (center) pillar, C (rear) pillar) in the vehicle interior 21, A plurality of them may be installed at appropriate locations such as the D (rear) pillar) or the inner wall of the door 25.
  • the projector 4 projects and displays the projection information PD as a projector image on a predetermined location set in advance in the cabin 21 of the vehicle 2 under the control of the projection control device 6 .
  • Predetermined locations where the projection information PD is displayed include the ceiling 22 of the vehicle interior 21, the dashboard 23, inner walls such as the pillars 24 and doors 25, the glass surface of the window glass 26, the seat 27, the floor 28, and other locations within the vehicle interior 21. Various locations are targeted. Further, the projection information PD may be projected onto the surface of the body of the occupant 100 as necessary. The projection information PD is displayed by being projected onto the object surface existing at each of these locations.
  • the projection information PD may include light of a wavelength that is mixed with the color of the object surface so that the entire projection area becomes monochromatic, such as white, black, or gray.
  • the speaker 5 is configured as an example of a sounding section, and outputs sound information to the vehicle interior 21.
  • the speaker 5 is preferably directional, but may be a speaker generally mounted on the vehicle 2.
  • the speaker 5 outputs the sound of a navigation system (not shown in FIG. 1) and the sound of various contents (music, television, movies, games, etc.) to the vehicle interior 21, and also issues an alarm as described below.
  • the speakers 5 are installed inside the doors 25 of the passenger seat and the driver's seat, but the speaker 5 may be configured to include individual speakers 5 for each passenger 100 boarding the vehicle 2.
  • the projection control device 6 is composed of a computer that controls the overall operation of the projection system 1, and includes a control section 70 that includes a CPU (Central Processing Unit), etc., and a ROM (Read Only Memory), RAM (Random Access Memory), etc.
  • the storage unit 80 includes a memory and a hard disk.
  • the control unit 70 includes a sensor information acquisition unit 71 that acquires measurement information MD measured by the non-contact sensor 3, and a state analysis unit 72 that analyzes the state of the measurement target by image recognition based on the acquired measurement information MD.
  • Processing operation identification that specifies the processing operation to be executed based on the processing operation information according to the state of the measurement target stored in the processing operation storage unit 81 of the storage unit 80 and the state of the measurement target analyzed by the state analysis unit 72 section 73 and the information necessary for the specified processing operation to the output information storage section 82 of the storage section 80 or the Internet 90 (or to an in-vehicle system such as a navigation system or a communication system other than the Internet such as vehicle-to-vehicle communication, if necessary).
  • an output information acquisition unit 74 that acquires information from the output information acquisition unit 74; a projector control unit 75 that controls the plurality of projectors 4 in order to display each information acquired by the output information acquisition unit 74 as projection information PD; It includes a speaker control section 76 that controls the speaker 5 so as to output information related to sound among the information to the vehicle interior 21.
  • the projector control unit 75 also includes a first projection unit 75a that controls the projector 4 to project the projection information PD for the information transmission source onto the primary projection area, and a first projection unit 75a that controls the projector 4 to project the projection information PD for the information transmission source onto the secondary projection area.
  • the second projection unit 75b controls the projector 4 to project the image
  • the trajectory projection unit 75c controls the projector 4 to project a trajectory display from the primary projection area to the secondary projection area.
  • the storage unit 80 performs a processing operation (for example, storing the projection information of the next page) corresponding to the state of the measurement target (for example, swiping the finger on the projection information PD, tapping the finger on the projection information PD, etc.).
  • a processing operation storage unit 81 that stores information such as displaying a PD (switching to and displaying another projection information PD different from the current projection information PD, determining the contents of the projection information PD at a tap position, etc.), and projection information.
  • An output information storage section 82 stores various content information such as TV programs, movies, games, music, etc. that can be displayed as a PD, and information to be presented to the passenger 100 such as information regarding trajectory display and alarm display. Be prepared.
  • the sensor information acquisition unit 71 receives measurement information MD measured by the non-contact sensor 3 at a predetermined detection cycle, and passes it to the state analysis unit 72.
  • the state analysis unit 72 first determines whether the measurement information MD includes a measurement target by image recognition.
  • This image recognition method is arbitrary, and for example, known feature point calculation methods such as pattern matching, HOG (Histogram of Oriented Gradients), SIFT (Scale-Invariant Feature Transform), LBP (Local Binary Pattern), Haar-Like, etc. It is executed using
  • the movements of the recognized hand and fingers are analyzed. For example, if the fingertip moves continuously in the horizontal or vertical direction, it can be inferred that the occupant 100 is performing a swiping motion, and if the fingertip moves up and down in the height direction, it can be estimated that the occupant 100 is performing a tapping motion. It is possible to estimate that there are.
  • the measurement information MD measured by the non-contact sensor 3 also includes the projection information PD projected and displayed by the projector 4, any of the areas in which the projection information PD is displayed It is also analyzed whether the passenger's 100's fingertip moves at that position.
  • These analysis methods by the state analysis unit 72 are arbitrary, and for example, known methods such as the NN method (Nearest Neighbor algorithm), k-NN method (k-Nearest Neighbor algorithm), pattern matching method, etc. can be used.
  • the specified hand and finger movements include, for example, scrolling, pinch-in, pinch-out, long tap, flick, and drag.
  • the processing operation specifying unit 73 extracts and specifies information regarding the processing operation to be executed from the processing operation storage unit 81 based on the state of the measurement target analyzed by the state analysis unit 72. For example, when the state analysis unit 72 estimates that the occupant 100 has performed a swipe motion, the state analysis section 72 switches to the information on the next page of the currently projected projection information PD, and when it estimates that the occupant 100 has performed a tap motion, the state analysis section 72 switches to the information on the next page of the projection information PD that is currently being projected.
  • a processing operation such as determining the processing content displayed at the coordinates of the fingertip (for example, determining a destination, determining information to be sent to the destination) is specified.
  • the output information acquisition unit 74 acquires output information used in the processing operation specified by the processing operation identification unit 73. For example, when switching the projection information PD to the information of the next page, the projection information PD of the next page to be displayed after the switching is obtained from the output information storage unit 82 or the Internet 90 (information stored in a cache may be used). do. When performing a process of transmitting information from a transmission source to a transmission destination, information on a trajectory display from the transmission source to the transmission destination is acquired from the output information storage unit 82. When displaying an alarm as described below to the occupant 100, information on sound and light to be output as an alarm is acquired from the output information storage unit 82.
  • the projector control unit 75 controls the projector 4 to project the output information acquired by the output information acquisition unit 74 into the vehicle interior 21.
  • specific examples of each process performed by the first projection section 75a, second projection section 75b, and trajectory projection section 75c of the projector control section 75 will be described using FIGS. 3 to 7.
  • a plurality of passengers 100 including a first passenger 101 and a second passenger 102 are on board the vehicle 2, and the first passenger 101 sitting in the front passenger seat is the transmission source, and Regarding the case where the transmission destination is the second occupant 102 sitting on the right side, and information to be shared between the first occupant 101 and the second occupant 102 is transmitted from the first occupant 101 as the transmission source to the second occupant 102 as the destination. It shows.
  • FIG. 3 is a diagram illustrating an example of a state in which projection information is displayed in the primary projection area of the transmission source in the projection system according to the first embodiment.
  • the projection information PD is displayed on the dashboard 23 for presenting the projection information PD to the first occupant 101 who is the transmission source.
  • information such as a search screen of a search site on the Internet 90 is projected, and the first occupant 101 performs a swipe operation or a tap operation on the projected information PD displayed on the dashboard 23. Perform the desired operation.
  • the non-contact sensor 3 measures these movements and transmits measurement information MD to the projection control device 6.
  • Projection information PD (for example, search result information obtained from the Internet 90) to be projected onto the primary projection area is obtained through the processing of the sensor information acquisition section 71, state analysis section 72, processing operation identification section 73, and output information acquisition section 74 described above. Then, the first projection unit 75a of the projector control unit 75 controls the projector 4 to project the acquired projection information PD onto the dashboard 23, which is the primary projection area. In this way, the first occupant 101 can obtain desired information and display it on the dashboard 23.
  • the process executed by the first projection unit 75a corresponds to an example of the primary projection process.
  • FIG. 4 is a diagram showing an example of a state in which projection information for selecting a destination is displayed in the projection system according to the first embodiment.
  • the first occupant 101 shares the projection information PD acquired in FIG. 3 with the second occupant 102
  • the first occupant 101 performs an appropriate operation (for example, tapping a share button, a predetermined gesture for sharing processing, etc.: a predetermined action).
  • the unit 75a controls the projector 4 to project the destination designation screen onto the dashboard 23.
  • Information indicating the seat arrangement in the vehicle compartment 21 is displayed on the destination designation screen, and the first occupant 101 is seated in the seat arrangement corresponding to the destination (in the case of FIG.
  • the second occupant 102 is seated diagonally to the right).
  • a list of occupants 100 may be displayed on the destination designation screen, and the occupant 100 to be the destination may be selected from the list.
  • This tap operation is transmitted to the projection control device 6 via the non-contact sensor 3, and after being analyzed by the sensor information acquisition section 71 and the state analysis section 72, the processing operation specifying section 73 determines the selected seat arrangement. Identify the location information of the destination from the information.
  • the process in which the projection control device 6 receives the information selected on the destination designation screen corresponds to an example of the crew selection reception process.
  • FIG. 5 is a diagram showing an example of a state in which a trajectory display from a transmission source to a transmission destination is projected in the projection system according to the first embodiment. Based on the reception result on the destination designation screen in FIG. Output information is obtained.
  • the trajectory projection unit 75c of the projector control unit 75 controls the projector 4 to project the acquired trajectory display from the dashboard 23, which is the primary projection area, toward the periphery of the second occupant 102 sitting on the right side of the rear seat. do.
  • the peripheral area of the second occupant 102 includes an area where projection information PD to be presented to the second occupant 102 is projected as a secondary projection area.
  • the trajectory display extends from the dashboard 23, through the inner wall of the pillar 24 (A pillar and B pillar) and the window glass 26 on the left side of the first occupant 101, and from the left end over the seat 27 of the rear seat. The image is projected toward the second occupant 102.
  • the trajectory display can also be applied to the second passenger, for example, from the dashboard 23 to the floor 28, through the partition structure between the passenger seat and the driver's seat (for example, a center console, etc. (not shown in FIG. 5)).
  • the image may be projected toward the second occupant 102 or may be projected from the dashboard 23 through the pillar 24 and the ceiling 22 toward the second occupant 102 .
  • the process executed by the trajectory projection unit 75c corresponds to an example of trajectory projection processing.
  • the display mode of the trajectory display may be set as appropriate, such as a trajectory display consisting of a group of light spots, a line-shaped trajectory display, or an arrow-shaped trajectory display, for example.
  • the way the locus-shaped display lights up may be set as appropriate, such as a constantly lit display, a blinking display, a ripple display, or the like.
  • the locus-like display may be expressed such that the lighting speed or ripple interval increases as the distance from the source to the destination increases.
  • the information to be transmitted may itself be projected as if it were moving as a trajectory display.
  • the first projection unit 75a may stop projecting onto the primary projection area when starting projection of the trajectory display, may continue projection, or may continue projecting onto the primary projection area while projecting the trajectory display. It may also be possible to control the projection to stop.
  • the locus-like display may be a display mode in which the width direction dimension increases from the transmission source to the transmission destination.
  • FIG. 6 is a diagram showing an example of a state in which an alarm is displayed at a destination in the projection system according to the first embodiment.
  • the trajectory projection unit 75c is configured to project, for example, the headrest of the driver's seat, the back area of the seat, the thighs and arms of the second occupant 102, etc.
  • the projector 4 is controlled to project a light alarm onto a part of the body. It is desirable that the alarm be displayed in a manner that alerts the second occupant 102, such as flashing or vibration. Further, the projected alarm may display the information itself to be transmitted in a manner such as blinking or vibrating.
  • Whether the second occupant 102 is aware of the information transmission is determined by whether the second occupant 102 performs an instruction operation such as a predetermined gesture (predetermined action). For example, the second occupant 102 touches the trajectory display, touches the second display area, touches the alarm display if the alarm shown in FIG. It may be determined that the second occupant 102 is aware of the information transmission by measuring gestures such as pointing, touching a notice button, or notifying by voice using the non-contact sensor 3. After the trajectory display shown in FIG. 5 is projected, the alarm shown in FIG. 6 is projected until such a gesture of awareness is recognized.
  • a predetermined gesture predetermined action
  • the alarm process shown in FIG. 6 does not necessarily need to be executed. That is, if the second occupant 102 immediately performs a gesture of awareness as described above in response to the trajectory display of FIG. 5, and the gesture of awareness is recognized, the alarm process of FIG. 6 can be omitted.
  • FIG. 6 shows a state in which only an alarm is displayed
  • the projection information PD and trajectory of the dashboard 23 as shown in FIG. It may also be in a state where a state display is projected.
  • FIG. 7 is a diagram illustrating an example of a state in which information to be transmitted is projected onto a secondary projection area of a transmission destination in the projection system according to the first embodiment.
  • the process of recognizing this gesture of awareness corresponds to an example of the operation identification process.
  • the processing operation specifying unit 73 determines that notification by projecting information to the destination is valid.
  • the process of determining whether or not the notification by projection to the destination is valid corresponds to an example of the determination process.
  • the first projection unit 75a and the trajectory projection unit 75c stop projecting the projection information PD and the trajectory display of the dashboard 23 shown in FIG.
  • the second projection section 75b projects the thigh of the second occupant 102, which is the secondary projection area, and the plane placed on it.
  • the projector 4 is controlled to project the information transmitted from the transmission source onto a bag or the like (back of a vehicle seat or headrest).
  • the process executed by this second projection unit 75b corresponds to an example of secondary projection process. In this way, the second occupant 102 can refer to the information transmitted from the first occupant 101 and can share the information.
  • the speaker control unit 76 controls the speaker 5 to output sound information such as videos and music into the vehicle interior 21, and also projects an alarm such as the one described in FIG. 6, for example. However, if the second crew member 102 at the destination does not notice the information transmitted from the sender, a voice message (previously registered in the output information storage unit 82) is sent to the second crew member 102. The speaker 5 is controlled to issue an alarm using a voice such as.
  • the plurality of projectors 4 are disposed, for example, on the ceiling 22 of the vehicle interior 21 or on the side walls of the pillars 24 (A-pillar, B-pillar, C-pillar, D-pillar), and the first projection section 75a of the projector control section 75,
  • the second projection section 75b and the trajectory projection section 75c cooperate with each other to synchronize and execute the above-described primary projection processing, trajectory projection processing, and secondary projection processing.
  • the trajectory display is projected and displayed from the primary projection area to the secondary projection area
  • the information projected in the primary projection area of the transmission source is The passenger 100 at the destination can easily recognize that the information has been transmitted to the secondary projection area at the destination.
  • first projection section 75a, second projection section 75b, and trajectory projection section 75c of the projector control section 75 cooperate with each other to synchronize and control the plurality of projectors 4, the projection onto the primary projection area, Projection to the secondary projection area and projection of the trajectory display from the primary projection area to the secondary projection area can be smoothly performed.
  • a trajectory display is projected from the vicinity of the transmission source occupant 100 (the first occupant 101 in FIGS. 3 to 7) to the vicinity of the transmission destination occupant 100 (the second occupant 102 in FIGS. 3 to 7).
  • the transmission source crew member 100 can designate a desired crew member 100 from among the other crew members 100 as the transmission destination of the information. I can do it.
  • the trajectory display indicating the flow of information transmission is displayed in a display mode in which the width direction dimension increases from the primary projection area to the secondary projection area, the information transmission is displayed intuitively and easily understandable for the occupant 100. can do.
  • the projection of the trajectory display and the projection of the alarm continue until the gesture of awareness by the destination occupant 100 is recognized, that is, until the projection of the trajectory display and the projection of the alarm are instructed to end.
  • This allows the destination crew member 100 to reliably recognize that the information has been transmitted.
  • the destination occupant 100 that is, the person who instructs the end of the projection of the trajectory display or the projection of the alarm, can indicate his/her intention to recognize the information transmission by means of a so-called gesture, thereby causing the trajectory display to end. or end the alarm projection.
  • the notification by projection to the secondary projection area is effective. It can be determined that it does not function or is not functioning. In that case, it is possible to take measures such as not projecting the aforementioned trajectory display in vain, or displaying a separate alarm.
  • the occupant 100 who has not given an instruction to end the trajectory display can be prompted to check the secondary projection area and make a gesture of awareness. can.
  • the occupant 100 who has not given an instruction to end the trajectory display is prompted to check the secondary projection area and make a gesture of awareness. I can do it.
  • the projection system 1 projects and displays the received information at a predetermined location in the vehicle interior 21 when the in-vehicle communication system receives information transmitted from a system outside the vehicle.
  • the movement of the received information from the predetermined location toward the projection area corresponding to each occupant can be visually recognized by projecting a trajectory display. Note that in this second embodiment, explanations that overlap with those in the first embodiment will be omitted.
  • FIG. 8 is a functional block diagram showing the configuration of a projection system according to the second embodiment.
  • the configuration shown in FIG. 8 differs from the configuration of FIG. 1 in the first embodiment in that the storage unit 80 further includes a registered information storage unit 83 and the processing operation specifying unit 73 is registered in the registered information storage unit 83.
  • the output information acquisition section 74 specifies a desired processing operation for the occupant 100 based on the information, and the output information acquisition section 74 uses a server outside the vehicle or vehicle-to-vehicle communication to perform an operation inside the vehicle interior 21 based on the information registered in the registered information storage section 83.
  • the objective is to obtain output information (hereinafter referred to as externally obtained information OD) to be projected onto the externally obtained information OD.
  • externally obtained information OD output information
  • the first projection unit 75a projects the externally acquired information OD in a primary projection area that is relatively easily visible to the occupant 100, such as the inner wall of the pillar 24 or the ceiling 22 (hereinafter referred to as a specific location). ), and when the externally acquired information OD is acquired, the projector 4 is controlled so that the first projection unit 75a projects and displays the externally acquired information OD on a primary projection area located at a specific location. do. Accordingly, when the externally acquired information OD is acquired, the trajectory projection unit 75c performs a process of projecting a trajectory display indicating the movement of information from the primary projection area located at a specific location toward the secondary projection area. , the second projection unit 75b controls the projector 4 to project and display the externally acquired information OD onto the secondary projection area.
  • the registration information storage unit 83 stores desired request information (more specifically, "When driving after entering city X, I would like to display shopping information for city X from a predetermined server in the passenger compartment 21"). (conditions such as region, category, keyword, etc.) are registered and set, and the vehicle 2 is running in that state.
  • this registration setting can be done in advance from a smartphone or computer before departure, but it can also be done in the passenger compartment 21, so that the first occupant 101 in the front passenger seat and the second occupant 102 on the right side of the rear seat can be registered.
  • This can be done by any crew member 100, including:
  • the request information also includes various request information such as local tourist information, information on gas stations, parking lots, restaurants, etc., weather information, traffic congestion information, accident information, and emergency disaster alerts. It will be done.
  • FIG. 9 is a diagram illustrating an example of a state in which externally acquired information is projected onto a primary projection area located at a specific location in the projection system according to the second embodiment.
  • the sensor information acquisition unit 71 acquires the position information of the vehicle 2 from a GPS sensor (not shown in FIG. 8) used in a navigation system, etc., and the position of the vehicle 2 is registered by the state analysis unit 72 and the processing operation identification unit 73. If it is determined that the registration settings of the information storage unit 83 are satisfied, that is, in the above example, the vehicle 2 is traveling in the X city area, so the necessary externally acquired information OD is first retrieved based on the request information.
  • the output information acquisition unit 74 acquires external acquisition information OD based on the conditions registered and set in the registration information storage unit 83.
  • the output information acquisition unit 74 acquires the shopping information of City X as the externally acquired information OD.
  • Such externally acquired information OD can be acquired from a server outside the vehicle by an on-vehicle communication system through appropriate communication (not shown) other than the Internet, such as the Internet 90 or vehicle-to-vehicle communication.
  • the projector 4 is controlled to project the externally acquired information OD onto the inner wall of the computer.
  • the processing by the first projection unit 75a corresponds to an example of primary projection processing.
  • FIG. 10 is a diagram showing an example of a state in which a trajectory display from a specific location to a destination is projected in the projection system according to the second embodiment.
  • the first occupant 101 specifies the destination by selecting the destination from the destination designation screen, and based on this, the trajectory projection unit 75c selects the destination from the primary projection area.
  • the first projection unit 75a projects the externally acquired information onto the primary projection area located at a specific location.
  • the projector 4 is configured such that when a predetermined period of time (for example, several seconds to several tens of seconds) has elapsed after projecting the OD, the trajectory projection unit 75c projects a trajectory display from the primary projection area to the secondary projection area.
  • trajectory projection unit 75c corresponds to an example of trajectory projection processing.
  • FIG. 11 is a diagram showing an example of a state in which an alarm is displayed on a destination in the projection system according to the second embodiment.
  • the trajectory projecting section 75c may be configured to, for example, The projector 4 is controlled to project a light alarm onto a part of the body such as the thigh or arm of the patient 102.
  • the alarm display method and display mode are the same as those described in the first embodiment.
  • the externally acquired information OD and trajectory display of the B pillar 24 as shown in FIG. It may be in a projected state.
  • FIG. 12 is a diagram illustrating an example of a state in which externally acquired information is projected onto the secondary projection area of the transmission destination in the projection system according to the second embodiment.
  • the first occupant 102 when the gesture of awareness performed by the second occupant 102 is recognized and it is determined that notification by projecting information to the transmission destination is effective, the first occupant 102
  • the projection unit 75a and the trajectory projection unit 75c stop projecting the externally acquired information OD and the trajectory display on the B-pillar 24 shown in FIG. 10, and also stop projecting the alarm shown in FIG.
  • the second projection section 75b projects the thigh of the second occupant 102, which is a secondary projection area, toward the second occupant 102.
  • the projector 4 is controlled to project the externally acquired information OD onto a bag or the like (the back of a vehicle seat or a headrest) having a flat surface placed thereon.
  • the method and manner of displaying the externally acquired information OD on the secondary projection area are the same as the method and manner of displaying the projection information PD on the secondary projection area described in the first embodiment. In this way, the second occupant 102 can refer to the externally acquired information OD.
  • the processing by the second projection unit 75b corresponds to an example of secondary projection processing.
  • a locus-like display is projected and displayed from the primary projection area located at a specific location to the secondary projection area around at least one occupant 100 at the transmission destination.
  • a third embodiment of the present invention will be described with reference to the drawings. Similar to the projection system 1 in the second embodiment, when the in-vehicle communication system receives information transmitted from a system outside the vehicle, the projection system 1 according to the third embodiment transmits the received information to the vehicle interior. 21, and the state in which the received information is moving from the predetermined location toward the projection area corresponding to the occupant can be visually recognized by projecting a trajectory display. However, here, the externally acquired information OD is particularly transmitted to a plurality of occupants 100. Note that in this third embodiment, explanations that overlap with those of the first embodiment or the second embodiment will be omitted.
  • the registration information storage unit 83 stores, for example, a message such as "When driving after entering city X, I would like to display shopping information for city X from a predetermined server in the vehicle interior 21.” It is assumed that desired request information such as "" is registered and set.
  • FIG. 13 is a diagram illustrating an example of a state in which externally acquired information is projected onto a primary projection area located at a specific location in the projection system according to the third embodiment.
  • the output information acquisition unit 74 displays the registered information storage unit 83. Necessary externally acquired information OD (in the above example, shopping information for city X) is acquired based on the request information registered and set in . As shown in FIG.
  • the first projection unit 75a of the projector control unit 75 externally acquires a primary projection area located on the inner wall of the A-pillar 24 and the inner wall of the B-pillar 24 on the left side of the vehicle interior 21, which are specific locations.
  • the projector 4 is controlled to project the information OD.
  • the processing by the first projection unit 75a corresponds to an example of primary projection processing.
  • the registration information storage unit 83 information regarding the seat arrangement of the occupant 100 who desires the result of the request is registered and set together with the request information, and the first projection unit 75a is configured to display appropriate information according to the seat arrangement. A primary projection area is identified and externally acquired information OD is projected. In the case of FIG.
  • a on the left side of the vehicle interior 21, which is a specific location as the primary projection area, is The inner wall of pillar 24 and the inner wall of B-pillar 24 are specified. That is, for example, if the first occupant 101 in the passenger seat is the only occupant 100 who desires the externally acquired information OD, the first projection section 75a will project onto the inner wall of the A-pillar 24 on the left side of the vehicle interior 21 as the primary projection area.
  • the externally acquired information OD is projected and displayed on the inner wall of the A-pillar 24.
  • the first projection section 75a will project the B-pillar 24 on the left side of the vehicle interior 21 as the primary projection area. Only the inner wall is identified, and the externally acquired information OD is projected and displayed on the inner wall of the B-pillar 24.
  • FIG. 14 is a diagram showing an example of a state in which a trajectory display from a specific location to a destination is projected in the projection system according to the third embodiment.
  • the first projection unit 75a projects the externally acquired information OD onto the primary projection area located at a specific location, and then When a predetermined period of time has elapsed, the trajectory projection unit 75c controls the projector 4 to project a trajectory display from the primary projection area to the secondary projection area.
  • the trajectory display is projected toward the secondary projection area corresponding to each of the plurality of occupants 100. That is, as shown in FIG.
  • trajectory projection unit 75c corresponds to an example of trajectory projection processing.
  • FIG. 15 is a diagram showing an example of a state in which an alarm is displayed on a destination in the projection system according to the third embodiment.
  • the trajectory projection unit 75c projects an alarm to make the first occupant 101 and the second occupant 102 aware that information is being transmitted from outside the vehicle. Display.
  • the second occupant 102 for example, the headrest of the driver's seat, the back area of the seat, the thighs and arms of the second occupant 102, etc.
  • the trajectory projection unit 75c controls the projector 4 so as to project a light alarm on a portion.
  • a light alarm is projected on a predetermined location on the dashboard 23 (for example, a location that does not overlap with the trajectory display) or on a part of the body such as the thigh or arm of the first occupant 101.
  • the trajectory projection unit 75c controls the projector 4 so as to do so.
  • the alarm display method and display mode are the same as those described in the first embodiment or the second embodiment.
  • the A-pillar 24 and the like shown in FIG. The externally acquired information OD of the B-pillar 24 and the respective trajectory displays may be projected.
  • the alarm display here may be displayed to all the occupants 100, or may be displayed only to those occupants 100 who have not made the gesture of awareness.
  • FIG. 16 is a diagram illustrating an example of a state in which externally acquired information is projected onto the secondary projection area of the transmission destination in the projection system according to the third embodiment.
  • the gesture of awareness made by the first occupant 101 and the second occupant 102 is recognized, and the notification by projecting the information to the destination is effective.
  • the first projection unit 75a and the trajectory projection unit 75c stop projecting the externally acquired information OD of the A-pillar 24 and the B-pillar 24 shown in FIG. 14 and the respective trajectory-like displays.
  • the projection of the alarm shown in FIG. 15 is stopped.
  • the second projection section 75b which is a secondary projection area, is directed toward the first occupant 101.
  • the projector 4 is controlled to project the externally acquired information OD onto the dashboard 23, and the thigh of the second occupant 102, which is a secondary projection area, and the plane placed thereon are projected toward the second occupant 102.
  • the projector 4 is controlled to project the externally acquired information OD onto a bag or the like (back of a vehicle seat or headrest).
  • the display method and display mode of the externally acquired information OD on the secondary projection area are the same as those of the projection information PD and externally acquired information OD on the secondary projection area described in the first embodiment or the second embodiment.
  • the display method and display mode are the same.
  • the first occupant 101 and the second occupant 102 can refer to the common externally acquired information OD.
  • the processing by the second projection unit 75b corresponds to an example of secondary projection processing.
  • common information does not necessarily need to be simultaneously projected on the secondary projection area corresponding to each occupant 100, and request information (registered information storage unit 83 (registered and set individually for each occupant 100), different information may be projected at different timings.
  • a trajectory display is projected and displayed from the primary projection area located at a specific location to the secondary projection area around the plurality of occupants 100 as transmission destinations.
  • the state analysis unit 72 analyzes the movements of the hands and fingers of the occupant 100, but in projection systems according to other embodiments, the state analysis unit 72 analyzes the posture of the occupant 100 (e.g. , the state of sitting in the seat or the state of sleeping with the seat reclined), the direction of the face (for example, facing forward, facing outside the vehicle 2, looking down, etc.), the direction of the line of sight (for example, (looking at the direction of travel of the vehicle 2, looking at the scenery outside the vehicle 2, closing the eyes, etc.) may be analyzed. Based on the results of the state analysis section 72 analyzing these states, the processing operation specifying section 73 determines whether notification by projecting information to the destination is valid. The processing of this processing operation specifying unit 73 corresponds to an example of the determination processing.
  • the trajectory display is performed for the occupant 100. It can be determined that the notification of information transmission is not functioning effectively or is not functioning. Furthermore, if the person's face is facing outside the vehicle 2 and the line of sight is looking at the scenery outside the vehicle 2, there is a high possibility that the person is looking away, and here too, the person is facing away from the vehicle 2. It can be determined that the notification of information transmission using the trajectory display is not functioning effectively or is not functioning.
  • the output information acquisition unit 74 acquires output audio corresponding to those conditions, and the speaker control unit 76 issues an alarm using the output audio. Controls the speaker 5. By doing so, it becomes possible to wake up the sleeping occupant 100 or alert the occupant 100 who is looking away, thereby reliably notifying the information transmission.
  • the trajectory projection unit 75c and the speaker control unit 76 may vary the projected trajectory display, the alarm display mode, and the output audio output mode depending on the state of the occupant 100 analyzed by the state analysis unit 72. . For example, if the occupant 100's eyes are closed and his or her face is down, there is a high probability that he or she is sleeping, so controls such as increasing the brightness of the projected light or increasing the volume of the output audio may be performed. By doing so, the occupant 100 may be made aware. Furthermore, if the occupant 100 is awake and only looking away, the trajectory display and alarm are relatively easy to notice, so control may be performed such as lowering the brightness.
  • the locus-like display in the first embodiment passes from the dashboard 23 to the inner wall of the pillar 24 on the left side of the first occupant 101 and the glass surface of the window glass 26, and from the left end to the top of the seat 27 of the rear seat. It is projected along a path toward the passenger 102.
  • Other routes include a route projected from the dashboard 23 through the floor 28 and the partitioned structure between the passenger seat and the driver's seat toward the second occupant 102, and a route projected from the dashboard 23 through the ceiling 22 to the second passenger seat.
  • the trajectory projection unit 75c selects an appropriate path from among these paths according to the environment inside the vehicle interior 21. The selection may be made by calculating.
  • the trajectory display be projected so as not to overlap the occupant 100, and in particular it is desirable that the trajectory display be controlled so that the light of the projector 4 is not directly irradiated into the eyes of the occupant 100. That is, the condition analysis section 72 analyzes the condition inside the vehicle interior 21, such as the number of passengers 100 on board the vehicle 2, their arrangement, size (face position), etc., and the trajectory projection section 75c uses the analysis results. An appropriate path for projecting the locus-like display is selected based on the trajectory. By doing so, it is possible to prevent the occupant 100 from being directly irradiated with the projection light and making the occupant 100 feel uncomfortable.
  • the dash A trajectory display may be projected from the board 23 through the inner wall of the A-pillar 24 on the left side of the first occupant 101 and the glass surface of the window glass 26, and from the inner wall of the B-pillar 24 on the left side toward the second occupant 102.
  • a trajectory display may be projected from the board 23 to the floor 28, through the partition structure between the passenger seat and the driver's seat, toward the second passenger 102, or from the dashboard 23 through the ceiling 22 to the passenger seat.
  • a trajectory display may be projected towards the back side of the headrest.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

情報の受け手側において情報が伝達されたことを容易に認識できる投影システムを提供する。 車両２の車室２１に設けられたプロジェクタ４と、プロジェクタ４を制御して所望の表示を行う表示制御装置６と、を有する投影システム１であって、表示制御装置６の制御部７０は、取得された所定情報を、車室２１の所定の１次投影領域に対しプロジェクタ４により投影し表示させる１次投影処理と、１次投影処理による前記所定情報の表示後、１次投影領域から車室２１の所定の２次投影領域へ向かう態様の軌跡状表示をプロジェクタ４により行わせる軌跡投影処理と、軌跡投影処理による軌跡状表示の実行後、２次投影領域に対しプロジェクタ４により所定情報を投影し表示させる２次投影処理と、を実行する。

Description

投影システム
　本発明は、自動車等の車両の室内において所望の表示を行う投影システムに関するものである。
　従来、例えば特許文献１に記載の車内会話支援装置が知られている。この支援装置では、後部座席の乗員が発声した音声を集音部で集音し、運転席や助手席のドアに設けたスピーカーから出力することで、後部座席から運転席又は助手席への情報の伝達が行われる。
特開２０２１－９２３４号公報
　例えば、上記従来技術のような音声による車内での情報の伝達に代え、例えば投影による視覚的な表示により情報の伝達を行うことが考えられる。しかしながらこの場合、送り手から伝達された情報を単に受け手側において表示するだけでは、受け手側において情報が伝達されたことを認識しにくいという問題点があった。
　そこで、本発明は、上記問題点に鑑みてなされたものであり、情報の受け手側において情報が伝達されたことを容易に認識できる投影システムを提供することを目的とする。
　本発明は、車両２の室内２１に設けられた投影部４と、前記投影部４を制御して所望の表示を行う制御部７０と、を有する投影システム１であって、前記制御部７０は、取得された所定情報を、前記室内２１の所定の１次投影領域に対し前記投影部４により投影し表示させる１次投影処理と、前記１次投影処理による前記所定情報の表示後、前記１次投影領域から前記室内２１の所定の２次投影領域へ向かう態様の軌跡状表示を前記投影部４により行わせる軌跡投影処理と、前記軌跡投影処理による前記軌跡状表示の実行後、前記２次投影領域に対し前記投影部により前記所定情報を投影し表示させる２次投影処理と、を実行することを特徴とする。
　本発明によれば、１次投影領域から２次投影領域まで軌跡状表示が投影されて表示されるので、１次投影領域で投影された情報が、受け手である２次投影領域へと伝達されたことを容易に受け手側において認識することができる。
本発明の第１の実施形態に係る投影システムの構成を示す機能ブロック図。 第１の実施形態に係る投影システムが搭載された車両内部の模式図。 第１の実施形態に係る投影システムにおいて送信元の１次投影領域に投影情報が表示されている状態の一例を示す図。 第１の実施形態に係る投影システムにおいて送信先を選択する投影情報が表示されている状態の一例を示す図。 第１の実施形態に係る投影システムにおいて送信元から送信先への軌跡状表示が投影されている状態の一例を示す図。 第１の実施形態に係る投影システムにおいて送信先にアラーム表示している状態の一例を示す図。 第１の実施形態に係る投影システムにおいて送信先の２次投影領域に送信対象となる情報が投影されている状態の一例を示す図。 本発明の第２の実施形態に係る投影システムの構成を示す機能ブロック図。 第２の実施形態に係る投影システムにおいて特定箇所に位置する１次投影領域に外部取得情報が投影されている状態の一例を示す図。 第２の実施形態に係る投影システムにおいて特定箇所から送信先への軌跡状表示が投影されている状態の一例を示す図。 第２の実施形態に係る投影システムにおいて送信先にアラーム表示している状態の一例を示す図。 第２の実施形態に係る投影システムにおいて送信先の２次投影領域に外部取得情報が投影されている状態の一例を示す図。 本発明の第３の実施形態に係る投影システムにおいて特定箇所に位置する一次投影領域に外部取得情報が投影されている状態の一例を示す図。 第３の実施形態に係る投影システムにおいて特定箇所から送信先への軌跡状表示が投影されている状態の一例を示す図。 第３の実施形態に係る投影システムにおいて送信先にアラーム表示している状態の一例を示す図。 第３の実施形態に係る投影システムにおいて送信先の２次投影領域に外部取得情報が投影されている状態の一例を示す図。
（本発明の第１の実施形態）
　本発明の第１の実施形態を、図面を参照しつつ説明する。第１の実施形態に係る投影システムは、例えば車両の車室内において情報の送信元から送信先に向かって当該情報が移動している状態を軌跡状表示を投影することで視覚的に認識できるものである。
　図１は、第１の実施形態に係る投影システムの構成を示す機能ブロック図、図２は、第１の実施形態に係る投影システムが搭載された車両内部の模式図である。投影システム１は、車両２の車室２１における計測対象を計測する非接触式センサ３と、車室２１内に設けられ、当該車室２１の所定箇所に投影情報ＰＤを投影する投影部としての複数のプロジェクタ４と、車室２１内に音を出力する発声部としてのスピーカー５と、非接触式センサ３から取得した計測情報ＭＤに基づいてプロジェクタ４やスピーカー５を制御する投影制御装置６とを備える。
　非接触式センサ３は、例えば可視光カメラ、赤外線カメラ、ＴＯＦ（Time of Flight）カメラ、ミリ波センサ等から構成される。非接触式センサ３の計測対象は、車両２に搭乗している乗員１００やプロジェクタ４の投影により車室２１の所定箇所に表示されている投影情報ＰＤであり、それらの二次元情報又は三次元情報が計測される。例えば図２において、非接触式センサ３は車両２の天井（ルーフ）２２に設置され、ダッシュボード２３に表示されている投影情報ＰＤや当該投影情報ＰＤ上での乗員１００の手の動きを計測する。
　なお、非接触式センサ３が計測する計測領域は、予め設定された固定領域でもよいし、乗員１００の動きに応じた可変領域であってもよい。具体的には、例えば固定領域であれば、後述するようなプロジェクタ４が投影情報ＰＤを表示する領域（図２においては助手席側のダッシュボード２３の表面に相当）等を計測領域としてもよい。また、例えば可変領域であれば、乗員１００の手の形状を画像認識により検出し、その動きに合わせて手が含まれる領域を非接触式センサ３の計測領域としてもよい。
　プロジェクタ４は、投影部の一例としての構成であり、例えば液晶デバイス、デジタルミラーデバイス等を利用した公知のプロジェクタを用いることができる。図２においては、プロジェクタ４は車両２の天井２２に設置されているが、これ以外にも車室２１内のピラー２４（Ａ（フロント）ピラー、Ｂ（センター）ピラー、Ｃ（リア）ピラー、Ｄ（リア）ピラー）やドア２５の内壁など適宜の箇所に複数設置されてもよい。プロジェクタ４は、投影制御装置６の制御の下、車両２の車室２１における予め設定された所定箇所に投影情報ＰＤをプロジェクタ画像として投影し表示する。投影情報ＰＤが表示される所定箇所としては、車室２１の天井２２、ダッシュボード２３、ピラー２４やドア２５などの内壁、窓ガラス２６のガラス面、シート２７、床２８など車室２１内の様々な箇所が対象となる。また、必要に応じて乗員１００の体の表面に投影情報ＰＤが投影されるようにしてもよい。投影情報ＰＤは、これらの各所に存在する物体表面に対して投影して表示される。
　なお、このとき、投影情報ＰＤの視認性を向上させるために、投影情報ＰＤが投影される各所に存在する物体表面の色を投影領域の範囲内で単色化するような波長の光（例えば、物体表面の色と混色することで投影領域全体が白、黒、グレーなどに単色化されるような関係にある波長の光）を投影情報ＰＤに含むようにしてもよい。
　スピーカー５は、発声部の一例としての構成であり、車室２１に音情報を出力する。このスピーカー５は指向性を有するものであるのが好ましいが、一般的に車両２に搭載されているスピーカーであってもよい。スピーカー５は、ナビゲーションシステム（図１には図示しない）の音声や、各コンテンツ（音楽、テレビ、映画、ゲームなど）の音を車室２１に出力すると共に、後述するようなアラーム報知を行う。スピーカー５は、例えば図２においては、助手席及び運転席のドア２５の内側に設置されているが、車両２に搭乗する各乗員１００用のスピーカー５を個別に備える構成であってもよい。
　投影制御装置６は、投影システム１の全体動作を制御するコンピュータからなり、ＣＰＵ（Central Processing Unit）等から構成される制御部７０と、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等のメモリやハードディスク（Hard Disk）から構成される記憶部８０とを備える。
　制御部７０は、非接触式センサ３が計測した計測情報ＭＤを取得するセンサ情報取得部７１と、取得した計測情報ＭＤに基づいて画像認識により計測対象の状態を解析する状態解析部７２と、記憶部８０の処理動作記憶部８１に記憶されている計測対象の状態に応じた処理動作の情報、及び状態解析部７２で解析された計測対象の状態から実行する処理動作を特定する処理動作特定部７３と、特定された処理動作に必要な情報を記憶部８０の出力情報記憶部８２やインターネット９０（又は必要に応じてナビゲーションシステムなどの車載システムや車車間通信などのインターネット以外の通信システム）から取得する出力情報取得部７４と、出力情報取得部７４が取得した各情報を投影情報ＰＤとして表示するために複数のプロジェクタ４を制御するプロジェクタ制御部７５と、出力情報取得部７４が取得した情報のうちの音に関する情報を車室２１に出力するようにスピーカー５を制御するスピーカー制御部７６とを備える。
　また、プロジェクタ制御部７５は、情報の送信元に対する投影情報ＰＤを１次投影領域に投影するようプロジェクタ４を制御する第１投影部７５ａと、情報の送信先に対する投影情報ＰＤを２次投影領域に投影するようプロジェクタ４を制御する第２投影部７５ｂと、１次投影領域から２次投影領域に向かう態様の軌跡状表示を投影するようプロジェクタ４を制御する軌跡投影部７５ｃとを備える。
　記憶部８０は、計測対象の状態（例えば、投影情報ＰＤ上で指をスワイプしている、投影情報ＰＤ上で指をタップしている等）に対応する処理動作（例えば、次ページの投影情報ＰＤを表示する（現在の投影情報ＰＤと異なる別の投影情報ＰＤへ切り替えて表示する）、タップ位置の投影情報ＰＤの内容を決定する等）が記憶される処理動作記憶部８１と、投影情報ＰＤとして表示可能なテレビ番組、映画、ゲーム、音楽等の様々なコンテンツ情報や、その他軌跡状表示やアラーム表示に関する情報など乗員１００に提示する情報等が記憶される出力情報記憶部８２と、を備える。
　以下、制御部７０における各処理部の処理内容について詳細に説明する。センサ情報取得部７１は、非接触式センサ３が所定の検出周期で計測した計測情報ＭＤを受信し、状態解析部７２に渡す。状態解析部７２は、まず計測情報ＭＤに計測対象が含まれているかどうかを画像認識により判定する。この画像認識の手法は任意であり、例えばパターンマッチング、ＨＯＧ（Histogram of Oriented Gradients）、ＳＩＦＴ（Scale-Invariant Feature Transform）、ＬＢＰ（Local Binary Pattern）、Ｈａａｒ－Ｌｉｋｅなどの公知の特徴点算出手法を用いて実行される。
　計測情報ＭＤに計測対象である乗員１００の手が含まれていると判定した場合は、認識した手や指の動きを解析する。例えば、指先が横方向又は縦方向に連続して移動した場合は、乗員１００がスワイプ動作を行っていると推定することができ、指先が高さ方向に上下動した場合はタップ動作を行っていると推定することが可能である。このとき、非接触式センサ３が計測する計測情報ＭＤには、プロジェクタ４が投影して表示している投影情報ＰＤも含まれていることから、投影情報ＰＤが表示されている領域のいずれの位置で乗員１００の指先が動作したかを併せて解析する。状態解析部７２によるこれらの解析手法は任意であり、例えばＮＮ法（Nearest Neighbor algorithm）、ｋ－ＮＮ法（k-Nearest Neighbor algorithm）、パターンマッチング法などの公知の手法を用いることができる。なお、特定される手や指の動きとしては、上述したスワイプ、タップ以外に、例えばスクロール、ピンチイン、ピンチアウト、ロングタップ、フリック、ドラッグ等の動作が含まれる。
　処理動作特定部７３は、状態解析部７２が解析した計測対象の状態に基づいて、実行する処理動作に関する情報を処理動作記憶部８１から抽出して特定する。例えば状態解析部７２が、乗員１００がスワイプ動作を行ったと推定した場合には現在投影している投影情報ＰＤの次ページの情報に切り替える、乗員１００がタップ動作を行ったと推定した場合にはタップした指先の座標に表示されている処理内容を決定（例えば、送信先を決定、送信先に送りたい情報を決定）するといった処理動作が特定される。
　出力情報取得部７４は、処理動作特定部７３で特定された処理動作で使用する出力情報を取得する。例えば、投影情報ＰＤを次ページの情報に切り替える場合には、当該切り替えて表示される次ページの投影情報ＰＤを出力情報記憶部８２やインターネット９０（キャッシュに保存されている情報でもよい）から取得する。送信元から送信先に情報伝達する処理を行う場合は、送信元から送信先への軌跡状表示の情報を出力情報記憶部８２から取得する。乗員１００に対して後述するようなアラームを表示する場合は、アラームとして出力する音や光の情報を出力情報記憶部８２から取得する。
　プロジェクタ制御部７５は、出力情報取得部７４が取得した出力情報をプロジェクタ４を制御して車室２１内に投影させる。ここで、プロジェクタ制御部７５の第１投影部７５ａ、第２投影部７５ｂ及び軌跡投影部７５ｃが行う各処理の具体例を図３から図７を用いて説明する。図３から図７に示す処理においては、車両２に第１乗員１０１及び第２乗員１０２を含む複数の乗員１００が搭乗しており、助手席に座る第１乗員１０１を送信元とし、後部座席右側に座る第２乗員１０２を送信先とし、第１乗員１０１及び第２乗員１０２で共有したい情報を送信元である第１乗員１０１から送信先である第２乗員１０２に対して送信する場合について示している。
　図３は、第１の実施形態に係る投影システムにおいて送信元の１次投影領域に投影情報が表示されている状態の一例を示す図である。送信元である第１乗員１０１に向けて投影情報ＰＤを提示するためのダッシュボード２３に投影情報ＰＤが表示されている。このダッシュボード２３には、例えばインターネット９０の検索サイトの検索画面のような情報が投影されており、第１乗員１０１はダッシュボード２３に表示されている投影情報ＰＤに対してスワイプ動作やタップ動作といった所望の操作を行う。非接触式センサ３はそれらの動作を計測して計測情報ＭＤを投影制御装置６に送信する。上述したセンサ情報取得部７１、状態解析部７２、処理動作特定部７３及び出力情報取得部７４の処理により１次投影領域に投影する投影情報ＰＤ（例えばインターネット９０から取得した検索結果情報）が取得され、プロジェクタ制御部７５の第１投影部７５ａが、取得した投影情報ＰＤを１次投影領域であるダッシュボード２３に投影するようにプロジェクタ４を制御する。このようにして、第１乗員１０１は所望の情報を取得してダッシュボード２３に表示させることができる。この第１投影部７５ａが実行する処理が１次投影処理の一例に相当する。
　図４は、第１の実施形態に係る投影システムにおいて送信先を選択する投影情報が表示されている状態の一例を示す図である。第１乗員１０１が、図３で取得した投影情報ＰＤを第２乗員１０２と共有する場合、適宜の操作（例えば共有ボタンのタップ、予め決まっている共有処理用のジェスチャー等：所定動作）を行うことで、上述したセンサ情報取得部７１、状態解析部７２、処理動作特定部７３及び出力情報取得部７４の処理により、図４に示すような送信先指定画面の情報が取得され、第１投影部７５ａが送信先指定画面をダッシュボード２３に投影するようにプロジェクタ４を制御する。送信先指定画面には車室２１内の座席配置を示す情報が表示されており、第１乗員１０１は送信先に対応する座席配置（図４の場合は第２乗員１０２が座っている右斜め後ろの位置に相当する座席）をタップして選択する。なお、これ以外にも、乗員１００のリストが送信先指定画面に一覧表示され、その中から送信先となる乗員１００を選択するようにしてもよい。このタップ動作は、非接触式センサ３を介して投影制御装置６に送信され、センサ情報取得部７１、状態解析部７２の解析処理を経て、処理動作特定部７３が、選択された座席配置の情報から送信先の位置情報を特定する。この送信先指定画面上で選択された情報を投影制御装置６で受け付ける処理が、乗員選択受付処理の一例に相当する。
　図５は、第１の実施形態に係る投影システムにおいて送信元から送信先への軌跡状表示が投影されている状態の一例を示す図である。図４における送信先指定画面での受け付け結果から、センサ情報取得部７１、状態解析部７２、処理動作特定部７３及び出力情報取得部７４の処理により、送信元から送信先に向かう軌跡状表示の出力情報が取得される。プロジェクタ制御部７５の軌跡投影部７５ｃは、１次投影領域であるダッシュボード２３から後部座席右側に座る第２乗員１０２の周辺部に向かって取得した軌跡状表示を投影するようにプロジェクタ４を制御する。第２乗員１０２の周辺部には、２次投影領域として第２乗員１０２に向けて提示する投影情報ＰＤが投影される領域が含まれており、例えば第２乗員１０２が所有している平面を有するバッグなどの所有物の表面や、第２乗員１０２の腿や腕の表面（車両のシート背面やヘッドレストなど）など投影情報ＰＤを視認しやすい領域である。軌跡状表示は、図５に示すように、ダッシュボード２３から第１乗員１０１の左側のピラー２４（Ａピラー及びＢピラー）内壁や窓ガラス２６を通り、後部座席のシート２７上を左端から第２乗員１０２に向かって投影される。軌跡状表示はこれ以外にも、例えばダッシュボード２３から床２８、助手席と運転席との間の区分構造（例えば、センターコンソール等（図５には図示しない））を通って、第２乗員１０２に向かって投影されてもよいし、ダッシュボード２３からピラー２４と天井２２を通って第２乗員１０２に向かって投影されてもよい。この軌跡投影部７５ｃが実行する処理が軌跡投影処理の一例に相当する。
　なお、軌跡状表示の表示態様は、例えば光スポット群からなる軌跡状表示、ライン状の軌跡状表示、矢印状の軌跡状表示など適宜設定できるようにしてもよい。また軌跡状表示の光り方は、常時点灯表示、点滅表示、波紋表示などを適宜設定できるようにしてもよい。軌跡状表示は、発信元から発信先に近づくに連れて点灯速度や波紋間隔が大きくなるように表現されてもよい。さらに、送信対象となる情報そのものが軌跡状表示として移動しているように投影されてもよい。第１投影部７５ａは、軌跡状表示の投影開始時には、１次投影領域への投影を停止しても良いし、投影を継続してもよいし、軌跡状表示の投影中に１次投影領域への投影を停止するように制御してもよい。さらに、軌跡状表示は、送信元から送信先に向かって幅方向寸法が大きくなる表示態様としてもよい。
　図６は、第１の実施形態に係る投影システムにおいて送信先にアラーム表示している状態の一例を示す図である。図５のような軌跡状表示がなされただけでは第２乗員１０２が送信元からの情報伝達になかなか気が付かない場合がある。そこで、図６においては、第２乗員１０２に情報伝達があることを気付かせるために、軌跡投影部７５ｃが、例えば運転席のヘッドレストや座席の裏側領域、第２乗員１０２の腿や腕などの体の一部に光によるアラームを投影するようにプロジェクタ４を制御する。アラームの表示態様としては点滅、振動など第２乗員１０２を注意喚起する態様が望ましい。また、投影されるアラームは、送信対象となっている情報自体を点滅、振動などの態様で表示するようにしてもよい。
　第２乗員１０２が情報伝達があることに気付いているかどうかは、予め決められたジェスチャー（所定動作）などの指示操作を第２乗員１０２が行ったかどうかで判断する。例えば、第２乗員１０２による、軌跡状表示をタッチする、第２表示領域をタッチする、図６のアラームが表示されている場合は当該アラーム表示をタッチする、指（所定部位）でＯＫサインを示す、気付きボタンをタッチする、音声で通知する等のジェスチャーを非接触式センサ３で計測することで、第２乗員１０２が情報伝達に気付いていると判断してもよい。図５の軌跡状表示の投影がなされてから、このような気付きのジェスチャーが認識されるまで図６のアラームが投影される。
　なお、図６に示すアラーム処理は必ずしも実行される必要はない。すなわち、図５の軌跡状表示に対して第２乗員１０２が直ちに上述したような気付きのジェスチャーを行い、当該気付きのジェスチャーが認識された場合には図６のアラーム処理は省略することができる。
　また、図６においては、アラームのみが表示された状態を示しているが、アラーム表示を行っている全期間又は一部の期間で、図５に示すようなダッシュボード２３の投影情報ＰＤ及び軌跡状表示が投影される状態であってもよい。
　図７は、第１の実施形態に係る投影システムにおいて送信先の２次投影領域に送信対象となる情報が投影されている状態の一例を示す図である。第２乗員１０２は、図５の軌跡状表示又は図６のアラームに気が付くと、上述したような気付きのジェスチャーをすることで非接触式センサ３を介して状態解析部７２により当該ジェスチャーが解析され認識される。この気付きのジェスチャーを認識する処理が操作識別処理の一例に相当する。当該気付きのジェスチャーが認識されると、処理動作特定部７３が、送信先への情報の投影による報知が有効な状態であると判定する。この送信先への投影による報知が有効な状態であるか否かを判定する処理が判定処理の一例に相当する。第１投影部７５ａや軌跡投影部７５ｃは、図５に示したダッシュボード２３の投影情報ＰＤや軌跡状表示の投影を停止すると共に、図６のアラームの投影を停止する。ダッシュボード２３の投影情報ＰＤ、軌跡状表示及びアラームの投影が停止されるのと同時に、第２投影部７５ｂが、２次投影領域である第２乗員１０２の腿やその上に載せた平面を有するバッグ等（車両シート背面やヘッドレスト）に対して、送信元から送信された情報を投影するようにプロジェクタ４を制御する。この第２投影部７５ｂが実行する処理が２次投影処理の一例に相当する。このようにして、第２乗員１０２は、第１乗員１０１から送信された情報を参照することが可能となり、情報共有することができる。
　図２に戻って、スピーカー制御部７６は、車室２１内に動画や音楽などの音情報を出力するようにスピーカー５を制御すると共に、例えば図６において説明したようなアラームが投影されているにも関わらず、送信元からの情報伝達に送信先の第２乗員１０２が一向に気が付かないような場合に、当該第２乗員１０２に対して音声メッセージ（予め出力情報記憶部８２に登録したもの）などの音声によるアラーム報知を行うようにスピーカー５を制御する。
　なお、複数のプロジェクタ４は、例えば車室２１の天井２２又はピラー２４（Ａピラー、Ｂピラー、Ｃピラー、Ｄピラー）側壁に配設されており、プロジェクタ制御部７５の第１投影部７５ａ、第２投影部７５ｂ及び軌跡投影部７５ｃが相互に連携することで、上述した１次投影処理、軌跡投影処理及び２次投影処理を同期させて実行する。
　このように、第１の実施形態に係る投影システムにおいては、１次投影領域から２次投影領域まで軌跡状表示が投影されて表示されるので、送信元の１次投影領域で投影された情報が、送信先の２次投影領域へと情報伝達されたことを送信先の乗員１００が容易に認識することができる。
　また、プロジェクタ制御部７５の第１投影部７５ａ、第２投影部７５ｂ及び軌跡投影部７５ｃが相互に連携することで複数のプロジェクタ４を同期させて制御するため、１次投影領域への投影、２次投影領域への投影、及び１次投影領域から２次投影領域への軌跡状表示の投影を円滑に行うことができる。
　さらに、車両２の車室２１内の天井２２、ダッシュボード２３、ピラー２４やドア２５などの内壁、窓ガラス２６のガラス面、シート２７、床２８、助手席と運転席との区分構造等を通過する態様で軌跡状表示の投影が行われるので、送信先の乗員１００が確実に情報伝達を認識することができる。
　さらにまた、送信元の乗員１００（図３から図７における第１乗員１０１）の周辺から送信先の乗員１００（図３から図７における第２乗員１０２）の周辺へと軌跡状表示が投影されることで、送信先の乗員１００において送信元の乗員１００側から情報伝達が行われたことを確実に認識することができる。
　さらにまた、適宜の操作を行うことで送信先指定画面を投影して表示することで、送信元の乗員１００は、他の乗員１００の中から所望の乗員１００を情報の送信先として指定することができる。
　さらにまた、情報伝達の流れを示す軌跡状表示を１次投影領域から２次投影領域に向かって幅方向寸法が大きくなる表示態様とした場合は、乗員１００にとって情報伝達を感覚的に分かりやすく表示することができる。
　さらにまた、送信先の乗員１００による気付きのジェスチャーが認識されるまで、すなわち軌跡状表示の投影やアラームの投影について終了が指示されるまで当該軌跡状表示の投影やアラームの投影を実行し続けることにより、情報伝達がされたことを送信先の乗員１００において確実に認識させることができる。特に、送信先の乗員１００、すなわち軌跡状表示の投影やアラームの投影について終了を指示する指示者は、情報伝達を認識したという意思表示を所謂ジェスチャー等によって行うことができ、これによって軌跡状表示やアラームの投影を終了させることができる。
　さらにまた、送信元の乗員１００による気付きのジェスチャーが未だ認識されない場合、すなわち軌跡状表示の投影について終了指示が未だなされていないような場合には、２次投影領域への投影による報知が有効に機能しない又は機能していないと判定することができる。そしてその場合は、前述の軌跡状表示の投影を無駄に行わないようにする、又は別途のアラームを表示する等の方策をとることができる。
　さらにまた、図６に示したようなアラーム表示を行うことにより、軌跡状表示の終了指示をしていない乗員１００に対し、２次投影領域を確認して気付きのジェスチャーを行うように促すことができる。
　さらにまた、スピーカー５を制御して音声によるアラーム報知を行うことにより、軌跡状表示の終了指示をしていない乗員１００に対し、２次投影領域を確認して気付きのジェスチャーを行うように促すことができる。
（本発明の第２の実施形態）
　本発明の第２の実施形態を、図面を参照しつつ説明する。第２の実施形態に係る投影システム１は、車外のシステムから送信された情報を車載の通信システムが受信した場合に、当該受信した情報を車室２１の所定箇所に投影して表示しつつ、当該所定箇所から各乗員に対応する投影領域に向かって、受信した情報が移動している状態を軌跡状表示を投影することで視覚的に認識できるものである。なお、この第２の実施形態において第１の実施形態と重複する説明は省略する。
　図８は、第２の実施形態に係る投影システムの構成を示す機能ブロック図である。図８に示す構成において第１の実施形態における図１の構成と異なるのは、記憶部８０がさらに登録情報記憶部８３を備え、処理動作特定部７３が登録情報記憶部８３に登録されている情報に基づいて乗員１００に対しての所望の処理動作を特定すると共に、出力情報取得部７４が登録情報記憶部８３に登録された情報に基づいて車外のサーバや車車間通信により車室２１内に投影する出力情報（以下、外部取得情報ＯＤという）を取得することである。また、第２の実施形態においては、第１投影部７５ａが外部取得情報ＯＤを投影する１次投影領域にピラー２４の内壁や天井２２など乗員１００が比較的視認しやすい箇所（以下、特定箇所という）を含んでおり、外部取得情報ＯＤを取得した場合には、第１投影部７５ａが特定箇所に位置する１次投影領域に外部取得情報ＯＤを投影して表示するようにプロジェクタ４を制御する。これに伴い、外部取得情報ＯＤを取得した場合は、軌跡投影部７５ｃが特定箇所に位置する１次投影領域から２次投影領域に向かって情報の移動を示す軌跡状表示を投影させる処理を行い、第２投影部７５ｂは２次投影領域に外部取得情報ＯＤを投影して表示するようにプロジェクタ４を制御する。
　以下、第２の実施形態における処理の具体例を図９から図１２を用いて説明する。登録情報記憶部８３には、例えば「Ｘ市街に入って走行した場合には、当該Ｘ市のショッピング情報を所定のサーバから車室２１内へ表示したい」といった所望のリクエスト情報（より具体的には、地域、カテゴリ、キーワードなどの条件）が登録設定されており、その状態で車両２が走行している。
　なお、この登録設定は、出発前にスマートフォンやパソコンなどから予め行っておくこともできるが、車室２１でも行うこともでき、助手席の第１乗員１０１や後部座席右側の第２乗員１０２を含むどの乗員１００によっても行うことができる。また、リクエスト情報として上記ショッピング情報以外にも、地域の観光情報、ガソリンスタンドや駐車場や飲食店などの情報、天気に関する情報、渋滞情報、事故情報、緊急災害速報などの様々なリクエスト情報が含まれる。
　図９は、第２の実施形態に係る投影システムにおいて特定箇所に位置する１次投影領域に外部取得情報が投影されている状態の一例を示す図である。センサ情報取得部７１がナビゲーションシステムなどで使用されるＧＰＳセンサ（図８には図示しない）から車両２の位置情報を取得し、状態解析部７２及び処理動作特定部７３により車両２の位置が登録情報記憶部８３の登録設定を満たすと判定した場合、すなわち、上記の例で言えば車両２がＸ市街地に入って走行しているため、リクエスト情報に基づいて必要な外部取得情報ＯＤを１次投影領域に投影すると判定した場合は、出力情報取得部７４が、登録情報記憶部８３に登録設定されている条件に基づき外部取得情報ＯＤを取得する。上記の例では、出力情報取得部７４がＸ市のショッピング情報を外部取得情報ＯＤとして取得する。このような外部取得情報ＯＤは、車載されている通信システムにより、車外のサーバからインターネット９０や車車間通信等のインターネット以外の適宜通信（図示しない）により取得可能である。出力情報取得部７４により外部取得情報ＯＤが取得されると、図９に示すように、プロジェクタ制御部７５の第１投影部７５ａが特定箇所の一つである車室２１の左側のＢピラー２４の内壁に当該外部取得情報ＯＤを投影するようにプロジェクタ４を制御する。この第１投影部７５ａの処理は１次投影処理の一例に相当する。
　図１０は、第２の実施形態に係る投影システムにおいて特定箇所から送信先への軌跡状表示が投影されている状態の一例を示す図である。第１の実施形態に係る投影システム１においては、第１乗員１０１が送信先指定画面から送信先を選択することで送信先を特定し、それに基づいて軌跡投影部７５ｃが１次投影領域から２次投影領域への軌跡状表示を投影させる処理を行ったが、第２の実施形態に係る投影システム１においては、第１投影部７５ａが、特定箇所に位置する１次投影領域に外部取得情報ＯＤを投影してから所定時間（例えば数秒から数十秒）が経過した場合に、軌跡投影部７５ｃが、当該１次投影領域から２次投影領域への軌跡状表示を投影するようにプロジェクタ４を制御する。図１０の場合は、Ｂピラー２４から後部座席のシート２７上を左端から第２乗員１０２に対応する２次投影領域に向かって軌跡状表示が投影されている。なお、軌跡状表示の表示方法や表示態様については、第１の実施形態において説明したもの同様である。この軌跡投影部７５ｃの処理は軌跡投影処理の一例に相当する。
　図１１は、第２の実施形態に係る投影システムにおいて送信先にアラーム表示している状態の一例を示す図である。第１の実施形態の場合と同様に、第２乗員１０２に車外からの情報伝達があることを気付かせるために、軌跡投影部７５ｃが、例えば運転席のヘッドレストや座席の裏側領域、第２乗員１０２の腿や腕などの体の一部に光によるアラームを投影するようにプロジェクタ４を制御する。なお、アラームの表示方法や表示態様については、第１の実施形態において説明したものと同様である。また、第１の実施形態における図６の場合と同様に、アラーム表示を行っている全期間又は一部の期間で、図１０に示すようなＢピラー２４の外部取得情報ＯＤ及び軌跡状表示が投影された状態であってもよい。
　図１２は、第２の実施形態に係る投影システムにおいて送信先の２次投影領域に外部取得情報が投影されている状態の一例を示す図である。ここでも第１の実施形態の場合と同様に、第２乗員１０２が行った気付きのジェスチャーが認識され、送信先への情報の投影による報知が有効な状態であると判定されると、第１投影部７５ａや軌跡投影部７５ｃは、図１０に示したＢピラー２４の外部取得情報ＯＤや軌跡状表示の投影を停止すると共に、図１１のアラームの投影を停止する。Ｂピラー２４の外部取得情報ＯＤ、軌跡状表示及びアラームの投影が停止されるのと同時に、第２投影部７５ｂが、第２乗員１０２に向けて２次投影領域である第２乗員１０２の腿やその上に載せた平面を有するバッグ等（車両シート背面やヘッドレスト）に対して、外部取得情報ＯＤを投影するようにプロジェクタ４を制御する。なお、２次投影領域への外部取得情報ＯＤの表示方法や表示態様については、第１の実施形態において説明した２次投影領域への投影情報ＰＤの表示方法や表示態様と同様である。このようにして、第２乗員１０２は、外部取得情報ＯＤを参照することが可能となる。この第２投影部７５ｂの処理は２次投影処理の一例に相当する。
　このように、第２の実施形態に係る投影システムにおいては、特定箇所に位置する１次投影領域から送信先の少なくとも一人の乗員１００の周辺の２次投影領域に軌跡状表示が投影されて表示されることで、送信先の乗員１００（図９から図１２における第２乗員１０２）において、上記特定箇所から外部取得情報ＯＤの情報伝達が行われたことを確実に認識することができる。
（本発明の第３の実施形態）
　本発明の第３の実施形態を、図面を参照しつつ説明する。第３の実施形態に係る投影システム１は、第２の実施形態における投影システム１と同様に車外のシステムから送信された情報を車載の通信システムが受信した場合に、当該受信した情報を車室２１の所定箇所に投影して表示しつつ、当該所定箇所から乗員に対応する投影領域に向かって受信した情報が移動している状態を軌跡状表示を投影することで視覚的に認識できるものであるが、ここでは特に複数の乗員１００に対して外部取得情報ＯＤが情報伝達されるものである。なお、この第３の実施形態において第１の実施形態又は第２の実施形態と重複する説明は省略する。
　以下、第３の実施形態における処理の具体例を図１３から図１６を用いて説明する。第２の実施形態の場合と同様に、登録情報記憶部８３には、例えば「Ｘ市街に入って走行した場合には、当該Ｘ市のショッピング情報を所定のサーバから車室２１内へ表示したい」といった所望のリクエスト情報が登録設定されているとする。
　図１３は、第３の実施形態に係る投影システムにおいて特定箇所に位置する１次投影領域に外部取得情報が投影されている状態の一例を示す図である。センサ情報取得部７１、状態解析部７２及び処理動作特定部７３の処理により、外部取得情報ＯＤを車室２１内に表示することが決定されると、出力情報取得部７４が登録情報記憶部８３に登録設定されているリクエスト情報に基づいて必要な外部取得情報ＯＤ（上記の例ではＸ市のショッピング情報）を取得する。プロジェクタ制御部７５の第１投影部７５ａは、図１３に示すように、特定箇所である車室２１の左側におけるＡピラー２４の内壁及びＢピラー２４の内壁に位置する１次投影領域に外部取得情報ＯＤを投影するようにプロジェクタ４を制御する。この第１投影部７５ａの処理は１次投影処理の一例に相当する。
　本実施形態においては、外部取得情報ＯＤを報知する報知対象となる対象乗員が車両２に２人搭乗しており、それぞれ助手席に座っている第１乗員１０１と後部座席右側に座っている第２乗員１０２である。登録情報記憶部８３には、リクエスト情報と共に当該リクエストの結果を所望している乗員１００の座席配置に関する情報が登録設定されており、第１投影部７５ａは、それらの座席配置に応じて適正な１次投影領域を特定し、外部取得情報ＯＤを投影する。図１３の場合は、助手席の第１乗員１０１と後部座席の第２乗員１０２が外部取得情報ＯＤを所望していることから、１次投影領域として特定箇所である車室２１の左側におけるＡピラー２４の内壁及びＢピラー２４の内壁が特定されている。すなわち、例えば外部取得情報ＯＤを所望している乗員１００が助手席の第１乗員１０１だけであれば、第１投影部７５ａは、１次投影領域として車室２１の左側におけるＡピラー２４の内壁のみを特定し、当該Ａピラー２４の内壁に外部取得情報ＯＤを投影して表示させる。また、例えば外部取得情報ＯＤを所望している乗員１００が後部座席右側の第２乗員１０２だけであれば、第１投影部７５ａは、１次投影領域として車室２１の左側におけるＢピラー２４の内壁のみを特定し、当該Ｂピラー２４の内壁に外部取得情報ＯＤを投影して表示させる。
　図１４は、第３の実施形態に係る投影システムにおいて特定箇所から送信先への軌跡状表示が投影されている状態の一例を示す図である。第３の実施形態に係る投影システム１においては、第２の実施形態の場合と同様に、第１投影部７５ａが、特定箇所に位置する１次投影領域に外部取得情報ＯＤを投影してから所定時間が経過した場合に、軌跡投影部７５ｃが、当該１次投影領域から２次投影領域への軌跡状表示を投影するようにプロジェクタ４を制御する。ただし、ここでは、複数の乗員１００にそれぞれ対応する２次投影領域に向かって軌跡状表示が投影される。すなわち、図１４に示すように、第１乗員１０１に対応する１次投影領域であるＡピラー２４の内壁からは、第１乗員１０１の２次投影領域であるダッシュボード２３に向かって軌跡状表示が投影される。一方で、第２乗員１０２に対応する１次投影領域であるＢピラー２４の内壁からは、第２乗員１０２の２次投影領域（第２乗員１０２が所有している平面を有するバッグなどの所有物の表面や、第２乗員１０２の腿や腕の表面（車両シート背面やヘッドレスト）など）に向かって軌跡状表示が投影される。なお、軌跡状表示の表示方法や表示態様については、第１の実施形態又は第２の実施形態において説明したもの同様である。この軌跡投影部７５ｃの処理は軌跡投影処理の一例に相当する。
　図１５は、第３の実施形態に係る投影システムにおいて送信先にアラーム表示している状態の一例を示す図である。第１の実施形態又は第２の実施形態の場合と同様に、第１乗員１０１及び第２乗員１０２に車外からの情報伝達があることを気付かせるために、軌跡投影部７５ｃがアラームを投影して表示する。図１４に示すように、第２乗員１０２に対しては、第２の実施形態の場合と同様に、例えば運転席のヘッドレストや座席の裏側領域、第２乗員１０２の腿や腕などの体の一部に光によるアラームを投影するように軌跡投影部７５ｃがプロジェクタ４を制御する。一方で、第１乗員１０１に対しては、ダッシュボード２３の所定箇所（例えば、軌跡状表示と重複しない箇所）、第１乗員１０１の腿や腕などの体の一部に光によるアラームを投影するように軌跡投影部７５ｃがプロジェクタ４を制御する。なお、アラームの表示方法や表示態様については、第１の実施形態又は第２の実施形態において説明したものと同様である。また、第１の実施形態における図６や第２の実施形態における図１１の場合と同様に、アラーム表示を行っている全期間又は一部の期間で、図１４に示すようなＡピラー２４及びＢピラー２４の外部取得情報ＯＤ、並びにそれぞれの軌跡状表示が投影された状態であってもよい。さらに、ここでのアラーム表示は、乗員１００全員に行ってもよいし、気付きのジェスチャーを行っていない乗員１００に対してのみ行ってもよい。
　図１６は、第３の実施形態に係る投影システムにおいて送信先の２次投影領域に外部取得情報が投影されている状態の一例を示す図である。ここでも第１の実施形態又は第２の実施形態の場合と同様に、第１乗員１０１及び第２乗員１０２が行った気付きのジェスチャーが認識され、送信先への情報の投影による報知が有効な状態であると判定されると、第１投影部７５ａや軌跡投影部７５ｃは、図１４に示したＡピラー２４及びＢピラー２４の外部取得情報ＯＤ、並びにそれぞれの軌跡状表示の投影を停止すると共に、図１５のアラームの投影を停止する。Ａピラー２４及びＢピラー２４の外部取得情報ＯＤ、並びにそれぞれの軌跡状表示の投影が停止されるのと同時に、第２投影部７５ｂが、第１乗員１０１に向けて、２次投影領域であるダッシュボード２３に対して外部取得情報ＯＤを投影するようにプロジェクタ４を制御すると共に、第２乗員１０２に向けて、２次投影領域である第２乗員１０２の腿やその上に載せた平面を有するバッグ等（車両シート背面やヘッドレスト）に対して、外部取得情報ＯＤを投影するようにプロジェクタ４を制御する。なお、２次投影領域への外部取得情報ＯＤの表示方法や表示態様については、第１の実施形態又は第２の実施形態において説明した２次投影領域への投影情報ＰＤや外部取得情報ＯＤの表示方法や表示態様と同様である。このようにして、第１乗員１０１及び第２乗員１０２は、共通の外部取得情報ＯＤを参照することが可能となる。この第２投影部７５ｂの処理は２次投影処理の一例に相当する。
　なお、第３の実施形態において、それぞれの乗員１００に対応する２次投影領域には必ずしも共通の情報が同時に投影される必要はなく、各乗員１００が所望しているリクエスト情報（登録情報記憶部８３に各乗員１００ごとに個別に登録設定済み）に応じて、異なるタイミングで異なる情報が投影されてもよい。
　このように、第３の実施形態に係る投影システムにおいては、特定箇所に位置する１次投影領域から送信先の複数の乗員１００の周辺の２次投影領域に軌跡状表示が投影されて表示されることで、送信先の乗員１００（図１３から図１６における第１乗員１０１及び第２乗員１０２）において、上記特定箇所から外部取得情報ＯＤの情報伝達が行われたことを確実に認識することができる。
（本発明のその他の実施形態）
　本発明のその他の実施形態について説明する。前記各実施形態において、状態解析部７２は、乗員１００の手や指の動きを解析する旨を説明したが、その他の実施形態に係る投影システムにおいては、それ以外にも乗員１００の姿勢（例えば、シートに座った状態又はシートを倒して寝ている状態等）、顔の向き（例えば、前方を向いている、車両２の外を向いている又は俯いている等）、視線方向（例えば、車両２の進行方向を見ている、車両２の外の景色を見ている又は目を閉じている等）を解析するようにしてもよい。状態解析部７２がこれらの状態を解析した結果に基づいて、処理動作特定部７３は送信先への情報の投影による報知が有効な状態であるかどうかを判定する。この処理動作特定部７３の処理が判定処理の一例に相当する。
　具体的には、シートを倒して寝ている状態、顔が俯いている状態、目が閉じている状態のときは乗員１００が寝ている可能性が高く、乗員１００に対して軌跡状表示による情報伝達の報知が有効に機能しない又は機能していないと判定できる。また、顔の向きが車両２の外を向いている状態、視線が車両２の外の景色を見ている状態である場合はよそ見をしている可能性が高く、ここでも乗員１００に対して軌跡状表示による情報伝達の報知が有効に機能しない又は機能していないと判定できる。このように軌跡状表示による情報伝達の報知が有効に機能しない又は機能していないと判定された場合は、軌跡状表示を無駄に行わないようにする、又は別途のアラーム表示を行うといった方策を取ることが可能となる。別途のアラーム表示を行うことで、例えば寝ている状態の乗員１００を起こしたり、よそ見やわき見をしている乗員１００に対して前方（すなわち、２次投影領域が視界に入る方向）を注視するように促すことができる。
　特に、緊急に情報伝達を報知する必要がある場合（例えば、送信元の乗員１００が緊急である旨の適宜のジェスチャーを行った場合）や、送信先の乗員１００がアラーム表示を行ってもなお寝ている、又はよそ見をしている状態である場合には、出力情報取得部７４がそれらの状態に対応する出力音声を取得し、スピーカー制御部７６が当該出力音声でアラーム報知を行うようにスピーカー５を制御する。そうすることで、寝ている乗員１００を起こして、又はよそ見している乗員１００に注意喚起して情報伝達を確実に報知することが可能となる。
　なお、軌跡投影部７５ｃやスピーカー制御部７６は、状態解析部７２が解析した乗員１００の状態に応じて、投影する軌跡状表示やアラームの表示態様、出力音声の出力態様を異ならせてもよい。例えば、乗員１００の目が閉じていて且つ顔が俯いているような場合はかなり高確率で寝ている状態であるため、投影する光の輝度を上げたり、出力音声の音量を上げるような制御を行うことで、乗員１００の気付きを促してもよい。また、乗員１００が起きている状態でよそ見をしているだけであれば、軌跡状表示やアラームに比較的気付きやすいため、輝度を下げるといった制御を行うようにしてもよい。
　次に、前記第１の実施形態における軌跡状表示は、ダッシュボード２３から第１乗員１０１の左側のピラー２４内壁や窓ガラス２６のガラス面を通り、後部座席のシート２７上を左端から第２乗員１０２に向かう経路で投影されている。その他の経路として、ダッシュボード２３から床２８、助手席と運転席との間の区分構造を通って、第２乗員１０２に向かって投影される経路や、ダッシュボード２３から天井２２を通り第２乗員１０２に向かって投影される経路について説明しているが、その他の実施形態に係る投影システムにおいては、軌跡投影部７５ｃがこれらの経路の中から車室２１内の環境に応じた適正な経路を演算して選択するようにしてもよい。
　軌跡状表示は、乗員１００に重ならないように投影されることが望ましく、特に乗員１００の目に直接プロジェクタ４の光が照射されないように制御されることが望ましい。すなわち、車両２に搭乗している乗員１００の人数、配置、大きさ（顔の位置）などの車室２１内の状態を状態解析部７２が解析し、軌跡投影部７５ｃは、その解析結果に基づいて軌跡状表示を投影する適正な経路を選択する。そうすることで、乗員１００に直接投影光が照射されて乗員１００が不快に感じることを防止することが可能となる。
　なお、例えば第１乗員１０１が助手席に座っており、第２乗員１０２が後部座席左側に座っているおり、第１乗員１０１から第２乗員１０２に情報伝達がなされるような場合は、ダッシュボード２３から第１乗員１０１の左側のＡピラー２４内壁や窓ガラス２６のガラス面を通り、左側のＢピラー２４内壁から第２乗員１０２に向かって軌跡状表示が投影されてもよいし、ダッシュボード２３から床２８、助手席と運転席との間の区分構造を通って、第２乗員１０２に向かって軌跡状表示が投影されてもよいし、ダッシュボード２３から天井２２を通って助手席ヘッドレスト裏側あたりに向かって軌跡状表示が投影されてもよい。
　また、透明な窓ガラス２６に軌跡状表示を投影する場合は、光が透過して視認が難しい場合がある。そのため、窓ガラス２６の内側には投影した光を反射する（又は投影した光により発光する）シートが貼付されることが望ましい。
　ＭＤ　　　　　　　計測情報
　ＯＤ　　　　　　　外部取得情報
　ＰＤ　　　　　　　投影情報（所定情報）
　１　　　　　　　　投影システム
　２　　　　　　　　車両
　３　　　　　　　　非接触式センサ
　４　　　　　　　　プロジェクタ（投影部）
　５　　　　　　　　スピーカー
　６　　　　　　　　投影制御装置
　２１　　　　　　　車室（室内）
　２２　　　　　　　天井
　２３　　　　　　　ダッシュボード
　２４　　　　　　　ピラー（Ａピラー、Ｂピラー、Ｃピラー、Ｄピラー）
　２５　　　　　　　ドア
　２６　　　　　　　窓ガラス
　２７　　　　　　　シート
　２８　　　　　　　床
　７０　　　　　　　制御部
　７１　　　　　　　センサ情報取得部
　７２　　　　　　　状態解析部
　７３　　　　　　　処理動作特定部
　７４　　　　　　　出力情報取得部
　７５　　　　　　　プロジェクタ制御部
　７５ａ　　　　　　第１投影部
　７５ｂ　　　　　　第２投影部
　７５ｃ　　　　　　軌跡投影部
　７６　　　　　　　スピーカー制御部
　８０　　　　　　　記憶部
　８１　　　　　　　処理動作記憶部
　８２　　　　　　　出力情報記憶部
　９０　　　　　　　インターネット
　１００　　　　　　乗員
　１０１　　　　　　第１乗員
　１０２　　　　　　第２乗員

Claims (12)

  1. 　車両の室内に設けられた投影部と、
    　前記投影部を制御して所望の表示を行う制御部と、
    を有する投影システムであって、
    　前記制御部は、
    　取得された所定情報を、前記室内の所定の１次投影領域に対し前記投影部により投影し表示させる１次投影処理と、
    　前記１次投影処理による前記所定情報の表示後、前記１次投影領域から前記室内の所定の２次投影領域へ向かう態様の軌跡状表示を前記投影部により行わせる軌跡投影処理と、
    　前記軌跡投影処理による前記軌跡状表示の実行後、前記２次投影領域に対し前記投影部により前記所定情報を投影し表示させる２次投影処理と、
    を実行することを特徴とする投影システム。
  2. 　前記投影部は、
    　前記車両の天井又は側壁に設けられた複数のプロジェクタであり、
    　前記制御部は、
    　前記複数のプロジェクタを互いに同期させつつ、前記１次投影処理、前記軌跡投影処理、及び前記２次投影処理を実行し、
    　前記１次投影処理において、前記１次投影領域に前記所定情報を表すプロジェクタ画像を投影させ、
    　前記２次投影処理において、前記２次投影領域に前記所定情報を表すプロジェクタ画像を投影させる
    ことを特徴とする請求項１記載の投影システム。
  3. 　前記制御部は、前記軌跡投影処理において、
    　前記１次投影領域から前記２次投影領域へ向かう途中の、前記車両の前記天井、若しくは、前記車両のうち前記側壁及びガラス面、若しくは、助手席と運転席との間の区分構造、を通過する態様の前記軌跡状表示を行わせる、
    ことを特徴とする請求項２記載の投影システム。
  4. 　前記車両は、第１乗員及び第２乗員を含む複数の乗員が搭乗可能に構成されており、
    　前記制御部は、
    　前記１次投影処理において、前記複数の乗員のうち前記第１乗員に対応する前記１次投影領域に投影を行わせ、
    　前記２次投影処理において、前記複数の乗員のうち前記第２乗員に対応する前記２次投影領域に投影を行わせ、
    　前記軌跡投影処理において、前記第１乗員に対応した前記１次投影領域から前記第２乗員に対応した前記２次投影領域へ向かう態様の前記軌跡状表示を行わせる、
    ことを特徴とする請求項２記載の投影システム。
  5. 　前記制御部は、さらに
    　前記複数の乗員のうちいずれの乗員を前記第２乗員として前記２次投影領域を投影させるかの選択を受け付ける乗員選択受付処理を実行し、
    　前記２次投影処理において、前記乗員選択受付処理の受け付け結果に対応する前記２次投影領域に投影を行わせ、
    　前記軌跡投影処理において、前記１次投影領域から前記乗員選択受付処理の前記受け付け結果に対応する前記２次投影領域へ向かう態様の前記軌跡状表示を行わせる、
    ことを特徴とする請求項４記載の投影システム。
  6. 　前記制御部は、
    　前記１次投影処理において、前記車両の特定箇所に位置する前記１次投影領域に投影を行わせ、
    　前記２次投影処理において、前記車両の少なくとも一人の乗員に対応する前記２次投影領域に投影を行わせ、
    　前記軌跡投影処理において、前記特定箇所に位置する前記１次投影領域から前記乗員に対応した前記２次投影領域へ向かう態様の前記軌跡状表示を行わせる、
    ことを特徴とする請求項２記載の投影システム。
  7. 　前記制御部は、前記軌跡投影処理において、
    　前記１次投影領域側から前記２次投影領域側へ向かって幅方向寸法が大きくなる態様の前記軌跡状表示を行わせる
    ことを特徴とする請求項２記載の投影システム。
  8. 　前記制御部は、さらに、
    　前記軌跡状表示の終了を指示する指示操作を識別する操作識別処理を実行し、
    　前記軌跡投影処理を実行後、前記操作識別処理において前記指示操作が識別された場合には当該軌跡投影処理を終了する
    ことを特徴とする請求項１乃至請求項７のいずれか１項記載の投影システム。
  9. 　前記制御部は、前記操作識別処理において、
    　指示者の肉体の所定部位による所定動作を検出することにより前記指示操作を識別することを特徴とする請求項８記載の投影システム。
  10. 　前記車両は、複数の乗員が搭乗可能に構成されており、
    　前記制御部は、
    　前記２次投影処理において、前記複数の乗員のうち報知対象とする少なくとも一人の対象乗員に対応する前記２次投影領域に投影を行わせ、
    　さらに、
    　前記対象乗員が、前記２次投影領域への投影による報知が有効な状態であるか否かを判定する判定処理を実行する
    　ことを特徴とする請求項１又は請求項２記載の投影システム。
  11. 　前記制御部は、さらに、
    　前記判定処理において前記２次投影領域への投影による報知が有効な状態でないと判定された場合、前記対象乗員に対応した前記２次投影領域の周辺部において、所定のアラーム表示を前記投影部により行わせる
    ことを特徴とする請求項１０記載の投影システム。
  12. 　音声による発声が可能な発声部をさらに有し、
    　前記制御部は、さらに、
    　前記判定処理において前記２次投影領域への投影による報知が有効な状態でないと判定された場合、前記対象乗員に対応した前記発声部において、音声による所定のアラーム報知を前記発声部により行わせる
    ことを特徴とする請求項１０記載の投影システム。
PCT/JP2023/019463 2022-05-26 2023-05-25 投影システム WO2023229001A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-086004 2022-05-26
JP2022086004 2022-05-26

Publications (1)

Publication Number Publication Date
WO2023229001A1 true WO2023229001A1 (ja) 2023-11-30

Family

ID=88919433

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/019463 WO2023229001A1 (ja) 2022-05-26 2023-05-25 投影システム

Country Status (1)

Country Link
WO (1) WO2023229001A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008195375A (ja) * 2007-01-19 2008-08-28 Denso Corp 車内情報表示装置およびそれに用いられる光照射装置
JP2019125080A (ja) * 2018-01-15 2019-07-25 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置
EP3885195A1 (en) * 2020-03-25 2021-09-29 Bayerische Motoren Werke Aktiengesellschaft System and method for providing visual guidance using light projection

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008195375A (ja) * 2007-01-19 2008-08-28 Denso Corp 車内情報表示装置およびそれに用いられる光照射装置
JP2019125080A (ja) * 2018-01-15 2019-07-25 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置
EP3885195A1 (en) * 2020-03-25 2021-09-29 Bayerische Motoren Werke Aktiengesellschaft System and method for providing visual guidance using light projection

Similar Documents

Publication Publication Date Title
US9881503B1 (en) Vehicle-to-pedestrian-communication systems and methods for using the same
JP6976089B2 (ja) 運転支援装置および運転支援方法
JP7004077B2 (ja) 車両の走行制御方法及び走行制御装置
EP3125211B1 (en) Information presentation device and information presentation method
CN110719865B (zh) 驾驶辅助方法、驾驶辅助程序以及车辆控制装置
JP6555599B2 (ja) 表示システム、表示方法、およびプログラム
US20230110773A1 (en) Control system and method using in-vehicle gesture input
JP6460019B2 (ja) 車両の制御装置
JPWO2017068695A1 (ja) 駐車支援方法及び駐車支援装置
WO2019124158A1 (ja) 情報処理装置、情報処理方法、プログラム、表示システム、及び移動体
US10732715B2 (en) Input output device and vehicle comprising the same
JPWO2018047223A1 (ja) 障害物判定方法、駐車支援方法、出庫支援方法、及び障害物判定装置
CN112601689A (zh) 车辆的行驶控制方法及行驶控制装置
WO2020235306A1 (ja) 制御システムおよび提示システム
JP7119846B2 (ja) 車両の走行制御方法及び走行制御装置
EP3885195A1 (en) System and method for providing visual guidance using light projection
WO2023229001A1 (ja) 投影システム
JP6945774B2 (ja) 自動運転支援装置、自動運転支援システムおよび自動運転支援方法
JP2019012046A (ja) 通知装置、通知システムおよび通知方法
KR20170076644A (ko) 차량용 디스플레이 장치 및 그 제어방법
WO2020065892A1 (ja) 車両の走行制御方法及び走行制御装置
JP2021037916A (ja) 表示制御装置及び表示制御プログラム
JP2020130502A (ja) 情報処理装置および情報処理方法
WO2022168696A1 (ja) ジェスチャ操作結果を表示する表示システム
WO2020195462A1 (ja) 情報提示システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23811873

Country of ref document: EP

Kind code of ref document: A1