WO2023127467A1 - 表示制御システム、表示制御方法及びプログラム - Google Patents

表示制御システム、表示制御方法及びプログラム Download PDF

Info

Publication number
WO2023127467A1
WO2023127467A1 PCT/JP2022/045602 JP2022045602W WO2023127467A1 WO 2023127467 A1 WO2023127467 A1 WO 2023127467A1 JP 2022045602 W JP2022045602 W JP 2022045602W WO 2023127467 A1 WO2023127467 A1 WO 2023127467A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
display control
display
input event
application
Prior art date
Application number
PCT/JP2022/045602
Other languages
English (en)
French (fr)
Inventor
直史 吉田
Original Assignee
パナソニックＩｐマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックＩｐマネジメント株式会社 filed Critical パナソニックＩｐマネジメント株式会社
Priority to CN202280083773.3A priority Critical patent/CN118435270A/zh
Publication of WO2023127467A1 publication Critical patent/WO2023127467A1/ja
Priority to US18/742,348 priority patent/US20240329909A1/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/215—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays characterised by the combination of multiple visual outputs, e.g. combined instruments with analogue meters and additional displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/128—Axially displaceable input devices for instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1434—Touch panels
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/164—Infotainment
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/182—Distributing information between displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/186—Displaying information according to relevancy

Definitions

  • the present disclosure relates to a display control system, display control method and program.
  • a display control system includes a display control unit that controls a plurality of display devices, and a virtual frame memory that stores screens to be displayed on the plurality of display devices. Then, the display control unit writes a screen to be displayed across at least two of the plurality of display devices into the virtual frame memory.
  • an object of the present disclosure is to provide a display control system, a display method, and a program that can easily implement a system that can operate an application regardless of which display control device the application is compatible with.
  • a display control system includes a plurality of display control devices corresponding to each of a plurality of display devices, and the plurality of display control devices are linked to provide the same application to the plurality of display devices.
  • each of the plurality of display control devices includes an acquisition unit that acquires an input event that is an input to an application in response to an operation, and an acquisition unit that transmits the acquired input event to the plurality of display control devices.
  • the processing unit When the processing unit outputs the input event to at least another display control device among the plurality of display control devices, and the processing unit acquires the input event from the display control device that outputs the input event, the input event to the application unit, and the application unit performs processing for displaying the same application on the plurality of display devices, and processing common to the plurality of display control devices.
  • FIG. 1 is a diagram showing an example of a vehicle interior equipped with a display control system according to an embodiment.
  • FIG. 2 is a block diagram showing an example of a display control system according to the embodiment.
  • FIG. 3 is a flowchart showing processing operations of the display control system according to the embodiment.
  • FIG. 4 is another flowchart showing the processing operation of the display control system according to the embodiment.
  • each figure is a schematic diagram and is not necessarily strictly illustrated. Moreover, in each figure, the same code
  • FIG. 1 is a diagram showing an example of a vehicle interior equipped with a display control system 1 according to an embodiment.
  • FIG. 2 is a block diagram showing an example of the display control system 1 according to the embodiment.
  • the display control system 1 causes a plurality of display control devices corresponding to the plurality of display devices 10 to cooperate with each other to display the same application on the plurality of display devices 10.
  • FIG. the display control system 1 causes all or two or more of the physically separated display devices 10 to display images in cooperation with each other.
  • the display control system 1 can also control each of the plurality of display devices 10 individually.
  • the image is a moving image, a still image, or the like.
  • Such a display control system 1 is mounted on a vehicle 2.
  • a display control system 1 mounted on a vehicle 2 is used for explanation.
  • the display control system 1 has a plurality of display devices 10 and a plurality of display control devices.
  • the plurality of display devices 10 are displays such as a car navigation system, an electronic mirror system, a multi-information display, a head-up display (HUD: Head Up Display), or a smart phone mounted on the vehicle 2 .
  • a car navigation system 10a arranged in the central portion of the width of the vehicle, an electronic mirror system functioning as a left side mirror 10b and a right side mirror 10c, and a plurality of multi-information displays. 10d, 10e, and 10f are illustrated.
  • These display devices 10 are arranged side by side so that an occupant of the vehicle 2 can see a plurality of display devices 10 at once.
  • the display devices 10 are arranged along the vehicle width direction. The occupant is a person on board the vehicle 2 and includes the driver and a person other than the driver.
  • Each of the plurality of display devices 10 displays images including, for example, navigation information, captured images, vehicle speed information, vehicle condition information, etc. to the occupants.
  • the navigation information is information for providing route guidance to the current position and destination to the driver while the vehicle 2 is running.
  • the captured image is an image captured by an image capturing device mounted on the vehicle 2, which captures the surroundings of the vehicle 2 or the inside of the vehicle.
  • the vehicle speed information is information indicating the speed of the vehicle 2 traveling.
  • the vehicle condition information is information indicating the mileage, type, fuel consumption, fuel, etc. of the vehicle 2 .
  • Two or more display devices 10 out of the plurality of display devices 10 display a single image by being linked and controlled by the display control system 1, or display images individually in synchronization with each other. can do.
  • the two or more display devices 10 are adjacent or adjacent to each other.
  • two or more display devices 10 out of the plurality of display devices 10 include the first display device 11 and the second display device 12 .
  • the first display device 11 and the second display device 12 differ in at least one of model, performance (resolution, response speed, contrast ratio, etc.), display screen size, settings, and the like.
  • two or more display devices 10 out of the plurality of display devices 10 are cooperatively controlled by a plurality of display control devices. An image with a sense of unity is displayed on each display device 10 by linking the control devices.
  • each of the plurality of display devices 10 is provided with an operation unit that outputs an input event by operation.
  • the first display device 11 is provided with a first operation section 11a
  • the second display device 12 is provided with a second operation section 12a.
  • the first operation unit 11a can receive a user's operation. Thereby, the first display device 11 can display an image corresponding to the operation, that is, the application.
  • the second operation unit 12a can also receive user's operations. Thereby, the second display device 12 can display an image according to the operation.
  • the multiple operation units include touch panels, buttons, or operation voice operation units. That is, each of the first operation unit 11a and the second operation unit 12a is one of a touch panel, a button, and a voice operation unit.
  • each of the plurality of display controllers can generate images for two or more of the plurality of display devices 10 .
  • the display control device is configured so that an image to be displayed across multiple display devices 10 can be written to the frame memory.
  • a frame memory is a virtual memory set by an OS (Operating System) or the like to have a continuous storage area using one or more physical memories (non-temporary recording media).
  • the display control device is a computer system having a processor and memory.
  • the functions of the display control device are realized by the processor of the computer system executing a program recorded in the memory of the computer system.
  • the program may be prerecorded in a memory, may be provided via a communication line such as the Internet, or may be provided in a state recorded in a recording medium such as a memory card.
  • the plurality of display control devices include a first display control device 110 corresponding to the first display device 11, a second display control device 120 corresponding to the second display device 12, and a including.
  • Each of the first display control device 110 and the second display control device 120 is mainly composed of an ECU (Electronic Control Unit) including a CPU (Central Processing Unit) and a GPU (Graphics Processing Unit).
  • the GPUs of the first display control device 110 and the second display control device 120 can, for example, execute drawing processing conforming to OpenGL (Open Graphics Library).
  • the first display control device 110 is communicably connected to the first display device 11 and the second display control device 120 .
  • the first display control device 110 acquires a first input event from the first operation unit 11 a of the first display device 11 and acquires a second input event from the second display control device 120 .
  • the first input event and the second input event are examples of input events.
  • the first display control device 110 includes a first management unit 111a, a first determination unit 112, a first application unit 113, a first command generation unit 113a, and a first command transmission unit 113b. , a first drawing unit 114 a , a first synthesis unit 114 b , a first frame memory 115 , a first acquisition unit 111 , a first processing unit 116 , and a first notification unit 117 .
  • the second display control device 120 includes a second determination unit 122, a second application unit 123, a second command generation unit 123a, a second command transmission unit 123b, a second drawing unit 124a, and a second synthesis unit. It has a unit 124 b , a second frame memory 125 , a second acquisition unit 121 , a second processing unit 126 and a second notification unit 127 .
  • the first management unit 111a manages the correspondence between the drawing areas of the plurality of display devices 10, the display positions, display sizes, and display priorities of the windows of the first application unit 113 and the second application unit 123.
  • the correspondence relationship between the drawing areas means the position and display when the drawing area of the display screen of the first display device 11 and the drawing area of the display screen of the second display device 12 are handled in the same display coordinate system.
  • the display priority is a value indicating which window is to be preferentially displayed when a plurality of windows of the first application unit 113 and the windows of the second application unit 123 are overlapped. Display the highest degree in the foreground.
  • Information managed by the first management unit 111a is stored in a storage unit (not shown).
  • the storage unit is a recording medium such as a memory or a hard disk for temporarily storing information.
  • the first determination unit 112 receives from the first management unit 111a correspondence relationships between drawing areas of the plurality of display devices 10, display positions of windows of the plurality of first application units 113, display sizes, and acquires information indicating the display priority. Based on the acquired information, the first determining unit 112 determines that when images are displayed across two or more display devices 10, a difference appears between the images displayed on each of the two or more display devices 10. avoid
  • the first determining unit 112 outputs the display position for displaying the application on the first display device 11 to the first processing unit 116 . Further, the first determination unit 112 may transmit the display position of the application to the first transmission unit 116a or to the first event processing unit 116b. Also, in FIG. 2, the first determination unit 112 outputs the display position of the application to the first processing unit 116, but even if the first management unit 111a outputs the display position of the application to the first processing unit 116, good.
  • the second determination unit 122 obtains from the first management unit 111a the correspondence relationship between the drawing areas of the plurality of display devices 10, the display position and display size of the window of the second application unit 123, and Get the information that manages the display priority. Based on the acquired information, the second determining unit 122 determines that when images are displayed across two or more display devices 10, a difference appears between the images displayed on each of the two or more display devices 10. avoid
  • the second determining unit 122 outputs the display position for displaying the application on the second display device 12 to the second processing unit 126 .
  • the second determination unit 122 may transmit the display position of the application to the second transmission unit 126a or to the second event processing unit 126b.
  • the display position of the application may be output to the second processing unit 126 by the first management unit 111a. In FIG. 2, the second determining unit 122 outputs the display position of the application to the second processing unit 126, but even if the first management unit 111a outputs the display position of the application to the second processing unit 126, good.
  • the first drawing unit 114a On the first display control device 110 side, the first drawing unit 114a generates a drawing command for drawing the first application unit 113 generated by the first command generating unit 113a, and a drawing command generated by the second command generating unit 123a. 2 Acquire a drawing command for drawing the application unit 123 .
  • the first drawing unit 114a receives the drawing commands obtained from the first command generating unit 113a via the first command transmitting unit 113b, and the drawing commands obtained from the second command generating unit 123a via the second command transmitting unit 123b. Executes the drawing process of the application based on
  • the drawing command is an instruction for the GPU to perform drawing processing and write (storage) to the frame memory.
  • the first application unit 113 has a predetermined application.
  • the first application unit 113 performs processing for displaying the same application on a plurality of display devices 10, which is common to a plurality of display control devices.
  • the first application unit 113 operates on the OS of the ECU as hardware in the first display control device 110 .
  • the first application unit 113 is an example of an application unit.
  • the first command generation unit 113a generates a drawing command for causing the first drawing unit 114a and the second drawing unit 124a to execute drawing processing by the operation of the first application unit 113, and the generated drawing command is Output to the first drawing unit 114a and the second drawing unit 124a via the first command transmission unit 113b.
  • the first synthesizing unit 114b cuts out and synthesizes the windows of the plurality of applications rendered by the first rendering unit 114a, and performs the synthesizing process. 11 is output to the first frame memory 115 .
  • the second drawing unit 124a On the second display control device 120 side, the second drawing unit 124a generates a drawing command for drawing the first application unit 113 generated by the first command generating unit 113a, and a drawing command generated by the second command generating unit 123a. 2 Acquire a drawing command for drawing the application unit 123 .
  • the second drawing unit 124a receives the drawing commands obtained from the first command generation unit 113a via the first command transmission unit 113b, and the drawing commands obtained from the second command generation unit 123a via the second command transmission unit 123b. Executes the drawing process of the application based on
  • the second application unit 123 has a predetermined application.
  • the second application unit 123 performs processing for displaying the same application on a plurality of display devices 10, which is common to a plurality of display control devices.
  • the second application unit 123 operates on the OS of the ECU as hardware in the second display control device 120 .
  • the second application section 123 is also an example of an application section.
  • the second command generation unit 123a generates a drawing command for causing the first drawing unit 114a and the second drawing unit 124a to execute drawing processing by the operation of the second application unit 123, and the generated drawing command is Output to the first drawing unit 114a and the second drawing unit 124a via the second command transmission unit 123b.
  • the second synthesizing unit 124b cuts out and synthesizes windows of a plurality of applications rendered by the second rendering unit 124a, and performs synthesizing processing. 12 is output to the second frame memory 125 .
  • the first frame memory 115 corresponding to the first display device 11 and the second frame memory 125 corresponding to the second display device 12 are examples of frame memories.
  • the first frame memory 115 is a frame buffer for storing the display contents of the first image displayed on the display screen of the first display device 11 .
  • the first image after being rendered and synthesized by the first rendering unit 114 a and the first synthesizing unit 114 b is written in the first frame memory 115 .
  • the first frame memory 115 may be a dedicated memory, or may consist of a partial area of the memory of the computer system.
  • the first image stored in the first frame memory 115 is displayed on the first display device 11 by being output.
  • the second frame memory 125 is a frame buffer for storing the display content of the second image displayed on the display screen of the second display device 12 .
  • the second image after being rendered and synthesized by the second rendering section 124a and the second synthesizing section 124b is written.
  • the second frame memory 125 may also be a dedicated memory, or may consist of a partial area of the memory of the computer system.
  • the second image stored in the second frame memory 125 is displayed on the second display device 12 by being output.
  • the first display control device 110 and the second display control device 120 can display images across two or more display devices 10 .
  • the first display control device 110 causes the first display device 11 to display the first image
  • the second display control device 120 causes the second display device 12 to display the second image.
  • the display control system 1 displays an image that can be regarded as one display device 10 coherent as a whole by interlocking two or more display devices 10 .
  • the first acquisition unit 111 is communicably connected to the first display device 11, and according to the operation to the first operation unit 11a of the first display device 11, a plurality of display devices Get the first input event, which is the input to the same application displayed at 10 . That is, the first acquisition unit 111 acquires the first input event input to the first operation unit 11 a of the first display device 11 . First acquisition unit 111 outputs the acquired first input event to first processing unit 116 .
  • the second acquisition unit 121 is communicably connected to the second display device 12, and according to the operation to the second operation unit 12a of the second display device 12, a plurality of display devices Get a second input event that is an input to the same application displayed in . That is, the second acquisition unit 121 acquires the second input event input to the second operation unit 12a of the second display device 12.
  • FIG. The second acquisition unit 121 outputs the acquired second input event to the second processing unit 126 .
  • the first input event is an instruction input to the first operation unit 11 a of the first display device 11 .
  • a second input event is an instruction input to the second operation unit 12 a of the second display device 12 .
  • the first input event and the second input event are an operation input to an audio device, an operation input to an air conditioner, etc., and change the application by updating the displayed application.
  • the first operation unit 11a and the second operation unit 12a are touch panels, the first input event and the second input event include input positions, operation types, etc. on the first operation unit 11a and the second operation unit 12a. is included.
  • the operation type includes a tap operation, a swipe operation, and the like.
  • the first input event and the second input event include information indicating the application unit of the display control device to be operated among the plurality of display control devices. For example, when it is desired to operate the second application unit 123 of the second display control device 120 from the first operation unit 11a, the first input event input from the first operation unit 11a causes the second display control device to be operated. 120 , that is, operation target information that is information indicating the second application unit 123 is included. Further, when it is desired to operate the first application unit 113 of the first display control device 110 from the first operation unit 11a, the first input event input from the first operation unit 11a causes the first display control device to be operated. 110 , that is, operation target information that is information indicating the first application unit 113 is included.
  • the first processing unit 116 outputs the acquired input event to at least other display control devices among the plurality of display control devices.
  • the first processing unit 116 may output the input event to at least other display control devices among the plurality of display control devices corresponding to the acquired input event. That is, the first processing unit 116 may output the input event only to the display control device of the operation target information included in the acquired input event. Also, the first processing unit 116 may output the acquired input event to all of the plurality of display control devices.
  • the first processing unit 116 is an example of a processing unit.
  • the first processing unit 116 has a first transmission unit 116a and a first event processing unit 116b.
  • the first transmission unit 116a receives at least another display control device among the plurality of display control devices corresponding to the acquired first input event, that is, the first input event.
  • the first input event may be output only to the display control device of the operation target information included in .
  • the first transmission unit 116 a acquires the display position for displaying the application on the first display device 11 from the first determination unit 112 .
  • the first transmission unit 116a may output the acquired first input event to all of the plurality of display control devices.
  • the first event processing unit 116b does not need to acquire the display position for displaying the application on the first display device 11 from the first determining unit 112.
  • the first event processing unit 116b When the first event processing unit 116b acquires the input event from the display control device that has output the input event (for example, the first input event or the second input event), the first event processing unit 116b performs display for displaying the application on the first display device 11. The position is compared with the position input to the operation unit indicated by the input event to identify which operation of the application the position input on the operation unit corresponds to. The first event processing unit 116b outputs the first input event to the first notification unit 117 together with the specified result.
  • the input event for example, the first input event or the second input event
  • the first event processing unit 116b may receive input events from a plurality of display control devices. For example, when a first input event and a second input event are acquired, the first event processing unit 116b executes the following processing.
  • the first event processing unit 116b can display the same application from two or more operation units out of the plurality of operation units. may be executed to receive an operation from an operation unit with the highest priority set in advance from among two or more operation units when an input to operate is made. At this time, the first event processing unit 116b notifies the first application unit 113 via the first notification unit 117 of the input event from the operation unit having the highest priority.
  • the first event processing unit 116b selects the preset highest priority among the two or more operation units when an input to operate the application is received from two or more operation units out of the plurality of operation units. A process of accepting an operation from an operation unit having a high value may be executed. At this time, the first event processing unit 116b notifies the first application unit 113 via the first notification unit 117 of the input event from the operation unit having the highest priority.
  • the first event processing unit 116b can display the same application from two or more operation units out of the plurality of operation units. may be executed to accept an operation from the most frequently used operation unit among the two or more operation units when an input is made to operate the .
  • the priority may be set to the display device 10 that is likely to be used by the driver, that is, the operation unit. For example, the priority may be set to gradually increase in the order of the tablet terminal and smartphone in the rear seat, the center display, and the meter display.
  • the first event processing unit 116b notifies the first application unit 113 via the first notification unit 117 of the input event from the operation unit having the highest priority.
  • the first event processing unit 116b selects an operation with the highest priority among the two or more operation units.
  • a process of accepting an operation from the department may be executed.
  • the first event processing unit 116b controls the first operation unit 11a and the A process of accepting an operation from the operation unit having the highest priority among the second operation units 12a may be executed.
  • the first event processing unit 116b notifies the first application unit 113 via the first notification unit 117 of the input event from the operation unit having the highest priority.
  • the first event processing unit 116b acquires a plurality of input events, it selects one of the input events.
  • the first event processing unit 116b does not have to accept an input event from a specific operating unit among the plurality of operating units when the vehicle 2 is running. In this case, among the received input events, the input event from the operation unit with the highest priority is output to first notification unit 117 as described above. It should be noted that determination of whether the vehicle 2 is running can be made by acquiring information from an in-vehicle sensor mounted on the vehicle.
  • the first event processing unit 116b executes processing for causing the first presentation unit 118 to output information indicating that the operation of the specific operation unit is prohibited. good too. That is, when the first operation unit 11a is a specific operation unit, the first presentation unit 118 presents information indicating that the user is prohibited from operating the first operation unit 11a. Thereby, the user recognizes that the operation performed by the user on the first operation unit 11a has not been accepted.
  • the first presentation unit 118 is a display unit that displays characters, images, and the like, an audio device that outputs audio, and the like.
  • the second processing unit 126 On the second display control device 120 side, the second processing unit 126 outputs the acquired input event to at least other display control devices among the plurality of display control devices.
  • the second processing unit 126 may output the input event to at least other display control devices among the plurality of display control devices corresponding to the acquired input event. That is, the second processing unit 126 may output the input event only to the display control device of the operation target information included in the acquired input event. Also, the second processing unit 126 may output the acquired input event to all of the plurality of display control devices.
  • the second processing unit 126 is an example of a processing unit.
  • the second processing unit 126 has a second transmission unit 126a and a second event processing unit 126b.
  • the second transmission unit 126a receives at least another display control device among the plurality of display control devices corresponding to the acquired second input event, that is, the second input event.
  • the second input event may be output only to the display control device of the operation target information included in .
  • the second transmission unit 126a acquires the display position for displaying the application on the second display device 12 from the second determination unit 122.
  • the second transmission unit 126a may output the acquired second input event to all of the plurality of display control devices.
  • the second event processing unit 126b does not need to acquire the display position for displaying the application on the second display device 12 from the second determining unit 122.
  • the second event processing unit 126b When the second event processing unit 126b acquires the input event from the display control device that has output the input event (for example, the first input event or the second input event), the second event processing unit 126b performs display for displaying the application on the second display device 12. The position is compared with the position input to the operation unit indicated by the input event to identify which operation of the application the position input on the operation unit corresponds to. The second event processing unit 126b outputs the second input event to the second notification unit 127 together with the specified result.
  • the input event for example, the first input event or the second input event
  • the second event processing unit 126b may receive input events from a plurality of display control devices. For example, when a first input event and a second input event are acquired, the second event processing unit 126b performs the following processing.
  • the second event processing unit 126b can display the same application from two or more operation units out of the plurality of operation units. may be executed to receive an operation from an operation unit with the highest priority set in advance from among two or more operation units when an input to operate is made. At this time, the second event processing unit 126b notifies the second application unit 123 via the second notification unit 127 of the input event from the operation unit having the highest priority.
  • the second event processing unit 126b sets the highest priority among the two or more operation units when an input to operate the application is received from two or more operation units out of the plurality of operation units. A process of accepting an operation from an operation unit having a high value may be executed. At this time, the second event processing unit 126b notifies the second application unit 123 via the second notification unit 127 of the input event from the operation unit having the highest priority.
  • the second event processing unit 126b can display the same application from two or more operation units out of the plurality of operation units. may be executed to accept an operation from the most frequently used operation unit among the two or more operation units when an input is made to operate the .
  • the priority may be set to the display device 10 that is likely to be used by the driver, that is, the operation unit. For example, the priority may be set to gradually increase in the order of the tablet terminal and smartphone in the rear seat, the center display, and the meter display.
  • the second event processing unit 126b notifies the second application unit 123 via the second notification unit 127 of the input event from the operation unit having the highest priority.
  • the second event processing unit 126b selects an operation with the highest priority among the two or more operation units.
  • a process of accepting an operation from the department may be executed.
  • the second event processing unit 126b controls the first operation unit 11a and the A process of accepting an operation from the operation unit having the highest priority among the second operation units 12a may be executed.
  • the second event processing unit 126b notifies the second application unit 123 via the second notification unit 127 of the input event from the operation unit having the highest priority.
  • the second event processing unit 126b acquires a plurality of input events, it selects one of the input events.
  • the second event processing unit 126b does not have to accept an input event from a specific operating unit among the plurality of operating units when the vehicle 2 is running. In this case, among the received input events, the input event from the operation unit with the highest priority is output to the second notification unit 127 as described above.
  • the second event processing unit 126b executes processing for causing the second presentation unit 128 to output information to the effect that the operation of the specific operation unit is prohibited. good too. That is, when the second operation unit 12a is a specific operation unit, the second presentation unit 128 presents information indicating that the user is prohibited from operating the second operation unit 12a. Thereby, the user recognizes that the operation performed by the user on the second operation unit 12a has not been accepted.
  • the second presentation unit 128 is a display unit that displays characters, images, and the like, an audio device that outputs audio, and the like.
  • the first notification unit 117 notifies the first application unit 113 of the processing executed by the first processing unit 116 .
  • the first notification unit 117 is an example of a notification unit.
  • the second notification unit 127 notifies the second application unit 123 of the processing executed by the second processing unit 126 .
  • the second notification section 127 is an example of a notification section.
  • FIG. 3 is a flow chart showing processing operations of the display control system 1 according to the embodiment.
  • processing operations of the first management unit 111a, the first determination unit 112, the first application unit 113, the first command generation unit 113a, the first drawing unit 114a, the first synthesis unit 114b, and the first frame memory 115 will be explained.
  • the first application unit 113 updates by acquiring an input event (S11). For example, when an input event acquired from the operation unit of the display device 10 is processed by the first processing unit 116 and the input event is acquired from the first notification unit 117, the first application unit 113 performs Updated. Note that when the flowchart of FIG. 3 is executed for the first time, the first application unit 113 is updated to the initial values.
  • the first command generation unit 113a generates a drawing command for causing the first drawing unit 114a and the second drawing unit 124a to execute drawing processing by the operation of the first application unit 113.
  • the second command generation unit 123a generates a drawing command for causing the first drawing unit 114a and the second drawing unit 124a to execute drawing processing by the operation of the second application unit 123 (S12).
  • the first command generation unit 113a outputs the generated drawing commands to the first drawing unit 114a and the second drawing unit 124a.
  • the second command generation unit 123a also outputs the generated drawing commands to the first drawing unit 114a and the second drawing unit 124a (S13).
  • the first drawing unit 114a and the second drawing unit 124a respectively acquire drawing commands from the first command generation unit 113a and the second command generation unit 123a (S14).
  • the first drawing unit 114a executes application drawing processing on the first application unit 113 or the second application unit 123 to be displayed on the first display device 11 according to the drawing command acquired from the command generation unit ( S15).
  • the second drawing unit 124a displays the first application unit 113 or the second application unit 123 on the second display device 12 according to the drawing command acquired from the command generation unit. , the drawing process of the application is executed (S15).
  • the first synthesizing unit 114b extracts and synthesizes the windows of the plurality of applications rendered by the first rendering unit 114a, and performs the first display process.
  • the first image to be displayed on the device 11 is output to the first frame memory 115 (S16).
  • the second synthesizing unit 124b cuts out and synthesizes windows of a plurality of applications rendered by the second rendering unit 124a, and performs synthesizing processing. 12 is output to the second frame memory 125 (S16).
  • the first image after being rendered and synthesized by the first rendering unit 114a and the first synthesizing unit 114b is written in the first frame memory 115, and the second image is stored in the second frame memory 125.
  • the second image after drawing and synthesizing is executed by the 2 synthesizing unit 124b is written (S17).
  • the first image output from the first frame memory 115 is displayed on the display screen of the first display device 11, and the second image output from the second frame memory 125 is displayed on the display screen of the second display device 12. is displayed (S18).
  • step S18 the display control system 1 returns the process to step S11 in the next frame, thereby performing the drawing process and the composition process.
  • the flowchart in FIG. 3 ends when the processing operation of the display control system 1 in FIG. 3 is stopped or the power of the display control system 1 is turned off.
  • FIG. 4 is another flow chart showing the processing operation of the display control system 1 in the embodiment.
  • the first acquisition unit 111 and the processing operation when the first input event corresponds to the second display control device 120 will be described. If the second input event corresponds to the first display controller 110 , if the first input event corresponds to the first display controller 110 and the second display controller 120 , the second input event corresponds to the first display controller 110 , and the processing operation in the case of supporting the second display control device 120 is the same, so description thereof will be omitted.
  • the first acquisition unit 111 acquires an input event that is an input to an application in response to an operation on the first operation unit 11a of the first display device 11, that is, a first input event. (S21). First acquisition unit 111 outputs the acquired first input event to first processing unit 116 .
  • the first transmission unit 116a of the first processing unit 116 acquires the first input event, it determines which display control device among the plurality of display control devices the first input event corresponds to. That is, the first transmission unit 116a identifies one or more display control devices from among the plurality of display control devices based on the operation target information included in the first input event. The first transmission unit 116a outputs the first input event to the identified one or more display control devices, that is, the corresponding display control devices and at least other display control devices (S22). In this operation example, the second display control device 120 is set as the display control device corresponding to the first input event. Therefore, the first transmission unit 116 a outputs the first input event to the second processing unit 126 of the second display control device 120 .
  • the second event processing unit 126b acquires the input event, that is, the first input event (S23).
  • the second event processing unit 126b determines whether or not a plurality of input events have been acquired (S24).
  • the first event processing unit 116b determines that multiple input events have been acquired (YES in S24), it selects one of the multiple input events (S25).
  • the second event processing unit 126b when displaying the same application on the first display device 11 and the second display device 12, the second event processing unit 126b operates the same application on the first operation unit 11a and the second operation unit 12a. It is also possible to execute a process of accepting an operation from a preset operation unit having the highest priority when an input is made to do so. At this time, the second event processing unit 126b outputs to the second notification unit 127 the input event from the operation unit with the highest priority.
  • the second event processing unit 126b selects an operation from the operation unit having the preset highest priority when an input to operate an application is made to the first operation unit 11a and the second operation unit 12a at the same time. may be executed. At this time, the second event processing unit 126b outputs to the second notification unit 127 the input event from the operation unit with the highest priority.
  • the second event processing unit 126b operates the same application on the first operation unit 11a and the second operation unit 12a.
  • an operation from the most frequently used operation unit may be accepted.
  • the second event processing unit 126b outputs to the second notification unit 127 the input event from the operation unit with the highest priority.
  • the first event processing unit 116b when the first event processing unit 116b is set so that the order of operation on the touch panel, operation on the button, and operation on the voice operation unit is set so that the priority is gradually increased, the first operation unit 11a and the first event processing unit 116b A process of accepting an operation from the operation unit having the highest priority among the second operation units 12a may be executed. At this time, the first event processing unit 116b outputs to the second notification unit 127 the input event from the operation unit with the highest priority.
  • the first event processing unit 116b does not have to accept an input event from a specific operating unit among the plurality of operating units when the vehicle 2 is running. In this case, among the received input events, the first event processing unit 116b outputs the input event from the operation unit with the highest priority to the second notification unit 127, as described above.
  • the second event processing unit 126b discards the first input event acquired by the second acquisition unit 121, The second event processing unit 126 b executes processing of outputting the first input event acquired from the first display control device 110 to the second notification unit 127 .
  • the second event processing unit 126b executes processing for causing the second presentation unit 128 to output information to the effect that the operation of the specific operation unit is prohibited. good too.
  • the second event processing unit 126b selects an input event and proceeds to step S26.
  • step S26 when the second event processing unit 126b determines that a plurality of input events have not been acquired (NO in S24), the process proceeds to step S26.
  • the second event processing unit 126b outputs the acquired first input event to the second notification unit 127.
  • the second notification unit 127 notifies the target application unit of the acquired input event (S26).
  • the second display control device 120 proceeds to the processing operation of step S11 and repeats the same processing.
  • the display control system 1 includes a plurality of display control devices respectively corresponding to the plurality of display devices 10, and the plurality of display control devices are linked so that the plurality of display devices 10 1 is a display control system 1 for displaying the same application on .
  • Each of the plurality of display control devices includes an acquisition unit (first acquisition unit 111 and second acquisition unit 121) that acquires an input event that is an input to an application in response to an operation, and a plurality of display controls that acquire the acquired input event.
  • a processing unit (the first processing unit 116 and the second processing unit 126) that outputs to at least other display control devices among the devices, and a processing unit from the display control device that outputs the input event among the plurality of display control devices
  • a notification unit (first notification unit 117 and second notification unit 127) that notifies the application unit of the input event when the input event is acquired.
  • the application unit performs processing for displaying the same application on the plurality of display devices 10, which is common to the plurality of display control devices.
  • the processing unit can acquire an input event from another display control device other than its own display control device, it is possible to notify the application unit of the input event acquired from the other display control device. . This allows the display device to display an updated application based on the input event.
  • the display control method is a display control method for displaying the same application on the plurality of display devices 10 by linking the plurality of display control devices corresponding to the plurality of display devices 10 respectively. acquires an input event that is an input to an application in response to an operation, outputs the acquired input event to at least another display control device among the plurality of display control devices, and outputs the input event to at least one of the plurality of display control devices.
  • the processing unit acquires an input event from the display control device that output the input event, the processing unit notifies the application unit of the input event, and the application unit displays the same application on a plurality of display devices. and performing processing common to a plurality of display control devices.
  • This method also has the same effects as those described above.
  • the program according to the present embodiment is a program for causing a computer to execute the display control method.
  • This program also has the same effects as above.
  • the processing unit outputs the input event to at least other display control devices among the plurality of display control devices corresponding to the acquired input event.
  • an input event can be transmitted only to the target display control device corresponding to the input event. It gets better. Therefore, an increase in communication traffic in the display control system 1 can be suppressed.
  • the processing unit outputs the acquired input event to all of the plurality of display control devices.
  • the input event can be transmitted to all the display control devices, so the processing of the processing unit can be simplified.
  • the display control system 1 is mounted on the vehicle 2 . Further, each of the plurality of display devices 10 is provided with an operation unit that outputs an input event by operation. Then, when the vehicle 2 is running, the processing unit does not accept an input event from a specific operating unit among the plurality of operating units.
  • the processing unit when a specific operation unit is operated, causes the presentation unit to output information indicating that the operation of the specific operation unit is prohibited. .
  • the processing unit can discard the acquired input event. Therefore, it becomes unnecessary to transmit the input event to the display control device corresponding to the input event. As a result, an increase in communication traffic in the display control system 1 can be suppressed.
  • each of the plurality of display devices 10 is provided with an operation unit that outputs an input event by operation.
  • the processing unit receives an input to operate the same application from two or more operation units out of the plurality of operation units.
  • the operation unit receives an operation from the operation unit with the highest priority set in advance from among the two or more operation units, an input event from the operation unit with the highest priority is sent to the application unit via the notification unit. Notice.
  • each of the plurality of display devices 10 is provided with an operation unit that outputs an input event by operation.
  • the processing unit selects an operation unit having a preset highest priority among the two or more operation units. An operation is accepted, and an input event from the operation unit with the highest priority is notified to the application unit via the notification unit.
  • each of the plurality of display devices 10 is provided with an operation unit that outputs an input event by operation.
  • the processing unit receives an input to operate the same application from two or more operation units out of the plurality of operation units.
  • the operation unit receives the operation from the operation unit with the highest frequency of use among the two or more operation units, the input event from the operation unit with the highest priority is notified to the application unit via the notification unit.
  • the plurality of operation units include touch panels, buttons, or operation voice operation units.
  • the plurality of operation units include touch panels, buttons, or voice operation units.
  • the order of operation on the touch panel, operation on the button, and operation on the voice operation unit is set so that the priority is gradually increased in this order, and the processing unit selects from two or more operation units out of the plurality of operation units. When an input to operate the same application is made, an operation from the operation unit with the highest priority among two or more operation units is accepted.
  • each processing unit, management unit, determination unit, etc. included in the display control system, display control method, and program according to the above embodiments are typically implemented as an LSI, which is an integrated circuit. These may be made into one chip individually, or may be made into one chip so as to include part or all of them.
  • circuit integration is not limited to LSIs, and may be realized with dedicated circuits or general-purpose processors.
  • An FPGA Field Programmable Gate Array
  • a reconfigurable processor that can reconfigure the connections and settings of the circuit cells inside the LSI may be used.
  • each component may be implemented by dedicated hardware or by executing a software program suitable for each component.
  • Each component may be realized by reading and executing a software program recorded in a recording medium such as a hard disk or a semiconductor memory by a program execution unit such as a CPU or processor.
  • the division of functional blocks in the block diagram is an example, and a plurality of functional blocks can be realized as one functional block, one functional block can be divided into a plurality of functional blocks, and some functions can be moved to other functional blocks.
  • single hardware or software may process the functions of a plurality of functional blocks having similar functions in parallel or in a time-sharing manner.
  • each step in the flowchart is executed is for illustrative purposes in order to specifically describe the present disclosure, and orders other than the above may be used. Also, some of the above steps may be executed concurrently (in parallel) with other steps.
  • the present disclosure can be used, for example, in vehicles equipped with a plurality of display devices, and in devices and systems other than vehicles.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Instrument Panels (AREA)
  • Digital Computer Display Output (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

表示制御システム（１）は、複数の表示制御装置を連携させて、複数の表示装置（１０）に同一のアプリケーションを表示させる。複数の表示制御装置のそれぞれは、操作に応じたアプリケーションへの入力である入力イベントを取得する取得部と、取得した入力イベントを複数の表示制御装置のうちの少なくとも他の表示制御装置に出力する処理部と、複数の表示制御装置のうちの入力イベントを出力した表示制御装置から処理部が入力イベントを取得した場合、入力イベントをアプリケーション部に通知する通知部とを有する。そして、アプリケーション部は、複数の表示装置（１０）に同一のアプリケーションを表示させる処理であって、複数の表示制御装置で共通する処理を行う。

Description

表示制御システム、表示制御方法及びプログラム
　本開示は、表示制御システム、表示制御方法及びプログラムに関する。
　表示制御システムは、複数の表示装置を制御する表示制御部と、複数の表示装置に表示させる画面を記憶する仮想フレームメモリと、を備える。そして、表示制御部は、複数の表示装置のうち少なくとも２つの表示装置に跨って表示させる画面を仮想フレームメモリに書き込む。
特開２０１９－１５８０１号公報
　しかしながら、従来の表示制御システムでは、複数の表示装置のそれぞれに対応する表示制御部が存在する場合、表示制御部のアプリケーションを別の表示制御部の別のアプリケーションから操作する場合にはシステムが複雑化してしまうという課題がある。
　そこで、本開示では、アプリケーションがどの表示制御装置に対応していても、アプリケーションを操作可能なシステムを簡易に実現することができる表示制御システム、表示方法及びプログラムを提供することを目的とする。
　本開示の一態様に係る表示制御システムは、複数の表示装置のそれぞれに対応する複数の表示制御装置を備え、前記複数の表示制御装置を連携させて、前記複数の表示装置に同一のアプリケーションを表示させる表示制御システムであって、前記複数の表示制御装置のそれぞれは、操作に応じたアプリケーションへの入力である入力イベントを取得する取得部と、取得した前記入力イベントを前記複数の表示制御装置のうちの少なくとも他の表示制御装置に出力する処理部と、前記複数の表示制御装置のうちの前記入力イベントを出力した表示制御装置から前記処理部が前記入力イベントを取得した場合、前記入力イベントをアプリケーション部に通知する通知部とを有し、前記アプリケーション部は、前記複数の表示装置に同一のアプリケーションを表示させる処理であって、複数の前記表示制御装置で共通する処理を行う。
　なお、これらの包括的又は具体的な態様は、システム、方法、集積回路、コンピュータプログラム又はコンピュータで読み取り可能なＣＤ－ＲＯＭ等の記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。
　本開示の表示制御システム、表示制御方法及びプログラムでは、アプリケーションがどの表示制御装置に対応していても、アプリケーションを操作可能なシステムを簡易に実現することができる。
図１は、実施の形態における表示制御システムを搭載した車室の一例を示す図である。 図２は、実施の形態における表示制御システムの一例を示すブロック図である。 図３は、実施の形態における表示制御システムの処理動作を示すフローチャートである。 図４は、実施の形態における表示制御システムの処理動作を示す別のフローチャートである。
　以下、本開示の実施の形態について、図面を参照しながら説明する。以下に説明する実施の形態は、いずれも本開示の好ましい一具体例を示すものである。したがって、以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態などは、一例であって本開示を限定する主旨ではない。よって、以下の実施の形態における構成要素のうち、独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
　また、各図は、模式図であり、必ずしも厳密に図示されたものではない。また、各図において、同じ構成部材については同じ符号を付している。
　以下、実施の形態について、図面を参照しながら具体的に説明する。
　（実施の形態）
　＜構成：表示制御システム＞
　図１は、実施の形態における表示制御システム１を搭載した車室の一例を示す図である。図２は、実施の形態における表示制御システム１の一例を示すブロック図である。
　図１及び図２に示すように、表示制御システム１は、複数の表示装置１０のそれぞれに対応する複数の表示制御装置を連携させて、複数の表示装置１０に同一のアプリケーションを表示させる。つまり、表示制御システム１は、物理的に分離した複数の表示装置１０に対し、その全て又は２以上の表示装置１０を連携して画像を表示させる。また、表示制御システム１は、複数の表示装置１０のそれぞれを個別に制御することも可能である。ここで、画像は、動画像及び静止画像等である。
　このような表示制御システム１は、車両２に搭載されている。本実施の形態では、車両２に搭載された表示制御システム１を用いて説明する。表示制御システム１は、複数の表示装置１０と、複数の表示制御装置とを有する。
　［表示装置１０］
　複数の表示装置１０は、車両２に搭載されるカーナビゲーションシステム、電子ミラーシステム、マルチインフォメーションディスプレイ、ヘッドアップディスプレイ（ＨＵＤ：Ｈｅａｄ　Ｕｐ　Ｄｉｓｐｌａｙ）又はスマートフォン等の表示器である。本実施の形態では、複数の表示装置１０として、車幅の中央部分に配置されたカーナビゲーションシステム１０ａと、左サイドミラー１０ｂ及び右サイドミラー１０ｃとして機能する電子ミラーシステムと、複数のマルチインフォメーションディスプレイ１０ｄ、１０ｅ、１０ｆとを例示している。これら表示装置１０は、車両２の乗員が一度に複数の表示装置１０を纏めて見ることができるように、並べられて配置されている。本実施の形態では、表示装置１０は、車幅方向に沿って並べられている。乗員は、車両２に搭乗している人であり、運転者及び運転者以外の人を含む。
　複数の表示装置１０のそれぞれは、例えば、ナビゲーション情報、撮像画像、車速情報、及び、車両コンディション情報等を含む画像を、乗員に対して表示する。ナビゲーション情報は、運転者に対して車両２の走行時に現在位置及び目的地への経路案内等を行うための情報である。撮像画像は、車両２に搭載された撮像装置が車両２の周囲又は車室内を撮像した画像である。車速情報は、走行する車両２の速度を示す情報である。車両コンディション情報は、車両２の走行距離、型式、燃費、燃料等を示す情報である。
　複数の表示装置１０のうちの２以上の表示装置１０は、表示制御システム１によって連携されて制御されることで単一の画像を表示したり、それぞれが同期して個別に画像を表示したりすることができる。この２以上の表示装置１０は、互いに隣り合う、又は、隣接している。
　本実施の形態における図２では、複数の表示装置１０のうちの２以上の表示装置１０は、第１表示装置１１及び第２表示装置１２を含む。第１表示装置１１と第２表示装置１２とは、機種、性能（解像度、応答速度、コントラスト比等）、表示画面の大きさ、設定等のうちの少なくともいずれかが異なる。また、複数の表示装置１０のうちの２以上の表示装置１０は、複数の表示制御装置によって連携されて制御されることで、それぞれの表示装置１０の物理サイズが異なっていても、複数の表示制御装置を連携させてそれぞれの表示装置１０に統一感のある画像を表示させる。
　また、複数の表示装置１０のそれぞれには、操作によって入力イベントを出力する操作部が設けられている。具体的には、第１表示装置１１には第１操作部１１ａが設けられ、第２表示装置１２には第２操作部１２ａが設けられている。第１操作部１１ａは、ユーザの操作を受け付けることができる。これにより、第１表示装置１１は、操作に応じた画像、つまりアプリケーションを表示することができる。また、第２操作部１２ａも、ユーザの操作を受け付けることができる。これにより、第２表示装置１２は、操作に応じた画像を表示することができる。
　複数の操作部には、タッチパネル、ボタン、又は、操作音声操作部が含まれる。つまり、第１操作部１１ａ及び第２操作部１２ａのそれぞれは、タッチパネル、ボタン、及び、音声操作部のいずれかである。
　［表示制御装置］
　上述したように、複数の表示制御装置のそれぞれは、複数の表示装置１０のうちの２以上の表示装置１０への画像を生成することができる。
　表示制御装置は、複数の表示装置１０に跨って表示させる画像を、フレームメモリに書き込むことが可能に構成されている。フレームメモリは、ＯＳ（Ｏｐｅｒａｔｉｎｇ　Ｓｙｓｔｅｍ）等が、１つ以上の物理的なメモリ（非一時的な記録媒体）を用いて、連続した記憶領域を持つように設定する仮想的なメモリである。
　また、表示制御装置は、プロセッサ及びメモリを有するコンピュータシステムである。コンピュータシステムのメモリに記録されたプログラムを、コンピュータシステムのプロセッサが実行することにより、表示制御装置の機能が実現される。プログラムは、メモリに予め記録されていてもよく、インターネット等の通信回線を介して提供されてもよく、メモリカード等の記録媒体に記録された状態で提供されてもよい。
　本実施の形態における図２に示すように、複数の表示制御装置は、第１表示装置１１と対応する第１表示制御装置１１０と、第２表示装置１２と対応する第２表示制御装置１２０とを含む。
　第１表示制御装置１１０及び第２表示制御装置１２０のそれぞれは、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）及びＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）を含むＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ　Ｃｏｎｔｒｏｌ　Ｕｎｉｔ）を主構成としている。第１表示制御装置１１０及び第２表示制御装置１２０のＧＰＵは、例えば、ＯｐｅｎＧＬ（Ｏｐｅｎ　Ｇｒａｐｈｉｃｓ　Ｌｉｂｒａｒｙ）に準拠した描画処理を実行することができる。
　第１表示制御装置１１０は、第１表示装置１１及び第２表示制御装置１２０と通信可能に接続されている。第１表示制御装置１１０は、第１表示装置１１の第１操作部１１ａから第１入力イベントを取得したり、第２表示制御装置１２０から第２入力イベントを取得したりする。第１入力イベント及び第２入力イベントは、入力イベントの一例である。
　図２に示すように、第１表示制御装置１１０は、第１管理部１１１ａと、第１決定部１１２と、第１アプリケーション部１１３と、第１コマンド生成部１１３ａと、第１コマンド送信部１１３ｂと、第１描画部１１４ａと、第１合成部１１４ｂと、第１フレームメモリ１１５と、第１取得部１１１と、第１処理部１１６と、第１通知部１１７とを有する。また、第２表示制御装置１２０は、第２決定部１２２と、第２アプリケーション部１２３と、第２コマンド生成部１２３ａと、第２コマンド送信部１２３ｂと、第２描画部１２４ａと、第２合成部１２４ｂと、第２フレームメモリ１２５と、第２取得部１２１と、第２処理部１２６と、第２通知部１２７とを有する。
　第１管理部１１１ａは、複数の表示装置１０の描画領域の対応関係、第１アプリケーション部１１３及び第２アプリケーション部１２３のウィンドウの表示位置、表示サイズ、及び、表示優先度を管理する。ここで、描画領域の対応関係とは、第１表示装置１１の表示画面の描画領域、及び、第２表示装置１２の表示画面の描画領域を同一の表示座標系で扱った際の位置及び表示サイズの関係を表す。また、表示優先度は複数の第１アプリケーション部１１３及び第２アプリケーション部１２３のウィンドウの表示が重なった場合にどのウィンドウを優先して表示するかを表す値であり、表示が重なった場合は優先度が高いものを手前に表示する。また、第１管理部１１１ａが管理する情報は、記憶部（不図示）に記憶される。記憶部は、情報を一時的に記憶するためのメモリ、ハードディスク等の記録媒体である。
　第１表示制御装置１１０側において、第１決定部１１２は、第１管理部１１１ａから複数の表示装置１０の描画領域の対応関係、複数の第１アプリケーション部１１３のウィンドウの表示位置、表示サイズ、及び、表示優先度を示す情報を取得する。第１決定部１１２は、取得した情報に基づいて、２以上の表示装置１０に跨って画像が表示される際に、２以上の表示装置１０のそれぞれに表示された画像の間で差異が現れないようにする。
　また、第１決定部１１２は、第１表示装置１１にアプリケーションを表示するための表示位置を第１処理部１１６に出力する。また、第１決定部１１２は、アプリケーションの表示位置を第１送信部１１６ａに送信してもよく、第１イベント処理部１１６ｂに送信してもよい。また、図２では、第１決定部１１２がアプリケーションの表示位置を第１処理部１１６に出力しているが、第１管理部１１１ａがアプリケーションの表示位置を第１処理部１１６に出力してもよい。
　第２表示制御装置１２０側において、第２決定部１２２は、第１管理部１１１ａから複数の表示装置１０の描画領域の対応関係、第２アプリケーション部１２３のウィンドウの表示位置、表示サイズ、及び、表示優先度を管理する情報を取得する。第２決定部１２２は、取得した情報に基づいて、２以上の表示装置１０に跨って画像が表示される際に、２以上の表示装置１０のそれぞれに表示された画像の間で差異が現れないようにする。
　また、第２決定部１２２は、第２表示装置１２にアプリケーションを表示するための表示位置を第２処理部１２６に出力する。第２決定部１２２は、アプリケーションの表示位置を第２送信部１２６ａに送信してもよく、第２イベント処理部１２６ｂに送信してもよい。また、アプリケーションの表示位置は、第１管理部１１１ａが第２処理部１２６に出力してもよい。また、図２では、第２決定部１２２がアプリケーションの表示位置を第２処理部１２６に出力しているが、第１管理部１１１ａがアプリケーションの表示位置を第２処理部１２６に出力してもよい。
　第１表示制御装置１１０側において、第１描画部１１４ａは、第１コマンド生成部１１３ａで生成した第１アプリケーション部１１３を描画するための描画コマンド、及び、第２コマンド生成部１２３ａで生成した第２アプリケーション部１２３を描画するための描画コマンドを取得する。第１描画部１１４ａは、第１コマンド送信部１１３ｂを介して第１コマンド生成部１１３ａから取得した描画コマンド、及び、第２コマンド送信部１２３ｂを介して第２コマンド生成部１２３ａから取得した描画コマンドに基づいて、アプリケーションの描画処理を実行する。ここで、描画コマンドとは、ＧＰＵが描画処理を行ってフレームメモリへの書き込み（記憶）を実行させるための命令である。
　また、第１アプリケーション部１１３は、所定のアプリケーションを保有する。第１アプリケーション部１１３は、複数の表示装置１０に同一のアプリケーションを表示させる処理であって、複数の表示制御装置で共通する処理を行う。第１アプリケーション部１１３は、第１表示制御装置１１０において、ハードウェアとしてのＥＣＵのＯＳ上で動作する。第１アプリケーション部１１３は、アプリケーション部の一例である。
　ここで、第１コマンド生成部１１３ａは、第１アプリケーション部１１３の動作によって第１描画部１１４ａ及び第２描画部１２４ａに描画処理を実行させるための描画コマンドを生成し、生成した描画コマンドを、第１コマンド送信部１１３ｂを介して第１描画部１１４ａ及び第２描画部１２４ａに出力する。
　また、第１合成部１１４ｂは、第１決定部１１２から出力された情報に従って、第１描画部１１４ａで描画を行った複数のアプリケーションのウィンドウの切出し、及び合成処理を実行し、第１表示装置１１に表示するアプリケーションである第１画像を第１フレームメモリ１１５に出力する。
　第２表示制御装置１２０側において、第２描画部１２４ａは、第１コマンド生成部１１３ａで生成した第１アプリケーション部１１３を描画するための描画コマンド、及び、第２コマンド生成部１２３ａで生成した第２アプリケーション部１２３を描画するための描画コマンドを取得する。第２描画部１２４ａは、第１コマンド送信部１１３ｂを介して第１コマンド生成部１１３ａから取得した描画コマンド、及び、第２コマンド送信部１２３ｂを介して第２コマンド生成部１２３ａから取得した描画コマンドに基づいて、アプリケーションの描画処理を実行する。
　また、第２アプリケーション部１２３は、所定のアプリケーションを保有する。第２アプリケーション部１２３は、複数の表示装置１０に同一のアプリケーションを表示させる処理であって、複数の表示制御装置で共通する処理を行う。第２アプリケーション部１２３は、第２表示制御装置１２０において、ハードウェアとしてのＥＣＵのＯＳ上で動作する。第２アプリケーション部１２３も、アプリケーション部の一例である。
　ここで、第２コマンド生成部１２３ａは、第２アプリケーション部１２３の動作によって第１描画部１１４ａ及び第２描画部１２４ａに描画処理を実行させるための描画コマンドを生成し、生成した描画コマンドを、第２コマンド送信部１２３ｂを介して第１描画部１１４ａ及び第２描画部１２４ａに出力する。
　また、第２合成部１２４ｂは、第１決定部１１２から出力された情報に従って、第２描画部１２４ａで描画を行った複数のアプリケーションのウィンドウの切出し、及び合成処理を実行し、第２表示装置１２に表示するアプリケーションである第２画像を第２フレームメモリ１２５に出力する。
　フレームメモリには、描画部及び合成部によって生成された画像であって、複数の表示装置１０の表示画面に表示するための画像が書き込まれる。第１表示装置１１と対応する第１フレームメモリ１１５と、第２表示装置１２と対応する第２フレームメモリ１２５はフレームメモリの一例である。
　第１表示制御装置１１０側において、第１フレームメモリ１１５は、第１表示装置１１の表示画面に表示される第１画像の表示内容を記憶するためのフレームバッファである。第１フレームメモリ１１５には、第１描画部１１４ａ及び第１合成部１１４ｂによって描画及び合成を実行した後の第１画像が書き込まれる。第１フレームメモリ１１５は、専用のメモリであってもよいし、コンピュータシステムのメモリのうちの一部の領域で構成されていてもよい。第１フレームメモリ１１５に記憶された第１画像は、出力されることで第１表示装置１１に表示される。
　第２表示制御装置１２０側において、第２フレームメモリ１２５は、第２表示装置１２の表示画面に表示される第２画像の表示内容を記憶するためのフレームバッファである。第２フレームメモリ１２５には、第２描画部１２４ａ及び第２合成部１２４ｂによって描画及び合成を実行した後の第２画像が書き込まれる。第２フレームメモリ１２５も、専用のメモリであってもよいし、コンピュータシステムのメモリのうちの一部の領域で構成されていてもよい。第２フレームメモリ１２５に記憶された第２画像は、出力されることで第２表示装置１２に表示される。
　これにより、第１表示制御装置１１０及び第２表示制御装置１２０は、画像を、２以上の表示装置１０に跨って表示させることができる。具体的には、第１表示制御装置１１０は、第１画像を第１表示装置１１に表示させ、第２表示制御装置１２０は、第２画像を、第２表示装置１２に表示させる。このように、表示制御システム１は、２以上の表示装置１０を連動させることで、全体として纏まりのある１つの表示装置１０に見立てることができるような画像を表示する。
　第１表示制御装置１１０側において、第１取得部１１１は、第１表示装置１１と通信可能に接続され、第１表示装置１１の第１操作部１１ａへの操作に応じて、複数の表示装置１０に表示されている同一のアプリケーションへの入力である第１入力イベントを取得する。つまり、第１取得部１１１は、第１表示装置１１の第１操作部１１ａに入力された第１入力イベントを取得する。第１取得部１１１は、取得した第１入力イベントを第１処理部１１６に出力する。
　第２表示制御装置１２０側において、第２取得部１２１は、第２表示装置１２と通信可能に接続され、第２表示装置１２の第２操作部１２ａへの操作に応じて、複数の表示装置に表示されている同一のアプリケーションへの入力である第２入力イベントを取得する。つまり、第２取得部１２１は、第２表示装置１２の第２操作部１２ａに入力された第２入力イベントを取得する。第２取得部１２１は、取得した第２入力イベントを第２処理部１２６に出力する。
　ここで、第１入力イベントは、第１表示装置１１の第１操作部１１ａに入力された指示である。また、第２入力イベントは、第２表示装置１２の第２操作部１２ａに入力された指示である。例えば、第１入力イベント及び第２入力イベントは、オーディオ機器に対する操作入力、空調装置に対する操作入力等であり、表示されているアプリケーションを更新することでアプリケーションに変化を与える。第１操作部１１ａ及び第２操作部１２ａがタッチパネルである場合、第１入力イベント及び第２入力イベントには、第１操作部１１ａ及び第２操作部１２ａに対して入力した位置、操作種類等が含まれる。操作種類には、タップ操作、スワイプ操作等が含まれる。
　また、第１入力イベント及び第２入力イベントは、複数の表示制御装置のうちの操作対象となる表示制御装置のアプリケーション部を示す情報を含んでいる。例えば、第１操作部１１ａから第２表示制御装置１２０の第２アプリケーション部１２３を操作したい場合、第１操作部１１ａから入力された第１入力イベントには、操作対象となる第２表示制御装置１２０つまり第２アプリケーション部１２３を示す情報である操作対象情報が含まれる。また、第１操作部１１ａから第１表示制御装置１１０の第１アプリケーション部１１３を操作したい場合、第１操作部１１ａから入力された第１入力イベントには、操作対象となる第１表示制御装置１１０つまり第１アプリケーション部１１３を示す情報である操作対象情報が含まれる。
　第１表示制御装置１１０側において、第１処理部１１６は、取得した入力イベントを複数の表示制御装置のうちの少なくとも他の表示制御装置に出力する。
　このとき、第１処理部１１６は、取得した入力イベントに対応する複数の表示制御装置のうちの少なくとも他の表示制御装置に、入力イベントを出力してもよい。つまり、第１処理部１１６は、取得した入力イベントに含まれる操作対象情報の表示制御装置だけに入力イベントを出力してもよい。また、第１処理部１１６は、取得した入力イベントを複数の表示制御装置の全てに、入力イベントを出力してもよい。第１処理部１１６は、処理部の一例である。
　具体的には、第１処理部１１６は、第１送信部１１６ａと、第１イベント処理部１１６ｂとを有する。
　第１送信部１１６ａは、第１取得部１１１から第１入力イベントを取得すると、取得した第１入力イベントに対応する複数の表示制御装置のうちの少なくとも他の表示制御装置、つまり第１入力イベントに含まれる操作対象情報の表示制御装置だけに、第１入力イベントを出力してもよい。この場合、第１送信部１１６ａは、第１表示装置１１にアプリケーションを表示するための表示位置を第１決定部１１２から取得する。
　また、第１送信部１１６ａは、取得した第１入力イベントを複数の表示制御装置の全てに、第１入力イベントを出力してもよい。この場合、第１イベント処理部１１６ｂは、第１表示装置１１にアプリケーションを表示するための表示位置を第１決定部１１２から取得しなくてもよい。
　第１イベント処理部１１６ｂは、入力イベント（例えば、第１入力イベント又は第２入力イベント）を出力した表示制御装置から入力イベントを取得した場合、第１表示装置１１にアプリケーションを表示するための表示位置と、入力イベントに示される操作部に対して入力した位置とを照らし合わせ、操作部で入力された位置がアプリケーションのどの操作に対応するかを特定する。第１イベント処理部１１６ｂは、特定した結果とともに、第１入力イベントを第１通知部１１７に出力する。
　また、第１イベント処理部１１６ｂは、複数の表示制御装置から入力イベントを受け取る場合がある。例えば、第１入力イベントと第２入力イベントとを取得した場合、第１イベント処理部１１６ｂは、以下のような処理を実行する。
　例えば、第１イベント処理部１１６ｂは、複数の表示装置１０のうちの２以上の表示装置１０に同一のアプリケーションを表示する場合において、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第１イベント処理部１１６ｂは、最も優先度の高い操作部からの入力イベントを、第１通知部１１７を介して第１アプリケーション部１１３に通知する。
　また、第１イベント処理部１１６ｂは、複数の操作部のうちの２以上の操作部から同時にアプリケーションを操作する入力がされたときに、２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第１イベント処理部１１６ｂは、最も優先度の高い操作部からの入力イベントを、第１通知部１１７を介して第１アプリケーション部１１３に通知する。
　また、第１イベント処理部１１６ｂは、複数の表示装置１０のうちの２以上の表示装置１０に同一のアプリケーションを表示する場合において、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちの最も使用頻度の高い操作部からの操作を受け付けるという処理を実行してもよい。言い換えれば、運転者が使用する可能性が高い表示装置１０、つまり操作部を優先して優先度が設定されていてもよい。例えば、後部座席のタブレット端末及びスマートフォン、センターディスプレイ、メーターディスプレイのこの並び順で次第に優先度が高くなるように設定されていてもよい。このとき、第１イベント処理部１１６ｂは、最も優先度の高い操作部からの入力イベントを、第１通知部１１７を介して第１アプリケーション部１１３に通知する。
　また、第１イベント処理部１１６ｂは、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちから最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。つまり、タッチパネルに対する操作、ボタンに対する操作、及び、音声操作部に対する操作のこの並び順で次第に優先度が高くなるように設定されている場合、第１イベント処理部１１６ｂは、第１操作部１１ａ及び第２操作部１２ａのうちから最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第１イベント処理部１１６ｂは、最も優先度の高い操作部からの入力イベントを、第１通知部１１７を介して第１アプリケーション部１１３に通知する。
　このように、第１イベント処理部１１６ｂは、複数の入力イベントを取得した場合、いずれかの入力イベントを選択するという処理を実行する。
　また、第１イベント処理部１１６ｂは、車両２が走行中である場合に、複数の操作部のうちの特定の操作部からの入力イベントを受け付けなくてもよい。この場合、受け付けた入力イベントの中から、上述のように、最も優先度の高い操作部からの入力イベントを第１通知部１１７に出力する。なお、車両２が走行中であることの判定は、車両に搭載される車載センサから情報を取得することで判定できる。
　また、第１イベント処理部１１６ｂは、特定の操作部への操作があった場合、特定の操作部への操作が禁止である旨の情報を第１提示部１１８に出力させる処理を実行してもよい。つまり、第１操作部１１ａが特定の操作部である場合、第１提示部１１８は、ユーザによる第１操作部１１ａに対する操作が、禁止である旨の情報を提示する。これにより、ユーザは、自身が行った第１操作部１１ａに対する操作が受け付けられなかったことを認識する。ここで、第１提示部１１８は、文字及び映像等を表示する表示部、音声を出力する音響装置等である。
　第２表示制御装置１２０側において、第２処理部１２６は、取得した入力イベントを複数の表示制御装置のうちの少なくとも他の表示制御装置に出力する。
　このとき、第２処理部１２６は、取得した入力イベントに対応する複数の表示制御装置のうちの少なくとも他の表示制御装置に、入力イベントを出力してもよい。つまり、第２処理部１２６は、取得した入力イベントに含まれる操作対象情報の表示制御装置だけに入力イベントを出力してもよい。また、第２処理部１２６は、取得した入力イベントを複数の表示制御装置の全てに出力してもよい。第２処理部１２６は、処理部の一例である。
　具体的には、第２処理部１２６は、第２送信部１２６ａと、第２イベント処理部１２６ｂとを有する。
　第２送信部１２６ａは、第２取得部１２１から第２入力イベントを取得すると、取得した第２入力イベントに対応する複数の表示制御装置のうちの少なくとも他の表示制御装置、つまり第２入力イベントに含まれる操作対象情報の表示制御装置だけに、第２入力イベントを出力してもよい。この場合、第２送信部１２６ａは、第２表示装置１２にアプリケーションを表示するための表示位置を第２決定部１２２から取得する。
　また、第２送信部１２６ａは、取得した第２入力イベントを複数の表示制御装置の全てに、第２入力イベントを出力してもよい。この場合、第２イベント処理部１２６ｂは、第２表示装置１２にアプリケーションを表示するための表示位置を第２決定部１２２から取得しなくてもよい。
　第２イベント処理部１２６ｂは、入力イベント（例えば、第１入力イベント又は第２入力イベント）を出力した表示制御装置から入力イベントを取得した場合、第２表示装置１２にアプリケーションを表示するための表示位置と、入力イベントに示される操作部に対して入力した位置とを照らし合わせ、操作部で入力された位置がアプリケーションのどの操作に対応するかを特定する。第２イベント処理部１２６ｂは、特定した結果とともに、第２入力イベントを第２通知部１２７に出力する。
　また、第２イベント処理部１２６ｂは、複数の表示制御装置から入力イベントを受け取る場合がある。例えば、第１入力イベントと第２入力イベントとを取得した場合、第２イベント処理部１２６ｂは、以下のような処理を実行する。
　例えば、第２イベント処理部１２６ｂは、複数の表示装置１０のうちの２以上の表示装置１０に同一のアプリケーションを表示する場合において、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第２イベント処理部１２６ｂは、最も優先度の高い操作部からの入力イベントを、第２通知部１２７を介して第２アプリケーション部１２３に通知する。
　また、第２イベント処理部１２６ｂは、複数の操作部のうちの２以上の操作部から同時にアプリケーションを操作する入力がされたときに、２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第２イベント処理部１２６ｂは、最も優先度の高い操作部からの入力イベントを、第２通知部１２７を介して第２アプリケーション部１２３に通知する。
　また、第２イベント処理部１２６ｂは、複数の表示装置１０のうちの２以上の表示装置１０に同一のアプリケーションを表示する場合において、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちの最も使用頻度の高い操作部からの操作を受け付けるという処理を実行してもよい。言い換えれば、運転者が使用する可能性が高い表示装置１０、つまり操作部を優先して優先度が設定されていてもよい。例えば、後部座席のタブレット端末及びスマートフォン、センターディスプレイ、メーターディスプレイのこの並び順で次第に優先度が高くなるように設定されていてもよい。このとき、第２イベント処理部１２６ｂは、最も優先度の高い操作部からの入力イベントを、第２通知部１２７を介して第２アプリケーション部１２３に通知する。
　また、第２イベント処理部１２６ｂは、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちから最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。つまり、タッチパネルに対する操作、ボタンに対する操作、及び、音声操作部に対する操作のこの並び順で次第に優先度が高くなるように設定されている場合、第２イベント処理部１２６ｂは、第１操作部１１ａ及び第２操作部１２ａのうちから最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第２イベント処理部１２６ｂは、最も優先度の高い操作部からの入力イベントを、第２通知部１２７を介して第２アプリケーション部１２３に通知する。
　このように、第２イベント処理部１２６ｂは、複数の入力イベントを取得した場合、いずれかの入力イベントを選択するという処理を実行する。
　また、第２イベント処理部１２６ｂは、車両２が走行中である場合に、複数の操作部のうちの特定の操作部からの入力イベントを受け付けなくてもよい。この場合、受け付けた入力イベントの中から、上述のように、最も優先度の高い操作部からの入力イベントを第２通知部１２７に出力する。
　また、第２イベント処理部１２６ｂは、特定の操作部への操作があった場合、特定の操作部への操作が禁止である旨の情報を第２提示部１２８に出力させる処理を実行してもよい。つまり、第２操作部１２ａが特定の操作部である場合、第２提示部１２８は、ユーザによる第２操作部１２ａに対する操作が、禁止である旨の情報を提示する。これにより、ユーザは、自身が行った第２操作部１２ａに対する操作が受け付けられなかったことを認識する。ここで、第２提示部１２８は、文字及び映像等を表示する表示部、音声を出力する音響装置等である。
　第１表示制御装置１１０側において、第１通知部１１７は、第１処理部１１６が実行した処理を第１アプリケーション部１１３に通知する。第１通知部１１７は、通知部の一例である。
　第２表示制御装置１２０側において、第２通知部１２７は、第２処理部１２６が実行した処理を第２アプリケーション部１２３に通知する。第２通知部１２７は、通知部の一例である。
　＜処理動作＞
　本実施の形態に係る表示制御システム１、表示方法及びプログラムの処理動作について説明する。
　（動作例１）
　図３は、実施の形態における表示制御システム１の処理動作を示すフローチャートである。図３では、第１管理部１１１ａ、第１決定部１１２、第１アプリケーション部１１３、第１コマンド生成部１１３ａ、第１描画部１１４ａ、第１合成部１１４ｂと及び第１フレームメモリ１１５の処理動作について説明する。
　まず、図３に示すように、第１アプリケーション部１１３は、入力イベントを取得することによって更新を行う（Ｓ１１）。例えば、表示装置１０の操作部から取得した入力イベントが第１処理部１１６で処理されて第１通知部１１７から入力イベントを取得したとき、第１アプリケーション部１１３は、取得した入力イベントに応じて更新される。なお、最初に図３のフローチャートを実行する場合、第１アプリケーション部１１３は、初期値に更新される。
　次に第１コマンド生成部１１３ａは、第１アプリケーション部１１３の動作によって第１描画部１１４ａ及び第２描画部１２４ａに描画処理を実行させるための描画コマンドを生成する。また、第２コマンド生成部１２３ａは、第２アプリケーション部１２３の動作によって第１描画部１１４ａ及び第２描画部１２４ａに描画処理を実行させるための描画コマンドを生成する（Ｓ１２）。
　次に第１コマンド生成部１１３ａは、生成した描画コマンドを第１描画部１１４ａ及び第２描画部１２４ａに出力する。また、第２コマンド生成部１２３ａは、生成した描画コマンドを第１描画部１１４ａ及び第２描画部１２４ａに出力する（Ｓ１３）。
　次に第１描画部１１４ａ及び第２描画部１２４ａのそれぞれは、第１コマンド生成部１１３ａ及び第２コマンド生成部１２３ａから描画コマンドを取得する（Ｓ１４）。
　次に第１描画部１１４ａは、コマンド生成部から取得した描画コマンドに従って、第１表示装置１１に表示する第１アプリケーション部１１３又は第２アプリケーション部１２３に対して、アプリケーションの描画処理を実行する（Ｓ１５）。
　また、第２表示装置１２において、具体的には、第２描画部１２４ａは、コマンド生成部から取得した描画コマンドに従って、第２表示装置１２に表示する第１アプリケーション部１１３又は第２アプリケーション部１２３に対して、アプリケーションの描画処理を実行する（Ｓ１５）。
　次に、第１合成部１１４ｂは、第１決定部１１２から出力された情報に従って、第１描画部１１４ａで描画を行った複数のアプリケーションのウィンドウの切出し、及び合成処理を実行し、第１表示装置１１に表示する第１画像を第１フレームメモリ１１５に出力する（Ｓ１６）。
　また、第２合成部１２４ｂは、第１決定部１１２から出力された情報に従って、第２描画部１２４ａで描画を行った複数のアプリケーションのウィンドウの切出し、及び合成処理を実行し、第２表示装置１２に表示する第２画像を第２フレームメモリ１２５に出力する（Ｓ１６）。
　第１フレームメモリ１１５には、第１描画部１１４ａ及び第１合成部１１４ｂによって描画及び合成を実行した後の第１画像が書き込まれ、第２フレームメモリ１２５には、第２描画部１２４ａ及び第２合成部１２４ｂによって描画及び合成を実行した後の第２画像が書き込まれる（Ｓ１７）。
　第１表示装置１１には、第１フレームメモリ１１５から出力された第１画像が表示画面に表示され、第２表示装置１２には、第２フレームメモリ１２５から出力された第２画像が表示画面に表示される（Ｓ１８）。
　そして、表示制御システム１は、ステップＳ１８の処理を実行した後、次のフレームでステップＳ１１に処理を戻すことで、描画処理及び合成処理を行う。
　なお、図３の表示制御システム１の処理動作を停止させたり、表示制御システム１の電源をＯＦＦにしたりすること等によって、図３のフローチャートは終了する。
　（動作例２）
　図４は、実施の形態における表示制御システム１の処理動作を示す別のフローチャートである。図４では、第１取得部１１１、第１入力イベントが第２表示制御装置１２０に対応する場合の処理動作について説明する。第２入力イベントが第１表示制御装置１１０に対応する場合、第１入力イベントが第１表示制御装置１１０及び第２表示制御装置１２０に対応する場合、第２入力イベントが第１表示制御装置１１０及び第２表示制御装置１２０に対応する場合の処理動作についても同様であるため、説明を省略する。
　まず、図４に示すように、第１取得部１１１は、第１表示装置１１の第１操作部１１ａへの操作に応じたアプリケーションへの入力である入力イベント、つまり第１入力イベントを取得する（Ｓ２１）。第１取得部１１１は、取得した第１入力イベントを第１処理部１１６に出力する。
　次に、第１処理部１１６の第１送信部１１６ａは、第１入力イベントを取得すると、第１入力イベントが複数の表示制御装置のうちのどの表示制御装置に対応するかを判定する。つまり、第１送信部１１６ａは、第１入力イベントに含まれる操作対象情報に基づいて、複数の表示制御装置のうちから１以上の表示制御装置を特定する。第１送信部１１６ａは、特定した１以上の表示制御装置、つまり対応する表示制御装置であり少なくとも他の表示制御装置に第１入力イベントを出力する（Ｓ２２）。本動作例では、第１入力イベントに対応する表示制御装置は第２表示制御装置１２０と設定している。このため、第１送信部１１６ａは、第２表示制御装置１２０の第２処理部１２６に第１入力イベントを出力する。
　次に、第２イベント処理部１２６ｂは、入力イベント、つまり第１入力イベントを取得する（Ｓ２３）。
　次に、第２イベント処理部１２６ｂは、複数の入力イベントを取得したか否かを判定する（Ｓ２４）。
　第１イベント処理部１１６ｂは、複数の入力イベントを取得したことを判定した場合（Ｓ２４でＹＥＳ）、複数の入力イベントからいずれかの入力イベントを選択する（Ｓ２５）。
　ここで、複数の入力イベントからいずれかの入力イベントを選択する場合について説明する。
　例えば、第２イベント処理部１２６ｂは、第１表示装置１１及び第２表示装置１２に同一のアプリケーションを表示する場合において、第１操作部１１ａ及び第２操作部１２ａに対して同一のアプリケーションを操作する入力がされたときに、予め設定された最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第２イベント処理部１２６ｂは、最も優先度の高い操作部からの入力イベントを第２通知部１２７に出力する。
　また、第２イベント処理部１２６ｂは、第１操作部１１ａ及び第２操作部１２ａに対して同時にアプリケーションを操作する入力がされたときに、予め設定された最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第２イベント処理部１２６ｂは、最も優先度の高い操作部からの入力イベントを第２通知部１２７に出力する。
　また、第２イベント処理部１２６ｂは、第１表示装置１１及び第２表示装置１２に同一のアプリケーションを表示する場合において、第１操作部１１ａ及び第２操作部１２ａに対して同一のアプリケーションを操作する入力がされたときに、最も使用頻度の高い操作部からの操作を受け付けてもよい。このとき、第２イベント処理部１２６ｂは、最も優先度の高い操作部からの入力イベントを第２通知部１２７に出力する。
　また、第１イベント処理部１１６ｂは、タッチパネルに対する操作、ボタンに対する操作、及び、音声操作部に対する操作のこの並び順で次第に優先度が高くなるように設定されている場合、第１操作部１１ａ及び第２操作部１２ａのうちから最も優先度の高い操作部からの操作を受け付けるという処理を実行してもよい。このとき、第１イベント処理部１１６ｂは、最も優先度の高い操作部からの入力イベントを第２通知部１２７に出力する。
　また、第１イベント処理部１１６ｂは、車両２が走行中である場合に、複数の操作部のうちの特定の操作部からの入力イベントを受け付けなくてもよい。この場合、受け付けた入力イベントの中から、上述のように、第１イベント処理部１１６ｂは、最も優先度の高い操作部からの入力イベントを第２通知部１２７に出力する。
　例えば、第１操作部１１ａ又は第２操作部１２ａが特定の操作部として予め設定されている場合、第２イベント処理部１２６ｂは、第２取得部１２１が取得した第１入力イベントを破棄し、第２イベント処理部１２６ｂが第１表示制御装置１１０から取得した第１入力イベントを第２通知部１２７に出力するという処理を実行する。
　なお、第２イベント処理部１２６ｂは、特定の操作部への操作があった場合、特定の操作部への操作が禁止である旨の情報を第２提示部１２８に出力させる処理を実行してもよい。
　そして、第２イベント処理部１２６ｂは、入力イベントを選択してステップＳ２６に進める。
　一方、第２イベント処理部１２６ｂは、複数の入力イベントを取得していないことを判定した場合（Ｓ２４でＮＯ）、ステップＳ２６に進める。
　次に、第２イベント処理部１２６ｂは、取得した第１入力イベントを第２通知部１２７に出力する。これにより、第２通知部１２７は、取得した入力イベントを対象のアプリケーション部に通知する（Ｓ２６）。そして、第２表示制御装置１２０は、ステップＳ１１の処理動作に進み、同様の処理を繰返す。
　＜作用効果＞
　次に、本実施の形態に係る表示制御システム１、表示方法及びプログラムの作用効果について説明する。
　上述したように、本実施の形態に係る表示制御システム１は、複数の表示装置１０のそれぞれに対応する複数の表示制御装置を備え、複数の表示制御装置を連携させて、複数の表示装置１０に同一のアプリケーションを表示させる表示制御システム１である。複数の表示制御装置のそれぞれは、操作に応じたアプリケーションへの入力である入力イベントを取得する取得部（第１取得部１１１及び第２取得部１２１）と、取得した入力イベントを複数の表示制御装置のうちの少なくとも他の表示制御装置に出力する処理部（第１処理部１１６及び第２処理部１２６）と、複数の表示制御装置のうちの入力イベントを出力した表示制御装置から処理部が入力イベントを取得した場合、入力イベントをアプリケーション部に通知する通知部（第１通知部１１７及び第２通知部１２７）とを有する。そして、アプリケーション部は、複数の表示装置１０に同一のアプリケーションを表示させる処理であって、複数の表示制御装置で共通する処理を行う。
　これによれば、処理部が自身の表示制御装置以外の別の表示制御装置から入力イベントを取得することができるため、別の表示制御装置から取得した入力イベントをアプリケーション部に通知することができる。これにより、表示装置は、入力イベントに基づいて更新したアプリケーションを表示することができる。
　したがって、アプリケーションがどの表示制御装置に対応していても、アプリケーションを操作可能なシステムを簡易に実現することができる。
　また、本実施の形態に係る表示制御方法において、複数の表示装置１０のそれぞれに対応する複数の表示制御装置を連携させて、複数の表示装置１０に同一のアプリケーションを表示させる表示制御方法であって、操作に応じたアプリケーションへの入力である入力イベントを取得し、取得した入力イベントを複数の表示制御装置のうちの少なくとも他の表示制御装置に入力イベントを出力し、複数の表示制御装置のうちの入力イベントを出力した表示制御装置から処理部が入力イベントを取得した場合、入力イベントをアプリケーション部に通知することと、アプリケーション部は、複数の表示装置に同一のアプリケーションを表示させる処理であって、複数の表示制御装置で共通する処理を行うことを含む。
　この方法においても、上述と同様の作用効果を奏する。
　また、本実施の形態に係るプログラムは、表示制御方法をコンピュータに実行させるためのプログラムである。
　このプログラムにおいても、上述と同様の作用効果を奏する。
　また、本実施の形態に係る表示制御システム１において、処理部は、取得した入力イベントに対応する複数の表示制御装置のうちの少なくとも他の表示制御装置に、入力イベントを出力する。
　これによれば、操作したいアプリケーションに対して、入力イベントに対応する対象の表示制御装置だけに入力イベントを送信することができる、つまり、対象以外の表示制御装置に対して入力イベントを送信しなくてもよくなる。このため、表示制御システム１における通信量の増大を抑制することができる。
　また、本実施の形態に係る表示制御システム１において、処理部は、取得した入力イベントを複数の表示制御装置の全てに出力する。
　これによれば、入力イベントを、全の表示制御装置に対して送信することができるため、処理部の処理を簡易にすることができる。
　また、本実施の形態に係る表示制御システム１において、表示制御システム１は、車両２に搭載されている。また、複数の表示装置１０のそれぞれには、操作によって入力イベントを出力する操作部が設けられている。そして、処理部は、車両２が走行中である場合に、複数の操作部のうちの特定の操作部からの入力イベントを受け付けない。
　これによれば、車両２が走行中の場合、特定の操作部以外の入力イベントを受け付けないようにすることができるため、例えば、運転者は音声操作等の特定の操作部以外の入力イベントを受け付けないようにすることで、運転中のタッチパネル操作等による余所見を抑制することが可能となる。
　また、本実施の形態に係る表示制御システム１において、処理部は、特定の操作部への操作があった場合、特定の操作部への操作が禁止である旨の情報を提示部に出力させる。
　これによれば、処理部は、特定の操作部からの入力イベントを取得しても、取得した入力イベントを破棄することができる。このため、入力イベントに対応する表示制御装置に対して当該入力イベントを送信しなくてもよくなる。その結果、表示制御システム１における通信量の増大を抑制することができる。
　また、運転者は音声操作等の特定の操作部以外の入力イベントを受け付けないようにすることで、運転中のタッチパネル操作等による余所見を防ぐことが可能となる。
　また、本実施の形態に係る表示制御システム１において、複数の表示装置１０のそれぞれには、操作によって入力イベントを出力する操作部が設けられている。処理部は、複数の表示装置１０のうちの２以上の表示装置１０に同一のアプリケーションを表示する場合において、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付け、最も優先度の高い操作部からの入力イベントを、通知部を介してアプリケーション部に通知する。
　これによれば、複数の操作部から同一のアプリケーションを操作する複数の入力イベントを取得した場合であっても、予め設定された最も優先度が高く設定されている操作部からの入力イベントだけを受け付けることができる。このため、処理部が複数の入力イベントを取得しても、アプリケーション部は、優先度の最も高い操作部からの入力イベントだけを受け付けることができる。
　また、本実施の形態に係る表示制御システム１において、複数の表示装置１０のそれぞれには、操作によって入力イベントを出力する操作部が設けられている。処理部は、複数の操作部のうちの２以上の操作部から同時にアプリケーションを操作する入力がされたときに、２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付け、最も優先度の高い操作部からの入力イベントを、通知部を介してアプリケーション部に通知する。
　これによれば、複数の操作部から同一のアプリケーションを操作する複数の入力イベントを同時に取得した場合であっても、予め設定された最も優先度が高く設定されている操作部からの入力イベントだけを受け付けることができる。このため、処理部が同時に複数の入力イベントを取得しても、アプリケーションは、優先度の最も高い操作部からの入力イベントだけを受け付けることができる。
　また、本実施の形態に係る表示制御システム１において、複数の表示装置１０のそれぞれには、操作によって入力イベントを出力する操作部が設けられている。処理部は、複数の表示装置１０のうちの２以上の表示装置１０に同一のアプリケーションを表示する場合において、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちの最も使用頻度の高い操作部からの操作を受け付け、最も優先度の高い操作部からの入力イベントを、通知部を介してアプリケーション部に通知する。
　これによれば、複数の操作部から同一のアプリケーションを操作する入力イベントを取得した場合であっても、使用頻度が高く設定されている操作部からの入力イベントだけを受け付けることができる。例えば、運転者は車両２に搭載されている複数の操作部を頻繁に操作するため、運転者による操作部への入力イベントを優先させることができる。
　また、本実施の形態に係る表示制御システム１において、複数の操作部は、タッチパネル、ボタン、又は、操作音声操作部を含む。
　これによれば、操作部の種類が異なっても、別の表示制御装置から取得した入力イベントをアプリケーション部に通知することができる。これにより、アプリケーション部は、入力イベントに基づいて更新することができる。
　また、本実施の形態に係る表示制御システム１において、複数の操作部には、タッチパネル、ボタン、又は、音声操作部を含む。また、タッチパネルに対する操作、ボタンに対する操作、及び、音声操作部に対する操作のこの並び順で次第に優先度が高くなるように設定され、処理部は、複数の操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、２以上の操作部のうちから最も優先度の高い操作部からの操作を受け付ける。
　これによれば、運転中の運転者が使用する可能性が高い操作部を優先することができるため、運転者における操作の快適性を損ね難い。
　（その他の変形例）
　以上、本開示に係る表示制御システム、表示制御方法及びプログラムについて、上記各実施の形態に基づいて説明したが、本開示は、これらの実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が思い付く各種変形を実施の形態に施したものも、本開示の範囲に含まれてもよい。
　例えば、上記実施の形態に係る表示制御システム、表示制御方法及びプログラムに含まれる各処理部、管理部、決定部等は典型的に集積回路であるＬＳＩとして実現される。これらは個別に１チップ化されてもよいし、一部又は全を含むように１チップ化されてもよい。
　また、集積回路化はＬＳＩに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。ＬＳＩ製造後にプログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）、又はＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。
　なお、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、ＣＰＵ又はプロセッサ等のプログラム実行部が、ハードディスク又は半導体メモリ等の記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。
　また、上記で用いた数字は、本開示を具体的に説明するために例示するものであり、本開示の実施の形態は例示された数字に制限されない。
　また、ブロック図における機能ブロックの分割は一例であり、複数の機能ブロックを一つの機能ブロックとして実現したり、一つの機能ブロックを複数に分割したり、一部の機能を他の機能ブロックに移してもよい。また、類似する機能を有する複数の機能ブロックの機能を単一のハードウェア又はソフトウェアが並列又は時分割に処理してもよい。
　また、フローチャートにおける各ステップが実行される順序は、本開示を具体的に説明するために例示するためであり、上記以外の順序であってもよい。また、上記ステップの一部が、他のステップと同時（並列）に実行されてもよい。
　なお、上記の各実施の形態に対して当業者が思い付く各種変形を施して得られる形態や、本開示の趣旨を逸脱しない範囲で各実施の形態における構成要素及び機能を任意に組み合わせることで実現される形態も本開示に含まれる。
　本開示は、例えば複数の表示装置を搭載した車両、車両以外のその他の装置及びシステムに利用可能である。
　１　表示制御システム
　２　車両
　１０　表示装置
　１１ａ　第１操作部（操作部）
　１２ａ　第２操作部（操作部）
　１１０　第１表示制御装置（表示制御装置）
　１１１　第１取得部（取得部）
　１１３　第１アプリケーション部（アプリケーション部）
　１２３　第２アプリケーション部（アプリケーション部）
　１１６　第１処理部（処理部）
　１１７　第１通知部（通知部）
　１１８　第１提示部（提示部）
　１２０　第２表示制御装置（表示制御装置）
　１２１　第２取得部（取得部）
　１２６　第２処理部（処理部）
　１２７　第２通知部（通知部）
　１２８　第２提示部（提示部）

Claims (12)

  1. 　複数の表示装置のそれぞれに対応する複数の表示制御装置を備え、前記複数の表示制御装置を連携させて、前記複数の表示装置に同一のアプリケーションを表示させる表示制御システムであって、
    　前記複数の表示制御装置のそれぞれは、
    　　操作に応じたアプリケーションへの入力である入力イベントを取得する取得部と、
    　　取得した前記入力イベントを前記複数の表示制御装置のうちの少なくとも他の表示制御装置に出力する処理部と、
    　　前記複数の表示制御装置のうちの前記入力イベントを出力した表示制御装置から前記処理部が前記入力イベントを取得した場合、前記入力イベントをアプリケーション部に通知する通知部とを有し、
    　前記アプリケーション部は、前記複数の表示装置に同一のアプリケーションを表示させる処理であって、複数の前記表示制御装置で共通する処理を行う
    　表示制御システム。
  2. 　前記処理部は、取得した前記入力イベントに対応する前記複数の表示制御装置のうちの少なくとも他の表示制御装置に、前記入力イベントを出力する
    　請求項１に記載の表示制御システム。
  3. 　前記処理部は、取得した前記入力イベントを前記複数の表示制御装置の全てに出力する
    　請求項１に記載の表示制御システム。
  4. 　前記表示制御システムは、車両に搭載され、
    　前記複数の表示装置のそれぞれには、操作によって前記入力イベントを出力する操作部が設けられ、
    　前記処理部は、前記車両が走行中である場合に、複数の前記操作部のうちの特定の操作部からの前記入力イベントを受け付けない
    　請求項１～３の何れか１項に記載の表示制御システム。
  5. 　前記処理部は、前記特定の操作部への操作があった場合、前記特定の操作部への操作が禁止である旨の情報を提示部に出力させる
    　請求項４に記載の表示制御システム。
  6. 　前記複数の表示装置のそれぞれには、操作によって前記入力イベントを出力する操作部が設けられ、
    　前記処理部は、
    　　前記複数の表示装置のうちの２以上の表示装置に同一のアプリケーションを表示する場合において、複数の前記操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、前記２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付け、
    　　前記最も優先度の高い操作部からの前記入力イベントを、前記通知部を介して前記アプリケーション部に通知する
    　請求項１～３の何れか１項に記載の表示制御システム。
  7. 　前記複数の表示装置のそれぞれには、操作によって前記入力イベントを出力する操作部が設けられ、
    　前記処理部は、
    　　複数の前記操作部のうちの２以上の操作部から同時にアプリケーションを操作する入力がされたときに、前記２以上の操作部のうちから予め設定された最も優先度の高い操作部からの操作を受け付け、
    　　前記最も優先度の高い操作部からの前記入力イベントを、前記通知部を介して前記アプリケーション部に通知する
    　請求項１～３の何れか１項に記載の表示制御システム。
  8. 　前記複数の表示装置のそれぞれには、操作によって前記入力イベントを出力する操作部が設けられ、
    　前記処理部は、
    　　前記複数の表示装置のうちの２以上の表示装置に同一のアプリケーションを表示する場合において、複数の前記操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、前記２以上の操作部のうちの最も使用頻度の高い操作部からの操作を受け付け、
    　　前記最も優先度の高い操作部からの前記入力イベントを、前記通知部を介して前記アプリケーション部に通知する
    　請求項１～３の何れか１項に記載の表示制御システム。
  9. 　複数の前記操作部は、タッチパネル、ボタン、又は、操作音声操作部を含む
    　請求項４～８のいずれか１項に記載の表示制御システム。
  10. 　複数の前記操作部には、タッチパネル、ボタン、又は、音声操作部を含み、
    　前記タッチパネルに対する操作、前記ボタンに対する操作、及び、前記音声操作部に対する操作のこの並び順で次第に優先度が高くなるように設定され、
    　前記処理部は、複数の前記操作部のうちの２以上の操作部から同一のアプリケーションを操作する入力がされたときに、前記２以上の操作部のうちから最も優先度の高い操作部からの操作を受け付ける
    　請求項８に記載の表示制御システム。
  11. 　複数の表示装置のそれぞれに対応する複数の表示制御装置を連携させて、前記複数の表示装置に同一のアプリケーションを表示させる表示制御方法であって、
    　　操作に応じたアプリケーションへの入力である入力イベントを取得し、
    　　取得した前記入力イベントを前記複数の表示制御装置のうちの少なくとも他の表示制御装置に前記入力イベントを出力し、
    　　前記複数の表示制御装置のうちの前記入力イベントを出力した表示制御装置から前記入力イベントを取得した場合、前記入力イベントをアプリケーション部に通知することと、
    　前記アプリケーション部は、前記複数の表示装置に同一のアプリケーションを表示させる処理であって、複数の前記表示制御装置で共通する処理を行うことを含む
    　表示制御方法。
  12. 　請求項１１に記載の表示制御方法をコンピュータに実行させるための
    　プログラム。
PCT/JP2022/045602 2021-12-27 2022-12-12 表示制御システム、表示制御方法及びプログラム WO2023127467A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202280083773.3A CN118435270A (zh) 2021-12-27 2022-12-12 显示控制系统、显示控制方法以及程序
US18/742,348 US20240329909A1 (en) 2021-12-27 2024-06-13 Display control system, display control method, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021212178A JP2023096417A (ja) 2021-12-27 2021-12-27 表示制御システム、表示制御方法及びプログラム
JP2021-212178 2021-12-27

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/742,348 Continuation US20240329909A1 (en) 2021-12-27 2024-06-13 Display control system, display control method, and recording medium

Publications (1)

Publication Number Publication Date
WO2023127467A1 true WO2023127467A1 (ja) 2023-07-06

Family

ID=86998615

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/045602 WO2023127467A1 (ja) 2021-12-27 2022-12-12 表示制御システム、表示制御方法及びプログラム

Country Status (4)

Country Link
US (1) US20240329909A1 (ja)
JP (1) JP2023096417A (ja)
CN (1) CN118435270A (ja)
WO (1) WO2023127467A1 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06266666A (ja) * 1993-03-11 1994-09-22 Hitachi Ltd 遠隔ウィンドウ制御システム
US20040201628A1 (en) * 2003-04-08 2004-10-14 Johanson Bradley E. Pointright: a system to redirect mouse and keyboard control among multiple machines
US20170243560A1 (en) * 2016-02-18 2017-08-24 Astro HQ LLC Event latency mitigation and screen selection
US20190294400A1 (en) * 2018-03-26 2019-09-26 Samsung Electronics Co., Ltd. Mobile electronic device and method for forwarding user input to application according to input means
JP2020106992A (ja) * 2018-12-26 2020-07-09 本田技研工業株式会社 表示装置、表示方法、およびプログラム
JP2021028660A (ja) * 2019-08-09 2021-02-25 株式会社デンソー コンテントの表示制御装置、表示制御方法及び表示制御プログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06266666A (ja) * 1993-03-11 1994-09-22 Hitachi Ltd 遠隔ウィンドウ制御システム
US20040201628A1 (en) * 2003-04-08 2004-10-14 Johanson Bradley E. Pointright: a system to redirect mouse and keyboard control among multiple machines
US20170243560A1 (en) * 2016-02-18 2017-08-24 Astro HQ LLC Event latency mitigation and screen selection
US20190294400A1 (en) * 2018-03-26 2019-09-26 Samsung Electronics Co., Ltd. Mobile electronic device and method for forwarding user input to application according to input means
JP2020106992A (ja) * 2018-12-26 2020-07-09 本田技研工業株式会社 表示装置、表示方法、およびプログラム
JP2021028660A (ja) * 2019-08-09 2021-02-25 株式会社デンソー コンテントの表示制御装置、表示制御方法及び表示制御プログラム

Also Published As

Publication number Publication date
JP2023096417A (ja) 2023-07-07
US20240329909A1 (en) 2024-10-03
CN118435270A (zh) 2024-08-02

Similar Documents

Publication Publication Date Title
JP7203362B2 (ja) 表示制御システム、表示システム、移動体、表示制御方法及びプログラム
US7880602B2 (en) Image display control apparatus
CN103063224A (zh) 用于操作导航系统的方法
JP2021172108A (ja) 表示制御装置、表示制御方法及びプログラム
US8571782B2 (en) Computer system for use in vehicles
US11922089B2 (en) Vehicle controller, vehicle display system, and vehicle display control method using a single display processing unit for displaying link images
WO2023127467A1 (ja) 表示制御システム、表示制御方法及びプログラム
KR20230148341A (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이장치
JP6033465B2 (ja) 表示制御装置
JP7474179B2 (ja) 表示制御装置、及び表示制御方法
US20220327986A1 (en) Signal processing device and vehicle display apparatus including the same
CN113348436B (zh) 显示控制系统及方法、显示装置及方法、移动体、记录介质
JP2008026450A (ja) 表示処理装置
WO2022209246A1 (ja) 表示制御システム、表示方法及びプログラム
JP5073608B2 (ja) 画像出力装置、画像出力方法、及びプログラム
WO2007032487A1 (ja) データ入出力制御システムおよび移動体搭載用表示システム
JP7564202B2 (ja) 表示制御装置、及び表示制御方法
JP2024051509A (ja) 車両用表示装置、車両用表示方法及びプログラム
JP7564203B2 (ja) 表示制御装置、及び表示制御方法
US20240212092A1 (en) Information processing device
JP6180306B2 (ja) 表示制御装置及び表示制御方法
JP2024038699A (ja) 車両用情報提供システム、車両用情報提供方法及びプログラム
JP2022072281A (ja) 表示システム、表示制御装置、表示制御方法及びプログラム
CN114816306A (zh) 一种屏幕共享的控制方法、装置、电子设备及存储介质
JP6004984B2 (ja) 地図描画装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22915691

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 202280083773.3

Country of ref document: CN