WO2024071947A1 - 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치 - Google Patents

신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치 Download PDF

Info

Publication number
WO2024071947A1
WO2024071947A1 PCT/KR2023/014739 KR2023014739W WO2024071947A1 WO 2024071947 A1 WO2024071947 A1 WO 2024071947A1 KR 2023014739 W KR2023014739 W KR 2023014739W WO 2024071947 A1 WO2024071947 A1 WO 2024071947A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal processing
data
processing device
communication
processor
Prior art date
Application number
PCT/KR2023/014739
Other languages
English (en)
French (fr)
Inventor
이동규
김현규
박남용
이철희
윤태석
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of WO2024071947A1 publication Critical patent/WO2024071947A1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/023—Avoiding failures by using redundant parts
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/04—Monitoring the functioning of the control system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles

Definitions

  • the present disclosure relates to a signal processing device and a vehicle display device equipped with the same, and more specifically, to a signal processing device that can quickly and stably transmit data through various communication methods and a vehicle display device provided therewith.
  • a vehicle is a device that moves the user in the desired direction.
  • a representative example is a car.
  • a vehicle signal processing device is installed inside the vehicle.
  • a signal processing device inside a vehicle receives and processes sensor data from various sensor devices inside the vehicle.
  • ADAS vehicle driver assistance
  • autonomous driving the data that must be processed is increasing.
  • the problem that the present disclosure aims to solve is to provide a signal processing device that can quickly and stably transmit data through various communication methods and a vehicle display device equipped with the same.
  • Another problem that the present disclosure aims to solve is that data can be transmitted quickly and stably based on a safety level.
  • Another problem that the present disclosure aims to solve is to provide a signal processing device that can efficiently process data using microservices and a vehicle display device equipped with the same.
  • a signal processing device and a vehicle display device including the same include a processor having a plurality of processor cores, the processor executes a plurality of virtualization machines on a hypervisor, and the plurality of virtualization machines
  • the first virtual machine transmits first data to the second virtual machine based on one of the heterogeneous data communication methods, and processes other external signals based on one of the heterogeneous data communication methods. Transmit second data to the device.
  • one of the communication methods from the first virtualization machine to the second virtual machine may be the same as one of the communication methods from the first virtualization machine to another external signal processing device.
  • a signal processing device according to an embodiment of the present disclosure and a vehicle display device including the same further include an Ethernet switch for Ethernet communication and a second switch for high-speed connection communication with an external component, and the first virtual machine is , the second data can be transmitted to another external signal processing device through Ethernet communication or high-speed connection communication with an external component.
  • the first virtual machine may transmit first data to the second virtual machine through shared memory within the hypervisor or Ethernet communication.
  • the processor runs an operating system on the hypervisor, and the service provider in the first virtual machine sends first data to a service subscriber in the first virtual machine through shared memory in the operating system. Can be transmitted.
  • the first virtual machine may transmit second data to the second signal processing device or area signal processing device through Ethernet communication or external component high-speed connection communication.
  • the area signal processing device converts the received sensor data into an Ethernet signal based on CAN communication and transmits it, and the first virtual machine can receive the sensor data converted into an Ethernet signal through Ethernet communication. .
  • the processor may transmit an image signal to the display based on any one of heterogeneous data communication methods.
  • the processor may transmit an image signal to the display based on a low voltage differential signaling method or a Serdes method.
  • a signal processing device and a vehicle display device including the same further include a second processor including a plurality of processor cores of the first type and a processor core of a second type different from the plurality of processor cores of the first type, and the processor Can transmit third data to the second processor based on inter platform communication (Inter platform communication and IPC).
  • a second processor including a plurality of processor cores of the first type and a processor core of a second type different from the plurality of processor cores of the first type
  • the processor Can transmit third data to the second processor based on inter platform communication (Inter platform communication and IPC).
  • the first virtual machine executes a first application or a microservice corresponding to the first application in the first safety level or a second safety level higher than the first safety level, and the second processor runs the first safety level in the second safety level.
  • a second application or a microservice corresponding to the second application may be executed.
  • the first virtual machine runs a first application or a microservice corresponding to the first application at the first safety level or a second safety level higher than the first safety level
  • the second virtualization machine runs at the second safety level.
  • the first virtual machine may receive result data of the micro service from an external area signal processing device through Ethernet communication, and transmit the received result data to a second virtual machine with the same or lower security level. there is.
  • the processor may receive periodic sensor data or camera data from an external area signal processing device through Ethernet communication.
  • the processor may transmit time synchronization control data to an external area signal processing device.
  • the first virtual machine may process camera data received through Ethernet communication and transmit the processed data to the second virtual machine based on any one of heterogeneous data communication methods.
  • the processor can transmit an audio signal based on the automotive audio bus to the audio output unit.
  • the first virtual machine may transmit first data to a second virtual machine with the same or lower security level, and transmit second data to another external signal processing device with the same or lower security level.
  • a signal processing device and a vehicle display device including the same include a processor having a plurality of processor cores, the processor executes a plurality of virtualization machines on a hypervisor, and the plurality of virtualization machines
  • the first virtual machine transmits first data to the second virtual machine based on one of the heterogeneous data communication methods, and processes other external signals based on one of the heterogeneous data communication methods. Transmit second data to the device. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • one of the communication methods from the first virtualization machine to the second virtual machine may be the same as one of the communication methods from the first virtualization machine to another external signal processing device. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • a signal processing device according to an embodiment of the present disclosure and a vehicle display device including the same further include an Ethernet switch for Ethernet communication and a second switch for high-speed connection communication with an external component, and the first virtual machine is , the second data can be transmitted to another external signal processing device through Ethernet communication or high-speed connection communication with an external component. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first virtual machine may transmit first data to the second virtual machine through shared memory within the hypervisor or Ethernet communication. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the processor runs an operating system on the hypervisor, and the service provider in the first virtual machine sends first data to a service subscriber in the first virtual machine through shared memory in the operating system. Can be transmitted. Accordingly, data can be transmitted quickly and reliably to service subscribers.
  • the first virtual machine may transmit second data to the second signal processing device or area signal processing device through Ethernet communication or external component high-speed connection communication. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the area signal processing device converts the received sensor data into an Ethernet signal based on CAN communication and transmits it, and the first virtual machine can receive the sensor data converted into an Ethernet signal through Ethernet communication. . Accordingly, sensor data can be received quickly and stably.
  • the processor may transmit an image signal to the display based on any one of heterogeneous data communication methods. Accordingly, it is possible to quickly and stably transmit video signals through various communication methods.
  • the processor can transmit an image signal to the display based on a low voltage differential signaling method or a Serdes method. Accordingly, the image signal can be quickly and stably transmitted through various communication methods. can be transmitted.
  • a signal processing device and a vehicle display device including the same further include a second processor including a plurality of processor cores of the first type and a processor core of a second type different from the plurality of processor cores of the first type, and the processor Can transmit third data to the second processor based on inter platform communication (Inter platform communication and IPC). Accordingly, third data can be transmitted quickly and stably.
  • a second processor including a plurality of processor cores of the first type and a processor core of a second type different from the plurality of processor cores of the first type
  • the processor Can transmit third data to the second processor based on inter platform communication (Inter platform communication and IPC). Accordingly, third data can be transmitted quickly and stably.
  • the first virtual machine executes a first application or a microservice corresponding to the first application in the first safety level or a second safety level higher than the first safety level
  • the second processor runs the first safety level in the second safety level.
  • a second application or a microservice corresponding to the second application may be executed. Accordingly, it is possible to run applications or microservices corresponding to the safety level. Furthermore, data processing can be performed efficiently using microservices.
  • the first virtual machine runs a first application or a microservice corresponding to the first application at the first safety level or a second safety level higher than the first safety level
  • the second virtualization machine runs at the second safety level.
  • the first virtual machine may receive result data of the micro service from an external area signal processing device through Ethernet communication, and transmit the received result data to a second virtual machine with the same or lower safety level.
  • data can be transmitted quickly and reliably based on safety levels.
  • data processing can be performed efficiently using microservices.
  • the processor may receive periodic sensor data or camera data from an external area signal processing device through Ethernet communication. Accordingly, sensor data can be transmitted quickly and stably.
  • the processor may transmit time synchronization control data to an external area signal processing device. Accordingly, time synchronization control data can be transmitted quickly and stably.
  • the first virtual machine may process camera data received through Ethernet communication and transmit the processed data to the second virtual machine based on any one of heterogeneous data communication methods. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the processor can transmit an audio signal based on the automotive audio bus to the audio output unit. Accordingly, audio signals can be transmitted quickly and stably.
  • the first virtual machine may transmit first data to a second virtual machine with the same or lower security level, and transmit second data to another external signal processing device with the same or lower security level. Accordingly, data can be transmitted quickly and stably based on the safety level. Furthermore, data processing can be performed efficiently using microservices.
  • FIG. 1 is a diagram showing an example of the exterior and interior of a vehicle.
  • FIGS. 2 to 2C are diagrams showing various architectures of a vehicle communication gateway.
  • FIG. 3A is a diagram illustrating an example of the arrangement of a vehicle display device inside a vehicle.
  • FIG. 3B is a diagram illustrating another example of the arrangement of a vehicle display device inside a vehicle.
  • FIG. 4 is an example of an internal block diagram of the vehicle display device of FIG. 3B.
  • FIGS. 5A to 5D are diagrams illustrating various examples of vehicle display devices.
  • Figure 6 is an example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • FIG. 7A is a diagram referenced in the description of a signal processing device related to the present disclosure.
  • FIG. 7B is a diagram illustrating an example of microservice execution according to an embodiment of the present disclosure.
  • Figure 8 is another example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • Figure 9 is another example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • Figure 10 is an example of an internal block diagram of a signal processing device according to an embodiment of the present disclosure.
  • 11 to 13 are various examples of block diagrams of a vehicle display device according to an embodiment of the present disclosure.
  • FIGS. 14A to 15 are diagrams referenced in the description of FIGS. 11 to 13.
  • 16 is a flowchart showing a method of operating a signal processing device according to an embodiment of the present disclosure.
  • FIGS 17A to 24 are diagrams referenced in the description of the operation of Figure 16.
  • module and “part” for components used in the following description are simply given in consideration of the ease of writing this specification, and do not in themselves give any particularly important meaning or role. Accordingly, the terms “module” and “unit” may be used interchangeably.
  • FIG. 1 is a diagram showing an example of the exterior and interior of a vehicle.
  • the vehicle 200 is operated by a plurality of wheels 103FR, 103FL, 103RL, etc. rotated by a power source and a steering wheel 150 to control the moving direction of the vehicle 200. .
  • the vehicle 200 may be further equipped with a camera 195 for acquiring images in front of the vehicle.
  • the vehicle 200 may be equipped with a plurality of displays 180a and 180b inside for displaying images, information, etc.
  • a cluster display 180a and an Audio Video Navigation (AVN) display 180b are illustrated as a plurality of displays 180a and 180b.
  • AVB Audio Video Navigation
  • HUD Head Up Display
  • the AVN (Audio Video Navigation) display 180b may also be called a center information display.
  • the vehicle 200 described in this specification may be a concept that includes all vehicles including an engine as a power source, a hybrid vehicle having an engine and an electric motor as a power source, and an electric vehicle having an electric motor as a power source. there is.
  • FIGS. 2 to 2C are diagrams showing various architectures of a vehicle communication gateway.
  • Figure 2 is a diagram showing the first architecture of a vehicle communication gateway.
  • the first architecture 300a may correspond to a zone-based architecture.
  • sensor devices and processors inside the vehicle may be placed in each of the plurality of zones (Z1 to Z4), and in the central area of the plurality of zones (Z1 to Z4), a vehicle communication gateway ( A signal processing device 170a including GWDa) may be disposed.
  • the signal processing device 170a may further include an autonomous driving control module (ACC), a cockpit control module (CPG), etc., in addition to the vehicle communication gateway (GWDa).
  • ACC autonomous driving control module
  • CPG cockpit control module
  • GWDa vehicle communication gateway
  • the vehicle communication gateway (GWDa) in the signal processing device 170a may be a High Performance Computing (HPC) gateway.
  • HPC High Performance Computing
  • the signal processing device 170a of FIG. 2 is an integrated HPC and can exchange data with an external communication module (not shown) or a processor (not shown) within a plurality of zones (Z1 to Z4).
  • FIG. 3A is a diagram illustrating an example of the arrangement of a vehicle display device inside a vehicle.
  • cluster display 180a
  • AVN Audio Video Navigation
  • Rear Seat Entertainment display 180c, 180d
  • room mirror display not shown
  • FIG. 3B is a diagram illustrating another example of the arrangement of a vehicle display device inside a vehicle.
  • the vehicle display device 100 performs signal processing to display images, information, etc. on a plurality of displays 180a to 180b, and a plurality of displays 180a to 180b, and at least one A signal processing device 170 that outputs an image signal to the displays 180a to 180b may be provided.
  • the first display (180a) is a cluster display (180a) for displaying driving status, operation information, etc.
  • the second display (180b) is a cluster display (180a) for displaying vehicle operation information, navigation maps, and various other displays. It may be an AVN (Audio Video Navigation) display 180b for displaying entertainment information or images.
  • AVN Audio Video Navigation
  • the signal processing device 170 has a processor 175 therein, and can execute first to third virtualization machines (not shown) on a hypervisor (not shown) within the processor 175.
  • a second virtualization machine (not shown) may operate for the first display 180a, and a third virtualization machine (not shown) may operate for the second display 180b.
  • the first virtualization machine (not shown) in the processor 175 shares the hypervisor 505 based on the second virtualization machine (not shown) and the third virtualization machine (not shown) to transmit the same data.
  • the memory 508 can be controlled to be set. Accordingly, the same information or the same image can be displayed in synchronization on the first display 180a and the second display 180b within the vehicle.
  • the first virtual machine (not shown) in the processor 175 shares at least part of the data with the second virtual machine (not shown) and the third virtual machine (not shown) for data sharing processing. Accordingly, data can be shared and processed by multiple virtual machines for multiple displays within the vehicle.
  • the first virtual machine (not shown) in the processor 175 receives and processes wheel speed sensor data of the vehicle into at least one of a second virtual machine (not shown) or a third virtual machine (not shown). , the processed wheel speed sensor data can be transmitted. Accordingly, it is possible to share the vehicle's wheel speed sensor data with at least one virtual machine, etc.
  • the vehicle display device 100 may further include a Rear Seat Entertainment display 180c for displaying driving status information, simple navigation information, and various entertainment information or images. You can.
  • the signal processing device 170 executes a fourth virtualization machine (not shown) in addition to the first to third virtualization machines (not shown) on the hypervisor (not shown) in the processor 175, and performs RSE
  • the display 180c can be controlled.
  • some of the plurality of displays 180a to 180c may operate based on Linux OS, and others may operate based on web OS.
  • the signal processing device 170 can control displays 180a to 180c operating under various operating systems (OS) to display the same information or the same image in synchronization.
  • OS operating systems
  • the vehicle speed indicator 212a and the vehicle internal temperature indicator 213a are displayed on the first display 180a, and a plurality of applications and the vehicle speed indicator 212b are displayed on the second display 180b.
  • a home screen 222 including a vehicle interior temperature indicator 213b is displayed, and a second home screen 222b including a plurality of applications and a vehicle interior temperature indicator 213c is displayed on the third display 180c. Example of what is displayed.
  • FIG. 4 is an example of an internal block diagram of the vehicle display device of FIG. 3B.
  • a vehicle display device 100 includes an input unit 110, a communication unit 120 for communication with an external device, and a plurality of communication modules (EMa to EMd) for internal communication. , it may be provided with a memory 140, a signal processing device 170, a plurality of displays (180a to 180c), an audio output unit 185, and a power supply unit 190.
  • a plurality of communication modules may be respectively disposed in a plurality of zones (Z1 to Z4) in FIG. 2 .
  • the signal processing device 170 may be provided with a communication switch 736b therein for data communication with each communication module (EM1 to EM4).
  • Each communication module may perform data communication with a plurality of sensor devices (SN) or ECU (770) or area signal processing device (170Z).
  • the plurality of sensor devices SN may include a camera 195, LIDAR 196, radar 197, or location sensor 198.
  • the input unit 110 may be equipped with physical buttons, pads, etc. for button input, touch input, etc.
  • the input unit 110 may be equipped with a microphone (not shown) for user voice input.
  • the communication unit 120 can exchange data with the mobile terminal 800 or the server 900 in a wireless manner.
  • the communication unit 120 can exchange data wirelessly with the vehicle driver's mobile terminal.
  • various data communication methods such as Bluetooth, WiFi, WiFi Direct, and APiX are possible.
  • the communication unit 120 may receive weather information, road traffic situation information, for example, Transport Protocol Expert Group (TPEG) information, from the mobile terminal 800 or the server 900.
  • TPEG Transport Protocol Expert Group
  • the communication unit 120 may be equipped with a mobile communication module (not shown).
  • a plurality of communication modules receive sensor data, etc. from the ECU (770), sensor device (SN), or area signal processing device (170Z), and transmit the received sensor data to the signal processing device (170). Can be transmitted.
  • sensor data includes vehicle direction data, vehicle location data (GPS data), vehicle angle data, vehicle speed data, vehicle acceleration data, vehicle tilt data, vehicle forward/backward data, battery data, fuel data, tire data, vehicle It may include at least one of lamp data, vehicle interior temperature data, and vehicle interior humidity data.
  • These sensor data include heading sensor, yaw sensor, gyro sensor, position module, vehicle forward/reverse sensor, wheel sensor, vehicle speed sensor, It can be obtained from a vehicle body tilt sensor, battery sensor, fuel sensor, tire sensor, steering sensor by steering wheel rotation, vehicle interior temperature sensor, vehicle interior humidity sensor, etc.
  • the position module may include a GPS module or a location sensor 198 for receiving GPS information.
  • At least one of the plurality of communication modules may transmit location information data sensed by the GPS module or the location sensor 198 to the signal processing device 170.
  • At least one of the plurality of communication modules receives vehicle front image data, vehicle side image data, vehicle rear image data, and vehicle surroundings from the camera 195, lidar 196, or radar 197. Obstacle distance information, etc. may be received, and the received information may be transmitted to the signal processing device 170.
  • the memory 140 may store various data for the overall operation of the vehicle display device 100, such as a program for processing or controlling the signal processing device 170.
  • the memory 140 may store data related to a hypervisor and first to third virtualization machines for execution in the processor 175.
  • the audio output unit 185 converts the electrical signal from the signal processing device 170 into an audio signal and outputs it. For this purpose, speakers, etc. may be provided.
  • the power supply unit 190 can supply power required for the operation of each component under the control of the signal processing device 170.
  • the power supply unit 190 may receive power from a battery inside the vehicle.
  • the signal processing device 170 controls the overall operation of each unit within the vehicle display device 100.
  • the signal processing device 170 may include a processor 175 that performs signal processing for the vehicle displays 180a and 180b.
  • the processor 175 may execute first to third virtualization machines (not shown) on a hypervisor (not shown) within the processor 175.
  • the first virtual machine (not shown) may be called a Server Virtual Machine (Server Virtual maschine), and the second to third virtual machines (not shown) may be referred to as Server Virtual maschine. ) can be named a Guest Virtual maschine.
  • Server Virtual maschine a Server Virtual Machine
  • Guest Virtual maschine a Guest Virtual maschine.
  • a first virtualization machine (not shown) in processor 175 may store sensor data from a plurality of sensor devices, such as vehicle sensor data, location information data, camera image data, audio data, or touch input data. can be received, processed or processed and output.
  • the first virtual machine directly receives CAN data, Ethernet data, audio data, radio data, USB data, and wireless communication data for the second to third virtual machines (not shown). and can be processed.
  • the first virtualization machine may transmit the processed data to the second to third virtualization machines (not shown).
  • the first virtual machine (not shown) among the first to third virtual machines (not shown) receives sensor data, communication data, or external input data from a plurality of sensor devices, and performs signal processing.
  • the burden of signal processing on other virtual machines is reduced, 1:N data communication becomes possible, and synchronization during data sharing becomes possible.
  • the first virtualization machine (not shown) records data in the shared memory 508 and controls the same data to be shared with the second virtualization machine (not shown) and the third virtualization machine (not shown). .
  • a first virtualization machine (not shown) records vehicle sensor data, the location information data, the camera image data, or the touch input data to the shared memory 508, and writes the second virtualization machine (not shown) to the shared memory 508. ) and a third virtual machine (not shown) can be controlled to share the same data. Accordingly, sharing of data in a 1:N manner becomes possible.
  • the first virtualization machine (not shown) in the processor 175 shares the hypervisor 505 based on the second virtualization machine (not shown) and the third virtualization machine (not shown) to transmit the same data.
  • the memory 508 can be controlled to be set.
  • the signal processing device 170 can process various signals, such as audio signals, video signals, and data signals.
  • the signal processing device 170 may be implemented in the form of a system on chip (SOC).
  • the signal processing device 170 in the display device 100 of FIG. 4 may be the same as the signal processing devices 170, 170a1, and 170a2 of the vehicle display device shown in FIG. 5A and below.
  • FIGS. 5A to 5D are diagrams illustrating various examples of vehicle display devices.
  • FIG. 5A shows an example of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 800a includes signal processing devices 170a1 and 170a2 and a plurality of region signal processing devices 170Z1 to 170Z4.
  • the signal processing devices 170a1 and 170a2 may also be called HPC (High Performance Computing) signal processing devices.
  • the plurality of area signal processing devices 170Z1 to 170Z4 are disposed in each area Z1 to Z4 and can transmit sensor data to the signal processing devices 170a1 and 170a2.
  • the signal processing devices 170a1 and 170a2 receive data by wire from a plurality of area signal processing devices 170Z1 to 170Z4 or the communication device 120.
  • data is exchanged between the signal processing devices 170a1 and 170a2 and a plurality of area signal processing devices 170Z1 to 170Z4 based on wired communication, and the signal processing devices 170a1 and 170a2 and the server 400 are wirelessly connected.
  • data is exchanged based on wireless communication between the communication device 120 and the server 400, and the signal processing devices 170a1 and 170a2 and the communication device 120 are, Data can be exchanged based on wired communication.
  • data received by the signal processing devices 170a1 and 170a2 may include camera data or sensor data.
  • sensor data within a vehicle includes vehicle wheel speed data, vehicle direction data, vehicle location data (GPS data), vehicle angle data, vehicle speed data, vehicle acceleration data, vehicle tilt data, vehicle forward/reverse data, and battery. It may include at least one of data, fuel data, tire data, vehicle lamp data, vehicle interior temperature data, vehicle interior humidity data, vehicle exterior radar data, and vehicle exterior lidar data.
  • camera data may include camera data outside the vehicle and camera data inside the vehicle.
  • the signal processing devices 170a1 and 170a2 may execute a plurality of virtual machines 820, 830, and 840 based on safety.
  • a processor 175 in the signal processing device 170a executes a hypervisor 505, and on the hypervisor 505, according to automotive safety integrity levels (Automotive SIL (ASIL)), first to third Executing virtual machines (820 to 840) is illustrated.
  • ASIL Automotive SIL
  • the first virtual machine 820 may be a virtual machine corresponding to Quality Management (QM), which is the lowest safety level and non-mandatory level in the Automotive Safety Integrity Level (ASIL).
  • QM Quality Management
  • ASIL Automotive Safety Integrity Level
  • the first virtual machine 820 can run an operating system 822, a container runtime 824 on the operating system 822, and containers 827 and 829 on the container runtime 824.
  • the second virtual machine 820 is an automotive safety integrity level (ASIL) corresponding to ASIL A or ASIL B, where the sum of severity, exposure, and controllability is 7 or 8. It could be a virtual machine.
  • ASIL automotive safety integrity level
  • the second virtual machine 820 may run an operating system 832, a container runtime 834 on the operating system 832, and containers 837 and 839 on the container runtime 834.
  • the third virtual machine 840 is an automotive safety integrity level (ASIL) corresponding to ASIL C or ASIL D, where the sum of severity, exposure, and controllability is 9 or 10. It may be a virtual machine.
  • ASIL automotive safety integrity level
  • ASIL D can correspond to grades requiring the highest safety level.
  • the third virtual machine 840 can run the safety operating system 842 and the application 845 on the operating system 842.
  • the third virtual machine 840 may run the safety operating system 842, the container runtime 844 on the safety operating system 842, and the container 847 on the container runtime 844.
  • the third virtual machine 840 may be executed through a separate core rather than the processor 175. This will be described later with reference to FIG. 5B.
  • FIG. 5B shows another example of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 800b includes signal processing devices 170a1 and 170a2 and a plurality of region signal processing devices 170Z1 to 170Z4.
  • the vehicle display device 800b of FIG. 5B is similar to the vehicle display device 800a of FIG. 5A, but the signal processing device 170a1 has some differences from the signal processing device 170a1 of FIG. 5A.
  • the signal processing device 170a1 may include a processor 175 and a second processor 177.
  • the processor 175 in the signal processing device 170a1 executes a hypervisor 505, and on the hypervisor 505, according to an automotive safety integrity level (Automotive SIL (ASIL)), first to second virtualization machines ( 820 ⁇ 830).
  • ASIL Automotive SIL
  • the first virtual machine 820 can run an operating system 822, a container runtime 824 on the operating system 822, and containers 827 and 829 on the container runtime 824.
  • the second virtual machine 820 may run an operating system 832, a container runtime 834 on the operating system 832, and containers 837 and 839 on the container runtime 834.
  • the second processor 177 in the signal processing device 170a1 may execute the third virtual machine 840.
  • the third virtual machine 840 can execute the safety operating system 842, Autosa 845 on the operating system 842, and application 845 on Autosa 845. That is, unlike FIG. 5A, Autosa 846 on the operating system 842 can be further executed.
  • the third virtual machine 840 may run the safety operating system 842, the container runtime 844 on the safety operating system 842, and the container 847 on the container runtime 844, similar to FIG. 5A. there is.
  • the third virtual machine 840 which requires a high security level, is preferably executed on a second processor 177, which is a different core or different processor, unlike the first to second virtual machines 820 to 830. .
  • the second signal processing device 170a2 which serves as a backup, may operate.
  • the signal processing devices 170a1 and 170a2 can operate simultaneously, with the first signal processing device 170a operating as the main and the second signal processing device 170a2 operating as the sub. This will be described with reference to FIGS. 5C and 5D.
  • Figure 5C shows another example of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 800c includes signal processing devices 170a1 and 170a2 and a plurality of region signal processing devices 170Z1 to 170Z4.
  • the signal processing devices 170a1 and 170a2 may also be called HPC (High Performance Computing) signal processing devices.
  • the plurality of area signal processing devices 170Z1 to 170Z4 are disposed in each area Z1 to Z4 and can transmit sensor data to the signal processing devices 170a1 and 170a2.
  • the signal processing devices 170a1 and 170a2 receive data by wire from a plurality of area signal processing devices 170Z1 to 170Z4 or the communication device 120.
  • data is exchanged between the signal processing devices 170a1 and 170a2 and a plurality of area signal processing devices 170Z1 to 170Z4 based on wired communication, and the signal processing devices 170a1 and 170a2 and the server 400 are wirelessly connected.
  • data is exchanged based on wireless communication between the communication device 120 and the server 400, and the signal processing devices 170a1 and 170a2 and the communication device 120 are, Data can be exchanged based on wired communication.
  • data received by the signal processing devices 170a1 and 170a2 may include camera data or sensor data.
  • the processor 175 in the first signal processing device 170a1 among the signal processing devices 170a1 and 170a2 runs the hypervisor 505, and on the hypervisor 505, the safety virtualization machine 860 ) and a non-safety virtualization machine 870 can be run, respectively.
  • the processor 175b in the second signal processing device 170a2 among the signal processing devices 170a1 and 170a2 executes the hypervisor 505b, and operates the safety virtualization machine 880 on the hypervisor 505. ) can only be executed.
  • FIG. 5D shows another example of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 800d includes signal processing devices 170a1 and 170a2 and a plurality of region signal processing devices 170Z1 to 170Z4.
  • the vehicle display device 800d of FIG. 5D is similar to the vehicle display device 800c of FIG. 5C, but the second signal processing device 170a2 has some differences from the second signal processing device 170a2 of FIG. 5C.
  • the processor 175b in the second signal processing device 170a2 of FIG. 5D runs a hypervisor 505b, and on the hypervisor 505, a safety virtualization machine 880 and a non-safety virtualization machine ( 890) can be executed respectively.
  • the difference is that the processor 175b in the second signal processing device 170a2 further executes the non-safety virtualization machine 890.
  • safety and non-safety processing are separated between the first signal processing device 170a1 and the second signal processing device 170a2, thereby improving stability and processing speed. .
  • Figure 6 is an example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 900 includes a signal processing device 170 and at least one display.
  • At least one display is illustrated, including a cluster display 180a and an AVN display 180b.
  • the vehicle display device 900 may further include a plurality of region signal processing devices 170Z1 to 170Z4.
  • the signal processing device 170 is a high-performance, centralized signal processing and control device having a plurality of CPUs 175, GPUs 178, and NPUs 179, and is a High Performance Computing (HPC) signal processing device or It can be called a central signal processing unit.
  • HPC High Performance Computing
  • the plurality of area signal processing devices 170Z1 to 170Z4 and the signal processing device 170 are connected with wired cables (CB1 to CB4).
  • the plurality of area signal processing devices 170Z1 to 170Z4 may be connected with wired cables (CBa to CBd), respectively.
  • the wired cable may include a CAN communication cable, an Ethernet communication cable, or a PCI Express cable.
  • the signal processing device 170 may include at least one processor (175, 178, 177) and a large-capacity storage device 925.
  • the signal processing device 170 may include a central processor 175 and 177, a graphics processor 178, and a neural processor 179.
  • sensor data may be transmitted to the signal processing device 170 from at least one of the plurality of area signal processing devices 170Z1 to 170Z4.
  • sensor data may be stored in the storage device 925 within the signal processing device 170.
  • the sensor data includes camera data, lidar data, radar data, vehicle direction data, vehicle location data (GPS data), vehicle angle data, vehicle speed data, vehicle acceleration data, vehicle tilt data, vehicle forward/backward data, It may include at least one of battery data, fuel data, tire data, vehicle lamp data, vehicle interior temperature data, and vehicle interior humidity data.
  • camera data from the camera 195a and lidar data from the lidar sensor 196 are input to the first area signal processing device 170Z1, and camera data and lidar data are input to the second area. In this example, it is transmitted to the signal processing device 170 via the signal processing device 170Z2 and the third area signal processing device 170Z3.
  • the data reading or writing speed to the storage device 925 is faster than the network speed when sensor data is transmitted to the signal processing device 170 from at least one of the plurality of area signal processing devices 170Z1 to 170Z4. Therefore, it is desirable to perform multi-path routing to prevent network bottlenecks from occurring.
  • the signal processing device 170 may perform multi-path routing based on a software defined network (SDN). Accordingly, it is possible to secure a stable network environment when reading or writing data in the storage device 925. Furthermore, since data can be transmitted to the storage device 925 using multiple paths, data can be transmitted by dynamically changing the network configuration.
  • SDN software defined network
  • Data communication between the signal processing device 170 and the plurality of area signal processing devices 170Z1 to 170Z4 in the vehicle display device 900 according to an embodiment of the present disclosure is performed using high-speed external components for high-bandwidth, low-latency communication. It is preferable that it is a connection (Peripheral Component Interconnect Express) communication.
  • connection Peripheral Component Interconnect Express
  • FIG. 7A is a diagram referenced in the description of a signal processing device related to the present disclosure.
  • the signal processing device 170x related to the present disclosure executes the application 785 based on vehicle sensor data or camera data, and outputs the result data of the application 785 through a plurality of paths. can do.
  • the result data of the application 785 is output only after execution of the application 785 is completed, so inefficiency occurs and a significant amount of time is likely to be consumed until the execution of the application 785 is completed.
  • this disclosure proposes a method of sharing intermediate result data of the application when the application is executed.
  • the signal processing device 170 separates the application into a plurality of micro services and executes other micro services based on the results of the micro services, etc., and executes the workload. ) to be distributed efficiently.
  • FIG. 7B is a diagram illustrating an example of microservice execution according to an embodiment of the present disclosure.
  • the signal processing device 170 related to the present disclosure may execute an application 795 based on vehicle sensor data or camera data.
  • the signal processing device 170 related to the present disclosure may separately execute a plurality of micro services for the application 795.
  • the signal processing device 170 can classify and execute applications or microservices according to safety levels.
  • the signal processing device 170 is configured to transmit the result data of the transmitting application or microservice when the transmitting application or microservice has a higher or equal security level than the receiving application or microservice. do.
  • the signal processing device 170 prevents the transmission application or microservice from transmitting result data when the transmission application or microservice has a lower security level than the reception application or microservice. .
  • the first microservice 910 corresponding to ASIL D which is the second safety level
  • the result data of the first microservice 910 corresponding to ASIL D is, respectively, 3
  • the second microservice (920a) corresponding to the safety level QM, the third microservice (920b) corresponding to the first safety level ASIL B, and the fourth microservice (920c) corresponding to the first safety level ASIL B ) may be transmitted to the fifth micro service 920d corresponding to ASIL D, the third safety level.
  • the safety level of the first micro service 910 is higher than the safety levels of the second micro service 920a, the third micro service 920b, and the fourth micro service 920c, the safety level of the first micro service 910 Transmission of the resulting data becomes possible.
  • the safety level of the first micro service 910 is the same as the safety level of the fifth micro service 920d, transmission of the result data of the first micro service 910 is possible.
  • the seventh micro service 930b corresponding to ASIL B, the first safety level is executed based on the result data of the third micro service 920b and the result data of the fourth micro service 920c, Resulting data may be output through a second pass.
  • the eighth microservice 930c corresponding to ASIL D, the second safety level is executed based on the result data of the fifth microservice 920d, and the result data can be output through the third path. there is.
  • Figure 8 is another example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 1300 including a plurality of signal processing devices includes a central signal processing device 170 and a plurality of signal processing devices 170z1 to 170z3 for each region.
  • the central signal processing unit 170 includes at least one processor 175a, 175b, and 175c and an interface INT for exchanging data with at least one of a plurality of signal processing units 170z1 to 170z3 for each region. .
  • the interface (INT) uses an Ethernet switch (ESW) for Ethernet communication and an external component high-speed connection (Peripheral Component Interconnect Express; PCIe) communication for data exchange with a plurality of signal processing devices (170z1 to 170z3) for each area.
  • ESW Ethernet switch
  • PCIe Peripheral Component Interconnect Express
  • PSW PCIe switch
  • NMV nVMe interface
  • CAN CAN communication interface
  • At least one processor (175a, 175b, and 175c) in the central signal processing unit 170 may execute a plurality of virtualization machines.
  • the first virtual machine among the plurality of virtual machines transmits first data to the second virtual machine based on one of the heterogeneous data communication methods, and transmits the first data to the second virtual machine based on one of the heterogeneous data communication methods.
  • the second data is transmitted to at least one of the external signal processing devices 170z1 to 170z3 for each region. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • one of the communication methods from the first virtual machine to the second virtual machine may be the same as any one of the communication methods from the first virtual machine to at least one of the signal processing devices 170z1 to 170z3 for each region. .
  • the first virtual machine may transmit first data to the second virtual machine 830 through the shared memory 508 in the hypervisor 505 or Ethernet communication. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first virtual machine may transmit the second data to at least one of the signal processing devices 170z1 to 170z3 for each region through Ethernet communication or PCIe communication. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first terminal (Tna) of the central signal processing device 170 is electrically connected to the first terminal (TNbz1) of the first region signal processing device 170z1, and the first terminal (TNbz1) of the first region signal processing device 170z1
  • the second terminal TNaz1 may be electrically connected to the first terminal TNbz2 of the second area signal processing device 170z2.
  • the second terminal TNaz2 of the second region signal processing device 170z2 is electrically connected to the first terminal TNbz3 of the third region signal processing device 170z3, and the third region signal processing device 170z3 ) may be electrically connected to the central signal processing device 170.
  • data exchange between a plurality of signal processing devices for each area (170z1 to 170z3) and the central signal processing device 170 is performed through Ethernet communication or external component high-speed connection (Peripheral Component Interconnect Express; PCIe communication can be performed through a PCIe switch (PSW).
  • PCIe switch PCIe switch
  • the second terminal Tnb of the central signal processing device 170 may be electrically connected to the second processor 175b, which is one of the internal processors 175a, 175b, and 175c.
  • the third terminal TNoz1 of the first area signal processing device 170z1 may be electrically connected to the connection terminal TNua of the first base device BUa connected to the sensor device or the actuator.
  • the third terminal TNoz2 of the second area signal processing device 170z2 may be electrically connected to the connection terminal TNub of the second base device BUb.
  • the second area signal processing device 170z2 may be electrically connected to the first endpoint device EDa connected to a sensor device or an actuator through a separate terminal.
  • the third terminal TNoz3 of the third area signal processing device 170z3 may be electrically connected to a network display device (NDC) for a camera or display.
  • NDC network display device
  • the third area signal processing device 170z3 may be electrically connected to the second endpoint device EDb connected to the sensor device or actuator through a separate terminal.
  • the central signal processing device 170 may be electrically connected to the communication unit 120 for mobile communication, Wi-Fi communication, Bluetooth communication, or V2X communication.
  • the processor 175 in the central signal processing unit 170 may transmit an image signal to the display 180 based on any one of heterogeneous data communication methods.
  • the processor 175 in the central signal processing unit 170 may transmit an image signal to the display 180 based on a low voltage differential signaling method or a SerDes method. Accordingly, video signals can be transmitted quickly and stably through various communication methods.
  • the processor 175 in the central signal processing unit 170 may transmit an audio signal based on an automotive audio bus to the audio output unit 185. Accordingly, audio signals can be transmitted quickly and stably.
  • the processor 175 in the central signal processing unit 170 may exchange data with the memory 140, such as a USB device, based on any one of heterogeneous data communication methods. Accordingly, it is possible to quickly and stably exchange data with the memory 140.
  • the processor 175 in the central signal processing unit 170 uses a memory 140 such as a USB device, using an Inter-Integrated Circuit (I2C) communication method, a Serial peripheral interface (SPI) communication method, or a General Motors Interface (GPIO) communication method. Data can be exchanged based on any of the following communication methods (Purpose Input Output).
  • I2C Inter-Integrated Circuit
  • SPI Serial peripheral interface
  • GPIO General Motors Interface
  • the processor 175 in the central signal processing unit 170 may receive camera data from the camera device 195 based on any one of heterogeneous data communication methods. Accordingly, camera data can be received quickly and stably.
  • the processor 175 in the central signal processing unit 170 may receive camera data from the camera device 195 based on either SerDes or Ethernet communication.
  • the processor 175 in the central signal processing unit 170 may receive sensor data from the sensor device SNm based on any one of heterogeneous data communication methods. Accordingly, sensor data can be received quickly and stably.
  • the processor 175 in the central signal processing unit 170 may receive sensor data from the sensor device SNm based on either a SerDes method or an Ethernet communication method or a CAN communication method. there is.
  • Figure 9 is another example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 1300b is similar to the vehicle display device 1300 of FIG. 8, but includes a first endpoint device (EDa) and a second endpoint device (EDb). is omitted, and the first central signal processing unit 170a, the second central signal processing unit 170b, the third base device (BUc), the fourth base device (BUd), and the fifth base device (BUe) ) The difference lies in the fact that it is further provided.
  • the vehicle display device 1300b includes a first central signal processing device 170a, a second central signal processing device 170b, and a plurality of signal processing devices 170z1 to 170z3 for each region. Equipped with
  • the interface (INT) uses an Ethernet switch (ESW) for Ethernet communication and an external component high-speed connection (Peripheral Component Interconnect Express; PCIe) communication for data exchange with a plurality of signal processing devices (170z1 to 170z3) for each area.
  • ESW Ethernet switch
  • PCIe Peripheral Component Interconnect Express
  • PSW PCIe switch
  • NMV nVMe interface
  • CAN CAN communication interface
  • the first central signal processing unit 170a may further include a second processor 177 having a second type of processor core.
  • the first type of processor core may be an application processor core
  • the second type of processor core may be an M core
  • the second central signal processing unit 170b exchanges data with the processor 175b including a plurality of processor cores of the first type and at least one of the plurality of region-specific signal processing devices 170z1 to 170z3. It has an interface (INTb) for
  • the interface (INTb) may be equipped with an Ethernet switch (ESWb) for Ethernet communication, a PCIe switch (PSWb) for PCIe communication, etc. for data exchange with a plurality of signal processing devices (170z1 to 170z3) for each area. there is.
  • ESWb Ethernet switch
  • PSWb PCIe switch
  • the second central signal processing unit 170b may further include a second processor 177b having a second type of processor core.
  • the processor 175 within the first central signal processing unit 170a may execute a plurality of virtual machines 820 to 850.
  • the first virtualization machine transmits first data to the second virtualization machine based on any one of the heterogeneous data communication methods.
  • the second data is transmitted to at least one of the external signal processing devices 170z1 to 170z4 for each region based on one of the heterogeneous data communication methods. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • one of the communication methods from the first virtual machine in the first central signal processing unit 170a to the second virtual machine is communication from the first virtual machine to at least one of the signal processing devices 170z1 to 170z3 for each region. Either of the methods may be the same.
  • the first virtualization machine in the first central signal processing unit 170a sends first data to the second virtualization machine 830 through the shared memory 508 in the hypervisor 505 or Ethernet communication. Can be transmitted. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first virtual machine in the first central signal processing unit 170a may transmit the second data to at least one of the signal processing units 170z1 to 170z3 for each region through Ethernet communication or PCIe communication. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the processor 175b in the second central signal processing unit 170b can execute a plurality of virtual machines 820m and 840m.
  • one of the plurality of virtual machines 820m and 840m in the second central signal processing unit 170b transmits third data to another virtual machine based on one of the heterogeneous data communication methods.
  • the fourth data is transmitted to at least one of the external signal processing devices 170z1 to 170z3 for each region based on one of the heterogeneous data communication methods. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first terminal (Tna) of the first central signal processing device 170a is electrically connected to the first terminal (TNbz1) of the first region signal processing device 170z1, and the first terminal (TNbz1) of the first region signal processing device 170z1 ) may be electrically connected to the first terminal TNbz2 of the second area signal processing device 170z2.
  • the second terminal TNaz2 of the second region signal processing device 170z2 is electrically connected to the first terminal TNbz3 of the third region signal processing device 170z3, and the third region signal processing device 170z3 ) may be electrically connected to the central signal processing device 170.
  • data exchange between a plurality of signal processing devices for each area (170z1 to 170z3) and the first central signal processing device (170a) or the second central signal processing device (170b) is Ethernet communication through an Ethernet switch (ESW).
  • ESW Ethernet switch
  • PCIe communication may be performed through a Peripheral Component Interconnect Express (PCIe) switch (PSW).
  • PCIe Peripheral Component Interconnect Express
  • the second terminal Tnb of the first central signal processing unit 170a may be electrically connected to the second processor 175b, which is one of the internal processors 175a, 175b, and 175c.
  • the third terminal TNoz1 of the first area signal processing device 170z1 may be electrically connected to the connection terminal TNua of the first base device BUa connected to the sensor device or the actuator.
  • the fourth terminal TNpz1 of the first area signal processing device 170z1 may be electrically connected to the connection terminal TNuc of the third base device BUc connected to the sensor device or the actuator.
  • the third terminal TNoz2 of the second area signal processing device 170z2 may be electrically connected to the connection terminal TNub of the second base device BUb connected to the sensor device or the actuator.
  • the fourth terminal TNpz2 of the second area signal processing device 170z2 may be electrically connected to the connection terminal TNud of the fourth base device BUd connected to the sensor device or the actuator.
  • the third terminal TNoz3 of the third area signal processing device 170z3 may be electrically connected to a network display device (NDC) for a camera or display.
  • NDC network display device
  • the third terminal TNpz3 of the third area signal processing device 170z3 may be electrically connected to the connection terminal TNue of the fifth base device BUe connected to the sensor device or the actuator.
  • the fourth terminal TNoz3 of the second area signal processing device 170z2 may be electrically connected to the connection terminal TNuf of the sixth base device BUf connected to the sensor device or the actuator.
  • Figure 10 is an example of an internal block diagram of a signal processing device according to an embodiment of the present disclosure.
  • a signal processing device 170m processes data with at least one of a plurality of processors 175a, 175b, and 175c and a plurality of signal processing devices 170z1 to 170z2 for each region.
  • An interface (INT) for exchange is provided.
  • the signal processing device 170m may further include a power block (PBK) for power supply.
  • PBK power block
  • the interface (INT) may include an Ethernet switch (ESWa, ESWb), a PCIe switch (PSW), an nVMe interface (NMVa, NMVb), and a network physical layer interface (PHa, PHb).
  • ESWa Ethernet switch
  • PSW PCIe switch
  • NMVa nVMe interface
  • PHa network physical layer interface
  • the interface INT may exchange data with the display 180 or the sensor device SN in addition to the plurality of signal processing devices 170z1 to 170z2 for each region.
  • the display 180 at this time may include a cluster display, CID display, PD display, RSE display, or HUD display.
  • the processor 175 in the signal processing device 170m may transmit an image signal to the display 180 based on any one of heterogeneous data communication methods.
  • the processor 175 in the signal processing device 170m may transmit an image signal to the display 180 based on a low voltage differential signaling method or an Ethernet communication method. Accordingly, , It becomes possible to transmit video signals quickly and stably through various communication methods.
  • the sensor device SN may include a vehicle interior camera (DMS camera), a vehicle exterior camera, lidar, or radar.
  • DMS camera vehicle interior camera
  • lidar lidar
  • radar radar
  • the processor 175 in the signal processing device 170m may receive sensor data from the sensor device SN based on any one of heterogeneous data communication methods.
  • the processor 175 in the signal processing device 170m may receive sensor data from the sensor device SN based on a low voltage differential signaling method or an Ethernet communication method. Accordingly, sensor data can be received quickly and stably through various communication methods.
  • 11 to 13 are various examples of block diagrams of a vehicle display device according to an embodiment of the present disclosure.
  • Figure 11 is an example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 1400 includes a first central signal processing unit 170a, a second central signal processing unit 170b, a third central signal processing unit 170c, An area signal processing device 170z may be provided.
  • the first central signal processing unit 170a may include a processor 175 including a plurality of processor cores and a second processor 177 including an M core.
  • the processor 175 may execute the hypervisor 505a on a plurality of application cores and execute a plurality of virtual machines 1423, 1425, and 1427 on the hypervisor 505a.
  • the first virtual machine 1423 among the plurality of virtual machines 1423, 1425, and 1427 runs on a safety operating system and can perform system monitoring.
  • the second virtualization machine 1425 among the plurality of virtualization machines 1423, 1425, and 1427 runs on the Linux operating system and can operate as a vehicle service virtualization machine.
  • the second virtual machine 1425 may execute a container runtime.
  • the third virtual machine 1427 among the plurality of virtual machines 1423, 1425, and 1427 runs on an operating system and can execute HMI services.
  • some cores of the processor 175 may run the virtual machine 1422 for a secure service without running the hypervisor 505a.
  • the second processor 177 may execute the virtualization machine 1421 for the safety manager on the M core without executing the hypervisor 505a.
  • the second central signal processing device 170b may include a processor 175b including a plurality of processor cores.
  • the processor 175b in the second central signal processing unit 170b can execute the hypervisor 505b and execute a plurality of virtual machines 1435 and 1438 on the hypervisor 505b.
  • some virtual machines 1435 among the plurality of virtual machines 1435 and 1438 run on a safety operating system and can operate as vehicle service virtual machines.
  • some virtual machines 1435 among the plurality of virtualization machines 1435 and 1438 may execute a container runtime, etc.
  • some of the other virtual machines 1438 among the plurality of virtual machines 1435 and 1438 run on the Safety Linux operating system and can operate as virtual machines for an automobile driver assistance system (ADAS).
  • ADAS automobile driver assistance system
  • some other virtual machines 1438 among the plurality of virtualization machines 1435 and 1438 can run containers, etc.
  • the third central signal processing unit 170c may include a processor 175c including a plurality of processor cores.
  • the processor 175c in the third central signal processing unit 170c may execute the hypervisor 505c and execute a plurality of virtual machines 1442 and 1448 on the hypervisor 505c.
  • some virtual machines 1435 among the plurality of virtual machines 1442 and 1448 may run on a safety operating system.
  • some of the virtual machines 1438 among the plurality of virtual machines 1442 and 1448 run on the Safety Linux operating system and can operate as virtual machines for an automotive driver assistance system (ADAS).
  • ADAS automotive driver assistance system
  • some other virtual machines 1438 among the plurality of virtualization machines 1442 and 1448 may execute a container runtime, etc.
  • the area signal processing device 170z may include a processor 175z including a plurality of processor cores and a processor 177z including an M core.
  • the area signal processing device 170z can execute a plurality of virtual machines 1412, 1413, and 1415.
  • some virtual machines 1412 may run on M cores
  • other virtual machines 1413 may run on R cores
  • some virtual machines ( 1415) may be executed on the application core.
  • another virtual machine 1415 among the plurality of virtualization machines 1412, 1413, and 1414 may execute a container runtime, etc.
  • Figure 12 is another example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 1400b may include a first central signal processing unit 170a, a second central signal processing unit 170b, and an area signal processing unit 170z. You can.
  • the first central signal processing unit 170a may include a processor 175 including a plurality of processor cores and a second processor 177 including an M core.
  • the processor 175 may execute the hypervisor 505a on a plurality of application cores and execute a plurality of virtual machines 1423, 1425, 1426, and 1428 on the hypervisor 505a.
  • the first virtual machine 1423 among the plurality of virtualization machines 1423, 1425, 1426, and 1428 runs on the Linux operating system and can perform system monitoring.
  • the first virtual machine 1423 can run containers, etc.
  • the second virtualization machine 1425 among the plurality of virtualization machines 1423, 1425, 1426, and 1428 runs on the Safety Linux operating system and can operate as a vehicle service virtualization machine.
  • the second virtual machine 1425 may execute a container runtime.
  • the third virtualization machine (1426) runs on an operating system and can execute IVI services.
  • the fourth virtual machine 1428 among the plurality of virtual machines 1423, 1425, 1426, and 1428 runs on the Safety Linux operating system and can operate as a virtual machine for an automobile driver assistance system (ADAS).
  • ADAS automobile driver assistance system
  • some cores of the processor 175 may run the virtual machine 1422 for a secure service without running the hypervisor 505a.
  • the second processor 177 may execute the virtualization machine 1421 for the safety manager on the M core without executing the hypervisor 505a.
  • the second central signal processing device 170b may include a processor 175b including a plurality of processor cores.
  • the processor 175b in the second central signal processing unit 170b can execute the hypervisor 505b and execute a plurality of virtual machines 1432 and 1438 on the hypervisor 505b.
  • some virtual machines 1432 among the plurality of virtual machines 1432 and 1438 may run on a safety operating system.
  • some of the other virtual machines 1438 among the plurality of virtual machines 1432 and 1438 run on the Safety Linux operating system and can operate as virtual machines for an automobile driver assistance system (ADAS).
  • ADAS automobile driver assistance system
  • some other virtual machines 1438 among the plurality of virtualization machines 1432 and 1438 may execute a container runtime, etc.
  • the area signal processing device 170z may be the same as that in FIG. 11 .
  • Figure 13 is another example of a block diagram of a vehicle display device according to an embodiment of the present disclosure.
  • a vehicle display device 1500 may include a first central signal processing unit 170a and a second central signal processing unit 170b.
  • the vehicle display device 1500 may further include an interface INT.
  • the interface (INT) uses an Ethernet switch (ESW) for Ethernet communication and an external component high-speed connection (Peripheral Component Interconnect Express (PCIe) communication) for data exchange between a plurality of central signal processing units (170a1 and 170a2).
  • ESW Ethernet switch
  • PCIe Peripheral Component Interconnect Express
  • a PCIe switch (PSW), etc. may be provided for .
  • the first central signal processing device 170a includes a processor 175 including a plurality of processor cores.
  • the first central signal processing unit 170a executes the hypervisor 505 and executes a plurality of virtual machines 530a and 540a on the hypervisor 505.
  • a first operating system 501 is running on the hypervisor 505
  • a first virtualization machine 530a is running on the first operating system 501
  • a second operating system 530a is running on the hypervisor 505.
  • the operating system 502 is executed and the second virtual machine 540a is executed on the second operating system 502.
  • the first operating system 501 may execute or have an internal operating system shared memory 503.
  • the first virtual machine 530a can execute the communication framework 533, the service provider 531, the service subscribers 532a, 532b, and 532c.
  • the second virtual machine 540a can execute a communication framework and execute service subscribers 532d and 532e, etc.
  • the second central signal processing unit 170b executes the hypervisor 505b and executes a plurality of virtual machines 530a and 540a on the hypervisor 505b.
  • a third operating system 501b is running on the hypervisor 505b
  • some virtualization machines 530b are running on the third operating system 501b
  • a fourth operating system is running on the hypervisor 505b.
  • the system 502b is executed and some other virtual machines 540b are executed on the fourth operating system 502b.
  • some virtual machines 530b may execute communication frameworks, service subscribers 532f, 532g, etc.
  • some other virtual machines 540b may execute a communication framework, service subscribers 532h, 532i, etc.
  • the first virtual machine 530a in the first central signal processing unit 170a transmits first data to the second virtual machine 540a based on one of the heterogeneous data communication methods, and The second data is transmitted to the signal processing device 170b or 170z based on one of the data communication methods. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • one of the communication methods from the first virtual machine 530a in the first central signal processing unit 170a to the second virtual machine 540a is from the first virtual machine 530a to another signal processing device (( It may be the same as any one of the communication methods (170b or 170z).
  • the first virtual machine 530a in the first central signal processing unit 170a is connected by Ethernet communication through an Ethernet switch (ESW) or PCIe communication through an external component high-speed connection (PCIe) switch (PSW).
  • the second data may be transmitted to the second central signal processing unit 170b or the area signal processing unit 170z. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first virtual machine 530a in the first central signal processing unit 170a is configured by Ethernet communication through an Ethernet switch (ESW) or PCIe communication through an external component high-speed connection (PCIe) switch (PSW).
  • ESW Ethernet switch
  • PCIe external component high-speed connection
  • PSW external component high-speed connection
  • the first virtualization machine 530a in the first central signal processing unit 170a transmits first data to the second virtualization machine 540a through the shared memory 508 in the hypervisor 505 or Ethernet communication. can be transmitted. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the service provider 531 in the first virtual machine 530a in the first central signal processing unit 170a uses the shared memory 503 in the operating system 501 or the shared memory in the hyperfizer 505 (First data may be transmitted to a service subscriber 532a in the first virtual machine 850 through 508). Accordingly, data can be transmitted quickly and reliably to service subscribers.
  • FIGS. 14A to 15 are diagrams referenced in the description of FIGS. 11 to 13.
  • FIG. 14A is a diagram illustrating communication between the signal processing device 170 and an external switch (TSW).
  • TSW external switch
  • the signal processing device 170 may include a plurality of processor cores (CR1 to CRn, MR) and an interface (INT).
  • Ethernet communication through an Ethernet switch (ESW) or PCIe communication through a PCIe switch (PSW) may be performed.
  • the first processor 175 in the signal processing device 170 includes a first type of processor core (CR1 to CRn) among a plurality of processor cores, and the second processor 177 includes a second type of processor core among the plurality of processor cores.
  • type of processor core MR
  • any one of heterogeneous communication methods may be performed between the M core (MR) and the application processor cores (CR1 to CRn) among the plurality of processor cores (CR1 to CRn, MR).
  • IPC communication For example, between the M core (MR) and the application processor cores (CR1 to CRn) among the plurality of processor cores (CR1 to CRn, MR), either IPC communication or Ethernet communication based on an internal system bus can be performed. there is.
  • any one of heterogeneous communication methods may be performed between the plurality of virtual machines 820 to 850.
  • either communication using the shared memory 508 or switch 509 in the hypervisor 505 or Ethernet communication may be performed.
  • the processor 175 in the signal processing device 170 may execute a first virtualization machine 850, a second virtualization machine 830, and a third virtualization machine 820 on the hypervisor 505. .
  • the second processor 177 in the signal processing device 170 can execute the fourth virtual machine 840 without executing the hypervisor 505.
  • the first virtual machine 850 may run an application or microservice corresponding to a first safety level, such as ASIL B, or an application or microservice corresponding to a second safety level, such as ASIL D.
  • a first safety level such as ASIL B
  • ASIL D an application or microservice corresponding to a second safety level
  • the second virtual machine 830 may run an application or microservice corresponding to a first safety level, such as ASIL B.
  • the third virtual machine 820 may run an application or microservice corresponding to a third security level, such as QM.
  • the fourth virtual machine 840 may run an application or microservice corresponding to a second safety level, such as ASIL D.
  • the second safety level may be higher than the first safety level
  • the third safety level may be lower than the first safety level
  • each virtual machine (820 to 850) is equipped with a network interface or driver (821, 831, 841, 851) and performs Ethernet communication with an external switch (TSW) through an Ethernet switch (ESW) in the interface (INT) or interface PCIe communication can be performed through the PCIe switch (PSW) in (INT).
  • TSW network interface or driver
  • ESW Ethernet switch
  • PSW PCIe switch
  • the processor 175 may transmit third data to the second processor 177 based on inter platform communication (IPC). Accordingly, third data can be transmitted quickly and stably.
  • IPC inter platform communication
  • the first virtual machine 850 executes a first application or a microservice corresponding to the first application at the first safety level or a second safety level higher than the first safety level
  • the second processor 177 a second application of the second safety level or a microservice corresponding to the second application may be executed.
  • the first virtual machine 850 runs a first application or a microservice corresponding to the first application at the first safety level or a second safety level higher than the first safety level
  • the second virtual machine 830 can run applications or microservices of the second safety level.
  • the first virtualization machine 850 is a second virtualization machine 830, which is lower than the security level of the first virtualization machine 850, through the shared memory 508 in the hypervisor 505 or Ethernet communication.
  • 1 Data can be transmitted. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first virtual machine 850 does not transmit first data to the second virtual machine 830 corresponding to a security level higher than the security level of the first virtual machine 850. Accordingly, selective data transmission is possible in accordance with the safety level.
  • the area signal processing device 170z shown in FIGS. 11 to 13 can convert sensor data received based on CAN communication into an Ethernet signal and transmit it.
  • the first virtual machine 850 may receive sensor data converted into an Ethernet signal through Ethernet communication. Accordingly, sensor data can be received quickly and stably.
  • the first virtual machine 850 receives the result data of the micro service from the external area signal processing device 170z through Ethernet communication, and converts the received result data into a device with the same or lower security level. 2 It can be transmitted to the virtualization machine 830.
  • data can be transmitted quickly and stably based on the safety level. Furthermore, data processing can be performed efficiently using microservices.
  • the processor 175 may receive periodic sensor data or camera data from the external area signal processing device 170z through Ethernet communication. Accordingly, sensor data can be transmitted quickly and stably.
  • the processor 175 may transmit time synchronization control data to the external area signal processing device 170z. Accordingly, time synchronization control data can be transmitted quickly and stably.
  • the first virtual machine 850 processes camera data received through Ethernet communication and transmits the processed data to the second virtual machine 830 based on any one of heterogeneous data communication methods. You can. Accordingly, data can be transmitted quickly and reliably through various communication methods.
  • the first virtualization machine 850 transmits first data to the second virtualization machine 830 with the same or lower safety level, and transmits the first data to another signal processing device 170b or 170z with the same or lower safety level.
  • Second data may be transmitted. Accordingly, data can be transmitted quickly and stably based on the safety level. Furthermore, data processing can be performed efficiently using microservices.
  • FIG. 14B is a diagram illustrating communication between an M core (MR) and an application processor core (LR) within a signal processing device.
  • MR M core
  • LR application processor core
  • the fourth virtualization machine 840 running on the M core may run on the real-time operating system 805a and the driver 846.
  • the second virtual machine 850 running on the application processor core (LR) may run on the operating system 805c and driver 836 corresponding to the third security level.
  • each driver 836 and 846 can perform Ethernet communication with an external switch (TSW).
  • TSW external switch
  • the application processor core (LR) and M core (MR) can execute IPC managers 838 and 848, respectively, to perform IPC communication.
  • the processor 175 including a first type of processor core (LR) and the second processor 175 including a second type of processor core (MR) use inter platform communication (IPC). ), data can be transmitted or received. Accordingly, data can be transmitted quickly and stably.
  • IPC inter platform communication
  • FIG. 15 is a diagram illustrating communication between the first central signal processing unit 170a and the second central signal processing unit 170b.
  • the first central signal processing unit 170a includes a processor 175, a second processor 177, and an interface (INTa), and can execute a plurality of virtual machines 820 to 850.
  • the first virtual machine 850 runs an application or microservice of ASI D or ASI B
  • the second virtual machine 830 runs an application or microservice of ASI B
  • the third virtual machine 830 may execute an application or microservice of QM
  • the fourth virtualization machine 840 may execute an application or microservice of ASI D.
  • the first central signal processing unit 170a executes the hypervisor 505 on the processor 175 and may execute a plurality of virtualization machines 820, 830, and 850 on the hypervisor 505.
  • the first central signal processing unit 170a may execute the virtualization machine 840 on the second processor 177 without executing a hypervisor.
  • each virtual machine (820 to 850) is equipped with a network interface or driver (821, 831, 841, 851) and performs Ethernet communication with an external switch (TSWa) through an Ethernet switch (ESW) in the interface (INTa), or interface Through the PCIe switch (PSW) within (INTa), PCIe communication can be performed with an external PCIe switch (PST).
  • a network interface or driver (821, 831, 841, 851)
  • ESW Ethernet switch
  • PST PCIe switch
  • the second central signal processing unit 170b includes a third processor 175b, a fourth processor 177b, and an interface INTb, and can execute a plurality of virtual machines 830r to 850r.
  • the second central signal processing unit 170b has a plurality of processor cores and an interface, runs a hypervisor 505r on the plurality of processor cores, and executes a plurality of virtualization machines on the hypervisor 505r. (830r ⁇ 850r) can be run.
  • the fifth virtual machine (850r) runs an application or microservice of ASI D or ASI B
  • the sixth virtual machine (830r) runs an application or microservice of QM
  • the seventh virtual machine 840r may run an application or microservice of ASI D.
  • each virtual machine (830r to 850r) is equipped with a network interface or driver (83r1, 841r, 851r), and performs Ethernet communication with an external switch (TSWb) through the Ethernet switch (ESWb) in the interface (INTb).
  • TSWb Ethernet switch
  • ESWb Ethernet switch
  • PCIe communication can be performed with an external PCIe switch (PST) through the PCIe switch (PSWb) in the interface (INTb).
  • 16 is a flowchart showing a method of operating a signal processing device according to an embodiment of the present disclosure.
  • the first virtual machine 850 in the processor 175 in the signal processing device 170 prepares for data transmission (S1710) and confirms a location to receive data (S1715).
  • the first virtual machine 850 checks whether only IPC (Inter Process Communication) communication is possible (S1718), and, if applicable, performs IPC communication (S1720) and completes data transmission (S1742). .
  • IPC Inter Process Communication
  • the first virtual machine 850 performs IPC communication when the data receiving location is the same as the first virtual machine 850 and only IPC communication using the memory 503 in the operating system is possible, Data transfer can be completed.
  • step 1718 if not applicable, the first virtual machine 850 checks whether IVC communication is possible (S1721), and if applicable, checks whether only IVC communication is possible (S1722) ), if applicable, IVC (Inter Virtual maschine communication) communication is performed (S1723) to complete data transmission.
  • the first virtual machine 850 receives data from the second virtual machine 830 in the signal processing device 170, and IVC communication uses the unique memory 508 in the hypervisor 505. If possible, data transmission can be completed by performing IVC communication.
  • step 1722 if not applicable, the first virtual machine 850 performs communication based on at least one of heterogeneous IVC communication and IPC (S1724) to complete data transmission.
  • the first virtual machine 850 is the first virtual machine 850 in the signal processing device 170 to receive data, and when IVC communication and IPC communication are possible, heterogeneous IVC communication and IPC Data transmission can be completed by performing communication based on at least one of the following.
  • step 1721 if not applicable, the first virtual machine 850 determines whether only IEC (Inter ECU Communication) communication is possible (S1726) and, if applicable, performs IEC communication. Thus, data transmission can be completed.
  • IEC Inter ECU Communication
  • the first virtual machine 850 in the signal processing device 170 may perform IEC communication with the virtual machine in the second signal processing device 170b to complete data transmission.
  • step 1726 if not applicable, the first virtual machine 850 determines whether IEC communication, IVC communication, and IPC communication are possible (S1730), and if applicable, IEC communication, Data transmission can be completed based on either IVC communication or IPC communication.
  • step 1728 if not applicable, the first virtual machine 850 determines whether only IEC communication and IVC communication are possible (S1730), and if applicable, either IEC communication or IVC communication. Based on either one, data transmission can be completed.
  • step S1732 if not applicable, the first virtual machine 850 determines that only IEC communication and IPC communication are possible, and performs data transmission based on either IEC communication or IPC communication. It can be completed.
  • FIGS 17A to 24 are diagrams referenced in the description of the operation of Figure 16.
  • FIG. 17A is a diagram illustrating an example of camera data transmission.
  • camera data from the camera 175 is transmitted to the hypervisor 505b in the second signal processing device 170b through the Ethernet switch (ESWb) in the interface INTb in the second signal processing device 170b.
  • ESWb Ethernet switch
  • INTb interface INTb in the second signal processing device 170b.
  • the ADAS application in the virtual machine 820b may sequentially perform an image processing microservice 1810, an object detection microservice 1815, and an object tracking microservice 1820.
  • the ADAS application in the virtual machine 820b may correspond to ASIL D.
  • the result data of the image processing micro service 1810 is stored in the shared memory 828b, and the object detection micro service 1815 may be executed based on the result data of the image processing micro service 1810.
  • the result data of the object detection micro service 1815 is stored in the shared memory 828b, and the object tracking micro service 1820 can be executed based on the result data of the object detection micro service 1815.
  • the result data of the object tracking microservice 1820 may be stored in the shared memory 508b within the hypervisor 508b.
  • the virtualization machine 830b running on the hypervisor 505b in the second signal processing device 170b can execute the Vehicle Service application.
  • the Freespace Planner microservice within the Vehicle Service application can be executed based on the result data of the object tracking microservice (1820).
  • the reespace Planner micro service in the virtual machine 830b can support ASIL B.
  • the result data of the object tracking micro service 1820 is transmitted to the signal processing device 170 via the PCIe switch (PSWb) in the interface (INTb) and the PCIe switch (PSW) in the interface (INT) in the signal processing device 170. ) can be transmitted to the virtualization machine 830 running on the hypervisor 505 in the virtual machine 830.
  • the result data of the object tracking microservice 1820 may be transmitted to the Mission Planner microservice 1822 within the virtualization machine 830.
  • the result data of the Mission Planner microservice 1822 is stored in the shared memory 838, and the Scenario Selector microservice 1825 can be executed based on the result data of the Mission Planner microservice 1822.
  • the result data of the Scenario Selector microservice 1825 may be stored in the shared memory 508 within the hypervisor 505.
  • the result data of the Scenario Selector microservice 1825 may be transmitted to another virtualization machine 820 running on the hypervisor 505 within the signal processing device 170.
  • the result data of the Scenario Selector microservice 1825 may be delivered to the Front View microservice 1840 and the Bird View microservice 1845 in the virtual machine 820 corresponding to QM.
  • the Front View microservice 1840 and the Bird View microservice 1845 can output a Front View image and a Bird View image, respectively.
  • the signal processing device 170 may further execute a virtualization machine 850 corresponding to system management executed on the hypervisor 505.
  • the signal processing device 170 may further execute the safety-related virtualization machine 840 corresponding to ASID D without executing the hypervisor 505.
  • Figure 17b is a diagram showing the priority of data transmission.
  • the data transmission priority of Network Configuration data, Time Synchronous Data, and Periodic Data may be High.
  • Event (Control) Data Event (Sensor) Data
  • Diagnostic data Audio data
  • Video data may be Medium.
  • the data transmission rank of Best Effort data may be Low.
  • 18A to 18E are diagrams illustrating various examples of data transmission flow.
  • FIG. 18A illustrates transmission of Periodic Sensor Data.
  • the vehicle display device 1300b according to the embodiment of the present disclosure shown in FIG. 18A may be the same as that in FIG. 9 .
  • CAN data from the first base device BUa may be input to the first area signal processing device 170z1 and converted into an Ethernet signal.
  • the converted Ethernet signal may be transmitted to some virtual machines (VSA, VSb) among the virtual machines (VSA, VSb, and VSc) in the signal processing device 170 through the Ethernet switch (ESW).
  • data from the fourth base device (BUd) and data from the fifth base device (BUd) pass through the second area signal processing device 170z2 and the Ethernet switch (ESW) to the signal processing device 170. It can be transmitted to the virtual machine (VSc) within the file.
  • the virtualization machine (VSc) may transmit input data to the sixth base device (BUf) through the third area signal processing device (170z3).
  • FIG. 18b illustrates transmission of Time Synchronous Control Data.
  • data from the fifth base device (BUd) will be transmitted to the virtual machine (VSb) in the signal processing device 170 via the second area signal processing device 170z2 and the Ethernet switch (ESW). You can.
  • the virtualization machine (VSb) can transmit data to the fourth base device (BUd) through the second area signal processing device (170z2).
  • the virtualization machine (VSb) may transmit data to the first base device (BUa) through the first area signal processing device 170z1.
  • the virtualization machine (VSb) can transmit data to the sixth base device (BUf) via the third area signal processing device (170z3).
  • Figure 18C illustrates transmission of camera data.
  • the first camera data may be transmitted to the virtualization machine (VSa) in the signal processing device 170 through the first area signal processing device 170z1 and the Ethernet switch (ESW).
  • VSa virtualization machine
  • ESW Ethernet switch
  • the second camera data may be transmitted to the virtualization machine (VSb) in the signal processing device 170 via the second area signal processing device 170z2 and the Ethernet switch (ESW).
  • VSb virtualization machine
  • ESW Ethernet switch
  • 18D illustrates transmission of signaled camera data.
  • the first camera data may be transmitted to the virtualization machine (VSa) in the signal processing device 170 through the first area signal processing device 170z1 and the Ethernet switch (ESW).
  • VSa virtualization machine
  • ESW Ethernet switch
  • the image processor microservice (ISPa) in a virtual machine (VSa) may transmit image processed data to the screen sharing microservice (SWSa) in another virtual machine (VSc).
  • result data from the screen sharing micro service (SWSa) in the virtual machine (VSc) may be input to the network display device (NDC) via the third area controller 170z3.
  • Figure 18E is a diagram illustrating service orchestration.
  • the first camera data is input to the first area signal processing device 170z1, and when the service location is changed, through the Ethernet switch (ESW) to the virtual machine (VSa) in the signal processing device 170. can be transmitted.
  • ESW Ethernet switch
  • VSa virtual machine
  • Figure 19 is a diagram illustrating the communication structure of a signal processing device.
  • the signal processing device 170 may include an interface (INT) and a processor 175.
  • INT interface
  • hypervisor 505 on processor 175, a plurality of virtual machines 820, 830, 840, 850 may run.
  • the first virtual machine 850 may execute the message bus 2010, and execute the communication framework 2020 and the adaptive platform 2040 on the message bus 2010.
  • the message bus 2010 can perform network communication, IPC-based shared memory communication, and IVC-based shared memory communication through the DDS 2012.
  • the message bus 2010 can perform network communication, MQTT communication, and SOME/IP communication through the router 2014.
  • the message bus 2010 can perform Ethernet communication through the SOME/IP interface 2016.
  • the communication framework 2020 can exchange data with the DDS 2012 through the message bus interface 2022.
  • the communication framework (2020) includes life cycle (2028), service management (2029), Health Monitor (2030), IntiConfig (2031), Diagnostics (2032), NetworkInf (2034), Monitoring (2036), and Logging (2036). 2038) can be executed.
  • the communication framework 2020 can exchange data with the first application 2023 through API.
  • the adaptive platform 2040 can exchange interfaces with the SOME/IP interface 2016 through the first interface 2046 and the second interface 2047.
  • the adaptive platform 2040 can exchange data with the second application 2043a through the Adaptive API and with the third application 2043b through the second interface 2047.
  • the first virtual machine 850 running within the signal processing device 170 may execute the DDS 2120, the IVC SHM interface 2140, and the IPC SHM interface 2160.
  • the driver 2119 between the shared memory 508 and the IVC SHM interface 2140 can perform bidirectional communication.
  • driver 2119 may transfer data from shared memory 508 to IVC SHM interface 2140.
  • bus management 2142 in the IVC SHM interface 2140 can activate the DDS feature.
  • bus management 2142 in the IVC SHM interface 2140 may transmit data to the path management 2132 in the DDS 2120.
  • the path management 2132 may include an IPC interface 2133, an IVC interface 2134, and an IEC interface 2135.
  • the IEC interface 2135 may include an Ethernet interface 2136 and a PCIe interface 2137.
  • the path management 2132 can transmit data to the external network interface card 2101 via the Ethernet interface 2136 and the driver 2115. Accordingly, Ethernet communication can be performed.
  • the path management 2132 can transmit data to the external PCIe device 2103 via the PCIe interface 2137 and the driver 2117. Accordingly, PCIe communication can be performed.
  • 22 is a diagram illustrating data transmission between a vehicle and a server or cloud.
  • an Ethernet signal from the first base device (BUa) or a CAN signal from the second base device (BUb) may be input to the area signal processing device 170z.
  • the area signal processing device 170z can convert CAN signals into Ethernet signals.
  • Ethernet signal from the area signal processing device 170z may be transmitted to the first central signal processing device 170a.
  • the first central signal processing unit 170a may transmit data to the second central signal processing unit 170b through PCIe communication.
  • the second central signal processing device 170b may transmit data to the external server 900a through the communication unit 120, such as wireless mobile communication or Ethernet communication.
  • the external server 9000 can transmit data to the external cloud 900b through Ethernet communication, etc.
  • Figure 23 shows an example of a communication interface of a vehicle display device.
  • the first base device BUa and the area signal processing device 170z can perform CAN communication through each M core or MCu.
  • the second base unit (BUb), the area signal processing unit 170z, the first central signal processing unit 170a, and the second central signal processing unit 170b, through their respective cores or processors, Ethernet communication can be performed.
  • first central signal processing unit 170a and the second central signal processing unit 170b can perform PCIe communication.
  • Figure 24 shows another example of a communication interface of a vehicle display device.
  • the first base device BUa and the area signal processing device 170z can perform CAN communication through each M core or MCU.
  • the second base device BUb and the first area signal processing device 170z1 may perform Ethernet communication through their respective cores or processors.
  • the third base device BUc and the second area signal processing device 170z2 may perform CAN communication through each M core or MCU.
  • the fourth base device BUd and the second area signal processing device 170z2 may perform Ethernet communication through their respective cores or processors.
  • first area signal processing unit 170z1, the second area signal processing unit 170z2, the first central signal processing unit 170a, the second central signal processing unit 170b, and the third central signal The processing device 170c may perform Ethernet communication through each core or processor.
  • first central signal processing unit 170a and the second central signal processing unit 170b can perform PCIe communication.
  • the second central signal processing unit 170b and the third central signal processing unit 170c may perform PCIe communication.

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

본 개시의 일 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 복수의 프로세서 코어를 구비하는 프로세서를 구비하고, 프로세서는, 하이퍼바이저 상에서 복수의 가상화 머신을 실행하고, 복수의 가상화 머신 중 제1 가상화 머신은, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 외부의 다른 신호 처리 장치로 제2 데이터를 전송한다. 이에 의해, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.

Description

신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치
본 개시는 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치에 관한 것이며, 더욱 상세하게는 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있는 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치에 관한 것이다.
차량은 탑승하는 사용자가 원하는 방향으로 이동시키는 장치이다. 대표적으로 자동차를 예를 들 수 있다.
한편, 차량을 이용하는 사용자의 편의를 위해, 차량 내부에 차량용 신호 처리 장치가 탑재되고 있다.
차량 내부의 신호 처리 장치는, 내부의 다양한 센서 장치로부터 센서 데이터를 수신하여 처리한다.
한편, 차량 운전 보조(ADAS) 또는 자율 주행 등으로 인해, 차량에 장착되는 센서의 종류와 개수가 증가하면서, 처리되어야 하는 데이터가 증가하는 추세이다.
이에 차량 내의 신호 처리 장치에서 신속하고, 안정적으로 데이터를 전송하는 방안이 연구되고 있다.
본 개시가 해결하고자 하는 과제는, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있는 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치를 제공하는 것이다.
본 개시가 해결하고자 하는 다른 과제는, 안전 레벨 기반하에 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
본 개시가 해결하고자 하는 또 다른 과제는, 마이크로 서비스를 이용하여 데이터 처리를 효율적으로 수행할 수 있는 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치를 제공하는 것이다.
본 개시의 일 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 복수의 프로세서 코어를 구비하는 프로세서를 구비하고, 프로세서는, 하이퍼바이저 상에서 복수의 가상화 머신을 실행하고, 복수의 가상화 머신 중 제1 가상화 머신은, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 외부의 다른 신호 처리 장치로 제2 데이터를 전송한다.
한편, 제1 가상화 머신에서 제2 가상화 머신으로의 통신 방식 중 어느 하나는, 제1 가상화 머신에서 다른 외부 신호 처리 장치로의 통신 방식 중 어느 하나와, 동일할 수 있다.
한편, 본 개시의 일 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 이더넷 통신을 위한 이더넷 스위치와, 외장 컴포넌트 고속 연결 통신을 위한 제2 스위치를 더 구비하고, 제1 가상화 머신은, 이더넷 통신 또는 외장 컴포넌트 고속 연결 통신에 의해, 외부의 다른 신호 처리 장치로, 제2 데이터를 전송할 수 있다.
한편, 제1 가상화 머신은, 하이퍼바이저 내의 공유 메모리 또는 이더넷 통신을 통해, 제2 가상화 머신으로, 제1 데이터를 전송할 수 있다.
한편, 프로세서는, 하이퍼바이저 상에 운영 체제를 실행하며, 제1 가상화 머신 내의 서비스 프로바이더는, 운영 체제 내의 공유 메모리를 통해, 제1 가상화 머신 내의 서비스 가입자(service subcriber)로, 제1 데이터를 전송할 수 있다.
한편, 제1 가상화 머신은, 이더넷 통신 또는 외장 컴포넌트 고속 연결 통신에 의해, 제2 신호 처리 장치 또는 영역 신호 처리 장치로, 제2 데이터를 전송할 수 있다.
한편, 영역 신호 처리 장치는, CAN 통신에 기초하여 수신되는 센서 데이터를 이더넷 신호로 변환하여, 전송하며, 제1 가상화 머신은, 이더넷 통신을 통해, 이더넷 신호로 변환된 센서 데이터를 수신할 수 있다.
한편, 프로세서는, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 디스플레이로 영상 신호를 전송할 수 있다.
한편, 프로세서는, 저전압 차동 신호((Low voltage differential signaling) 방식 또는 서데스(Serdes) 방식에 기초하여, 디스플레이로 영상 신호를 전송할 수 있다.
한편, 본 개시의 일 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 제1 타입의 복수의 프로세서 코어와 다른 제2 타입의 프로세서 코어를 구비하는 제2 프로세서를 더 구비하고, 프로세서는, 제2 프로세서로, 내부 플랫폼 통신(Inter platform communication와, IPC)에 기초하여, 제3 데이터를 전송할 수 있다.
한편, 제1 가상화 머신은, 제1 안전 레벨 또는 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고, 제2 프로세서는, 제2 안전 레벨의 제2 애플리케이션 또는 제2 애플리케이션에 대응하는 마이크로 서비스를 실행할 수 있다.
한편, 제1 가상화 머신은, 제1 안전 레벨 또는 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고, 제2 가상화 머신은, 제2 안전 레벨의 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
한편, 제1 가상화 머신은, 외부의 영역 신호 처리 장치로부터, 이더넷 통신을 통해, 마이크로 서비스의 결과 데이터를 수신하고, 수신되는 결과 데이터를, 안전 레벨이 동일하거나 더 낮은 제2 가상화 머신으로 전송할 수 있다.
한편, 프로세서는, 외부의 영역 신호 처리 장치로부터, 이더넷 통신을 통해, 주기적인 센서 데이터 또는 카메라 데이터를 수신할 수 있다.
한편, 프로세서는, 외부의 영역 신호 처리 장치로, 시간 동기 제어 데이터를 전송할 수 있다.
한편, 제1 가상화 머신은, 이더넷 통신을 통해 수신되는 카메라 데이터를 프로세싱하고, 프로세싱된 데이터를, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 전송할 수 있다.
한편, 프로세서는, 차량 오디오 버스(Automotive Audio Bus) 기반의 오디오 신호를 오디오 출력부로 전송할 수 있다.
한편, 제1 가상화 머신은, 안전 레벨이 동일하거나 더 낮은 제2 가상화 머신으로 제1 데이터를 전송하고, 안전 레벨이 동일하거나 더 낮은 외부의 다른 신호 처리 장치로 제2 데이터를 전송할 수 있다.
한편, 본 개시의 다른 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 복수의 프로세서 코어를 구비하는 프로세서를 구비하고, 프로세서는, 하이퍼바이저 상에서 복수의 가상화 머신을 실행하고, 복수의 가상화 머신 중 제1 가상화 머신은, 이더넷 통신 또는 하이퍼바이저 내의 공유 메모리 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고, 이더넷 통신 또는 외장 컴포넌트 고속 연결 통신 중 어느 하나에 기초하여, 외부의 다른 신호 처리 장치로 제2 데이터를 전송한다.
본 개시의 일 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 복수의 프로세서 코어를 구비하는 프로세서를 구비하고, 프로세서는, 하이퍼바이저 상에서 복수의 가상화 머신을 실행하고, 복수의 가상화 머신 중 제1 가상화 머신은, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 외부의 다른 신호 처리 장치로 제2 데이터를 전송한다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신에서 제2 가상화 머신으로의 통신 방식 중 어느 하나는, 제1 가상화 머신에서 다른 외부 신호 처리 장치로의 통신 방식 중 어느 하나와, 동일할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 본 개시의 일 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 이더넷 통신을 위한 이더넷 스위치와, 외장 컴포넌트 고속 연결 통신을 위한 제2 스위치를 더 구비하고, 제1 가상화 머신은, 이더넷 통신 또는 외장 컴포넌트 고속 연결 통신에 의해, 외부의 다른 신호 처리 장치로, 제2 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신은, 하이퍼바이저 내의 공유 메모리 또는 이더넷 통신을 통해, 제2 가상화 머신으로, 제1 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 프로세서는, 하이퍼바이저 상에 운영 체제를 실행하며, 제1 가상화 머신 내의 서비스 프로바이더는, 운영 체제 내의 공유 메모리를 통해, 제1 가상화 머신 내의 서비스 가입자(service subcriber)로, 제1 데이터를 전송할 수 있다. 이에 따라, 서비스 가입자에게 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신은, 이더넷 통신 또는 외장 컴포넌트 고속 연결 통신에 의해, 제2 신호 처리 장치 또는 영역 신호 처리 장치로, 제2 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 영역 신호 처리 장치는, CAN 통신에 기초하여 수신되는 센서 데이터를 이더넷 신호로 변환하여, 전송하며, 제1 가상화 머신은, 이더넷 통신을 통해, 이더넷 신호로 변환된 센서 데이터를 수신할 수 있다. 이에 따라, 센서 데이터를 신속하고 안정적으로 수신할 수 있게 된다.
한편, 프로세서는, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 디스플레이로 영상 신호를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 영상 신호를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 프로세서는, 저전압 차동 신호((Low voltage differential signaling) 방식 또는 서데스(Serdes) 방식에 기초하여, 디스플레이로 영상 신호를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 영상 신호를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 본 개시의 일 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 제1 타입의 복수의 프로세서 코어와 다른 제2 타입의 프로세서 코어를 구비하는 제2 프로세서를 더 구비하고, 프로세서는, 제2 프로세서로, 내부 플랫폼 통신(Inter platform communication와, IPC)에 기초하여, 제3 데이터를 전송할 수 있다. 이에 따라, 제3 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신은, 제1 안전 레벨 또는 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고, 제2 프로세서는, 제2 안전 레벨의 제2 애플리케이션 또는 제2 애플리케이션에 대응하는 마이크로 서비스를 실행할 수 있다. 이에 따라, 안전 레벨에 대응하는 애플리케이션 또는 마이크로 서비스를 실행할 수 있게 된다. 나아가, 마이크로 서비스를 이용하여 데이터 처리를 효율적으로 수행할 수 있게 된다.
한편, 제1 가상화 머신은, 제1 안전 레벨 또는 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고, 제2 가상화 머신은, 제2 안전 레벨의 애플리케이션 또는 마이크로 서비스를 실행할 수 있다. 이에 따라, 안전 레벨에 대응하는 애플리케이션 또는 마이크로 서비스를 실행할 수 있게 된다. 나아가, 마이크로 서비스를 이용하여 데이터 처리를 효율적으로 수행할 수 있게 된다.
한편, 제1 가상화 머신은, 외부의 영역 신호 처리 장치로부터, 이더넷 통신을 통해, 마이크로 서비스의 결과 데이터를 수신하고, 수신되는 결과 데이터를, 안전 레벨이 동일하거나 더 낮은 제2 가상화 머신으로 전송할 수 있다. 이에 안전 레벨 기반하에 데이터를 신속하고 안정적으로 전송할 수 있게 된다. 나아가, 마이크로 서비스를 이용하여 데이터 처리를 효율적으로 수행할 수 있게 된다.
한편, 프로세서는, 외부의 영역 신호 처리 장치로부터, 이더넷 통신을 통해, 주기적인 센서 데이터 또는 카메라 데이터를 수신할 수 있다. 이에 따라, 센서 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 프로세서는, 외부의 영역 신호 처리 장치로, 시간 동기 제어 데이터를 전송할 수 있다. 이에 따라, 시간 동기 제어 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신은, 이더넷 통신을 통해 수신되는 카메라 데이터를 프로세싱하고, 프로세싱된 데이터를, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 프로세서는, 차량 오디오 버스(Automotive Audio Bus) 기반의 오디오 신호를 오디오 출력부로 전송할 수 있다. 이에 따라, 오디오 신호를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신은, 안전 레벨이 동일하거나 더 낮은 제2 가상화 머신으로 제1 데이터를 전송하고, 안전 레벨이 동일하거나 더 낮은 외부의 다른 신호 처리 장치로 제2 데이터를 전송할 수 있다. 이에 따라, 안전 레벨 기반하에 데이터를 신속하고 안정적으로 전송할 수 있게 된다. 나아가, 마이크로 서비스를 이용하여 데이터 처리를 효율적으로 수행할 수 있게 된다.
한편, 본 개시의 다른 실시예에 따른 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치는, 복수의 프로세서 코어를 구비하는 프로세서를 구비하고, 프로세서는, 하이퍼바이저 상에서 복수의 가상화 머신을 실행하고, 복수의 가상화 머신 중 제1 가상화 머신은, 이더넷 통신 또는 하이퍼바이저 내의 공유 메모리 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고, 이더넷 통신 또는 외장 컴포넌트 고속 연결 통신 중 어느 하나에 기초하여, 외부의 다른 신호 처리 장치로 제2 데이터를 전송한다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
도 1은 차량 외부 및 차량 내부의 일예를 도시한 도면이다.
도 2 내지 도 2c는 차량용 통신 게이트웨이의 다양한 아키텍쳐를 도시한 도면이다.
도 3a는 차량 내부의 차량용 디스플레이 장치의 배치의 일예를 도시한 도면이다.
도 3b는 차량 내부의 차량용 디스플레이 장치의 배치의 다른 예를 도시한 도면이다.
도 4는 도 3b의 차량용 디스플레이 장치의 내부 블록도의 일예이다.
도 5a 내지 도 5d는 차량용 디스플레이 장치의 다양한 예를 도시하는 도면이다.
도 6은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 일 예이다.
도 7a는 본 개시와 관련한 신호 처리 장치 장치의 설명에 참조되는 도면이다.
도 7b는 본 개시의 실시예에 따른 마이크로 서비스의 실행의 예를 도시하는 도면이다.
도 8은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 다른 예이다.
도 9는 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 또 다른 예이다.
도 10은 본 개시의 실시예에 따른 신호 처리 장치의 내부 블록도의 일예이다.
도 11 내지 도 13은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 다양한 예이다.
도 14a 내지 도 15는 도 11 내지 도 13의 설명에 참조되는 도면이다.
도 16은 본 개시의 실시예에 따른 신호 처리 장치의 동작 방법을 나타내는 순서도이다.
도 17a 내지 도 24는 도 16의 동작 설명에 참조되는 도면이다.
이하에서는 도면을 참조하여 본 개시를 보다 상세하게 설명한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
도 1은 차량 외부 및 차량 내부의 일예를 도시한 도면이다.
도면을 참조하면, 차량(200)은, 동력원에 의해 회전하는 복수의 바퀴(103FR,103FL,103RL,..), 차량(200)의 진행 방향을 조절하기 위한 스티어링휠(150)에 의해 동작한다.
한편, 차량(200)은, 차량 전방의 영상 획득을 위한 카메라(195) 등을 더 구비할 수 있다.
한편, 차량(200)은, 내부에 영상, 정보 등의 표시를 위한 복수의 디스플레이(180a,180b)를 구비할 수 있다.
도 1에서는, 복수의 디스플레이(180a,180b)로, 클러스터 디스플레이(180a), AVN(Audio Video Navigation) 디스플레이(180b)를 예시한다. 그 외, HUD(Head Up Display) 등도 가능하다.
한편, AVN(Audio Video Navigation) 디스플레이(180b)는, 센터 정보 디스플레이(Center Information Dislpay)라 명명할 수도 있다.
한편, 본 명세서에서 기술되는 차량(200)은, 동력원으로서 엔진을 구비하는 차량, 동력원으로서 엔진과 전기 모터를 구비하는 하이브리드 차량, 동력원으로서 전기 모터를 구비하는 전기 차량 등을 모두 포함하는 개념일 수 있다.
도 2 내지 도 2c는 차량용 통신 게이트웨이의 다양한 아키텍쳐를 도시한 도면이다.
먼저, 도 2는 차량용 통신 게이트웨이의 제1 아키텍쳐를 도시한 도면이다.
도면을 참조하면, 제1 아키텍쳐(300a)는, 존(zone) 기반의 아키텍쳐에 대응할 수 있다.
이에 따라, 복수의 존(zone)(Z1~Z4)에, 각각 차량 내부의 센서 장치와 프로세서가 배치될 수 있으며, 복수의 존(zone)(Z1~Z4)의 중앙 영역에, 차량용 통신 게이트웨이(GWDa)를 포함하는 신호 처리 장치(170a)가 배치될 수 있다.
한편, 신호 처리 장치(170a)는, 차량용 통신 게이트웨이(GWDa) 외에, 추가로, 자율 주행 제어 모듈(ACC), 칵핏 제어 모듈(CPG) 등을 더 포함할 수 있다.
이러한, 신호 처리 장치(170a) 내의 차량용 통신 게이트웨이(GWDa)는, HPC(High Performance Computing) 게이트웨이일 수 있다.
즉, 도 2의 신호 처리 장치(170a)는 통합형 HPC로서, 외부의 통신 모듈(미도시) 또는 복수의 존(zone)(Z1~Z4) 내의 프로세서(미도시)와 데이터를 교환할 수 있다.
도 3a는 차량 내부의 차량용 디스플레이 장치의 배치의 일예를 도시한 도면이다.
도면을 참조하면, 차량 내부에는, 클러스터 디스플레이(180a), AVN(Audio Video Navigation) 디스플레이(180b), 뒷 좌석 엔터테인먼트(Rear Seat Entertainment) 디스플레이(180c,180d), 룸미러 디스플레이(미도시) 등이 장착될 수 있다.
도 3b는 차량 내부의 차량용 디스플레이 장치의 배치의 다른 예를 도시한 도면이다.
본 개시의 실시예에 따른 차량용 디스플레이 장치(100)는, 복수의 디스플레이(180a~180b), 및 복수의 디스플레이(180a~180b)에 영상, 정보 등을 표시하기 위한 신호 처리를 수행하고, 적어도 하나의 디스플레이(180a~180b)에 영상 신호를 출력하는 신호 처리 장치(170)를 구비할 수 있다.
복수의 디스플레이(180a~180b) 중 제1 디스플레이(180a)는, 주행 상태, 동작 정보 등의 표시를 위한 클러스터 디스플레이(180a)이고, 제2 디스플레이(180b)는, 챠량 운행 정보, 네비게이션 지도, 다양한 엔터테인먼트 정보 또는 영상의 표시를 위한 AVN(Audio Video Navigation) 디스플레이(180b)일 수 있다.
신호 처리 장치(170)는, 내부에 프로세서(175)를 구비하며, 프로세서(175) 내의 하이퍼바이저(미도시) 상에서, 제1 가상화 머신 내지 제3 가상화 머신(미도시)을 실행할 수 있다.
제2 가상화 머신(미도시)은 제1 디스플레이(180a)를 위해 동작하며, 제3 가상화 머신(미도시)은, 제2 디스플레이(180b)를 위해 동작할 수 있다.
한편, 프로세서(175) 내의 제1 가상화 머신(미도시)은, 제2 가상화 머신(미도시) 및 제3 가상화 머신(미도시)으로, 동일한 데이터 전송을 위해, 하이퍼바이저(505) 기반의 공유 메모리(508)가 설정되도록 제어할 수 있다. 이에 따라, 차량 내의 제1 디스플레이(180a)와 제2 디스플레이(180b)에 동일한 정보 또는 동일한 영상을 동기화하여 표시할 수 있게 된다.
한편, 프로세서(175) 내의 제1 가상화 머신(미도시)은, 데이터 분담 처리를 위해, 제2 가상화 머신(미도시)과 제3 가상화 머신(미도시)에 데이터의 적어도 일부를 공유한다. 이에 따라, 차량 내의 복수의 디스플레이를 위한 복수의 가상화 머신에서 데이터를 분담하여 처리할 수 있게 된다.
한편, 프로세서(175) 내의 제1 가상화 머신(미도시)은, 차량의 휠 속도 센서 데이터를 수신하고, 처리하여, 제2 가상화 머신(미도시) 또는 제3 가상화 머신(미도시) 중 적어도 하나로, 처리된 휠 속도 센서 데이터를 전송할 수 있다. 이에 따라, 차량의 휠 속도 센서 데이터를, 적어도 하나의 가상화 머신 등에 공유할 수 있게 된다.
한편, 본 개시의 실시예에 따른 차량용 디스플레이 장치(100)는, 주행 상태 정보, 간이 네비게이션 정보, 다양한 엔터테인먼트 정보 또는 영상의 표시를 위한 뒷 좌석 엔터테인먼트(Rear Seat Entertainment) 디스플레이(180c)를 더 구비할 수 있다.
신호 처리 장치(170)는, 프로세서(175) 내의 하이퍼바이저(미도시) 상에서, 제1 가상화 머신 내지 제3 가상화 머신(미도시) 외에 추가로 제4 가상화 머신(미도시)를 실행하여, RSE 디스플레이(180c)를 제어할 수 있다.
이에 따라, 하나의 신호 처리 장치(170)를 이용하여, 다양한 디스플레이(180a~180c)를 제어할 수 있게 된다.
한편, 복수의 디스플레이(180a~180c) 중 일부는, 리눅스 OS 기반 하에 동작하며, 다른 일부는 웹 OS 기반 하에 동작할 수 있다.
본 개시의 실시예에 따른 신호 처리 장치(170)는, 다양한 운영 체제(Operating system;OS) 하에 동작하는 디스플레이(180a~180c)에서도, 동일한 정보 또는 동일한 영상을 동기화하여 표시하도록 제어할 수 있다.
한편, 도 3b에서는, 제1 디스플레이(180a)에, 차량 속도 인디케이터(212a), 차량 내부 온도 인디케이터(213a)가 표시되고, 제2 디스플레이(180b)에, 복수의 애플리케이션과 차량 속도 인디케이터(212b)와 차량 내부 온도 인디케이터(213b)를 포함하는 홈 화면(222)이 표시되고, 제3 디스플레이(180c)에, 복수의 애플리케이션과 차량 내부 온도 인디케이터(213c)를 포함하는 제2 홈 화면(222b)이 표시되는 것을 예시한다.
도 4는 도 3b의 차량용 디스플레이 장치의 내부 블록도의 일예이다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(100)는, 입력부(110), 외부 장치와의 통신을 위한 통신부(120), 내부 통신을 위한 복수의 통신 모듈(EMa~EMd), 메모리(140), 신호 처리 장치(170), 복수의 디스플레이(180a~180c), 오디오 출력부(185), 전원 공급부(190)를 구비할 수 있다.
복수의 통신 모듈(EMa~EMd)은, 예를 들어, 도 2의 복수의 존(zone)(Z1~Z4)에 각각 배치될 수 있다.
한편, 신호 처리 장치(170)는, 내부에, 각 통신 모듈(EM1~EM4)과의 데이터 통신을 위한 통신 스위치(736b)를 구비할 수 있다.
각 통신 모듈(EM1~EM4)은, 복수의 센서 장치(SN) 또는 ECU(770) 또는 영역 신호 처리 장치(170Z)와 데이터 통신을 수행할 수 있다.
한편, 복수의 센서 장치(SN)는, 카메라(195), 라이다(196), 레이더(197) 또는 위치 센서(198)를 포함할 수 있다.
입력부(110)는, 버튼 입력, 터치 입력 등을 위한 물리적인 버튼, 패드 등을 구비할 수 있다.
한편, 입력부(110)는, 사용자 음성 입력을 위한 마이크(미도시)를 구비할 수 있다.
통신부(120)는, 이동 단말기(800) 또는 서버(900)와 무선(wireless) 방식으로, 데이터를 교환할 수 있다.
특히, 통신부(120)는, 차량 운전자의 이동 단말기와, 무선으로 데이터를 교환할 수 있다. 무선 데이터 통신 방식으로는, 블루투스(Bluetooth), WiFi, WiFi Direct, APiX 등 다양한 데이터 통신 방식이 가능하다.
통신부(120)는, 이동 단말기(800) 또는 서버(900)로부터, 날씨 정보, 도로의 교통 상황 정보, 예를 들어, TPEG(Transport Protocol Expert Group) 정보를 수신할 수 있다. 이를 위해, 통신부(120)는, 이동 통신 모듈(미도시)를 구비할 수 있다.
복수의 통신 모듈(EM1~EM4)은, ECU(770) 또는 센서 장치(SN) 또는 영역 신호 처리 장치(170Z)로부터, 센서 데이터 등을 수신하고, 수신한 센서 데이터를 신호 처리 장치(170)로 전송할 수 있다.
여기서, 센서 데이터는, 차량 방향 데이터, 차량 위치 데이터(GPS 데이터), 차량 각도 데이터, 차량 속도 데이터, 차량 가속도 데이터, 차량 기울기 데이터, 차량 전진/후진 데이터, 배터리 데이터, 연료 데이터, 타이어 데이터, 차량 램프 데이터, 차량 내부 온도 데이터, 차량 내부 습도 데이터 중 적어도 하나를 포함할 수 있다.
이러한 센서 데이터는, 헤딩 센서(heading sensor), 요 센서(yaw sensor), 자이로 센서(gyro sensor), 포지션 모듈(position module), 차량 전진/후진 센서, 휠 센서(wheel sensor), 차량 속도 센서, 차체 경사 감지센서, 배터리 센서, 연료 센서, 타이어 센서, 핸들 회전에 의한 스티어링 센서, 차량 내부 온도 센서, 차량 내부 습도 센서 등으로부터 획득될 수 있다.
한편, 포지션 모듈은, GPS 정보 수신을 위한 GPS 모듈 또는 위치 센서(198)을 포함할 수 있다.
한편, 복수의 통신 모듈(EM1~EM4) 중 적어도 하나는, GPS 모듈 또는 위치 센서(198)에서 센싱된 위치 정보 데이터를 신호 처리 장치(170)로 전송할 수 있다.
한편, 복수의 통신 모듈(EM1~EM4) 중 적어도 하나는, 카메라(195) 또는 라이다(196) 또는 레이더(197) 등으로부터 차량 전방 영상 데이터, 차량 측방 영상 데이터, 차량 후방 영상 데이터, 차량 주변 장애물 거리 정보 등을 수신하고, 수신한 정보를 신호 처리 장치(170)로 전송할 수 있다.
메모리(140)는, 신호 처리 장치(170)의 처리 또는 제어를 위한 프로그램 등, 차량용 디스플레이 장치(100) 전반의 동작을 위한 다양한 데이터를 저장할 수 있다.
예를 들어, 메모리(140)는, 프로세서(175) 내에서 실행하기 위한, 하이퍼바이저, 제1 가상화 머신 내지 제3 가상화 머신에 관한 데이터를 저장할 수 있다.
오디오 출력부(185)는, 신호 처리 장치(170)로부터의 전기 신호를 오디오 신호로 변환하여 출력한다. 이를 위해, 스피커 등을 구비할 수 있다.
전원 공급부(190)는, 신호 처리 장치(170)의 제어에 의해, 각 구성요소들의 동작에 필요한 전원을 공급할 수 있다. 특히, 전원 공급부(190)는, 차량 내부의 배터리 등으로부터 전원을 공급받을 수 있다.
신호 처리 장치(170)는, 차량용 디스플레이 장치(100) 내의 각 유닛의 전반적인 동작을 제어한다.
예를 들어, 신호 처리 장치(170)는, 차량용 디스플레이(180a,180b)를 위한 신호 처리를 수행하는 프로세서(175)를 포함할 수 있다.
프로세서(175)는, 프로세서(175) 내의 하이퍼바이저(미도시) 상에서, 제1 가상화 머신 내지 제3 가상화 머신(미도시)을 실행할 수 있다.
제1 가상화 머신 내지 제3 가상화 머신(미도시) 중 제1 가상화 머신(미도시)은, 서버 가상화 머신(Server Virtual Maschine)이라 명명할 수 있으며, 제2 가상화 머신 내지 제3 가상화 머신(미도시)은 게스트 가상화 머신(Guest Virtual Maschine)이라 명명할 수 있다.
예를 들어, 프로세서(175) 내의 제1 가상화 머신(미도시)은, 복수의 센서 장치로부터의 센서 데이터, 예를 들어, 차량 센서 데이터, 위치 정보 데이터, 카메라 영상 데이터, 오디오 데이터 또는 터치 입력 데이터를 수신하고, 처리 또는 가공하여 출력할 수 있다.
이와 같이, 제1 가상화 머신(미도시)에서 대부분의 데이터 처리를 수행함으로써, 1:N 방식의 데이터의 공유가 가능하게 된다.
다른 예로, 제1 가상화 머신(미도시)은, 제2 가상화 머신 내지 제3 가상화 머신(미도시)을 위해, CAN 데이터, 이더넷 데이터, 오디오 데이터, 라디오 데이터, USB 데이터, 무선 통신 데이터를 직접 수신하고 처리할 수 있다.
그리고, 제1 가상화 머신(미도시)은, 처리된 데이터를 제2 가상화 머신 내지 제3 가상화 머신(미도시)으로 전송할 수 있다.
이에 따라, 제1 가상화 머신 내지 제3 가상화 머신(미도시) 중 제1 가상화 머신(미도시)만, 복수의 센서 장치로부터의 센서 데이터, 통신 데이터, 또는 외부 입력 데이터를 수신하여, 신호 처리를 수행할 수행함으로써, 다른 가상화 머신에서의 신호 처리 부담이 경감되며, 1:N 데이터 통신이 가능하게 되어, 데이터 공유시의 동기화가 가능하게 된다.
한편, 제1 가상화 머신(미도시)은, 데이터를 공유 메모리(508)에 기록하여, 제2 가상화 머신(미도시) 및 제3 가상화 머신(미도시)으로 동일한 데이터를 공유하도록 제어할 수 있다.
예를 들어, 제1 가상화 머신(미도시)은, 차량 센서 데이터, 상기 위치 정보 데이터, 상기 카메라 영상 데이터, 또는 상기 터치 입력 데이터를 공유 메모리(508)에 기록하여, 제2 가상화 머신(미도시) 및 제3 가상화 머신(미도시)으로 동일한 데이터를 공유하도록 제어할 수 있다. 이에 따라, 1:N 방식의 데이터의 공유가 가능하게 된다.
결국, 제1 가상화 머신(미도시)에서 대부분의 데이터 처리를 수행함으로써, 1:N 방식의 데이터의 공유가 가능하게 된다.
한편, 프로세서(175) 내의 제1 가상화 머신(미도시)은, 제2 가상화 머신(미도시) 및 제3 가상화 머신(미도시)으로, 동일한 데이터 전송을 위해, 하이퍼바이저(505) 기반의 공유 메모리(508)가 설정되도록 제어할 수 있다.
한편, 신호 처리 장치(170)는, 오디오 신호, 영상 신호, 데이터 신호 등 다양한 신호를 처리할 수 있다. 이를 위해, 신호 처리 장치(170)는, 시스템 온 칩(System On Chip,SOC)의 형태로 구현될 수 있다.
한편, 도 4의 디스플레이 장치(100) 내의 신호 처리 장치(170)는, 도 5a 이하 등의 차량용 디스플레이 장치의 신호 처리 장치(170,170a1,170a2)와 동일할 수 있다.
도 5a 내지 도 5d는 차량용 디스플레이 장치의 다양한 예를 도시하는 도면이다.
도 5a는 본 개시의 실시예에 따른 차량용 디스플레이 장치의 일예를 도시한다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(800a)는, 신호 처리 장치(170a1,170a2), 복수의 영역 신호 처리 장치(170Z1~170Z4)를 포함한다.
한편, 도면에서는, 신호 처리 장치(170a1,170a2)로 2개를 예시하나, 이는 백업 등을 위해서 예시한 것이며, 1개도 가능하다.
한편, 신호 처리 장치(170a1,170a2)는, HPC(High Performance Computing) 신호 처리 장치로 명명될 수도 있다.
복수의 영역 신호 처리 장치(170Z1~170Z4)는, 각 영역(Z1~Z4)에 배치되어, 센서 데이터를, 신호 처리 장치(170a1,170a2)로 전송할 수 있다.
신호 처리 장치(170a1,170a2)는, 복수의 영역 신호 처리 장치(170Z1~170Z4) 또는 통신 장치(120)로부터 유선으로 데이터를 수신한다.
도면에서는, 신호 처리 장치(170a1,170a2)와 복수의 영역 신호 처리 장치(170Z1~170Z4) 사이에서 유선 통신에 기반하여 데이터를 교환하고, 신호 처리 장치(170a1,170a2)와 서버(400)는 무선 통신에 기반하여 데이터를 교환하는 것을 예시하나, 통신 장치(120)와 서버(400) 사이에서 무선 통신에 기반하여 데이터를 교환하고, 신호 처리 장치(170a1,170a2)와 통신 장치(120)는, 유선 통신에 기반하여 데이터를 교환할 수 있다.
한편, 신호 처리 장치(170a1,170a2)에 수신되는 데이터는, 카메라 데이터 또는 센서 데이터를 포함할 수 있다.
예를 들어, 차량 내의 센서 데이터는, 차량 휠 속도 데이터, 차량 방향 데이터, 차량 위치 데이터(GPS 데이터), 차량 각도 데이터, 차량 속도 데이터, 차량 가속도 데이터, 차량 기울기 데이터, 차량 전진/후진 데이터, 배터리 데이터, 연료 데이터, 타이어 데이터, 차량 램프 데이터, 차량 내부 온도 데이터, 차량 내부 습도 데이터, 차량 외부 레이더 데이터, 차량 외부 라이다 데이터 중 적어도 하나를 포함할 수 있다.
한편, 카메라 데이터는, 차량 외부 카메라 데이터, 차량 내부 카메라 데이터를 포함할 수 있다.
한편, 신호 처리 장치(170a1,170a2)는, 세이프티(safety) 기준으로 복수의 가상화 머신(820,830,840)을 실행할 수 있다.
도면에서는, 신호 처리 장치(170a) 내의 프로세서(175)가, 하이퍼바이저(505)를 실행하고, 하이퍼바이저(505) 상에서, 자동차 안전 무결성 수준(Automotive SIL;ASIL)에 따라, 제1 내지 제3 가상화 머신(820~840)을 실행하는 것을 예시한다.
제1 가상화 머신(820)은, 자동차 안전 무결성 수준(ASIL)에서 가장 낮은 안전 레벨이며 강제성이 없는 등급인, QM(Quality Management)에 대응하는 가상화 머신일 수 있다.
제1 가상화 머신(820)은, 운영 체제(822), 운영 체제(822) 상의 컨테이너 런타임(824), 컨테이너 런타임(824) 상의 컨테이너(827,829)를 실행할 수 있다.
제2 가상화 머신(820)은, 자동차 안전 무결성 수준(ASIL)에서, 심각도 (Severity), 발생 빈도 (Exposure) 및 제어 가능성 (Contrallability)의 합이 7 또는 8인, ASIL A 또는 ASIL B에 대응하는 가상화 머신일 수 있다.
제2 가상화 머신(820)은, 운영 체제(832), 운영 체제(832) 상의 컨테이너 런타임(834), 컨테이너 런타임(834) 상의 컨테이너(837,839)를 실행할 수 있다.
제3 가상화 머신(840)은, 자동차 안전 무결성 수준(ASIL)에서, 심각도 (Severity), 발생 빈도 (Exposure) 및 제어 가능성 (Contrallability)의 합이 9 또는 10인, ASIL C 또는 ASIL D에 대응하는 가상화 머신일 수 있다.
한편, ASIL D는, 가장 높은 안전 레벨을 요구하는 등급에 대응할 수 있다.
제3 가상화 머신(840)은, 세이프티 운영 체제(842), 운영 체제(842) 상의 어플리케이션(845)를 실행할 수 있다.
한편, 제3 가상화 머신(840)은, 세이프티 운영 체제(842), 세이프티 운영 체제(842) 상의 컨테이너 런타임(844), 컨테이너 런타임(844) 상의 컨테이너(847)를 실행할 수도 있다.
한편, 도면과 달리, 제3 가상화 머신(840)은, 프로세서(175)가 아닌, 별도의 코어를 통해 실행되는 것도 가능하다. 이에 대해서는 도 5b를 참조하여 후술한다.
도 5b는 본 개시의 실시예에 따른 차량용 디스플레이 장치의 다른 예를 도시한다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(800b)는, 신호 처리 장치(170a1,170a2), 복수의 영역 신호 처리 장치(170Z1~170Z4)를 포함한다.
도 5b의 차량용 디스플레이 장치(800b)는, 도 5a의 차량용 디스플레이 장치(800a)와 유사하나, 신호 처리 장치(170a1)가 도 5a의 신호 처리 장치(170a1)와 일부 차이가 있다.
그 차이를 중심으로 기술하면, 신호 처리 장치(170a1)는, 프로세서(175)와 제2 프로세서(177)를 구비할 수 있다.
신호 처리 장치(170a1) 내의 프로세서(175)는, 하이퍼바이저(505)를 실행하고, 하이퍼바이저(505) 상에서, 자동차 안전 무결성 수준(Automotive SIL;ASIL)에 따라, 제1 내지 제2 가상화 머신(820~830)을 실행한다.
제1 가상화 머신(820)은, 운영 체제(822), 운영 체제(822) 상의 컨테이너 런타임(824), 컨테이너 런타임(824) 상의 컨테이너(827,829)를 실행할 수 있다.
제2 가상화 머신(820)은, 운영 체제(832), 운영 체제(832) 상의 컨테이너 런타임(834), 컨테이너 런타임(834) 상의 컨테이너(837,839)를 실행할 수 있다.
한편, 신호 처리 장치(170a1) 내의 제2 프로세서(177)는, 제3 가상화 머신(840)을 실행할 수 있다.
제3 가상화 머신(840)은, 세이프티 운영 체제(842), 운영 체제(842) 상의 오토사(845), 오토사(845) 상의 어플리케이션(845)를 실행할 수 있다. 즉, 도 5a와 달리, 운영 체제(842) 상의 오토사(846)를 더 실행할 수 있다.
한편, 제3 가상화 머신(840)은, 도 5a와 유사하게, 세이프티 운영 체제(842), 세이프티 운영 체제(842) 상의 컨테이너 런타임(844), 컨테이너 런타임(844) 상의 컨테이너(847)를 실행할 수도 있다.
한편, 높은 안전 레벨을 요구하는 제3 가상화 머신(840)은, 제1 내지 제2 가상화 머신(820~830)과 달리, 다른 코어 또는 다른 프로세서인 제2 프로세서(177)에서 실행되는 것이 바람직하다.
한편, 도 5a와 도 5b의 신호 처리 장치(170a1,170a2)는, 제1 신호 처리 장치(170a)의 이상시, 백업용인 제2 신호 처리 장치(170a2)가 동작할 수 있다.
이와 달리, 신호 처리 장치(170a1,170a2)가 동시에 동작하며, 그 중 제1 신호 처리 장치(170a)가 메인으로 동작하고, 제2 신호 처리 장치(170a2)가 서브로 동작하는 것도 가능하다. 이에 대해서는 도 5c와 도 5d를 참조하여 기술한다.
도 5c는 본 개시의 실시예에 따른 차량용 디스플레이 장치의 또 다른 예를 도시한다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(800c)는, 신호 처리 장치(170a1,170a2), 복수의 영역 신호 처리 장치(170Z1~170Z4)를 포함한다.
한편, 도면에서는, 신호 처리 장치(170a1,170a2)로 2개를 예시하나, 이는 백업 등을 위해서 예시한 것이며, 1개도 가능하다.
한편, 신호 처리 장치(170a1,170a2)는, HPC(High Performance Computing) 신호 처리 장치로 명명될 수도 있다.
복수의 영역 신호 처리 장치(170Z1~170Z4)는, 각 영역(Z1~Z4)에 배치되어, 센서 데이터를, 신호 처리 장치(170a1,170a2)로 전송할 수 있다.
신호 처리 장치(170a1,170a2)는, 복수의 영역 신호 처리 장치(170Z1~170Z4) 또는 통신 장치(120)로부터 유선으로 데이터를 수신한다.
도면에서는, 신호 처리 장치(170a1,170a2)와 복수의 영역 신호 처리 장치(170Z1~170Z4) 사이에서 유선 통신에 기반하여 데이터를 교환하고, 신호 처리 장치(170a1,170a2)와 서버(400)는 무선 통신에 기반하여 데이터를 교환하는 것을 예시하나, 통신 장치(120)와 서버(400) 사이에서 무선 통신에 기반하여 데이터를 교환하고, 신호 처리 장치(170a1,170a2)와 통신 장치(120)는, 유선 통신에 기반하여 데이터를 교환할 수 있다.
한편, 신호 처리 장치(170a1,170a2)에 수신되는 데이터는, 카메라 데이터 또는 센서 데이터를 포함할 수 있다.
한편, 신호 처리 장치(170a1,170a2) 중 제1 신호 처리 장치(170a1) 내의 프로세서(175)는, 하이퍼바이저(505)를 실행하고, 하이퍼바이저(505) 상에서, 세이프티(safety) 가상화 머신(860)과, non-safety 가상화 머신(870)을 각각 실행할 수 있다.
한편, 신호 처리 장치(170a1,170a2) 중 제2 신호 처리 장치(170a2) 내의 프로세서(175b)는, 하이퍼바이저(505b)를 실행하고, 하이퍼바이저(505) 상에서, 세이프티(safety) 가상화 머신(880)만을 실행할 수 있다.
이러한 방식에 의하면, 세이프티(safety)에 대한 처리가 제1 신호 처리 장치(170a1)와 제2 신호 처리 장치(170a2)가 분리되므로, 안정성 및 처리 속도 향상을 도모할 수 있게 된다.
한편, 제1 신호 처리 장치(170a1)와 제2 신호 처리 장치(170a2) 사이에는 고속의 네트워크 통신이 수행될 수 있다.
도 5d는 본 개시의 실시예에 따른 차량용 디스플레이 장치의 또 다른 예를 도시한다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(800d)는, 신호 처리 장치(170a1,170a2), 복수의 영역 신호 처리 장치(170Z1~170Z4)를 포함한다.
도 5d의 차량용 디스플레이 장치(800d)는, 도 5c의 차량용 디스플레이 장치(800c)와 유사하나, 제2 신호 처리 장치(170a2)가 도 5c의 제2 신호 처리 장치(170a2)와 일부 차이가 있다.
도 5d의 제2 신호 처리 장치(170a2) 내의 프로세서(175b)는, 하이퍼바이저(505b)를 실행하고, 하이퍼바이저(505) 상에서, 세이프티(safety) 가상화 머신(880)과 non-safety 가상화 머신(890)을 각각 실행할 수 있다.
즉, 도 5c와 달리, 제2 신호 처리 장치(170a2) 내의 프로세서(175b)가, non-safety 가상화 머신(890)을 더 실행하는 것에 그 차이가 있다.
이러한 방식에 의하면, 세이프티(safety)와 non-safety에 대한 처리가, 제1 신호 처리 장치(170a1)와 제2 신호 처리 장치(170a2)가 분리되므로, 안정성 및 처리 속도 향상을 도모할 수 있게 된다.
도 6은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 일 예이다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(900)는, 신호 처리 장치(170)와 적어도 하나의 디스플레이를 구비한다.
도면에서는, 적어도 하나의 디스플레이로, 클러스터 디스플레이(180a)와, AVN 디스플레이(180b)를 예시한다.
한편, 차량용 디스플레이 장치(900)는, 복수의 영역 신호 처리 장치(170Z1~170Z4)를 더 구비할 수 있다.
이때의 신호 처리 장치(170)는, 복수의 CPU(175), GPU(178), NPU(179) 등을 갖는 고성능의 중앙 집중식 신호 처리 및 제어 장치로서, HPC(High Performance Computing) 신호 처리 장치 또는 중앙 신호 처리 장치라 명명할 수 있다.
복수의 영역 신호 처리 장치(170Z1~170Z4)와 신호 처리 장치(170) 사이는 유선 케이블(CB1~CB4)로 연결된다.
한편, 복수의 영역 신호 처리 장치(170Z1~170Z4) 사이에는, 각각 유선 케이블(CBa~CBd)로 연결될 수 있다.
이때의 유선 케이블(CBa~CBd)은, 캔(CAN) 통신 케이블 또는 이더넷(Ethernet) 통신 케이블 또는 PCI Express 케이블을 포함할 수 있다.
한편, 본 개시의 실시예에 따른 신호 처리 장치(170)는, 적어도 하나의 프로세서(175,178,177)와, 대용량의 저장 장치(925)를 구비할 수 있다.
예를 들어, 본 개시의 실시예에 따른 신호 처리 장치(170)는, 중앙 프로세서(175, 177), 그래픽 프로세서(178), 및 뉴럴 프로세서(179)를 포함할 수 있다.
한편, 복수의 영역 신호 처리 장치(170Z1~170Z4) 중 적어도 하나에서 센서 데이터가, 신호 처리 장치(170)로 전송될 수 있다. 특히, 센서 데이터가, 신호 처리 장치(170) 내의 저장 장치(925)로 저장될 수 있다.
이때의 센서 데이터는, 카메라 데이터, 라이다 데이터, 레이더 데이터, 차량 방향 데이터, 차량 위치 데이터(GPS 데이터), 차량 각도 데이터, 차량 속도 데이터, 차량 가속도 데이터, 차량 기울기 데이터, 차량 전진/후진 데이터, 배터리 데이터, 연료 데이터, 타이어 데이터, 차량 램프 데이터, 차량 내부 온도 데이터, 차량 내부 습도 데이터 중 적어도 하나를 포함할 수 있다.
도면에서는, 카메라(195a)로부터의 카메라 데이터와, 라이다 센서(196)로부터의 라이다 데이터가, 제1 영역 신호 처리 장치(170Z1)로 입력되고, 카메라 데이터와 라이다 데이터가, 제2 영역 신호 처리 장치(170Z2)와 제3 영역 신호 처리 장치(170Z3) 등을 경유하여, 신호 처리 장치(170)로 전송되는 것을 예시한다.
한편, 저장 장치(925)로의 데이터 읽기 속도 또는 쓰기 속도가, 복수의 영역 신호 처리 장치(170Z1~170Z4) 중 적어도 하나에서 센서 데이터가, 신호 처리 장치(170)로 전송될 때의 네트워크 속도 보다 빠르므로, 네트워크 병목 현상이 발생하지 않도록, 멀티 패쓰 라우팅이 수행되는 것이 바람직하다.
이를 위해 본 개시의 실시예에 따른 신호 처리 장치(170)는, 소프트웨어 정의 네트워크(Software Defined Network; SDN) 기반의 멀티 패쓰 라우팅을 수행할 수 있다. 이에 따라, 저장 장치(925)의 데이터 읽기 또는 쓰기시의 안정적인 네트워크 환경을 확보할 수 있게 된다. 나아가, 다중 경로를 사용하여 저장 장치(925)로 데이터를 전송할 수 있으므로, 동적으로 네트워크 구성을 변경하여 데이터를 전송할 수 있게 된다.
본 개시의 실시예에 따른 차량용 디스플레이 장치(900) 내의 복수의 영역 신호 처리 장치(170Z1~170Z4)와 신호 처리 장치(170) 사이의 데이터 통신은, 고대역 저지연의 통신을 위해, 외장 컴포넌트 고속 연결(Peripheral Component Interconnect Express) 통신인 것이 바람직하다.
도 7a는 본 개시와 관련한 신호 처리 장치 장치의 설명에 참조되는 도면이다.
도면을 참조하면, 본 개시와 관련한 신호 처리 장치(170x)는, 차량의 센서 데이터 또는 카메라 데이터 등에 기초하여, 애플리케이션(785)을 실행하고, 애플리케이션(785)의 결과 데이터를 복수의 패쓰를 통해 출력할 수 있다.
이러한 방식에 의하면, 애플리케이션(785)의 실행 완료가 되어야, 애플리케이션(785)의 결과 데이터가 출력되므로, 애플리케이션(785)의 실행 완료 전까지, 비효율이 발생하며, 상당한 시간이 소요될 가능성이 높아지게 된다.
이에 본 개시에서는, 애플리케이션의 실행시에, 애플리케이션의 중간 결과 데이터 등을 공유하는 방안을 제안한다.
이를 위해, 본 개시의 실시예에 따른 신호 처리 장치(170)는, 애플리케이션을 복수의 마이크로 서비스(Micro service)로 분리하고, 마이크로 서비스의 결과 등에 기초하여 다른 마이크로 서비스를 실행시켜, 워크로드(Workload)를 효율적으로 분담하도록 한다.
도 7b는 본 개시의 실시예에 따른 마이크로 서비스의 실행의 예를 도시하는 도면이다.
도면을 참조하면, 본 개시와 관련한 신호 처리 장치(170)는, 차량의 센서 데이터 또는 카메라 데이터 등에 기초하여, 애플리케이션(795)을 실행할 수 있다.
이때, 본 개시와 관련한 신호 처리 장치(170)는, 애플리케이션(795)을 위해, 복수의 마이크로 서비스를 구분하여 실행할 수 있다.
한편, 본 개시의 실시예에 따른 신호 처리 장치(170)는, 안전 레벨 별로, 애플리케이션 또는 마이크로 서비스를 구분하여 실행할 수 있다.
이때, 본 개시의 실시예에 따른 신호 처리 장치(170)는, 전송 애플리케이션 또는 마이크로 서비스가, 수신 애플리케이션 또는 마이크로 서비스 보다 안전 레벨이 더 높거나 동일한 경우, 전송 애플리케이션 또는 마이크로 서비스의 결과 데이터를 전송하도록 한다.
한편, 본 개시의 실시예에 따른 신호 처리 장치(170)는, 전송 애플리케이션 또는 마이크로 서비스가, 수신 애플리케이션 또는 마이크로 서비스 보다 안전 레벨이 더 낮은 경우, 전송 애플리케이션 또는 마이크로 서비스의 결과 데이터를 전송하지 못하도록 한다.
도면에서는, 입력 데이터에 기초하여, 제2 안전 레벨인 ASIL D에 대응하는 제1 마이크로 서비스(910)이 실행되고, ASIL D에 대응하는 제1 마이크로 서비스(910)의 결과 데이터는, 각각, 제3 안전 레벨인 QM에 대응하는 제2 마이크로 서비스(920a), 제1 안전 레벨인 ASIL B에 대응하는 제3 마이크로 서비스(920b), 제1 안전 레벨인 ASIL B에 대응하는 제4 마이크로 서비스(920c), 제3 안전 레벨인 ASIL D에 대응하는 제5 마이크로 서비스(920d)로 전송될 수 있다.
제1 마이크로 서비스(910)의 안전 레벨이, 제2 마이크로 서비스(920a), 제3 마이크로 서비스(920b), 제4 마이크로 서비스(920c)의 안전 레벨 보다 높으므로, 제1 마이크로 서비스(910)의 결과 데이터의 전송이 가능하게 된다.
한편, 제1 마이크로 서비스(910)의 안전 레벨이, 제5 마이크로 서비스(920d)의 안전 레벨과 동일하므로, 제1 마이크로 서비스(910)의 결과 데이터의 전송이 가능하게 된다.
다음, 제3 안전 레벨인 QM에 대응하는 제6 마이크로 서비스(930a)는, 제2 마이크로 서비스(920a)의 결과 데이터에 기초하여, 실행되며, 그 결과 데이터는 제1 패쓰를 통해 출력될 수 있다.
한편, 제1 안전 레벨인 ASIL B에 대응하는 제7 마이크로 서비스(930b)는, 제3 마이크로 서비스(920b)의 결과 데이터와 제4 마이크로 서비스(920c)의 결과 데이터에 기초하여, 실행되며, 그 결과 데이터는 제2 패쓰를 통해 출력될 수 있다.
한편, 제2 안전 레벨인 ASIL D에 대응하는 제8 마이크로 서비스(930c)는, 제5 마이크로 서비스(920d)의 결과 데이터에 기초하여, 실행되며, 그 결과 데이터는 제3 패쓰를 통해 출력될 수 있다.
도면과 같이, 애플리케이션(795)의 결과 데이터를 복수의 패스를 출력하는 것 외에, 도 7a와 달리, 신호 처리 장치(170) 내부에서 각각의 패쓰를 통해, 해당하는 마이크로 서비스를 실행하여 처리함으로써, 워크로드(Workload)를 효율적으로 분담할 수 있어, 데이터 처리를 효율적으로 수행할 수 있게 된다.
도 8은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 다른 예이다.
도면을 참조하면, 복수의 신호 처리 장치를 포함하는 차량용 디스플레이 장치(1300)는, 중앙 신호 처리 장치(170)와, 복수의 영역별 신호 처리 장치(170z1~170z3)를 구비한다.
중앙 신호 처리 장치(170)는, 적어도 하나의 프로세서(175a,175b,175c)와, 복수의 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나와 데이터를 교환하기 위한 인터페이스(INT)를 구비한다.
한편, 인터페이스(INT)는, 복수의 영역별 신호 처리 장치(170z1~170z3)와의 데이터 교환을 위해, 이더넷 통신을 위한 이더넷 스위치(ESW), 외장 컴포넌트 고속 연결((Peripheral Component Interconnect Express; PCIe) 통신을 위한 PCIe 스위치(PSW), nVMe 인터페이스(NMV), 캔 통신 인터페이스(미도시) 등을 구비할 수 있다.
한편, 본 개시의 실시예에 따른 중앙 신호 처리 장치(170) 내의 적어도 하나의 프로세서(175a,175b,175c)는, 복수의 가상화 머신을 실행할 수 있다.
한편, 복수의 가상화 머신 중 제1 가상화 머신은, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 외부의 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나로 제2 데이터를 전송한다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신에서 제2 가상화 머신으로의 통신 방식 중 어느 하나는, 제1 가상화 머신에서 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나로의 통신 방식 중 어느 하나와, 동일할 수 있다.
예를 들어, 제1 가상화 머신은, 하이퍼바이저(505) 내의 공유 메모리(508) 또는 이더넷 통신을 통해, 제2 가상화 머신(830)으로, 제1 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신은, 이더넷 통신 또는 PCIe 통신에 의해, 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나로, 제2 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 중앙 신호 처리 장치(170)의 제1 단자(Tna)는, 제1 영역 신호 처리 장치(170z1)의 제1 단자(TNbz1)에 전기적으로 연결되고, 제1 영역 신호 처리 장치(170z1)의 제2 단자(TNaz1)는, 제2 영역 신호 처리 장치(170z2)의 제1 단자(TNbz2)에 전기적으로 연결될 수 있다.
한편, 제2 영역 신호 처리 장치(170z2)의 제2 단자(TNaz2)는, 제3 영역 신호 처리 장치(170z3)의 제1 단자(TNbz3)에 전기적으로 연결되고, 제3 영역 신호 처리 장치(170z3)의 제2 단자(TNaz3)는, 중앙 신호 처리 장치(170)에 전기적으로 연결될 수 있다.
한편, 복수의 영역별 신호 처리 장치(170z1~170z3)와, 중앙 신호 처리 장치(170) 사이의 데이터 교환은, 이더넷 스위치(ESW)를 통한 이더넷 통신 또는 외장 컴포넌트 고속 연결((Peripheral Component Interconnect Express; PCIe) 스위치(PSW)를 통한 PCIe 통신이 수행될 수 있다.
한편, 중앙 신호 처리 장치(170)의 제2 단자(Tnb)는, 내부의 프로세서(175a,175b,175c) 중 어느 하나인 제2 프로세서(175b)에 전기적으로 접속될 수 있다.
한편, 제1 영역 신호 처리 장치(170z1)의 제3 단자(TNoz1)는, 센서 장치 또는 액츄에이터에 접속되는 제1 베이스 장치(BUa)의 접속 단자(TNua)에 전기적으로 연결될 수 있다.
한편, 제2 영역 신호 처리 장치(170z2)의 제3 단자(TNoz2)는, 제2 베이스 장치(BUb)의 접속 단자(TNub)에 전기적으로 연결될 수 있다.
한편, 제2 영역 신호 처리 장치(170z2)는 별도의 단자 등을 통해, 센서 장치 또는 액츄에이터에 접속되는 제1 엔드포인트 장치(EDa)에 전기적으로 연결될 수 있다.
한편, 제3 영역 신호 처리 장치(170z3)의 제3 단자(TNoz3)는, 카메라 또는 디스플레이를 위한 네트워크 디스플레이 장치(NDC)에 전기적으로 연결될 수 있다.
한편, 제3 영역 신호 처리 장치(170z3)는 별도의 단자 등을 통해, 센서 장치 또는 액츄에이터에 접속되는 제2 엔드포인트 장치(EDb)에 전기적으로 연결될 수 있다.
한편, 중앙 신호 처리 장치(170)는, 이동 통신, 와이파이 통신, 블루투스 통신 또는 V2X 통신 등을 위한 통신부(120)와 전기적으로 연결될 수 있다.
한편, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 디스플레이(180)로 영상 신호를 전송할 수 있다.
예를 들어, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, 저전압 차동 신호((Low voltage differential signaling) 방식 또는 서데스(SerDes) 방식에 기초하여, 디스플레이(180)로 영상 신호를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 영상 신호를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, 차량 오디오 버스(Automotive Audio Bus) 기반의 오디오 신호를 오디오 출력부(185)로 전송할 수 있다. 이에 따라, 오디오 신호를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, USB 장치와 같은 메모리(140)와, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 데이터를 교환할 수 있다. 이에 따라, 메모리(140)와 데이터를 신속하고 안정적으로 교환할 수 있게 된다
예를 들어, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, USB 장치와 같은 메모리(140)로, I2C(Inter-Integrated Circuit) 통신 방식 또는 SPI(Serial peripheral interface) 통신 방식 또는 GPIO(General Purpose input Output) 통신 방식 중 어느 하나에 기초하여 데이터를 교환할 수 있다.
한편, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 카메라 장치(195)로부터 카메라 데이터를 수신할 수 있다. 이에 따라, 카메라 데이터를 신속하고 안정적으로 수신할 수 있게 된다.
예를 들어, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, 서데스(SerDes) 방식 또는 이더넷 통신 중 어느 하나에 기초하여, 카메라 장치(195)로부터 카메라 데이터를 수신할 수 있다.
한편, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 센서 장치(SNm)로부터 센서 데이터를 수신할 수 있다. 에 따라, 센서 데이터를 신속하고 안정적으로 수신할 수 있게 된다.
예를 들어, 중앙 신호 처리 장치(170) 내의 프로세서(175)는, 서데스(SerDes) 방식 또는 이더넷 통신 또는 CAN 통신 방식 중 어느 하나에 기초하여, 센서 장치(SNm)로부터 센서 데이터를 수신할 수 있다.
도 9는 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 또 다른 예이다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(1300b)는, 도 8의 차량용 디스플레이 장치(1300)와 유사하나, 제1 엔드포인트 장치(EDa)와 제2 엔드포인트 장치(EDb)가 생략되고, 제1 중앙 신호 처리 장치(170a)와, 제2 중앙 신호 처리 장치(170b)와, 제3 베이스 장치(BUc)와, 제4 베이스 장치(BUd)와, 제5 베이스 장치(BUe)가 더 구비되는 것에 그 차이가 있다.
본 개시의 실시예에 따른 차량용 디스플레이 장치(1300b)는, 제1 중앙 신호 처리 장치(170a)와, 제2 중앙 신호 처리 장치(170b)와, 복수의 영역별 신호 처리 장치(170z1~170z3)를 구비한다.
한편, 제1 중앙 신호 처리 장치(170a)는, 제1 타입의 복수의 프로세서 코어를 포함하는 프로세서(175)와, 복수의 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나와 데이터를 교환하기 위한 인터페이스(INT)를 구비한다.
한편, 인터페이스(INT)는, 복수의 영역별 신호 처리 장치(170z1~170z3)와의 데이터 교환을 위해, 이더넷 통신을 위한 이더넷 스위치(ESW), 외장 컴포넌트 고속 연결((Peripheral Component Interconnect Express; PCIe) 통신을 위한 PCIe 스위치(PSW), nVMe 인터페이스(NMV), 캔 통신 인터페이스(미도시) 등을 구비할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)는, 제2 타입의 프로세서 코어를 구비하는 제2 프로세서(177)를 더 구비할 수 있다.
제1 타입의 프로세서 코어는, 애플리케이션 프로세서 코어일 수 있으며, 제2 타입의 프로세서 코어는, M 코어(core)일 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)는, 제1 타입의 복수의 프로세서 코어를 포함하는 프로세서(175b)와, 복수의 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나와 데이터를 교환하기 위한 인터페이스(INTb)를 구비한다.
한편, 인터페이스(INTb)는, 복수의 영역별 신호 처리 장치(170z1~170z3)와의 데이터 교환을 위해, 이더넷 통신을 위한 이더넷 스위치(ESWb), PCIe 통신을 위한 PCIe 스위치(PSWb) 등을 구비할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)는, 제2 타입의 프로세서 코어를 구비하는 제2 프로세서(177b)를 더 구비할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)는, 내의 프로세서(175)는, 복수의 가상화 머신(820~850)을 실행할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a) 내의 복수의 가상화 머신(820~850) 중 제1 가상화 머신은, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 외부의 영역별 신호 처리 장치(170z1~170z4) 중 적어도 하나로 제2 데이터를 전송한다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신에서 제2 가상화 머신으로의 통신 방식 중 어느 하나는, 제1 가상화 머신에서 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나로의 통신 방식 중 어느 하나와, 동일할 수 있다.
예를 들어, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신은, 하이퍼바이저(505) 내의 공유 메모리(508) 또는 이더넷 통신을 통해, 제2 가상화 머신(830)으로, 제1 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신은, 이더넷 통신 또는 PCIe 통신에 의해, 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나로, 제2 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제2 중앙 신호 처리 장치(170b) 내의 프로세서(175b)는, 복수의 가상화 머신(820m,840m)을 실행할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b) 내의 복수의 가상화 머신(820m,840m) 중 어느 하나의 가상화 머신은, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 다른 가상화 머신으로 제3 데이터를 전송하고, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 외부의 영역별 신호 처리 장치(170z1~170z3) 중 적어도 하나로 제4 데이터를 전송한다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 중앙 신호 처리 장치(170a)의 제1 단자(Tna)는, 제1 영역 신호 처리 장치(170z1)의 제1 단자(TNbz1)에 전기적으로 연결되고, 제1 영역 신호 처리 장치(170z1)의 제2 단자(TNaz1)는, 제2 영역 신호 처리 장치(170z2)의 제1 단자(TNbz2)에 전기적으로 연결될 수 있다.
한편, 제2 영역 신호 처리 장치(170z2)의 제2 단자(TNaz2)는, 제3 영역 신호 처리 장치(170z3)의 제1 단자(TNbz3)에 전기적으로 연결되고, 제3 영역 신호 처리 장치(170z3)의 제2 단자(TNaz3)는, 중앙 신호 처리 장치(170)에 전기적으로 연결될 수 있다.
한편, 복수의 영역별 신호 처리 장치(170z1~170z3)와, 제1 중앙 신호 처리 장치(170a) 또는 제2 중앙 신호 처리 장치(170b) 사이의 데이터 교환은, 이더넷 스위치(ESW)를 통한 이더넷 통신 또는 외장 컴포넌트 고속 연결((Peripheral Component Interconnect Express; PCIe) 스위치(PSW)를 통한 PCIe 통신이 수행될 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)의 제2 단자(Tnb)는, 내부의 프로세서(175a,175b,175c) 중 어느 하나인 제2 프로세서(175b)에 전기적으로 접속될 수 있다.
한편, 제1 영역 신호 처리 장치(170z1)의 제3 단자(TNoz1)는, 센서 장치 또는 액츄에이터에 접속되는 제1 베이스 장치(BUa)의 접속 단자(TNua)에 전기적으로 연결될 수 있다.
한편, 제1 영역 신호 처리 장치(170z1)의 제4 단자(TNpz1)는, 센서 장치 또는 액츄에이터에 접속되는 제3 베이스 장치(BUc)의 접속 단자(TNuc)에 전기적으로 연결될 수 있다.
한편, 제2 영역 신호 처리 장치(170z2)의 제3 단자(TNoz2)는, 센서 장치 또는 액츄에이터에 접속되는 제2 베이스 장치(BUb)의 접속 단자(TNub)에 전기적으로 연결될 수 있다.
한편, 제2 영역 신호 처리 장치(170z2)의 제4 단자(TNpz2)는, 센서 장치 또는 액츄에이터에 접속되는 제4 베이스 장치(BUd)의 접속 단자(TNud)에 전기적으로 연결될 수 있다.
한편, 제3 영역 신호 처리 장치(170z3)의 제3 단자(TNoz3)는, 카메라 또는 디스플레이를 위한 네트워크 디스플레이 장치(NDC)에 전기적으로 연결될 수 있다.
한편, 제3 영역 신호 처리 장치(170z3)의 제3 단자(TNpz3)는, 센서 장치 또는 액츄에이터에 접속되는 제5 베이스 장치(BUe)의 접속 단자(TNue)에 전기적으로 연결될 수 있다.
한편, 제2 영역 신호 처리 장치(170z2)의 제4 단자(TNoz3)는, 센서 장치 또는 액츄에이터에 접속되는 제6 베이스 장치(BUf)의 접속 단자(TNuf)에 전기적으로 연결될 수 있다.
도 10은 본 개시의 실시예에 따른 신호 처리 장치의 내부 블록도의 일예이다.
도면을 참조하면, 본 개시의 실시예에 따른 신호 처리 장치(170m)는, 복수의 프로세서(175a,175b,175c)와, 복수의 영역별 신호 처리 장치(170z1~170z2) 중 적어도 하나와 데이터를 교환하기 위한 인터페이스(INT)를 구비한다.
한편, 본 개시의 실시예에 따른 신호 처리 장치(170m)는, 파워 공급을 위한 파워 블록(PBK)를 더 포함할 수 있다.
인터페이스(INT)는, 이더넷 스위치(ESWa,ESWb), PCIe 스위치(PSW), nVMe 인터페이스(NMVa,NMVb), 네트워크 물리 계층 인터페이스(PHa,PHb)를 구비할 수 있다.
한편, 인터페이스(INT)는, 복수의 영역별 신호 처리 장치(170z1~170z2) 외에 추가로, 디스플레이(180) 또는 센서 장치(SN)과 데이터를 교환할 수 있다.
이때의 디스플레이(180)는, 클러스터 디스플레이, CID 디스플레이, 보조석(PD) 디스플레이, RSE 디스플레이 또는 HUD 디스플레이를 구비할 수 있다.
한편, 신호 처리 장치(170m) 내의 프로세서(175)는, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 디스플레이(180)로 영상 신호를 전송할 수 있다.
예를 들어, 신호 처리 장치(170m) 내의 프로세서(175)는, 저전압 차동 신호((Low voltage differential signaling) 방식 또는 이더넷 통신 방식에 기초하여, 디스플레이(180)로 영상 신호를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 영상 신호를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 센서 장치(SN)는, 차량 내부 카메라(DMS 카메라), 차량 외부 카메라, 라이더 또는 레이더 등을 포함할 수 있다.
한편, 신호 처리 장치(170m) 내의 프로세서(175)는, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 센서 장치(SN)로부터 센서 데이터를 수신할 수 있다.
예를 들어, 신호 처리 장치(170m) 내의 프로세서(175)는, 저전압 차동 신호((Low voltage differential signaling) 방식 또는 이더넷 통신 방식에 기초하여, 센서 장치(SN)로부터 센서 데이터를 수신할 수 있다. 이에 따라, 다양한 통신 방식을 통해 센서 데이터를 신속하고 안정적으로 수신할 수 있게 된다.
도 11 내지 도 13은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 다양한 예이다.
도 11은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 일예이다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(1400)는, 제1 중앙 신호 처리 장치(170a), 제2 중앙 신호 처리 장치(170b), 제3 중앙 신호 처리 장치(170c), 영역 신호 처리 장치(170z)를 구비할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)는, 복수의 프로세서 코어를 포함하는 프로세서(175)와, M 코어를 구비하는 제2 프로세서(177)를 구비할 수 있다.
한편, 프로세서(175)는, 복수의 애플리케이션 코어 상에서 하이퍼바이저(505a)를 실행하고, 하이퍼바이저(505a) 상에서 복수의 가상화 머신(1423,1425,1427)을 실행할 수 있다.
한편, 복수의 가상화 머신(1423,1425,1427) 중 제1 가상화 머신(1423)은, 세이프티 운영체제 상에서 실행되며, 시스템 모니터링을 실행할 수 있다.
한편, 복수의 가상화 머신(1423,1425,1427) 중 제2 가상화 머신(1425)은, 리눅스 운영 체제 상에서 실행되며, 차량 서비스 가상화 머신으로 동작할 수 있다.
한편, 제2 가상화 머신(1425)은, 컨테이너 런타임을 실행할 수 있다.
한편, 복수의 가상화 머신(1423,1425,1427) 중 제3 가상화 머신(1427)은, 운영 체제 상에서 실행되며, HMI 서비스를 실행할 수 있다.
한편, 프로세서(175) 중 일부 코어는, 하이퍼바이저(505a)의 실행 없이, 시큐어(secure) 서비스를 위한 가상화 머신(1422)을 실행할 수 있다
한편, 제2 프로세서(177)는, M 코어 상에서, 하이퍼바이저(505a)의 실행 없이, 세이프티 매니저를 위한 가상화 머신(1421)을 실행할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)는, 복수의 프로세서 코어를 포함하는 프로세서(175b)를 구비할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b) 내의 프로세서(175b)는, 하이퍼바이저(505b)를 실행하고, 하이퍼바이저(505b) 상에서 복수의 가상화 머신(1435,1438)을 실행할 수 있다.
한편, 복수의 가상화 머신(1435,1438) 중 일부 가상화 머신(1435)은, 세이프티 운영체제 상에서 실행되며, 차량 서비스 가상화 머신으로 동작할 수 있다.
한편, 복수의 가상화 머신(1435,1438) 중 일부 가상화 머신(1435)은, 컨테이너 런타임 등을 실행할 수 있다.
한편, 복수의 가상화 머신(1435,1438) 중 다른 일부 가상화 머신(1438)은, 세이프티 리눅스 운영체제 상에서 실행되며, 차량 운전 보조 시스템(ADAS)을 위한 가상화 머신으로 동작할 수 있다.
한편, 복수의 가상화 머신(1435,1438) 중 다른 일부 가상화 머신(1438)은, 컨테이너 등을 실행할 수 있다.
한편, 제3 중앙 신호 처리 장치(170c)는, 복수의 프로세서 코어를 포함하는 프로세서(175c)를 구비할 수 있다.
한편, 제3 중앙 신호 처리 장치(170c) 내의 프로세서(175c)는, 하이퍼바이저(505c)를 실행하고, 하이퍼바이저(505c) 상에서 복수의 가상화 머신(1442,1448)을 실행할 수 있다.
한편, 복수의 가상화 머신(1442,1448) 중 일부 가상화 머신(1435)은, 세이프티 운영체제 상에서 실행될할 수 있다.
한편, 복수의 가상화 머신(1442,1448) 중 다른 일부 가상화 머신(1438)은, 세이프티 리눅스 운영체제 상에서 실행되며, 차량 운전 보조 시스템(ADAS)을 위한 가상화 머신으로 동작할 수 있다.
한편, 복수의 가상화 머신(1442,1448) 중 다른 일부 가상화 머신(1438)은, 컨테이너 런타임 등을 실행할 수 있다.
한편, 영역 신호 처리 장치(170z)는, 복수의 프로세서 코어를 포함하는 프로세서(175z)와, M 코어를 구비하는 프로세서(177z)를 구비할 수 있다.
한편, 영역 신호 처리 장치(170z)는, 복수의 가상화 머신(1412,1413,1415)을 실행할 수 있다.
한편, 복수의 가상화 머신(1412,1413,1414) 중 일부 가상화 머신(1412)은, M 코어 상에서 실행될 수 있으며, 다른 일부 가상화 머신(1413)은 R 코어 상에서 실행될 수 있으며, 또 다른 일부 가상화 머신(1415)은, 애플리케이션 코어 상에서 실행될 수 있다.
한편, 복수의 가상화 머신(1412,1413,1414) 중 또 다른 일부 가상화 머신(1415)은, 컨테이너 런타임 등을 실행할 수 있다.
도 12는 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 다른 예이다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(1400b)는, 제1 중앙 신호 처리 장치(170a), 제2 중앙 신호 처리 장치(170b), 영역 신호 처리 장치(170z)를 구비할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)는, 복수의 프로세서 코어를 포함하는 프로세서(175)와, M 코어를 구비하는 제2 프로세서(177)를 구비할 수 있다.
한편, 프로세서(175)는, 복수의 애플리케이션 코어 상에서 하이퍼바이저(505a)를 실행하고, 하이퍼바이저(505a) 상에서 복수의 가상화 머신(1423,1425,1426,1428)을 실행할 수 있다.
한편, 복수의 가상화 머신(1423,1425,1426,1428) 중 제1 가상화 머신(1423)은, 리눅스 운영체제 상에서 실행되며, 시스템 모니터링을 실행할 수 있다.
한편, 제1 가상화 머신(1423)은, 컨테이너 등을 실행할 수 있다.
한편, 복수의 가상화 머신(1423,1425,1426,1428) 중 제2 가상화 머신(1425)은, 세이프티 리눅스 운영 체제 상에서 실행되며, 차량 서비스 가상화 머신으로 동작할 수 있다.
한편, 제2 가상화 머신(1425)은, 컨테이너 런타임을 실행할 수 있다.
한편, 복수의 가상화 머신(1423,1425,1426,1428) 중 제3 가상화 머신(1426)은, 운영 체제 상에서 실행되며, IVI서비스를 실행할 수 있다.
한편, 복수의 가상화 머신(1423,1425,1426,1428) 중 제4 가상화 머신(1428)은, 세이프티 리눅스 운영 체제 상에서 실행되며, 차량 운전 보조 시스템(ADAS)을 위한 가상화 머신으로 동작할 수 있다.
한편, 프로세서(175) 중 일부 코어는, 하이퍼바이저(505a)의 실행 없이, 시큐어(secure) 서비스를 위한 가상화 머신(1422)을 실행할 수 있다
한편, 제2 프로세서(177)는, M 코어 상에서, 하이퍼바이저(505a)의 실행 없이, 세이프티 매니저를 위한 가상화 머신(1421)을 실행할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)는, 복수의 프로세서 코어를 포함하는 프로세서(175b)를 구비할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b) 내의 프로세서(175b)는, 하이퍼바이저(505b)를 실행하고, 하이퍼바이저(505b) 상에서 복수의 가상화 머신(1432,1438)을 실행할 수 있다.
한편, 복수의 가상화 머신(1432,1438) 중 일부 가상화 머신(1432)은, 세이프티 운영체제 상에서 실행될 수 있다.
한편, 복수의 가상화 머신(1432,1438) 중 다른 일부 가상화 머신(1438)은, 세이프티 리눅스 운영체제 상에서 실행되며, 차량 운전 보조 시스템(ADAS)을 위한 가상화 머신으로 동작할 수 있다.
한편, 복수의 가상화 머신(1432,1438) 중 다른 일부 가상화 머신(1438)은, 컨테이너 런타임 등을 실행할 수 있다.
한편, 영역 신호 처리 장치(170z)는, 도 11과 동일할 수 있다.
도 13은 본 개시의 실시예에 따른 차량용 디스플레이 장치의 블록도의 또 다른 예이다.
도면을 참조하면, 본 개시의 실시예에 따른 차량용 디스플레이 장치(1500)는, 제1 중앙 신호 처리 장치(170a)와, 제2 중앙 신호 처리 장치(170b)를 구비할 수 있다.
한편, 본 개시의 실시예에 따른 차량용 디스플레이 장치(1500)는, 인터페이스(INT)를 더 구비할 수 있다.
한편, 인터페이스(INT)는, 복수의 중앙 신호 처리 장치(170a1,170a2) 사이의 데이터 교환을 위해, 이더넷 통신을 위한 이더넷 스위치(ESW), 외장 컴포넌트 고속 연결((Peripheral Component Interconnect Express; PCIe) 통신을 위한 PCIe 스위치(PSW) 등을 구비할 수 있다.
제1 중앙 신호 처리 장치(170a)는, 복수의 프로세서 코어를 구비하는 프로세서(175)를 구비한다.
한편, 제1 중앙 신호 처리 장치(170a)는, 하이퍼바이저(505)를 실행하고, 하이퍼바이저(505) 상에서 복수의 가상화 머신(530a,540a)을 실행한다.
도면에서는, 하이퍼바이저(505) 상에 제1 운영 체제(501)가 실행되고, 제1 운영 체제(501) 상에 제1 가상화 머신(530a)이 실행되며, 하이퍼바이저(505) 상에 제2 운영 체제(502)가 실행되고, 제2 운영 체제(502) 상에 제2 가상화 머신(540a)이 실행되는 것을 예시한다.
한편, 제1 운영 체제(501)는, 내부의 운영 체제 공유 메모리(503)를 실행 또는 구비할 수 있다.
한편, 제1 가상화 머신(530a)은, 통신 프레임 워크(533)를 실행하고, 서비스 프로바이더(531), 서비스 가입자(532a,532b,532c) 등을 실행할 수 있다.
한편, 제2 가상화 머신(540a)은, 통신 프레임 워크를 실행하고, 서비스 가입자(532d,532e) 등을 실행할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)는, 하이퍼바이저(505b)를 실행하고, 하이퍼바이저(505b) 상에서 복수의 가상화 머신(530a,540a)을 실행한다.
도면에서는, 하이퍼바이저(505b) 상에 제3 운영 체제(501b)가 실행되고, 제3 운영 체제(501b) 상에 일부 가상화 머신(530b)이 실행되며, 하이퍼바이저(505b) 상에 제4 운영 체제(502b)가 실행되고, 제4 운영 체제(502b) 상에 다른 일부 가상화 머신(540b)이 실행되는 것을 예시한다.
한편, 일부 가상화 머신(530b)은, 통신 프레임 워크를 실행하고, 서비스 가입자(532f,532g) 등을 실행할 수 있다.
한편, 다른 일부 가상화 머신(540b)은, 통신 프레임 워크를 실행하고, 서비스 가입자(532h,532i) 등을 실행할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신(530a)은, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신(540a)으로 제1 데이터를 전송하고, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 신호 처리 장치(170b 또는 170z)로 제2 데이터를 전송한다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신(530a)에서 제2 가상화 머신(540a)으로의 통신 방식 중 어느 하나는, 제1 가상화 머신(530a)에서 다른 신호 처리 장치((170b 또는 170z)로의 통신 방식 중 어느 하나와, 동일할 수 있다.
예를 들어, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신(530a)은, 이더넷 스위치(ESW)를 통한 이더넷 통신 또는 외장 컴포넌트 고속 연결(PCIe) 스위치(PSW)를 통한 PCIe 통신에 의해, 제2 중앙 신호 처리 장치(170b) 또는 영역 신호 처리 장치(170z)로, 제2 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
특히, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신(530a)은, 이더넷 스위치(ESW)를 통한 이더넷 통신 또는 외장 컴포넌트 고속 연결(PCIe) 스위치(PSW)를 통한 PCIe 통신에 의해, 제2 중앙 신호 처리 장치(170b) 내의 가상화 머신(530b,540b)에 각각 제2 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신(530a)은, 하이퍼바이저(505) 내의 공유 메모리(508) 또는 이더넷 통신을 통해, 제2 가상화 머신(540a)으로, 제1 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 중앙 신호 처리 장치(170a) 내의 제1 가상화 머신(530a) 내의 서비스 프로바이더(531)는, 운영 체제(501) 내의 공유 메모리(503) 또는 하이버파이저(505) 내의 공유 메모리(508)를 통해, 제1 가상화 머신(850) 내의 서비스 가입자(service subcriber)(532a)로, 제1 데이터를 전송할 수 있다. 이에 따라, 서비스 가입자에게 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
도 14a 내지 도 15는 도 11 내지 도 13의 설명에 참조되는 도면이다.
도 14a는 신호 처리 장치(170)와 외부의 스위치(TSW) 사이의 통신을 예시하는 도면이다.
도면을 참조하면, 신호 처리 장치(170)는, 복수의 프로세서 코어(CR1~CRn, MR)와, 인터페이스(INT)를 구비할 수 있다.
한편, 신호 처리 장치(170)와 외부의 스위치(TSW) 사이에는, 이더넷 스위치(ESW)를 통한 이더넷 통신 또는 PCIe 스위치(PSW)를 통한 PCIe 통신이 수행될 수 있다.
신호 처리 장치(170) 내의 제1 프로세서(175)는, 복수의 프로세서 코어 중 제1 타입의 프로세서 코어(CR1~CRn)를 구비하고, 제2 프로세서(177)는, 복수의 프로세서 코어 중 제2 타입의 프로세서 코어(MR)를 구비할 수 있다.
한편, 복수의 프로세서 코어(CR1~CRn, MR) 중 M 코어(MR)와 어플리케이션 프로세서 코어(CR1~CRn) 사이에는, 이종의 통신 방식 중 어느 하나가 수행될 수 있다.
예를 들어, 복수의 프로세서 코어(CR1~CRn, MR) 중 M 코어(MR)와 어플리케이션 프로세서 코어(CR1~CRn) 사이에는, 내부 시스템 버스 기반의 IPC 통신 또는 이더넷 통신 중 어느 하나가 수행될 수 있다.
한편, 복수의 가상화 머신(820~850) 사이에는, 이종의 통신 방식 중 어느 하나가 수행될 수 있다.
예를 들어, 복수의 가상화 머신(820~850) 사이에는, 하이퍼바이저(505) 내의 공유 메모리(508) 또는 스위치(509)를 이용한 통신 또는 이더넷 통신 중 어느 하나가 수행될 수 있다.
한편, 신호 처리 장치(170) 내의 프로세서(175)는, 하이퍼바이저(505) 상에, 제1 가상화 머신(850), 제2 가상화 머신(830), 제3 가상화 머신(820)을 실행할 수 있다.
한편, 신호 처리 장치(170) 내의 제2 프로세서(177)는, 하이퍼바이저(505)의 실행 없이, 제4 가상화 머신(840)을 실행할 수 있다.
예를 들어, 제1 가상화 머신(850)은, ASIL B와 같은 제1 안전 레벨에 대응하는 애플리케이션 또는 마이크로 서비스 또는 ASIL D와 같은 제2 안전 레벨에 대응하는 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
예를 들어, 제2 가상화 머신(830)은, ASIL B와 같은 제1 안전 레벨에 대응하는 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
예를 들어, 제3 가상화 머신(820)은, QM과 같은 제3 안전 레벨에 대응하는 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
예를 들어, 제4 가상화 머신(840)은, ASIL D와 같은 제2 안전 레벨에 대응하는 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
한편, 제1 안전 레벨 보다 제2 안전 레벨이 더 높으며, 제1 안전 레벨 보다 제3 안전 레벨이 더 낮을 수 있다.
한편, 각 가상화 머신(820~850)은, 네트워크 인터페이스 또는 드라이버(821,831,841,851)를 구비하며, 인터페이스(INT) 내의 이더넷 스위치(ESW)를 통해, 외부의 스위치(TSW)와 이더넷 통신을 수행하거나, 인터페이스(INT) 내의 PCIe 스위치(PSW)를 통해, PCIe 통신을 수행할 수 있다.
한편, 프로세서(175)는, 제2 프로세서(177)로, 내부 플랫폼 통신(Inter platform communication와, IPC)에 기초하여, 제3 데이터를 전송할 수 있다. 이에 따라, 제3 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신(850)은, 제1 안전 레벨 또는 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고, 제2 프로세서(177)는, 제2 안전 레벨의 제2 애플리케이션 또는 제2 애플리케이션에 대응하는 마이크로 서비스를 실행할 수 있다.
한편, 제1 가상화 머신(850)은, 제1 안전 레벨 또는 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고, 제2 가상화 머신(830)은, 제2 안전 레벨의 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
이때, 제1 가상화 머신(850)은, 제1 가상화 머신(850)의 안전 레벨 이하인, 제2 가상화 머신(830)으로, 하이퍼바이저(505) 내의 공유 메모리(508) 또는 이더넷 통신을 통해, 제1 데이터를 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신(850)은, 제1 가상화 머신(850)의 안전 레벨 보다 높은 안전 레벨에 대응하는 제2 가상화 머신(830)으로, 제1 데이터를 전송히지 않는다. 이에 따라, 안전 레벨에 대응하여 선택적으로 데이터 전송이 가능하게 된다.
한편, 도 11 내지 도 13 등의 영역 신호 처리 장치(170z)는, CAN 통신에 기초하여 수신되는 센서 데이터를 이더넷 신호로 변환하여, 전송할 수 있다.
한편, 제1 가상화 머신(850)은, 이더넷 통신을 통해, 이더넷 신호로 변환된 센서 데이터를 수신할 수 있다. 이에 따라, 센서 데이터를 신속하고 안정적으로 수신할 수 있게 된다.
한편, 제1 가상화 머신(850)은, 외부의 영역 신호 처리 장치(170z)로부터, 이더넷 통신을 통해, 마이크로 서비스의 결과 데이터를 수신하고, 수신되는 결과 데이터를, 안전 레벨이 동일하거나 더 낮은 제2 가상화 머신(830)으로 전송할 수 있다.
이에, 안전 레벨 기반하에 데이터를 신속하고 안정적으로 전송할 수 있게 된다. 나아가, 마이크로 서비스를 이용하여 데이터 처리를 효율적으로 수행할 수 있게 된다.
한편, 프로세서(175)는, 외부의 영역 신호 처리 장치(170z)로부터, 이더넷 통신을 통해, 주기적인 센서 데이터 또는 카메라 데이터를 수신할 수 있다. 이에 따라, 센서 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 프로세서(175)는, 외부의 영역 신호 처리 장치(170z)로, 시간 동기 제어 데이터를 전송할 수 있다. 이에 따라, 시간 동기 제어 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신(850)은, 이더넷 통신을 통해 수신되는 카메라 데이터를 프로세싱하고, 프로세싱된 데이터를, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신(830)으로 전송할 수 있다. 이에 따라, 다양한 통신 방식을 통해 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
한편, 제1 가상화 머신(850)은, 안전 레벨이 동일하거나 더 낮은 제2 가상화 머신(830)으로 제1 데이터를 전송하고, 안전 레벨이 동일하거나 더 낮은 다른 신호 처리 장치(170b 또는 170z)로 제2 데이터를 전송할 수 있다. 이에 따라, 안전 레벨 기반하에 데이터를 신속하고 안정적으로 전송할 수 있게 된다. 나아가, 마이크로 서비스를 이용하여 데이터 처리를 효율적으로 수행할 수 있게 된다.
도 14b는 신호 처리 장치 내의 M 코어(MR)와 어플리케이션 프로세서 코어(LR) 사이의 통신을 예시하는 도면이다.
도면을 참조하면, M 코어(MR) 상에서 실행되는 제4 가상화 머신(840)은, 리얼 타임 운영 체제(805a)와, 드라이버(846) 상에서 실행될 수 있다.
한편, 어플리케이션 프로세서 코어(LR) 상에서 실행되는 제2 가상화 머신(850)은, 제3 안전 레벨에 대응하는 운영 체제(805c)와 드라이버(836) 상에서 실행될 수 있다.
한편, 각 드라이버(836,846)는, 외부의 스위치(TSW)와 이더넷 통신을 수행할 수 있다.
한편, 어플리케이션 프로세서 코어(LR)와 M 코어(MR)는 각각 IPC 매니저(838,848)를 실행하여, IPC 통신을 수행할 수 있다.
구체적으로, 제1 타입의 프로세서 코어(LR)를 포함하는 프로세서(175)와, 제2 타입의 프로세서 코어(MR)를 구비하는 제2 프로세서(175)는, 내부 플랫폼 통신(Inter platform communication; IPC)에 기초하여, 데이터를 전송 또는 수신할 수 있다. 이에 따라, 데이터를 신속하고 안정적으로 전송할 수 있게 된다.
도 15는 제1 중앙 신호 처리 장치(170a)와 제2 중앙 신호 처리 장치(170b) 사이의 통신을 예시하는 도면이다.
도면을 참조하면, 제1 중앙 신호 처리 장치(170a)는, 프로세서(175), 제2 프로세서(177), 인터페이스(INTa)를 구비하며, 복수의 가상화 머신(820~850)을 실행할 수 있다.
복수의 가상화 머신(820~850) 중 제1 가상화 머신(850)은 ASI D 또는 ASI B의 애플리케이션 또는 마이크로 서비스를 실행하고, 제2 가상화 머신(830)은 ASI B의 애플리케이션 또는 마이크로 서비스를 실행하고, 제3 가상화 머신(830)은 QM의 애플리케이션 또는 마이크로 서비스를 실행하고, 제4 가상화 머신(840)은 ASI D의 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)는, 프로세서(175) 상에, 하이퍼바이저(505)를 실행하며, 하이퍼바이저(505) 상에서 복수의 가상화 머신(820,830,850)을 실행할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)는, 제2 프로세서(177) 상에, 하이퍼바이저를 실행하지 않으며, 가상화 머신(840)을 실행할 수 있다.
한편, 각 가상화 머신(820~850)은, 네트워크 인터페이스 또는 드라이버(821,831,841,851)를 구비하며, 인터페이스(INTa) 내의 이더넷 스위치(ESW)를 통해, 외부의 스위치(TSWa)와 이더넷 통신을 수행하거나, 인터페이스(INTa) 내의 PCIe 스위치(PSW)를 통해, 외부의 PCIe 스위치(PST)와 PCIe 통신을 수행할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)는, 제3 프로세서(175b), 제4 프로세서(177b), 인터페이스(INTb)를 구비하며, 복수의 가상화 머신(830r~850r)을 실행할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)는, 복수의 프로세서 코어와, 인터페이스를 구비하며, 복수의 프로세서 코어 상에, 하이퍼바이저(505r)를 실행하며, 하이퍼바이저(505r) 상에서 복수의 가상화 머신(830r~850r)을 실행할 수 있다.
복수의 가상화 머신(820~850) 중 제5 가상화 머신(850r)은 ASI D 또는 ASI B의 애플리케이션 또는 마이크로 서비스를 실행하고, 제6 가상화 머신(830r)은 QM의 애플리케이션 또는 마이크로 서비스를 실행하고, 제7 가상화 머신(840r)은 ASI D의 애플리케이션 또는 마이크로 서비스를 실행할 수 있다.
한편, 각 가상화 머신(830r~850r)은, 네트워크 인터페이스 또는 드라이버(83r1,841r,851r)를 구비하며, 인터페이스(INTb) 내의 이더넷 스위치(ESWb)를 통해, 외부의 스위치(TSWb)와 이더넷 통신을 수행하거나, 인터페이스(INTb) 내의 PCIe 스위치(PSWb)를 통해, 외부의 PCIe 스위치(PST)와 PCIe 통신을 수행할 수 있다.
도 16은 본 개시의 실시예에 따른 신호 처리 장치의 동작 방법을 나타내는 순서도이다.
도면을 참조하면, 신호 처리 장치(170) 내의 프로세서(175) 내의 제1 가상화 머신(850)은, 데이터 전송을 준비하고(S1710), 데이터 수신할 위치를 확인한다(S1715).
한편, 제1 가상화 머신(850)은, IPC(Inter Process Communication) 통신만 가능한 지 여부를 확인하고(S1718), 해당하는 경우, IPC 통신을 수행하여(S1720), 데이터 전송을 완료한다(S1742).
예를 들어, 제1 가상화 머신(850)은, 데이터 수신할 위치가, 동일한 제1 가상화 머신(850)이며, 운영 체제 내의 메모리(503)를 이용한 IPC 통신만 가능한 경우, IPC 통신을 수행하여, 데이터 전송을 완료할 수 있다.
제1718 단계(S1718)에서, 해당하지 않는 경우, 제1 가상화 머신(850)은, IVC 통신이 가능한 지 여부를 확인하고(S1721), 해당하는 경우, IVC 통신만 가능한 지 여부를 확인하고(S1722), 해당하는 경우, IVC(Inter Virtual maschine communication) 통신을 수행하여(S1723), 데이터 전송을 완료한다.
예를 들어, 제1 가상화 머신(850)은, 데이터 수신할 위치가, 신호 처리 장치(170) 내의 제2 가상화 머신(830)이며, 하이퍼바이저(505) 내의 고유 메모리(508)를 이용한 IVC 통신만 가능한 경우, IVC 통신을 수행하여, 데이터 전송을 완료할 수 있다.
한편, 제1722 단계(S1722)에서, 해당하지 않는 경우, 제1 가상화 머신(850)은, 이종의 IVC 통신과 IPC 중 적어도 하나에 기초하여 통신을 수행하여(S1724), 데이터 전송을 완료한다.
예를 들어, 제1 가상화 머신(850)은, 데이터 수신할 위치가, 신호 처리 장치(170) 내의 제1 가상화 머신(850)이며, IVC 통신과 IPC 통신이 가능한 경우, 이종의 IVC 통신과 IPC 중 적어도 하나에 기초하여 통신을 수행하여, 데이터 전송을 완료할 수 있다.
한편, 제1721 단계(S1721)에서, 해당하지 않는 경우, 제1 가상화 머신(850)은, IEC(Inter ECU Communication) 통신만 가능한 지 여부를 판단하고(S1726), 해당하는 경우, IEC 통신을 수행하여, 데이터 전송을 완료할 수 있다.
예를 들어, 신호 처리 장치(170) 내의 제1 가상화 머신(850)은, 제2 신호 처리 장치(170b) 내의 가상화 머신으로, IEC 통신을 수행하여, 데이터 전송을 완료할 수 있다.
한편, 제1726 단계(S1726)에서, 해당하지 않는 경우, 제1 가상화 머신(850)은, IEC 통신, IVC 통신, IPC 통신이 가능한 지 여부를 판단하고(S1730), 해당하는 경우, IEC 통신, IVC 통신, IPC 통신 중 어느 하나에 기초하여, 데이터 전송을 완료할 수 있다.
한편, 제1728 단계(S1728)에서, 해당하지 않는 경우, 제1 가상화 머신(850)은, IEC 통신과 IVC 통신만 가능한 지 여부를 판단하고(S1730), 해당하는 경우, IEC 통신과 IVC 통신 중 어느 하나에 기초하여, 데이터 전송을 완료할 수 있다.
한편, 제1732 단계(S1732)에서, 해당하지 않는 경우, 제1 가상화 머신(850)은, IEC 통신과 IPC 통신만 가능한 것으로 판단하고, IEC 통신과 IPC 통신 중 어느 하나에 기초하여, 데이터 전송을 완료할 수 있다.
도 17a 내지 도 24는 도 16의 동작 설명에 참조되는 도면이다.
도 17a는 카메라 데이터 전송의 일예를 도시하는 도면이다.
도면을 참조하면,카메라(175)로부터의 카메라 데이터는, 제2 신호 처리 장치(170b) 내의 인터페이스(INTb) 내의 이더넷 스위치(ESWb)를 통해, 제2 신호 처리 장치(170b) 내의 하이퍼바이저(505b) 상에서 실행되는 ADAS 애플리케이션을 실행하는 가상화 머신(820b) 내로 전송될 수 있다.
가상화 머신(820b) 내의 ADAS 애플리케이션은, 이미지 프로세싱 마이크로 서비스(1810), 오브젝트 검출 마이크로 서비스(1815), 오브젝트 트래킹 마이크로 서비스(1820)을 차례로 수행할 수 있다.
한편, 가상화 머신(820b) 내의 ADAS 애플리케이션은, ASIL D에 대응할 수 있다.
이때, 이미지 프로세싱 마이크로 서비스(1810)의 결과 데이터는, 공유 메모리(828b)에 저장되며, 오브젝트 검출 마이크로 서비스(1815)는, 이미지 프로세싱 마이크로 서비스(1810)의 결과 데이터에 기초하여 실행될 수 있다.
한편, 오브젝트 검출 마이크로 서비스(1815)의 결과 데이터는, 공유 메모리(828b)에 저장되며, 오브젝트 트래킹 마이크로 서비스(1820)는, 오브젝트 검출 마이크로 서비스(1815)의 결과 데이터에 기초하여 실행될 수 있다.
한편, 오브젝트 트래킹 마이크로 서비스(1820)의 결과 데이터는, 하이퍼바이저(508b) 내의 공유 메모리(508b)에 저장될 수 있다.
한편, 제2 신호 처리 장치(170b) 내의 하이퍼바이저(505b) 상에서 실행되는 가상화 머신(830b)은, Vehicle Service 애플리케이션을 실행할 수 있다.
한편, Vehicle Service 애플리케이션 내의 Freespace Planner 마이크로 서비스는, 오브젝트 트래킹 마이크로 서비스(1820)의 결과 데이터에 기초하여 실행될 수 있다.
한편, 가상화 머신(830b) 내의 reespace Planner 마이크로 서비스는, ASIL B에 대응할 수 있다.
한편, 오브젝트 트래킹 마이크로 서비스(1820)의 결과 데이터는, 인터페이스(INTb) 내의 PCIe 스위치(PSWb), 신호 처리 장치(170) 내의 인터페이스(INT) 내의 PCIe 스위치(PSW)를 거쳐, 신호 처리 장치(170) 내의 하이퍼바이저(505) 상에서 실행되는 가상화 머신(830)으로 전송될 수 있다.
특히, 오브젝트 트래킹 마이크로 서비스(1820)의 결과 데이터는, 가상화 머신(830) 내의 Mission Planner 마이크로 서비스(1822)로 전송될 수 있다.
한편, Mission Planner 마이크로 서비스(1822)의 결과 데이터는 공유 메모리(838)에 저장되며, Scenario Selector 마이크로 서비스(1825)는, Mission Planner 마이크로 서비스(1822)의 결과 데이터에 기초하여 실행될 수 있다.
한편, Scenario Selector 마이크로 서비스(1825)의 결과 데이터는, 하이퍼바이저(505) 내의 공유 메모리(508)에 저장될 수 있다.
한편, Scenario Selector 마이크로 서비스(1825)의 결과 데이터는, 신호 처리 장치(170) 내의 하이퍼바이저(505) 상에서 실행되는 다른 가상화 머신(820)으로 전송될 수 있다.
특히, Scenario Selector 마이크로 서비스(1825)의 결과 데이터는, QM에 대응하는 가상화 머신(820) 내의 Front View 마이크로 서비스(1840), Bird View 마이크로 서비스(1845)에 전달될 수 있다.
한편, Front View 마이크로 서비스(1840), Bird View 마이크로 서비스(1845)는, 각각 Front View 이미지와, Bird View 이미지를 출력할 수 있다.
한편, 신호 처리 장치(170)는, 하이퍼바이저(505) 상에서 실행되는 시스템 매니지 먼트에 대응하는 가상화 머신(850)을 더 실행할 수 있다.
한편, 신호 처리 장치(170)는, 하이퍼바이저(505)의 실행 없이, ASID D에 대응하는 세이프티 관련 가상화 머신(840)을 더 실행할 수 있다.
도 17b는 데이터 전송의 우선 순위를 나타내는 도면이다.
도면을 참조하면, Network Configuration 데이터, Time Synchronous Data, Periodic Data의 데이터 전송 순위는 High 일 수 있다.
한편, Event(Control) Data, Event(Sensor) Data, Diagnostic 데이터, 오디오 데이터, 비디오 데이터의 데이터 전송 순위는 Medium일 수 있다.
한편, Best Effort 데이터의 데이터 전송 순위는 Low일 수 있다.
도 18a 내지 도 18e는 데이터의 전송 흐름의 다양한 예를 예시하는 도면이다.
도면을 참조하면, 도 18a는 Periodic Sensor Data의 전송을 예시한다.
한편, 도 18a의 본 개시의 실시예에 따른 차량용 디스플레이 장치(1300b)는, 도 9와 동일할 수 있다.
한편, 제1 베이스 장치(BUa)로부터의 CAN 데이터는, 제1 영역 신호 처리 장치(170z1)으로 입력되어, 이더넷 신호로 변환될 수 있다. 변환된 이더넷 신호는, 이더넷 스위치(ESW)를 거쳐, 신호 처리 장치(170) 내의 각 가상화 머신(VSA,VSb,VSc) 중 일부 가상화 머신(VSA,VSb)로 전송될 수 있다.
한편, 제4 베이스 장치(BUd)로부터의 데이터와, 제5 베이스 장치(BUd)로부터의 데이터는, 제2 영역 신호 처리 장치(170z2), 이더넷 스위치(ESW)를 거쳐, 신호 처리 장치(170) 내의 가상화 머신(VSc)으로 전송될 수 있다.
한편, 가상화 머신(VSc)은, 입력되는 데이터를, 제3 영역 신호 처리 장치(170z3)를 거쳐, 제6 베이스 장치(BUf)로 전송할 수 있다.
도 18b는 Time Synchronous Control Data의 전송을 예시한다.
도면을 참조하면, 제5 베이스 장치(BUd)로부터의 데이터는, 제2 영역 신호 처리 장치(170z2), 이더넷 스위치(ESW)를 거쳐, 신호 처리 장치(170) 내의 가상화 머신(VSb)으로 전송될 수 있다.
한편, 가상화 머신(VSb)은, 데이터를, 제2 영역 신호 처리 장치(170z2)를 거쳐, 제4 베이스 장치(BUd)로 전송할 수 있다.
한편, 가상화 머신(VSb)은, 데이터를, 제1 영역 신호 처리 장치(170z1)를 거쳐, 제1 베이스 장치(BUa)로 전송할 수 있다.
한편, 가상화 머신(VSb)은, 데이터를, 제3 영역 신호 처리 장치(170z3)를 거쳐, 제6 베이스 장치(BUf)로 전송할 수 있다.
도 18c는 카메라 데이터의 전송을 예시한다.
도면을 참조하면, 제1 카메라 데이터는, 제1 영역 신호 처리 장치(170z1), 이더넷 스위치(ESW)를 거쳐, 신호 처리 장치(170) 내의 가상화 머신(VSa)으로 전송될 수 있다.
제2 카메라 데이터는, 제2 영역 신호 처리 장치(170z2), 이더넷 스위치(ESW)를 거쳐, 신호 처리 장치(170) 내의 가상화 머신(VSb)으로 전송될 수 있다.
도 18d는 신호 처리된 카메라 데이터의 전송을 예시한다.
도면을 참조하면, 제1 카메라 데이터는, 제1 영역 신호 처리 장치(170z1), 이더넷 스위치(ESW)를 거쳐, 신호 처리 장치(170) 내의 가상화 머신(VSa)으로 전송될 수 있다.
가상화 머신(VSa) 내의 이미지 프로세서 마이크로 서비스(ISPa)는, 이미지 프로세싱된 데이터를 다른 가상화 머신(VSc) 내의 화면 공유 마이크로 서비스(SWSa)으로 전송할 수 있다.
한편, 가상화 머신(VSc) 내의 화면 공유 마이크로 서비스(SWSa)로부터의 결과 데이터는, 제3 영역 컨트롤러(170z3)을 거쳐, 네트워크 디스플레이 장치(NDC)로 입력될 수 있다.
도 18e는 서비스 오케스트레이션을 예시하는 도면이다.
도면을 참조하면, 제1 카메라 데이터는, 제1 영역 신호 처리 장치(170z1)로 입력되며, 서비스 위치 변경시, 이더넷 스위치(ESW)를 거쳐, 신호 처리 장치(170) 내의 가상화 머신(VSa)으로 전송될 수 있다.
도 19는 신호 처리 장치의 통신 구조를 예시하는 도면이다.
도면을 참조하면, 신호 처리 장치(170)는, 인터페이스(INT)와, 프로세서(175)를 구비할 수 있다.
프로세서(175) 상에 하이퍼바이저(505) 상에, 복수의 가상화 머신(820,830,840,850)이 실행될 수 있다.
한편, 제1 가상화 머신(850)은, 메시지 버스(2010)를 실행하고, 메시지 버스(2010) 상에 통신 프레임 워크(2020)와, 어댑티브 플랫폼(2040)를 실행할 수 있다.
메시지 버스(2010)는, DDS(2012)를 통해, 네트워크 통신, IPC 기반의 공유 메모리 통신, IVC 기반의 공유 메모리 통신을 수행할 수 있다.
한편, 메시지 버스(2010)는, 라우터(2014)를 통해, 네트워크 통신, MQTT 통신, SOME/IP 통신을 수행할 수 있다.
한편, 메시지 버스(2010)는, SOME/IP 인터페이스(2016)를 통해, 이더넷 통신을 수행할 수 있다.
한편, 통신 프레임 워크(2020)는, 메시지 버스 인터페이스(2022)를 통해, DDS(2012)와 데이터를 교환할 수 있다.
한편, 통신 프레임 워크(2020)는, 라이프사이클(2028), 서비스 매니지먼트(2029), Health Monitor(2030), IntiConfig(2031), Diagnostics(2032), NetworkInf(2034), Monitoring(2036), Logging(2038)을 실행할 수 있다.
한편, 통신 프레임 워크(2020)는, API를 통헤 재1 애플리케이션(2023)과 데이터를 교환할 수 있다.
한편, 어댑티브 플랫폼(2040)은, 제1 인터페이스(2046), 제2 인터페이스(2047)을 통해, SOME/IP 인터페이스(2016)와 인터페이스를 교환할 수 있다.
한편, 어댑티브 플랫폼(2040)은, Adaptive API를 통헤 제2 애플리케이션(2043a)과 데이터를 교환할 수 있으며, 제2 인터페이스(2047)을 통해, 제3 애플리케이션(2043b)과 데이터를 교환할 수 있다.
도 20은 하이퍼바이저 내의 공유 메모리를 이용한 통신을 예시하는 도면이다.
도면을 참조하면, 신호 처리 장치(170) 내에서 실행되는 제1 가상화 머신(850)은, DDS(2120), IVC SHM 인터페이스(2140), IPC SHM 인터페이스(2160)를 실행할 수 있다.
공유 메모리(508)와 IVC SHM 인터페이스(2140) 사이의 드라이버(2119)는, 양방향 통신 수행할 수 있다.
예를 들어, 드라이버(2119)는, 공유 메모리(508)로부터의 데이터를 IVC SHM 인터페이스(2140)로 전송할 수 있다.
한편, IVC SHM 인터페이스(2140) 내의 버스 매니저먼트(2142)는, DDS 특징을 활성화시킬 수 있다.
한편, IVC SHM 인터페이스(2140) 내의 버스 매니저먼트(2142)는, 데이터를 DDS(2120) 내의 패쓰 매니지먼트(2132)으로 전송할 수 있다.
패쓰 매니지먼트(2132)는, IPC 인터페이스(2133), IVC 인터페이스(2134), IEC 인터페이스(2135)을 구비할 수 있다.
한편, IEC 인터페이스(2135)는, 이더넷 인터페이스(2136), PCIe 인터페이스(2137)를 구비할 수 있다.
한편, 패쓰 매니지먼트(2132)는, 데이터를, 이더넷 인터페이스(2136), 드라이버(2115)를 거쳐, 외부의 네트워크 인터페이스 카드(2101)로 전송할 수 있다. 이에 따라, 이더넷 통신이 수행될 수 있다.
한편, 패쓰 매니지먼트(2132)는, 데이터를, PCIe 인터페이스(2137), 드라이버(2117)를 거쳐, 외부의 PCIe 디바이스(2103)로 전송할 수 있다. 이에 따라, PCIe 통신이 수행될 수 있다.
도 22는 차량과 서버 또는 클라우드 사이의 데이터 전송을 예시하는 도면이다.
도면을 참조하며, 제1 베이스 장치(BUa)로부터의 이더넷 신호 또는 제2 베이스 장치(BUb)로부터의 CAN 신호는 영역 신호 처리 장치(170z)로 입력될 수 있다.
영역 신호 처리 장치(170z)는, CAN 신호를 이더넷 신호로 변환할 수 있다.
한편, 영역 신호 처리 장치(170z)로부터의 이더넷 신호는, 제1 중앙 신호 처리 장치(170a)로 전송될 수 있다.
제1 중앙 신호 처리 장치(170a)는, PCIe 통신을 통해, 데이터를 제2 중앙 신호 처리 장치(170b)로 전송할 수 있다.
제2 중앙 신호 처리 장치(170b)는, 통신부(120)를 통해, 무선 이동 통신 또는 이더넷 통신 등을 통해, 외부의 서버(900a)로 데이터를 전송할 수 있다.
한편, 외부의 서버(900)0는, 이더넷 통신 등을 통해, 외부의 클라우드(900b)로 데이터를 전송할 수 있다.
도 23은 차량용 디스플레이 장치의 통신 인터페이스의 일예를 도시한다.
도면을 참조하면, 제1 베이스 장치(BUa)와, 영역 신호 처리 장치(170z)는, 각각의 M 코어 또는 MCu를 통해, CAN 통신을 수행할 수 있다.
한편, 제2 베이스 장치(BUb)와, 영역 신호 처리 장치(170z)와, 제1 중앙 신호 처리 장치(170a)와, 제2 중앙 신호 처리 장치(170b)는, 각각의 코어 또는 프로세서를 통해, 이더넷 통신을 수행할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)와 제2 중앙 신호 처리 장치(170b)는, PCIe 통신을 수행할 수 있다.
도 24는 차량용 디스플레이 장치의 통신 인터페이스의 다른 예를 도시한다.
도면을 참조하면, 제1 베이스 장치(BUa)와, 영역 신호 처리 장치(170z)는, 각각의 M 코어 또는 MCU를 통해, CAN 통신을 수행할 수 있다.
한편, 제2 베이스 장치(BUb)와, 제1 영역 신호 처리 장치(170z1)는, 각각의 코어 또는 프로세서를 통해, 이더넷 통신을 수행할 수 있다.
한편, 제3 베이스 장치(BUc)와, 제2 영역 신호 처리 장치(170z2)는, 각각의 M 코어 또는 MCU를 통해, CAN 통신을 수행할 수 있다.
한편, 제4 베이스 장치(BUd)와, 제2 영역 신호 처리 장치(170z2)는, 각각의 코어 또는 프로세서를 통해, 이더넷 통신을 수행할 수 있다.
한편, 제1 영역 신호 처리 장치(170z1)와, 제2 영역 신호 처리 장치(170z2)와, 제1 중앙 신호 처리 장치(170a)와, 제2 중앙 신호 처리 장치(170b)와, 제3 중앙 신호 처리 장치(170c)는, 각각의 코어 또는 프로세서를 통해, 이더넷 통신을 수행할 수 있다.
한편, 제1 중앙 신호 처리 장치(170a)와 제2 중앙 신호 처리 장치(170b)는, PCIe 통신을 수행할 수 있다.
한편, 제2 중앙 신호 처리 장치(170b)와 제3 중앙 신호 처리 장치(170c)는, PCIe 통신을 수행할 수 있다.
이상에서는 본 개시의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (19)

  1. 복수의 프로세서 코어를 구비하는 프로세서;를 구비하고,
    상기 프로세서는,
    하이퍼바이저 상에서 복수의 가상화 머신을 실행하고,
    상기 복수의 가상화 머신 중 제1 가상화 머신은,
    이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고,
    이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 외부의 다른 신호 처리 장치로 제2 데이터를 전송하는 신호 처리 장치.
  2. 제1항에 있어서,
    상기 제1 가상화 머신에서 상기 제2 가상화 머신으로의 통신 방식 중 어느 하나는, 상기 제1 가상화 머신에서 상기 다른 외부 신호 처리 장치로의 통신 방식 중 어느 하나와 동일한 것인 신호 처리 장치.
  3. 제1항에 있어서,
    이더넷 통신을 위한 이더넷 스위치;
    외장 컴포넌트 고속 연결 통신을 위한 제2 스위치;를 더 구비하고,
    상기 제1 가상화 머신은,
    상기 이더넷 통신 또는 상기 외장 컴포넌트 고속 연결 통신에 의해, 상기 외부의 다른 신호 처리 장치로, 상기 제2 데이터를 전송하는 것인 신호 처리 장치.
  4. 제1항에 있어서,
    상기 프로세서는,
    상기 하이퍼바이저 상에 운영 체제를 실행하며,
    상기 제1 가상화 머신 내의 서비스 프로바이더는,
    상기 운영 체제 내의 공유 메모리를 통해, 상기 제1 가상화 머신 내의 서비스 가입자(service subcriber)로, 상기 제1 데이터를 전송하는 것인 신호 처리 장치.
  5. 제3항에 있어서,
    상기 제1 가상화 머신은,
    상기 이더넷 통신 또는 상기 외장 컴포넌트 고속 연결 통신에 의해, 제2 신호 처리 장치 또는 영역 신호 처리 장치로, 상기 제2 데이터를 전송하는 것인 신호 처리 장치.
  6. 제5항에 있어서,
    상기 영역 신호 처리 장치는,
    CAN 통신에 기초하여 수신되는 센서 데이터를 이더넷 신호로 변환하여, 전송하며,
    상기 제1 가상화 머신은,
    상기 이더넷 통신을 통해, 상기 이더넷 신호로 변환된 센서 데이터를 수신하는 것인 신호 처리 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 디스플레이로 영상 신호를 전송하는 것인 신호 처리 장치.
  8. 제7항에 있어서,
    상기 프로세서는,
    저전압 차동 신호((Low voltage differential signaling) 방식 또는 서데스(Serdes) 방식에 기초하여, 상기 디스플레이로 상기 영상 신호를 전송하는 것인 신호 처리 장치.
  9. 제1항에 있어서,
    제1 타입의 복수의 프로세서 코어와 다른 제2 타입의 프로세서 코어를 구비하는 제2 프로세서;를 더 구비하고,
    상기 프로세서는,
    상기 제2 프로세서로, 내부 플랫폼 통신(Inter platform communication; IPC)에 기초하여, 제3 데이터를 전송하는 것인 신호 처리 장치.
  10. 제9항에 있어서,
    상기 제1 가상화 머신은,
    제1 안전 레벨 또는 상기 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 상기 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고,
    상기 제2 프로세서는,
    상기 제2 안전 레벨의 제2 애플리케이션 또는 상기 제2 애플리케이션에 대응하는 마이크로 서비스를 실행하는 것인 신호 처리 장치.
  11. 제1항에 있어서,
    상기 제1 가상화 머신은,
    제1 안전 레벨 또는 상기 제1 안전 레벨 보다 높은 제2 안전 레벨의 제1 애플리케이션 또는 상기 제1 애플리케이션에 대응하는 마이크로 서비스를 실행하고,
    상기 제2 가상화 머신은,
    상기 제2 안전 레벨의 애플리케이션 또는 마이크로 서비스를 실행하는 것인 신호 처리 장치.
  12. 제1항에 있어서,
    상기 제1 가상화 머신은,
    외부의 영역 신호 처리 장치로부터, 이더넷 통신을 통해, 마이크로 서비스의 결과 데이터를 수신하고,
    상기 수신되는 결과 데이터를,
    안전 레벨이 동일하거나 더 낮은 상기 제2 가상화 머신으로 전송하는 것인 신호 처리 장치.
  13. 제1항에 있어서,
    상기 프로세서는,
    외부의 영역 신호 처리 장치로부터, 이더넷 통신을 통해, 주기적인 센서 데이터 또는 카메라 데이터를 수신하는 것인 신호 처리 장치.
  14. 제1항에 있어서,
    상기 프로세서는,
    외부의 영역 신호 처리 장치로, 시간 동기 제어 데이터를 전송하는 것인 신호 처리 장치.
  15. 제1항에 있어서,
    상기 제1 가상화 머신은,
    이더넷 통신을 통해 수신되는 카메라 데이터를 프로세싱하고, 프로세싱된 데이터를, 이종 방식의 데이터 통신 방식 중 어느 하나에 기초하여, 상기 제2 가상화 머신으로 전송하는 것인 신호 처리 장치.
  16. 제1항에 있어서,
    상기 프로세서는,
    차량 오디오 버스(Automotive Audio Bus) 기반의 오디오 신호를 오디오 출력부로 전송하는 것인 신호 처리 장치.
  17. 제1항에 있어서,
    상기 제1 가상화 머신은,
    안전 레벨이 동일하거나 더 낮은 상기 제2 가상화 머신으로 상기 제1 데이터를 전송하고,
    안전 레벨이 동일하거나 더 낮은 상기 외부의 다른 신호 처리 장치로 상기 제2 데이터를 전송하는 것인 신호 처리 장치.
  18. 복수의 프로세서 코어를 구비하는 프로세서;를 구비하고,
    상기 프로세서는,
    하이퍼바이저 상에서 복수의 가상화 머신을 실행하고,
    상기 복수의 가상화 머신 중 제1 가상화 머신은,
    이더넷 통신 또는 상기 하이퍼바이저 내의 공유 메모리 중 어느 하나에 기초하여, 제2 가상화 머신으로 제1 데이터를 전송하고,
    상기 이더넷 통신 또는 외장 컴포넌트 고속 연결 통신 중 어느 하나에 기초하여, 외부의 다른 신호 처리 장치로 제2 데이터를 전송하는 신호 처리 장치.
  19. 적어도 하나의 디스플레이;
    상기 디스플레이에 영상 신호를 출력하는 신호 처리 장치;를 포함하고,
    상기 신호 처리 장치는,
    제1항 내지 제18항의 신호 처리 장치를 포함하는 차량용 디스플레이 장치.
PCT/KR2023/014739 2022-09-27 2023-09-26 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치 WO2024071947A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2022-0122192 2022-09-27
KR20220122192 2022-09-27

Publications (1)

Publication Number Publication Date
WO2024071947A1 true WO2024071947A1 (ko) 2024-04-04

Family

ID=90478665

Family Applications (2)

Application Number Title Priority Date Filing Date
PCT/KR2023/014739 WO2024071947A1 (ko) 2022-09-27 2023-09-26 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치
PCT/KR2023/014736 WO2024071944A1 (ko) 2022-09-27 2023-09-26 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/014736 WO2024071944A1 (ko) 2022-09-27 2023-09-26 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치

Country Status (1)

Country Link
WO (2) WO2024071947A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190258251A1 (en) * 2017-11-10 2019-08-22 Nvidia Corporation Systems and methods for safe and reliable autonomous vehicles
KR20210067415A (ko) * 2019-11-29 2021-06-08 주식회사 데브스택 클라우드 컴퓨팅 기반의 플랫폼 제공 시스템 및 이를 이용한 플랫폼 제공 방법
US20220171611A1 (en) * 2020-11-27 2022-06-02 Denso Corporation Electronic control unit, software update method, software update program product and electronic control system
US20220206875A1 (en) * 2020-12-24 2022-06-30 Intel Corporation Software visible and controllable lock-stepping with configurable logical processor granularities
WO2022181960A1 (ko) * 2021-02-26 2022-09-01 엘지전자 주식회사 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102770846B (zh) * 2010-12-21 2016-08-31 松下电器（美国）知识产权公司 虚拟计算机系统控制装置及虚拟计算机系统控制方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190258251A1 (en) * 2017-11-10 2019-08-22 Nvidia Corporation Systems and methods for safe and reliable autonomous vehicles
KR20210067415A (ko) * 2019-11-29 2021-06-08 주식회사 데브스택 클라우드 컴퓨팅 기반의 플랫폼 제공 시스템 및 이를 이용한 플랫폼 제공 방법
US20220171611A1 (en) * 2020-11-27 2022-06-02 Denso Corporation Electronic control unit, software update method, software update program product and electronic control system
US20220206875A1 (en) * 2020-12-24 2022-06-30 Intel Corporation Software visible and controllable lock-stepping with configurable logical processor granularities
WO2022181960A1 (ko) * 2021-02-26 2022-09-01 엘지전자 주식회사 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치

Also Published As

Publication number Publication date
WO2024071944A1 (ko) 2024-04-04

Similar Documents

Publication Publication Date Title
WO2019132344A1 (en) Method for controlling earpiece and electronic device for supporting the same
WO2021049710A1 (en) Method and apparatus for edge computing service
CN108291952A (zh) 无人机及其飞行状态的监管方法与监控系统
WO2019050164A1 (en) APPARATUS AND METHOD FOR PROCESSING IMAGE RECEIVED VIA A PLURALITY OF CAMERAS
WO2019050366A1 (en) APPARATUS AND METHOD FOR PROCESSING IMAGE RECEIVED USING A PLURALITY OF CAMERAS
WO2022181903A1 (ko) 차량용 디스플레이 장치
WO2024071947A1 (ko) 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치
WO2021075910A1 (en) Electronic device and method for operating screen capturing by electronic device
WO2024085580A1 (ko) 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치
WO2024071942A1 (ko) 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치
WO2024071945A1 (ko) 신호 처리 장치 및 이를 구비하는 차량용 디스플레이 장치
WO2022025582A1 (ko) 안테나용 클램핑 장치
WO2023136374A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치
WO2024071475A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치
WO2024034752A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 증강현실 장치
WO2024085284A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치
WO2023239008A1 (ko) 차량의 신호 처리 장치 및 이를 구비하는 차량용 통신 장치용 통신 장치
WO2022098103A1 (ko) 차량용 디스플레이 장치
WO2023136376A1 (ko) 차량용 디스플레이 장치
WO2023113078A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치
WO2024034709A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치
WO2024071476A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치
WO2024053802A1 (ko) 신호 처리 장치 및 이를 구비하는 차량용 통신 장치
WO2024034708A1 (ko) 신호 처리 장치, 및 이를 구비하는 차량용 디스플레이 장치
WO2023043000A1 (ko) 가상 사설 네트워크를 통해 통신하기 위한 전자 장치, 방법, 및 컴퓨터 판독가능 저장 매체

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23873062

Country of ref document: EP

Kind code of ref document: A1