WO2023048376A1 - Display device providing vibration correcting function, and control method therefor - Google Patents

Display device providing vibration correcting function, and control method therefor Download PDF

Info

Publication number
WO2023048376A1
WO2023048376A1 PCT/KR2022/010663 KR2022010663W WO2023048376A1 WO 2023048376 A1 WO2023048376 A1 WO 2023048376A1 KR 2022010663 W KR2022010663 W KR 2022010663W WO 2023048376 A1 WO2023048376 A1 WO 2023048376A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
vibration
compensation
display device
value
Prior art date
Application number
PCT/KR2022/010663
Other languages
French (fr)
Korean (ko)
Inventor
김준석
Original Assignee
주식회사 토비스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 토비스 filed Critical 주식회사 토비스
Publication of WO2023048376A1 publication Critical patent/WO2023048376A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems

Definitions

  • the display of the padding area is set based on display contents adjacent to the padding area, so that padding in which data does not exist by compensatory shifting. It is also possible to provide a natural expression for the area.
  • FIG. 2 is a block diagram illustrating a display device providing a vibration compensation function according to an embodiment of the present invention.
  • FIG. 3 is a flowchart illustrating a method of controlling a display device according to an embodiment of the present invention, which is performed in the display device shown in FIG. 12 .
  • FIGS. 4 to 6 are diagrams for explaining a vibration compensation function performed in a display device providing a vibration compensation function according to an embodiment of the present invention.
  • FIG. 7 is a block diagram illustrating an embodiment of the processor shown in FIG. 2 .
  • FIG. 8 is a block diagram illustrating an embodiment of a storage unit shown in FIG. 7 .
  • FIG. 9 is a flowchart illustrating a compensation shifting method performed by the processor shown in FIG. 7 .
  • FIG. 12 is a block diagram illustrating a display device providing a vibration compensation function according to another embodiment of the present invention.
  • module used in this document may include a unit implemented by hardware, software, or firmware, and may be used interchangeably with terms such as logic, logic block, component, or circuit, for example.
  • a module may be an integrally constructed component or a minimal unit of components or a portion thereof that performs one or more functions.
  • the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of this document describe software (eg, a storage medium) including one or more instructions stored in a storage medium (eg, a memory, etc.) readable by an electronic device (eg, a mobile terminal).
  • program can be implemented.
  • a processor of an electronic device may call at least one command among one or more commands stored from a storage medium and execute it. This enables the device to be operated to perform at least one function according to the at least one command invoked.
  • the one or more instructions may include code generated by a compiler or code executable by an interpreter.
  • Device-readable storage media may be provided in the form of non-transitory storage media.
  • FIG. 1 is a diagram illustrating an application environment of a display device providing a vibration compensation function according to an embodiment of the present invention.
  • the display device 100 providing a vibration compensation function is attached to a mechanical device such as a vehicle and operates.
  • the display device 100 providing a vibration compensation function compensates for and displays vibration generated by a mechanical device such as a vehicle, so that even when such vibration occurs, there is no vibration to the user. screen can be displayed.
  • the display device 100 attached to a mechanical device such as a vehicle may operate in conjunction with the mechanical device or independently.
  • the display device 100 may be a portable terminal such as a smart phone including a sensor, a display, and a processor.
  • FIG. 2 is a block diagram illustrating a display device providing a vibration compensation function according to an embodiment of the present invention.
  • a display device (hereinafter referred to as a 'display device') 100 providing a vibration compensation function may include a sensor 110 , a display 120 and a processor 130 .
  • the display device 100 may omit some of the above components or may additionally include other components.
  • components such as a battery or an input/output interface may be additionally included in the display device 100 .
  • the sensor 110 may generate vibration information by detecting vibration of the display caused by driving of the mechanical device.
  • the sensor 110 may provide the generated vibration information to the processor.
  • the senor 110 may be installed within or adjacent to the display device 100 and may include a sensor capable of detecting vibration, such as a gyro sensor or a 3-axis acceleration sensor.
  • a sensor capable of detecting vibration such as a gyro sensor or a 3-axis acceleration sensor.
  • the display 120 displays a display image.
  • the display 120 may display a display image under the control of the processor 130 or in conjunction with a control unit of a mechanical device.
  • the processor 130 may be electrically connected to the sensor 110 and the display 120 and control overall operations of the display device 100 .
  • the processor 130 is, for example, an application processor (AP) of the display device 100, a central processing unit (CPU) or a processing core implemented in a System on Chip (SoC) of the display device 100.
  • AP application processor
  • CPU central processing unit
  • SoC System on Chip
  • the processor 140 may correspond to a processing circuit that controls other components electrically connected to the processor 140 in the display device 100 and performs calculations.
  • the processor 130 may perform vibration compensation by correcting the display of the display image by compensating for the vibration of the display image based on the vibration information provided by the sensor 110 .
  • FIG. 3 is a flowchart illustrating a method of controlling a display device according to an embodiment of the present invention, which is performed in the display device shown in FIG. 2 .
  • the processor 130 will be further described with reference to FIG. 3 .
  • the sensor 110 may detect vibration of the display 120 and generate vibration information about the vibration (S310).
  • the processor 130 may calculate a compensation shift value for compensating for vibration based on the vibration information (S320).
  • the processor 130 may perform vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the displayed image (S330).
  • vibration compensation is performed in units of frames, but is not limited thereto.
  • the processor 130 may control the display 120 to display a display image to which the compensation shift value is reflected (S340).
  • FIG. 4 shows an example of a display image before vibration compensation is performed
  • FIG. 5 is an example of a display image when vibration compensation is not performed
  • FIG. 6 is an example of a display image when vibration compensation is performed. is showing
  • the processor 130 may set a display value of the padding area based on a display value of a display area adjacent to the padding area with respect to the padding area, which is an undisplayed area generated by reflecting the compensation shift value.
  • the processor 130 divides and processes one frame into predetermined unit pixel blocks, and second pixels that are closest to a first pixel block in the display area (the first pixel block is included in a padding area) It can be determined based on the display value of the block.
  • the processor 130 includes a display control unit 710, a storage unit 720, a compensation shift setting unit ( 740) and a padding setting unit 740.
  • Each component of the processor 130 shown in FIG. 7 can be implemented in various examples, such as hardware, software, or a combination thereof.
  • each component may be a software functional element executed by the processor 130 .
  • each component may be individually implemented dedicated logic hardware or a dedicated processor. Alternatively, it may be configured by combining them.
  • the sensor 110 senses vibration of the display and generates vibration information as described above (S910).
  • the compensation shift setting unit 740 may calculate a compensation shift value for a unit frame based on the vibration information (S920).
  • the compensation shift setting unit 740 calculates a compensation shift value corresponding to the vibration information, but the compensation shift value may be set in units of pixels. That is, the compensation shift setting unit 740 calculates the x-axis displacement and the y-axis displacement due to the vibration based on the vibration information, and calculates the compensation shift value by setting the x-axis displacement and the y-axis displacement in units of pixels.
  • the storage unit 720 may store a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame.
  • the display controller 710 may display a display image based on display data stored in the storage 720 .
  • the display controller 710 may set a display image based on display data stored in the storage 720 by controlling operations of a source driver and a gate driver of the display.
  • the display control unit 710 may set a display image by reflecting the compensation shift value provided from the compensation shift setting unit 740 to the display data stored in the storage unit 720 (S930). That is, the storage unit 720 stores display data in units of frames (eg, every frame or every 15 frames), and the display controller 710 may reflect the compensation shift value to such display data.
  • the display controller 710 performs vibration compensation for each predetermined frame unit (eg, 15 frame units), and during frame units (eg, 15 to 29 frames) in which vibration compensation is not performed, the vibration
  • the display content of the compensated frame eg, 15 frames
  • the display controller 710 performs vibration compensation for each predetermined frame unit (eg, 15 frame units), and during frame units (eg, 15 to 29 frames) in which vibration compensation is not performed, the vibration
  • the display content of the compensated frame eg, 15 frames
  • the display controller 710 performs vibration compensation for each predetermined frame unit (eg, 15 frame units), and during frame units (eg, 15 to 29 frames) in which vibration compensation is not performed, the vibration
  • the display content of the compensated frame eg, 15 frames
  • the display controller 710 may shift the display data by reflecting the compensation shift value to the address conversion of the storage unit 720 .
  • the storage unit has a 20x10 memory, that is, when the pixels of the display screen are 20 pixels in width and 10 pixels in height, a total of 200 pixels, and the compensation shift value is 1 pixel on the x axis and -1 pixel on the y axis
  • the display controller 710 can simply display the compensation shift by setting +1 to the x-axis address of the storage unit and -1 to the y-axis address and displaying the display.
  • the storage unit 720 may include a frame buffer 721 and a compensation shift buffer 722 as shown in FIG. 8 .
  • the frame buffer 721 stores a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame.
  • the display controller 710 may shift the display data stored in the frame buffer by reflecting the compensation shift on the display data stored in the frame buffer 721 and store the shifted display data in the compensation shift buffer 722 .
  • the padding setting unit 740 can fill the display data of this padding area (S940).
  • the padding setting unit 740 may check a padding area in which display data is not set in the compensation shift buffer 722, and set a display data value of the padding area using display data adjacent to the padding area in the compensation shift buffer 722. .
  • FIG. 10 shows a case in which vibration compensation is performed with a displacement ⁇ dv.
  • display data for an area corresponding to the padding area PA remains unset.
  • the padding setting unit 740 may check an area corresponding to the padding area PA, that is, a padding area in which display data is not set in the compensation shift buffer 722 . After that, the padding setting unit 740 may set display data values of the padding area using display data adjacent to the padding area in the compensation shift buffer.
  • the padding setting unit 740 uses a pixel block (hereinafter, 1 pixel) of the padding area PA as an example, but is not limited thereto, and a plurality of adjacent pixels may be processed as a pixel block), for example, to fill in data for the pixel B1, data of the non-padding area closest to the pixel B1 of the padding area PA, that is, the data of the pixel B2 of the display area may be used.
  • a pixel block hereinafter, 1 pixel
  • 1 pixel pixel of the padding area PA
  • a plurality of adjacent pixels may be processed as a pixel block
  • the padding setting unit 740 may set a value of a second pixel of the non-padded area closest to the first pixel of the padding area to a value of the first pixel of the padding area.
  • the padding setting unit 740 may set the value of the first pixel of the padding area using a plurality of non-padding pixel groups adjacent to the first pixel of the padding area within a predetermined distance along the first axis. For example, to fill the data for the pixel B1 of the padding area PA, the data of pixels B2, B3 and B4 in the same column as the pixel B1 in the non-padding area, that is, within a predetermined distance, for example, 3 pixels in the same y-axis Data for the pixel B1 may be set based on the amount of change in the value. This enables more natural padding even when there is a gradation or the like.
  • the display controller 710 may display a display image based on the contents stored in the compensation shift buffer 722 for which padding has been completed by the padding setting unit 740 (S950).
  • the display apparatus 100 may perform vibration correction by considering both vibration suppression generated in the display and vibration generated in the user's seat.
  • these embodiments will be described with reference to FIGS. 12 and 13 .
  • FIG. 12 is a block diagram illustrating a display device providing a vibration compensation function according to another embodiment of the present invention
  • FIG. 13 is a block diagram according to an embodiment of the present invention performed in the display device shown in FIG. It is a flow chart explaining the control method of the display device.
  • the sensor 100 may include a first sensor 111 and a second sensor 112 .
  • the first sensor 111 is installed adjacent to the display, detects a first vibration corresponding to the vibration of the display, and generates first vibration information (S1310).
  • the second sensor 112 is installed adjacent to the user's seat, detects a second vibration corresponding to the vibration of the user's seat, and generates second vibration information (S1320).
  • the processor specifically, the compensation shift setting unit 730 may determine the compensation vibration by reflecting the second vibration information to the first vibration information.
  • the compensation shift setting unit 730 may generate vibration information based on the determined compensation vibration and provide the information to the display controller 710 to perform the compensation shift.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

A display device, according to one technical aspect of the present invention, is a display device installed in a mechanical device including a vehicle so as to display an image to a user and comprises: a display for displaying a display image; a sensor for generating vibration information by detecting vibration of the display caused by the driving of the mechanical device; and a processor electrically connected to the display and the sensor. The processor calculates a compensation shift value for compensating for the vibration on the basis of the vibration information, and may compensate for the vibration by reflecting the compensation shift value on a frame-by-frame basis for the display image.

Description

진동 보정 기능을 제공하는 디스플레이 장치 및 그의 제어 방법Display device providing vibration compensation function and control method thereof
본 발명은 진동 보정 기능을 제공하는 디스플레이 장치 및 그의 제어 방법에 관한 것이다.The present invention relates to a display device providing a vibration compensation function and a control method thereof.
디스플레이 기술의 발전에 따라 다양한 환경에서 디스플레이가 적용되고 사용되고 있다. 일 예로, 차량, 중기계 등의 기계 장치 분야에서도, 기존의 기계식 계기판 등이 디스플레이로 전환되어 사용되고 있다.As display technology develops, displays are applied and used in various environments. For example, in the field of mechanical devices such as vehicles and heavy machinery, conventional mechanical instrument panels and the like are converted into displays and used.
한편, 차량 등의 기계장치 분야에서는, 기계 장치 사용 시 진동이 필연적으로 발생하게 된다. Meanwhile, in the field of mechanical devices such as vehicles, vibration inevitably occurs when using mechanical devices.
이러한 진동이 유발되는 경우, 사용자에게 디스플레이가 흔들리며 보이게 되고, 그에 따라 사용자가 디스플레이를 통하여 전달되는 정보를 확인하기 위해서는 흔들리는 디스플레이의 표시 내용을 주시하여야만 하는 문제가 있다.When such vibration is induced, the display appears to be shaking to the user, and accordingly, the user has to watch the display contents of the shaking display in order to check the information transmitted through the display.
또한, 이로 인하여, 기계 장치 사용자의 주의력 분산 등의 문제가 발생하고, 그로 인한 사고 위험도 증가 등의 파생적인 악효과가 발생하고 있다.In addition, due to this, a problem such as distraction of attention of a user of a mechanical device occurs, and consequently, a detrimental effect such as an increase in the risk of an accident occurs.
본 발명의 일 기술적 측면은 상기한 종래 기술의 문제점을 해결하기 위한 것이다. 본 발명의 일 실시예에 따르면, 차량 등의 기계 장치에 부착된 디스플레이에 대하여, 디스플레이에 발생하는 진동을 보상하여 진동 영향을 상쇄하도록 표시 내용을 보정하여 표시함으로써, 사용자에게 진동이 유발되는 환경에서도 선명하고 정확한 내용을 표시할 수 있는, 진동 보정 기능을 제공하는 디스플레이 장치 및 그의 제어 방법을 제공할 수 있다.One technical aspect of the present invention is to solve the above problems of the prior art. According to an embodiment of the present invention, with respect to a display attached to a mechanical device such as a vehicle, the display content is corrected and displayed to compensate for the vibration generated in the display to offset the vibration effect, even in an environment where vibration is induced to the user. It is possible to provide a display device capable of displaying clear and accurate content and providing a vibration compensation function, and a control method thereof.
또한, 본 발명의 일 실시예에 따르면, 디스플레이의 진동을 보상하도록 디스플레이 내용을 각 프레임 별로 보상 쉬프팅을 수행함으로써, 디스플레이의 진동에도 사용자에게 표시되는 내용은 흔들리지 않도록 보상하여 표시하는, 진동 보정 기능을 제공하는 디스플레이 장치 및 그의 제어 방법을 제공할 수 있다. In addition, according to an embodiment of the present invention, by performing compensation shifting of the display contents for each frame to compensate for the vibration of the display, the vibration compensation function compensates for and displays the contents displayed to the user so that the vibration of the display does not shake. It is possible to provide a display device and a control method thereof.
또한, 본 발명의 일 실시예에 따르면, 디스플레이의 보상 쉬프팅에 의하여 패딩 영역이 발생하면, 패딩 영역에 인접한 표시 내용을 기초로 패딩 영역의 표시를 설정함으로써, 보상 쉬프팅에 의하여 데이터가 존재하지 않은 패딩 영역에 대해서도 자연스럽게 표현을 제공할 수 있는, 진동 보정 기능을 제공하는 디스플레이 장치 및 그의 제어 방법을 제공할 수 있다.In addition, according to an embodiment of the present invention, when a padding area is generated by compensatory shifting of a display, the display of the padding area is set based on display contents adjacent to the padding area, so that padding in which data does not exist by compensatory shifting. It is possible to provide a display device capable of providing a natural expression for a region and providing a vibration compensation function, and a control method thereof.
본 발명의 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The tasks of the present invention are not limited to the tasks mentioned above, and other tasks not mentioned will be clearly understood by those skilled in the art from the following description.
본 발명의 일 기술적 측면은 디스플레이 장치를 제안한다. 상기 디스플레이 장치는, 차량을 포함하는 기계 장치에 설치되어 사용자에게 영상을 표시하는 디스플레이 장치로서, 표시 영상을 표시하는 디스플레이, 상기 기계 장치의 구동에 의하여 유발되는 상기 디스플레이의 진동을 감지하여 진동 정보를 생성하는 센서 및 상기 디스플레이 및 상기 센서에 전기적으로 연결된 프로세서를 포함한다. 상기 프로세서는, 상기 진동 정보를 기초로 상기 진동을 보상하기 위한 보상 쉬프트 값을 산출하고, 상기 표시 영상에 대하여 프레임 단위를 기초로 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행할 수 있다.One technical aspect of the present invention proposes a display device. The display device is a display device installed in a mechanical device including a vehicle to display an image to a user, and detects a display displaying a displayed image and vibration of the display caused by driving of the mechanical device to obtain vibration information. a sensor that generates and a processor electrically coupled to the display and the sensor. The processor may calculate a compensation shift value for compensating the vibration based on the vibration information, and perform vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the display image.
일 실시예에서, 상기 프로세서는, 상기 보상 쉬프트 값을 반영하여 발생하는 미표시 영역인 패딩 영역에 대하여, 상기 패딩 영역에 인접한 표시 영역의 표시값을 기초로 상기 패딩 영역의 표시값을 설정 할 수 있다.In an embodiment, the processor may set a display value of the padding area based on a display value of a display area adjacent to the padding area for a padding area that is an undisplayed area generated by reflecting the compensation shift value. .
일 실시예에서, 상기 프로세서는, 하나의 프레임을 소정의 단위 화소 블록으로 분할하여 처리할 수 있다. 상기 프로세서는, 상기 패딩 영역에 포함되는 제1 화소 블록의 표시값을, 상기 표시 영역 중에서 상기 제1 화소 블록에 가장 인접한 제2 화소 블록의 표시값을 기초로 결정 할 수 있다.In one embodiment, the processor may process one frame by dividing it into predetermined unit pixel blocks. The processor may determine a display value of the first pixel block included in the padding area based on a display value of a second pixel block closest to the first pixel block in the display area.
일 실시예에서, 상기 프로세서는, 하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장하는 저장부, 상기 진동 정보를 기초로, 단위 프레임에 대한 상기 보상 쉬프트 값을 산출하는 보상 쉬프트 설정부 및 상기 저장부에 저장된 표시 데이터에, 상기 보상 쉬프트 값을 반영하여 표시 영상을 설정하는 표시 제어부를 포함 할 수 있다.In an embodiment, the processor may include a storage unit for storing a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame, and the compensation shift value for a unit frame based on the vibration information. It may include a compensation shift setting unit that calculates and a display control unit that sets a display image by reflecting the compensation shift value in the display data stored in the storage unit.
일 실시예에서, 상기 저장부는, 하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장하는 프레임 버퍼 및 상기 보상 쉬프트 값을 반영하여 상기 프레임 버퍼에 저장된 상기 표시 데이터를 쉬프트 하여 저장하는 보상 쉬프트 버퍼를 포함 할 수 있다.In an embodiment, the storage unit stores a frame buffer storing a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame and the display data stored in the frame buffer by reflecting the compensation shift value. A compensation shift buffer that is shifted and stored may be included.
일 실시예에서, 상기 프로세서는, 상기 보상 쉬프트 버퍼에서 표시 데이터가 미설정된 패딩 영역을 확인하고, 상기 보상 쉬프트 버퍼에서 상기 패딩 영역에 인접한 표시 데이터를 이용하여 상기 패딩 영역의 표시 데이터 값을 설정하는 패딩 설정부를 더 포함 할 수 있다.In one embodiment, the processor identifies a padding area in which display data is not set in the compensation shift buffer, and sets a display data value of the padding area using display data adjacent to the padding area in the compensation shift buffer. A padding setting unit may be further included.
일 실시예에서, 상기 센서는, 상기 디스플레이의 진동에 대응하는 제1 진동 정보를 생성하는 제1 센서 및 상기 사용자의 좌석의 진동에 대응하는 제2 진동 정보를 생성하는 제2 센서를 포함 할 수 있다.In one embodiment, the sensor may include a first sensor generating first vibration information corresponding to vibration of the display and a second sensor generating second vibration information corresponding to vibration of the user's seat. there is.
일 실시예에서, 상기 보상 쉬프트 설정부는, 상기 제1 진동 정보에 상기 제2 진동 정보를 반영하여 보상 진동을 결정하고, 결정된 상기 보상 진동을 기초로 상기 진동 정보를 생성 할 수 있다.In one embodiment, the compensation shift setting unit may determine the compensation vibration by reflecting the second vibration information to the first vibration information, and generate the vibration information based on the determined compensation vibration.
본 발명의 다른 일 기술적 측면은 디스플레이 장치의 제어 방법을 제안한다. 상기 디스플레이 장치의 제어 방법은, 차량을 포함하는 기계 장치에 설치되어 사용자에게 영상을 표시하는 디스플레이 장치에서 수행되는 제어 방법으로서, 디스플레이 장치의 진동에 대응하여 생성된 진동 정보를 수신하는 단계, 상기 진동 정보를 기초로 상기 진동을 위한 보상 쉬프트 값을 산출하는 단계 및 상기 디스플레이 장치의 표시 영상에 대하여 프레임 단위를 기초로 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계를 포함 할 수 있다.Another technical aspect of the present invention proposes a control method of a display device. The control method of the display device is a control method performed in a display device installed in a mechanical device including a vehicle and displaying an image to a user, comprising the steps of receiving vibration information generated in response to vibration of the display device, the vibration Calculating a compensation shift value for the vibration based on information, and performing vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the display image of the display device.
일 실시예에서, 상기 진동 정보를 수신하는 단계는, 상기 디스플레이의 진동에 대응하여 생성된 제1 진동 정보를 수신하는 단계, 상기 사용자의 좌석의 진동에 대응하여 생성된 제2 진동 정보를 수신하는 단계, 상기 제1 진동 정보에 상기 제2 진동 정보를 반영하여 보상 진동을 결정하는 단계1 및 상기 보상 진동을 기초로 상기 진동 정보를 생성하는 단계를 포함 할 수 있다.In one embodiment, the receiving of the vibration information includes receiving first vibration information generated in response to vibration of the display, receiving second vibration information generated in response to vibration of the user's seat. Step 1 of determining compensation vibration by reflecting the second vibration information in the first vibration information may include generating the vibration information based on the compensation vibration.
일 실시예에서, 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계는, 상기 보상 쉬프트 값을 반영하여 발생하는 미표시 영역을 패딩 영역으로 설정하는 단계 및 상기 패딩 영역에 인접한 표시 영역의 표시값을 기초로 상기 패딩 영역의 표시값을 설정하는 단계를 포함 할 수 있다.In an exemplary embodiment, the performing vibration compensation by reflecting the compensation shift value may include setting a non-display area generated by reflecting the compensation shift value as a padding area, and setting a display value of a display area adjacent to the padding area. A step of setting a display value of the padding area based on this may be included.
일 실시예에서, 하나의 프레임은 소정의 단위 화소 블록으로 분할하여 처리될 수 있다. 상기 패딩 영역의 표시값을 설정하는 단계는, 상기 표시 영역 중에서, 상기 패딩 영역에 포함되는 제1 화소 블록과 가장 가까운 제2 화소 블록을 선택하는 단계 및 상기 제2 화소 블록의 표시값을 기초로, 상기 제1 화소 블록의 표시값을 결정하는 단계를 포함 할 수 있다.In one embodiment, one frame may be divided into predetermined unit pixel blocks and processed. The setting of the display value of the padding area may include selecting a second pixel block closest to the first pixel block included in the padding area from the display area, and based on the display value of the second pixel block. , determining a display value of the first pixel block.
일 실시예에서, 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계는, 프레임 버퍼를 이용하여, 하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장하는 단계 및 보상 쉬프트 버퍼를 이용하여, 상기 보상 쉬프트 값을 반영하여 상기 프레임 버퍼에 저장된 상기 표시 데이터를 쉬프트 하여 저장하는 단계를 포함 할 수 있다.In one embodiment, the performing vibration compensation by reflecting the compensation shift value may include storing a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame using a frame buffer; and and shifting and storing the display data stored in the frame buffer by reflecting the compensation shift value using a compensation shift buffer.
일 실시예에서, 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계는, 상기 보상 쉬프트 버퍼에서 표시 데이터가 미설정된 패딩 영역을 확인하는 단계 및 상기 보상 쉬프트 버퍼에서 상기 패딩 영역에 인접한 표시 데이터를 이용하여 상기 패딩 영역의 표시 데이터 값을 설정하는 단계를 포함 할 수 있다.In one embodiment, the performing vibration compensation by reflecting the compensation shift value may include identifying a padding area in which display data is not set in the compensation shift buffer, and displaying display data adjacent to the padding area in the compensation shift buffer. and setting a display data value of the padding area by using the padding area.
본 발명의 또 다른 일 기술적 측면은 저장 매체를 제안한다. 상기 저장 매체는, 컴퓨터 판독 가능한 인스트럭션들(instructions)을 저장하고 있는 저장 매체에 있어서, 상기 인스트럭션들은, 전자 장치에 의해 실행될 때, 상기 전자 장치로 하여금, 디스플레이 장치의 진동에 대응하여 생성된 진동 정보를 수신하는 동작, 상기 진동 정보를 기초로 상기 진동을 위한 보상 쉬프트 값을 산출하는 동작 및 상기 디스플레이 장치의 표시 영상에 대하여 프레임 단위를 기초로 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 동작을 수행하도록 할 수 있다.Another technical aspect of the present invention proposes a storage medium. The storage medium is a storage medium storing computer readable instructions, wherein the instructions, when executed by an electronic device, cause the electronic device to generate vibration information corresponding to the vibration of the display device. An operation of receiving a compensation shift value for the vibration based on the vibration information, an operation of calculating a compensation shift value for the vibration, and an operation of performing vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the display image of the display device. can make it do.
상기한 과제의 해결 수단은, 본 발명의 특징을 모두 열거한 것은 아니다. 본 발명의 과제 해결을 위한 다양한 수단들은 이하의 상세한 설명의 구체적인 실시형태를 참조하여 보다 상세하게 이해될 수 있을 것이다.The means for solving the problems described above do not enumerate all the features of the present invention. Various means for solving the problems of the present invention will be understood in more detail with reference to specific embodiments of the detailed description below.
본 발명에 따르면 다음과 같은 효과가 하나 혹은 그 이상 있다.According to the present invention, there is one or more of the following effects.
본 발명의 일 실시예에 따르면, 차량 등의 기계 장치에 부착된 디스플레이에 대하여, 디스플레이에 발생하는 진동을 보상하여 진동 영향을 상쇄하도록 표시 내용을 보정하여 표시함으로써, 사용자에게 진동이 유발되는 환경에서도 선명하고 정확한 내용을 표시할 수 있다.According to an embodiment of the present invention, with respect to a display attached to a mechanical device such as a vehicle, the display content is corrected and displayed to compensate for the vibration generated in the display to offset the vibration effect, even in an environment where vibration is induced to the user. Clear and accurate content can be displayed.
또한, 본 발명의 일 실시예에 따르면, 디스플레이의 진동을 보상하도록 디스플레이 내용을 각 프레임 별로 보상 쉬프팅을 수행함으로써, 디스플레이의 진동에도 사용자에게 표시되는 내용은 흔들리지 않도록 보상하여 표시할 수 있다.In addition, according to an embodiment of the present invention, by performing compensation shifting of the display content for each frame to compensate for the vibration of the display, the content displayed to the user can be compensated and displayed so that the vibration of the display does not shake.
또한, 본 발명의 일 실시예에 따르면, 디스플레이의 보상 쉬프팅에 의하여 패딩 영역이 발생하면, 패딩 영역에 인접한 표시 내용을 기초로 패딩 영역의 표시를 설정함으로써, 보상 쉬프팅에 의하여 데이터가 존재하지 않은 패딩 영역에 대해서도 자연스럽게 표현을 제공할 할 수 있다.In addition, according to an embodiment of the present invention, when a padding area is generated by compensatory shifting of a display, the display of the padding area is set based on display contents adjacent to the padding area, so that padding in which data does not exist by compensatory shifting. It is also possible to provide a natural expression for the area.
본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the description of the claims.
도 1은 본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치의 일 적용 환경을 예시하는 도면이다.1 is a diagram illustrating an application environment of a display device providing a vibration compensation function according to an embodiment of the present invention.
도 2는 본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치를 설명하는 블록 구성도이다.2 is a block diagram illustrating a display device providing a vibration compensation function according to an embodiment of the present invention.
도 3은 도 12에 도시된 디스플레이 장치에서 수행되는, 본 발명의 일 실시예에 따른 디스플레이 장치의 제어 방법을 설명하는 순서도이다.FIG. 3 is a flowchart illustrating a method of controlling a display device according to an embodiment of the present invention, which is performed in the display device shown in FIG. 12 .
도 4 내지 도 6은 본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치에서 수행되는 진동 보정 기능을 설명하기 위한 도면이다.4 to 6 are diagrams for explaining a vibration compensation function performed in a display device providing a vibration compensation function according to an embodiment of the present invention.
도 7은 도 2에 도시된 프로세서의 일 실시예를 설명하는 블록 구성도이다.FIG. 7 is a block diagram illustrating an embodiment of the processor shown in FIG. 2 .
도 8은 도 7에 도시된 저장부의 일 실시예를 설명하는 블록 구성도이다.FIG. 8 is a block diagram illustrating an embodiment of a storage unit shown in FIG. 7 .
도 9는 도 7에 도시된 프로세서에 의하여 수행되는 보상 쉬프팅 방법을 설명하는 순서도이다.FIG. 9 is a flowchart illustrating a compensation shifting method performed by the processor shown in FIG. 7 .
도 10 내지 도 11은 본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치에서 수행되는 보상 쉬프팅 기능을 설명하기 위한 도면이다.10 to 11 are diagrams for explaining a compensation shifting function performed in a display device providing a vibration compensation function according to an embodiment of the present invention.
도 12는 본 발명의 다른 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치를 설명하는 블록 구성도이다.12 is a block diagram illustrating a display device providing a vibration compensation function according to another embodiment of the present invention.
도 13은 도 12에 도시된 디스플레이 장치에서 수행되는, 본 발명의 일 실시예에 따른 디스플레이 장치의 제어 방법을 설명하는 순서도이다.FIG. 13 is a flowchart illustrating a method of controlling a display device according to an embodiment of the present invention, which is performed in the display device shown in FIG. 12 .
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 형태들을 설명한다. Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings.
그러나, 본 발명의 실시형태는 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 이하 설명하는 실시 형태로 한정되는 것은 아니다. 또한, 본 발명의 실시형태는 당해 기술분야에서 평균적인 지식을 가진 자에게 본 발명을 더욱 완전하게 설명하기 위해서 제공되는 것이다. However, the embodiments of the present invention can be modified in many different forms, and the scope of the present invention is not limited to the embodiments described below. In addition, the embodiments of the present invention are provided to more completely explain the present invention to those skilled in the art.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나","A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나" 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예를 들어, 중요성 또는 순서)에서 한정하지 않는다. 어떤(예를 들어, 제 1) 구성요소가 다른(예를 들어, 제 2) 구성요소에, "기능적으로" 또는 "통신적으로"라는 용어와 함께 또는 이런 용어 없이, "커플드", "커넥티드" 또는 "연결된" 이라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.Various embodiments of this document and terms used therein are not intended to limit the technical features described in this document to specific embodiments, but should be understood to include various modifications, equivalents, or substitutes of the embodiments. In connection with the description of the drawings, like reference numbers may be used for like or related elements. The singular form of a noun corresponding to an item may include one item or a plurality of items, unless the relevant context clearly dictates otherwise. In this document, "A or B", "at least one of A and B", "at least one of A or B", "A, B or C", "at least one of A, B and C" and "A, Each of the phrases such as "at least one of B or C" may include any one of the items listed together in the corresponding one of the phrases, or all possible combinations thereof. Terms such as "first", "second", or "first" or "second" may simply be used to distinguish that component from other corresponding components, and may refer to that component in other aspects (e.g., importance or order). A (e.g., first) component is "coupled" to another (e.g., second) component, with or without the terms "functionally" or "communicatively". When referred to as "connected" or "connected", it means that the certain component can be connected to the other component directly or through a third component.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일 실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.The term "module" used in this document may include a unit implemented by hardware, software, or firmware, and may be used interchangeably with terms such as logic, logic block, component, or circuit, for example. A module may be an integrally constructed component or a minimal unit of components or a portion thereof that performs one or more functions. For example, according to one embodiment, the module may be implemented in the form of an application-specific integrated circuit (ASIC).
본 문서의 다양한 실시 예들은 전자 장치 (예를 들어, 모바일 단말)에 의해 읽을 수 있는 저장 매체(storage medium)(예를 들어, 메모리 등)에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예를 들어, 프로그램)로서 구현될 수 있다. 예를 들면, 전자 장치의 프로세서는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체 는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 실재(tangible)하는 장치이고, 신호(signal)(예를 들어, 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.Various embodiments of this document describe software (eg, a storage medium) including one or more instructions stored in a storage medium (eg, a memory, etc.) readable by an electronic device (eg, a mobile terminal). program) can be implemented. For example, a processor of an electronic device may call at least one command among one or more commands stored from a storage medium and execute it. This enables the device to be operated to perform at least one function according to the at least one command invoked. The one or more instructions may include code generated by a compiler or code executable by an interpreter. Device-readable storage media may be provided in the form of non-transitory storage media. Here, 'non-temporary' only means that the storage medium is a tangible device and does not contain a signal (eg, electromagnetic wave), and this term means that data is stored semi-permanently in the storage medium. It does not distinguish between the case and the case of temporary storage.
실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래 될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예를 들어, compact disc read only memory (CDROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예를 들어, 플레이 스토어™)를 통해 또는 두개의 사용자 장치들(예를 들어, 스마트폰들) 간에 직접, 온라인으로 배포(예를 들어, 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.According to an embodiment, the method according to various embodiments disclosed in this document may be included in a computer program product and provided. Computer program products may be traded between sellers and buyers as commodities. A computer program product is distributed in the form of a machine-readable storage medium (eg compact disc read only memory (CDROM)), or through an application store (eg Play Store™) or on two user devices. It can be distributed (eg, downloaded or uploaded) online, directly between (eg, smart phones). In the case of online distribution, at least part of the computer program product may be temporarily stored or temporarily created in a device-readable storage medium such as a manufacturer's server, an application store server, or a relay server's memory.
본 발명의 실시형태를 설명하기 위하여 다양한 순서도가 개시되고 있으나, 이는 각 단계의 설명의 편의를 위한 것으로, 반드시 순서도의 순서에 따라 각 단계가 수행되는 것은 아니다. 즉, 순서도에서의 각 단계는, 서로 동시에 수행되거나, 순서도에 따른 순서대로 수행되거나, 또는 순서도에서의 순서와 반대의 순서로도 수행될 수 있다. Although various flow charts have been disclosed to describe the embodiments of the present invention, these are for convenience of description of each step, and each step is not necessarily performed in the order of the flowchart. That is, each step in the flowchart may be performed simultaneously with each other, in an order according to the flowchart, or in an order reverse to that in the flowchart.
도 1은 본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치의 일 적용 환경을 예시하는 도면이다.1 is a diagram illustrating an application environment of a display device providing a vibration compensation function according to an embodiment of the present invention.
본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치(100)는 차량 등의 기계 장치에 부착되어 동작한다. The display device 100 providing a vibration compensation function according to an embodiment of the present invention is attached to a mechanical device such as a vehicle and operates.
일반적으로, 차량 등의 기계 장치에서 진동이 발생하는 경우, 이러한 진동이 디스플레이 장치에도 영향을 미치게 되며, 그에 따라 사용자에게 표시되는 화상의 이미지가 흔들리게 된다. 그로 인하여, 사용자는 표시되는 화상을 식별하기 위하여 화상을 집중하여야 하며 그로 인하여 안전상의 문제가 유발되는 등의 문제가 있다. In general, when vibration occurs in a mechanical device such as a vehicle, the vibration also affects a display device, and accordingly, an image displayed to a user is shaken. As a result, the user has to focus on the image to identify the displayed image, which causes a safety problem.
이에, 본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치(100)는, 차량 등의 기계 장치에 의하여 발생한 진동을 보상하여 표시함으로써, 그러한 진동이 발생하는 경우에도 사용자에게 진동이 없는 화면을 표시할 수 있다. Therefore, the display device 100 providing a vibration compensation function according to an embodiment of the present invention compensates for and displays vibration generated by a mechanical device such as a vehicle, so that even when such vibration occurs, there is no vibration to the user. screen can be displayed.
차량 등의 기계 장치에 부착되는 디스플레이 장치(100)는, 기계 장치와 연동하여 동작하거나, 또는 독립적으로 동작할 수도 있다. 일 예로, 디스플레이 장치(100)는 센서와 디스플레이, 프로세서를 포함하는 스마트 폰 등의 휴대 단말일 수 있다. The display device 100 attached to a mechanical device such as a vehicle may operate in conjunction with the mechanical device or independently. For example, the display device 100 may be a portable terminal such as a smart phone including a sensor, a display, and a processor.
이하, 도 2 내지 도 14를 참조하여, 이러한 진동 보정 기능을 제공하는 디스플레이 장치(100) 및 그의 제어 방법에 대하여 보다 상세히 설명한다.Hereinafter, with reference to FIGS. 2 to 14 , the display device 100 providing such a vibration compensation function and a control method thereof will be described in more detail.
도 2는 본 발명의 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치를 설명하는 블록 구성도이다.2 is a block diagram illustrating a display device providing a vibration compensation function according to an embodiment of the present invention.
도 2를 참조하면, 진동 보정 기능을 제공하는 디스플레이 장치(이하, '디스플레이 장치' 라 칭함)(100)는 센서(110), 디스플레이(120) 및 프로세서(130)를 포함할 수 있다. 실시예에 따라서, 디스플레이 장치(100)는 위 구성 요소들 중 일부 구성을 생략하거나, 혹은 다른 구성 요소를 추가적으로 구비할 수 있다. 예를 들어, 배터리나 입/출력 인터페이스와 같은 구성이 디스플레이 장치(100)에 추가적으로 포함될 수 있다.Referring to FIG. 2 , a display device (hereinafter referred to as a 'display device') 100 providing a vibration compensation function may include a sensor 110 , a display 120 and a processor 130 . Depending on embodiments, the display device 100 may omit some of the above components or may additionally include other components. For example, components such as a battery or an input/output interface may be additionally included in the display device 100 .
센서(110)는 기계 장치의 구동에 의하여 유발되는 디스플레이의 진동을 감지하여 진동 정보를 생성할 수 있다. 센서(110)는 생성한 진동 정보를 프로세서에 제공할 수 있다.The sensor 110 may generate vibration information by detecting vibration of the display caused by driving of the mechanical device. The sensor 110 may provide the generated vibration information to the processor.
예를 들어, 센서(110)는 디스플레이 장치(100) 내에 또는 그에 인접하게 설치되고, 진동을 감지할 수 있는 센서, 예컨대, 자이로 센서, 3축 가속도 센서 등을 포함할 수 있다.For example, the sensor 110 may be installed within or adjacent to the display device 100 and may include a sensor capable of detecting vibration, such as a gyro sensor or a 3-axis acceleration sensor.
디스플레이(120)는 표시 영상을 표시한다. 일 예로, 디스플레이(120)는 프로세서(130)의 제어에 따라 또는 기계 장치의 제어부와 연동하여 표시 영상을 표시할 수 있다. The display 120 displays a display image. For example, the display 120 may display a display image under the control of the processor 130 or in conjunction with a control unit of a mechanical device.
프로세서(130)는 센서(110) 및 디스플레이(120)에 전기적으로 연결되고, 디스플레이 장치(100)의 전반적인 동작을 제어할 수 있다. 프로세서(130)는 예를 들어, 디스플레이 장치(100)의 AP(application processor) 이거나, 디스플레이 장치(100)의 SoC(System on Chip) 내에 구현된 CPU(central processing unit)나 연산 코어(processing core)일 수 있다. 일반적으로, 프로세서(140)는 디스플레이 장치(100)에서 프로세서(140)에 전기적으로 연결된 다른 구성 요소들을 제어하고 연산을 수행하는 처리 회로(processing circuit)에 해당할 수 있다.The processor 130 may be electrically connected to the sensor 110 and the display 120 and control overall operations of the display device 100 . The processor 130 is, for example, an application processor (AP) of the display device 100, a central processing unit (CPU) or a processing core implemented in a System on Chip (SoC) of the display device 100. can be In general, the processor 140 may correspond to a processing circuit that controls other components electrically connected to the processor 140 in the display device 100 and performs calculations.
프로세서(130)는, 센서(110)에서 제공된 진동 정보를 기초로, 표시 영상에 대하여 진동을 보상하여 표시 영상의 표시를 보정함으로써, 진동 보상을 수행할 수 있다. The processor 130 may perform vibration compensation by correcting the display of the display image by compensating for the vibration of the display image based on the vibration information provided by the sensor 110 .
도 3은 도 2에 도시된 디스플레이 장치에서 수행되는, 본 발명의 일 실시예에 따른 디스플레이 장치의 제어 방법을 설명하는 순서도로서, 도 3을 더 참조하여 프로세서(130)에 대하여 설명한다.FIG. 3 is a flowchart illustrating a method of controlling a display device according to an embodiment of the present invention, which is performed in the display device shown in FIG. 2 . The processor 130 will be further described with reference to FIG. 3 .
센서(110)는 디스플레이(120)의 진동을 감지하고, 그에 대한 진동 정보를 생성할 수 있다(S310).The sensor 110 may detect vibration of the display 120 and generate vibration information about the vibration (S310).
프로세서(130)는, 진동 정보를 기초로 진동을 보상하기 위한 보상 쉬프트 값을 산출할 수 있다(S320).The processor 130 may calculate a compensation shift value for compensating for vibration based on the vibration information (S320).
프로세서(130)는, 표시 영상에 대하여 프레임 단위를 기초로 보상 쉬프트 값을 반영하여 진동 보상을 수행할 수 있다(S330). 이하에서는, 매 프레임 단위로 진동 보상을 수행하는 것으로 설명하나, 이에 한정되는 것은 아니다.The processor 130 may perform vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the displayed image (S330). Hereinafter, it will be described that vibration compensation is performed in units of frames, but is not limited thereto.
프로세서(130)는, 보상 쉬프트 값이 반영된 표시 영상을 표시하도록 디스플레이(120)를 제어할 수 있다(S340).The processor 130 may control the display 120 to display a display image to which the compensation shift value is reflected (S340).
도 4는 진동 보상이 이루어지기 전의 표시 영상의 일 예를 도시하고, 도 5는 진동 보상이 이루어지지 않는 경우의 표시 영상의 일 예를, 도 6은 진동 보상이 이루어지는 경우의 표시 영상의 일 예를 도시하고 있다.4 shows an example of a display image before vibration compensation is performed, FIG. 5 is an example of a display image when vibration compensation is not performed, and FIG. 6 is an example of a display image when vibration compensation is performed. is showing
도 4의 표시 영상에 대하여, x축 및 y축으로 음의 방향으로 진동 Δdc가 발생한다고 하면, 사용자에게 표시되는 표시 영상은, 및 도 5에 도시된 바와 같이, 진동 Δdc 만큼 쉬프트 되어 표시되게 된다. P1이라는 임의의 점을 예를 들면, x축으로는 x1에서 x2만큼 이동되고, y축으로는 y1에서 y2만큼 이동하게 된다. 도 5와 같이 진동 보상이 없는 경우, 사용자에게 도시된 예와 같이 잔상이 표시되게 된다. 도 6은 Δdc에 대응되는 변위 Δdv로 진동 보상이 이루어진 경우를 도시한다. 이러한 보상에서, P1이라는 임의의 점을 예를 들면, 보상 전 화면에서 x1은 보상 후 화면에서의 x2와 동일한 직선상에 위치하고, 마찬가지로 보상 전 화면에서 y1은 보상 후 화면에서의 y2와 동일한 직선상에 위치한다. 이는, 진동 변위에 대한 보상 변위 만큼 쉬프팅을 하기 때문이다. 따라서, 진동이 발생한 만큼 표시 영상을 진동 변위의 반대로 보상을 수행하게 되고, 그에 따라 도 6에 도시된 바와 같이 사용자에게는 진동에 의한 잔상이 표시되지 않는다. Assuming that vibration Δdc occurs in negative directions in the x-axis and y-axis with respect to the display image of FIG. 4, the display image displayed to the user is shifted by the vibration Δdc and displayed as shown in FIG. . For example, an arbitrary point called P1 moves from x1 to x2 on the x-axis, and moves from y1 to y2 on the y-axis. When there is no vibration compensation as shown in FIG. 5 , an afterimage is displayed to the user as in the illustrated example. 6 shows a case where vibration compensation is performed with a displacement Δdv corresponding to Δdc. In this compensation, taking an arbitrary point called P1, for example, x1 in the screen before compensation is located on the same straight line as x2 in the screen after compensation, and similarly, y1 in the screen before compensation is on the same straight line as y2 in the screen after compensation located in This is because shifting is performed by the compensation displacement for the vibration displacement. Accordingly, the display image is compensated in the opposite direction to the vibration displacement as much as the vibration occurs, and as a result, as shown in FIG. 6, the user does not display an afterimage caused by the vibration.
일 실시예로서, 프로세서(130)는, 보상 쉬프트 값을 반영하여 발생하는 미표시 영역인 패딩 영역에 대하여, 패딩 영역에 인접한 표시 영역의 표시값을 기초로 패딩 영역의 표시값을 설정할 수 있다.As an embodiment, the processor 130 may set a display value of the padding area based on a display value of a display area adjacent to the padding area with respect to the padding area, which is an undisplayed area generated by reflecting the compensation shift value.
일 실시예로서, 프로세서(130)는, 하나의 프레임을 소정의 단위 화소 블록으로 분할하여 처리하고, 표시 영역 중에서 제1 화소 블록-제1 화소블록은 패딩 영역에 포함됨-에 가장 인접한 제2 화소 블록의 표시값을 기초로 결정할 수 있다.As an embodiment, the processor 130 divides and processes one frame into predetermined unit pixel blocks, and second pixels that are closest to a first pixel block in the display area (the first pixel block is included in a padding area) It can be determined based on the display value of the block.
이하, 도 7을 참조하여 프로세서에 대하여 보다 상세히 설명한다.Hereinafter, the processor will be described in more detail with reference to FIG. 7 .
도 7은 도 2에 도시된 프로세서의 일 실시예를 설명하는 블록 구성도로서, 도 7을 참조하면, 프로세서(130)는, 표시 제어부(710), 저장부(720), 보상 쉬프트 설정부(740) 및 패딩 설정부(740)를 포함할 수 있다. 도 7에 도시된 프로세서(130)의 각 구성요소는, 하드웨어, 소프트웨어 또는 이들의 조합 등과 같이 다양한 예로 구현 가능하다. 일 예로, 각 구성요소는 프로세서(130)에 의하여 수행되는 소프트웨어적 기능요소일 수 있다. 다른 예로, 각 구성요소는 개별적으로 구현된 전용 로직 하드웨어 또는 전용 프로세서일 수 있다. 또는, 이들을 조합하여 구성될 수도 있다.7 is a block diagram illustrating an embodiment of the processor shown in FIG. 2. Referring to FIG. 7, the processor 130 includes a display control unit 710, a storage unit 720, a compensation shift setting unit ( 740) and a padding setting unit 740. Each component of the processor 130 shown in FIG. 7 can be implemented in various examples, such as hardware, software, or a combination thereof. For example, each component may be a software functional element executed by the processor 130 . As another example, each component may be individually implemented dedicated logic hardware or a dedicated processor. Alternatively, it may be configured by combining them.
도 9는 도 7에 도시된 프로세서에 의하여 수행되는 보상 쉬프팅 방법을 설명하는 순서도로서, 도 7 및 도 9를 참조하여 설명한다.FIG. 9 is a flowchart illustrating a compensation shifting method performed by the processor shown in FIG. 7 and will be described with reference to FIGS. 7 and 9 .
센서(110)에서 디스플레이의 진동을 감지하여 진동 정보를 생성하는 것은 전술한 바와 같다(S910).The sensor 110 senses vibration of the display and generates vibration information as described above (S910).
보상 쉬프트 설정부(740)는 진동 정보를 기초로, 단위 프레임에 대한 보상 쉬프트 값을 산출할 수 있다(S920). The compensation shift setting unit 740 may calculate a compensation shift value for a unit frame based on the vibration information (S920).
일 실시예에서, 보상 쉬프트 설정부(740)는 진동 정보에 대응되는 보상 쉬프트 값을 산출하되, 보상 쉬프트 값은 화소 단위로 설정될 수 있다. 즉, 보상 쉬프트 설정부(740)는 진동 정보를 기초로 진동에 의한 x축 변위 및 y축 변위를 각각 산출하고, 이러한 x축 변위 및 y축 변위를 화소 단위로 설정하여 보상 쉬프트 값을 산출할 수 있다. In one embodiment, the compensation shift setting unit 740 calculates a compensation shift value corresponding to the vibration information, but the compensation shift value may be set in units of pixels. That is, the compensation shift setting unit 740 calculates the x-axis displacement and the y-axis displacement due to the vibration based on the vibration information, and calculates the compensation shift value by setting the x-axis displacement and the y-axis displacement in units of pixels. can
저장부(720)는 하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장할 수 있다.The storage unit 720 may store a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame.
표시 제어부(710)는 저장부(720)에 저장된 표시 데이터를 기초로 표시 영상을 표시할 수 있다. 예를 들어, 표시 제어부(710)는 디스플레이의 소스 드라이버와 게이트 드라이버의 동작을 제어하여, 저장부(720)에 저장된 표시 데이터를 기초로 표시 영상을 설정할 수 있다. The display controller 710 may display a display image based on display data stored in the storage 720 . For example, the display controller 710 may set a display image based on display data stored in the storage 720 by controlling operations of a source driver and a gate driver of the display.
표시 제어부(710)는 저장부(720)에 저장된 표시 데이터에, 보상 쉬프트 설정부(740)에서 제공되는 보상 쉬프트 값을 반영하여 표시 영상을 설정할 수 있다(S930). 즉, 저장부(720)는 프레임 단위(예컨대, 매 프레임 또는 15 프레임 마다)로 표시 데이터를 저장하고 있고, 표시 제어부(710)는 그러한 표시 데이터에 보상 쉬프트 값을 반영할 수 있다. The display control unit 710 may set a display image by reflecting the compensation shift value provided from the compensation shift setting unit 740 to the display data stored in the storage unit 720 (S930). That is, the storage unit 720 stores display data in units of frames (eg, every frame or every 15 frames), and the display controller 710 may reflect the compensation shift value to such display data.
일 실시예에서, 표시 제어부(710)는 기 설정된 일정한 프레임 단위(예컨대, 15프레임 단위) 마다 진동 보상을 수행하고, 진동 보상을 수행하지 않는 프레임 단위 동안 (예컨대, 15프레임 내지 29프레임)에서는 진동 보상이 완료된 프레임(예컨대, 15프레임)의 표시 내용을 동일하게 표시할 수 있다. 이는, 초당 표시 프레임이 충분히 많으므로, 소정의 프레임 단위로 보상을 수행하더라도 사용자의 눈에서는 충분히 짧게 인식되기 때문이다.In one embodiment, the display controller 710 performs vibration compensation for each predetermined frame unit (eg, 15 frame units), and during frame units (eg, 15 to 29 frames) in which vibration compensation is not performed, the vibration The display content of the compensated frame (eg, 15 frames) may be displayed in the same way. This is because, since there are sufficiently many display frames per second, even if compensation is performed in units of predetermined frames, it is recognized as short enough by the user's eyes.
일 실시예에서, 표시 제어부(710)는, 보상 쉬프트 값을 저장부(720)의 주소 변환에 반영하여 표시 데이터의 쉬프트를 수행할 수 있다. 예컨대, 저장부가 20x10의 메모리를 가지는 경우, 즉, 표시 화면의 화소가 가로 20화소, 세로 10화소로서 총 200 화소라고 할 때, 보상 쉬프트 값이 x축 1화소, y축 -1 화소라고 하면, 표시 제어부(710)는 저장부의 x축의 주소에 +1을, y축의 주소에 -1을 설정하고 표시함으로써 간단하게 보상 쉬프트를 표시할 수 있다. In an embodiment, the display controller 710 may shift the display data by reflecting the compensation shift value to the address conversion of the storage unit 720 . For example, when the storage unit has a 20x10 memory, that is, when the pixels of the display screen are 20 pixels in width and 10 pixels in height, a total of 200 pixels, and the compensation shift value is 1 pixel on the x axis and -1 pixel on the y axis, The display controller 710 can simply display the compensation shift by setting +1 to the x-axis address of the storage unit and -1 to the y-axis address and displaying the display.
일 실시예에서, 저장부(720)는, 도 8에 도시된 바와 같이, 프레임 버퍼(721) 및 보상 쉬프트 버퍼(722)를 포함할 수 있다. 프레임 버퍼(721)는 하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장한다. 표시 제어부(710)는, 프레임 버퍼(721)에 저장된 표시 데이터에 보상 쉬프트를 반영하여 프레임 버퍼에 저장된 표시 데이터를 쉬프트 하여 보상 쉬프트 버퍼(722)에 저장시킬 수 있다.In one embodiment, the storage unit 720 may include a frame buffer 721 and a compensation shift buffer 722 as shown in FIG. 8 . The frame buffer 721 stores a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame. The display controller 710 may shift the display data stored in the frame buffer by reflecting the compensation shift on the display data stored in the frame buffer 721 and store the shifted display data in the compensation shift buffer 722 .
한편, 이와 같이 보상 쉬프트를 수행하게 되면, 보상 쉬프트에 의하여 표시 데이터가 설정되지 않는 영역, 즉, 패딩 영역이 발생하고, 패딩 설정부(740)는 이러한 패딩 영역의 표시 데이터를 채울 수 있다(S940). Meanwhile, when the compensation shift is performed in this way, an area in which display data is not set by the compensation shift, that is, a padding area occurs, and the padding setting unit 740 can fill the display data of this padding area (S940). ).
예컨대, 패딩 설정부(740)는 보상 쉬프트 버퍼(722)에서 표시 데이터가 미설정된 패딩 영역을 확인하고, 보상 쉬프트 버퍼에서 패딩 영역에 인접한 표시 데이터를 이용하여 패딩 영역의 표시 데이터 값을 설정할 수 있다.For example, the padding setting unit 740 may check a padding area in which display data is not set in the compensation shift buffer 722, and set a display data value of the padding area using display data adjacent to the padding area in the compensation shift buffer 722. .
도 10은 변위 Δdv로 진동 보상이 이루어진 경우를 도시하고 있으며, 이러한 경우, 패딩 영역 PA에 대응되는 영역에 대해서는 표시 데이터가 미 설정 상태로 남게 된다. 패딩 설정부(740)는 이러한 패딩 영역 PA에 대응되는 영역, 즉, 보상 쉬프트 버퍼(722)에서 표시 데이터가 미설정된 패딩 영역을 확인할 수 있다. 이후, 패딩 설정부(740)는 보상 쉬프트 버퍼에서 패딩 영역에 인접한 표시 데이터를 이용하여 패딩 영역의 표시 데이터 값을 설정할 수 있다. 도 11은 이러한 데이터 패딩의 예를 도시하고 있으며, 패딩 설정부(740)는 패딩 영역 PA의 화소 블록(이하, 1 픽셀을 예로 들어 설명하나, 이에 한정되는 것은 아니며, 인접한 다수의 픽셀이 하나의 화소 블록으로서 처리될 수도 있음), 예컨대, 픽셀 B1에 대한 데이터를 채우기 위하여, 패딩 영역 PA의 픽셀 B1에 가장 인접한 비패딩 영역, 즉, 표시 영역의 픽셀 B2의 데이터를 이용할 수 있다.FIG. 10 shows a case in which vibration compensation is performed with a displacement Δdv. In this case, display data for an area corresponding to the padding area PA remains unset. The padding setting unit 740 may check an area corresponding to the padding area PA, that is, a padding area in which display data is not set in the compensation shift buffer 722 . After that, the padding setting unit 740 may set display data values of the padding area using display data adjacent to the padding area in the compensation shift buffer. 11 shows an example of such data padding, and the padding setting unit 740 uses a pixel block (hereinafter, 1 pixel) of the padding area PA as an example, but is not limited thereto, and a plurality of adjacent pixels may be processed as a pixel block), for example, to fill in data for the pixel B1, data of the non-padding area closest to the pixel B1 of the padding area PA, that is, the data of the pixel B2 of the display area may be used.
일 예로, 패딩 설정부(740)는 패딩 영역의 제1 픽셀에 가장 인접한 비패딩 영역의 제2 픽셀의 값을, 패딩 영역의 제1 픽셀의 값으로 설정할 수 있다. For example, the padding setting unit 740 may set a value of a second pixel of the non-padded area closest to the first pixel of the padding area to a value of the first pixel of the padding area.
다른 일 예로, 패딩 설정부(740)는 패딩 영역의 제1 픽셀에 제1 축으로 소정 거리 내로 인접한 복수의 비패딩 픽셀 그룹을 이용하여, 패딩 영역의 제1 픽셀의 값을 설정할 수 있다. 예컨대, 패딩 영역 PA의 픽셀 B1에 대한 데이터를 채우기 위하여, 비패딩 영역에서 픽셀 B1과 같은 열에 있는, 즉, 같은 y축에서 소정 거리, 예컨대, 3 픽셀 거리 안에 있는 픽셀 B2, B3 및 B4의 데이터 값을 변화량을 기초로 픽셀 B1에 대한 데이터를 설정할 수 있다. 이는, 그라데이션 등이 있는 경우에도 보다 자연스러운 패딩이 가능하게 해준다.As another example, the padding setting unit 740 may set the value of the first pixel of the padding area using a plurality of non-padding pixel groups adjacent to the first pixel of the padding area within a predetermined distance along the first axis. For example, to fill the data for the pixel B1 of the padding area PA, the data of pixels B2, B3 and B4 in the same column as the pixel B1 in the non-padding area, that is, within a predetermined distance, for example, 3 pixels in the same y-axis Data for the pixel B1 may be set based on the amount of change in the value. This enables more natural padding even when there is a gradation or the like.
이후, 표시 제어부(710)는, 패딩 설정부(740)에 의하여 패딩이 완료된 보상 쉬프트 버퍼(722)의 저장 내용을 기초로, 표시 영상을 디스플레이 할 수 있다(S950).Thereafter, the display controller 710 may display a display image based on the contents stored in the compensation shift buffer 722 for which padding has been completed by the padding setting unit 740 (S950).
이상에서는, 디스플레이의 진동 만을 고려하여 진동 보정 기능을 수행하는 예를 설명하였다. 한편, 일 실시예에서, 디스플레이 장치(100)는 디스플레이에서 발생하는 제진동과, 사용자 좌석에서 발생하는 진동을 모두 고려하여 진동 보정을 수행할 수 있다. 이하, 도 12 내지 도 13을 참조하여 이러한 실시예에 대하여 설명한다.In the above, an example of performing the vibration correction function in consideration of only the vibration of the display has been described. Meanwhile, in one embodiment, the display apparatus 100 may perform vibration correction by considering both vibration suppression generated in the display and vibration generated in the user's seat. Hereinafter, these embodiments will be described with reference to FIGS. 12 and 13 .
도 12는 본 발명의 다른 일 실시예에 따른 진동 보정 기능을 제공하는 디스플레이 장치를 설명하는 블록 구성도이고, 도 13은 도 12에 도시된 디스플레이 장치에서 수행되는, 본 발명의 일 실시예에 따른 디스플레이 장치의 제어 방법을 설명하는 순서도이다. 12 is a block diagram illustrating a display device providing a vibration compensation function according to another embodiment of the present invention, and FIG. 13 is a block diagram according to an embodiment of the present invention performed in the display device shown in FIG. It is a flow chart explaining the control method of the display device.
한편, 이하의 설명에서, 도 2 내지 도 11을 참조하여 기 설명한 내용과 동일한 내용에 대해서는 중복 설명을 생략한다.Meanwhile, in the following description, redundant description of the same contents as those previously described with reference to FIGS. 2 to 11 will be omitted.
도 12를 참조하면, 센서(100)는 제1 센서(111) 및 제2 센서(112)를 포함할 수 있다. Referring to FIG. 12 , the sensor 100 may include a first sensor 111 and a second sensor 112 .
제1 센서(111)는 디스플레이와 인접하여 설치되어, 디스플레이의 진동에 대응하는 제1 진동을 감지하여 제1 진동 정보를 생성한다(S1310).The first sensor 111 is installed adjacent to the display, detects a first vibration corresponding to the vibration of the display, and generates first vibration information (S1310).
제2 센서(112)는 사용자 좌석과 인접하게 설치되어, 사용자의 좌석의 진동에 대응하는 제2 진동을 감지하여 제2 진동 정보를 생성한다(S1320).The second sensor 112 is installed adjacent to the user's seat, detects a second vibration corresponding to the vibration of the user's seat, and generates second vibration information (S1320).
프로세서, 구체적으로, 보상 쉬프트 설정부(730)는, 제1 진동 정보에 제2 진동 정보를 반영하여 보상 진동을 결정할 수 있다. 보상 쉬프트 설정부(730)는, 결정된 보상 진동을 기초로 진동 정보를 생성하고, 이를 표시 제어부(710)에 제공하여, 보상 쉬프트를 수행하도록 할 수 있다. The processor, specifically, the compensation shift setting unit 730 may determine the compensation vibration by reflecting the second vibration information to the first vibration information. The compensation shift setting unit 730 may generate vibration information based on the determined compensation vibration and provide the information to the display controller 710 to perform the compensation shift.
보상 쉬프트 설정부(730) 및 표시 제어부(710)에 대한 설명은 도 7 내지 도 11을 참조하여 기 설명한 내용을 참조하여 쉽게 이해할 수 있다.Descriptions of the compensation shift setting unit 730 and the display control unit 710 can be easily understood by referring to the contents previously described with reference to FIGS. 7 to 11 .
이와 같이, 도 12 내지 도 13을 참조하는 일 실시예에서는, 사용자의 진동과 디스플레이의 진동을 함께 반영하므로, 사용자에게 보다 정밀한 진동 보상을 제공할 수 있다.As such, in one embodiment referring to FIGS. 12 and 13 , since the user's vibration and the display's vibration are both reflected, more precise vibration compensation can be provided to the user.
한편, 이상에서는, 디스플레이 장치(100)의 프로세서의 기능 또는 그에서 수행되는 제어 방법을 예를 들어, 설명하였으나, 이에 한정되는 것은 아니다. 따라서, 본 발명의 일 실시태양으로서, 전술한 제어 방법을 수행하기 위한 컴퓨터 판독 가능한 저장 매체를 포함할 수 있다. Meanwhile, in the above, the function of the processor of the display apparatus 100 or the control method performed by the display device 100 has been described as an example, but is not limited thereto. Therefore, as one embodiment of the present invention, a computer readable storage medium for performing the above-described control method may be included.
예컨대, 본 발명의 일 실시예는 컴퓨터 판독 가능한 인스트럭션들(instructions)을 저장하고 있는 저장 매체 일 수 있다. 여기에서, 인스트럭션들은, 전자 장치에 의해 실행될 때, 상기 전자 장치로 하여금, 디스플레이 장치의 진동에 대응하여 생성된 진동 정보를 수신하는 동작, 진동 정보를 기초로 상기 진동을 위한 보상 쉬프트 값을 산출하는 동작 및 디스플레이 장치의 표시 영상에 대하여 프레임 단위를 기초로 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 동작을 수행하도록 할 수 있다. For example, an embodiment of the present invention may be a storage medium storing computer readable instructions. Here, the instructions, when executed by the electronic device, cause the electronic device to receive vibration information generated in response to the vibration of the display device, and to calculate a compensation shift value for the vibration based on the vibration information. An operation of performing vibration compensation may be performed by reflecting the compensation shift value on a frame-by-frame basis with respect to the display image of the operation and display device.
이 외에도, 도 2 내지 도 13을 참조하여 상술한 다양한 프로세서의 동작 또는 제어방법이, 저장매체에도 적용 가능함은 자명할 것이다.In addition to this, it will be apparent that the operation or control method of the various processors described above with reference to FIGS. 2 to 13 can also be applied to a storage medium.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고 후술하는 특허청구범위에 의해 한정되며, 본 발명의 구성은 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 그 구성을 다양하게 변경 및 개조할 수 있다는 것을 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 쉽게 알 수 있다.The present invention described above is not limited by the above-described embodiments and the accompanying drawings, but is limited by the claims to be described later, and the configuration of the present invention can be varied within a range that does not deviate from the technical spirit of the present invention. Those skilled in the art can easily know that the present invention can be changed and modified accordingly.
본 발명은 디스플레이, 센서 및 프로세서를 포함하는 디스플레이 장치에 관한 것으로, 차량 등의 기계 장치에 부착된 디스플레이에 대하여, 디스플레이에 발생하는 진동을 보상하여 진동 영향을 상쇄하도록 표시 내용을 보정하여 표시함으로써, 사용자에게 진동이 유발되는 환경에서도 선명하고 정확한 내용을 표시할 수 있고, 디스플레이의 진동을 보상하도록 디스플레이 내용을 각 프레임 별로 보상 쉬프팅을 수행함으로써, 디스플레이의 진동에도 사용자에게 표시되는 내용은 흔들리지 않도록 보상하여 표시할 수 있으며, 디스플레이의 보상 쉬프팅에 의하여 패딩 영역이 발생하면, 패딩 영역에 인접한 표시 내용을 기초로 패딩 영역의 표시를 설정함으로써, 보상 쉬프팅에 의하여 데이터가 존재하지 않은 패딩 영역에 대해서도 자연스럽게 표현을 제공할 할 수 있어 산업상 이용가능성이 높다. The present invention relates to a display device including a display, a sensor, and a processor, and, with respect to a display attached to a mechanical device such as a vehicle, by compensating for vibration generated in the display to offset the influence of vibration, display content is corrected and displayed, Clear and accurate content can be displayed even in an environment where vibration is caused to the user, and by performing compensation shifting of the display content for each frame to compensate for the vibration of the display, the content displayed to the user is compensated so that it does not shake even when the vibration of the display occurs. When a padding area is generated by compensatory shifting of the display, the display of the padding area is set based on the display contents adjacent to the padding area, so that the padding area where data does not exist can be expressed naturally by compensating shifting. It can be provided, so it has high industrial applicability.
<부호의 설명><Description of codes>
100 : 디스플레이 장치100: display device
110 : 센서110: sensor
111 : 제1 터치 센서 112 : 제2 터치 센서111: first touch sensor 112: second touch sensor
120 : 디스플레이120: display
130 : 프로세서130: processor
710 : 표시 제어부 720 : 저장부710: display control unit 720: storage unit
730 : 보상 쉬프트 설정부 740 : 패딩 설정부730: compensation shift setting unit 740: padding setting unit
721 : 프레임 버퍼 722 : 보상 쉬프트 버퍼721: frame buffer 722: compensation shift buffer

Claims (15)

  1. 차량을 포함하는 기계 장치에 설치되어 사용자에게 영상을 표시하는 디스플레이 장치로서,A display device installed in a mechanical device including a vehicle to display an image to a user, comprising:
    표시 영상을 표시하는 디스플레이; a display displaying a display image;
    상기 기계 장치의 구동에 의하여 유발되는 상기 디스플레이의 진동을 감지하여 진동 정보를 생성하는 센서; 및a sensor generating vibration information by detecting vibration of the display caused by driving of the mechanical device; and
    상기 디스플레이 및 상기 센서에 전기적으로 연결된 프로세서;를 포함하고,A processor electrically connected to the display and the sensor;
    상기 프로세서는, the processor,
    상기 진동 정보를 기초로 상기 진동을 보상하기 위한 보상 쉬프트 값을 산출하고, 상기 표시 영상에 대하여 프레임 단위를 기초로 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는, calculating a compensation shift value for compensating for the vibration based on the vibration information, and performing vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the display image;
    디스플레이 장치.display device.
  2. 제1항에 있어서, 상기 프로세서는, The method of claim 1, wherein the processor,
    상기 보상 쉬프트 값을 반영하여 발생하는 미표시 영역인 패딩 영역에 대하여, 상기 패딩 영역에 인접한 표시 영역의 표시값을 기초로 상기 패딩 영역의 표시값을 설정하는,Setting a display value of the padding area based on a display value of a display area adjacent to the padding area for a padding area that is an undisplayed area generated by reflecting the compensation shift value;
    디스플레이 장치.display device.
  3. 제2항에 있어서, 상기 프로세서는,The method of claim 2, wherein the processor,
    하나의 프레임을 소정의 단위 화소 블록으로 분할하여 처리하고, One frame is divided into predetermined unit pixel blocks and processed;
    상기 패딩 영역에 포함되는 제1 화소 블록의 표시값을, The display value of the first pixel block included in the padding area,
    상기 표시 영역 중에서 상기 제1 화소 블록에 가장 인접한 제2 화소 블록의 표시값을 기초로 결정하는,determined based on a display value of a second pixel block closest to the first pixel block in the display area;
    디스플레이 장치.display device.
  4. 제1항에 있어서, 상기 프로세서는, The method of claim 1, wherein the processor,
    하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장하는 저장부; a storage unit to store a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame;
    상기 진동 정보를 기초로, 단위 프레임에 대한 상기 보상 쉬프트 값을 산출하는 보상 쉬프트 설정부; 및a compensation shift setting unit calculating the compensation shift value for a unit frame based on the vibration information; and
    상기 저장부에 저장된 표시 데이터에, 상기 보상 쉬프트 값을 반영하여 표시 영상을 설정하는 표시 제어부; 를 포함하는, a display controller configured to set a display image by reflecting the compensation shift value in the display data stored in the storage unit; including,
    디스플레이 장치.display device.
  5. 제4항에 있어서, 상기 저장부는,The method of claim 4, wherein the storage unit,
    하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장하는 프레임 버퍼; 및a frame buffer for storing a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame; and
    상기 보상 쉬프트 값을 반영하여 상기 프레임 버퍼에 저장된 상기 표시 데이터를 쉬프트 하여 저장하는 보상 쉬프트 버퍼; 를 포함하는, a compensation shift buffer for shifting and storing the display data stored in the frame buffer by reflecting the compensation shift value; including,
    디스플레이 장치.display device.
  6. 제5항에 있어서, 상기 프로세서는, The method of claim 5, wherein the processor,
    상기 보상 쉬프트 버퍼에서 표시 데이터가 미설정된 패딩 영역을 확인하고, 상기 보상 쉬프트 버퍼에서 상기 패딩 영역에 인접한 표시 데이터를 이용하여 상기 패딩 영역의 표시 데이터 값을 설정하는 패딩 설정부; 를 더 포함하는,a padding setting unit that checks a padding area in which display data is not set in the compensation shift buffer, and sets a display data value of the padding area using display data adjacent to the padding area in the compensation shift buffer; Including more,
    디스플레이 장치.display device.
  7. 제4항에 있어서, 상기 센서는,The method of claim 4, wherein the sensor,
    상기 디스플레이의 진동에 대응하는 제1 진동 정보를 생성하는 제1 센서; 및a first sensor generating first vibration information corresponding to vibration of the display; and
    상기 사용자의 좌석의 진동에 대응하는 제2 진동 정보를 생성하는 제2 센서;를 포함하는, A second sensor for generating second vibration information corresponding to the vibration of the user's seat; including,
    디스플레이 장치.display device.
  8. 제7항에 있어서, 상기 보상 쉬프트 설정부는, The method of claim 7, wherein the compensation shift setting unit,
    상기 제1 진동 정보에 상기 제2 진동 정보를 반영하여 보상 진동을 결정하고, 결정된 상기 보상 진동을 기초로 상기 진동 정보를 생성하는, determining compensation vibration by reflecting the second vibration information in the first vibration information, and generating the vibration information based on the determined compensation vibration;
    디스플레이 장치.display device.
  9. 차량을 포함하는 기계 장치에 설치되어 사용자에게 영상을 표시하는 디스플레이 장치에서 수행되는 제어 방법으로서,A control method performed in a display device installed in a mechanical device including a vehicle to display an image to a user,
    디스플레이 장치의 진동에 대응하여 생성된 진동 정보를 수신하는 단계;Receiving vibration information generated in response to vibration of the display device;
    상기 진동 정보를 기초로 상기 진동을 위한 보상 쉬프트 값을 산출하는 단계; 및Calculating a compensation shift value for the vibration based on the vibration information; and
    상기 디스플레이 장치의 표시 영상에 대하여 프레임 단위를 기초로 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계;를 포함하는,Performing vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the displayed image of the display device;
    진동 보정 기능을 제공하는 디스플레이 장치의 제어 방법.A control method of a display device providing a vibration compensation function.
  10. 제9항에 있어서, 상기 진동 정보를 수신하는 단계는, The method of claim 9, wherein receiving the vibration information comprises:
    상기 디스플레이의 진동에 대응하여 생성된 제1 진동 정보를 수신하는 단계;Receiving first vibration information generated in response to vibration of the display;
    상기 사용자의 좌석의 진동에 대응하여 생성된 제2 진동 정보를 수신하는 단계; Receiving second vibration information generated in response to the vibration of the user's seat;
    상기 제1 진동 정보에 상기 제2 진동 정보를 반영하여 보상 진동을 결정하는 단계; 및determining compensation vibration by reflecting the second vibration information to the first vibration information; and
    상기 보상 진동을 기초로 상기 진동 정보를 생성하는 단계; 를 포함하는,generating the vibration information based on the compensation vibration; including,
    진동 보정 기능을 제공하는 디스플레이 장치의 제어 방법.A control method of a display device providing a vibration compensation function.
  11. 제9항에 있어서, 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계는, 10. The method of claim 9, wherein performing vibration compensation by reflecting the compensation shift value comprises:
    상기 보상 쉬프트 값을 반영하여 발생하는 미표시 영역을 패딩 영역으로 설정하는 단계; 및setting a non-display area generated by reflecting the compensation shift value as a padding area; and
    상기 패딩 영역에 인접한 표시 영역의 표시값을 기초로 상기 패딩 영역의 표시값을 설정하는 단계; 를 포함하는,setting a display value of the padding area based on a display value of a display area adjacent to the padding area; including,
    진동 보정 기능을 제공하는 디스플레이 장치의 제어 방법.A control method of a display device providing a vibration compensation function.
  12. 제11항에 있어서, According to claim 11,
    하나의 프레임은 소정의 단위 화소 블록으로 분할하여 처리되고,One frame is divided into predetermined unit pixel blocks and processed.
    상기 패딩 영역의 표시값을 설정하는 단계는,In the step of setting the display value of the padding area,
    상기 표시 영역 중에서, 상기 패딩 영역에 포함되는 제1 화소 블록과 가장 가까운 제2 화소 블록을 선택하는 단계; 및selecting, from the display area, a second pixel block closest to the first pixel block included in the padding area; and
    상기 제2 화소 블록의 표시값을 기초로, 상기 제1 화소 블록의 표시값을 결정하는 단계; 를 포함하는,determining a display value of the first pixel block based on the display value of the second pixel block; including,
    진동 보정 기능을 제공하는 디스플레이 장치의 제어 방법.A control method of a display device providing a vibration compensation function.
  13. 제9항에 있어서, 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계는, 10. The method of claim 9, wherein performing vibration compensation by reflecting the compensation shift value comprises:
    프레임 버퍼를 이용하여, 하나의 프레임을 구성하는 복수의 단위 화소 블록에 각각 대응되는 복수의 표시 데이터를 저장하는 단계; 및storing a plurality of display data respectively corresponding to a plurality of unit pixel blocks constituting one frame by using a frame buffer; and
    보상 쉬프트 버퍼를 이용하여, 상기 보상 쉬프트 값을 반영하여 상기 프레임 버퍼에 저장된 상기 표시 데이터를 쉬프트 하여 저장하는 단계; 를 포함하는,shifting and storing the display data stored in the frame buffer by reflecting the compensation shift value using a compensation shift buffer; including,
    진동 보정 기능을 제공하는 디스플레이 장치의 제어 방법.A control method of a display device providing a vibration compensation function.
  14. 제13항에 있어서, 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 단계는, 14. The method of claim 13, wherein performing vibration compensation by reflecting the compensation shift value comprises:
    상기 보상 쉬프트 버퍼에서 표시 데이터가 미설정된 패딩 영역을 확인하는 단계; 및checking a padding area in which display data is not set in the compensation shift buffer; and
    상기 보상 쉬프트 버퍼에서 상기 패딩 영역에 인접한 표시 데이터를 이용하여 상기 패딩 영역의 표시 데이터 값을 설정하는 단계; 를 포함하는,setting a display data value of the padding area using display data adjacent to the padding area in the compensation shift buffer; including,
    진동 보정 기능을 제공하는 디스플레이 장치의 제어 방법.A control method of a display device providing a vibration compensation function.
  15. 컴퓨터 판독 가능한 인스트럭션들(instructions)을 저장하고 있는 저장 매체에 있어서,A storage medium storing computer readable instructions,
    상기 인스트럭션들은, 전자 장치에 의해 실행될 때, 상기 전자 장치로 하여금,The instructions, when executed by an electronic device, cause the electronic device to:
    디스플레이 장치의 진동에 대응하여 생성된 진동 정보를 수신하는 동작;receiving vibration information generated in response to vibration of the display device;
    상기 진동 정보를 기초로 상기 진동을 위한 보상 쉬프트 값을 산출하는 동작; 및calculating a compensation shift value for the vibration based on the vibration information; and
    상기 디스플레이 장치의 표시 영상에 대하여 프레임 단위를 기초로 상기 보상 쉬프트 값을 반영하여 진동 보상을 수행하는 동작; 을 수행하도록 하는,performing vibration compensation by reflecting the compensation shift value on a frame-by-frame basis with respect to the display image of the display device; to do,
    저장 매체. storage medium.
PCT/KR2022/010663 2021-09-23 2022-07-21 Display device providing vibration correcting function, and control method therefor WO2023048376A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210125421A KR102611017B1 (en) 2021-09-23 2021-09-23 Display device providing vibration compensation and control method thereof
KR10-2021-0125421 2021-09-23

Publications (1)

Publication Number Publication Date
WO2023048376A1 true WO2023048376A1 (en) 2023-03-30

Family

ID=85720846

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/010663 WO2023048376A1 (en) 2021-09-23 2022-07-21 Display device providing vibration correcting function, and control method therefor

Country Status (2)

Country Link
KR (1) KR102611017B1 (en)
WO (1) WO2023048376A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009093076A (en) * 2007-10-11 2009-04-30 Mitsubishi Electric Corp Image display system in train
KR20170061491A (en) * 2015-11-26 2017-06-05 체이시로보틱스(주) User interface having compensated screen of smart device in vibration environments
KR20190035113A (en) * 2017-09-26 2019-04-03 현대자동차주식회사 Method and apparatus for controlling in-vehicle display device
JP6635384B2 (en) * 2015-03-25 2020-01-22 パナソニックＩｐマネジメント株式会社 Image processing apparatus, monitoring system including the same, and image processing method
KR20200064833A (en) * 2018-11-29 2020-06-08 삼성전자주식회사 Image processing apparatus and image processing method thereof

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102371608B1 (en) * 2017-06-29 2022-03-07 현대자동차주식회사 Vehicle having display system and controlling method thereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009093076A (en) * 2007-10-11 2009-04-30 Mitsubishi Electric Corp Image display system in train
JP6635384B2 (en) * 2015-03-25 2020-01-22 パナソニックＩｐマネジメント株式会社 Image processing apparatus, monitoring system including the same, and image processing method
KR20170061491A (en) * 2015-11-26 2017-06-05 체이시로보틱스(주) User interface having compensated screen of smart device in vibration environments
KR20190035113A (en) * 2017-09-26 2019-04-03 현대자동차주식회사 Method and apparatus for controlling in-vehicle display device
KR20200064833A (en) * 2018-11-29 2020-06-08 삼성전자주식회사 Image processing apparatus and image processing method thereof

Also Published As

Publication number Publication date
KR102611017B1 (en) 2023-12-07
KR20230042767A (en) 2023-03-30

Similar Documents

Publication Publication Date Title
WO2021158078A1 (en) Display control method and electronic device supporting same
WO2020256460A1 (en) Apparatus and method for driving display based on frequency operation cycle set differently according to frequency
WO2019182336A1 (en) Electronic device and method for driving display of electronic device
WO2019088667A1 (en) Electronic device for recognizing fingerprint using display
WO2019035601A1 (en) Apparatus for editing image using depth map and method thereof
EP3909233A1 (en) Electronic device for stabilizing image and method for operating same
WO2019226027A1 (en) Display device including scan driver for driving display panel in which empty area enclosed by display area is formed
WO2020246709A1 (en) Electronic device including display and method for correcting image displayed by electronic device
EP3622368A1 (en) Electronic device including inactive area
WO2019035550A1 (en) Electronic device for controlling shaking of lens part contained in camera module and operation method for electronic device
WO2020190028A1 (en) Electronic device, method, and computer-readable medium for displaying screen in deformable display panel
EP3698352A1 (en) Display device and method for controlling independently by a group of pixels
WO2019172722A1 (en) Method and electronic device for compensating for image on basis of cumulative time during which image is displayed through display, and displaying compensated image
WO2020171599A1 (en) Electronic device and method of displaying content thereon
WO2023048376A1 (en) Display device providing vibration correcting function, and control method therefor
WO2019164318A1 (en) Electronic device for calculating deterioration of pixel
WO2016052908A1 (en) Transmitter, receiver, and control method thereof
WO2020119565A1 (en) Control method for display panel, display panel and storage medium
WO2020091491A1 (en) Electronic device for controlling display position or area of image on basis of change of content of image
WO2019156454A1 (en) Electronic device for controlling display of content on basis of brightness information and operation method therefor
EP3642828A1 (en) Electronic device for displaying image and method for controlling the same
WO2021066517A1 (en) Method for compensating for pixel drive change caused by leakage current due to emission of light from sensor, and electronic device employing same method
WO2019146975A1 (en) Electronic device for compensating for deterioration in display
WO2021261919A1 (en) Electronic device for dynamically adjusting refresh rate of display
WO2019124907A1 (en) Electronic device and method for moving content display position on basis of coordinate information stored in display driver circuit

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22873082

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22873082

Country of ref document: EP

Kind code of ref document: A1