WO2019004594A1 - 곡면 디스플레이 장치 및 그 동작 방법 - Google Patents

곡면 디스플레이 장치 및 그 동작 방법 Download PDF

Info

Publication number
WO2019004594A1
WO2019004594A1 PCT/KR2018/005665 KR2018005665W WO2019004594A1 WO 2019004594 A1 WO2019004594 A1 WO 2019004594A1 KR 2018005665 W KR2018005665 W KR 2018005665W WO 2019004594 A1 WO2019004594 A1 WO 2019004594A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
image
user
curved
curvature
Prior art date
Application number
PCT/KR2018/005665
Other languages
English (en)
French (fr)
Inventor
한상택
문한별
Original Assignee
(주)피엑스디
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)피엑스디 filed Critical (주)피엑스디
Publication of WO2019004594A1 publication Critical patent/WO2019004594A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/593—Depth or shape recovery from multiple images from stereo images
    • G06T7/596—Depth or shape recovery from multiple images from stereo images from three or more stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/593—Depth or shape recovery from multiple images from stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/12—Advertising or display means not otherwise provided for using special optical effects
    • G09F19/14—Advertising or display means not otherwise provided for using special optical effects displaying different signs depending upon the view-point of the observer
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/301—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements flexible foldable or roll-able electronic displays, e.g. thin LCD, OLED

Definitions

  • the present invention relates to a curved display device and an operation method thereof, and more particularly, to a curved display device implementing a pseudo hologram using a curved display and an operation method thereof.
  • the present invention is derived from a research carried out with the support of the leading industrial technology development project of the Korea Industrial Technology Evaluation and Management Service of the Ministry of Commerce, Industry and Energy. [Assignment: 10042418, title: “60 or more large screen, Development of UI and user interaction technology for visual space tracking for flexible display "].
  • Figure 1 shows a conventional hologram implementation.
  • the hologram means a three-dimensional image formed of a three-dimensional image.
  • the hologram can be photographed using a holographic technique for recording and reproducing stereoscopic information by using interference phenomenon of light caused by two laser beams.
  • the hologram can be roughly classified into three types: “analog hologram”, “digital hologram that reproduces the light reflected on the object digitally”, and “similar hologram such as semi-transmissive screen projection image” have.
  • the "analog hologram” has a disadvantage in that it can not provide a moving stereoscopic image (ie, moving image) although the stereoscopic image (still image) can be generated by using interference of laser light and light.
  • the " semi-transmissive screen projection image " is a pseudo hologram using a transflective screen, which is mainly used in performances, in which stereoscopic images in which different faces are seen depending on viewing positions are provided (See Fig. 1 (b)).
  • a curved display device includes a camera unit for photographing a user located in front of the curved display device and generating a user image; Wherein the first position coordinate is converted into a second position coordinate based on the center of curvature of the curved display unit, A control unit for determining a display image for display to the user based on the second position coordinates and determining a display area for displaying the display image among the curved display units; And a curved surface display unit for displaying the display image in the display area.
  • the camera unit may be a depth camera.
  • the curved surface display portion may have the same curvature.
  • the controller may determine the display image among the multi-angle images based on the angle between the second position coordinate and the center of curvature.
  • control unit estimates the second position coordinate and the gaze direction of the user extending the center of curvature, determines a display center in contact with the sight line direction and the curved surface display unit, The display area can be determined so that the left / right boundary of the display area corresponds to the view angle information of the display image.
  • control unit corrects the display image by mapping the display image to correspond to the display area based on a curvature of the curved surface display unit, and the curved surface display unit displays the corrected display Images can be displayed.
  • the camera unit may be located outside the curved surface display unit.
  • a method of operating a curved display device includes: capturing a user located in front of the curved display device using a camera unit to generate a user image; Recognizing a user from the user image and generating first positional coordinates of the user based on the position of the camera unit; Converting the first position coordinates into second position coordinates based on a center of curvature of the curved surface display unit; Determining a display image for display to the user based on the second position coordinates; Determining a display area for displaying the display image among the curved display parts; And displaying the display image on the display area of the curved surface display part.
  • the camera unit may be a depth camera.
  • the curved surface display portion may have the same curvature.
  • the display image may be determined from the multi-angle image based on the angle between the second position coordinate and the center of curvature.
  • the step of determining the display area may include estimating the second position coordinate and the gaze direction of the user extending the center of curvature; Determining a line of sight and a display center in contact with the curved display unit; And determining the display area so that the left and right boundaries of the display area correspond to the view angle information of the display image with reference to the display center.
  • the method further comprises the step of correcting the display image by mapping the display image to correspond to the display area based on a curvature of the curved surface display part, wherein the displaying step includes: .
  • the method further includes detecting a change in the position of the user, and when the change in position is detected, the step of generating the first coordinate or displaying the display image may be performed again.
  • a computer-readable recording medium on which a program for performing a method of operating a curved display device is recorded.
  • an image display area on a curved display is determined according to a viewing direction viewed by a user, and an image having an angle corresponding to a user's line of sight is selected and displayed in a multi-angle image, Can be provided.
  • the present invention it is possible to prevent image distortion due to the position difference of the sensing unit that senses the user's position / sight line by converting the position coordinates of the user based on the curvature center of the curved display unit.
  • the present invention by setting the boundary of the image display area in consideration of the angle of view of the display image, it is possible to prevent image distortion caused in displaying the image on the curved surface display.
  • a plane image is mapped according to a curvature of a curved surface display unit, and can be corrected to a curved display image suitable for a curved surface display unit.
  • Figure 1 shows a conventional hologram implementation.
  • FIG. 2 shows a curved display device according to an embodiment of the present invention.
  • FIG. 3 illustrates a process of producing a multi-angle image according to an embodiment of the present invention.
  • FIG. 4 illustrates an operation method of a curved display device according to an embodiment of the present invention.
  • 5 to 7 illustrate operation examples of a curved display device according to an embodiment of the present invention.
  • FIG. 2 shows a curved display device according to an embodiment of the present invention.
  • the apparatus 200 may include a communication unit 210, a storage unit 220, a camera unit 230, a curved display unit 240, and a control unit 250.
  • the communication unit 210 may be a wired and / or wireless communication unit 210 provided for direct connection with an external device (various user terminals, servers, etc., which communicate with the curved display device 200) .
  • the communication unit 210 transmits data from the storage unit 220, the camera unit 230, the curved surface display unit 240, the control unit 250 and the like by wire or wireless, And may be wirelessly received and transmitted to the control unit 250 or may be stored in the storage unit 220.
  • the data includes, for example, position information of the camera unit 230, position information and curvature center of the curved surface display unit 240, a first position coordinate, a second position coordinate, a viewing direction, a display image, Angle images, and the like.
  • the communication unit 210 may be a communication unit such as a LAN, a Wideband Code Division Multiple Access (WCDMA), a Long Term Evolution (LTE), a Wireless Broadband Internet (WiBro) Fidelity, Near Field Communication (NFC), Bluetooth, and infrared communication.
  • WCDMA Wideband Code Division Multiple Access
  • LTE Long Term Evolution
  • WiBro Wireless Broadband Internet
  • NFC Near Field Communication
  • Bluetooth Bluetooth
  • the storage unit 220 may store signals or data input / output corresponding to the operation of the curved display device 200 under the control of the controller 250.
  • the storage unit 220 stores programs and data necessary for the operation of the curved display device 200.
  • the storage unit 220 stores the position information of the camera unit 230, the position information of the curved surface display unit 240, and the curvature center, the first position coordinates, the second position coordinates, , A multi-angle image, and the like.
  • the storage unit 220 may be a hard disk drive (HDD), a read only memory (ROM), a random access memory (RAM), an electrically erasable and programmable read only memory (EEPROM) flash memory, CF (Compact Flash) card, SD (Secure Digital) card, SM (Smart Media) card, MMC (Multimedia) card or Memory Stick And may be provided inside the curved display device 200 or may be provided in a separate device.
  • HDD hard disk drive
  • ROM read only memory
  • RAM random access memory
  • EEPROM electrically erasable and programmable read only memory
  • CF Compact Flash
  • SD Secure Digital
  • SM Smart Media
  • MMC Multimedia card
  • Memory Stick Memory Stick
  • the camera unit 230 may capture a user adjacent to the curved display device 200 to generate a user image.
  • the camera unit 230 is preferably located outside the curved surface display unit 240, but the present invention is not limited thereto.
  • the camera unit 230 may be a depth camera, but this is merely an example, and various configurations can be applied according to the embodiment to which the present invention is applied.
  • the curved surface display unit 240 may display an image or data provided from the controller 250 on the screen and provide a user interface for a user's input required for the operation of the curved display device 200. [ Specifically, the curved surface display unit 240 displays a still image or a moving image, which is received from the control unit 250, and displays the display image within a range of the display area. The display area may be different in position and size depending on the display image.
  • the curved surface display unit 240 may include one or a plurality of curved surface display units 240, and the curved surface display unit 240 may be a transparent display unit or an opaque display unit.
  • the curved surface display unit 240 has a display curved at a predetermined curvature instead of a conventional flat screen, and curvature of the curved surface is preferably constant, but not limited thereto, and may have various curved curved surfaces.
  • the display unit 240 may be formed of a liquid crystal display (LCD), an organic light emitting diode (OLED), an active matrix organic light emitting diode (AMOLED), or the like.
  • LCD liquid crystal display
  • OLED organic light emitting diode
  • AMOLED active matrix organic light emitting diode
  • the control unit 250 may control the overall operation of the curved display device 200 and the signal flow between the internal configurations of the curved display device 200 and may perform data processing functions to process the data.
  • the controller 250 recognizes a user, particularly, a user's face or head from a user image, generates first position coordinates of the user based on the position of the camera unit 230 And a second position coordinate based on the center of curvature of the curved surface display unit 240, and can determine the display image from the multi-angle image.
  • the control unit 250 determines a display area for the display image of the display area of the curved display unit 240 and displays the display image to the user through the curved display unit 240.
  • FIG. 2 The operation of the controller 250 will be described in detail with reference to FIGS. 3 to 7.
  • FIG. 3 The operation of the controller 250 will be described in detail with reference to FIGS. 3 to 7.
  • FIG. 3 illustrates a process of producing a multi-angle image according to an embodiment of the present invention.
  • the multi-angle image 330 refers to a product obtained by photographing the object 320 in a state where a plurality of cameras 310 are disposed at different positions from each other.
  • Each camera 310 may be multi-angle-positioned around the object 320 to vary the viewpoint of the camera 310, but the present invention is not limited thereto.
  • the multi-angle image 330 may include a plurality of images of the object 320 at various angles, and each image may be a still image or a moving image. In addition, each image may include position information or angle information of the camera 310 that captured the corresponding image.
  • FIG. 4 shows an operation method of a curved display device according to an embodiment of the present invention
  • FIGS. 5 to 7 show operation examples of a curved display device according to an embodiment of the present invention.
  • step S410 the camera unit 230 may photograph the user 530 to generate a user image.
  • the camera unit 230 may be located outside the curved surface display unit 240 so that the user 530 located outside the curved display unit 240 may be easily picked up.
  • step S410 may be performed using a depth camera.
  • the controller 250 may generate the first position coordinates 540.
  • the first position coordinates 540 are related to the position information of the user 530 on the basis of the position of the camera unit 230. More specifically, (E.g., a face or a head of the user 530), and generating information about the distance and direction between the recognized user 530 and the camera unit 230. [
  • the controller 250 may convert the first position coordinates 540 to the second position coordinates 550.
  • the second position coordinate 550 is related to the position information of the user 530 with reference to the curvature center 510 of the curved surface display unit 240.
  • the first position coordinate 540 and the second position coordinate 540 The first position coordinate 540 can be converted to the second position coordinate 550 based on the positional relationship 520 between the center of curvature 510 and the camera unit 230.
  • step S440 the display image 610 can be determined.
  • the display image 610 means an image to be displayed to the user 530 among the multi-angle images, and may be determined based on the second position coordinates 550 in step S430.
  • step S440 an angle of each image of the multi-angle image, an angle between the second position coordinate 550 and the center of curvature 510 is compared with each other, and an image having the corresponding angle among the multi- . ≪ / RTI >
  • the display image 610 may be an image having the same angle as the angle between the second position coordinate 550 and the curvature center 510 among the multi-angle images.
  • an image having an angle closest to the angle between the second position coordinate 550 and the center of curvature 510 of the multi-angle image is displayed on the display image 610, .
  • the control unit 250 can determine the display area.
  • the display area may refer to an area determined to display the display image 610 as at least a part of the display area of the curved surface display part 240, and may include a display center 560 and a display center 560 And may include information on the display range.
  • the controller 250 estimates the viewing direction of the user 530 extending the second position coordinate 550 and the center of curvature 510 so that the viewing direction and the curved surface display unit 240
  • the display center 560 is determined based on the display center 560 and the display range (i.e., the left and right boundaries 630 and 640 of the display area) is determined based on the view angle information 620 of the display image 610 By determining the display area to correspond to the display area.
  • the display image 610 can be positioned at the center of the line of sight of the user 530.
  • the display area is determined according to the view angle information of the display image 610, distortion of the image can be prevented from occurring in the process of displaying the display image 610, which is a plane image, on the curved surface.
  • the curved surface display unit 240 may display the display image 610 on the display area of the curved surface display unit 240.
  • the user 530 can view the stereoscopic image of the hologram by displaying the image of the corresponding view point in the corresponding area according to the position of the user 530 shouted outside the curved display unit 240 and the view direction based on the position of the user 530, You can experience the same effect.
  • the method 400 further includes a step of the controller 250 to correct the display image 610 by mapping the display image 610 to correspond to the display area based on the curvature of the curved surface display part 240 .
  • the image of the central region corresponding to the display center 560 of the display image 610 in the plane is one-to-one (1: 1) mapping between the display image 610 of the plane and the display image 610 of the curved surface (1: many) mapping between the plane display image 610 and the curved display image 610 is performed on the image of the peripheral area facing the left / right boundary from the display image 610 of the plane.
  • the display image 610 of the plane constituting the multi-angle image can be corrected to the display image 610 of the curved surface suitable for the curved display unit 240, and step S460 is performed for the corrected display image 610 .
  • the method 400 may further include the step of the controller 250 detecting a change in the position of the user 530.
  • the above step may be performed by the controller 250 analyzing the user image to determine a change or a movement of the user 530. If the position change is detected by the above step, at least one of steps S420 to S460 may be performed again based on the changed user 530 position.
  • various embodiments described herein may be implemented by hardware, middleware, microcode, software, and / or a combination thereof.
  • various embodiments may include one or more application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays ), Processors, controllers, microcontrollers, microprocessors, other electronic units designed to perform the functions described herein, or a combination thereof.
  • ASICs application specific integrated circuits
  • DSPs digital signal processors
  • DSPDs digital signal processing devices
  • PLDs programmable logic devices
  • Processors controllers, microcontrollers, microprocessors, other electronic units designed to perform the functions described herein, or a combination thereof.
  • various embodiments may be stored or encoded in a computer-readable medium including instructions.
  • the instructions stored or encoded in the computer-readable medium may cause a programmable processor or other processor to perform the method, for example, when the instructions are executed.
  • the computer-readable medium includes computer storage media, which may be any available media that can be accessed by a computer.
  • such computer-readable media can comprise RAM, ROM, EEPROM, CD-ROM or other optical disk storage media, magnetic disk storage media, or other magnetic storage devices.
  • Such hardware, software, firmware, etc. may be implemented within the same device or within separate devices to support the various operations and functions described herein. Additionally, components, units, modules, components, etc. described in the present invention as " parts " may be implemented separately or together as separate but interoperable logic devices. The description of different features for modules, units, etc. is intended to emphasize different functional embodiments and does not necessarily imply that they must be implemented by individual hardware or software components. Rather, the functionality associated with one or more modules or units may be performed by separate hardware or software components, or may be incorporated within common or separate hardware or software components.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명의 일 실시예에 따라, 곡면 디스플레이 장치 및 그 동작 방법이 제공된다. 상기 장치는, 상기 곡면 디스플레이 장치의 전방에 위치한 사용자를 촬영하여 사용자 영상을 생성하는 카메라부; 상기 사용자 영상으로부터 사용자를 인식하고, 상기 카메라부의 위치를 기준으로 상기 사용자의 제 1 위치 좌표를 생성하고, 상기 제 1 위치 좌표를 곡면 디스플레이부의 곡률중심을 기준으로 하는 제 2 위치 좌표로 변환하고, 상기 제 2 위치 좌표에 기초하여 상기 사용자에게 디스플레이하기 위한 표시 영상을 결정하며, 상기 곡면 디스플레이부 중에서 상기 표시 영상을 디스플레이하기 위한 표시 영역을 결정하는 제어부; 및 상기 표시 영역에 상기 표시 영상을 디스플레이하는 곡면 디스플레이부를 포함할 수 있다.

Description

곡면 디스플레이 장치 및 그 동작 방법
본 발명은 곡면 디스플레이 장치 및 그 동작 방법에 관한 것으로서, 구체적으로, 곡면 디스플레이를 이용하여 의사 홀로그램을 구현하는 곡면 디스플레이 장치 및 그 동작 방법에 관한 것이다.
본 발명은 산업통상자원부 한국산업기술평가관리원의 미래산업선도기술개발사업의 지원을 받아 수행한 연구로부터 도출된 것이다[과제고유번호: 10042418, 연구과제명: "60〃이상 대화면, UD 화질의 투명플렉시블 디스플레이를 위한 시각 공간 추적이 가능한 UI 및 사용자 상호작용 기술개발"].
도 1은 종래의 홀로그램 구현 예를 도시한다. 홀로그램은 3차원 영상으로 된 입체 영상을 의미하는 것으로서, 두 개의 레이저광이 서로 만나 일으키는 빛의 간섭 현상을 이용하여 입체 정보를 기록하고 재생하는 홀로그래피 기술을 이용하여 촬영될 수 있다.
홀로그램은 크게 “대상을 입체영상으로 찍어내는 사진술인 아날로그 홀로그램”, “대상에 반사된 빛을 디지털로 재현하는 디지털 홀로그램” 및 “반투과형 스크린 투영 영상 등의 유사 홀로그램”의 3가지로 분류될 수 있다.
상기 홀로그램 중 “아날로그 방식 홀로그램”은 레이저광과 빛의 간섭을 이용하여 정지된 입체 영상(정지화상)을 만들 수 있으나, 움직이는 입체 영상(즉, 동화상)을 제공하지 못한다는 단점이 있다.
이를 보완하여, “디지털 홀로그램”이 제안되었는데(도 1의 (a) 참조), 이에 의하면, 동화상을 표현하는 것은 가능하나, 빛의 보강 간섭이나 렌즈를 이용해 초점이 맞는 위치에서만 입체 영상이 인지되는 한계가 있었다.
또한, “반투과형 스크린 투영 영상”은 공연에서 주로 사용하는 반투과형 스크린을 사용하는 유사 홀로그램으로서, 공간에 영상이 떠있는 듯한 착시를 이용하지만 보는 위치에 따라 다른 면이 보이는 입체 영상이 제공되는 것은 아니다(도 1의 (b) 참조).
따라서, 이러한 문제점을 해결하고, 간이하게 입체 동화상을 제공할 수 있는 기술이 요구된다.
본 발명은 상기 문제점을 해결하기 위한 것으로서, 곡면 디스플레이를 이용하여 의사 홀로그램을 구현하는 곡면 디스플레이 장치 및 그 동작 방법을 제공하는 것을 그 목적으로 한다.
본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재들로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따라, 곡면 디스플레이 장치가 제공된다. 상기 장치는, 상기 곡면 디스플레이 장치의 전방에 위치한 사용자를 촬영하여 사용자 영상을 생성하는 카메라부; 상기 사용자 영상으로부터 사용자를 인식하고, 상기 카메라부의 위치를 기준으로 상기 사용자의 제 1 위치 좌표를 생성하고, 상기 제 1 위치 좌표를 곡면 디스플레이부의 곡률중심을 기준으로 하는 제 2 위치 좌표로 변환하고, 상기 제 2 위치 좌표에 기초하여 상기 사용자에게 디스플레이하기 위한 표시 영상을 결정하며, 상기 곡면 디스플레이부 중에서 상기 표시 영상을 디스플레이하기 위한 표시 영역을 결정하는 제어부; 및 상기 표시 영역에 상기 표시 영상을 디스플레이하는 곡면 디스플레이부를 포함할 수 있다.
바람직하게는, 상기 카메라부는 깊이 카메라(depth camera)일 수 있다.
또한, 바람직하게는, 상기 곡면 디스플레이부는 동일한 곡률을 가질 수 있다.
또한, 바람직하게는, 상기 제어부는, 상기 제 2 위치 좌표와 상기 곡률중심 간의 앵글에 기초하여 멀티 앵글 영상 중에서 상기 표시 영상을 결정할 수 있다.
또한, 바람직하게는, 상기 제어부는, 상기 제 2 위치 좌표와 상기 곡률중심을 연장하는 상기 사용자의 시선 방향을 추정하고, 상기 시선 방향과 상기 곡면 디스플레이부가 접하는 표시 중심을 결정하며, 상기 표시 중심으로 기준으로 하되, 상기 표시 영역의 좌/우 경계가 상기 표시 영상의 화각 정보에 대응하도록 상기 표시 영역을 결정할 수 있다.
또한, 바람직하게는, 상기 제어부는, 상기 곡면 디스플레이부의 곡률에 기초하여 상기 표시 영상을 상기 표시 영역에 대응하도록 매핑하여 상기 표시 영상을 보정하고, 상기 곡면 디스플레이부는, 상기 표시 영역에 상기 보정된 표시 영상을 디스플레이할 수 있다.
또한, 바람직하게는, 상기 카메라부는 상기 곡면 디스플레이부의 외측에 위치할 수 있다.
본 발명의 일 실시예에 따라, 곡면 디스플레이 장치의 동작 방법이 제공된다. 상기 방법은, 카메라부를 이용하여 상기 곡면 디스플레이 장치의 전방에 위치한 사용자를 촬영하여 사용자 영상을 생성하는 단계; 상기 사용자 영상으로부터 사용자를 인식하고, 상기 카메라부의 위치를 기준으로 상기 사용자의 제 1 위치 좌표를 생성하는 단계; 상기 제 1 위치 좌표를 곡면 디스플레이부의 곡률중심을 기준으로 하는 제 2 위치 좌표로 변환하는 단계; 상기 제 2 위치 좌표에 기초하여 상기 사용자에게 디스플레이하기 위한 표시 영상을 결정하는 단계; 상기 곡면 디스플레이부 중에서 상기 표시 영상을 디스플레이하기 위한 표시 영역을 결정하는 단계; 및 상기 곡면 디스플레이부의 상기 표시 영역에 상기 표시 영상을 디스플레이하는 단계를 포함할 수 있다.
바람직하게는, 상기 카메라부는 깊이 카메라(depth camera)일 수 있다.
또한, 바람직하게는, 상기 곡면 디스플레이부는 동일한 곡률을 가질 수 있다.
또한, 바람직하게는, 상기 표시 영상은, 상기 제 2 위치 좌표와 상기 곡률중심 간의 앵글에 기초하여 멀티 앵글 영상 중에서 결정될 수 있다.
또한, 바람직하게는, 상기 표시 영역을 결정하는 단계는, 상기 제 2 위치 좌표와 상기 곡률중심을 연장하는 상기 사용자의 시선 방향을 추정하는 단계; 상기 시선 방향과 상기 곡면 디스플레이부가 접하는 표시 중심을 결정하는 단계; 및 상기 표시 중심으로 기준으로 하되, 상기 표시 영역의 좌/우 경계가 상기 표시 영상의 화각 정보에 대응하도록 상기 표시 영역을 결정하는 단계를 포함할 수 있다.
또한, 바람직하게는, 상기 곡면 디스플레이부의 곡률에 기초하여 상기 표시 영상을 상기 표시 영역에 대응하도록 매핑하여 상기 표시 영상을 보정하는 단계를 더 포함하고, 상기 디스플레이하는 단계는 상기 보정된 표시 영상에 대해 수행될 수 있다.
또한, 바람직하게는, 상기 사용자의 위치 변화를 감지하는 단계를 더 포함하고, 상기 위치 변화가 감지되면, 상기 제 1 좌표를 생성하는 단계 내지 상기 표시 영상을 디스플레이 하는 단계가 재수행될 수 있다.
본 발명의 일 실시예에 따라, 곡면 디스플레이 장치의 동작 방법을 수행하기 위한 프로그램이 기록된 컴퓨터 판독 가능한 기록매체가 제공된다.
본 발명에 따르면, 사용자가 바라보는 시선 방향에 따라 곡면 디스플레이 상의 영상 표시 영역을 결정하고, 멀티 앵글 영상 중 사용자의 시선과 대응하는 앵글을 갖는 영상을 선택하여 표시함으로써, 홀로그램과 같은 입체감이 있는 영상을 제공할 수 있다.
또한, 본 발명에 따르면, 사용자의 위치 좌표를 곡면 디스플레이부의 곡률중심을 기준으로 변환함으로써, 사용자의 위치/시선을 감지하는 감지부의 위치 차이로 인한 영상 왜곡을 방지할 수 있다.
또한, 본 발명에 따르면, 표시 영상의 화각을 고려하여 영상 표시 영역의 경계를 설정함으로써, 영상이 곡면 디스플레이 상에서 표시되는 과정에서 발생하는 영상의 왜곡을 방지할 수 있다.
또한, 본 발명에 따르면, 평면의 영상을 곡면 디스플레이부의 곡률에 따라 매핑하여 곡면 디스플레이부에 적합한 곡면의 표시 영상으로 보정할 수 있다.
본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 간단한 설명이 제공된다.
도 1은 종래의 홀로그램 구현 예를 도시한다.
도 2는 본 발명의 일 실시예에 따른 곡면 디스플레이 장치를 도시한다.
도 3은 본 발명의 일 실시예에 따른 멀티 앵글 영상의 제작 과정을 도시한다.
도 4는 본 발명의 일 실시예에 따른 곡면 디스플레이 장치의 동작 방법을 도시한다.
도 5 내지 도 7은 본 발명의 일 실시예에 따른 곡면 디스플레이 장치의 동작 예시를 도시한다.
이하, 본 발명에 따른 실시예들은 첨부된 도면들을 참조하여 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 실시예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 실시예들을 설명할 것이나, 본 발명의 기술적 사상은 이에 한정되거나 제한되지 않고 당업자에 의해 변형되어 다양하게 실시될 수 있다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 본 발명의 실시예의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다.
도 2는 본 발명의 일 실시예에 따른 곡면 디스플레이 장치를 도시한다.
도 2를 참조하면, 장치(200)는 통신부(210), 저장부(220), 카메라부(230), 곡면 디스플레이부(240) 및 제어부(250)를 포함할 수 있다.
통신부(210)는 외부 장치(곡면 디스플레이 장치(200)와 통신하는 각종 사용자 단말, 서버 등)와의 직접 연결 또는 네트워크를 통한 연결을 위해 제공되는 것으로서, 유선 및/또는 무선 통신부(210)일 수 있다. 구체적으로, 통신부(210)는, 저장부(220), 카메라부(230), 곡면 디스플레이부(240), 제어부(250) 등으로부터의 데이터를 유선 또는 무선으로 전송하거나, 외부로부터 데이터를 유선 또는 무선 수신하여 제어부(250)로 전달하거나 저장부(220)에 저장할 수 있다. 상기 데이터에는, 예를 들어, 카메라부(230)의 위치 정보, 곡면 디스플레이부(240)의 위치 정보 및 곡률중심, 제 1 위치 좌표, 제 2 위치 좌표, 시선 방향, 표시 영상, 표시 영역, 멀티 앵글 영상 등이 포함될 수 있다.
통신부(210)는 랜(LAN), WCDMA(Wideband Code Division Multiple Access), LTE(Long Term Evolution), WiBro(Wireless Broadband Internet), RF(Radio Frequency) 통신, 무선랜(Wireless LAN), 와이파이(Wireless Fidelity), NFC(Near Field Communication), 블루투스, 적외선 통신 등을 통해 통신할 수 있다. 다만, 이는 예시적인 것으로서, 본 발명이 적용되는 실시예에 따라 당해 기술분야에서 적용 가능한 다양한 유, 무선 통신 기술이 이용될 수 있다.
저장부(220)는 제어부(250)의 제어에 따라 곡면 디스플레이 장치(200)의 동작에 대응되게 입/출력되는 신호 또는 데이터를 저장할 수 있다. 또한, 저장부(220)는 곡면 디스플레이 장치(200)의 동작에 필요한 프로그램 및 데이터를 저장하는 역할을 수행한다. 예를 들어, 저장부(220)는 카메라부(230)의 위치 정보, 곡면 디스플레이부(240)의 위치 정보 및 곡률중심, 제 1 위치 좌표, 제 2 위치 좌표, 시선 방향, 표시 영상, 표시 영역, 멀티 앵글 영상 등에 관한 정보를 저장할 수 있다.
저장부(220)는, 통상의 기술자에게 알려진 바와 같이, HDD(Hard Disk Drive), ROM(Read Only Memory), RAM(Random Access Memory), EEPROM(Electrically Erasable and Programmable Read Only Memory), 플래시 메모리(flash memory), CF(Compact Flash) 카드, SD(Secure Digital) 카드, SM(Smart Media) 카드, MMC(Multimedia) 카드 또는 메모리 스틱(Memory Stick) 등 정보의 입출력이 가능한 다양한 형태의 저장 장치로 구현될 수 있으며, 곡면 디스플레이 장치(200) 내부에 구비되거나, 별도의 장치에 구비될 수 있다.
카메라부(230)는, 곡면 디스플레이 장치(200)에 인접한 사용자를 촬영하여 사용자 영상을 생성할 수 있다. 사용자의 촬영을 원활히 하기 위해 카메라부(230)는 곡면 디스플레이부(240)의 외측에 위치하는 것이 바람직하나 이에 한정되는 것은 아니며, 사용자의 촬영이 가능한 다양한 장소에 배치될 수 있다. 카메라부(230)는 깊이 카메라(depth camera)일 수 있으나, 이는 예시적인 것으로서, 본 발명이 적용되는 실시예에 따라 다양한 구성이 적용될 수 있다.
곡면 디스플레이부(240)는 제어부(250)로부터 제공되는 이미지 또는 데이터를 화면에 표시하고, 곡면 디스플레이 장치(200)의 동작을 위해 요구되는 사용자의 입력을 위한 사용자 인터페이스를 제공할 수 있다. 구체적으로, 곡면 디스플레이부(240)는 제어부(250)로부터 수신되는 정지 화상 또는 동화상인 표시 영상을 디스플레이 하되, 디스플레이 영역 중 표시 영역의 범위 내에서 표시 영상을 디스플레이할 수 있다. 표시 영역은 표시 영상에 따라 위치나 크기가 상이할 수 있다.
곡면 디스플레이부(240)는 하나 또는 복수로 구성될 수 있으며, 각 곡면 디스플레이부(240)는 투명 디스플레이부나 불투명 디스플레이부일 수 있다. 곡면 디스플레이부(240)는 기존 평면 스크린이 아닌 소정의 곡률로 구부러진 형태의 디스플레이를 가지며, 이때 곡면의 곡률은 일정한 것이 바람직하나 이에 한정되지 않으며, 다양한 곡률에 의한 굴곡면을 가질 수도 있다.
디스플레이부(240)는 액정표시장치(LCD, Liquid Crystal Display), 유기 발광 다이오드(OLED, Organic Light Emitting Diodes), 능동형 유기 발광 다이오드(AMOLED, Active Matrix Organic Light Emitting Diodes) 등으로 형성될 수 있다.
제어부(250)는 곡면 디스플레이 장치(200)의 전반적인 동작 및 곡면 디스플레이 장치(200)의 내부 구성들 간의 신호 흐름을 제어하고, 데이터를 처리하는 데이터 처리 기능을 수행할 수 있다. 특히, 본 발명에서 제어부(250)는 사용자 영상으로부터 사용자, 특히, 사용자의 얼굴 또는 머리(head))를 인식하고, 카메라부(230)의 위치를 기준으로 하여 사용자의 제 1 위치 좌표를 생성하고, 곡면 디스플레이부(240)의 곡률중심을 기준으로 하는 제 2 위치 좌표로 변환하며, 이를 이용하여 멀티 앵글 영상으로부터 표시 영상을 결정할 수 있다. 또한, 제어부(250)는, 곡면 디스플레이부(240)의 디스플레이이 영역 중 표시 영상을 위한 표시 영역을 결정하고, 곡면 디스플레이부(240)를 통해 표시 영상을 사용자에게 표시할 수 있다.
이러한 제어부(250)의 동작은 하기 도 3 내지 도 7과 함께 보다 자세히 설명하도록 한다.
도 3은 본 발명의 일 실시예에 따른 멀티 앵글 영상을 제작 과정을 도시한다.
도시되는 바와 같이, 멀티 앵글(multi angle) 영상(330)은, 복수의 카메라(310)가 서로 상이한 위치에 배치된 상태에서, 대상(320)을 촬영한 제작물을 의미한다. 각 카메라(310)는 대상(320)을 중심으로 멀티 앵글 포지셔닝되어 카메라(310)의 시점을 다양하게 하는 것이 바람직하나 이에 한정되는 것은 아니다.
멀티 앵글 영상(330)은 다양한 앵글에서 대상(320)을 촬영한 복수의 영상으로 이루어질 수 있으며, 이때, 각 영상은 정지화상 또는 동화상일 수 있다. 또한, 각 영상은 해당 영상을 촬영한 카메라(310)의 위치 정보 또는 앵글 정보 등을 포함할 수 있다.
도 4는 본 발명의 일 실시예에 따른 곡면 디스플레이 장치의 동작 방법을 도시하고, 도 5 내지 도 7은 본 발명의 일 실시예에 따른 곡면 디스플레이 장치의 동작 예시를 도시한다.
S410 단계에서, 카메라부(230)가 사용자(530)를 촬영하여 사용자 영상을 생성할 수 있다. 곡면 디스플레이부(240) 외부(특히, 전방)에 존재하는 사용자(530)의 촬영이 용이하도록, 카메라부(230)는 곡면 디스플레이부(240) 외측에 위치할 수 있으며, S420 단계에서 제 1 위치 좌표(540)의 생성이 용이하도록, S410 단계는 깊이 카메라(depth camera)를 이용하여 수행될 수 있다.
S420 단계에서, 제어부(250)가 제 1 위치 좌표(540)를 생성할 수 있다. 여기서 제 1 위치 좌표(540)는 카메라부(230)의 위치를 기준으로 하는 사용자(530)의 위치 정보에 관한 것으로서, 구체적으로, 제어부(250)가 사용자 영상으로부터 사용자(530)(특히, 사용자(530)의 얼굴 또는 머리 등)를 인식하고, 인식된 사용자(530)와 카메라부(230) 간의 거리와 방향에 관한 정보를 생성함으로써 수행될 수 있다.
S430 단계에서, 제어부(250)가 제 1 위치 좌표(540)를 제 2 위치 좌표(550)로 변환할 수 있다. 여기서 제 2 위치 좌표(550)는 곡면 디스플레이부(240)의 곡률중심(510)을 기준으로 하는 사용자(530)의 위치 정보에 관한 것으로서, 구체적으로, S420 단계의 제 1 위치 좌표(540)와 곡률중심(510)과 카메라부(230)와의 위치 관계(520)에 기초하여, 제 1 위치 좌표(540)가 제 2 위치 좌표(550)로 변환될 수 있다.
S440 단계에서, 표시 영상(610)을 결정할 수 있다. 여기서 표시 영상(610)은 멀티 앵글 영상 중 사용자(530)에게 표시할 영상을 의미하는 것으로서, S430 단계의 제 2 위치 좌표(550)에 기초하여 결정될 수 있다.
구체적으로, S440 단계는, 멀티 앵글 영상의 각 영상의 앵글과 제 2 위치 좌표(550)와 곡률중심(510) 간의 앵글을 비교하여 멀티 앵글 영상 중에서 대응하는 앵글을 갖는 영상을 표시 영상(610)으로 결정함으로써 수행될 수 있다. 예를 들어, 표시 영상(610)은, 멀티 앵글 영상 중에서 제 2 위치 좌표(550)와 곡률중심(510) 간의 앵글과 동일한 앵글을 갖는 영상일 수 있다. 이와 달리, 멀티 앵글 영상 중에서, 동일한 앵글을 갖는 영상이 존재하지 않으면, 멀티 앵글 영상 중에서 제 2 위치 좌표(550)와 곡률중심(510) 간의 앵글과 가장 근접한 앵글을 갖는 영상을 표시 영상(610)으로 결정할 수 있다.
S450 단계에서, 제어부(250)가 표시 영역을 결정할 수 있다. 여기서 표시 영역은 곡면 디스플레이부(240)의 디스플레이 영역 중 적어도 일부로서 표시 영상(610)을 디스플레이 하는 것으로 결정되는 영역을 의미할 수 있으며, 표시 중심(560) 및 표시 중심(560)을 기준으로 하는 표시 범위에 관한 정보를 포함할 수 있다.
구체적으로, S450 단계는, 제어부(250)가, 제 2 위치 좌표(550)와 곡률중심(510)을 연장하는 사용자(530)의 시선 방향을 추정하고, 시선 방향과 곡면 디스플레이부(240)가 접하는 표시 중심(560)을 결정하며, 표시 중심(560)으로 기준으로 하되, 표시 범위(즉, 표시 영역의 좌/우 경계(630, 640))가 표시 영상(610)의 화각(620) 정보에 대응하도록 표시 영역을 결정함으로써 수행될 수 있다.
이를 통해, 사용자(530)가 곡면 디스플레이 장치(200)를 바라보았을 때, 표시 영상(610)이 사용자(530)의 시선 중심에 위치하도록 할 수 있다. 또한, 표시 영상(610)의 화각 정보에 따라 표시 영역을 결정하도록 하여 평면 영상인 표시 영상(610)이 곡면에 표시되는 과정에서 영상의 왜곡이 발생하는 것을 방지할 수 있다.
S460 단계에서, 곡면 디스플레이부(240)가 곡면 디스플레이부(240)의 표시 영역에 표시 영상(610)을 디스플레이할 수 있다. 이를 통해 곡면 디스플레이부(240) 외측에 외치한 사용자(530)의 위치 및 이에 기초한 시선 방향에 따라 대응하는 시점의 영상을 대응하는 영역에 디스플레이함으로써, 사용자(530)는 홀로그램의 입체 영상을 보는 것과 같은 효과를 체험할 수 있다.
일 실시예에서, 방법(400)은 제어부(250)가 곡면 디스플레이부(240)의 곡률에 기초하여 표시 영상(610)을 표시 영역에 대응하도록 매핑하여 표시 영상(610)을 보정하는 단계를 더 포함할 수 있다. 예를 들어, 평면의 표시 영상(610) 중 표시 중심(560)에 대응하는 중심 영역의 영상은 평면의 표시 영상(610) 및 곡면의 표시 영상(610) 간의 일대일(1:1) 매핑이 이루어지도록 보정하고, 평면의 표시 영상(610)에서 좌/우 경계로 향하는 주변 영역의 영상은 평면의 표시 영상(610) 및 곡면의 표시 영상(610) 간의 일대다(1:多) 매핑이 이루어지도록 보정할 수 있다. 이를 통해 멀티 앵글 영상을 이루는 평면의 표시 영상(610)을 곡면 디스플레이부(240)에 적합한 곡면의 표시 영상(610)으로 보정할 수 있으며, S460 단계는 보정된 표시 영상(610)에 대해 수행될 수 있다.
일 실시예에서, 방법(400)은 제어부(250)가 사용자(530)의 위치 변화를 감지하는 단계를 더 포함할 수 있다. 상기 단계는 제어부(250)가 사용자 영상을 분석하여 사용자(530)의 위치 변화 또는 움직임을 판단함으로써 수행될 수 있다. 상기 단계에 의해 위치 변화가 감지되면, S420 단계 내지 S460 단계 중 적어도 하나는 변화된 사용자(530) 위치에 기초하여 재수행될 수 있다.
한편, 본 명세서에 기재된 다양한 실시예들은 하드웨어, 미들웨어, 마이크로코드, 소프트웨어 및/또는 이들의 조합에 의해 구현될 수 있다. 예를 들어, 다양한 실시예들은 하나 이상의 주문형 반도체(ASIC)들, 디지털 신호 프로세서(DSP)들, 디지털 신호 프로세싱 디바이스(DSPD)들, 프로그램어블 논리 디바이스(PLD)들, 필드 프로그램어블 게이트 어레이(FPGA)들, 프로세서들, 컨트롤러들, 마이크로컨트롤러들, 마이크로프로세서들, 여기서 제시되는 기능들을 수행하도록 설계되는 다른 전자 유닛들 또는 이들의 조합 내에서 구현될 수 있다.
또한, 예를 들어, 다양한 실시예들은 명령들을 포함하는 컴퓨터-판독가능한 매체에 수록되거나 인코딩될 수 있다. 컴퓨터-판독가능한 매체에 수록 또는 인코딩된 명령들은 프로그램 가능한 프로세서 또는 다른 프로세서로 하여금 예컨대,　명령들이 실행될 때 방법을 수행하게끔 할 수 있다. 컴퓨터-판독가능한 매체는 컴퓨터 저장 매체를 포함하며, 컴퓨터 저장 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수도 있다. 예를 들어, 이러한 컴퓨터-판독가능한 매체는 RAM, ROM, EEPROM, CD-ROM　또는 기타 광학 디스크 저장 매체, 자기 디스크 저장 매체 또는 기타 자기 저장 디바이스를 포함할 수 있다.
이러한 하드웨어, 소프트웨어, 펌웨어 등은 본 명세서에 기술된 다양한 동작들 및 기능들을 지원하도록 동일한 디바이스 내에서 또는 개별 디바이스들 내에서 구현될 수 있다. 추가적으로, 본 발명에서 "~부"로 기재된 구성요소들, 유닛들, 모듈들, 컴포넌트들 등은 함께 또는 개별적이지만 상호 운용가능한 로직 디바이스들로서 개별적으로 구현될 수 있다. 모듈들, 유닛들 등에 대한 서로 다른 특징들의 묘사는 서로 다른 기능적 실시예들을 강조하기 위해 의도된 것이며, 이들이 개별 하드웨어 또는 소프트웨어 컴포넌트들에 의해 실현되어야만 함을 필수적으로 의미하지 않는다. 오히려, 하나 이상의 모듈들 또는 유닛들과 관련된 기능은 개별 하드웨어 또는 소프트웨어 컴포넌트들에 의해 수행되거나 또는 공통의 또는 개별의 하드웨어 또는 소프트웨어 컴포넌트들 내에 통합될 수 있다.
특정한 순서로 동작들이 도면에 도시되어 있지만, 이러한 동작들이 원하는 결과를 달성하기 위해 도시된 특정한 순서, 또는 순차적인 순서로 수행되거나, 또는 모든 도시된 동작이 수행되어야 할 필요가 있는 것으로 이해되지 말아야 한다. 임의의 환경에서는, 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 더욱이, 상술한 실시예에서 다양한 구성요소들의 구분은 모든 실시예에서 이러한 구분을 필요로 하는 것으로 이해되어서는 안되며, 기술된 구성요소들이 일반적으로 단일 소프트웨어 제품으로 함께 통합되거나 다수의 소프트웨어 제품으로 패키징될 수 있다는 것이 이해되어야 한다.
이상에서와 같이 도면과 명세서에서 최적 실시예가 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.

Claims (15)

  1. 곡면 디스플레이 장치의 동작 방법으로서,
    카메라부를 이용하여 상기 곡면 디스플레이 장치의 전방에 위치한 사용자를 촬영하여 사용자 영상을 생성하는 단계;
    상기 사용자 영상으로부터 사용자를 인식하고, 상기 카메라부의 위치를 기준으로 상기 사용자의 제 1 위치 좌표를 생성하는 단계;
    상기 제 1 위치 좌표를 곡면 디스플레이부의 곡률중심을 기준으로 하는 제 2 위치 좌표로 변환하는 단계;
    상기 제 2 위치 좌표에 기초하여 상기 사용자에게 디스플레이하기 위한 표시 영상을 결정하는 단계;
    상기 곡면 디스플레이부 중에서 상기 표시 영상을 디스플레이하기 위한 표시 영역을 결정하는 단계; 및
    상기 곡면 디스플레이부의 상기 표시 영역에 상기 표시 영상을 디스플레이하는 단계를 포함하는, 방법.
  2. 제 1 항에 있어서,
    상기 카메라부는 깊이 카메라(depth camera)인, 방법.
  3. 제 1 항에 있어서,
    상기 곡면 디스플레이부는 동일한 곡률을 갖는, 방법.
  4. 제 1 항에 있어서,
    상기 표시 영상은, 상기 제 2 위치 좌표와 상기 곡률중심 간의 앵글에 기초하여 멀티 앵글 영상 중에서 결정되는, 방법.
  5. 제 1 항에 있어서,
    상기 표시 영역을 결정하는 단계는,
    상기 제 2 위치 좌표와 상기 곡률중심을 연장하는 상기 사용자의 시선 방향을 추정하는 단계;
    상기 시선 방향과 상기 곡면 디스플레이부가 접하는 표시 중심을 결정하는 단계; 및
    상기 표시 중심으로 기준으로 하되, 상기 표시 영역의 좌/우 경계가 상기 표시 영상의 화각 정보에 대응하도록 상기 표시 영역을 결정하는 단계를 포함하는, 방법.
  6. 제 5 항에 있어서,
    상기 곡면 디스플레이부의 곡률에 기초하여 상기 표시 영상을 상기 표시 영역에 대응하도록 매핑하여 상기 표시 영상을 보정하는 단계를 더 포함하고,
    상기 디스플레이하는 단계는 상기 보정된 표시 영상에 대해 수행되는, 방법.
  7. 제 1 항에 있어서,
    상기 사용자의 위치 변화를 감지하는 단계를 더 포함하고,
    상기 위치 변화가 감지되면, 상기 제 1 좌표를 생성하는 단계 내지 상기 표시 영상을 디스플레이 하는 단계가 재수행되는, 방법.
  8. 제 1 항 내지 제 7 항 중 어느 한 항에 따른 방법을 수행하기 위한 프로그램이 기록된 컴퓨터 판독 가능한 기록매체.
  9. 곡면 디스플레이 장치로서,
    상기 곡면 디스플레이 장치의 전방에 위치한 사용자를 촬영하여 사용자 영상을 생성하는 카메라부;
    상기 사용자 영상으로부터 사용자를 인식하고, 상기 카메라부의 위치를 기준으로 상기 사용자의 제 1 위치 좌표를 생성하고, 상기 제 1 위치 좌표를 곡면 디스플레이부의 곡률중심을 기준으로 하는 제 2 위치 좌표로 변환하고, 상기 제 2 위치 좌표에 기초하여 상기 사용자에게 디스플레이하기 위한 표시 영상을 결정하며, 상기 곡면 디스플레이부 중에서 상기 표시 영상을 디스플레이하기 위한 표시 영역을 결정하는 제어부; 및
    상기 표시 영역에 상기 표시 영상을 디스플레이하는 곡면 디스플레이부를 포함하는, 장치.
  10. 제 9 항에 있어서,
    상기 카메라부는 깊이 카메라(depth camera)인, 장치.
  11. 제 9 항에 있어서,
    상기 곡면 디스플레이부는 동일한 곡률을 갖는, 장치.
  12. 제 9 항에 있어서,
    상기 제어부는, 상기 제 2 위치 좌표와 상기 곡률중심 간의 앵글에 기초하여 멀티 앵글 영상 중에서 상기 표시 영상을 결정하는, 장치.
  13. 제 9 항에 있어서,
    상기 제어부는, 상기 제 2 위치 좌표와 상기 곡률중심을 연장하는 상기 사용자의 시선 방향을 추정하고, 상기 시선 방향과 상기 곡면 디스플레이부가 접하는 표시 중심을 결정하며, 상기 표시 중심으로 기준으로 하되, 상기 표시 영역의 좌/우 경계가 상기 표시 영상의 화각 정보에 대응하도록 상기 표시 영역을 결정하는, 장치.
  14. 제 13 항에 있어서,
    상기 제어부는, 상기 곡면 디스플레이부의 곡률에 기초하여 상기 표시 영상을 상기 표시 영역에 대응하도록 매핑하여 상기 표시 영상을 보정하고,
    상기 곡면 디스플레이부는, 상기 표시 영역에 상기 보정된 표시 영상을 디스플레이하는, 장치.
  15. 제 9 항에 있어서,
    상기 카메라부는 상기 곡면 디스플레이부의 외측에 위치하는, 장치.
PCT/KR2018/005665 2017-06-30 2018-05-17 곡면 디스플레이 장치 및 그 동작 방법 WO2019004594A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170083198A KR102021363B1 (ko) 2017-06-30 2017-06-30 곡면 디스플레이 장치 및 그 동작 방법
KR10-2017-0083198 2017-06-30

Publications (1)

Publication Number Publication Date
WO2019004594A1 true WO2019004594A1 (ko) 2019-01-03

Family

ID=64742309

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/005665 WO2019004594A1 (ko) 2017-06-30 2018-05-17 곡면 디스플레이 장치 및 그 동작 방법

Country Status (2)

Country Link
KR (1) KR102021363B1 (ko)
WO (1) WO2019004594A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117275354A (zh) * 2023-11-17 2023-12-22 深圳市宝视达光电有限公司 一种柔性显示屏自动调节方法、装置、系统和计算机设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110246421B (zh) * 2019-06-19 2021-10-26 昆山龙腾光电股份有限公司 显示装置及显示装置控制方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008148237A (ja) * 2006-12-13 2008-06-26 Sanyo Electric Co Ltd 姿勢検知装置
KR20120040320A (ko) * 2010-10-19 2012-04-27 에스케이플래닛 주식회사 단말의 디스플레이 장치 및 방법
KR20140051013A (ko) * 2012-10-22 2014-04-30 삼성전자주식회사 플렉서블 디스플레이 장치, 이를 이용한 이미지 촬상 장치 및 이미지 편집 방법
KR101679265B1 (ko) * 2015-06-30 2016-11-24 (주)피엑스디 투명 디스플레이 장치 및 그 동작 방법
KR20170013704A (ko) * 2015-07-28 2017-02-07 주식회사 카이 프로젝터 투사 환경하에서의 사용자 시점을 고려한 가상공간 구현 방법 및 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008148237A (ja) * 2006-12-13 2008-06-26 Sanyo Electric Co Ltd 姿勢検知装置
KR20120040320A (ko) * 2010-10-19 2012-04-27 에스케이플래닛 주식회사 단말의 디스플레이 장치 및 방법
KR20140051013A (ko) * 2012-10-22 2014-04-30 삼성전자주식회사 플렉서블 디스플레이 장치, 이를 이용한 이미지 촬상 장치 및 이미지 편집 방법
KR101679265B1 (ko) * 2015-06-30 2016-11-24 (주)피엑스디 투명 디스플레이 장치 및 그 동작 방법
KR20170013704A (ko) * 2015-07-28 2017-02-07 주식회사 카이 프로젝터 투사 환경하에서의 사용자 시점을 고려한 가상공간 구현 방법 및 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117275354A (zh) * 2023-11-17 2023-12-22 深圳市宝视达光电有限公司 一种柔性显示屏自动调节方法、装置、系统和计算机设备
CN117275354B (zh) * 2023-11-17 2024-01-16 深圳市宝视达光电有限公司 一种柔性显示屏自动调节方法、装置、系统和计算机设备

Also Published As

Publication number Publication date
KR20190002908A (ko) 2019-01-09
KR102021363B1 (ko) 2019-11-04

Similar Documents

Publication Publication Date Title
US10827126B2 (en) Electronic device for providing property information of external light source for interest object
TWI547828B (zh) 感測器與投射器之校準技術
KR101499081B1 (ko) 열화상 카메라 모듈 및 스마트폰
KR102560689B1 (ko) Ar 객체를 표시하기 위한 장치 및 방법
WO2021112406A1 (en) Electronic apparatus and method for controlling thereof
WO2012026347A1 (ja) 電子黒板システム及びプログラム
JP2007129709A (ja) イメージングデバイスをキャリブレートするための方法、イメージングデバイスの配列を含むイメージングシステムをキャリブレートするための方法およびイメージングシステム
CN112218070B (zh) 杂光检测方法、装置、存储介质与电子设备
WO2020017890A1 (en) System and method for 3d association of detected objects
EP3925206A1 (en) Electronic device, method, and computer-readable medium for providing bokeh effect in video
US11798184B2 (en) Three-dimensional image device
WO2016065541A1 (en) Rgb-d imaging system and method using ultrasonic depth sensing
WO2017209409A1 (ko) 구형 컨텐츠 편집 방법 및 이를 지원하는 전자 장치
US20200273432A1 (en) Display system, control program for information processor, and control method for information processor
US10861169B2 (en) Method, storage medium and electronic device for generating environment model
WO2019004594A1 (ko) 곡면 디스플레이 장치 및 그 동작 방법
CN114140771A (zh) 一种图像深度数据集自动标注方法及系统
KR102606835B1 (ko) 뎁스 맵을 생성하는 전자 장치 및 방법
EP3608837A1 (en) Display screen, electronic device and method for three-dimensional feature recognition
US20200042821A1 (en) Interactive method and interactive system
US10685448B2 (en) Optical module and a method for objects' tracking under poor light conditions
WO2017217595A1 (ko) 측위 정보를 기반으로 증강현실 영상을 구현하기 위한 서버 및 시스템
CN115880350A (zh) 图像处理方法、设备、系统及计算机可读存储介质
WO2021234890A1 (ja) 設置支援装置、設置支援方法、およびプログラム
WO2022213288A1 (zh) 一种深度图像处理方法、装置及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18824917

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18824917

Country of ref document: EP

Kind code of ref document: A1