KR20160139297A - 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법 - Google Patents

플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법 Download PDF

Info

Publication number
KR20160139297A
KR20160139297A KR1020150073924A KR20150073924A KR20160139297A KR 20160139297 A KR20160139297 A KR 20160139297A KR 1020150073924 A KR1020150073924 A KR 1020150073924A KR 20150073924 A KR20150073924 A KR 20150073924A KR 20160139297 A KR20160139297 A KR 20160139297A
Authority
KR
South Korea
Prior art keywords
flexible display
user
information
display device
content
Prior art date
Application number
KR1020150073924A
Other languages
English (en)
Other versions
KR102362741B1 (ko
Inventor
안진왕
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150073924A priority Critical patent/KR102362741B1/ko
Priority to PCT/KR2016/005076 priority patent/WO2016190579A1/ko
Priority to US15/574,376 priority patent/US10726762B2/en
Publication of KR20160139297A publication Critical patent/KR20160139297A/ko
Application granted granted Critical
Publication of KR102362741B1 publication Critical patent/KR102362741B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/03Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes specially adapted for displays having non-planar surfaces, e.g. curved displays
    • G09G3/035Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes specially adapted for displays having non-planar surfaces, e.g. curved displays for flexible display surfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/18Image warping, e.g. rearranging pixels individually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09FDISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/301Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements flexible foldable or roll-able electronic displays, e.g. thin LCD, OLED
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2092Details of a display terminals using a flat panel, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Geometry (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

플렉서블(flexible) 디스플레이부; 사용자의 시선 정보를 획득하는 센싱부 및 사용자의 시선 정보 및 상기 플렉서블 디스플레이부의 곡률(curvature) 정보에 기초하여, 플렉서블 디스플레이부에서 활성화 영역을 결정하고, 결정된 활성화 영역에서 콘텐츠가 디스플레이되도록 제어하는 제어부를 포함하는 플렉서블 디스플레이 장치를 개시한다.

Description

플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법{FLEXIBLE DISPLAY DEVICE AND DISPLAYING METHOD THEREOF}
플렉서블 디스플레이를 구비한 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법에 관한 것이다.
디스플레이 기술이 발전하면서, 플렉서블 디스플레이(Flexible Display), 투명 디스플레이(Transparent Display Panel) 등이 개발되고 있다. 플렉서블 디스플레이(flexible display)는 휘어질 수 있는 디스플레이 장치를 뜻한다.
플렉서블 디스플레이는 기존 LCD 및 유기 발광 다이오드(OLED)에서 액정을 싸고 있는 유리기판을 플라스틱 필름으로 대체, 접고 펼 수 있는 유연성을 부여한 것이다. 플렉서블 디스플레이는 일반적으로 사용되는 유리 기판이 아닌 플라스틱 기판을 사용하기 때문에 기판의 손상을 방지하기 위해서 기존의 제조 프로세서를 사용하지 않고 저온 제조 프로세서를 사용한다.
플렉서블 디스플레이는 얇고 가벼울 뿐만 아니라 충격에도 강하다. 또 플렉서블 디스플레이는 휘거나 굽힐 수 있고 다양한 형태로 제작이 가능 하다는 장점이 있다. 특히, 플렉서블 디스플레이는, 기존의 유리기판 기반의 디스플레이로는 적용이 제한적이거나 불가능했던 산업 분야에 이용될 수 있다.
예를 들어, 잡지, 교과서, 서적, 만화와 같은 출판물을 대체할 수 있는 전자책 분야와 디스플레이를 접거나 말아서 휴대할 수 있는 초소형 PC, 실시간 정보 확인이 가능한 스마트 카드 등 새로운 휴대용 IT 제품 분야가 플렉서블 디스플레이의 활용분야가 될 수 있다. 이외에도 플렉서블 디스플레이는 유연한 플라스틱 기판을 사용하기 때문에, 입고 다닐 수 있는 의류용 패션, 의료용 진단 분야에까지 확대 적용될 수 있다.
한편, 플렉서블 디스플레이가 상용화됨에 따라, 플렉서블 디스플레이의 휘거나 접히는 성질에 따라 사용자의 가시 범위를 고려한 디스플레이 방법이 연구되고 있는 추세이다.
플렉서블 디스플레이를 구비한 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법을 제공하는데 있다. 또한, 이 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공하는 데 있다. 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 이하의 실시예들로부터 또 다른 기술적 과제들이 유추될 수 있다.
일 측면에 따르면, 플렉서블 디스플레이 장치는, 플렉서블(flexible) 디스플레이부; 사용자의 시선 정보를 획득하는 센싱부; 및 사용자의 시선 정보 및 플렉서블 디스플레이부의 곡률(curvature) 정보에 기초하여, 플렉서블 디스플레이부에서 활성화 영역을 결정하고, 결정된 활성화 영역에서 콘텐츠가 디스플레이되도록 제어하는 제어부;를 포함할 수 있다.
또한, 제어부는 사용자의 시선 정보에 기초하여 사용자의 응시점을 추출하고, 응시점에 기초하여 활성화 영역을 결정하며, 활성화 영역 내의 곡률이 임계 곡률보다 큰 경우, 활성화 영역을 조정할 수 있다.
또한, 제어부는 사용자의 시선 정보 및 곡률 정보에 기초하여, 활성화 영역에 대응되는 픽셀들의 배치를 조정함으로써, 영상 왜곡이 보정된 콘텐츠를 생성할 수 있다.
또한, 제어부는 센싱부에 의해 획득되는 사용자의 시선 정보가 달라짐에 따라, 플렉서블 디스플레이부 상에서, 활성화 영역이 동적으로 변경되도록 제어할 수 있다.
또한, 센싱부는 플렉서블 디스플레이 장치로부터 사용자의 동공까지의 거리 정보를 획득할 수 있다.
또한, 제어부는 센싱부에 의해 획득된 거리 정보에 기초하여, 콘텐츠에 포함된 적어도 하나의 객체의 배치(arrangement), 적어도 하나의 객체의 외형(appearance) 및 적어도 하나의 객체의 개수를 제어할 수 있다.
또한, 제어부는 콘텐츠가 복수의 객체들을 포함하는 경우, 센싱부에 의해 획득되는 거리 정보가 달라짐에 따라, 복수의 객체들의 배치, 복수의 객체들의 외형 및 복수의 객체들의 개수 중 적어도 하나가 달라지도록 제어할 수 있다.
또한, 제어부는 콘텐츠가 하나의 객체를 포함하는 경우, 센싱부에 의해 획득되는 거리 정보가 달라짐에 따라, 하나의 객체의 외형이 달라지도록 제어할 수 있다.
또한, 센싱부는 사용자의 시선 정보를 획득하기 위해, 소정 간격을 두고 배치되는 복수의 시선 감지 센서를 포함할 수 있다.
다른 일 측면에 따르면, 플렉서블 디스플레이 장치는, 플렉서블 디스플레이부; 알림 메시지를 수신하는 통신부; 알림 메시지가 수신됨에 따라, 사용자의 시선 정보를 획득하는 센싱부; 및 사용자의 시선 정보 및 플렉서블 디스플레이부의 곡률(curvature) 정보에 기초하여, 플렉서블 디스플레이부에서 활성화 영역을 결정하고, 결정된 활성화 영역에서 알림 메시지가 디스플레이되도록 제어하는 제어부;를 포함할 수 있다.
또 다른 일 측면에 따르면, 플렉서블(flexible) 디스플레이 장치의 디스플레이 방법은, 사용자의 시선 정보를 획득하는 단계; 사용자의 시선 정보 및 플렉서블 디스플레이 장치의 곡률(curvature) 정보에 기초하여, 플렉서블 디스플레이 장치의 화면 상에서, 활성화 영역을 결정하는 단계; 및 콘텐츠가 활성화 영역에서 디스플레이되도록 제어하는 단계;를 포함할 수 있다.
또한, 활성화 영역을 결정하는 단계는, 사용자의 시선 정보에 기초하여 사용자의 응시점을 추출하는 단계; 응시점에 기초하여 활성화 영역을 결정하는 단계; 및 활성화 영역 내의 곡률이 임계 곡률보다 큰 경우, 활성화 영역을 조정하는 단계;를 포함할 수 있다.
또한, 활성화 영역을 결정하는 단계는, 사용자의 시선 정보 및 곡률 정보에 기초하여, 활성화 영역에 대응되는 픽셀들의 배치를 조정함으로써, 영상 왜곡이 보정된 콘텐츠를 생성하는 단계;를 포함할 수 있다.
또한, 상기 디스플레이 방법은, 사용자의 시선 정보가 변경되면, 활성화 영역이 동적으로 변경되도록 제어하는 단계;를 더 포함할 수 있다.
또한, 상기 디스플레이 방법은, 플렉서블 디스플레이 장치로부터 사용자의 동공까지의 거리 정보를 획득하는 단계;를 더 포함할 수 있다.
또한, 상기 디스플레이 방법은, 획득된 거리 정보에 기초하여, 콘텐츠에 포함된 적어도 하나의 객체의 배치(arrangement), 적어도 하나의 객체의 외형(appearance) 및 적어도 하나의 객체의 개수를 제어하는 단계;를 더 포함할 수 있다.
또한, 콘텐츠에 포함된 적어도 하나의 객체를 제어하는 단계는, 콘텐츠가 복수의 객체들을 포함하는 경우, 획득된 거리 정보가 달라짐에 따라, 복수의 객체들의 배치, 복수의 객체들의 외형 및 복수의 객체들의 개수 중 적어도 하나가 달라지도록 제어할 수 있다.
또한, 콘텐츠에 포함된 적어도 하나의 객체를 제어하는 단계는, 콘텐츠가 하나의 객체를 포함하는 경우, 획득되는 거리 정보가 달라짐에 따라, 하나의 객체의 외형이 달라지도록 제어할 수 있다.
또 다른 일 측면에 따르면, 플렉서블(flexible) 디스플레이 장치의 디스플레이 방법에 있어서, 알림 메시지를 수신하는 단계; 알림 메시지가 수신됨에 따라, 사용자의 시선 정보를 획득하는 단계; 사용자의 시선 정보 및 플렉서블 디스플레이 장치의 곡률(curvature) 정보에 기초하여, 플렉서블 디스플레이 장치의 화면 상에서 활성화 영역을 결정하는 단계; 및 알림 메시지를 활성화 영역에 디스플레이하는 단계;를 포함할 수 있다.
또 다른 일 측면에 따르면, 상기 플렉서블 디스플레이 장치에서 디스플레이 하는 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.
도 1은 일 실시예에 따른 플렉서블 디스플레이 장치의 디스플레이 방법을 설명하기 위한 개요도이다.
도 2는 일 실시예에 따른 플렉서블 디스플레이 장치의 하드웨어 구성을 도시한 블록도이다.
도 3은 일 실시예에 따라 플렉서블 디스플레이 장치의 하드웨어 구성을 상세하게 도시한 블록도이다.
도 4는 일 실시예에 따라 센싱부에서 플렉서블 디스플레이 장치의 변형 상태를 감지하는 방법을 설명하는 도면이다.
도 5는 플렉스 센서의 센싱 포인트에서 변형 곡률을 획득하는 일례이다.
도 6은 일 실시예에 따라 센싱부에서 사용자의 시선 정보를 획득하는 방법을 설명하는 도면이다.
도 7은 일 실시예에 따라 제어부에서 사용자의 응시점을 추출하는 방법을 설명하기 위한 도면이다.
도 8a 및 도 80b는 사용자의 시선 방향을 나타내는 일례이다.
도 9a 및 도 9b는 일 실시예에 따라 활성화 영역을 결정하는 방법을 설명하기 위한 도면이다.
도 10은 일 실시예에 따라 플렉서블 디스플레이 장치가 콘텐츠를 표시할 활성화 영역을 결정하는 방법을 설명하기 위한 흐름도이다.
도 11은 일 실시예에 따라 제어부에서 영상 왜곡을 보상하는 방법을 설명하는 흐름도이다.
도 12는 활성화 영역에 대응되는 픽셀들의 일례이다.
도 13은 활성화 영역에 대응되는 픽셀들을 조정하는 일례이다.
도 14는 일 실시예에 따라 제어부에서 플렉서블 디스플레이 장치의 변형 상태에 따라, 콘텐츠가 왜곡되어 디스플레이되는 것을 조정하는 방법을 설명하는 흐름도이다.
도 15a 내지 도 15c는 제어부에서 플렉서블 디스플레이 장치의 변형 상태에 따라 콘텐츠가 왜곡되어 디스플레이되는 것을 조정하는 일례이다.
도 16은 일 실시예에 따라 제어부에서 활성화 영역을 동적으로 변경하는 방법을 설명하는 흐름도이다.
도 17은 제어부에서 활성화 영역을 동적으로 변경하는 일례이다.
도 18은 제어부에서 콘텐츠가 디스플레이되도록 제어하는 방법을 설명하는 흐름도이다.
도 19는 제어부에서 활성화 영역에 표시될 콘텐츠에 포함되는 객체의 외형을 제어하는 일례이다.
도 20은 제어부에서 콘텐츠에 포함되는 복수의 객체들의 개수를 제어하는 일례이다.
도 21은 일 실시예에 따라 제어부가 플렉서블 디스플레이 장치의 사용자 입력을 비활성화 또는 활성화시키는 방법을 설명하기 위한 흐름도이다.
도 22는 일 실시예에 따라 플렉서블 디스플레이 장치가 알림 메시지를 디스플레이하는 방법을 설명하기 위한 흐름도이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
명세서 전체에서 ‘콘텐츠’는 유무선 통신망을 통해 제공되는 디지털 정보를 의미한다. 일 실시예에 따른 콘텐츠는, 동영상 콘텐츠, 정지 영상 콘텐트(예컨대, 사진, 그림 등), 텍스트 콘텐츠(예컨대, 신문 기사, 편지, 웹 페이지 등), 음악 콘텐츠(예컨대, 음악, 연주곡, 라디오 방송 등) 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
도 1은 일 실시예에 따른 플렉서블 디스플레이 장치의 디스플레이 방법을 설명하기 위한 개요도이다.
도 1을 참조하면, 플렉서블 디스플레이 장치(10)는 다양한 목적의 장치들로 구현될 수 있다. 예를 들어, 일 실시예에 따른 플렉서블 디스플레이 장치(10)는 휴대폰, 스마트폰(smart phone), 노트북 컴퓨터(laptop computer), 태블릿(tablet) 장치, 전자북 장치, 스마트 TV, 디지털방송용 장치, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 차량용 헤드업(head-up) 디스플레이 장치, 광고 디스플레이 장치 등으로 구현될 수 있다. 또한, 본 명세서에서 기술되는 플렉서블 디스플레이 장치(10)는 사용자에 의해 착용될 수 있는 장치(wearable device)일 수도 있다. 예를 들어, 일 실시예에 따른 플렉서블 디스플레이 장치(10)는 손목 시계, 반지, 팔찌, 발지 등일 수 있다.
플렉서블 디스플레이 장치(10)는 플렉서블 디스플레이(11)를 채용한다. 플렉서블 디스플레이(11)는 특정 각도(angle) 또는 특정 곡률(curvature)로 접히거나 펴질 수 있는 폴더블(foldable) 디스플레이, 특정 곡률로 구부러지거나 펴질 수 있는 벤더블(bendable) 디스플레이, 원통형으로 말릴 수 있는 롤러블(rollable) 디스플레이 등과 같이, 외력에 의해 디스플레이의 형태가 변경될 수 있는 다양한 종류들을 포함할 수 있다.
플렉서블 디스플레이(11)는 LCD(liquid crystal display), LED(light emitting diode) 디스플레이 등과 같이 기존의 디스플레이와 마찬가지로, 플렉서블 디스플레이 장치(10) 내에서 생성된 콘텐츠를 제공할 수 있다. 즉, 플렉서블 디스플레이(11)는 노티피케이션(notification) 메시지, 알람(alarm) 메시지, 응용 프로그램의 실행 화면 등을 디스플레이할 수 있다.
한편, 도 1에서와 같이, 플렉서블 디스플레이 장치(10)가 사용자의 팔목에 착용 가능한 밴드 형태로 구현되는 경우, 사용자는 플렉서블 디스플레이 장치(10)를 착용한 상태에서 플렉서블 디스플레이(11)의 일면만 볼 수 있다. 따라서, 플렉서블 디스플레이부(11)의 전체에서 콘텐츠를 디스플레이하는 것은, 사용자의 가독성을 해칠 뿐만 아니라 전력 낭비일 수 있다.
따라서, 일 실시예에 따라 플렉서블 디스플레이 장치(10)는 플렉서블 디스플레이(11)에 일정 간격을 두고 배치된 시선 감지 센서들을 통해, 사용자의 시선 정보를 획득할 수 있다. 시선 감지 센서는, 예를 들어, 사용자의 동공을 인식할 수 있는 카메라, 적외선 LED, 적외선 카메라 등을 포함할 수 있다. 또한, 시선 정보는, 사용자의 동공 인식 정보, 시선 방향에 대한 정보 등을 포함할 수 있다.
일 실시예에 따라 플렉서블 디스플레이 장치(10)는 획득된 사용자의 시선 정보 및 플렉서블 디스플레이 장치(10)의 휨 정도에 기초하여, 사용자의 시선이 닿는 플렉서블 디스플레이(11)의 일 영역을 활성화 영역으로 설정하고, 나머지 영역을 비활성화 영역으로 설정할 수 있다. 여기서, 활성화 영역은 콘텐츠가 표시되는 영역일 수 있다. 반대로, 비활성화 영역은 콘텐츠가 표시되지 않은 나머지 영역일 수 있다.
또한, 플렉서블 디스플레이 장치(10)는 사용자로부터 플렉서블 디스플레이(11)까지의 거리 정보를 획득할 수도 있다. 플렉서블 디스플레이 장치(10)는 획득된 거리 정보를 이용하여, 콘텐츠에 포함된 객체들의 배치(arrangement), 객체들의 외형(appearance) 및 객체들의 개수 중 적어도 하나를 제어할 수 있다. 따라서, 플렉서블 디스플레이 장치(10)로부터 원거리에 위치하는 사용자와 근거리에 위치하는 사용자는 서로 다른 정보를 제공받을 수 있다.
이와 같이, 일 실시예에 따른 플렉서블 디스플레이 장치(10)는 전력 소모를 최소화하면서, 사용자에게 콘텐츠를 효율적으로 제공할 수 있다.
도 2는 일 실시예에 따른 플렉서블 디스플레이 장치의 하드웨어 구성을 도시한 블록도이다.
도 2를 참조하면, 플렉서블 디스플레이 장치(10)는 플렉서블 디스플레이부(110), 센싱부(120) 및 제어부(130)를 포함할 수 있다. 도 2에서는 일 실시예에 관련된 하드웨어 구성요소(hardware component)들만을 기술하기로 한다. 다만, 도 2에 도시된 하드웨어 구성요소들 외에 다른 범용적인 하드웨어 구성요소들이 포함될 수 있음은 당해 기술분야에서 통상의 기술자라면 이해할 수 있다.
플렉서블 디스플레이부(110)는 플렉서블 디스플레이 장치(10) 내에서 처리되는 정보를 표시하는 하드웨어 구성이다. 플렉서블 디스플레이 장치(10)는 플렉서블 디스플레이부(110)를 통해 사용자에게 콘텐츠를 제공할 수 있다. 또한, 플렉서블 디스플레이 장치(10)는 플렉서블 디스플레이부(110)를 통해 사용자에게 GUI(graphic user interface) 화면을 제공할 수도 있다.
한편, 일 실시예에 따른 플렉서블 디스플레이부(110)는, 앞서 설명된 바와 같이 외력에 의해 변형이 가능한 다양한 종류의 디스플레이일 수 있으며, 예를 들어, 폴더블 디스플레이, 벤더블 디스플레이, 롤러블 디스플레이 등을 포함할 수 있다.
일 실시예에 따라 센싱부(120)는 플렉서블 디스플레이 장치(10) 또는 플렉서블 디스플레이부(110)의 변형(deform) 상태를 감지할 수 있다. 이때, 변형 상태는 접힘(folding), 휨(bending) 등과 같이, 플렉서블 디스플레이 장치(10)의 외적 형태가 달라진 상태를 의미할 수 있다. 센싱부(120)는 플렉서블 디스플레이 장치(10) 또는 플렉서블 디스플레이부(110)의 변형 상태를 감지하기 위한, 복수의 변형 상태 감지 센서를 포함할 수 있다. 변형 상태 감지 센서는, 예를 들어, 휨 정도에 따라 달라지는 저항 값으로 변형 상태를 감지하는 플렉스 센서(flex sensor, 또는 벤딩 센서)일 수 있다.
센싱부(120)는 플렉서블 디스플레이 장치(10) 또는 플렉서블 디스플레이부(110)의 변형 상태에서의 곡률(curvature)(이하에서는, 변형 상태에서의 곡률을 “변형 곡률”이라 한다.)을 감지할 수 있다. 또는, 센싱부(120)는 플렉서블 디스플레이의 종류에 따라, 플렉서블 디스플레이 장치(10) 또는 플렉서블 디스플레이부(110)의 변형 상태에서의 접힘 각도 또는 말림(rolling) 정도를 감지할 수도 있다. 이와 같이, 센싱부(120)는 플렉서블 디스플레이의 종류에 대응되는 다양한 변형 상태를 감지할 수 있다.
일 실시예에 따라 센싱부(120)는 변형 상태와 관련하여, 변형 위치(좌표 값, 변형 라인), 변형 방향, 변형 각도, 변형 곡률, 변형 세기, 변형 횟수 등에 관한 정보를 획득할 수 있다.
한편, 실시예에 따라서 변형 상태 감지 센서는, 플렉서블 디스플레이부(110)와 일체형으로 구현될 수도 있음은 당해 기술분야에서 통상의 기술자라면 이해할 수 있을 것이다.
일 실시예에 따라 센싱부(120)는 플렉서블 디스플레이 장치(10)의 사용자의 시선 정보를 획득할 수 있다. 이때, 시선 정보는, 사용자의 동공 인식 정보, 시선 방향에 대한 정보 등을 포함할 수 있다. 센싱부(120)는 플렉서블 디스플레이 장치(10)의 전면 부 또는 측면 부에 소정 간격을 두고 배치되는 복수의 시선 감지 센서를 포함할 수 있다. 시선 감지 센서는, 예를 들어, 카메라, 적외선 LED(IR LED), 적외선 카메라 등을 포함할 수 있다. 센싱부(120)는 복수의 시선 감지 센서 중에서 적어도 하나를 통해 사용자의 동공이 감지되면, 사용자의 동공을 추적할 수 있다. 또한, 센싱부(120)는 사용자의 동공이 감지된 시선 감지 센서로부터, 사용자의 시선에 대한 방향 정보를 획득할 수 있다. 또한, 센싱부(120)는 사용자의 동공에서부터 디스플레이부(110)까지의 거리 정보를 획득할 수 있다.
일 실시예에 따라 센싱부(120)는, 통신부(도 3의 330)로부터 알림 메시지가 수신되면, 비활성화 상태였던 변형 상태 감지 센서 및 시선 감지 센서를 활성화 시킴으로써, 변형 상태 및 사용자의 시선 정보를 획득할 수도 있다. 또는, 센싱부(120)는 일정 시간 간격으로 변형 상태 감지 센서 및 시선 감지 센서를 활성화시킴으로써, 변형 상태 및 사용자의 시선 정보에 대한 정보를 획득할 수도 있다.
또한, 센싱부(120)는 획득된 다양한 정보들을 제어부(130)에게 제공할 수 있다.
일 실시예에 따라 제어부(130)는 센싱부(120)로부터 제공된 플렉서블 디스플레이 장치(10)(또는 플렉서블 디스플레이부(110))의 변형 상태에 대한 정보 및 사용자의 시선 정보에 기초하여, 활성화 영역을 결정할 수 있다.
일 실시예에 따라 제어부(130)는 사용자의 시선 정보에 기초하여, 플렉서블 디스플레이부(110) 상에서의 사용자의 응시점(gazing point)을 추출할 수 있다. 제어부(130)는 추출된 응시점을 중심으로, 콘텐츠를 디스플레이할 활성화 영역을 결정할 수 있다.
일 실시예에 따라 제어부(130)는 센싱부(120)로부터 제공된 플렉서블 디스플레이 장치(10)의 변형 상태에 대한 정보에 기초하여, 활성화 영역 내에 임계값 이상의 변형 곡률을 포함하는지 여부를 판단할 수 있다. 만약, 활성화 영역 내에 임계값 이상의 곡률이 존재하는 경우, 제어부(130)는 응시점을 중심으로 변형 위치, 변형 방향 등을 고려하여, 활성화 영역을 임계값 이상의 곡률을 포함하지 않는 영역으로 축소시킬 수 있다.
또는, 제어부(130)는 사용자로부터 플렉서블 디스플레이 장치(10)까지의 거리 정보 및 플렉서블 디스플레이 장치(10)의 변형 상태에 대한 정보에 기초하여, 사용자의 시야각(viewing angle)을 결정할 수 있다. 시야각은, 사용자가 고개나 동공을 움직이지 않고 사물을 인식할 수 있는 각도 또는 범위를 의미할 수 있다. 제어부(130)는 결정된 활성화 영역이 사용자의 시야각을 벗어나는 영역을 포함하는 경우, 활성화 영역의 크기를 사용자의 시야각 내로 축소할 수도 있다.
일 실시예에 따라 제어부(130)는 활성화 영역에서, 콘텐츠가 디스플레이되도록 플렉서블 디스플레이부(110)를 제어할 수 있다. 콘텐츠는, 예를 들어, 노티피케이션 메시지, 알림 메시지, 응용 프로그램의 실행 화면 등을 포함할 수 있다.
또한, 일 실시예에 따라 제어부(130)는 활성화 영역 내의 변형 곡률에 의해 발생되는 디스플레이 왜곡을 보상하기 위하여, 픽셀들의 배치를 조정할 수 있다. 예를 들어, 제어부(130)는 콘텐츠의 픽셀들이 플렉서블 디스플레이부(110)의 픽셀들로 할당되는 비율을 조정할 수 있다.
또한, 제어부(130)는 사용자로부터 플렉서블 디스플레이 장치(10)까지의 거리 정보에 대응되는 시각적 효과의 변화 요소를 결정할 수 있다. 여기서, 시각적 효과의 변화 요소는, 예를 들어, 콘텐츠에 포함될 적어도 하나의 객체의 배치(arrangement), 외형(appearance) 또는 개수 등을 의미할 수 있다. 따라서, 제어부(130)는 사용자로부터 플렉서블 디스플레이 장치(10)까지의 거리가 달라짐에 따라, 객체들의 배치, 외형 및 개수 중 적어도 하나를 달리하는 콘텐츠를 생성할 수 있다.
일 실시예에 따라 제어부(130)는 센싱부(120)로부터 동적으로 변화하는 플렉서블 디스플레이 장치(10)에 대한 정보 및/또는 동적으로 변화하는 사용자의 시선 정보를 제공받을 수도 있다. 이 경우, 제어부(130)는 센싱부(120)로부터 제공되는 정보에 기초하여, 활성화 영역을 동적으로 변경할 수 있다.
한편, 제어부(130)는 CPU(central processing unit), AP(application processor) 등과 같은 적어도 하나의 프로세서로 구현된 하드웨어 구성으로서, 앞서 설명한 동작 외에도, 플렉서블 디스플레이 장치(10)의 전반적인 동작을 제어하는 기능을 수행할 수 있다.
도 3은 일 실시예에 따라 플렉서블 디스플레이 장치의 하드웨어 구성을 상세하게 도시한 블록도이다.
도 3을 참조하면, 플렉서블 디스플레이 장치(100)는 사용자 입력부(310), 출력부(320), 통신부(330), 센싱부(340), 메모리(350) 및 제어부(360)를 포함할 수 있다.
사용자 입력부(310)는 터치 인식 모듈(311), 모션 인식 모듈(312), 키 인식 모듈(313) 및 음성 인식 모듈(314)을 포함할 수 있고, 출력부(320)는 플렉서블 디스플레이부(321), 음향 출력 모듈(322) 및 알람부(323)를 포함할 수 있고, 통신부(330)는 근거리 통신 모듈(331), 무선 인터넷 모듈(332), 이동 통신 모듈(333) 및 유선 인터넷 모듈(334)를 포함할 수 있다. 도 3에서는 본 실시예의 특징이 흐려지는 것을 방지하기 위하여 본 실시예에 관련된 하드웨어 구성요소들만을 기술하기로 한다. 다만, 플렉서블 디스플레이 장치(10)의 종류에 따라, 도 3에 도시된 하드웨어 구성요소들 외에 다른 범용적인 하드웨어 구성요소들이 더 포함될 수 있거나 또는 도 3에 도시된 일부 하드웨어 구성요소들이 생략될 수 있음을 당해 기술분야에서 통상의 기술자라면 이해할 수 있다. 한편, 도 2의 플렉서블 디스플레이 장치(10)에는 도 3 등의 플렉서블 디스플레이 장치(10)에 관한 설명이 적용될 수 있다.
사용자 입력부(310)는, 사용자가 플렉서블 디스플레이 장치(10)의 제어를 위한 정보를 입력하는 하드웨어 구성을 의미할 수 있다. 예를 들어, 사용자 입력부(310)는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드, 조그 휠, 조그 스위치 등으로 구현될 수 있다.
터치 인식 모듈(311)은, 사용자의 터치 제스처 또는 터치 입력을 감지하고, 감지된 터치 제스처 또는 터치 입력에 관한 정보를 제어부(360)로 전달할 수 있다.
터치 인식 모듈(311)은, 터치 또는 근접 터치를 감지하기 위한 다양한 센서를 포함할 수 있다. 터치 인식 모듈(311)에서 터치 제스처 또는 터치 입력을 감지하기 위하여, 접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식 또는 피에조 효과 방식 등의 센서로 구현될 수 있다.
또한, 터치 인식 모듈(311)은, 근접 센서를 이용하여 근접 터치를 감지할 수도 있다. 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉 없이 감지하는 센서를 말한다. 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다.
한편, 사용자의 터치 제스처 또는 터치 입력에는 탭, 터치 앤드 홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭 등이 포함될 수 있다.
또한, 터치 인식 모듈(311)은, 플렉서블 디스플레이부(321)와 복수의 레이어 구조를 이루어 터치 스크린으로 구현될 수 있다. 즉, 앞서 도 2에서 설명된 플렉서블 디스플레이부(110)는 도 3의 터치 인식 모듈(311)과 플렉서블 디스플레이부(321)를 포함하는 터치 스크린의 하드웨어 구조로 구현될 수 있다.
모션 인식 모듈(312)은, 플렉서블 디스플레이 장치(10)의 움직임을 인식하고, 플렉서블 디스플레이 장치(10)의 움직임에 관한 정보를 제어부(360)로 전달할 수 있다. 모션 인식 모듈(312)은, 플렉서블 디스플레이 장치(10)의 변형이 아닌, 플렉서블 디스플레이 장치(10)의 3차원적인 이동 또는 회전 등의 움직임을 인식할 수 있다.
모션 인식 모듈(312)은 플렉서블 디스플레이 장치(10)의 움직임을 인식하기 위한 다양한 센서를 포함할 수 있다. 예를 들어, 모션 인식 모듈(312)은 가속도 센서(acceleration sensor), 기울기 센서(tilt sensor), 자이로 센서(gyro sensor), 자기장 센서(3-axis magnetic sensor) 등을 포함할 수 있다.
모션 인식 모듈(312)에 의해 인식될 수 있는 모션 입력에는 X 축, Y 축, Z 축 방향으로 플렉서블 디스플레이 장치(10)가 이동되는 3차원 모션 입력, 3차원 공간 상의 적어도 하나의 방향으로 플렉서블 디스플레이 장치(10)가 회전되는 회전 모션 입력, 플렉서블 디스플레이 장치(10)가 적어도 하나의 방향으로 흔들리는 쉐이킹 모션 입력, 플렉서블 디스플레이 장치(10)가 소정 방향으로 기울어지는 기울임 모션 입력 등이 있을 수 있다.
키 인식 모듈(313)은, 하드웨어 키(예컨대, 방향 키, 글자 키, 마우스 등)를 통해 입력되는 사용자의 명령을 인식할 수 있다. 음성 인식 모듈(314)은 음성 인식 엔진을 이용하여 사용자의 음성을 인식하고, 인식된 음성을 제어부(360)로 전달할 수 있다.
출력부(320)는 오디오 신호, 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 하드웨어 구성이다.
플렉서블 디스플레이부(321)는, 플렉서블 디스플레이 장치(100)에서 처리되는 정보 또는 처리될 정보 등의 각종 정보들을 사용자에게 제공하기 위한, 디스플레이 수단이다. 플렉서블 디스플레이부(321)는 플렉서블 디스플레이 장치(100)에서 처리되는 정보들을 사용자에게 시각적이고 직관적으로 제공하기 위한 GUI(Graphical User Interface)를 디스플레이 할 수도 있다.
음향 출력 모듈(322)은, 통신부(330)를 통해 수신되거나 메모리(350)에 저장된 오디오 데이터를 출력한다. 이러한 음향 출력 모듈(322)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알람부(323)는, 플렉서블 디스플레이부(321)의 이벤트 발생을 알리기 위한 신호를 출력한다. 알람부(323)는, 오디오 신호, 비디오 신호, 진동 신호 중 적어도 하나의 방식으로 이벤트 발생을 알리기 위한 신호를 출력할 수 있다.
통신부(330)는, 외부 네트워크 또는 외부의 디바이스와 통신할 수 있는 기능을 갖는 하드웨어 구성이다.
일 실시예에 따라 통신부(330)는 외부 네트워크 또는 외부의 디바이스로부터 SMS(short message service) 메시지, MMS(multimedia message service) 메시지, SNS(social network service) 메시지, 통화 알림 등의 알림 메시지를 수신할 수 있다.
근거리 통신 모듈(331)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스(Bluetooth), UWB(Ultra Wideband), 지그비(ZigBee), NFC(Near Field Communication), WFD(Wi-Fi Direct), 적외선 통신(IrDA, infrared Data Association) 등이 이용될 수 있다.
무선 인터넷 모듈(332)은 무선 인터넷 접속을 위한 모듈이다. 이동 통신 모듈(333)은, 이동 통신 네트워크와 통신하기 위한 모듈이다. 유선 인터넷 모듈(134)는 유선 인터넷 접속을 위한 모듈이다.
일 실시예에 따라 센싱부(340)는 플렉서블 디스플레이 장치(100)(또는 플렉서블 디스플레이부(321))의 변형 상태에 대한 정보를 획득하는 변형 상태 감지 센서 및 사용자의 시선 정보를 획득하는 시선 감지 센서를 포함할 수 있다. 한편, 센싱부(340)는 도 2의 센싱부(120)에 대응될 수 있다.
일 실시예에 따라 변형 상태 감지 센서(미도시)는 복수의 플렉스 센서(또는 벤딩 센서), 적외선 센서, 압력 센서, 전자기 센서 등일 수 있다. 변형 상태 감지 센서는, 적어도 하나의 센서를 이용하여 변형 상태에 관한 정보를 수집 및 분석함으로써, 플렉서블 디스플레이 장치(100)의 변형 상태를 획득할 수 있다. 여기서, 변형 상태는, 앞서 설명된 바와 같이, 접힘 상태, 휨 상태, 롤링 상태 등을 포함할 수 있다. 센싱부(340)는 변형 상태와 관련하여, 변형 위치(좌표 값, 변형 라인), 변형 방향, 변형 각도, 변형 곡률, 변형 세기, 변형 속도, 변형 횟수, 변형 동작 발생 시점, 변형 동작 유지 시간 등에 관한 정보를 획득할 수 있다.
또한, 시선 감지 센서(미도시)는 복수의 카메라, 적외선 카메라, 또는 적외선 LED 등일 수 있다. 시선 감지 센서는, 적어도 하나의 센서를 이용하여 사용자의 동공을 감지하고, 동공의 모양을 분석함으로써, 사용자의 시선 방향에 대한 정보를 획득할 수 있다. 또한, 시선 감지 센서는, 사용자의 동공을 추적함으로써, 사용자의 시선 정보가 변경됨을 감지할 수 있다.
메모리(350)는 플렉서블 디스플레이 장치(100)에서 처리된 정보들을 저장하는 하드웨어 구성으로서, HDD(hard-disk drive), SDD(solid state drive), RAM(random access memory), ROM(read only memory) 등으로 구현될 수 있다. 예를 들어, 메모리(350)는 플렉서블 디스플레이부(110)를 통해 표시될 그래픽 유저 인터페이스 화면에 관한 전반적인 정보들을 저장할 수 있다.
제어부(360)는 플렉서블 디스플레이 장치(100)의 전반적인 동작 및 기능들을 제어하는 하드웨어 구성으로서, CPU, AP, GPU 등과 같은 적어도 하나의 프로세서로 구현될 수 있다. 앞서 설명된 도 2의 제어부(130)는 제어부(360)에 해당될 수 있다.
도 4는 일 실시예에 따라 센싱부에서 플렉서블 디스플레이 장치(10)의 변형 상태를 감지하는 방법을 설명하는 도면이다.
도 4를 참조하면, 플렉서블 디스플레이부(110)는 자유로운 형태로 구부러질 수 있는 것으로 가정한다. 일 실시예에 따라 플렉서블 디스플레이부(110)는 복수의 플렉스 센서(421 내지 427)와 결합된 형태로 구현될 수 있다. 각 플렉스 센서는 측정되는 저항 값이 달라지는지 여부에 따라, 플렉서블 디스플이부(110)가 변형되었는지 여부를 검출할 수 있다. 또한, 각 플렉스 센서는 소정 간격을 두고 배치된 복수의 센싱 포인트(sensing point, 440)를 포함할 수 있다. 센싱부(120)는 각 센싱 포인트(440)에서 수집되는 수치 변화를 분석하여, 변형 곡률을 획득할 수 있다.
한편, 도 4에서는 플렉서블 디스플레이 장치(10)가 네 개의 플렉스 센서를 포함하는 것으로 설명하였으나, 이에 제한되지 않는다. 플렉서블 디스플레이 장치(10)의 구현 방법에 따라, 플렉서블 디스플레이 장치(10)는 다양한 개수의 플렉스 센서를 포함할 수 있다.
또한, 플렉서블 디스플레이 장치(10)의 구현 형태에 따라, 플렉스 센서가 아닌 다른 센서, 예를 들어, 적외선 센서, 압력 센서, 전자기 센서 등을 통해 플렉서블 디스플레이 장치(10)의 접힘 각도 또는 말림 정도 등을 획득할 수 있음을 당해 기술분야에서의 통상의 기술자라면 이해할 수 있다.
도 5는 플렉스 센서의 센싱 포인트에서 변형 곡률을 획득하는 일례이다.
도 5를 참조하면, 플렉스 센서는 각 센싱 포인트(sensing point, 440)에서의 변형 곡률(휨 곡률, Θ)을 감지할 수 있다. 변형 곡률(Θ)은, 플렉스 센서가 변형되지 않은 상태에서 플렉스 센서를 수직하는 선(510)과, 플렉스 센서가 변형된 후 플렉스 센서를 수직하는 선(511 내지 514) 간의 각도 차이일 수 있다.
예를 들어, 플렉스 센서는 +180 도에서부터 -180 도까지의 변형 곡률(Θ)을 감지할 수 있다. 한편, 센싱부(120)는 감지된 변형 곡률을 제어부(130)에게 제공할 수 있다.
도 6a 내지 6c는 일 실시예에 따라 센싱부에서 사용자의 시선 정보를 획득하는 방법을 설명하는 도면이다.
도 6a을 참조하면, 센싱부(120)는 소정 범위(620) 내에서 사용자의 동공을 감지하기 위해, 플렉서블 디스플레이 장치(10)의 전면(또는 측면)에 소정 간격을 두고 배치된 제 1 내지 제 4 시선 감지 센서(611 내지 617)를 포함할 수 있다. 제 1 내지 제 4 시선 감지 센서(611 내지 617)는 예를 들어, 카메라, 적외선 카메라, 또는 적외선 LED 등일 수 있다.
일 실시예에 따라 시선 감지 센서는 영상을 촬영한 후, 촬영된 영상으로부터 원형 객체를 검출함으로써 사용자의 동공을 인식할 수 있다. 또한, 시선 감지 센서는 인식된 동공을 추적함으로써, 사용자의 시선에 대한 방향 정보를 획득할 수 있다.
또는, 시선 감지 센서는 적외선을 방출한 후, 사용자의 동공에서 반사되는 적외선을 감지함으로써 사용자의 동공을 인식할 수도 있다. 또한, 시선 감지 센서는 반사되어 돌아오는 적외선의 방향을 분석함으로써 사용자의 시선 방향에 대한 정보를 획득할 수도 있다. 또는, 시선 감지 센서는 동공이 감지되면, 영상 촬영을 개시함으로써, 사용자의 동공을 추적하고, 사용자의 시선에 대한 방향 정보를 획득할 수 있다.
일 실시예에 따른 플렉서블 디스플레이 장치(10)는, 외력에 의해 형태가 변형된 경우라도, 센싱부(120)는 소정 간격을 두고 배치된 제 1 내지 제 4 시선 감지 센서(611 내지 617)를 이용하여 사용자의 동공을 감지할 수 있다.
예를 들어, 도 6b에 도시된 바와 같이 플렉서블 디스플레이 장치(10)가 원통 형태로 변형된 경우, 센싱부(120)는 복수의 시선 감지 센서들을 이용하여 다양한 각도에서 플렉서블 디스플레이 장치(10)를 바라보는 사용자의 동공을 감지할 수 있다.
또는, 도 6c에 도시된 바와 같이 플렉서블 디스플레이 장치(10)가 임의 형태로 변형된 경우라도, 센싱부(120)는 제 1 내지 제 4 시선 감지 센서(611 내지 617)를 이용하여, 플렉서블 디스플레이 장치(10)를 바라보는 사용자의 동공을 감지할 수 있다.
한편, 일 실시예에 따라 플렉서블 디스플레이 장치(10)는 사용자의 동공이 감지된 특정 시선 감지 센서를 제외한 나머지 시선 감지 센서를 비활성화 상태(또는 턴-오프(turn-off))로 전환할 수 있다.
예를 들어, 도 6b에 도시된 바와 같이, 제 2 시선 감지 센서(613)에서 사용자의 동공(630)이 감지되면, 플렉서블 디스플레이 장치(10)는 나머지 시선 감지 센서들(611, 615 및 617)을 비활성화 시킬 수 있다. 이후, 센싱부(120)는 활성화 상태인 제 2 시선 감지 센서(613)를 통해 사용자의 동공을 추적할 수 있다. 만약, 사용자의 동공(630)이 제 2 시선 감지 센서(613)를 벗어나면, 플렉서블 디스플레이 장치(10)는 사용자의 동공(630)의 이동 방향에 따라, 제 1 시선 감지 센서(611) 또는 제 3 시선 감지 센서(615)를 활성화(또는 턴-온(turn-on)) 상태로 전환시킴으로써 사용자의 동공(630)을 계속 추적할 수 있다.
또는, 도 6c에 도시된 바와 같이, 제 1, 제 2 및 제 4 시선 감지 센서(611, 613 및 617)가 함께 사용자의 동공(640)을 감지하면, 플렉서블 디스플레이 장치(10)는 감지된 사용자의 동공(640)을 추적하기 위한 하나의 시선 감지 센서를 선택할 수 있다. 플렉서블 디스플레이 장치(10)는, 예를 들어, 제 1, 제 2 및 제 4 시선 감지 센서(611, 613 및 617) 중에서 사용자의 동공(640)과 가장 거리가 짧은 제 2 시선 감지 센서(613)를 선택할 수 있다. 플렉서블 디스플레이 장치(10)는 선택된 제 2 시선 감지 센서(613)를 제외한 나머지 시선 감지 센서들을 비활성화 상태로 전환할 수 있다.
한편, 도 6a 내지 도 6c에서는, 센싱부(120)가 네 개의 시선 감지 센서들을 포함하는 것으로 설명하였으나, 이에 제한되지 않는다. 플렉서블 디스플레이 장치(10)의 구현 형태 및 구현 목적에 따라, 센싱부(120)가 다양한 개수의 시선 감지 센서를 포함할 수 있음을 당해 기술분야에서의 통상의 기술자라면 이해할 수 있다.
도 7은 일 실시예에 따라 제어부에서 사용자의 응시점을 추출하는 방법을 설명하기 위한 도면이다.
도 7을 참조하면, 제어부(130)는 센싱부(120)로부터 제공된 사용자의 시선 정보에 기초하여, 응시점을 추출할 수 있다. 여기서, 응시점(710)은 사용자가 눈길을 모아 바라보는, 플렉서블 디스플레이부(110) 상에서의 일정 영역일 수 있다.
일 실시예에 따라 제어부(130)는 사용자의 시선 방향에 대한 정보를 이용하여, 응시점(710)을 추출할 수 있다. 이때, 사용자의 시선 방향에 대한 정보는, 사용자의 동공(720)을 지나 플렉서블 디스플레이부(110)와 수직하는 직선(즉, 수선)을 기준으로, -180도에서부터 +180도까지로 표현될 수 있다. 예를 들어, 도 8a 에서의 사용자의 시선 방향(813)에 대한 정보는 수선(811)의 방향과 동일하므로 “+0도”이며, 도 8b에서의 사용자의 시선 방향(815)에 대한 정보는 “-20도”이다. 제어부(130)는 사용자의 시선 방향에 대한 정보에 기초하여, 사용자의 응시점을 추출할 수 있다.
도 9a 및 도 9b는 일 실시예에 따라 활성화 영역을 결정하는 방법을 설명하기 위한 도면이다.
도 9a 및 도 9b를 참조하면, 제어부(130)는 센싱부(120)로부터 제공된 플렉서블 디스플레이 장치(10)의 변형 상태에 대한 정보에 기초하여, 응시점을 기준으로 활성화 영역(빗금 영역)을 결정할 수 있다.
일 실시예에 따라 제어부(130)는 응시점(910)을 기준으로 상하좌우로 기 결정된 수치만큼 떨어진 위치까지를 활성화 영역으로 결정할 수 있다. 이때, 제어부(130)는 활성화 영역(920) 내에 임계 곡률(예컨대, 30도) 이상의 변형 곡률이 존재하는지 판단하여, 활성화 영역(920)을 조정할 수 있다. 예를 들어, 도 9a에 도시된 바와 같이 활성화 영역(920) 내에 임계 곡률 이상의 변형 곡률이 존재하면, 제어부(130)는, 변형 위치, 변형 방향 및 변형 세기 등을 고려하여, 활성화 영역(920)에서 변형 곡률이 존재하는 영역(930)을 제외하도록 조정할 수 있다.
또는, 제어부(130)는 활성화 영역(920)이 일정한 곡률로 휘어져 있는 경우, 활성화 영역(920) 내의 최대 변형 곡률에 따라, 활성화 영역(920)을 조정할 수도 있다. 예를 들어, 도 9b에 도시된 바와 같이, 제어부(130)는 활성화 영역(920) 내의 최대 변형 곡률이 “10도” 이상인 경우, 활성화 영역(920)을 응시점(940)을 중심으로 축소시킬 수 있다 (축소된 활성화 영역은 굵은 빗금으로 도시됨).
또는, 제어부(130)는 사용자의 시야각(viewing angle)에 기초하여, 활성화 영역(920)을 조정할 수도 있다.
도 10은 일 실시예에 따라 플렉서블 디스플레이 장치가 콘텐츠를 표시할 활성화 영역을 결정하는 방법을 설명하기 위한 흐름도이다.
도 10을 참조하면, 단계 S1010에서, 센싱부(120)는 사용자의 시선 정보를 획득할 수 있다. 여기서, 시선 정보는, 사용자의 동공 인식 정보, 시선 방향에 대한 정보 등을 포함할 수 있다. 센싱부(120)는 사용자의 동공에서부터 디스플레이부(110)까지의 거리 정보를 획득할 수 있다.
또한, 센싱부(120)는 플렉서블 디스플레이 장치(10) 또는 플렉서블 디스플레이부(110)의 변형 상태에서의 곡률(curvature)을 감지할 수 있다. 또는, 센싱부(120)는 플렉서블 디스플레이의 종류에 따라, 플렉서블 디스플레이 장치(10) 또는 플렉서블 디스플레이부(110)의 접힘 정도 또는 말림(rolling) 정도를 감지할 수도 있다.
일 실시예에 따라 센싱부(120)는 변형 상태와 관련하여, 변형 위치(좌표 값, 변형 라인), 변형 방향, 변형 각도, 변형 곡률, 변형 세기, 변형 횟수 등에 관한 정보를 획득할 수 있다.
단계 S1020에서, 제어부(130)는 사용자의 시선 정보 및 플렉서블 디스플레이 장치(10)의 변형 상태에 대한 정보에 기초하여, 플렉서블 디스플레이 장치의 화면 상에서, 활성화 영역을 결정할 수 있다.
일 실시예에 따라 제어부(130)는 사용자의 시선 방향에 대한 정보에 기초하여, 사용자의 응시점을 추출할 수 있다. 여기서, 응시점은 플렉서블 디스플레이 장치(10)의 화면 상에서, 사용자가 눈길을 모아 바라보는 일정 영역일 수 있다.
일 실시예에 따라 제어부(130)는 응시점을 기준으로 상하좌우로 기 결정된 수치만큼 떨어진 위치까지를 활성화 영역으로 결정할 수 있다.
일 실시예에 따라 제어부(130)는 결정된 활성화 영역 내에 임계 곡률 이상의 변형 곡률이 존재하는지 판단하여, 활성화 영역을 조정할 수 있다. 제어부(130)는 임계값 이상의 곡률이 존재하는 것으로 판단되면, 변형 위치, 변형 방향 및 변형 세기 등을 고려하여, 활성화 영역을 조정할 수 있다. 또는, 제어부(130)는 활성화 영역 내의 최대 변형 곡률에 따라, 활성화 영역을 조정할 수도 있다. 예를 들어, 제어부(130)가 활성화 영역 내의 최대 변형 곡률이 “10도” 이상인 경우, 활성화 영역을 응시점을 기준으로 축소시킬 수 있다. 또는, 제어부(130)는 사용자의 시야각(viewing angle)에 기초하여, 활성화 영역을 조정할 수도 있다.
단계 S1030에서, 제어부(130)는 콘텐츠가 활성화 영역에서 디스플레이되도록 제어할 수 있다. 제어부(130)는 활성화 영역에 대응되는 픽셀들이 활성화(또는 턴-온(turn-on))되도록 플렉서블 디스플레이부(110)를 제어하고, 나머지 영역에 대응되는 픽셀들이 비활성화(또는 턴-오프(turn-off))되도록 제어할 수 있다. 여기서, 픽셀들이 비활성화 된다는 것은, 콘텐츠가 생성될 시에, 블랙, 화이트 등의 컬러를 갖는 여백으로 처리되는 것일 수 있다.
도 11은 일 실시예에 따라 제어부에서 영상 왜곡을 보상하는 방법을 설명하는 흐름도이다.
도 11을 참조하면, 단계 S1110에서, 제어부(130)는 사용자의 시선 정보 및 변형 상태에 대한 정보에 기초하여, 활성화 영역에 대응되는 픽셀들의 배치를 조정할 수 있다.
플렉서블 디스플레이 장치(10)가 변형된 상태에서 콘텐츠가 그대로 디스플레이되면, 콘텐츠는 왜곡되어 디스플레이될 수 있다. 이러한, 디스플레이 왜곡을 보상하기 위하여, 제어부(130)는 플렉서블 디스플레이 장치(10) 또는 플렉서블 디스플레이부(110)의 변형 상태에 기초하여, 활성화 영역에 대응되는 픽셀들의 배치를 조절할 수 있다.
도 12(a) 및 도 12(b)는 플렉서블 디스플레이부의 변형에 따라 픽셀들의 왜곡이 발생되는 일례이다. 도 12의 (a)를 참조하면, 제어부(130)는 일정한 크기의 픽셀들을 포함하는 콘텐츠를 생성하고, 생성된 콘텐츠를 플렉서블 디스플레이부(110)에 디스플레이할 수 있다. 그러나, 도 12의 (b)에서와 같이 플렉서블 디스플레이부(110)가 외력에 의해 변형되면, 변형 위치에 대응되는 콘텐츠의 픽셀들은 플렉서블 디스플레이부(110)의 변형에 의해 왜곡될 수 있다.
도 13은 활성화 영역에 대응되는 픽셀들을 조정하는 일례이다. 도 13을 참조하면, 플렉서블 디스플레이부(110)의 표시 가능한 픽셀 어레이와 콘텐츠의 픽셀 어레이가 동일한 매트릭스 구조라고 가정하면, 콘텐츠의 픽셀들 각각은 플렉서블 디스플레이부(110)의 픽셀들 각각에 1:1로 대응되도록 콘텐츠가 표시될 수 있다. 따라서, 도 12의 (a)에서와 같이, 플렉서블 디스플레이부(110)가 변형되지 않은 경우, 디스플레이 왜곡이 발생되지 않으므로, 제어부(130)는 콘텐츠의 픽셀들을 플렉서블 디스플레이부(110)의 픽셀들에 1:1로 매핑할 수 있다.
하지만, 도 12의 (b)에서와 같이, 플렉서블 디스플레이부(110)가 변형된 상태이면, 제어부(130)는 디스플레이 왜곡을 보상하기 위하여, 콘텐츠의 픽셀들에 대한 플렉서블 디스플레이부(110)의 픽셀들의 할당 비율을 조절할 수 있다.
예를 들어, 도 13의 (a) 및 (c)에서와 같이, 제어부(130)는 플렉서블 디스플레이부(110)가 변형되지 않는 영역에 대응되는 콘텐츠의 픽셀들(1321 및 1341)에 대해서는 플렉서블 디스플레이부(110)의 픽셀들(1323 및 1343)을 1:1로 할당하면서, 도 13의 (b)와 같이, 변형 위치(1310)에 대응되는 콘텐츠의 픽셀들(1331)에 대해서는, 플렉서블 디스플레이부(110)의 더 많은 픽셀들(1333)이 할당되도록, 할당 비율을 조절할 수 있다. 즉, 플렉서블 디스플레이부(110)의 픽셀들에는, 플렉서블 디스플레이부(110)의 변형 위치(1310)에 해당하는 콘텐츠의 일부가 더 확장되어 디스플레이될 수 있다.
반대로, 제어부(130)는 변형 위치(1310)를 제외한 나머지 영역들에 대응되는 콘텐츠의 픽셀들이, 플렉서블 디스플레이부(110)의 더 적은 픽셀들에 할당되도록, 할당 비율을 조절할 수도 있다.
다시 도 11을 참조하면, 단계 S1120에서, 제어부(130)는 영상 왜곡이 보정된 콘텐츠가 활성화 영역에서 디스플레이되도록 제어할 수 있다.
도 14는 일 실시예에 따라 제어부에서 플렉서블 디스플레이 장치의 변형 상태에 따라, 콘텐츠가 왜곡되어 디스플레이되는 것을 조정하는 방법을 설명하는 흐름도이다.
도 14를 참조하면, 단계 S1410에서, 제어부(130)는 센싱부(120)로부터 제공된 플렉서블 디스플레이 장치(10)의 변형 상태에 대한 정보에 기초하여, 활성화 영역 내에서 임계값보다 큰 변형 곡률(또는 변형 각도)이 존재하는 변형 위치를 추출할 수 있다. 이때, 변형 상태에 대한 정보는, 예를 들어, 변형 곡률, 변형 각도, 변형 위치, 변형 세기 등의 정보를 포함할 수 있다.
변형 곡률(또는 변형 각도)이 크면, 사용자는 콘텐츠를 인지하는데 어려움을 느낄 수 있다. 따라서, 단계 S1420에서, 제어부(130)는 추출된 변형 위치에 대응되는 콘텐츠의 형태 또는 활성화 영역의 형태를 조정할 수 있다. 예를 들어, 제어부(130)는 콘텐츠에 포함되는 객체들 중에서 추출된 변형 위치에 대응되는 객체의 형태를 조정할 수 있다. 또는, 제어부(130)는 추출된 변형 위치에 대응되는 활성화 영역의 형태를 조정할 수도 있다.
도 15a 내지 도 15c는 제어부에서 플렉서블 디스플레이 장치의 변형 상태에 따라 콘텐츠가 왜곡되어 디스플레이되는 것을 조정하는 일례이다.
도 15a를 참조하면, 플렉서블 디스플레이 장치(10)는 임의의 형태로 휘어질 수 있다. 따라서, 콘텐츠(1510)가 직선 형태의 객체(1511)를 포함하는 경우라도, 플렉서블 디스플레이 장치(10)의 변형 상태에 의해, 직선 형태의 객체(1511)는 휘어진 곡선 형태로 사용자에게 보여질 수 있다. 따라서, 콘텐츠(1510)에 포함된 직선 형태의 객체(1511)를 사용자에게 그대로 보여주기 위하여, 제어부(130)는 콘텐츠 또는 활성화 영역의 형태를 조정할 수 있다.
예를 들어, 제어부(130)는 활성화 영역(1530) 내에 “45도” 이상의 변형 곡률이 위치하는 제 1 내지 제 4 변형 위치(1501 내지 1507)를 추출할 수 있다. 제어부(130)는, 콘텐츠(1510)에서, 제 1 내지 제 4 변형 위치(1501 내지 1504)에 대응되는 직선 형태의 객체(1511)를, 도 15b에서와 같이, 곡선 형태의 객체(1520)로 조정할 수 있다. 따라서, 플렉서블 디스플레이부(110)에 디스플레이되는 곡선 형태의 객체(1520)는 사용자에게 직선 형태로 보여질 수 있다.
또는, 제어부(130)는, 콘텐츠(1510)에 포함된 객체의 형태를 조정하는 대신, 활성화 영역(1530)의 형태를 조정할 수도 있다. 도 15c에 도시된 바와 같이, 제어부(130)는 활성화 영역(1530)의 형태를 조정함으로써, 직선 형태의 객체(1511)이 그대로 플렉서블 디스플레이부(110) 상에서 직선 형태로 보여지도록 할 수도 있다.
도 16은 일 실시예에 따라 제어부에서 활성화 영역을 동적으로 변경하는 방법을 설명하는 흐름도이다.
도 16을 참조하면, 단계 S1610에서, 센싱부(120)는 사용자의 동공을 추적함으로써 사용자의 동공이 이동하는 것을 감지할 수 있다. 사용자는 플렉서블 디스플레이 장치(10)는 정자세로 사용할 수도 있으나, 많은 경우 이동하면서 사용할 수 있다. 이 경우, 사용자가 바라보는 응시점은 계속해서 변화할 수 있다. 따라서, 일 실시예에 따라 센싱부(120)는 사용자의 동공을 추적함으로써, 변경되는 사용자의 동공 위치 정보 및 사용자의 시선 방향에 대한 정보를 제어부(130)에게 제공할 수 있다.
단계 S1620에서, 제어부(130)는 플렉서블 디스플레이부(110)에서의 활성화 영역을 동적으로 변경할 수 있다. 제어부(130)는 사용자의 응시점을 갱신한 후, 갱신된 응시점을 기준으로 활성화 영역을 결정할 수 있다. 또한, 제어부(130)는 변경된 활성화 영역 내의 변형 곡률이 존재하는지 여부에 기초하여, 활성화 영역을 조정할 수 있다. 또는, 제어부(130)는 사용자의 시야각을 고려하여, 변경된 활성화 영역의 크기를 조정할 수도 있다.
도 17은 제어부에서 활성화 영역을 동적으로 변경하는 일례이다.
도 17을 참조하면, 제어부(130)는 사용자의 동공이 제 1 위치에서 제 2 위치로 이동함에 따라 제 1 위치에 대응되는 제 1 응시점(1710)을 제 2 위치에 대응되는 제 2 응시점(1720)으로 변경할 수 있다. 이때, 센싱부(120)는 사용자의 동공이 제 1 위치에서 제 2 위치로 이동함에 따라, 제 2 시선 감지 센서(613)를 활성화 상태로 전환시킴으로써 사용자의 동공을 추적하고, 동공의 변경 위치 정보 및 사용자의 시선 방향에 대한 정보를 제어부(130)로 제공할 수 있다.
일 실시예에 따라 제어부(130)는 응시점이 변경됨에 따라 활성화 영역을 재결정할 수 있다. 또한, 제어부(130)는 재결정된 활성화 영역 내의 플렉서블 디스플레이부(110)의 변형 상태에 대한 정보에 기초하여, 활성화 영역을 조정할 수 있다.
도 18은 제어부에서 콘텐츠가 디스플레이되도록 제어하는 방법을 설명하는 흐름도이다.
도 18을 참조하면, 단계 S1810에서, 센싱부(120)는 플렉서블 디스플레이 장치(10)로부터 사용자의 동공까지의 거리 정보를 획득할 수 있다.
예를 들어, 센싱부(120)는 시선 감지 센서에 의해 촬영된 영상을 분석함으로써, 플렉서블 디스플레이 장치(10)로부터 사용자의 동공까지의 거리 정보를 획득할 수 있다. 또는, 센싱부(120)는 시선 감지 센서에 의해 방출된 적외선이 되돌아오는 시간에 따라 플렉서블 디스플레이 장치(10)로부터 사용자의 동공까지의 거리 정보를 획득할 수도 있다. 또한, 센싱부(120)는 획득된 거리 정보를 제어부(130)로 제공할 수 있다.
단계 S1820에서, 제어부(130)는 센싱부(120)로부터 제공된 사용자와의 거리 정보에 기초하여, 활성화 영역에 표시될 콘텐츠에 포함되는 적어도 하나의 객체의 배치(arrangement), 외형(appearance) 및 개수 중 적어도 하나를 제어할 수 있다. 여기서, 콘텐츠는, 예를 들어, 노티피케이션 메시지, 알림 메시지, 응용 어플리케이션의 실행 화면 등을 포함할 수 있다.
일 실시예에 따라 제어부(130)는 콘텐츠가 복수의 객체들을 포함하는 경우, 사용자와의 거리에 따라 콘텐츠의 배치를 달리할 수 있다. 예를 들어, 제어부(130)는 복수의 객체들에 우선 순위를 부여한 후, 우선 순위가 높은 객체들을 응시점과 가까운 위치에 배치할 수 있다. 제어부(130)는, 예를 들어, 콘텐츠의 종류를 나타내는 이미지(예컨대, 노티피케이션 이미지, 알림 이미지, 응용 프로그램 로고 등)에 가장 높은 우선 순위를 부여하고, 상세 정보를 나타내는 텍스트(예컨대, 노티피케이션 내용, 알림 내용, 응용 프로그램의 실행 화면 정보 등)에 가장 낮은 우선 순위를 부여할 수 있다. 따라서, 사용자의 응시점이 변화하면, 콘텐츠의 배치는 동적으로 변화할 수 있다.
또한, 제어부(130)는 적어도 하나의 객체의 외형을 달리할 수 있다. 예를 들어, 제어부(130)는 동일한 정보에 대하여, 사용자와의 거리가 임계 거리 이내인 경우에는 텍스트로 표시하고, 임계 거리 이상인 경우에는 이미지로 표시할 수 있다. 또는, 제어부(130)는 사용자와의 거리에 따라 제공되는 정보의 양을 달리할 수도 있다.
또한, 제어부(130)는 콘텐츠가 복수의 객체들을 포함하는 경우, 객체들의 개수를 달리할 수 있다. 예를 들어, 제어부(130)는 복수의 객체들에게 우선 순위를 부여하고, 사용자와의 거리가 임계 거리보다 큰 경우, 가장 높은 우선 순위가 부여된 객체만을 활성화 영역에 디스플레이할 수 있다. 반면에, 사용자와의 거리가 임계 거리보다 작은 경우에는 복수의 객체들을 모두 디스플레이할 수도 있다.
한편, 위 설명에서는, 제어부(130)가 플렉서블 디스플레이 장치(10)에서부터 사용자까지의 거리 정보에 기초하여 콘텐츠가 다르게 표현되는 것으로 설명하였으나, 이에 제한되지 않는다. 일 실시예에 따라 제어부(130)는 활성화 영역의 크기에 따라 콘텐츠를 다르게 디스플레이할 수 있다. 예를 들어, 제어부(130)는 활성화 영역의 크기에 따라, 콘텐츠에 포함되는 객체들의 배치, 외형 및 개수 중 적어도 하나를 달리할 수 있다. 또는, 제어부(130)는 활성화 영역의 모양에 따라, 콘텐츠에 포함되는 객체들의 배치, 외형 및 개수 중 적어도 하나를 달리할 수도 있다.
도 19는 제어부에서 활성화 영역에 표시될 콘텐츠에 포함되는 객체의 외형을 제어하는 일례이다.
도 19를 참조하면, 플렉서블 디스플레이 장치(10)는 밴드 형태의 웨어러블 장치일 수 있다. 사용자가 운동 중에 어플리케이션이 실행되는 플렉서블 디스플레이 장치(10)를 바라보는 경우, 제어부(130)는 사용자와의 거리에 따라, 달리기 어플리케이션의 실행 화면에 포함되는 객체의 외형을 달리할 수 있다.
예를 들어, 도 19의 (a)에서와 같이 사용자와의 거리가 임계 거리보다 큰 경우, 제어부(130)는 달리기 어플리케이션이 실행 중임을 알릴 수 있는 정지 이미지(1910)를 포함하는 달리기 어플리케이션 실행 화면을 생성할 수 있다. 반면에, 도 19의 (b)에서와 같이 사용자와의 거리가 임계 거리보다 작은 경우, 제어부(130)는 캐릭터가 달리기하는 동영상 이미지(1920)을 포함하는 달리기 어플리케이션 실행 화면을 생성할 수 있다. 또한, 제어부(130)는 현재 사용자의 속도 정보도 함께 디스플레이되도록, 달리기 어플리케이션의 실행 화면에 포함되는 객체들의 개수도 제어할 수 있다.
도 20은 제어부에서 콘텐츠에 포함되는 복수의 객체들의 개수를 제어하는 일례이다.
도 20을 참조하면, 제어부(130)는 플렉서블 디스플레이 장치(10)로부터 사용자까지의 거리 정보에 따라 콘텐츠에 포함되는 복수의 객체들의 개수를 제어할 수 있다. 이때, 제어부(130)는 콘텐츠에 포함되는 복수의 객체들에 부여된 우선 순위를 이용하여, 콘텐츠를 생성할 수 있다.
콘텐츠에 포함되는 객체가 세 개인 경우, 제어부(130)는 센싱부(120)로부터 제공된 사용자와의 거리 정보를 제 1 임계 거리(예컨대, 40cm) 및 제 2 임계 거리(예컨대, 20cm)와 비교하여, 콘텐츠에 포함되는 객체들의 개수를 제어할 수 있다. 도 20의 (a)에서와 같이, 사용자와의 거리 정보가 제 1 임계 거리보다 큰 경우, 제어부(130)는 가장 우선 순위가 높은 하나의 객체를 포함하는 콘텐츠를 생성할 수 있다. 또한, 도 20의 (b)에서와 같이 사용자와의 거리 정보가 제 1 임계 거리보다 크고 제 2 임계 거리보다 작은 경우, 제어부(130)는 우선 순위에 따라 두 개의 객체를 포함하는 콘텐츠를 생성할 수 있다. 또한, 도 20의 (c)에서와 같이, 사용자와의 거리 정보가 제 2 임계 거리보다 작은 경우, 제어부(130)는 모든 객체를 포함하는 콘텐츠를 생성할 수 있다.
도 21은 일 실시예에 따라 제어부가 플렉서블 디스플레이 장치의 사용자 입력을 비활성화 또는 활성화시키는 방법을 설명하기 위한 흐름도이다.
도 21을 참조하면, 단계 S2110에서, 제어부(130)는 사용자 입력을 비활성화 또는 활성화 상태로 전환할 수 있는 입력상태 전환 GUI(graphic user interface)가 디스플레이되도록 제어할 수 있다. 여기서, 사용자 입력을 비활성화 상태로 전환한다는 것은, 제어부(130)가 사용자 입력부(310)를 통해 수신되는 사용자 입력에 따른 연산 처리 작업을 수행하지 않음을 의미할 수 있다. 또는, 사용자 입력을 비활성화 상태로 전환한다는 것은, 사용자 입력부(310)가 사용자 입력을 수신하지 않음을 의미할 수도 있다. 또한, 사용자 입력을 활성화 상태로 전환한다는 것은, 제어부(130)가 사용자 입력부(310)를 통해 수신되는 사용자 입력에 따른 연산 처리 작업을 재개함을 의미할 수 있다.
일 실시예에 따라 제어부(130)는 현재 실행되는 응용 프로그램에 관계 없이 입력상태 전환 GUI가 디스플레이되도록 제어할 수 있다. 예를 들어, 제어부(130)는 달리기 어플리케이션의 실행 화면에서 입력상태 전환 GUI가 함께 디스플레이되도록 제어할 수 있다. 따라서, 사용자는 사용자 입력을 비활성화 시킴으로써, 운동 중에 잘못된 사용자 입력에 의해 플렉서블 디스플레이 장치(10)가 오동작되는 것을 방지할 수 있다.
한편, 입력상태 전환 GUI는 아이콘, 이미지, 텍스트 등과 같은 다양한 형태일 수 있다.
단계 S2120에서, 사용자 입력부(310)는 입력상태 전환 GUI에 대한 사용자 입력을 수신할 수 있다. 제어부(130)는 사용자 입력이 활성화 상태인 경우, 입력상태 전환 GUI에 대한 입력에 따라 사용자 입력을 비활성화 상태로 변경할 수 있다. 이때, 사용자 입력을 비활성화 상태로 변경하는 경우라도, 입력상태 전환 GUI에 대한 사용자 입력은 활성화 상태일 수 있다.
도 22는 일 실시예에 따라 플렉서블 디스플레이 장치가 알림 메시지를 디스플레이하는 방법을 설명하기 위한 흐름도이다.
도 22를 참조하면, 단계 S2210에서, 플렉서블 디스플레이 장치(10)는 알림 메시지를 수신할 수 있다. 여기서, 알림 메시지는 외부로부터 수신되는 문자 메시지, 통화 알림, SNS(social network service) 메시지, 채팅 메시지 등뿐만 아니라, 플렉서블 디스플레이 장치(10) 내에서 발생되는 이벤트 메시지, 알람 메시지, 스케줄 알림 메시지 등을 포함할 수 있다.
단계 S2220에서, 플렉서블 디스플레이 장치(10)는 알림 메시지가 수신됨에 따라, 사용자의 시선 정보를 획득할 수 있다. 여기서, 사용자의 시선 정보는, 사용자의 동공 인식 정보, 시선 방향에 대한 정보 등을 포함할 수 있다.
단계 S2230에서, 플렉서블 디스플레이 장치(10)는 사용자의 시선 정보 및 플렉서블 디스플레이 장치(10)의 곡률 정보에 기초하여, 플렉서블 디스플레이 장치의 화면 상에서, 활성화 영역을 결정할 수 있다. 플렉서블 디스플레이 장치(10)는 사용자의 시선 정보에 기초하여, 플렉서블 디스플레이 장치(10)의 화면 상에서, 사용자의 응시점을 추출할 수 있다. 플렉서블 디스플레이 장치(10)는 추출된 응시점을 기준으로 활성화 영역을 결정한 후, 플렉서블 디스플레이 장치(10)의 곡률 정보에 기초하여, 활성화 영역을 조정할 수 있다. 예를 들어, 결정된 활성화 영역에 임계곡률 이상의 곡률이 존재하는 경우, 플렉서블 디스플레이 장치(10)는 활성화 영역을 해당 곡률을 포함하지 않는 영역까지로 축소시킬 수 있다. 또는, 플렉서블 디스플레이 장치(10)는 사용자의 시야각을 고려하여, 활성화 영역을 조정할 수도 있다.
단계 S2240에서, 플렉서블 디스플레이 장치(10)는 알림 메시지를 활성화 영역에서 디스플레이할 수 있다.
이와 같이, 일 실시예에 따른 플렉서블 디스플레이 장치(10)는 플렉서블 디스플레이 장치(10)의 변형 상태 및 사용자의 시선 정보에 따라, 콘텐츠가 디스플레이되는 위치 및 콘텐츠의 레이아웃을 동적으로 변화시킴으로써, 콘텐츠에 대한 가시성(visibility)을 향상시킬 수 있다. 또한, 플렉서블 디스플레이 장치(10)의 휨 상태, 접힘 상태 등에 의해 발생되는 디스플레이 왜곡을 보상함으로써, 플렉서블 디스플레이 장치(10)의 변형 상태에 관계없이 콘텐츠에 대한 사용자의 가독성을 증진시킬 수 있다.
한편, 상술한 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 또한, 상술한 방법에서 사용된 데이터의 구조는 컴퓨터로 읽을 수 있는 기록매체에 여러 수단을 통하여 기록될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드 디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.
본 실시예와 관련된 기술 분야에서 통상의 지식을 가진 자는 상기된 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 방법들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (20)

  1. 플렉서블(flexible) 디스플레이부;
    사용자의 시선 정보를 획득하는 센싱부; 및
    상기 사용자의 시선 정보 및 상기 플렉서블 디스플레이부의 곡률(curvature) 정보에 기초하여, 상기 플렉서블 디스플레이부에서 활성화 영역을 결정하고, 상기 결정된 활성화 영역에서 콘텐츠가 디스플레이되도록 제어하는 제어부;를 포함하는, 플렉서블 디스플레이 장치.
  2. 제 1 항에 있어서,
    상기 제어부는, 상기 사용자의 시선 정보에 기초하여 상기 사용자의 응시점을 추출하고, 상기 응시점에 기초하여 상기 활성화 영역을 결정하며, 상기 활성화 영역 내의 곡률이 임계 곡률보다 큰 경우, 상기 활성화 영역을 조정하는, 플렉서블 디스플레이 장치.
  3. 제 1 항에 있어서,
    상기 제어부는, 상기 사용자의 시선 정보 및 상기 곡률 정보에 기초하여, 상기 활성화 영역에 대응되는 픽셀들의 배치를 조정함으로써, 영상 왜곡이 보정된 상기 콘텐츠를 생성하는, 플렉서블 디스플레이 장치.
  4. 제 3 항에 있어서,
    상기 제어부는, 상기 센싱부에 의해 획득되는 상기 사용자의 시선 정보가 달라짐에 따라, 상기 플렉서블 디스플레이부 상에서, 상기 활성화 영역이 동적으로 변경되도록 제어하는, 플렉서블 디스플레이 장치.
  5. 제 1 항에 있어서,
    상기 센싱부는, 상기 플렉서블 디스플레이 장치로부터 상기 사용자의 동공까지의 거리 정보를 획득하는, 플렉서블 디스플레이 장치.
  6. 제 5 항에 있어서,
    상기 제어부는, 상기 센싱부에 의해 획득된 상기 거리 정보에 기초하여, 상기 콘텐츠에 포함된 적어도 하나의 객체의 배치(arrangement), 상기 적어도 하나의 객체의 외형(appearance) 및 상기 적어도 하나의 객체의 개수를 제어하는, 플렉서블 디스플레이 장치.
  7. 제 6 항에 있어서,
    상기 제어부는, 상기 콘텐츠가 복수의 객체들을 포함하는 경우, 상기 센싱부에 의해 획득되는 상기 거리 정보가 달라짐에 따라, 상기 복수의 객체들의 배치, 상기 복수의 객체들의 외형 및 상기 복수의 객체들의 개수 중 적어도 하나가 달라지도록 제어하는, 플렉서블 디스플레이 장치.
  8. 제 6 항에 있어서,
    상기 제어부는, 상기 콘텐츠가 하나의 객체를 포함하는 경우, 상기 센싱부에 의해 획득되는 상기 거리 정보가 달라짐에 따라, 상기 하나의 객체의 외형이 달라지도록 제어하는, 플렉서블 디스플레이 장치.
  9. 제 1 항에 있어서,
    상기 센싱부는, 상기 사용자의 시선 정보를 획득하기 위해, 소정 간격을 두고 배치되는 복수의 시선 감지 센서를 포함하는, 플렉서블 디스플레이 장치.
  10. 플렉서블(flexible) 디스플레이부;
    알림 메시지를 수신하는 통신부;
    상기 알림 메시지가 수신됨에 따라, 사용자의 시선 정보를 획득하는 센싱부; 및
    상기 사용자의 시선 정보 및 상기 플렉서블 디스플레이부의 곡률(curvature) 정보에 기초하여, 상기 플렉서블 디스플레이부에서 활성화 영역을 결정하고, 상기 결정된 활성화 영역에서 상기 알림 메시지가 디스플레이되도록 제어하는 제어부;를 포함하는, 플렉서블 디스플레이 장치.
  11. 플렉서블(flexible) 디스플레이 장치가 콘텐츠를 디스플레이하는 방법에 있어서,
    사용자의 시선 정보를 획득하는 단계;
    상기 사용자의 시선 정보 및 상기 플렉서블 디스플레이 장치의 곡률(curvature) 정보에 기초하여, 상기 플렉서블 디스플레이 장치의 화면 상에서, 활성화 영역을 결정하는 단계; 및
    상기 콘텐츠가 상기 활성화 영역에서 디스플레이되도록 제어하는 단계;를 포함하는, 디스플레이 방법.
  12. 제 11 항에 있어서,
    상기 활성화 영역을 결정하는 단계는,
    상기 사용자의 시선 정보에 기초하여 상기 사용자의 응시점을 추출하는 단계;
    상기 응시점에 기초하여 상기 활성화 영역을 결정하는 단계;
    상기 활성화 영역 내의 곡률이 임계 곡률보다 큰 경우, 상기 활성화 영역을 조정하는 단계;를 포함하는, 디스플레이 방법.
  13. 제 11 항에 있어서,
    상기 활성화 영역을 결정하는 단계는,
    상기 사용자의 시선 정보 및 상기 곡률 정보에 기초하여, 상기 활성화 영역에 대응되는 픽셀들의 배치를 조정함으로써, 영상 왜곡이 보정된 상기 콘텐츠를 생성하는 단계;를 포함하는, 디스플레이 방법.
  14. 제 13 항에 있어서,
    상기 디스플레이 방법은,
    상기 사용자의 시선 정보가 변경되면, 상기 활성화 영역이 동적으로 변경되도록 제어하는 단계;를 더 포함하는, 디스플레이 방법.
  15. 제 11 항에 있어서,
    상기 디스플레이 방법은,
    상기 플렉서블 디스플레이 장치로부터 상기 사용자의 동공까지의 거리 정보를 획득하는 단계;를 더 포함하는, 디스플레이 방법.
  16. 제 15 항에 있어서,
    상기 디스플레이 방법은,
    상기 획득된 거리 정보에 기초하여, 상기 콘텐츠에 포함된 적어도 하나의 객체의 배치(arrangement), 상기 적어도 하나의 객체의 외형(appearance) 및 상기 적어도 하나의 객체의 개수를 제어하는 단계;를 더 포함하는, 디스플레이 방법.
  17. 제 16 항에 있어서,
    상기 콘텐츠에 포함된 적어도 하나의 객체를 제어하는 단계는,
    상기 콘텐츠가 복수의 객체들을 포함하는 경우, 상기 획득된 거리 정보가 달라짐에 따라, 상기 복수의 객체들의 배치, 상기 복수의 객체들의 외형 및 상기 복수의 객체들의 개수 중 적어도 하나가 달라지도록 제어하는, 디스플레이 방법.
  18. 제 16 항에 있어서,
    상기 콘텐츠에 포함된 적어도 하나의 객체를 제어하는 단계는,
    상기 콘텐츠가 하나의 객체를 포함하는 경우, 상기 획득되는 거리 정보가 달라짐에 따라, 상기 하나의 객체의 외형이 달라지도록 제어하는, 디스플레이 방법.
  19. 플렉서블(flexible) 디스플레이 장치가 알림 메시지를 디스플레이하는 방법에 있어서,
    상기 알림 메시지를 수신하는 단계;
    상기 알림 메시지가 수신됨에 따라, 사용자의 시선 정보를 획득하는 단계;
    상기 사용자의 시선 정보 및 상기 플렉서블 디스플레이 장치의 곡률(curvature) 정보에 기초하여, 상기 플렉서블 디스플레이 장치의 화면 상에서 활성화 영역을 결정하는 단계; 및
    상기 알림 메시지를 상기 활성화 영역에 디스플레이하는 단계;를 포함하는, 디스플레이 방법.
  20. 제 11 내지 제 19 항 중의 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.
KR1020150073924A 2015-05-27 2015-05-27 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법 KR102362741B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020150073924A KR102362741B1 (ko) 2015-05-27 2015-05-27 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법
PCT/KR2016/005076 WO2016190579A1 (ko) 2015-05-27 2016-05-13 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법
US15/574,376 US10726762B2 (en) 2015-05-27 2016-05-13 Flexible display device and displaying method of flexible display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150073924A KR102362741B1 (ko) 2015-05-27 2015-05-27 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법

Publications (2)

Publication Number Publication Date
KR20160139297A true KR20160139297A (ko) 2016-12-07
KR102362741B1 KR102362741B1 (ko) 2022-02-14

Family

ID=57393276

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150073924A KR102362741B1 (ko) 2015-05-27 2015-05-27 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법

Country Status (3)

Country Link
US (1) US10726762B2 (ko)
KR (1) KR102362741B1 (ko)
WO (1) WO2016190579A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200069467A (ko) * 2018-12-07 2020-06-17 한국항공우주산업 주식회사 얼굴인식 기능 및 디스플레이가 구비된 민항기용 좌석
US11030432B2 (en) 2018-10-23 2021-06-08 Samsung Electronics Co., Ltd. Deformable fingerprint recognition device, and fingerprint authentication method and electronic apparatus using the same
KR102317172B1 (ko) * 2020-11-06 2021-10-26 삼성전자주식회사 플렉서블디스플레이를 포함하는 전자 장치 및 그의 동작 방법
US11282167B1 (en) 2020-11-06 2022-03-22 Samsung Electronics Co., Ltd. Electronic device including flexible display and method of operation thereof

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11429151B2 (en) 2014-02-25 2022-08-30 Medibotics Llc Wearable devices for the wrist and/or arm with multiple and multi-configuration displays
US10485100B2 (en) * 2015-09-30 2019-11-19 Semiconductor Energy Laboratory Co., Ltd. Circuit board and display system
CN106371575B (zh) * 2015-12-11 2020-10-23 北京智谷睿拓技术服务有限公司 形变控制方法、形变控制装置及用户设备
CN105955534B (zh) * 2016-05-09 2018-09-18 京东方科技集团股份有限公司 柔性显示模组及其制作方法
JP6813967B2 (ja) * 2016-06-30 2021-01-13 株式会社ジャパンディスプレイ 入力機能付き表示装置
CN106200801B (zh) * 2016-07-08 2018-09-04 广东欧珀移动通信有限公司 一种腕带式移动终端及其控制方法
US10885676B2 (en) * 2016-12-27 2021-01-05 Samsung Electronics Co., Ltd. Method and apparatus for modifying display settings in virtual/augmented reality
WO2019173697A1 (en) * 2018-03-08 2019-09-12 Bose Corporation Prioritizing delivery of location-based personal audio
CN109215615B (zh) * 2018-09-26 2020-06-19 北京小米移动软件有限公司 显示单元工作参数补偿方法及装置
CN109782947B (zh) * 2018-12-29 2022-08-19 努比亚技术有限公司 一种柔性屏显示控制方法、设备及计算机可读存储介质
KR20200122076A (ko) * 2019-04-17 2020-10-27 삼성전자주식회사 폴더블 전자 장치 및 상기 폴더블 전자 장치에서 정보를 표시하는 방법
CN110554816B (zh) * 2019-07-25 2024-05-07 华为技术有限公司 一种界面生成方法及设备
KR20210095251A (ko) * 2020-01-22 2021-08-02 삼성디스플레이 주식회사 표시 장치
US11094240B1 (en) * 2020-01-31 2021-08-17 Synaptics Incorporated Device and method for image processing in display driver
US11860584B2 (en) * 2020-06-08 2024-01-02 International Business Machines Corporation Dynamically controllable smartwatch
US11693558B2 (en) * 2021-06-08 2023-07-04 Samsung Electronics Co., Ltd. Method and apparatus for displaying content on display
KR20230060622A (ko) * 2021-10-27 2023-05-08 삼성디스플레이 주식회사 플렉서블 표시 장치 및 이를 포함하는 전자 기기
CN115206256B (zh) * 2022-06-29 2023-07-18 惠科股份有限公司 柔性液晶显示面板及其驱动方法
WO2024029732A1 (ko) * 2022-08-03 2024-02-08 삼성전자주식회사 시각적 왜곡 보정을 위한 전자 장치 및 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140049452A1 (en) * 2010-07-23 2014-02-20 Telepatheye, Inc. Eye gaze user interface and calibration method
KR20150026651A (ko) * 2013-09-03 2015-03-11 삼성전자주식회사 알림을 제공하는 방법 및 그 전자 장치
US20150091796A1 (en) * 2013-09-30 2015-04-02 Samsung Electronics Co., Ltd. Display apparatus and control method thereof

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005046465A1 (en) * 2003-11-14 2005-05-26 Queen's University At Kingston Method and apparatus for calibration-free eye tracking
US7434173B2 (en) 2004-08-30 2008-10-07 Microsoft Corporation Scrolling web pages using direct interaction
JP2009246505A (ja) * 2008-03-28 2009-10-22 Toshiba Corp 画像表示装置及び画像表示装置
US8964298B2 (en) * 2010-02-28 2015-02-24 Microsoft Corporation Video display modification based on sensor input for a see-through near-to-eye display
US20110213664A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US9117384B2 (en) 2011-03-18 2015-08-25 Blackberry Limited System and method for bendable display
KR20110120858A (ko) * 2011-10-19 2011-11-04 석상호 양면 스크린을 적용한 스마트 모션 유저 인터페이스
KR102027555B1 (ko) 2012-12-05 2019-11-04 삼성전자주식회사 컨텐츠 디스플레이를 위한 방법 및 그 방법을 처리하는 전자 장치
KR102151634B1 (ko) * 2013-11-28 2020-09-04 삼성디스플레이 주식회사 플렉서블 표시장치
WO2015098192A1 (ja) * 2013-12-27 2015-07-02 シャープ株式会社 半導体装置及び表示装置
KR102292192B1 (ko) * 2014-02-17 2021-08-23 엘지전자 주식회사 증강 현실 이미지를 디스플레이 하는 디스플레이 시스템 및 그 제어 방법
KR102224478B1 (ko) * 2014-04-15 2021-03-08 엘지전자 주식회사 터치 센서티브 플렉서블 디스플레이 디바이스 및 그 제어 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140049452A1 (en) * 2010-07-23 2014-02-20 Telepatheye, Inc. Eye gaze user interface and calibration method
KR20150026651A (ko) * 2013-09-03 2015-03-11 삼성전자주식회사 알림을 제공하는 방법 및 그 전자 장치
US20150091796A1 (en) * 2013-09-30 2015-04-02 Samsung Electronics Co., Ltd. Display apparatus and control method thereof

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11030432B2 (en) 2018-10-23 2021-06-08 Samsung Electronics Co., Ltd. Deformable fingerprint recognition device, and fingerprint authentication method and electronic apparatus using the same
KR20200069467A (ko) * 2018-12-07 2020-06-17 한국항공우주산업 주식회사 얼굴인식 기능 및 디스플레이가 구비된 민항기용 좌석
KR102317172B1 (ko) * 2020-11-06 2021-10-26 삼성전자주식회사 플렉서블디스플레이를 포함하는 전자 장치 및 그의 동작 방법
US11282167B1 (en) 2020-11-06 2022-03-22 Samsung Electronics Co., Ltd. Electronic device including flexible display and method of operation thereof
WO2022097860A1 (en) * 2020-11-06 2022-05-12 Samsung Electronics Co., Ltd. Electronic device including flexible display and method of operation thereof

Also Published As

Publication number Publication date
US10726762B2 (en) 2020-07-28
KR102362741B1 (ko) 2022-02-14
WO2016190579A1 (ko) 2016-12-01
US20180137801A1 (en) 2018-05-17

Similar Documents

Publication Publication Date Title
KR102362741B1 (ko) 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 디스플레이 방법
US11068074B2 (en) Flexible device and interfacing method thereof
AU2015297281B2 (en) Flexible device and interfacing method thereof
US9734779B2 (en) Efficient operation of wearable displays
US9747015B2 (en) Efficient display of content on wearable displays
US10504488B2 (en) Portable device and control method therefor
US8643951B1 (en) Graphical menu and interaction therewith through a viewing window
JP6651534B2 (ja) ウェアラブルディスプレイ上のコンテンツの制御された表示
US20190012000A1 (en) Deformable Electronic Device with Methods and Systems for Controlling the Deformed User Interface
EP3039507B1 (en) Portable device displaying augmented reality image and method of controlling therefor
US10983663B2 (en) Displaying applications
US20110154233A1 (en) Projected display to enhance computer device use
US11200869B1 (en) Wearable display system for portable computing devices
US10600246B2 (en) Pinning virtual reality passthrough regions to real-world locations
US10042445B1 (en) Adaptive display of user interface elements based on proximity sensing
US20220091736A1 (en) Method and apparatus for displaying page, graphical user interface, and mobile terminal
US11995899B2 (en) Pointer-based content recognition using a head-mounted device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant