KR102080896B1 - 모바일 장치 및 이의 구동 방법 - Google Patents

모바일 장치 및 이의 구동 방법 Download PDF

Info

Publication number
KR102080896B1
KR102080896B1 KR1020130009999A KR20130009999A KR102080896B1 KR 102080896 B1 KR102080896 B1 KR 102080896B1 KR 1020130009999 A KR1020130009999 A KR 1020130009999A KR 20130009999 A KR20130009999 A KR 20130009999A KR 102080896 B1 KR102080896 B1 KR 102080896B1
Authority
KR
South Korea
Prior art keywords
angle
gaze direction
touch input
displays
display
Prior art date
Application number
KR1020130009999A
Other languages
English (en)
Other versions
KR20140096861A (ko
Inventor
황희철
최은경
이주형
Original Assignee
삼성디스플레이 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성디스플레이 주식회사 filed Critical 삼성디스플레이 주식회사
Priority to KR1020130009999A priority Critical patent/KR102080896B1/ko
Priority to US13/936,944 priority patent/US9213432B2/en
Priority to EP13187173.3A priority patent/EP2759902B1/en
Publication of KR20140096861A publication Critical patent/KR20140096861A/ko
Application granted granted Critical
Publication of KR102080896B1 publication Critical patent/KR102080896B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1647—Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1641—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being formed by a plurality of foldable display components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1677—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts for detecting open or closed state or particular intermediate positions assumed by movable parts of the enclosure, e.g. detection of display lid position with respect to main body in a laptop, detection of opening of the cover of battery compartment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/0206—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
    • H04M1/0208—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings characterized by the relative motions of the body parts
    • H04M1/0225—Rotatable telephones, i.e. the body parts pivoting to an open position around an axis perpendicular to the plane they define in closed position
    • H04M1/0227—Rotatable in one plane, i.e. using a one degree of freedom hinge
    • H04M1/0229—The hinge comprising input and/or output user interface means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/0206—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
    • H04M1/0241—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings using relative motion of the body parts to change the operational status of the telephone set, e.g. switching on/off, answering incoming call
    • H04M1/0243—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings using relative motion of the body parts to change the operational status of the telephone set, e.g. switching on/off, answering incoming call using the relative angle between housings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/16—Details of telephonic subscriber devices including more than one display unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Abstract

본 발명은 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하는 모바일 장치에 있어서 상기 복수의 디스플레이들 사이의 폴딩 각도와 사용자의 시선 방향에 따라 상기 사용자의 터치 입력의 활성화 여부를 판단할 수 있는 모바일 장치 및 이의 구동 방법에 관한 것이다.
본 발명의 실시 예에 따른 모바일 장치는 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하며, 상기 복수의 디스플레이들 사이의 폴딩 각도를 감지하는 각도 감지부, 사용자의 시선 방향을 감지하는 시선 방향 감지부, 및 상기 폴딩 각도와 상기 시선 방향에 따라 상기 복수의 디스플레이들에 대한 터치 입력의 활성 여부를 제어하는 제어부를 포함한다.

Description

모바일 장치 및 이의 구동 방법{MOBILE DEVICE AND METHOD FOR OPERATING THE SAME}
본 발명은 모바일 장치 및 이의 구동 방법에 관한 것으로, 특히 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하는 모바일 장치에 있어서 상기 복수의 디스플레이들 사이의 폴딩 각도와 사용자의 시선 방향에 따라 상기 사용자의 터치 입력의 활성화 여부를 판단할 수 있는 모바일 장치 및 이의 구동 방법에 관한 것이다.
최근의 모바일 장치는 디스플레이 영역에 배치된 터치 스크린 패널을 이용해 사용자의 터치 입력을 인식하고 인식된 터치 입력의 좌표 정보에 따라 다양한 동작을 수행한다. 다만, 종래의 모바일 장치는 사용자가 의도하지 않은 터치 입력도 유효한 입력으로 인식하므로 사용자가 의도하지 않은 동작을 수행할 수 있는 문제점이 있다.
한편, 접을 수 있는 모바일 장치, 예컨대, 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하는 모바일 장치는 다른 구조의 모바일 장치에 비해 이동성을 더욱 향상시킬 수 있고 보다 다양한 어플리케이션들을 수행할 수 있는 장점이 있으므로 다양하게 사용되고 있다.
이와 같은 접을 수 있는 모바일 장치의 경우에는 다른 구조의 모바일 장치의 경우보다 사용자가 의도하지 않은 터치 입력이 터치 스크린 패널로 인가될 확률이 높다. 예를 들어, 접을 수 있는 모바일 장치에서 전자책(e-book) 어플리케이션이 수행될 때, 사용자는 일반적인 책을 잡는 것처럼 상기 접을 수 있는 모바일 장치를 잡을 수 있다. 이때, 모바일 장치는 터치 스크린 패널에 터치된 사용자의 손가락을 터치 입력으로 인식함으로써 사용자가 의도하지 않은 동작을 수행할 수 있다.
이러한 오동작을 방지하여 사용자의 편의성을 향상할 수 있도록 터치 입력이 사용자의 의도에 따라 인가되었는지 여부를 판단할 수 있는 기술이 요구된다.
본 발명이 이루고자 하는 기술적인 과제는 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하는 모바일 장치에 있어서 상기 복수의 디스플레이들 사이의 폴딩 각도와 사용자의 시선 방향에 따라 상기 사용자의 터치 입력의 활성화 여부를 판단할 수 있는 모바일 장치 및 이의 구동 방법을 제공하는 것이다.
본 발명의 실시 예에 따른 모바일 장치는 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하며, 상기 복수의 디스플레이들 사이의 폴딩 각도를 감지하는 각도 감지부, 사용자의 시선 방향을 감지하는 시선 방향 감지부, 및 상기 폴딩 각도와 상기 시선 방향에 따라 상기 복수의 디스플레이들에 대한 터치 입력의 활성 여부를 제어하는 제어부를 포함한다.
실시 예에 따라, 상기 각도 감지부는 상기 복수의 디스플레이들 중에서 제1디스플레이에 배치된 제1MEMS 센서로부터 출력된 제1가속도 벡터들에 기초하여 상기 제1디스플레이와 지면 사이의 제1각도값을 계산하여 출력하는 제1각도 계산부, 상기 복수의 디스플레이들 중에서 제2디스플레이에 배치된 제2MEMS 센서로부터 출력된 제2가속도 벡터들에 기초하여 상기 제2디스플레이와 상기 지면 사이의 제2각도값을 계산하여 출력하는 제2각도 계산부, 및 상기 제1각도값과 상기 제2각도값에 기초하여 상기 폴딩 각도를 계산하는 폴딩 각도 계산부를 포함할 수 있다.
실시 예에 따라, 상기 시선 방향 감지부는 영상 인식 장치로부터 출력된 이미지 데이터로부터 얼굴 영역과 눈 영역을 추출하는 형상 추출부, 및 상기 얼굴 영역과 상기 눈 영역 각각의 좌표값들에 따라 상기 시선 방향을 계산하는 시선 방향 계산부를 포함할 수 있다.
실시 예에 따라, 상기 시선 방향 감지부는 상기 이미지 데이터로부터 휘도 성분을 추출하는 영상 변환부를 더 포함하며, 상기 형상 추출부는 상기 휘도 성분으로부터 상기 얼굴 영역과 상기 눈 영역을 추출할 수 있다.
실시 예에 따라, 상기 제어부는 상기 폴딩 각도, 상기 시선 방향, 및 상기 터치 입력의 좌표값에 따라 상기 터치 입력이 사용자의 의도에 따라 입력되었는지 여부를 판단하고 판단 결과에 따라 상기 터치 입력에 대응하는 제어 신호를 외부로 출력할 수 있다.
실시 예에 따라, 상기 제어부는 상기 폴딩 각도와 상기 시선 방향이 일정 범위 이내일 때 상기 터치 입력이 상기 사용자의 의도와 상관없이 입력된 것으로 판단할 수 있다.
실시 예에 따라, 상기 제어부는 상기 시선 방향이 상기 터치 입력을 향하고 있을 때 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단할 수 있다.
본 발명의 실시 예에 따른 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하는 모바일 장치의 구동 방법은 상기 복수의 디스플레이들 사이의 폴딩 각도를 감지하는 단계, 사용자의 시선 방향을 감지하는 단계, 및 상기 폴딩 각도와 상기 시선 방향에 따라 상기 복수의 디스플레이들에 대한 터치 입력의 활성 여부를 제어하는 단계를 포함한다.
실시 예에 따라, 상기 폴딩 각도를 감지하는 단계는 상기 복수의 디스플레이들 중에서 제1디스플레이와 지면 사이의 제1각도를 계산하는 단계, 상기 복수의 디스플레이들 중에서 제2디스플레이와 지면 사이의 제2각도를 계산하는 단계, 및 상기 제1각도와 상기 제2각도에 기초하여 상기 폴딩 각도를 계산하는 단계를 포함할 수 있다.
실시 예에 따라, 상기 제1각도는 상기 제1디스플레이에 배치된 제1MEMS 센서로부터 출력된 제1가속도 벡터들에 기초하여 계산되고, 상기 제2각도는 상기 제2디스플레이에 배치된 제2MEMS 센서로부터 출력된 제2가속도 벡터들에 기초하여 계산될 수 있다.
실시 예에 따라, 상기 시선 방향을 감지하는 단계는 영상 인식 장치로부터 출력된 이미지 데이터로부터 얼굴 영역과 눈 영역을 추출하는 단계, 및 상기 얼굴 영역과 상기 눈 영역 각각의 좌표값들에 따라 상기 시선 방향을 계산하는 단계를 포함할 수 있다.
실시 예에 따라, 상기 추출하는 단계는 상기 이미지 데이터로부터 휘도 성분을 추출하는 단계, 및 상기 휘도 성분으로부터 상기 얼굴 영역과 상기 눈 영역을 추출하는 단계를 포함할 수 있다.
실시 예에 따라, 상기 제어하는 단계는 상기 폴딩 각도, 상기 시선 방향, 및 상기 터치 입력의 좌표에 따라 상기 터치 입력이 사용자의 의도에 따라 입력되었는지 여부를 판단하는 단계, 및 판단 결과에 따라 터치 입력에 의한 명령 수행 여부를 결정하는 단계를 포함할 수 있다.
실시 예에 따라, 상기 판단하는 단계는 상기 폴딩 각도와 상기 시선 방향이 일정 범위 이내일 때 상기 터치 입력이 상기 사용자의 의도와 상관없이 입력된 것으로 판단하는 단계를 포함할 수 있다.
실시 예에 따라, 상기 판단하는 단계는 상기 시선 방향과 상기 터치 입력의 좌표가 일치할 때 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단하는 단계를 포함할 수 있다.
본 발명의 실시 예에 따른 모바일 장치 및 이의 구동 방법은 복수의 디스플레이들 사이의 폴딩 각도와 사용자의 시선 방향에 따라 상기 사용자의 터치 입력의 활성화 여부를 판단할 수 있는 효과가 있다.
도 1은 본 발명의 실시 예에 따른 모바일 장치를 나타내는 개념도이다.
도 2는 도 1에 도시된 모바일 장치를 나타내는 블록도이다.
도 3은 도 2에 도시된 모바일 장치의 구동 방법을 설명하기 위한 플로우차트(folwchart)이다.
도 4는 도 1에 도시된 제1디스플레이와 지면 사이의 제1각도, 제2디스플레이와 지면 사이의 제2각도, 및 제1디스플레이와 제2디스플레이 사이의 폴딩 각도 사이의 관계를 설명하기 위한 도면이다.
도 5는 도 2에 도시된 각도 감지부를 나타내는 블록도이다.
도 6은 도 2에 도시된 각도 감지부가 복수의 디스플레이들 사이의 폴딩 각도를 계산하는 방법을 설명하기 위한 플로우차트이다.
도 7은 도 2에 도시된 시선 방향 감지부를 나타내는 블록도이다.
도 8은 도 2에 도시된 시선 방향 감지부가 사용자의 시선 방향을 감지하는 방법을 설명하기 위한 플로우차트이다.
이하, 첨부된 도면을 참조하여 본 발명의 실시 예를 보다 상세하게 설명하기로 한다.
도 1은 본 발명의 실시 예에 따른 모바일 장치를 나타내는 개념도이고, 도 2는 도 1에 도시된 모바일 장치를 나타내는 블록도이고, 도 3은 도 2에 도시된 모바일 장치의 구동 방법을 설명하기 위한 플로우차트(folwchart)이고, 도 4는 도 1에 도시된 제1디스플레이와 지면 사이의 제1각도, 제2디스플레이와 지면 사이의 제2각도, 및 제1디스플레이와 제2디스플레이 사이의 폴딩 각도 사이의 관계를 설명하기 위한 도면이다.
도 1 내지 도 4를 참조하면, 모바일 장치(100)는 서로 연결되고 연결부가 접을 수 있는 복수의 디스플레이들(110 및 120)을 포함한다.
복수의 디스플레이들(110 및 120) 각각의 디스플레이 영역에는 터치 스크린 패널(111 또는 121)이 배치된다. 예를 들어, 제1디스플레이(110)의 디스플레이 영역에는 제1터치 스크린 패널(111)이 배치되고, 제2디스플레이(120)의 디스플레이 영역에는 제2터치 스크린 패널(121)이 배치된다.
제1터치 스크린 패널(111)은 제1디스플레이(110)의 디스플레이 영역에 대한 사용자의 터치 입력을 감지하고, 감지된 터치 입력의 제1좌표값(CV1)를 제어부(160)로 출력한다. 또한, 제2터치 스크린 패널(121)은 제2디스플레이(120)의 디스플레이 영역에 대한 사용자의 터치 입력을 감지하고, 감지된 터치 입력의 제2좌표값(CV2)를 제어부(160)로 출력한다.
복수의 디스플레이들(110 및 120) 각각에는 MEMS 센서(113 또는 123)가 배치된다. 예를 들어, 제1디스플레이(110)에는 제1MEMS 센서(113)가 배치되고, 제2디스플레이(120)에는 제2MEMS센서(123)가 배치된다.
MEMS 센서(113 또는 123)는 가속도 센서, 지자기 센서, 또는 자이로 센서와 같이 디스플레이(110 및 120)의 동작을 감지할 수 있는 센서로 구현될 수 있다. 이하 MEMS 센서(113 또는 123)가 3축 가속도 센서인 경우에 대하여 설명하나, 본 발명의 실시 예는 이에 한정되지 않는다.
제1MEMS 센서(113)는 제1디스플레이(110)의 가속도 변화를 감지하고, 감지된 가속도 변화에 대응하는 제1가속도 벡터들(V1)을 각도 감지부(130)로 출력한다. 또한, 제2MEMS 센서(123)는 제2디스플레이(120)의 가속도 변화를 감지하고, 감지된 가속도 변화에 대응하는 제2가속도 벡터들(V2)을 각도 감지부(130)로 출력한다.
각도 감지부(130)는 제1가속도 벡터들(V1)과 제2가속도 벡터들(V2)에 기초하여 제1디스플레이(110)와 지면 사이의 제1각도, 제2디스플레이(120)와 지면 사이의 제2각도, 및 제1디스플레이(110)와 제2디스플레이(120) 사이의 폴딩 각도를 계산한다(S100).
구체적으로, 각도 감지부(130)는 제1가속도 벡터들(V1)에 기초하여 상기 제1각도를 감지하고, 제2가속도 벡터들(V2)에 기초하여 상기 제2각도를 감지한다. 각도 감지부(130)는 상기 제1각도와 상기 제2각도에 기초하여 상기 폴딩 각도를 계산한다(S100).
실시 예에 따라, 각도 감지부(130)는 삼각함수 수식을 이용해 제1가속도 벡터들(V1)에 기초하여 상기 제1각도를 계산하고, 제2가속도 벡터들(V2)에 기초하여 상기 제2각도를 계산할 수 있다.
다른 실시 예에 따라, 각도 감지부(130)는 제1가속도 벡터들(V1)과 제2가속도 벡터들(V2)에 대응하는 제1각도값(AV1), 제2각도값(AV2), 및 폴딩 각도값(FAV)을 메모리(미도시)로부터 리드할 수 있다.
예를 들어, 각도 감지부(130)는 제1가속도 벡터들(V1)에 기초하여 제1디스플레이(110)의 3축 각도들, 예를 들어, X축, Y축, 및 Z축의 각도들을 감지하고 제2가속도 벡터들(V2)에 기초하여 제2디스플레이(120)의 3축 각도들을 감지하여 제1디스플레이(110)의 3축 각도들과 제2디스플레이(120)의 3축 각도들에 대응하는 제1각도값(AV1), 제2각도값(AV2), 및 폴딩 각도값(FAV)을 메모리로부터 리드할 수 있다.
다음의 표 1은 메모리에 저장된 디스플레이들(110 및 120) 각각의 3축 각도들과 이에 대응하는 제1각도값(AV1), 제2각도값(AV2), 및 폴딩 각도값(FAV)의 일례를 나타낸다.
제1디스플레이의 3축 각도 AV1 제2디스플레이의 3축 각도 AV2 FAV
X축 Y축 Z축 X축 Y축 Z축
0 0 -90 180 0 0 90 0 0
0 -45 -45 135 0 0 90 0 45
0 -90 0 90 0 0 90 0 90
0 -45 45 45 0 0 90 0 135
0 0 90 0 0 0 90 0 180
0 -45 45 90 0 45 45 0 90
0 -23 67 135 0 23 67 -45 135
-45 -0 90 180 0 0 90 -90 180
-45 -30 30 45 -45 30 30 0 90
-45 -15 38 90 -45 15 38 -45 135
-45 0 45 135 -45 0 45 -90 180
도 5는 도 2에 도시된 각도 감지부를 나타내는 블록도이고, 도 6은 도 2에 도시된 각도 감지부가 복수의 디스플레이들 사이의 폴딩 각도를 계산하는 방법을 설명하기 위한 플로우차트이다.
도 5와 도 6을 참조하면, 각도 감지부(130)는 제1각도 계산부(131), 제2각도 계산부(132), 및 폴딩 각도 계산부(133)를 포함한다.
제1각도 계산부(131)는 제1MEMS센서(113)로부터 출력된 제1가속도 벡터들(V1)에 기초하여 제1디스플레이(110)와 지면 사이의 제1각도를 계산하고, 계산된 제1각도를 제1각도값(AV1)으로서 폴딩 각도 계산부(133)와 제어부(160)로 출력한다(S200).
제2각도 계산부(132)는 제2MEMS센서(123)로부터 출력된 제2가속도 벡터들(V2)에 기초하여 제2디스플레이(120)와 지면 사이의 제2각도를 계산하고, 계산된 제2각도를 제2각도값(AV2)으로서 폴딩 각도 계산부(133)와 제어부(160)로 출력한다(S210).
폴딩 각도 계산부(133)는 제1각도값(AV1)와 제2각도값(AV2)에 기초하여 제1디스플레이(110)와 제2디스플레이(120) 사이의 폴딩 각도를 계산하고, 계산된 폴딩 각도를 폴딩 각도값(FAV)으로서 제어부(160)로 출력한다(220).
한편, 모바일 장치(100)에는 영상 인식 장치(140)가 배치된다. 사용자의 시선 방향을 정확하게 감지하기 위해서 영상 인식 장치(140)는 도 1에 도시된 바와 같이 복수의 디스플레이들(110 및 120)이 서로 연결되는 연결부 근처에 배치되는 것이 바람직하나, 본 발명의 기술적 사상은 이에 한정되지 않는다.
영상 인식 장치(140)는 모바일 장치(100)의 전면의 이미지를 감지하고, 감지된 이미지를 이미지 데이터(ID)로서 시선 방향 감지부(150)로 출력한다. 영상 인식 장치(140)는 카메라와 같은 이미지 센서로 구현될 수 있다(S300).
시선 방향 감지부(150)는 영상 인식 장치(140)로부터 출력된 이미지 데이터(ID)를 분석하여 사용자의 시선 방향을 감지하고, 감지된 시선 방향을 시선 방향 정보(DSI)로서 제어부(160)로 출력한다. 구체적으로, 시선 방향 감지부(150)는 이미지 데이터(ID)로부터 얼굴 영역과 눈 영역을 추출하고, 상기 얼굴 영역과 상기 눈 영역의 좌표값들에 따라 상기 시선 방향을 계산한다.
도 7은 도 2에 도시된 시선 방향 감지부를 나타내는 블록도이고, 도 8은 도 2에 도시된 시선 방향 감지부가 사용자의 시선 방향을 감지하는 방법을 설명하기 위한 플로우차트이다.
도 7과 도 8을 참조하면, 시선 방향 감지부(150)는 형상 추출부(153), 및 시선 방향 계산부(155)를 포함한다.
형상 추출부(153)는 이미지 데이터(ID)로부터 얼굴 영역과 눈 영역을 추출한다. 예를 들어, 형상 추출부(153)는 에지 검출을 통해 상기 얼굴 영역과 상기 눈 영역을 추출한다(S320).
시선 방향 계산부(155)는 형상 추출부(153)에 의해 추출된 얼굴 영역과 눈 영역의 좌표값에 따라 사용자의 시선 방향을 계산한다(S330).
시선 방향 감지부(150)는 영상 변환부(151)를 더 포함할 수 있다.
영상 변환부(151)는 영상 인식 장치(140)로부터 출력된 이미지 데이터의 색 공간을 변환한다. 예를 들어, 영상 변환부(151)는 영상 인식 장치(140)로부터 출력된 RGB 데이터를 YCbCr 데이터로 변환하고, 변환된 YCbCr 데이터로부터 휘도 성분(Y)을 추출하여 형상 추출부(153)로 출력한다(S310). 이때, 형상 추출부(153)는 영상 변환부(151)로부터 출력된 휘도 성분(Y)으로부터 상기 얼굴 영역과 상기 눈 영역을 추출한다(S320).
제1디스플레이(110)와 제2디스플레이(120) 사이의 폴딩 각도가 변하고 있을 때, 사용자의 시선 방향은 사용자의 의도와 관계없이 무의미할 확률이 높다. 따라서, 시선 방향 계산부(155)는 폴딩 각도값(FAV)가 변할 때 감지된 시선 방향은 무시할 수 있다.
또한, 사용자가 처음 디스플레이를 바라볼 때 일반적으로 디스플레이의 정면을 바라보므로 시선 방향 계산부(155)는 처음 검출된 얼굴 영역과 눈 영역의 좌표값들을 기준값으로 정하고 이후에 검출된 얼굴 영역과 눈 영역의 좌표값들과 상기 기준값들의 차이에 따라 상기 사용자의 시선 방향을 계산할 수 있다.
시선 방향 감지부(150)는 각도 감지부(130)로부터 출력된 폴딩 각도값(FAV)에 따라 감지된 시선 방향을 보정할 수 있다. 구체적으로, 시선 방향 감지부(150)는 감지된 시선 방향과 폴딩 각도값(FAV)에 대응하는 시선 방향 정보(DSI)를 메모리로부터 리드하여 제어부(160)로 출력할 수 있다(S340).
한편, 제어부(160)는 각도 감지부(130)로부터 출력된 폴딩 각도값(FAV)과 시선 방향 감지부(150)로부터 출력된 시선 방향 정보(DSI)에 따라 복수의 디스플레이들(110 및 120)에 대한 사용자의 터치 입력의 활성 여부를 제어한다.
구체적으로, 제어부(160)는 폴딩 각도값(FAV)와 시선 방향 정보(DSI)에 기초하여 사용자의 터치 입력이 상기 사용자의 의도에 따라 입력되었는지 여부를 판단하고, 판단 결과에 따라 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단되는 경우 상기 터치 입력의 좌표값(CV1 또는 CV2)에 대응하는 제어 신호(CMD)를 외부, 예컨대, 모바일 장치의 프로세서로 출력한다.
예를 들어, 제어부(160)는, 폴딩 각도와 시선 방향이 일정 범위 이내일 때, 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단할 수 있다. 이를 위해, 제어부(160)는 터치 입력을 활성화하는 폴딩 각도와 시선 방향의 범위에 대한 데이터를 저장하는 메모리(미도시)를 포함할 수 있다.
다른 실시 예에 따라, 제어부(160)는 폴딩 각도값(FAV)와 시선 방향 정보(DSI)뿐만 아니라 제1각도값(AV1)와 제2각도값(AV2)에도 기초하여 터치 입력의 활성화 여부를 판단할 수 있다.
예를 들어, 사용자가 일반적인 책을 잡는 것처럼 모바일 장치(100)를 잡으면 상기 사용자가 의도하지 않은 터치 입력이 발생할 수 있다. 따라서, 폴딩 각도, 시선 방향, 제1각도, 및 제2각도가 일정 범위 이내일 때 상기 터치 입력을 비활성화함으로써 모바일 장치(100)의 오동작을 방지할 수 있다.
또 다른 실시 예에 따라, 제어부(160)는 시선 방향 정보(DSI)와 터치 입력의 좌표값(CV1 또는 CV2)에 따라 터치 입력의 활성화 여부를 판단할 수 있다. 일반적으로 사용자의 시선 방향과 상기 사용자의 의도에 다른 터치 입력은 일치할 확률이 높다. 따라서, 제어부(160)는 시선 방향과 터치 입력의 좌표값이 일치하는 경우의 터치 입력을 활성화할 수 있다.
상기 발명의 상세한 설명과 도면은 단지 본 발명의 예시적인 것으로서, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 따라서, 이상 설명한 내용을 통해 당업자라면 본 발명의 기술사상을 일탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다. 따라서, 본 발명의 기술적 보호 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허청구범위에 의해 정하여 져야만 할 것이다.
100; 모바일 장치 110; 제1디스플레이
111, 121; 터치 스크린 패널 113, 123; MEMS 센서
120; 제2디스플레이 130; 각도 감지부
131; 제1각도 계산부 132; 제2각도 계산부
133; 폴딩 각도 계산부 140; 영상 인식 장치
150; 시선 방향 감지부 151; 영상 변환부
153; 형상 추출부 155; 시선 방향 계산부
160; 제어부

Claims (15)

  1. 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하는 모바일 장치에 있어서,
    상기 복수의 디스플레이들 사이의 폴딩 각도를 감지하는 각도 감지부;
    사용자의 시선 방향을 감지하는 시선 방향 감지부;
    상기 폴딩 각도와 상기 시선 방향에 따라 상기 복수의 디스플레이들에 대한 터치 입력의 활성 여부를 제어하는 제어부; 및
    이미지 데이터를 출력하는 영상 인식 장치를 포함하고,
    상기 시선 방향 감지부는,
    상기 이미지 데이터로부터 얼굴 영역과 눈 영역을 추출하는 형상 추출부; 및
    상기 얼굴 영역과 상기 눈 영역 각각의 좌표값들에 따라 상기 시선 방향을 계산하는 시선 방향 계산부를 포함하며,
    상기 시선 방향 계산부는 상기 복수의 디스플레이들의 폴딩 각도가 변할 때 감지된 시선 방향을 무시하는 모바일 장치.
  2. 제1항에 있어서,
    상기 각도 감지부는,
    상기 복수의 디스플레이들 중에서 제1디스플레이에 배치된 제1MEMS 센서로부터 출력된 제1가속도 벡터들에 기초하여 상기 제1디스플레이와 지면 사이의 제1각도값을 계산하여 출력하는 제1각도 계산부;
    상기 복수의 디스플레이들 중에서 제2디스플레이에 배치된 제2MEMS 센서로부터 출력된 제2가속도 벡터들에 기초하여 상기 제2디스플레이와 상기 지면 사이의 제2각도값을 계산하여 출력하는 제2각도 계산부; 및
    상기 제1각도값과 상기 제2각도값에 기초하여 상기 폴딩 각도를 계산하는 폴딩 각도 계산부를 포함하는 모바일 장치.
  3. 삭제
  4. 제1항에 있어서,
    상기 시선 방향 감지부는,
    상기 이미지 데이터로부터 휘도 성분을 추출하는 영상 변환부를 더 포함하며,
    상기 형상 추출부는 상기 휘도 성분으로부터 상기 얼굴 영역과 상기 눈 영역을 추출하는 모바일 장치.
  5. 제1항에 있어서,
    상기 제어부는 상기 폴딩 각도, 상기 시선 방향, 및 상기 터치 입력의 좌표값에 따라 상기 터치 입력이 사용자의 의도에 따라 입력되었는지 여부를 판단하고, 판단 결과에 따라 상기 터치 입력에 대응하는 제어 신호를 외부로 출력하는 모바일 장치.
  6. 제5항에 있어서,
    상기 제어부는, 상기 폴딩 각도와 상기 시선 방향이 일정 범위 이내일 때, 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단하는 모바일 장치.
  7. 제6항에 있어서,
    상기 제어부는, 상기 시선 방향과 상기 터치 입력의 좌표가 일치할 때, 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단하는 모바일 장치.
  8. 서로 연결되고 연결부를 접을 수 있는 복수의 디스플레이들을 포함하는 모바일 장치의 구동 방법에 있어서,
    상기 복수의 디스플레이들 사이의 폴딩 각도를 감지하는 단계;
    사용자의 시선 방향을 감지하는 단계; 및
    상기 폴딩 각도와 상기 시선 방향에 따라 상기 복수의 디스플레이들에 대한 터치 입력의 활성 여부를 제어하는 단계를 포함하고,
    상기 시선 방향을 감지하는 단계는,
    영상 인식 장치로부터 출력된 이미지 데이터로부터 얼굴 영역과 눈 영역을 추출하는 단계; 및
    상기 얼굴 영역과 상기 눈 영역 각각의 좌표값들에 따라 상기 시선 방향을 계산하는 단계를 포함하며,
    상기 복수의 디스플레이들의 폴딩 각도가 변할 때 감지된 시선 방향을 무시하는 모바일 장치의 구동 방법.
  9. 제8항에 있어서,
    상기 폴딩 각도를 감지하는 단계는,
    상기 복수의 디스플레이들 중에서 제1디스플레이와 지면 사이의 제1각도를 계산하는 단계;
    상기 복수의 디스플레이들 중에서 제2디스플레이와 지면 사이의 제2각도를 계산하는 단계; 및
    상기 제1각도와 상기 제2각도에 기초하여 상기 폴딩 각도를 계산하는 단계를 포함하는 모바일 장치의 구동 방법.
  10. 제9항에 있어서,
    상기 제1각도는 상기 제1디스플레이에 배치된 제1MEMS 센서로부터 출력된 제1가속도 벡터들에 기초하여 계산되고, 상기 제2각도는 상기 제2디스플레이에 배치된 제2MEMS 센서로부터 출력된 제2가속도 벡터들에 기초하여 계산되는 모바일 장치의 구동 방법.
  11. 삭제
  12. 제8항에 있어서,
    상기 추출하는 단계는,
    상기 이미지 데이터로부터 휘도 성분을 추출하는 단계; 및
    상기 휘도 성분으로부터 상기 얼굴 영역과 상기 눈 영역을 추출하는 단계를 포함하는 모바일 장치의 구동 방법.
  13. 제8항에 있어서,
    상기 제어하는 단계는,
    상기 폴딩 각도, 상기 시선 방향, 및 상기 터치 입력의 좌표에 따라 상기 터치 입력이 사용자의 의도에 따라 입력되었는지 여부를 판단하는 단계; 및
    판단 결과에 따라 터치 입력에 의한 명령 수행 여부를 결정하는 단계를 포함하는 모바일 장치의 구동 방법.
  14. 제13항에 있어서,
    상기 판단하는 단계는,
    상기 폴딩 각도와 상기 시선 방향이 일정 범위 이내일 때, 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단하는 단계를 포함하는 모바일 장치의 구동 방법.
  15. 제14항에 있어서,
    상기 판단하는 단계는,
    상기 시선 방향과 상기 터치 입력의 좌표가 일치할 때, 상기 터치 입력이 상기 사용자의 의도에 따라 입력된 것으로 판단하는 단계를 포함하는 모바일 장치의 구동 방법.
KR1020130009999A 2013-01-29 2013-01-29 모바일 장치 및 이의 구동 방법 KR102080896B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130009999A KR102080896B1 (ko) 2013-01-29 2013-01-29 모바일 장치 및 이의 구동 방법
US13/936,944 US9213432B2 (en) 2013-01-29 2013-07-08 Mobile device and method for operating the same
EP13187173.3A EP2759902B1 (en) 2013-01-29 2013-10-02 Mobile device and method for operating the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130009999A KR102080896B1 (ko) 2013-01-29 2013-01-29 모바일 장치 및 이의 구동 방법

Publications (2)

Publication Number Publication Date
KR20140096861A KR20140096861A (ko) 2014-08-06
KR102080896B1 true KR102080896B1 (ko) 2020-02-25

Family

ID=49304751

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130009999A KR102080896B1 (ko) 2013-01-29 2013-01-29 모바일 장치 및 이의 구동 방법

Country Status (3)

Country Link
US (1) US9213432B2 (ko)
EP (1) EP2759902B1 (ko)
KR (1) KR102080896B1 (ko)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130271355A1 (en) 2012-04-13 2013-10-17 Nokia Corporation Multi-segment wearable accessory
KR102243657B1 (ko) 2014-10-06 2021-04-23 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
KR102358110B1 (ko) 2015-03-05 2022-02-07 삼성디스플레이 주식회사 표시 장치
KR102483468B1 (ko) * 2015-10-30 2023-01-02 삼성디스플레이 주식회사 플렉서블 표시장치
KR102572724B1 (ko) 2015-11-18 2023-09-01 삼성디스플레이 주식회사 표시 장치 및 표시 장치의 제어 방법
WO2017142375A1 (ko) * 2016-02-18 2017-08-24 박현민 연성디스플레이가 설치된 모바일 장치
KR102534963B1 (ko) 2016-02-23 2023-05-23 삼성전자주식회사 전자 장치 및 그 제어 방법
KR20180132847A (ko) * 2016-07-27 2018-12-12 선전 로욜 테크놀로지스 컴퍼니 리미티드 오동작을 방지하는 디스플레이 인터페이스 제어 방법, 장치 및 단말기
US10191147B2 (en) 2016-08-05 2019-01-29 Microsoft Technology Licensing, Llc Ultrasound based configuration detection of a multipart electronic apparatus
CN107133005B (zh) * 2017-04-28 2019-05-17 维沃移动通信有限公司 一种柔性屏的显示方法及移动终端
CN108874277A (zh) * 2017-05-10 2018-11-23 中兴通讯股份有限公司 一种滑动事件识别方法及装置
US10788934B2 (en) 2017-05-14 2020-09-29 Microsoft Technology Licensing, Llc Input adjustment
CN107678661A (zh) * 2017-10-19 2018-02-09 广东欧珀移动通信有限公司 显示数据内容的方法和装置
TWI707253B (zh) * 2018-05-24 2020-10-11 仁寶電腦工業股份有限公司 具第二螢幕之電子裝置及其控制方法
KR20200101192A (ko) * 2019-02-19 2020-08-27 삼성전자주식회사 의도되지 않은 사용자 입력의 수신을 방지하는 전자 장치 및 전자 장치의 동작 방법
KR20200126315A (ko) * 2019-04-29 2020-11-06 일진머티리얼즈 주식회사 폴더블 디바이스의 두 몸체부의 사이각 측정 방법 및 이를 위한 장치
KR20200138931A (ko) 2019-06-03 2020-12-11 삼성전자주식회사 플렉서블 전자 장치 및 그의 동작 방법
CN110266880A (zh) * 2019-06-17 2019-09-20 珠海格力电器股份有限公司 折叠屏的显示控制方法及折叠屏终端
CN110308855A (zh) * 2019-06-28 2019-10-08 华为技术有限公司 一种基于可折叠终端的交互操作方法和装置
WO2021054715A1 (ko) * 2019-09-18 2021-03-25 일진머티리얼즈 주식회사 폴더블 디바이스의 두 몸체부의 사이각 측정 방법 및 이를 위한 장치
CN112987957A (zh) * 2019-12-17 2021-06-18 群创光电股份有限公司 电子装置
KR20220007469A (ko) * 2020-07-10 2022-01-18 삼성전자주식회사 컨텐트를 표시하기 위한 전자 장치 및 그 동작 방법
KR20220060926A (ko) * 2020-11-05 2022-05-12 삼성전자주식회사 전자 장치 및 이의 디스플레이 방법
KR20220081565A (ko) * 2020-12-09 2022-06-16 삼성전자주식회사 플렉서블 디스플레이를 포함하는 전자 장치, 그 동작 방법 및 저장 매체
KR20220100137A (ko) * 2021-01-07 2022-07-15 삼성디스플레이 주식회사 전자 장치
US11556148B2 (en) * 2021-01-21 2023-01-17 Dell Products L.P. Foldable display for an information handling system
US11513631B1 (en) * 2021-05-12 2022-11-29 Microsoft Technology Licensing, Llc Electrical noise estimation for touch-sensitive electrodes
CN116449969A (zh) * 2022-01-07 2023-07-18 华为技术有限公司 键盘套、键盘状态的控制方法、电子设备及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070229660A1 (en) * 2006-03-28 2007-10-04 Fujifilm Corporation Image recording apparatus, image recording method and image recording program
US20110122107A1 (en) * 2009-11-24 2011-05-26 Nec Access Technica, Ltd. Portable electronic display apparatus, control method of portable electronic display apparatus and control program of portable electronic display apparatus
US20110126141A1 (en) * 2008-09-08 2011-05-26 Qualcomm Incorporated Multi-panel electronic device

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7636071B2 (en) * 2005-11-30 2009-12-22 Hewlett-Packard Development Company, L.P. Providing information in a multi-screen device
US8793620B2 (en) * 2011-04-21 2014-07-29 Sony Computer Entertainment Inc. Gaze-assisted computer interface
JP5043358B2 (ja) 2006-04-04 2012-10-10 ラピスセミコンダクタ株式会社 傾斜角演算方法及び傾斜角演算装置
JP4966816B2 (ja) * 2007-10-25 2012-07-04 株式会社日立製作所 視線方向計測方法および視線方向計測装置
JP2009180846A (ja) * 2008-01-30 2009-08-13 Toshiba Corp 情報処理装置
KR20100048747A (ko) 2008-10-31 2010-05-11 한국과학기술원 안면 추적을 이용한 모바일 유저 인터페이스 장치
KR101569776B1 (ko) 2009-01-09 2015-11-19 삼성전자주식회사 접히는 표시부를 가지는 휴대 단말기 및 이의 운용 방법
US8194001B2 (en) * 2009-03-27 2012-06-05 Microsoft Corporation Mobile computer device display postures
KR101574118B1 (ko) 2009-05-22 2015-12-03 엘지전자 주식회사 이동 단말기 및 이를 이용한 그래픽사용자인터페이스 제공 방법
US8417297B2 (en) 2009-05-22 2013-04-09 Lg Electronics Inc. Mobile terminal and method of providing graphic user interface using the same
KR101560718B1 (ko) * 2009-05-29 2015-10-15 엘지전자 주식회사 이동 단말기 및 이동 단말기에서의 정보 표시 방법
JP5561769B2 (ja) * 2010-04-08 2014-07-30 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 端末装置及びプログラム
JP2012203671A (ja) * 2011-03-25 2012-10-22 Nec Casio Mobile Communications Ltd 電子機器、情報生成方法及びプログラム
JP2012247936A (ja) * 2011-05-26 2012-12-13 Sony Corp 情報処理装置、表示制御方法及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070229660A1 (en) * 2006-03-28 2007-10-04 Fujifilm Corporation Image recording apparatus, image recording method and image recording program
US20110126141A1 (en) * 2008-09-08 2011-05-26 Qualcomm Incorporated Multi-panel electronic device
US20110122107A1 (en) * 2009-11-24 2011-05-26 Nec Access Technica, Ltd. Portable electronic display apparatus, control method of portable electronic display apparatus and control program of portable electronic display apparatus

Also Published As

Publication number Publication date
EP2759902A3 (en) 2016-02-24
US20140210737A1 (en) 2014-07-31
KR20140096861A (ko) 2014-08-06
EP2759902A2 (en) 2014-07-30
EP2759902B1 (en) 2018-09-19
US9213432B2 (en) 2015-12-15

Similar Documents

Publication Publication Date Title
KR102080896B1 (ko) 모바일 장치 및 이의 구동 방법
US10942546B2 (en) Electronic device and method for processing gesture thereof
KR102243657B1 (ko) 포터블 디바이스 및 그 제어 방법
US10936011B2 (en) Information processing apparatus, information processing method, and program
KR102224478B1 (ko) 터치 센서티브 플렉서블 디스플레이 디바이스 및 그 제어 방법
JP6027328B2 (ja) ディスプレイ装置及びそのオブジェクト表示方法
US9400560B2 (en) Image display device and display control method thereof
EP3457270B1 (en) User gesture recognition
US20170293383A1 (en) Portable device and method for controlling same
KR20180031373A (ko) 전자 장치 및 그의 동작 방법
KR102483468B1 (ko) 플렉서블 표시장치
US20140300570A1 (en) Mobile information processing terminal
US20210055821A1 (en) Touchscreen Device and Method Thereof
KR20160104177A (ko) 폴더블 디스플레이 장치
JP5832339B2 (ja) 拡大縮小操作縮尺表示方法及び装置
US9524057B2 (en) Portable display device and method of controlling therefor
CN103324335A (zh) 一种控制触摸屏的方法及其电子装置
US9910542B2 (en) Touch location correction for touchscreen devices
EP3933545B1 (en) Method and apparatus for detecting a bending state of electronic device, and storage medium
KR102379635B1 (ko) 전자 장치 및 이의 제스처 처리 방법
US10019919B2 (en) Processing apparatus, command generation method and storage medium
WO2013145572A1 (en) Display control device, display control method, and program
TW201416909A (zh) 適於接觸控制及懸浮控制的觸控系統及其運作方法
KR20160148769A (ko) 공간 터치 기능을 갖는 입체 영상 표시 장치
TWI475421B (zh) 觸控指令整合方法及觸控系統

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant