KR101441735B1 - 인물로부터 풍경으로의 카메라-기반 방향 픽스 - Google Patents

인물로부터 풍경으로의 카메라-기반 방향 픽스 Download PDF

Info

Publication number
KR101441735B1
KR101441735B1 KR1020110090677A KR20110090677A KR101441735B1 KR 101441735 B1 KR101441735 B1 KR 101441735B1 KR 1020110090677 A KR1020110090677 A KR 1020110090677A KR 20110090677 A KR20110090677 A KR 20110090677A KR 101441735 B1 KR101441735 B1 KR 101441735B1
Authority
KR
South Korea
Prior art keywords
image
camera
inertial sensor
user
feature
Prior art date
Application number
KR1020110090677A
Other languages
English (en)
Other versions
KR20120026004A (ko
Inventor
고지 가디너
이-쳉 창
제이슨 루크스
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20120026004A publication Critical patent/KR20120026004A/ko
Application granted granted Critical
Publication of KR101441735B1 publication Critical patent/KR101441735B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/242Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/161Indexing scheme relating to constructional details of the monitor
    • G06F2200/1614Image rotation following screen orientation, e.g. switching from landscape to portrait mode
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/52Details of telephonic subscriber devices including functional features of a camera

Abstract

휴대용 전자 디바이스는 관성 센서에 응답하여 인물 모드와 풍경 모드 사이에서 전환 가능한 디스플레이와 카메라를 포함한다. 디스플레이 모드가 디바이스의 이동에 응답하여 전환되어야 하는 것으로 결정되는 경우에, 사용자의 얼굴과 같은, 디바이스의 사용자의 특징은 카메라에 의해 이미지화된다. 이미지화된 특징이 임계량보다 작게 디스플레이에 대하여 방향을 바꾸면, 디스플레이 모드의 전환이 디스에이블되고 디스플레이는 그 현재 모드를 유지한다. 다른 실시예가 또한 설명되고 청구된다.

Description

인물로부터 풍경으로의 카메라-기반 방향 픽스{CAMERA-BASED ORIENTATION FIX FROM PORTRAIT TO LANDSCAPE}
본 발명은 일반적으로 휴대용 핸드헬드 전자 디바이스들을 위한 디스플레이의 분야에 관한 것으로, 보다 상세하게는 사용자의 감지된 방향의 함수로서 인물 모드(portrait mode)와 풍경 모드(landscape mode) 사이에서 전환되는 디스플레이에 관한 것이다.
모바일 전화기, e-북 리더, 태블릿 컴퓨터 등과 같은 휴대용 데이터 및 미디어 디스플레이 디바이스들은 통상적으로 "인물" 방향을 갖는 장방형 디스플레이 스크린들을 갖는다. 종종, "풍경" 방향으로 콘텐츠를 뷰잉하는 것이 바람직하다. 이는 디스플레이 스크린을 90° 회전시키며 풍경 프리젠테이션(또는 풍경 디스플레이 모드)을 선택함으로써 달성될 수 있다. 수동 선택이 제공될 수 있지만, 다수의 디바이스들은 현재 관성 센서들을 가져 디바이스들의 회전이 감지되는 경우에 풍경 프리젠테이션을 자동으로 선택한다.
몇몇 상황에 있어서, 휴대용 디바이스의 사용자는 이 디바이스가 회전하는 경우에 디스플레이 모드의 변경을 원하지 않을 수 있다. 예를 들어, 사용자는 똑바로 앉아 있으면서 이메일 메시지들을 판독하거나 게임을 플레이하는 것을 시작할 수 있지만, 그 다음에 계속해서 이 디바이스를 사용하면서 눕는 것을 결정할 수 있다. 이러한 상황에서 사용자는 디스플레이 모드의 변경을 원하지 않는데, 그 이유는 디스플레이 스크린에 대한 사용자의 눈의 상대적인 방향이 변경되지 않았기 때문이다. 관성 센서를 오버라이드하기 위해 수동 디스플레이 모드 선택이 제공될 수 있지만, 이는 문제점에 대한 적절한 해결책이 아니다.
본 발명의 일 실시예는 사용자 얼굴과 관련하여 디바이스의 디스플레이를 안정화하기 위한, 휴대용 전자 디바이스의 동작 모드이다. 휴대용 전자 디바이스는 관성 센서에 응답하여 인물 모드와 풍경 모드 사이에서 전환 가능한 디스플레이 모드를 갖는 디스플레이 스크린과 카메라를 갖는다. 디스플레이 모드가 디바이스의 이동에 응답하여 전환되어야 하는 것으로 결정되는 경우에, 사용자 얼굴과 같은 디바이스의 사용자 특징(feature)은 카메라에 의해 이미지화된다. 이미지화된 특징이 임계량보다 작게 디바이스에 대하여 방향을 바꾸면, 디스플레이 모드로의 전환이 디스에이블되어, 디스플레이 모드가 그 현재 모드를 유지하게 된다.
상기 요약은 본 발명의 모든 양태의 목록을 망라하는 것은 아니다. 본 발명은 다음 상세한 설명에 개시되고 본 출원과 함께 제출된 청구범위에서 특별히 지적된 양태 뿐만 아니라, 상기 요약된 여러 양태들의 모든 적절한 조합으로부터 실시될 수 있는 모든 시스템과 방법을 포함한다. 그러한 조합은 상기 요약에서 구체적으로 언급되지 않은 특정한 이점을 갖는다.
본 발명의 실시예들은, 동일 참조번호들이 동일 엘리먼트들을 나타내는 첨부 도면에서 제한이 아니라 예로서 예시된다. 본 개시물에서의 본 발명의 "일" 또는 "하나의" 실시예에 대한 언급은 반드시 동일한 실시예에 대한 것은 아니며, 이들은 적어도 하나를 의미한다는 것에 유의해야 한다.
도 1a 내지 도 1c는 본 발명의 일 실시예에 따라 선택된 인물 디스플레이 모드 및 풍경 디스플레이 모드를 갖는 디스플레이를 도시한다.
도 2는 본 발명의 일 실시예에 따른 디스플레이 모드 선택 프로세스의 기능 흐름도이다.
도 3은 본 발명의 실시예들이 실시될 수 있는 전자 디바이스의 기능 블록도이다.
이 설명 전체에 걸쳐, 설명을 목적으로, 본 발명의 완전한 이해를 제공하기 위해서 다수의 특정 상세가 기술된다. 그러나, 이들 특정 상세의 일부 없이 본 발명이 실시될 수 있다는 것은 당업자에게 자명할 것이다. 다른 경우에, 본 발명의 실시예들의 기반 원리들을 모호하게 하는 것을 회피하기 위해서 잘 알려진 구조들 및 디바이스들은 블록도로 도시된다.
Apple Inc.에 의한 iPod™ 및 iPhone™ 다기능 디바이스들과 같은 휴대용 핸드헬드 전자 디바이스들은 사진, 비디오, 문서, 웹 콘텐츠 및 다른 미디어를 뷰잉하기 위한 디스플레이 스크린을 갖는다. 이러한 타입의 디바이스(10으로 표시됨)가 도 1a에 도시되어 있다. 통상적으로, 디스플레이 스크린(12)은, 이 스크린 상의 객체들이 도 1a에 도시된 바와 같이 "인물" 디스플레이 모드로 디스플레이되도록 디바이스의 정상 방향에서 폭보다 큰 높이를 갖도록 구성된다. 디바이스(10)가 이러한 방향으로 유지되고 있지만, 텍스트 및 다른 콘텐츠는 사용자(20)의 눈의 수평 방향과 일치하는 수평으로 디스플레이된다. 많은 유사한 디바이스에 흔히 있는 경우이지만, 디바이스(10)는 디바이스의 움직임 및 방향을 검출하기 위해서 빌트인 가속도계 또는 유사한 관성 센서를 갖는다. 이러한 능력 및 적합한 디스플레이 소프트웨어로, 디바이스는 90° 회전할 수 있으며, 디스플레이 스크린 상의 객체는 그 다음에 도1b에 도시된 바와 같이 "풍경" 디스플레이 모드로 프리젠테이션될 것이다. 텍스트 및 다른 콘텐츠는 수평으로 디스플레이된 상태로 유지된다.
도 1a를 참조하면, 디바이스(10)는 빌트인 전향(front-facing) 디지털 카메라(14)를 포함한다. 카메라(14)의 이미징 렌즈(110)(도 3 참조)는, 디스플레이 스크린(12)이 위치하는 디바이스(10)의 전면을 벗어나 지향된다. 보다 충분히 후술되는 바와 같이, 특정 상황에 있어서 인물 또는 풍경 디스플레이 모드의 통상의 선택을 오버라이드하기 위해서, 사용자가 디스플레이 스크린(12)을 마주 보고 있는 동안에 디바이스 사용자(20)의 이미지를 캡처하는데 카메라(14)가 사용된다. 도 1b에 보여지는 바와 같이, 디바이스(10)의 90° 회전 시의 풍경 모드의 선택은 사용자(20)의 방향에 대해 적절하다. 그러나, 도 1c에 있어서, 사용자는 누워 있으며, 사용자의 눈은 현재 도 1a 및 도 1b에서의 수평 방향에 대조적으로 대체로 수직 라인을 따라 방향 결정되어(oriented) 있다. 여기서, 도 1a와 비교하여 디바이스(10)가 90° 회전하였을 지라도 디스플레이를 인물 모드로 유지하는 것이 적절한데, 그 이유는 디스플레이된 텍스트 및 다른 콘텐츠가 사용자의 눈에 대하여 적절하게 방향 결정된 채로 유지될 것이기 때문이다.
본 발명의 일 실시예를 구현하기 위한 프로세스가 도 2에 도시되어 있다. 이 프로세스는 디바이스(10) 내의 적합하게 프로그래밍된 프로세서(예를 들어, 애플리케이션 프로세서)에 의해 수행될 수 있다. 이 프로세스는, 20에서 사용자의 얼굴에 대하여 디스플레이를 안정화시키는 휴대용 디바이스의 동작 모드의 사용자 선택으로 시작된다. 이는, 특수용도의 애플리케이션을 런칭(launching)함으로써, 수동 스위치를 누름으로써, 또는 본 기술 분야에서 공지된 다른 수단들에 의한 메뉴 선택으로 이루어질 수 있다. 이 프로세스는 특정 애플리케이션에서 자동으로 선택될 수 있다. 사용자의 얼굴의 이미지는 전면 카메라(14)로 캡쳐된 다음 22에서 분석되어 사용자의 방향에 대한 시작 기준(starting reference)을 정한다. 이는, 예를 들면, 그 시점에서의 휴대용 장치(예를 들면, 이 장치의 디스플레이 스크린)의 방향에 대하여, 이미지 평면에서의 사용자의 눈을 지나는 선의 방향을 결정함으로써 이루어질 수 있다. 후자는 장치의 기준 방향인 것으로 고려될 수 있고, 공지된 기술에 따라서, 장치 내의 관성 센서(예를 들면, 가속도계, 다축 턴 레이트 자이로(multi-axis turn rate gyro)를 이용하여 결정될 수 있다. 이미지 내의 사용자의 눈을 인식하는 것을 포함하는, 본 발명의 목적에 적합한 안면 분석 알고리즘은 또한 본 기술 분아에 공지되어 있다. 예를 들면, Apple Inc.의 iPhotoTM 애플리케이션은 사진 내의 사람의 얼굴을 식별하는 데에 안면 검출(facial detection)를 이용한다. 예를 들면, 상대적인(relative) 방향(디스플레이 스크린에 대한 사용자의 눈)은 도 1a에서와 같을 수 있고 캡처된 이미지 내의 사용자의 눈을 가로지르는 직선과 카메라 이미지 센서의 X-축 간의 계산된 각도로서 저장될 수 있다.
장치의 가속도계 또는 다른 집적 관성 센서(integrated inertial sensor)는 24에서 모니터링되어 인물 모드에서 풍경 모드로 또는 풍경 모드에서 인물 모드로 다르게 디스플레이 모드의 전환을 행할 정도로 디바이스(10)가 충분히 틸트되었을 때를 결정한다. 이는 모두 통상의 동작일 수 있다. 틸트가 이러한 동작에서 검출되면, 그 시점에서 전면 카메라로 캡처된 사용자의 얼굴의 이미지는 26에서 다시 분석되어 사용자의 방향이 마찬가지로 변경되었는지를 판정한다. 장치의 방향이 사용자의 방향에서의 대응하는 변경 없이 틸트되었다면, 디스플레이 모드는 28에서 전환된다. 한편, 사용자의 방향도 사용자의 얼굴이 디스플레이 화면에 대해 대략 동일한 방향을 유지하도록 변경된다면, 30에서 현재 디스플레이 모드가 유지된다. 다시 말하면, 사용자의 얼굴의 이미지 특징이 장치의 방향에 대하여 임계량(예를 들면, 45°와 같은 소정의 각도)보다 적게 방향을 변경하였다면, 디스플레이 모드의 전환은 디스에이블(disable)된다. 따라서, 상기 예에서는, 사용자의 눈을 가로지르는 선이 이미지 센서의 X-축의 45°내에서 유지된다면, 사용자의 방향은 디스플레이 모드를 전환시킬 정도로 변한 것이 아니다. 디바이스(10)가 소정의 방향에서 다른 방향으로(예를 들면, 가로에서 세로로, 또는 세로에서 가로로) 틸트될 때, 카메라(14)에 의해 캡처될 수 있는 복수의 사용자의 이미지가 분석되어 사용자의 특징이 얼만큼 자신의 방향을 변경하였는지에 대한 판정이 이루어질 수 있다.
도 3은 본 발명의 실시예가 구현될 수 있는 예시적인 휴대용 핸드헬드 다기능 디바이스(10)의 블록도를 도시한다. 디바이스(10)는 디바이스(10)에 연관된 동작들을 수행하기 위한 명령어들을 실행하는 프로세서(102)를 가진다. 명령어들은 메모리(104)로부터 검색될 수 있고, 실행될 때, 디바이스(10)의 각종 컴포넌트들 간의 입출력 데이터의 수신 및 조작을 제어한다. 도시되지는 않았지만, 메모리(104)는 프로세서(102)에 의해 실행되는 운영 체제 프로그램을 저장할 수 있고, 하나 이상의 애플리케이션 프로그램이 운영 체제 상위에서 실행되어 특정 기능들을 수행하기 위하여 호출된다. 디스플레이 스크린(106)은 디바이스(10)의 사용자가 디바이스(10)에서 실행되는 각종 애플리케이션 프로그램과 상호작용(interact with)하도록 해주는 GUI(graphical user interface)를 디스플레이한다. GUI는 스크린(106) 상에 애플리케이션 프로그램, 파일, 또는 이들과 관련된 명령을 나타내는 아이콘 또는 그래픽 이미지를 디스플레이한다. 이들은 윈도우, 필드, 대화 상자, 메뉴, 버튼, 커서, 스크롤바 등을 포함할 수 있다. 사용자는 이들 그래픽 이미지 또는 객체로부터 그 관련된 기능들을 개시하기 위한 선택을 할 수 있다.
일 실시예에서, 스크린(106)은 데이터를 외부 세계로부터 디바이스(10)로 전달하기 위한 입력 장치로서도 동작하는 터치 스크린이다. 이 입력은, 예를 들면, 스크린(106)의 표면을 사용자의 손가락으로 터치함으로써 수신되지만, 디바이스(10)의 물리적 버튼을 통해서도 수신될 수 있다.
디바이스(10)의 카메라 기능(또는 도 1의 카메라(14))은 다음의 컴포넌트들에 의해 인에이블링될 수 있다. 하나 이상의 고체 이미지 센서(108)가 디바이스(10)에 내장되고 이들 각각은 개개의 렌즈(110)를 포함하는 광학 시스템의 초점면에 위치될 수 있다. 카메라의 뷰 필드(field of view) 내의 장면의 광학 이미지가 이미지 센서(108) 상에 형성되고, 센서(108)는 추후 메모리(104)에 저장될 픽셀들로 구성되는 디지털 이미지 또는 사진 형태로 장면을 캡처함으로써 응답한다. 이미지 센서(108)는 이미지가 캡처되는 방식을 제어하기 위하여 이용가능한 몇 가지 옵션들을 가지는 고체 이미지 센서 칩을 포함할 수 있다.
디바이스(10)는 반드시 디지털 카메라 모드에서만 동작하는 것은 아니고, 모바일 음성 및/또는 데이터 전자통신 모드에서도 동작할 수 있다. 이들은 다음의 컴포넌트들에 의하여 인에이블된다. RF 회로(114)에 의해 구동되고 감지되는 집적 안테나(112)가 근처의 기지국(도시 생략)으로부터 셀룰러 네트워크 통신 신호를 송수신하는 데에 이용된다. 프로세서(102)에 의해 실행되는 모바일폰 애플리케이션은 사용자에게 스크린(106) 상의, 통화 및 종료 버튼들을 포함한 가상 전화 키패드와 같은 모바일폰 옵션들을 제시한다. 모바일폰 애플리케이션은 또한, 음성 신호를 내장형 마이크로폰(116)으로부터 RF 회로로 전달하는 동시에, 수신기 또는 이어 스피커(118)를 통하여 대화의 상대방으로부터의 음성 신호를 전달함으로써, 상위 계층(high level)에서는 통상적인 모바일폰 통화에서의 양방향 대화를 제어한다. 모바일폰 애플리케이션은 또한, 물리적 볼륨 제어(120)의 가동(actuation)을 탐지함으로써 수신기 볼륨의 사용자 선택에 응답한다. 도시되지는 않았지만, 프로세서(102)는 대화 참여자의 음성 신호를 인코딩하고 디코딩하는 것을 포함하는 셀룰러폰 통화에 관련된 셀룰러 네트워크 프로토콜 시그널링 및 디지털 오디오 신호 처리 기능 중 상당부분을 담당하는 셀룰러 기저대역 프로세서를 포함할 수 있다. 마찬가지로, 프로세서(102)는 데이터의 인코딩과 디코딩 및/또는 패킷화(packetization) 및 패킷화해지(depacketization), 하나 이상의 무선 데이터 네트워크를 통한 송수신을 담당하는 데이터 통신 프로세서를 포함할 수 있다.
디바이스(10)는, 예를 들면, 사용자가 물리적 메뉴 버튼(122)을 가동한 다음 스크린(106)의 디스플레이 장치 상의 적절한 아이콘을 선택하는 것에 응답하여, 모바일폰 모드, 디지털 카메라 모드 또는 웹 브라우징 모드와 같은 그 이용가능한 동작 모드 중 어느 것에라도 있을 수 있다. 메모리(104)에 저장된 임의의 다양한 애플리케이션 프로그램이 마찬가지로 사용자에 의해 선택될 수 있다.
디바이스(10)는 디바이스(10)의 3개의 축 방향, 즉, 위-아래 방향(Y-축), 왼쪽-오른쪽 방향(X-축), 및 앞-뒤 방향(Z-축)으로 가속도계를 탐지하는 3차원 가속도계일 수 있는 가속도계와 같은 관성 센서(124)를 포함한다. 가속도계는 X-축, Y-축 및 Z-축 방향에서의 디바이스(10)의 경사 및 움직임을 결정할 수 있게 해준다. 대안적인 실시예에서, 디바이스(10)의 Z축에 대한 회전을 검출하는 속도 자이로(rate gyro)가 이용될 수 있다. 디바이스(10)의 위치, 방향, 및/또는 이동의 판정이 가능하도록 처리하기 위해, 센서(124)에 의해 검출되는 가속도 또는 회전 속도 데이터가 프로세서(102)에 전송된다. 그 후, 이 정보는 디바이스(10)의 방향이 미리 정해진 한계치에 도달하는 경우에 인물 디스플레이 모드와 풍경 디스플레이 모드 중에서 선택하도록 처리될 수 있다.
발명의 상세한 설명으로부터 본 발명의 양태들이 소프트웨어, 하드웨어, 펌웨어, 또는 이들의 조합에 의해 적어도 부분적으로 구현될 수 있다는 것이 명백해질 것이다. 즉, 본 기법들은 ROM, 휘발성 RAM, 비휘발성 메모리, 캐쉬, 또는 원격 저장 장치 등의 메모리 내에 포함된 명령어들의 시퀀스를 실행하는 마이크로프로세서 등의 프로세서에 응답하여, 컴퓨터 시스템 또는 그 외 데이터 처리 시스템에서 실행될 수 있다. 다양한 실시예에서, 하드 와이어 회로가 소프트웨어 명령어들과 결합하여 본 발명을 구현하도록 이용될 수 있다. 따라서, 본 기법들은 하드웨어 회로 및 소프트웨어의 임의의 특정 조합, 또는 데이터 처리 시스템에 의해 실행되는 명령어들을 위한 임의의 특정 소스에 한정되는 것은 아니다. 또한, 발명의 상세한 설명 전반에 걸쳐, 설명을 간략화하기 위해 다양한 기능들 및 동작들이 소프트웨어 코드에 의해 수행되거나 또는 야기되는 것으로 기술된다. 그러나, 그러한 표현들이 의미하는 바는 상기 기능들이 마이크로프로세서 등의 프로세서에 의한 코드의 실행에 따른 결과라는 것을 당업자라면 이해할 것이다.
데이터 처리 시스템에 의한 실행 시에 그 시스템으로 하여금 본 발명의 다양한 방법들을 수행하게 하는 소프트웨어 및 데이터를 저장하기 위해 머신-판독가능 매체가 이용될 수 있다. 이 실행가능한 소프트웨어 및 데이터는, 예컨대 ROM, 휘발성 RAM, 비휘발성 메모리, 및/또는 캐쉬를 포함하는 다양한 장소에 저장될 수 있다. 이러한 소프트웨어 및/또는 데이터의 일부는 이들 저장 장치들 중 임의의 하나에 저장될 수 있다.
또한, 본 발명은 본 명세서의 동작을 수행하기 위한 장치에 관한 것이다. 이러한 장치는 요구되는 목적을 위해 특별히 구성될 수 있거나, 또는 컴퓨터 내에 저장된 컴퓨터 프로그램에 의해 선택적으로 활성화되거나 또는 재구성되는 범용 컴퓨터를 포함할 수 있다. 이러한 컴퓨터 프로그램은 머신-판독가능 매체에 저장되거나 또는 전송될 수 있다. 머신-판독가능 매체는 머신(예컨대, 컴퓨터, 네트워크 디바이스, PDA(personal digital assistant), 제작 툴, 하나 이상의 프로세서의 세트를 갖는 임의의 디바이스 등)에 의해 액세스 가능한 형태의 정보를 제공(즉, 저장 및/또는 전송)하는 임의의 메카니즘을 포함한다. 예를 들어, 머신-판독가능 매체는 머신-판독가능 저장 매체(이에 한정되지 않음)(예컨대, 플로피 디스크, 광학 디스크, CD-ROM, 및 자기-광학 디스크, ROM(read-only memory), RAM(random access memory), EPROM, EEPROM, 플래시 메모리, 자기 또는 광학 카드, 또는 전자 명령어들을 저장하는 데 적합한 임의 타입의 매체), 또는 임의 타입의 전기적, 광학적, 음성적 또는 그 외 형태의 전파 신호들(예컨대, 반송파, 적외선 신호, 디지털 신호 등)(이에 한정되지 않음) 등의 머신-판독가능 전송 매체와 같은 기록가능한/기록가능하지 않은 매체를 포함한다.
또한, 본 명세서에서 기술되는 다양한 실시예들은 각종 데이터 처리 시스템에 의해 구현될 수 있다는 것이 이해될 것이다. 예를 들어, 이러한 데이터 처리 시스템은 셀룰러 폰 또는 PDA 또는 엔터테인먼트 시스템 또는 미디어 플레이어(예컨대, iPod) 또는 가전 등을 포함할 수 있으며, 이들의 각각은 본 발명의 실시예들 중 하나 이상을 구현하는 데 이용될 수 있다.
전술한 상세한 설명 전반에 걸쳐, "하나의 실시예", "일 실시예", "예시적인 실시예" 등의 언급은 기술된 실시예가 특별한 특징, 구조, 또는 특성을 포함할 수 있지만, 모든 실시예가 그 특별한 특징, 구조, 또는 특성을 반드시 포함할 필요는 없다는 것을 나타낸다. 또한, 이러한 문구들이 동일한 실시예를 반드시 지칭하는 것은 아니다. 특별한 특징, 구조, 또는 특성이 일 실시예와 연계하여 기술되는 경우, 명시적으로 기술되었는지의 여부에 관계없이 그러한 특징, 구조, 또는 특성의 다른 실시예들과의 연계성은 당업자의 지식 범위 내에 있다. 본 명세서에 기술된 구조 및 실시예들에서 다양한 변경들이 본 발명의 이론 범위 내에서 행해질 수 있다. 또한, 각종 도면들에 도시된 실시예들의 특징들은 다른 도면들에 도시된 실시예들과 연계하여 이용될 수 있다.
전술한 설명 및 청구범위에서, "결합된(coupled)" 및 "연결된(connected)"이라는 용어들은 이들의 파생어와 함께 사용될 수 있다. 이들 용어들은 상호간에 동의어인 것으로 의도된 것이 아님을 이해해야 한다. 오히려, 특정 실시예들에서, "연결된"은 2개 이상의 요소들이 상호 간에 직접적인 물리적 또는 전기적으로 접촉해 있다는 것을 나타내는 데 사용될 수 있다. "결합된"은 2개 이상의 요소들이 직접적으로 물리적 또는 전기적으로 접촉해 있다는 것을 의미할 수 있다. 그러나, "결합된"은 2개 이상의 요소들이 서로 직접적으로 접촉해 있지는 않지만, 서로 협동하거나 상호작용한다는 것을 의미할 수도 있다.
전술한 상세한 설명 중 일부는 컴퓨터 메모리 내의 데이터 비트에 대한 동작들의 기호적(symbolic) 표현 및 알고리즘에 관해 제시되어 있다. 이들 알고리즘의 기술 및 표현들은 데이터 처리 분야의 당업자가 자신들의 업무의 본질을 다른 분야의 당업자에게 가장 효과적으로 전달하는 데 이용되는 수단이다. 알고리즘은 여기서 일반적으로, 원하는 결과에 이르게 하는 동작들의 일관성 있는 시퀀스인 것으로 여겨진다. 동작들은 물리량에 대한 물리적 취급을 필요로 하는 것들이다. 통상적으로, 비록 반드시는 아니더라도, 이들 양은 저장, 전달, 결합, 비교, 및 그 외의 취급이 가능한 전기 신호 또는 자기 신호의 형태를 취한다. 흔히 사용되는 용법(common usage)이라는 주된 이유로, 이들 신호들을 비트, 값, 요소, 기호, 문자, 용어, 숫자 등으로 언급하는 것이 때로는 편리하다는 것이 입증되었다.
그러나, 이들 용어들 및 유사한 용어들은 상응하는(appropriate) 물리량과 관련되어 있으며, 이들 양에 적용되는 단지 편리한 라벨에 불과하다는 것을 명심해야 한다. 전술한 논의로부터 명백한 바와 같이 특별히 달리 언급되지 않는다면, 상세한 설명 전반에 걸쳐, "처리" 또는 "컴퓨팅" 또는 "계산" 또는 "판정" 또는 "디스플레이" 등의 용어들을 사용하는 논의들은, 컴퓨터 시스템의 레지스터 및 메모리 내의 물리(전자)량으로서 표현되는 데이터를, 컴퓨터 시스템 메모리 또는 레지스터 또는 그 외 그러한 정보 저장소, 전송 장치 또는 표시 장치 내의 물리량으로서 마찬가지로 표현되는 다른 데이터로 조작 및 변환하는, 컴퓨터 시스템 또는 유사한 전자 컴퓨팅 디바이스의 액션 및 프로세스를 지칭한다.
본 명세서에 제시된 알고리즘 및 디스플레이는 임의의 특정 컴퓨터 시스템 또는 그 외 장치에 고유하게 관련되어 있는 것은 아니다. 본 명세서에서의 교시에 따라 다양한 범용 시스템이 프로그램들과 함께 이용될 수 있거나, 또는 본 방법의 동작들을 수행하기 위한 보다 특별한 장치를 구성하는 것이 편리하다는 것을 입증할 수 있다. 이들 각종 시스템에 대한 구조는 전술한 설명에 나타나 있다. 또한, 본 발명은 임의의 특정 프로그래밍 언어에 관해 기술되어 있지 않다. 본 명세서에 기술된 본 발명의 교시를 구현하기 위해 각종 프로그래밍 언어가 이용될 수 있다는 것이 이해될 것이다.
본 발명의 실시예들은 전술한 바와 같은 다양한 동작들 또는 보다 적은 동작들 또는 보다 많은 동작들 또는 본 명세서에 기술된 순서와는 상이한 순서의 동작들을 포함할 수 있다. 동작들은 범용 또는 특수 목적의 프로세서로 하여금 소정의 동작들을 수행하게 하는 머신-실행가능 명령어들로 구현될 수 있다. 대안으로, 이들 동작들은 상기 동작들을 수행하기 위한 하드 와이어 로직을 포함하는 특정 하드웨어 소자에 의해, 또는 프로그래밍된 컴퓨터 소자 및 커스텀 하드웨어 소자의 임의의 조합에 의해 수행될 수 있다.
전술한 설명 전반에 걸쳐, 설명을 목적으로, 본 발명에 대한 완벽한 이해를 제공하기 위해 수많은 특정 세부 사항들이 기술되었다. 그러나, 본 발명은 이들 특정 세부 사항의 일부가 없어도 실시될 수 있다는 것을 당업자라면 이해할 것이다. 따라서, 본 발명의 범위 및 사상은 이하 청구범위 및 그 법적 균등물에 관해 판단되어야 한다.

Claims (10)

  1. 디스플레이 모드가 관성 센서에 응답하여 인물 모드와 풍경 모드 사이에서 전환 가능한 디스플레이 스크린과 카메라를 갖는 휴대용 전자 디바이스에서 사용하는 방법으로서,
    상기 카메라로 상기 디바이스의 사용자의 특징(feature)에 대한 제1 이미지를 캡쳐(capture)하는 단계;
    상기 제1 이미지를 캡쳐한 이후에 상기 디바이스의 이동을 나타내는 상기 관성 센서의 출력에 기초하여 상기 디스플레이 모드가 전환되어야 하는 것을 결정하는 단계;
    상기 디바이스의 이동을 나타내는 상기 관성 센서의 출력에 기초하여 상기 디스플레이 모드가 전환되어야 하는 것을 결정하는 것에 응답하여 상기 카메라로 상기 디바이스의 상기 사용자의 상기 특징에 대한 제2 이미지를 캡쳐하는 단계; 및
    상기 제1 이미지의 특징과 비교하여 상기 제2 이미지의 특징이 상기 디바이스에 대하여 임계량보다 작게 방향을 바꾸는 경우에 상기 관성 센서의 출력에 기초하여 결정된 상기 디스플레이 모드의 전환을 디스에이블하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서, 이미지화된 상기 특징은 상기 사용자의 얼굴 부분을 포함하는 방법.
  3. 제1항에 있어서, 상기 카메라의 이미징 렌즈와 상기 디스플레이 스크린은 모두 상기 디바이스의 정면에 배치되는 방법.
  4. 휴대용 전자 디바이스로서,
    관성 센서;
    디스플레이 모드가 인물 모드와 풍경 모드 사이에서 전환 가능한 디스플레이;
    상기 디스플레이 모드가 상기 관성 센서에 의해 감지된 상기 디바이스의 이동에 응답하여 전환되어야 하는 것을 결정하는 프로세서; 및
    상기 디바이스의 사용자의 특징의 이미지들을 생성하는 카메라
    를 포함하고,
    상기 프로세서는 상기 관성 센서, 상기 디스플레이 및 상기 카메라를 제어 하여,
    상기 카메라로 상기 디바이스의 사용자의 특징에 대한 제1 이미지를 캡쳐하고,
    상기 제1 이미지를 캡쳐한 이후에 상기 디바이스의 이동을 나타내는 상기 관성 센서의 출력에 기초하여 상기 디스플레이 모드가 전환되어야 하는 것을 결정하고,
    상기 디바이스의 이동을 나타내는 상기 관성 센서의 출력에 기초하여 상기 디스플레이 모드가 전환되어야 하는 것을 결정하는 것에 응답하여 상기 카메라로 상기 디바이스의 상기 사용자의 상기 특징에 대한 제2 이미지를 캡쳐하고,
    상기 제1 이미지의 특징과 비교하여 상기 제2 이미지의 특징이 상기 디바이스에 대하여 임계량보다 작게 방향을 바꾸는 경우에 상기 관성 센서의 출력에 기초하여 결정된 상기 디스플레이 모드의 전환을 디스에이블
    하도록 구성되어 있는 휴대용 전자 디바이스.
  5. 제4항에 있어서, 상기 카메라와 상기 디스플레이는 모두 상기 디바이스의 정면에 배치되는 휴대용 전자 디바이스.
  6. 제4항에 있어서, 상기 관성 센서는 가속도계를 포함하는 휴대용 전자 디바이스.
  7. 제4항에 있어서, 셀룰러 네트워크 통신 신호들을 송신하고 수신하는 회로를 더 포함하는 휴대용 전자 디바이스.
  8. 프로그램 명령어들을 포함하는 컴퓨터 판독가능 기록매체로서, 상기 프로그램 명령어들이 프로세서에 의해 실행되는 경우에 방법을 수행하고, 상기 방법은,
    휴대용 전자 디바이스의 카메라로 상기 디바이스의 사용자의 특징에 대한 제1 이미지를 캡쳐하는 단계;
    상기 제1 이미지를 캡쳐한 이후에 상기 디바이스의 이동을 나타내는 상기 디바이스의 관성 센서의 출력에 기초하여 상기 디바이스의 디스플레이 모드가 인물 모드와 풍경 모드 사이에서 전환되어야 하는 것을 결정하는 단계;
    상기 디바이스의 이동을 나타내는 상기 관성 센서의 출력에 기초하여 상기 디스플레이 모드가 전환되어야 하는 것을 결정하는 것에 응답하여 상기 카메라로 상기 사용자의 상기 특징에 대한 제2 이미지를 캡쳐하는 단계; 및
    상기 제1 이미지의 특징과 비교하여 상기 제2 이미지의 특징이 상기 디바이스에 대하여 임계량보다 작게 방향을 바꾸는 경우에 상기 관성 센서의 출력에 기초하여 결정된 상기 디스플레이 모드의 전환을 디스에이블하는 단계
    를 포함하는 컴퓨터 판독가능 기록매체.
  9. 제8항에 있어서, 이미지화된 상기 특징은 상기 사용자의 얼굴인 컴퓨터 판독가능 기록매체.
  10. 제8항에 있어서, 상기 카메라와 상기 디스플레이 스크린은 모두 상기 디바이스의 정면에 배치되는 컴퓨터 판독가능 기록매체.
KR1020110090677A 2010-09-08 2011-09-07 인물로부터 풍경으로의 카메라-기반 방향 픽스 KR101441735B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/877,821 US8593558B2 (en) 2010-09-08 2010-09-08 Camera-based orientation fix from portrait to landscape
US12/877,821 2010-09-08

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020140024719A Division KR101773650B1 (ko) 2010-09-08 2014-02-28 인물로부터 풍경으로의 카메라-기반 방향 픽스

Publications (2)

Publication Number Publication Date
KR20120026004A KR20120026004A (ko) 2012-03-16
KR101441735B1 true KR101441735B1 (ko) 2014-09-17

Family

ID=44534114

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020110090677A KR101441735B1 (ko) 2010-09-08 2011-09-07 인물로부터 풍경으로의 카메라-기반 방향 픽스
KR1020140024719A KR101773650B1 (ko) 2010-09-08 2014-02-28 인물로부터 풍경으로의 카메라-기반 방향 픽스

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020140024719A KR101773650B1 (ko) 2010-09-08 2014-02-28 인물로부터 풍경으로의 카메라-기반 방향 픽스

Country Status (10)

Country Link
US (3) US8593558B2 (ko)
EP (2) EP3115868B1 (ko)
JP (2) JP5411903B2 (ko)
KR (2) KR101441735B1 (ko)
CN (2) CN104503541A (ko)
GB (1) GB2483547B (ko)
HK (1) HK1168169A1 (ko)
NL (1) NL2007365C2 (ko)
TW (3) TWI621072B (ko)
WO (1) WO2012033708A1 (ko)

Families Citing this family (83)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9740341B1 (en) 2009-02-26 2017-08-22 Amazon Technologies, Inc. Capacitive sensing with interpolating force-sensitive resistor array
US10180746B1 (en) 2009-02-26 2019-01-15 Amazon Technologies, Inc. Hardware enabled interpolating sensor and display
US9785272B1 (en) 2009-07-31 2017-10-10 Amazon Technologies, Inc. Touch distinction
US9244562B1 (en) 2009-07-31 2016-01-26 Amazon Technologies, Inc. Gestures and touches on force-sensitive input devices
JP5397081B2 (ja) * 2009-08-12 2014-01-22 富士通モバイルコミュニケーションズ株式会社 携帯端末
US8810524B1 (en) 2009-11-20 2014-08-19 Amazon Technologies, Inc. Two-sided touch sensor
US8593558B2 (en) * 2010-09-08 2013-11-26 Apple Inc. Camera-based orientation fix from portrait to landscape
CN102934157B (zh) * 2011-03-04 2016-02-03 松下电器产业株式会社 显示装置及显示方向切换方法
EP2499962B1 (en) * 2011-03-18 2015-09-09 SensoMotoric Instruments Gesellschaft für innovative Sensorik mbH Optical measuring device and method for capturing at least one parameter of at least one eye wherein an illumination characteristic is adjustable
JP5659901B2 (ja) 2011-03-25 2015-01-28 ブラザー工業株式会社 画像処理プログラム、情報処理端末装置および情報処理端末装置の制御方法
KR101818573B1 (ko) 2011-07-07 2018-01-15 삼성전자 주식회사 얼굴 인식을 이용한 보기모드 표시 방법 및 장치
US20130019201A1 (en) * 2011-07-11 2013-01-17 Microsoft Corporation Menu Configuration
JP5704001B2 (ja) * 2011-07-13 2015-04-22 株式会社Jvcケンウッド タッチパネル操作装置、タッチパネル操作装置の制御方法およびプログラム
WO2013022073A1 (ja) * 2011-08-10 2013-02-14 株式会社ニコン 電子機器
JP5861395B2 (ja) 2011-11-02 2016-02-16 リコーイメージング株式会社 携帯機器
US8971574B2 (en) * 2011-11-22 2015-03-03 Ulsee Inc. Orientation correction method for electronic device used to perform facial recognition and electronic device thereof
US9851811B2 (en) * 2012-02-20 2017-12-26 Beijing Lenovo Software Ltd. Electronic device and method for controlling the same
EP2820576A4 (en) * 2012-02-29 2015-11-18 Nokia Technologies Oy METHOD AND DEVICE FOR PRESENTING OBJECTS AT A USER INTERFACE
JP2013197625A (ja) * 2012-03-15 2013-09-30 Omron Corp 端末、表示画面描画方向補正方法、プログラム、及びコンピュータ読み取り可能な記録媒体
CN103376893A (zh) * 2012-04-25 2013-10-30 华为终端有限公司 显示画面的呈现方法及终端
EP2662748B1 (en) * 2012-05-09 2018-09-26 BlackBerry Limited A display system with image sensor based display orientation
TW201403454A (zh) * 2012-07-05 2014-01-16 Asustek Comp Inc 顯示畫面旋轉的方法及系統
US10890965B2 (en) 2012-08-15 2021-01-12 Ebay Inc. Display orientation adjustment using facial landmark information
US20140055339A1 (en) * 2012-08-22 2014-02-27 David Stanasolovich Adaptive visual output based on motion compensation of a mobile device
KR102053361B1 (ko) * 2012-08-28 2020-01-08 삼성전자주식회사 화면 회전을 적응적으로 수행하기 위한 방법 및 그 전자 장치
KR101404380B1 (ko) * 2012-09-24 2014-06-09 주식회사 팬택 모바일 디바이스 및 모바일 디바이스의 화면 방향 전환 방법
US8818420B2 (en) 2012-09-28 2014-08-26 Intel Corporation Rotation-tolerant devices and schemes for pedestrian-dead-reckoning (PDR) location determination
JP2014102668A (ja) * 2012-11-20 2014-06-05 Toshiba Corp 表示装置
EP2743797A1 (en) 2012-12-13 2014-06-18 Tobii Technology AB Rotation of visual content on a display unit
EP2760222A1 (en) * 2013-01-29 2014-07-30 QNX Software Systems Limited Sound field reproduction
US9426573B2 (en) 2013-01-29 2016-08-23 2236008 Ontario Inc. Sound field encoder
EP2760223B1 (en) * 2013-01-29 2019-07-24 2236008 Ontario Inc. Sound field encoder
US9741150B2 (en) 2013-07-25 2017-08-22 Duelight Llc Systems and methods for displaying representative images
US9094576B1 (en) 2013-03-12 2015-07-28 Amazon Technologies, Inc. Rendered audiovisual communication
US20140267006A1 (en) * 2013-03-15 2014-09-18 Giuseppe Raffa Automatic device display orientation detection
JP5736528B2 (ja) * 2013-03-29 2015-06-17 楽天株式会社 端末装置、端末装置の制御方法、プログラム、及び情報記憶媒体
WO2014155748A1 (ja) * 2013-03-29 2014-10-02 楽天株式会社 端末装置、端末装置の制御方法、プログラム、及び情報記憶媒体
US10126904B2 (en) 2013-05-09 2018-11-13 Amazon Technologies, Inc. Mobile device gestures
US9417689B1 (en) * 2013-05-17 2016-08-16 Amazon Technologies, Inc. Robust device motion detection
US9160923B1 (en) * 2013-07-15 2015-10-13 Amazon Technologies, Inc. Method and system for dynamic information display using optical data
JP2015026297A (ja) * 2013-07-29 2015-02-05 京セラ株式会社 携帯端末ならびに表示方向制御プログラムおよび方法
US11199906B1 (en) 2013-09-04 2021-12-14 Amazon Technologies, Inc. Global user input management
CN104598136B (zh) * 2013-10-31 2018-07-31 纬创资通(昆山)有限公司 移动装置及移动装置的显示画面旋转方法
US20150288798A1 (en) * 2014-04-02 2015-10-08 Robert Wightman View-through application for texting
US9363426B2 (en) 2014-05-29 2016-06-07 International Business Machines Corporation Automatic camera selection based on device orientation
TWI600322B (zh) 2014-09-02 2017-09-21 蘋果公司 用於操作具有整合式相機之電子器件之方法及相關電子器件,以及非暫時性電腦可讀取儲存媒體
KR102328823B1 (ko) 2014-11-12 2021-11-19 삼성전자 주식회사 화면 내 빈 영역 활용 방법 및 장치
CN104539836A (zh) * 2014-11-25 2015-04-22 深圳市金立通信设备有限公司 一种终端
CN104536559A (zh) * 2014-11-25 2015-04-22 深圳市金立通信设备有限公司 一种终端控制方法
US10088866B2 (en) * 2015-03-18 2018-10-02 Motorola Mobility Llc Controlling the orientation of a device display based on usage context
KR102337177B1 (ko) * 2015-04-21 2021-12-08 삼성전자주식회사 기능 제어 방법 및 그 방법을 처리하는 전자 장치
US9900518B2 (en) * 2015-06-20 2018-02-20 Apple Inc. Multifunction physical button
CN105607796A (zh) * 2015-09-25 2016-05-25 宇龙计算机通信科技(深圳)有限公司 解锁界面显示方法、解锁界面显示装置和终端
US10620701B2 (en) 2016-02-11 2020-04-14 Wipro Limited Method and system for improving application ergonomics in a hand-held device
CN107450716A (zh) * 2016-05-31 2017-12-08 北京京东尚科信息技术有限公司 屏幕显示控制方法以及控制装置
DK201670595A1 (en) * 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
US10009536B2 (en) 2016-06-12 2018-06-26 Apple Inc. Applying a simulated optical effect based on data received from multiple camera sensors
CN106210205B (zh) * 2016-08-31 2019-10-18 Oppo广东移动通信有限公司 显示屏组件及移动终端
US10560565B2 (en) * 2017-02-15 2020-02-11 Samsung Electronics Co., Ltd. Electronic device and operating method thereof
US20190026120A1 (en) * 2017-07-21 2019-01-24 International Business Machines Corporation Customizing mobile device operation based on touch points
JP6991768B2 (ja) * 2017-07-28 2022-01-13 キヤノン株式会社 表示制御装置および表示制御方法
NO344671B1 (en) 2017-12-21 2020-03-02 Elliptic Laboratories As Contextual display
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
JP2019168999A (ja) * 2018-03-23 2019-10-03 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
US10706822B2 (en) * 2018-03-28 2020-07-07 Lenovo (Singapore) Pte. Ltd. Device configuration using orientation cues
CN110316088B (zh) * 2018-03-30 2023-01-10 比亚迪股份有限公司 显示装置和车辆
CN108875557B (zh) * 2018-04-25 2020-12-18 北京旷视科技有限公司 用于人证核验的方法、装置、系统及计算机存储介质
US10664047B2 (en) * 2018-05-17 2020-05-26 International Business Machines Corporation Displaying visually aligned content of a mobile device
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11119638B2 (en) 2018-09-28 2021-09-14 Apple Inc. Using face detection to update user interface orientation
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US10764511B1 (en) * 2019-03-27 2020-09-01 Lenovo (Singapore) Pte. Ltd. Image version selection based on device orientation
CN111868665A (zh) * 2019-04-18 2020-10-30 南京东屋电气有限公司 一种便携式电子设备及其使用方法
CN110049190A (zh) * 2019-04-18 2019-07-23 南京东屋电气有限公司 便携式移动设备、控制方法、程序及其存储介质
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
CN116209974A (zh) 2020-09-25 2023-06-02 苹果公司 用于导航用户界面的方法
WO2022236784A1 (en) * 2021-05-13 2022-11-17 Citrix Systems, Inc. Smart screen rotation based on facial analysis
CN114125148B (zh) * 2022-01-11 2022-06-24 荣耀终端有限公司 电子设备运行模式的控制方法、电子设备及可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040201595A1 (en) 2003-04-11 2004-10-14 Microsoft Corporation Self-orienting display
KR20040107890A (ko) * 2003-06-14 2004-12-23 엘지전자 주식회사 휴대폰의 영상 기울기 제어 방법
JP2005100084A (ja) 2003-09-25 2005-04-14 Toshiba Corp 画像処理装置及び方法
US20100066763A1 (en) * 2008-09-12 2010-03-18 Gesturetek, Inc. Orienting displayed elements relative to a user

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020033836A1 (en) * 2000-06-06 2002-03-21 Smith Scott R. Device and method for changing the orientation and configuration of a display of an electronic device
US7079707B2 (en) * 2001-07-20 2006-07-18 Hewlett-Packard Development Company, L.P. System and method for horizon correction within images
JP3864776B2 (ja) * 2001-12-14 2007-01-10 コニカミノルタビジネステクノロジーズ株式会社 画像形成装置
US20040017506A1 (en) * 2002-07-26 2004-01-29 Livingston Kris R. Camera having camera orientation sensing capability
US6845338B1 (en) 2003-02-25 2005-01-18 Symbol Technologies, Inc. Telemetric contextually based spatial audio system integrated into a mobile terminal wireless system
KR100538948B1 (ko) * 2003-08-11 2005-12-27 삼성전자주식회사 적응적 이미지의 표시가 가능한 휴대용 단말기의디스플레이 장치
JP4290100B2 (ja) 2003-09-29 2009-07-01 キヤノン株式会社 撮像装置及びその制御方法
JP2005266968A (ja) * 2004-03-16 2005-09-29 Toshiba Corp 電子機器
US7054552B2 (en) * 2004-06-25 2006-05-30 Nokia Corporation Vertical and horizontal pictures taken without camera rotation
US7138979B2 (en) 2004-08-27 2006-11-21 Motorola, Inc. Device orientation based input signal generation
KR101129382B1 (ko) * 2004-11-16 2012-03-26 삼성전자주식회사 이미지 회전 장치 및 방법
US20060222264A1 (en) * 2005-03-31 2006-10-05 Siemens Ag Method for vertically orienting a face shown in a picture
JP2006301906A (ja) * 2005-04-20 2006-11-02 Nec Corp カメラ付携帯電話端末、カメラ付携帯電話端末操作方法、及びカメラ付携帯電話端末操作プログラム
KR100753397B1 (ko) * 2006-04-04 2007-08-30 삼성전자주식회사 이동 단말기에서 화면 자동 온/오프 제어 장치 및 방법
US7724296B2 (en) 2006-06-21 2010-05-25 Sony Ericsson Mobile Communications Ab Device and method for adjusting image orientation
US7593627B2 (en) * 2006-08-18 2009-09-22 Sony Ericsson Mobile Communications Ab Angle correction for camera
US8244068B2 (en) * 2007-03-28 2012-08-14 Sony Ericsson Mobile Communications Ab Device and method for adjusting orientation of a data representation displayed on a display
TW201025993A (en) * 2007-04-24 2010-07-01 Kuo-Ching Chiang Digital image capturing device
US7742783B2 (en) * 2007-05-10 2010-06-22 Virgin Mobile Usa, L.P. Symmetric softkeys on a mobile electronic device
US8068121B2 (en) * 2007-06-29 2011-11-29 Microsoft Corporation Manipulation of graphical objects on a display or a proxy device
US8237656B2 (en) * 2007-07-06 2012-08-07 Microsoft Corporation Multi-axis motion-based remote control
TW200913685A (en) * 2007-09-07 2009-03-16 Hon Hai Prec Ind Co Ltd Imaging device and image rectifying method of the same
EP2065783B1 (en) * 2007-11-30 2010-01-13 Telefonaktiebolaget LM Ericsson (publ) A portable electronic apparatus having more than one display area, and a method of controlling a user interface thereof
EP2083276B1 (en) * 2008-01-22 2014-10-29 STMicroelectronics Srl Method and device for detecting anomalous events for an electronic apparatus, in particular a portable apparatus
US8217964B2 (en) * 2008-02-14 2012-07-10 Nokia Corporation Information presentation based on display screen orientation
WO2009114967A1 (zh) * 2008-03-19 2009-09-24 东莞市步步高教育电子产品有限公司 基于移动扫描的图像处理方法及装置
KR20090101733A (ko) * 2008-03-24 2009-09-29 삼성전자주식회사 휴대 단말기 및 그의 얼굴 인식을 이용한 표시정보의 표시방법
JP2009294728A (ja) * 2008-06-02 2009-12-17 Sony Ericsson Mobilecommunications Japan Inc 表示処理装置、表示処理方法、表示処理プログラム、及び携帯端末装置
WO2010030984A1 (en) 2008-09-12 2010-03-18 Gesturetek, Inc. Orienting a displayed element relative to a user
TWI475885B (zh) * 2008-11-10 2015-03-01 Wistron Corp 背光模組控制方法及其應用
IT1392548B1 (it) * 2008-11-24 2012-03-09 St Microelectronics Rousset Dispositivo e metodo di rilevamento dell'orientazione di un apparecchio elettronico
EP2280331B1 (en) 2009-07-22 2018-10-31 BlackBerry Limited Display orientation change for wireless devices
JP2011055476A (ja) * 2009-08-06 2011-03-17 Canon Inc 表示装置
CN101989126B (zh) 2009-08-07 2015-02-25 深圳富泰宏精密工业有限公司 手持式电子装置及其屏幕画面自动旋转方法
JP5397081B2 (ja) * 2009-08-12 2014-01-22 富士通モバイルコミュニケーションズ株式会社 携帯端末
JP2011138449A (ja) * 2010-01-04 2011-07-14 Nec Corp 表示制御装置、表示装置、電子装置および表示制御方法
JP5184570B2 (ja) 2010-03-24 2013-04-17 株式会社エヌ・ティ・ティ・ドコモ 情報端末及び表示切替方法
CN101800816B (zh) * 2010-04-08 2012-10-17 华为终端有限公司 移动终端的触摸屏的横竖屏切换方法及移动终端
US20110298887A1 (en) * 2010-06-02 2011-12-08 Maglaque Chad L Apparatus Using an Accelerometer to Capture Photographic Images
US8593558B2 (en) * 2010-09-08 2013-11-26 Apple Inc. Camera-based orientation fix from portrait to landscape
US8553129B2 (en) * 2011-05-10 2013-10-08 Htc Corporation Handheld electronic device with two lens modules, dual image capturing method applying for the handheld electronic device, and computer program product for load into the handheld electronic device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040201595A1 (en) 2003-04-11 2004-10-14 Microsoft Corporation Self-orienting display
KR20040107890A (ko) * 2003-06-14 2004-12-23 엘지전자 주식회사 휴대폰의 영상 기울기 제어 방법
JP2005100084A (ja) 2003-09-25 2005-04-14 Toshiba Corp 画像処理装置及び方法
US20100066763A1 (en) * 2008-09-12 2010-03-18 Gesturetek, Inc. Orienting displayed elements relative to a user

Also Published As

Publication number Publication date
GB2483547A (en) 2012-03-14
JP5411903B2 (ja) 2014-02-12
CN104503541A (zh) 2015-04-08
NL2007365C2 (en) 2012-05-24
WO2012033708A1 (en) 2012-03-15
CN102541255A (zh) 2012-07-04
TW201224951A (en) 2012-06-16
TWI471811B (zh) 2015-02-01
US20150109511A1 (en) 2015-04-23
TW201506810A (zh) 2015-02-16
CN102541255B (zh) 2014-11-19
US8593558B2 (en) 2013-11-26
TW201631517A (zh) 2016-09-01
US8958004B2 (en) 2015-02-17
KR20140041646A (ko) 2014-04-04
EP2428864A2 (en) 2012-03-14
JP2014068355A (ja) 2014-04-17
JP2012070381A (ja) 2012-04-05
GB2483547B (en) 2013-03-13
EP3115868B1 (en) 2022-03-23
JP5904984B2 (ja) 2016-04-20
NL2007365A (en) 2012-03-12
EP3115868A1 (en) 2017-01-11
KR20120026004A (ko) 2012-03-16
EP2428864A3 (en) 2012-04-04
US20140055658A1 (en) 2014-02-27
GB201115165D0 (en) 2011-10-19
HK1168169A1 (en) 2012-12-21
TWI545507B (zh) 2016-08-11
KR101773650B1 (ko) 2017-08-31
EP2428864B1 (en) 2016-10-26
US9565365B2 (en) 2017-02-07
TWI621072B (zh) 2018-04-11
US20120057064A1 (en) 2012-03-08

Similar Documents

Publication Publication Date Title
KR101441735B1 (ko) 인물로부터 풍경으로의 카메라-기반 방향 픽스
EP2713242B1 (en) Smart screen rotation based on user orientation
JP3910541B2 (ja) 画像格納装置
WO2019129020A1 (zh) 一种摄像头自动调焦方法、存储设备及移动终端
CN114514491A (zh) 在多显示器设备上进行呼叫
KR101788496B1 (ko) 단말 및 비디오 이미지를 제어하는 장치 및 방법
EP3614239B1 (en) Electronic device control in response to finger rotation upon fingerprint sensor and corresponding methods
US11842029B2 (en) Image display method and mobile terminal
WO2015056038A1 (en) Detecting intentional rotation of a mobile device
CN107111860B (zh) 数字设备及其控制方法
US20190373171A1 (en) Electronic device, control device, method of controlling the electronic device, and storage medium
CN107613194B (zh) 一种对焦方法、移动终端及计算机可读存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170818

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180816

Year of fee payment: 5