KR20170007285A - 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 시스템 및 방법 - Google Patents

이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20170007285A
KR20170007285A KR1020167031325A KR20167031325A KR20170007285A KR 20170007285 A KR20170007285 A KR 20170007285A KR 1020167031325 A KR1020167031325 A KR 1020167031325A KR 20167031325 A KR20167031325 A KR 20167031325A KR 20170007285 A KR20170007285 A KR 20170007285A
Authority
KR
South Korea
Prior art keywords
haptic feedback
user
image capture
capture device
assist
Prior art date
Application number
KR1020167031325A
Other languages
English (en)
Other versions
KR101794842B1 (ko
Inventor
로버트 스콧 타르츠
키르크 스티븐 타일러
마크 스털링 캐스키
수잔나 아레라노
찰스 알프레드 버간
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20170007285A publication Critical patent/KR20170007285A/ko
Application granted granted Critical
Publication of KR101794842B1 publication Critical patent/KR101794842B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H04M1/72569—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H04N5/23219—
    • H04N5/23222—
    • H04N5/23293—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10141—Special mode during image acquisition
    • G06T2207/10152—Varying illumination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Abstract

이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법들, 컴퓨터-판독 가능 매체 및 장치들이 제공된다. 일부 실시예들에서, 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법은, 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스가 존재하는 환경의 주변 광 측정을 획득하는 단계를 포함한다. 상기 방법은, 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내의 하나 이상의 물체들을 검출하는 단계를 더 포함한다. 상기 방법은 또한, 이미지 캡처 디바이스를 통해, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 이미지 캡처 디바이스의 사용자에게 제공되는 방식을 변경하는 단계를 포함한다.

Description

이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 시스템 및 방법{SYSTEM AND METHOD FOR PROVIDING HAPTIC FEEDBACK TO ASSIST IN CAPTURING IMAGES}
[0001] 본 개시의 양상들은 이미지를 캡처하는 것에 관한 것이다. 더 상세하게는, 본 개시의 양상들은 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백(haptic feedback)을 제공하기 위한 시스템 및 방법에 관한 것이다.
[0002] 스마트폰들과 같은 통신 디바이스들은 오늘날의 사용자들에게 필수적인 도구가 되었다. 사용자들은 자신들의 통신 디바이스들을 자신들의 매일의 삶에서 요구되는 다른 아이템들, 예를 들면, 지갑들, 키들 등만큼 정말 중요한 것으로 고려한다. 결과적으로, 통신 디바이스들은 상이한 환경들 전체에 걸쳐 사용자에게 휴대된다. 많은 통신 디바이스들은 이미지를 캡처하기 위한 카메라 기능을 포함한다. 사용자가 전형적으로 거의 항상 자신들의 통신 디바이스를 갖고 있기 때문에, 이미지들을 캡처하기 위해 통신 디바이스를 사용하는 것의 용이성은 용이하게 명백하다. 그러나, 통신 디바이스들 상의 디스플레이들은 밝은 광과 같은 부가적인 감각 입력이 존재하는 환경들에서 사용하기에 어려울 수 있다. 이러한 환경들, 예를 들면, 실외에서 밝은 광은, 디스플레이 상에 제공되는 임의의 콘텐츠를 보는 것이 매우 어렵게 되는 정도로 통신 디바이스의 디스플레이를 "워시 아웃(wash out)"할 수 있다. 이러한 예는, 사용자가 통신 디바이스의 전방 카메라를 사용하여 자신의 "셀피(selfie)" 사진 또는 자신들의 친구들과 셀프 사진을 촬영하고자 할 때이다. 결과적으로, 많은 사용자들은 카메라를 자신들에게 겨누도록 강제되고, 적절한 품질의 이미지가 캡처될 때까지 반복적으로 캡처 버튼을 누르려고 시도한다.
[0003] 현재 해결책들은, 이미지를 캡처하기 전에, 통신 디바이스가 트리거로서 이미지 프레임 내의 시선(gaze) 또는 미소를 자동적으로 검출하는 것을 포함한다. 그러나, 이러한 해결책들은, 캡처된 이미지에 대한 요청 시에(예를 들면, 통신 디바이스 상의 버튼이 눌려짐) 카메라가 사용자의 안면을 향해 정확히 포인팅될 때에만 적절히 기능한다. 통신 디바이스의 디스플레이의 밝기를 증가시키는 것을 넘어서, 통신 디바이스 내에서 이미지를 캡처하는 동안에, 밝은 환경들을 보상하기 위한 다른 방법들에서 부족함이 존재한다. 몇몇의 다른 해결책들은, 일단 안면이 검출되면, "셀피" 이미지를 위해 자신의 안면을 센터링(centering)하는 것을 통해 들을 수 있게 사용자를 안내할 수 있는 애플리케이션을 포함한다. 그러나, 이러한 해결책은, 들을 수 있는 단서들이 최적이 아니거나(예를 들면, 골프 토너먼트 또는 결혼식), 들을 수 있는 단서들이 듣기에 어려울 수 있는(예를 들면, 음악 콘서트) 환경들을 처리하지 않는다. 따라서, 통신 디바이스의 디스플레이가 용이하게 볼 수 없는 밝은 환경에서 사용자가 이미지를 더 용이하게 캡처하도록 허용할 필요성이 존재한다.
[0004] 이미지들을 캡처하는 것을 돕기 위한 햅틱 피드백을 제공하기 위한 시스템 및 방법에 대한 특정 실시예들이 설명된다.
[0005] 본 발명의 실시예들은 환경에서 주변 광 레벨들을 결정하고, 캡처된 이미지 프레임들 내에서 하나 이상의 물체들을 검출하고, 결정된 주변 광 레벨 및 검출된 물체에 기초하여 디바이스 상의 햅틱 피드백을 동적으로 조절하도록 구성된다. 주변 광이 점진적으로 더 밝아질 때, 디바이스는 디스플레이 가시성의 손실을 보상하기 위해 햅틱 피드백을 인에이블하거나 증가시킬 수 있다. 예를 들면, 안면이 이미지 프레임(들)에서 검출될 때, 디바이스는 진동할 수 있다. 사용자가 사용자의 안면이 이미지 프레임에서 최적의 위치에 있도록 디바이스를 위치시키려고 시도하는 경우에, 사용자의 안면이 이미지 프레임의 중심에 더 가까워질 때, 디바이스는 햅틱 피드백이 제공되는 방식을 변경할 수 있다(예를 들면, 사용자의 안면이 중심에 더 가까워질 때, 디바이스는 더 빠르게 진동할 수 있음).
[0006] 햅틱 피드백 능력이 통신 디바이스에 내장될 수 있다. 통신 디바이스는 또한 터치-스크린 디스플레이를 포함할 수 있다. 햅틱 피드백 능력은 체성감각 시스템의 피부 감각 채널들을 자극하는 전기 또는 기계 신호들을 생성할 수 있다. 햅틱 피드백은, 시각 또는 청각이 신뢰할 수 없거나 현실적이지 않을 때, 개인적이고 유익한 사용자에 대한 유용한 감각 매체를 제공한다. 햅틱 피드백은 또한 특정 작업들에 대한 실감 사용자 경험들 및 디바이스 유용성을 추가로 증가시킬 수 있다. 용어 "통신 디바이스"가 느슨하게 사용되고, 그 용어가 디지털 카메라들, 캠코더들 등과 같은 디바이스들을 포함할 수 있다는 것이 인지될 수 있다.
[0007] 일부 실시예들에서, 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백(haptic feedback)을 제공하기 위한 방법은, 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스가 존재하는 환경의 주변 광 측정을 획득하는 단계를 포함한다. 상기 방법은, 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 하나 이상의 물체들을 검출하는 단계를 더 포함한다. 상기 방법은 또한, 이미지 캡처 디바이스를 통해, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 이미지 캡처 디바이스의 사용자에게 제공되는 방식을 변경하는 단계를 포함한다.
[0008] 일부 실시예들에서, 하나 이상의 물체들을 검출하는 단계는 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 안면을 검출하는 단계를 포함한다.
[0009] 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 단계는 햅틱 피드백을 인에이블하는 단계를 포함한다.
[0010] 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 단계는 제공되는 햅틱 피드백의 강도(intensity)를 증가시키는 단계를 포함한다.
[0011] 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 단계는 제공되는 햅틱 피드백의 타입을 변경하는 단계를 포함한다.
[0012] 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 단계는 햅틱 피드백이 제공되는 빈도(frequency)를 변경하는 단계 또는 햅틱 피드백이 제공되는 듀레이션을 변경하는 단계 중 적어도 하나를 포함한다.
[0013] 일부 실시예들에서, 햅틱 피드백이 제공되는 방식은, 하나 이상의 이미지 프레임들 내의 최적의 위치에 대해 검출된 물체들의, 하나 이상의 이미지 프레임들 내의 위치에 적어도 부분적으로 기초하여 변경된다.
[0014] 일부 실시예들에서, 햅틱 피드백이 제공되는 방식은, 하나 이상의 이미지 프레임들의 크기에 대해 검출된 물체들의, 하나 이상의 이미지 프레임들 내의 크기에 적어도 부분적으로 기초하여 변경된다.
[0015] 일부 실시예들에서, 햅틱 피드백은 촉각(tactile) 피드백, 진동 피드백, 정전기(electrostatic) 피드백 또는 열(thermal) 피드백 중 적어도 하나를 포함한다.
[0016] 일부 실시예들에서, 햅틱 피드백의 타입은 하나 이상의 검출된 물체들의 수량(quantity)에 적어도 부분적으로 기초한다.
[0017] 일부 실시예들에서, 획득하는 단계는 이미지 캡처 디바이스 내의 하나 이상의 주변 광 센서들을 사용하여 수행된다.
[0018] 일부 실시예들에서, 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치는 하나 이상의 이미지 프레임들을 캡처하도록 구성된 이미지 캡처 디바이스, 상기 장치가 존재하는 환경의 주변 광 측정을 획득하도록 구성된 주변 광 센서, 및 주변 광 센서 및 이미지 캡처 디바이스에 커플링된 프로세서를 포함한다. 프로세서는 하나 이상의 이미지 프레임들 내의 하나 이상의 물체들을 검출하도록 구성된다. 프로세서는 또한 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 상기 장치의 사용자에게 제공되는 방식을 변경하도록 구성된다.
[0019] 일부 실시예들에서, 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치는 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스가 존재하는 환경의 주변 광 측정을 획득하기 위한 수단을 포함한다. 상기 장치는 또한, 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 하나 이상의 물체들을 검출하기 위한 수단을 포함한다. 상기 장치는, 이미지 캡처 디바이스를 통해, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 이미지 캡처 디바이스의 사용자에게 제공되는 방식을 변경하기 위한 수단을 더 포함한다.
[0020] 일부 실시예들에서, 프로세서-판독 가능 비일시적인 매체는, 프로세서로 하여금 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스가 존재하는 환경의 주변 광 측정을 획득하게 하도록 구성된 프로세서 판독 가능 명령들을 포함한다. 명령들은 추가로 프로세서로 하여금, 이미지 캡처 디바이스를 통해, 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 하나 이상의 물체들을 검출하게 하도록 구성된다. 명령들은 추가로 프로세서로 하여금, 이미지 캡처 디바이스를 통해, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 이미지 캡처 디바이스의 사용자에게 제공되는 방식을 변경하게 하도록 구성된다.
[0021] 본 개시의 양상들은 예시로서 설명된다. 첨부 도면들에서, 동일한 참조 번호들은 동일한 엘리먼트들을 나타낸다.
[0022] 도 1은 하나 이상의 실시예들을 통합할 수 있는 통신 디바이스의 개략적인 블록도를 예시한다.
[0023] 도 2는 사용자가 밝은 환경에서 이미지를 캡처하기 위해 통신 디바이스를 동작시키는 것을 예시한다.
[0024] 도 3은 일부 실시예들에 따른, 획득된 주변 광 측정의 결과로서 통신 디바이스 상의 햅틱 피드백을 가능하게 하는 것을 예시한다.
[0025] 도 4a는 일부 실시예들에 따른, 안면(410)을 검출하는 것에 응답하여 통신 디바이스(100) 상에서 진동 기반 햅틱 피드백(430)을 제공하는 것을 예시한다.
[0026] 도 4b는 일부 실시예들에 따른, 다수의 안면들(410)을 검출하는 것에 응답하여 통신 디바이스(100) 상에서 진동 기반 햅틱 피드백(430)을 제공하는 것을 예시한다.
[0027] 도 5는 일부 실시예들에 따른, 통신 디바이스(100)의 1차 사용자를 검출한 것에 응답하여 통신 디바이스(100) 상에서 진동 기반 햅틱 피드백(430)을 제공하는 것을 예시한다.
[0028] 도 6은 일부 실시예들에 따른, 통신 디바이스를 통해 이미지를 캡처하기 위해, 진동 기반 햅틱 피드백을 사용하여, 최적의 위치로 사용자에게 지시하는 것을 예시한다.
[0029] 도 7a는 일부 실시예들에 따른, 이미지를 캡처하기 위해, 진동 기반 햅틱 피드백(430)을 사용하여, 통신 디바이스(100)를 사용자로부터 더 멀리 이동시키도록 사용자에게 지시하는 것을 예시한다.
[0030] 도 7b는 일부 실시예들에 따른, 이미지를 캡처하기 위해, 진동 기반 햅틱 피드백(430)을 사용하여, 통신 디바이스(100)를 사용자에게 더 가깝게 이동시키도록 사용자에게 지시하는 것을 예시한다.
[0031] 도 8은 통신 디바이스를 통해 이미지들을 캡처하는 것을 돕기 위한 햅틱 피드백을 제공하기 위한 예시적인 동작을 도시한 예시적인 흐름도이다.
[0032] 도 9는 하나 이상의 실시예들이 구현될 수 있는 컴퓨팅 시스템의 예를 예시한다.
[0033] 여러 예시적인 실시예들이 이제 본 명세서의 일부를 형성하는 첨부 도면들에 대하여 설명될 것이다. 본 개시의 하나 이상의 양상들이 구현될 수 있는 특정 실시예들이 이하에 설명되지만, 다른 실시예들이 사용될 수 있고, 다양한 변경들이 본 개시의 범위 또는 첨부된 청구항들의 사상으로부터 벗어나지 않고 이루어질 수 있다.
[0034] 도 1은 하나 이상의 실시예들을 통합할 수 있는 통신 디바이스(100)의 간략한 블록도를 예시한다. 통신 디바이스(100)는 프로세서(110), 디스플레이(130), 입력 디바이스(140), 스피커(150), 메모리(160), 주변 광 센서(170), 진동 모터(180), 정전기 유닛(182), 열 생성기(184) 및 컴퓨터-판독 가능 매체(190)를 포함한다.
[0035] 프로세서(110)는 통신 디바이스(100) 상에서 명령들을 수행하도록 동작 가능한 임의의 범용 프로세서일 수 있다. 프로세서(110)는 디스플레이(130), 입력 디바이스(140), 스피커(150), 메모리(160), 주변 광 센서(170), 진동 모터들(180), 정전기 유닛(182), 열 생성기(184) 및 컴퓨터-판독 가능 매체(190)를 비롯하여 통신 디바이스(100)의 다른 유닛들에 커플링된다.
[0036] 마이크로폰(120)은 사운드 입력을 전기 신호로 변환하는 임의의 디바이스일 수 있다. 마이크로폰(120)은 통신 디바이스(100)에 근접하여 사용자의 음성 또는 임의의 다른 사운드를 캡처할 수 있다.
[0037] 디스플레이(130)는 정보를 사용자에게 디스플레이하는 임의의 디바이스일 수 있다. 예들은 LCD 스크린, CRT 모니터, 또는 7-세그먼트 디스플레이를 포함할 수 있다. 일부 실시예들에서, 디스플레이(130)는 햅틱 피드백을 제공할 수 있는 터치스크린 디스플레이일 수 있다.
[0038] 입력 디바이스(140)는 사용자로부터 입력을 수용하는 임의의 디바이스일 수 있다. 예들은 키보드, 키패드, 마우스 또는 터치 입력을 포함할 수 있다.
[0039] 스피커(150)는 사운드를 사용자에게 출력하는 임의의 디바이스일 수 있다. 예들은 내장형 스피커 또는 전기 오디오 신호에 대한 응답으로 사운드를 생성하는 임의의 다른 디바이스를 포함할 수 있다.
[0040] 메모리(160)는 임의의 자기, 전자 또는 광학 메모리일 수 있다. 메모리(160)는 2 개의 메모리 모듈들, 모듈 1(162) 및 모듈 2(164)를 포함한다. 메모리(160)가 임의의 수의 메모리 모듈들을 포함할 수 있다는 것이 인지될 수 있다. 메모리(160)의 예는 동적 랜덤 액세스 메모리(DRAM)일 수 있다.
[0041] 컴퓨터-판독 가능 매체(190)는 임의의 자기, 전자, 광학 또는 다른 컴퓨터-판독 가능 저장 매체일 수 있다. 컴퓨터-판독 가능 저장 매체(190)는 광 측정 모듈(192), 이미지 캡처 모듈(194), 및 햅틱 피드백 모듈(196)을 비롯하여 코드 모듈들을 포함하는 컴퓨터-판독 가능 코드를 저장한다.
[0042] 주변 광 센서(170)는 인간이 눈과 유사한 방식으로 광 또는 밝기를 검출하도록 구성된다. 주변 광 센서(170)는 광을 전압 또는 전류로 변환할 수 있는 특정 버전의 포토다이오드이다. 주변 광 센서(170)는 350 nm 내지 1100 nm 범위의 전형적인 스펙트럼 응답을 가질 수 있다. 이로써, 주변 광 센서(170)는 통신 디바이스(100)가 존재하는 환경의 주변 광의 양을 검출할 수 있다.
[0043] 진동 모터(180)는 편심 무게(eccentric weight)에 연결된 소형 전기 모터이다. 진동 모터(180)는 통신 디바이스(100)에 관련된 이벤트 시에 진동하도록 구성된다. 진동 모터(180)에 의해 생성된 진동은, 사용자가 진동을 느끼거나 감지하거나 그렇지 않다면 알아차릴 수 있도록 통신 디바이스(100)를 진동시킬 수 있다. 진동 모터(180)가 스피커(150)에 의해 생성된 오디오 경고와 동시에 진동을 생성할 수 있다는 것이 인지될 수 있다.
[0044] 정전기 유닛(182)은 디스플레이(130)를 통해 전기 전하를 생성하도록 구성된다. 더 구체적으로, 정전기 유닛(182)은 디스플레이(130)의 표면을 통해 푸시될 수 있는 다양한 정전기장들을 생성하여, 디스플레이(130)와 상호작용(예를 들면, 터칭)할 때, 다양한 레벨들의 마찰의 느낌을 통신 디바이스(100)의 사용자에게 제공할 수 있다.
[0045] 열 생성기(184)는 통신 디바이스(100)를 통해 열을 생성하도록 구성된다. 더 구체적으로, 열 생성기(184)는, 디스플레이(130) 또는 본체의 임의의 다른 부분을 포함하여 통신 디바이스(100)의 다양한 표면들을 통해 열을 생성할 수 있다. 통신 디바이스(100)의 사용자는 열 생성기(184)에 의해 생성된 열을 느끼거나 그렇지 않다면 알아차릴 수 있다.
[0046] 카메라(186)는 통신 디바이스(100)의 본체 상에 위치된 렌즈를 통해 하나 이상의 이미지들을 캡처하도록 구성된다. 캡처된 이미지들은 스틸 이미지들 또는 비디오 이미지들일 수 있다. 카메라(186)는 이미지들을 캡처하기 위한 CMOS 이미지 센서를 포함할 수 있다. 프로세서(110) 상에서 실행되는 다양한 애플리케이션들은 이미지들을 캡처하기 위해 카메라(186)에 대한 액세스를 가질 수 있다. 이미지들이 통신 디바이스(100) 내에 실제로 저장되지 않고서, 카메라(186)가 이미지들을 계속해서 캡처할 수 있다는 것이 인지될 수 있다. 캡처된 이미지들은 또한 이미지 프레임들로 지칭될 수 있다.
[0047] 광 측정 모듈(192)은, 프로세서(110)에 의해 실행될 때, 주변 광 센서(170)에 의해 획득된 주변 광 측정을 분석하는 코드를 포함한다. 광 측정 모듈(192)이 주변 광 센서(170)를 제어하기 위한 로직을 포함할 수 있다는 것이 인지될 수 있다. 예를 들면, 주변 광 센서(170)는 광 측정 모듈(192)로부터 그렇게 하기 위한 명령 시에 주변 광 측정을 획득할 수 있다. 광 측정 모듈(192)은 또한 주변 광 센서(170)로부터 획득된 주변 광 측정을 추가로 분석할 수 있다. 예를 들면, 광 측정 모듈(192)은 획득된 광 측정과 임계량의 광을 비교하고, 비교의 결과를 햅틱 피드백 모듈(196)(아래에 설명됨)로 중계할 수 있다. 획득된 광 측정이 임계량의 광보다 더 크다면, 광의 양이 통신 디바이스(100)의 디스플레이(130)가 보기 어렵게 만들 수 있기 때문에, 광 측정 모듈(192)은 환경 조건들이 이미지들을 캡처하기에 좋지 않다고 결정할 수 있다. 일부 실시예들에서, 광 측정 모듈(192)은 미리 결정된 간격들로, 예를 들면, 10 초마다 주변 광 측정을 획득하도록 주변 광 센서(170)에 지시할 수 있다.
[0048] 이미지 캡처 모듈(194)은, 프로세서(110)에 의해 실행될 때, 하나 이상의 이미지들을 캡처하도록 카메라(186)에 지시하는 코드를 포함한다. 이미지 캡처 모듈(194)은 또한 하나 이상의 캡처된 이미지들을 저장하기 위해 메모리(160)와 인터페이스할 수 있다. 부가적으로, 이미지 캡처 모듈(194)은 카메라(186)에 의해 캡처된 이미지들의 다양한 양상들을 분석하고, 분석을 햅틱 피드백 모듈(196)(아래에 설명됨)로 중계할 수 있다. 예를 들면, 이미지 캡처 모듈(194)은 카메라(186)에 의해 캡처된 이미지 내의 물체를 검출할 수 있다. 물체는 사용자의 안면일 수 있다. 사용자의 안면을 검출할 때, 이미지 캡처 모듈(194)은 안면이 검출되었다는 정보를 햅틱 피드백 모듈(196)로 중계할 수 있다. 이미지 캡처 모듈(194)은 또한 이미지 내의 물체가 이미지 내의 최적의 위치에 있는지, 예를 들면, 물체가 이미지의 중심에 있는지를 결정할 수 있다. 또한, 이미지 캡처 모듈(194)은 또한 이미지 프레임 내의 물체가 이미지 내에서 적절한 줌 레벨에 있는지, 예를 들면, 물체가 최적의 이미지에 대해 너무 크거나 너무 작은지를 결정할 수 있다.
[0049] 햅틱 피드백 모듈(196)은, 프로세서(110)에 의해 실행될 때, 통신 디바이스(100) 상에서 햅틱 피드백을 인에이블 또는 디스에이블하는 코드를 포함한다. 햅틱 피드백 모듈(196)은 또한 통신 디바이스(100) 상의 햅틱 피드백의 타입을 변경하도록 구성된다. 햅틱 피드백의 타입을 변경하는 것은 또한 햅틱 피드백의 강도를 변경하는 것을 포함할 수 있다. 예를 들면, 획득된 주변 광 측정이 임계 광 양을 초과한다고 광 측정 모듈(192)이 결정한 것에 응답하여, 햅틱 피드백 모듈(196)은, 가혹한/밝은 조명 조건들에 있는 동안에, 통신 디바이스(100) 상의 햅틱 피드백이 카메라(186)를 통해 디바이스를 사용하여 이미지를 캡처하는 사용자를 돕는 것을 가능하게 할 수 있다. 다른 예에서, 햅틱 피드백 모듈(196)은, 일단 획득된 주변 광 측정이 임계 광 양 미만인 환경에 통신 디바이스(100)가 진입하면, 햅틱 피드백을 디스에이블할 수 있다. 또한, 햅틱 피드백 모듈(196)은 광 측정 모듈(192)의 분석에 기초하여 진동 기반 햅틱 피드백, 정전기 기반 햅틱 피드백 및/또는 열 기반 햅틱 피드백(또는 임의의 다른 타입의 햅틱 피드백) 사이에서 변경할 수 있다.
[0050] 도 2는 사용자(220)가 밝은 환경(200)에서 이미지를 캡처하기 위해 통신 디바이스(100)를 동작시키는 것을 예시한다. 이러한 예에서, 사용자(220)는 자신들의 자화상 이미지를 캡처하기 위해 통신 디바이스(100)를 사용한다. 전형적으로, 통신 디바이스(100)는 이미지를 캡처하기 위한 전방 카메라(186)를 포함하고, 이미지의 프리뷰는 사용자(220)에 의해 디스플레이(130) 상에서 보여질 수 있다. 그러나, 환경(200)은, 예를 들면, 햇빛(210)에 의해 생성된 많은 양의 주변 광을 포함한다. 그러한 경우들에서, 통신 디바이스(100)의 디스플레이(130)는 많은 양의 주변 광의 결과로서 보기에 어렵게 될 수 있고, 차례로, 사용자(220)가 자신들의 자화상 이미지를 캡처하는 것이 어렵게 된다. 때때로, 통신 디바이스(100)의 디스플레이(130)는, 전형적으로 디스플레이(130) 상에 디스플레이되는 아이콘들, 캐릭터들 및 콘텐츠(230)(이러한 경우에, 카메라 이미지의 프리뷰)가 사용자(220)에 의해 용이하게 볼 수 없는 "워시 아웃"이 될 수 있다. 도 2에 도시된 바와 같이, 통신 디바이스(100)의 디스플레이(130) 상에 디스플레이되는 콘텐츠(230)는 워시 아웃되고, 보기 어렵다. 그러나, 사용자(220)가 밝은 환경들(200)에서 통신 디바이스(100)를 통해 이미지를 캡처하기를 원할 수 있는 많은 경우들이 존재한다. 예를 들면, 사용자(220)가 실외, 실외 스포츠 이벤트에서, 밝게 빛나는 방 내부 등에 있는 동안에 자신의 통신 디바이스(100)를 통해 이미지를 캡처하기를 원하는 많은 경우들이 존재한다.
[0051] 도 2가 자신의 자화상 이미지를 캡처하는 사용자(220)를 예시하지만, 본원에 설명된 개념들이 또한 환경(200) 내의 다른 사람들, 물체들, 풍경들 등의 이미지들을 캡처하기 위해 적용된다는 것이 인지될 수 있다.
[0052] 앞서 설명된 바와 같이, 통신 디바이스(100)는 주변 광 센서(170)를 포함할 수 있다. 주변 광 센서(170)는 환경(200)의 주변 광 측정을 획득하는데 사용될 수 있다. 일부 실시예들에서, 광 측정 모듈(192)(도 1)은 미리 정의된 간격들로, 예를 들면, 5 초마다 환경(200)의 주변 광 측정을 획득하도록 주변 광 센서(170)에 지시할 수 있다. 결과적으로, 사용자(220)가 통신 디바이스(100)를 갖고 저레벨의 주변 광을 갖는 환경으로부터 고레벨의 주변 광을 갖는 환경으로 이동하면, 광 측정 모듈(192)(도 1)은, 사용자가 밝은 환경으로 이동하는 짧은 시간 내에 밝은 환경(200)의 주변 광 측정을, 주변 광 센서(170)를 통해, 획득할 수 있다.
[0053] 통신 디바이스(100)는 광 측정 모듈(192)(도 1)에 의해 획득된 주변 광 측정에 적어도 부분적으로 기초하여 사용자(220)에게 제공되는 햅틱 피드백의 타입을 변경할 수 있다. 앞서 설명된 바와 같이, 광 측정 모듈(192)(도 1)은 주변 광 측정을 획득하도록 주변 광 센서(170)에 지시할 수 있다. 광 측정 모듈(192)(도 1)은 햅틱 피드백이 사용자(220)에게 제공되는 방식이 변경되어야 하는지를 결정하기 위해 획득된 주변 광 측정을 분석할 수 있다. 햅틱 피드백이 통신 디바이스(100)에 제공되는 방식을 변경하는 것은 통신 디바이스(100) 상의 햅틱 피드백을 인에이블/디스에이블하는 것, 통신 디바이스(100) 상의 햅틱 피드백의 타입을 변경하는 것, 통신 디바이스(100) 상의 햅틱 피드백의 강도를 변경하는 것, 햅틱 피드백의 듀레이션을 변경하는 것 및/또는 통신 디바이스(100) 상의 햅틱 피드백의 빈도를 변경하는 것을 포함할 수 있다. 햅틱 피드백이 통신 디바이스에 제공되는 방식을 변경하는 것은 햅틱 피드백 모듈(196)(도 1)에 의해 실행될 수 있다.
[0054] 앞서 설명된 바와 같이, 햅틱 피드백 모듈(196)(도 1)은 통신 디바이스(100) 상의 햅틱 피드백을 인에이블 또는 디스에이블하도록 구성된다. 햅틱 피드백 모듈(196)(도 1)은 또한 통신 디바이스(100) 상에 제공되는 햅틱 피드백의 타입을 변경하고, 통신 디바이스(100) 상의 햅틱 피드백의 강도를 변경하고, 햅틱 피드백의 듀레이션을 변경하고 그리고/또는 통신 디바이스(100) 상의 햅틱 피드백의 빈도를 변경하도록 구성된다. 광 측정 모듈(192)(도 1)은 환경(200) 내의 주변 광에 관한 결정을 햅틱 피드백 모듈(196)(도 1)로 통신할 수 있다. 예를 들면, 광 측정 모듈(192)(도 1)은 획득된 주변 광 측정이 미리 정의된 임계량의 광을 초과 또는 미만인지를 햅틱 피드백 모듈(196)(도 1)로 통신할 수 있다. 이에 응답하여, 햅틱 피드백 모듈(196)(도 1)은 사용자(220)에게 제공되는 통신 디바이스(100) 상의 햅틱 피드백을 인에이블/디스에이블하거나 햅틱 피드백의 타입을 변경할 수 있다. 통신 디바이스(100)에 의해 사용자(220)에게 제공될 수 있는 햅틱 피드백의 타입들은, 이에 제한되지 않지만, 진동 기반 햅틱 피드백, 정전기 기반 햅틱 피드백, 열 기반 햅틱 피드백 또는 이들 중 임의의 것의 조합을 포함한다.
[0055] 예를 들면, 사용자(220)가 주변 실내 광 하에서, 예를 들면, 거실에서 이미지를 캡처하기 위해 통신 디바이스(100)를 사용하기 시작하면, 사용자(220)는 디스플레이(130)를 보기 위해 시력에 가장 많이 의존하고, 거실 내의 주변 광이 비정상적으로 밝지 않다면, 디바이스와 상호작용한다. 통신 디바이스(100)와 상호작용하는 것은 카메라 이미지의 프리뷰를 포함하여 디스플레이(130) 상에서 콘텐츠(230)를 보는 것, 및/또는 버튼들을 인게이징(engaging)하거나 디스플레이(130) 상에 디스플레이된 사용자 인터페이스와 상호작용하고 해석하는 것을 포함할 수 있다. 사용자 인터페이스는 현재 카메라 설정들에 관한 텍스처 정보를 포함할 수 있고 및/또는 카메라 설정들을 변경하기 위한 버튼들을 포함할 수 있다. 광 측정 모듈(192)은 거실 내의 주변 광 레벨이 낮다(또는 미리 정의된 광 임계치 미만)고 결정할 수 있고, 따라서 햅틱 피드백 모듈(196)(도 1)은 햅틱 피드백이 사용자에게 제공되는 방식을 변경하지 않을 수 있다. 다시 말해서, 햅틱 피드백 모듈(196)(도 1)은, 자신이 디스에이블되면 햅틱 피드백을 인에이블하지 않을 수 있거나, 자신이 인에이블되면 햅틱 피드백의 타입을 변경하지 않을 수 있다.
[0056] 이어서, 사용자가 통신 디바이스(100)를 갖고서 더 밝은 주변 광을 갖는 환경, 예를 들면, 실외로 이동하면, 광 측정 모듈(192)(도 1)은, 주변 광 센서(170)의 다음에 획득된 주변 광 측정 시에, 주변 광 측정이 미리 정의된 임계량의 광을 초과한다는 것을 결정하여, 디스플레이(130)가 사용자(220)에 의해 보기 어려울 수 있다는 것을 표시할 수 있다. 따라서, 햅틱 피드백 모듈(196)(도 1)은, 자신이 이미 인에이블되지 않는다면 통신 디바이스(100) 상의 햅틱 피드백을 인에이블할 수 있거나, 자신이 이미지 인에이블되면 제공되는 햅틱 피드백의 타입을 변경할 수 있다. 다수의 미리 정의된 임계량들의 광이 존재할 수 있다는 것이 인지될 수 있다. 예를 들면, 햅틱 피드백 모듈(196)(도 1)로 하여금 통신 디바이스(100) 상의 햅틱 피드백을 인에이블하게 할 60,000 lx(평방 미터 당 루멘)의 임계치, 및 햅틱 피드백 모듈(196)(도 1)로 하여금 햅틱 피드백 타입을 정전기 피드백으로 변경하게 할 80,000 lx의 임계치가 존재할 수 있다.
[0057] 통신 디바이스(100)에 의해 제공되는 햅틱 피드백은, 밝은 환경(200)에서 있는 동안에, 통신 디바이스(100)를 통해 이미지들을 캡처하기 위한 다양한 상호작용들에 사용될 수 있다. 예를 들면, 카메라 애플리케이션을 개방하고, 카메라 프롬프트(prompt)를 확인응답하고, 카메라 설정을 변경하고, 프레이밍(framing) 명령을 제공하고, 사용자에게 성공적인 이미지 캡처를 알리는 것 등을 위해 햅틱 피드백이 제공될 수 있다.
[0058] 일 예에서, 사용자(220)는 통신 디바이스(100)의 전방 카메라(186)를 사용하여 자신들의 자화상 이미지를 캡처하기를 원할 수 있다. 통신 디바이스(100)는, 미리 정의된 임계량의 광보다 더 큰 획득된 주변 광 측정에 응답하여, 디스플레이(130)가 밝은 환경에서 보기 어려울 수 있다는 것을 사용자(220)에게 알릴 수 있다. 일부 실시예들에서, 경보는 오디오 경보일 수 있다. 예를 들면, 통신 디바이스(100)는 스피커(150)(도 1)를 통해 다음의 문구: "높은 주변 광이 검출됨, 햅틱이 인에이블됨"을 재생할 수 있다. 통신 디바이스(100)가 햅틱 피드백이 인에이블되었다는 것을 사용자(220)에게 표시하는 임의의 다른 문구를 재생할 수 있다는 것이 인지될 수 있다. 다른 실시예들에서, 경보는 햅틱 피드백 기반 경보일 수 있다. 예를 들면, 통신 디바이스(100)는, 자신이 햅틱 피드백이 인에이블되는 모드에 진입한다는 것을 사용자에게 알리기 위해 진동할 수 있다. 대안적으로, 통신 디바이스(100)는 햅틱 피드백을 인에이블 또는 변경하기 전에 어떠한 표시도 제공하지 않을 수 있다. 또한, 통신 디바이스(100)는 잘못된 입력을 회피하기 위해 개략적인 동작 모드 ― 디바이스의 기본 카메라 기능만이 사용자(220)에게 이용 가능함 ― 에 진입할 수 있다. 기본 카메라 기능은 이미지들을 캡처하기 위한 능력만을 포함할 수 있고, 사용자가 임의의 카메라 설정들을 변경하는 것을 방지할 수 있다. 개략적인 모드는 사용자(220)에 의한 더 긴 상호작용, 예를 들면, 정상보다 더 긴 기간 동안에 디스플레이(130) 상에 도시된 사용자 인터페이스 내의 셔터 버튼(250)을 누르는 것을 요구할 수 있다. 일단 사용자(220)가 이미지를 성공적으로 캡처하면, 통신 디바이스(100)는 이미지가 성공적으로 캡처되었다는 것을 표시하는 햅틱 피드백 이벤트를 트리거링할 수 있다. 햅틱 피드백은 진동 기반 햅틱 피드백, 정전기 기반 햅틱 피드백, 열 기반 햅틱 피드백, 위의 것 중 임의의 것의 조합, 또는 임의의 다른 타입의 햅틱 피드백을 포함할 수 있다. 사용자가 밝은 환경(200)으로 인해 이미지를 캡처하는 동안에 통신 디바이스의 디스플레이(130)를 명확히 볼 수 없기 때문에, 사용자(220)는 이미지를 캡처하기 위해 사용자 인터페이스 내의 셔터 버튼(250)을 찾기 위해 사용자의 극단, 예를 들면, 손가락을 통해 디스플레이(130)를 더듬거릴 수 있다. 일단 사용자(220)가 성공적으로 사용자 인터페이스 내의 셔터 버튼(250)을 성공적으로 터치하면, 디바이스는 사용자가 프롬프트를 성공적으로 확인응답하였다는 것을 사용자(220)에게 표시하기 위한 햅틱 피드백을 다시 트리거링할 수 있다. 예를 들면, 통신 디바이스(100)는 사용자가 셔터 버튼(250)을 성공적으로 터치하였다는 것을 사용자(220)에게 통지하기 위해 셔터 버튼(250) 주변 영역에서 정전기 피드백을 트리거링할 수 있다. 또한, 디스플레이(130) 상의 사용자 인터페이스 내의 셔터 버튼(250)을 성공적으로 터치할 때, 통신 디바이스(100)는 그것을 사용자에게 알리기 위해 스피커(150)(도 1)를 통해 오디오 메시지를 재생할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는 또한 오디오 메시지와 함께 진동할 수 있다.
[0059] 일부 실시예들에서, 이미지 캡처 모듈(194)(도 1)은 사용자로부터의 임의의 수동 입력 없이 이미지를 자동적으로 캡처하고 저장할 수 있다(아래에 더 상세히 설명됨).
[0060] 일부 실시예들에서, 통신 디바이스(100)에 의해 제공되는 햅틱 피드백은 이미지를 캡처하는데 있어서 사용자의 진행에 기초하여 상이할 수 있다. 예를 들면, 제공되는 햅틱 피드백은, 사용자가 이미지를 캡처할 준비가 되었는지 여부를 통신 디바이스(100)가 결정하는지에 기초하여 상이할 수 있다. 예를 들면, 사용자(220)가 이미지를 위해 적절히 위치되지 않는다면, 이미지 캡처 모듈(194)(도 1)에 의해 결정된 바와 같이, 통신 디바이스(100)는 이미지 내에서 자신을 적절히 위치시키도록 사용자를 돕고 지시하기 위한 햅틱 피드백을 제공할 수 있다.
[0061] 일부 실시예들에서, 통신 디바이스(100)는, 획득된 주변 광 측정이 미리 정의된 임계량의 광을 초과한다고 광 측정 모듈(192)이 결정할 때, 디스플레이(130)를 디스에이블할 수 있다.
[0062] 도 3은 일부 실시예들에 따른, 획득된 주변 광 측정의 결과로서 통신 디바이스(100) 상의 햅틱 피드백을 인에이블하는 것을 예시한다. 앞서 논의된 바와 같이, 통신 디바이스(100)는, 미리 정의된 양의 주변 광보다 더 큰 획득된 주변 광 측정에 응답하여 디스플레이(130)가 밝은 환경에서 이미지를 캡처하기 위해 보기에 어려울 수 있다는 것을 사용자에게 경보할 수 있다. 일부 실시예들에서, 경보는 오디오 경보(310)일 수 있다. 예를 들면, 통신 디바이스(100)는 스피커(150)를 통해 다음의 오디오 경보(310): "초과한 광이 검출됨, 햅틱 피드백이 인에이블됨"을 재생할 수 있다. 오디오 경보(310)는 또한 통신 디바이스(100) 상의 일정 타입의 햅틱 피드백과 동시에 재생될 수 있다.
[0063] 일부 실시예들에서, 통신 디바이스(100)는 디스플레이(130) 상에 텍스트 경보(320)를 디스플레이함으로써 사용자에게 경보할 수 있다. 텍스트 경보(320)는 디스플레이(130)의 사용자 인터페이스 내의 드롭-다운 통지(drop-down notification)로서 디스플레이될 수 있다. 텍스트 경보(320)가 또한 다수의 상이한 방식들로 디스플레이(130)의 사용자 인터페이스 내에 도시될 수 있다는 것이 인지될 수 있다. 예를 들면, 텍스트 경보(320)는 또한 팝-업 통지로서 디스플레이될 수 있다. 일부 실시예들에서, 텍스트 경보(320)는, 사용자가 밝은 환경에서 텍스트 경보(320)의 캐릭터들을 적절히 볼 수 있을 가능성을 최대화하기 위해 디스플레이(130)의 최대 밝기 레벨로 또는 특정 폰트 컬러들로 디스플레이될 수 있다. 텍스트 경보(320)는 또한 통신 디바이스(100) 상의 일정 타입의 햅틱 피드백과 동시에 디스플레이될 수 있다.
[0064] 도 3에 도시된 바와 같이, 디스플레이(130) 상에 도시된 콘텐츠(230)(카메라 이미지의 프리뷰)는 워시 아웃되어 보기 어렵다. 오디오 경보(310) 및/또는 텍스트 경보(320)는 시각 채널의 손실을 갖는 경우 사용자(220)(도 2)를 도울 수 있다. 통신 디바이스(100)가 오디오 경보(310) 및 텍스트 경보(320) 둘 모두를 동시에 사용하여 사용자에게 경보할 수 있다는 것이 인지될 수 있다. 일부 실시예들에서, 통신 디바이스(100)는 또한 오디오 메시지와 함께 진동할 수 있다.
[0065] 일단 주변 광 센서(170)가 미리 정의된 임계량의 광 미만인 주변 광 측정을 획득하였다고 광 측정 모듈(192)(도 1)이 결정하면, 햅틱 피드백은 디스에이블되거나 변경될 수 있다.
[0066] 도 4a는 일부 실시예들에 따른, 안면(410)을 검출하는 것에 응답하여 통신 디바이스(100) 상의 진동 기반 햅틱 피드백(430)을 제공하는 것을 예시한다. 앞서 설명된 바와 같이, 진동 기반 햅틱 피드백(430)은 통신 디바이스(100) 상에 제공될 수 있는 많은 타입들의 햅틱 피드백들 중 하나이다. 진동 기반 햅틱 피드백(430)은 환경에 존재하는 주변 광이 임계량의 광을 초과한다고 광 측정 모듈(192)(도 1)이 결정할 때 인에이블될 수 있다. 일부 실시예들에서, 진동 기반 햅틱 피드백(430)은 이미 인에이블될 수 있거나, 피드백의 강도는 광 측정 모듈(192)(도 1)에 의한 결정 시에 기초하여 변경될 수 있다.
[0067] 도 4a에 도시된 바와 같이, 디스플레이(130) 상에 도시된 콘텐츠(230)(카메라 이미지의 프리뷰)는 워시 아웃되어 보기 어렵다. 통신 디바이스(100)가 카메라(186)의 이미지 프레임 내에서 안면을 검출한 것에 응답하여, 진동 기반 햅틱 피드백(430)이 제공될 수 있다. 이미지를 캡처 및 저장하기 전에, 이미지 캡처 모듈(194)(도 1)은 카메라(186)로부터의 현재 이미지 프레임들을 분석할 수 있다. 이미지 캡처 모듈(194)(도 1)이 이미지 프레임 내의 안면을 검출하면, 통신 디바이스(100)는 사용자의 안면이 이미지 프레임 내에서 검출되었다는 것을 사용자에게 통지하기 위해 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 진동 기반 햅틱 피드백(430)은 그러한 것을 사용자에게 통지하기 위해 진동 모터(180)(도 1)를 사용함으로써 제공될 수 있다. 진동 기반 햅틱 피드백(430)은 사용자가 이미지 프레임에서 적절히 검출되기 때문에 사용자가 이미지를 계속해서 캡처할 수 있다는 것을 사용자에게 표시할 수 있다.
[0068] 사용자가 다량의 주변 광을 인해 디스플레이(130)를 명확히 볼 수 없기 때문에, 사용자는 이미지를 캡처하기 위해 사용자 인터페이스 내의 셔터 버튼(250)을 누르려고 시도하는데 있어서 디스플레이(130) 주변에서 자신들의 손가락을 랜덤하게 이동시킬 수 있다. 통신 디바이스(100)는 사용자가 셔터 버튼(250)을 정확히 누른 것을 표시하는 햅틱 피드백을 제공할 수 있다. 예를 들면, 일단 사용자가 디스플레이(130)의 사용자 인터페이스 내의 셔터 버튼(250) 위로 사용자의 손가락을 이동시키면, 통신 디바이스(100)는 사용자가 셔터 버튼(250)을 누름으로써 이미지를 정확히 캡처되었다는 것을 사용자에게 표시하기 위한 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 일부 실시예들에서, 하나보다 더 많은 버튼(421)이 존재하는 경우에, 통신 디바이스(100)는 각각의 버튼 상호작용마다 상이한 타입 또는 강도의 햅틱 피드백을 제공할 수 있다. 예를 들면, 셔터 버튼(250) 및 예를 들면, 플래시 인에이블 버튼(미도시) 선택을 나타내는 2 개의 버튼들이 사용자에게 제공되면, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 진동 기반 햅틱 피드백(430)의 3 개의 빠른 인스턴스들 및 플래시 인에이블 버튼 선택을 위한 진동 기반 햅틱 피드백(430)의 2 개의 빠른 인스턴스들을 제공할 수 있다. 대안적으로, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 고강도 진동 기반 햅틱 피드백(430) 및 플래시 인에이블 버튼 선택을 위한 저강도 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 이러한 예가 의미를 전달하기 위해 햅틱 피드백의 듀레이션을 사용하는 것을 예시한다는 것이 인지될 수 있다.
[0069] 일부 실시예들에서, 이미지 캡처 모듈(194)(도 1)은 카메라(186)의 이미지 프레임 내에서 안면(410)을 검출할 때 이미지를 자동적으로 캡처 및 저장할 수 있다. 프레임을 검출하는 것과 이미지를 캡처하는 것 사이에 지연, 예를 들면, 2 초가 존재할 수 있다. 통신 디바이스(100)는, 일단 이미지가 캡처되었다면, 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 이미지를 자동적으로 캡처함으로써, 통신 디바이스(100)는, 디스플레이(130) 상의 콘텐츠(230)가 보기 어려울 수 있는 밝은 환경에 있는 동안에, 이미지들을 캡처하는데 있어서 사용자에게 도움을 제공한다.
[0070] 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 오디오 피드백(450)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 "이미지 프레임 내에서 안면이 검출됨"을 상술하는 오디오 문구를 스피커(150)를 통해 재생할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 텍스트 피드백(440)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 디스플레이(130)의 사용자 인터페이스 내에서 "안면이 검출됨"을 디스플레이할 수 있다. 텍스트 피드백(440)은 가장 높은 밝기 설정으로 디스플레이될 수 있다. 부가적으로, 통신 디바이스(100)는 검출된 안면(410) 주변에 윤곽 박스(420)를 디스플레이할 수 있다. 일부 실시예들에서, 하나보다 더 많은 타입의 햅틱 피드백은 통신 디바이스(100)에 의해 동시에 제공될 수 있다. 예를 들면, 진동 기반 햅틱 피드백(430)은 정전기 기반 햅틱 피드백 및/또는 열 기반 햅틱 피드백과 동시에 제공될 수 있다.
[0071] 주변 광 센서(170)가 미리 정의된 임계량의 광 미만인 주변 광 측정을 획득하였다고 광 측정 모듈(192)(도 1)이 결정하면, 햅틱 피드백은 햅틱 피드백 모듈(196)(도 1)에 의해 디스에이블 또는 변경될 수 있다. 예를 들면, 60,000 lx의 주변 광 측정은 햅틱 피드백 모듈(196)(도 1)에 의한 동작을 트리거링할 수 있다.
[0072] 도 4b는 일부 실시예들에 따른, 다수의 안면들(410)을 검출한 것에 응답하여 통신 디바이스(100) 상의 진동 기반 햅틱 피드백(430)을 제공하는 것을 예시한다. 앞서 설명된 바와 같이, 통신 디바이스(100)는 카메라(186)의 이미지 프레임 내에서 안면(410)을 검출한 것에 응답하여 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 안면 검출은 이미지 캡처 모듈(194)(도 1)에 의해 수행될 수 있다. 도 4b에서, 사용자는 도 4a에서와 같이 자신의 사진보다는 3 명의 다른 개인들의 사진을 촬영하고 있다. 통신 디바이스(100)는 또한 카메라(186)의 이미지 프레임 내에서 다수의 안면들(410)을 검출할 수 있다. 각각의 검출된 안면에 대해, 통신 디바이스(100)는 또한 각각의 안면(410) 주변에 윤곽 박스를 디스플레이할 수 있다. 예를 들면, 도 4b에 도시된 바와 같이, 각각의 검출된 안면(410) 주변의 윤곽 박스(420)에 의해 도시된 바와 같이, 3 개의 안면들(410)이 검출된다. 진동 기반 햅틱 피드백(430)은, 다른 개인들이 이미지 프레임에서 적절히 검출되기 때문에, 사용자가 이미지를 계속해서 캡처할 수 있다는 것을 사용자에게 표시할 수 있다. 이러한 피드백 방법은, 디스플레이(130)가 밝은 환경의 결과로서 보기에 어렵게 될 때 이미지를 캡처하는데 있어서 사용자를 도울 수 있다.
[0073] 통신 디바이스(100)는 검출된 안면들(410)의 수에 기초하여 증가된 듀레이션의 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 예를 들면, 이미지 캡처 모듈(194)(도 1)이 3 개의 안면들을 검출할 때, 햅틱 피드백 모듈(196)(도 1)은 3 개의 인스턴스들의 진동 기반 햅틱 피드백(430)(각각의 검출된 안면(410)에 대해 하나의 인스턴스)를 제공할 수 있다. 이러한 예는 의미를 전달하기 위해 햅틱 피드백 듀레이션을 사용하는 것을 예시한다. 다른 실시예들에서, 통신 디바이스(100)는, 다수의(또는 하나보다 더 많은) 안면들(410)이 이미지 프레임 내에서 검출되면 상이한 타입의 햅틱 피드백을 제공할 수 있다. 예를 들면, 이미지 캡처 모듈(194)(도 1)이 3 개의 안면들을 검출할 때, 햅틱 피드백 모듈(196)(도 1)은 진동 기반 햅틱 피드백(430) 대신에 열 기반 햅틱 피드백을 제공하여, 하나보다 더 많은 안면(410)이 이미지 프레임 내에서 검출되었다는 것을 사용자에게 표시할 수 있다.
[0074] 일부 실시예들에서, 이미지 캡처 모듈(194)(도 1)은 카메라(186)의 이미지 프레임 내에서 다수의 안면들(410)을 검출할 때 이미지를 자동적으로 캡처 및 저장할 수 있다. 프레임을 검출하는 것과 이미지를 캡처하는 것 사이에 지연, 예를 들면, 2초가 존재할 수 있다. 통신 디바이스(100)는, 일단 이미지가 캡처되었다면, 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 이미지를 자동적으로 캡처함으로써, 통신 디바이스(100)는, 디스플레이(130) 상의 콘텐츠(230)가 보기에 어려울 수 있는 밝은 환경에 있는 동안에 이미지들을 캡처하는데 있어서 사용자에게 도움을 제공한다.
[0075] 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 오디오 피드백(450)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 "이미지 프레임 내에서 다수의 안면들이 검출됨"을 상술하는 오디오 문구를 스피커(150)를 통해 재생할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 텍스트 피드백(440)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 "다수의 안면들이 검출됨"을 디스플레이(130)의 사용자 인터페이스 내에 디스플레이할 수 있다. 텍스트 피드백(440)은 가장 높은 밝기 설정으로 디스플레이될 수 있다. 부가적으로, 통신 디바이스(100)는 다수의 검출된 안면들(410) 주변에 다수의 윤곽 박스들(420)을 디스플레이할 수 있다. 일부 실시예들에서, 하나보다 더 많은 타입의 햅틱 피드백이 통신 디바이스(100)에 의해 동시에 제공될 수 있다. 예를 들면, 진동 기반 햅틱 피드백(430)은 정전기 기반 햅틱 피드백 및/또는 열 기반 햅틱 피드백과 동시에 제공될 수 있다. 일부 실시예들에서, 텍스트 피드백(440) 또는 오디오 피드백(450)은 이미지 프레임 내에서 검출된 안면들(410)의 수를 표시할 수 있다.
[0076] 일단 주변 광 센서(170)가 미리 정의된 임계량의 광 미만인 주변 광 측정을 획득하였다고 광 측정 모듈(192)(도 1)이 결정하면, 햅틱 피드백 모듈(196)(도 1)에 의해 햅틱 피드백이 디스에이블 또는 변경될 수 있다.
[0077] 도 5는 일부 실시예들에 따른, 통신 디바이스(100)의 1차 사용자를 검출한 것에 응답하여 통신 디바이스(100) 상의 진동 기반 햅틱 피드백(430)을 제공하는 것을 예시한다. 더 구체적으로, 도 5는 사용자가 다른 개인들의 이미지를 캡처하는 것을 예시하고, 이들 중 하나는 통신 디바이스의 1차 사용자이다. 통신 디바이스의 운영 시스템을 통해 개인이 통신 디바이스의 1차 사용자로서 등록될 수 있다. 등록 동안에, 1차 사용자의 안면의 이미지는 미래의 안면 인식을 위해 카메라(186)를 사용하여 캡처될 수 있다.
[0078] 도 5에 도시된 바와 같이, 디스플레이(130) 상에 도시된 콘텐츠(230)(카메라 이미지의 프리뷰)가 워시 아웃되어 보기에 어렵다. 통신 디바이스(100)가 카메라(186)의 이미지 프레임 내에서 통신 디바이스(100)의 1차 사용자를 검출한 것에 응답하여 진동 기반 햅틱 피드백(430)이 제공될 수 있다. 이미지를 캡처 및 저장하기 전에, 이미지 캡처 모듈(194)(도 1)은 카메라(186)로부터의 현재 이미지 프레임들을 분석할 수 있다. 이미지 캡처 모듈(194)(도 1)이 이미지 프레임 내에서 통신 디바이스(100)의 1차 사용자를 검출하면, 통신 디바이스(100)는 1차 사용자가 이미지 프레임 내에서 검출되었다고 사용자에게 통지하기 위해 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 진동 기반 햅틱 피드백(430)은 그러한 것을 사용자에게 통지하기 위해 진동 모터(180)(도 1)를 사용함으로써 제공될 수 있다.
[0079] 사용자가 다량의 주변 광으로 인해 디스플레이(130)를 명확히 볼 수 없기 때문에, 사용자는 이미지를 캡처하기 위해 사용자 인터페이스 내의 셔터 버튼(250)을 누르려고 시도하는데 있어서 디스플레이(130) 주변에서 자신들의 손가락을 랜덤하게 이동시킬 수 있다. 통신 디바이스(100)는, 사용자가 셔터 버튼(250)을 정확히 누른 것을 표시하는 햅틱 피드백을 제공할 수 있다. 예를 들면, 일단 사용자가 디스플레이(130)의 사용자 인터페이스 내의 셔터 버튼(250) 위로 사용자의 손가락을 이동시키면, 통신 디바이스(100)는 사용자가 셔터 버튼(250)을 누름으로써 이미지를 정확히 캡처하였다는 것을 사용자에게 표시하기 위한 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 다른 예에서, 통신 디바이스(100)는, 셔터 버튼(250)을 누르기 전에 사용자가 셔터 버튼(250)을 느끼도록 허용하기 위해 정전기 기반 햅틱 피드백을 제공할 수 있다. 일부 실시예들에서, 하나보다 더 많은 버튼(421)이 존재하는 경우에, 통신 디바이스(100)는 각각의 버튼 상호작용마다 상이한 타입 또는 듀레이션의 햅틱 피드백을 제공할 수 있다. 예를 들면, 셔터 버튼(250) 및 예를 들면, 플래시 인에이블 버튼(미도시) 선택을 나타내는 2 개의 버튼들이 사용자에게 제공되면, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 진동 기반 햅틱 피드백(430)의 3 개의 빠른 인스턴스들 및 플래시 인에이블 버튼 선택을 위한 진동 기반 햅틱 피드백(430)의 2 개의 빠른 인스턴스들을 제공할 수 있다. 대안적으로, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 높은 듀레이션 진동 기반 햅틱 피드백(430) 및 플래시 인에이블 버튼 선택을 위한 낮은 듀레이션 진동 기반 햅틱 피드백(430)을 제공할 수 있다.
[0080] 일부 실시예들에서, 이미지 캡처 모듈(194)(도 1)은 카메라(186)의 이미지 프레임 내에서 1차 사용자의 안면을 검출할 때 이미지를 자동적으로 캡처 및 저장할 수 있다. 프레임을 검출하는 것과 이미지를 캡처하는 것 사이에 지연, 예를 들면, 2초가 존재할 수 있다. 통신 디바이스(100)는, 일단 이미지가 캡처되었다면, 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 이미지를 자동적으로 캡처함으로써, 통신 디바이스(100)는, 디스플레이(130) 상의 콘텐츠(230)가 보기 어려울 수 있는 밝은 환경에 있는 동안에, 이미지들을 캡처하는데 있어서 사용자에게 도움을 제공한다.
[0081] 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 오디오 피드백(450)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 "1차 사용자가 검출됨"을 상술하는 오디오 문구를 스피커(150)를 통해 재생할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 텍스트 피드백(440)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 디스플레이(130)의 사용자 인터페이스 내에서 "1차 사용자가 검출됨"을 디스플레이할 수 있다. 텍스트 피드백(440)은 가장 높은 밝기 설정으로 디스플레이될 수 있다. 부가적으로, 통신 디바이스(100)는 1차 사용자의 안면 주변에 윤곽 박스(420)를 디스플레이할 수 있다. 일부 실시예들에서, 하나보다 더 많은 타입의 햅틱 피드백은 통신 디바이스(100)에 의해 동시에 제공될 수 있다. 예를 들면, 진동 기반 햅틱 피드백(430)은 정전기 기반 햅틱 피드백 및/또는 열 기반 햅틱 피드백과 동시에 제공될 수 있다.
[0082] 일단 주변 광 센서(170)가 미리 정의된 임계량의 광 미만인 주변 광 측정을 획득하였다고 광 측정 모듈(192)(도 1)이 결정하면, 햅틱 피드백은 햅틱 피드백 모듈(196)(도 1)에 의해 디스에이블 또는 변경될 수 있다.
[0083] 도 6은 일부 실시예들에 따른, 진동 기반 햅틱 피드백(430)을 사용하여 통신 디바이스(100)를 통해 이미지를 캡처하기 위한 최적의 위치로 사용자를 지시하는 것을 예시한다. 앞서 설명된 바와 같이, 진동 기반 햅틱 피드백(430)은 통신 디바이스(100) 상에서 제공될 수 있는 많은 타입들의 햅틱 피드백 중 하나이다. 진동 기반 햅틱 피드백(430)은 환경에 존재하는 주변 광이 임계량의 광을 초과한다고 광 측정 모듈(192)(도 1)이 결정할 때 인에이블될 수 있다. 일부 실시예들에서, 진동 기반 햅틱 피드백(430)은 이미 인에이블될 수 있거나, 피드백의 강도는 광 측정 모듈(192)(도 1)에 의한 결정 시에 기초하여 변경될 수 있다.
[0084] 도 6에 도시된 바와 같이, 디스플레이(130) 상에 도시된 콘텐츠(230)(카메라 이미지의 프리뷰)는 워시 아웃되어 보기 어렵다. "셀피" 이미지에 대해, 이미지를 캡처하기 전에, 이미지 프레임 내의 위치에 자신들을 위치시키기 위해 사용자를 돕기 위해 진동 기반 햅틱 피드백(430)이 제공될 수 있다. 이미지 프레임 내의 최적의 위치는 미리 정의될 수 있거나, 이미지 프레임 내에서 검출된 다른 물체들에 기초할 수 있다. 예를 들면, 이미지 프레임 내의 최적의 위치는 간단히 이미지 프레임의 중심일 수 있거나, 이미지 프레임 내의 다른 경치, 예를 들면, 숲을 가리지 않는 이미지 프레임의 측면 상에 있을 수 있다. 이미지를 캡처 및 저장하기 전에, 이미지 캡처 모듈(194)(도 1)은 카메라(186)로부터의 현재 이미지 프레임들을 분석할 수 있다. 이미지 캡처 모듈(194)(도 1)이 이미지 프레임 내의 안면을 검출하면, 통신 디바이스(100)는 이미지 프레임 내의 최적의 위치로 자신들을 이동시키도록 사용자에게 지시하기 위해 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 진동 기반 햅틱 피드백(430)은 그러한 것을 사용자에게 통지하기 위해 진동 모터(180)(도 1)를 사용함으로써 제공될 수 있다. 부가적으로, 이미지 프레임 내의 최적의 위치는 디스플레이(130)의 사용자 인터페이스 내에서 디스플레이되는 윤곽 박스(420)에 의해 윤곽이 표시될 수 있다.
[0085] 예를 들면, 사용자가 전방 카메라(186)를 사용하여 "셀피" 이미지를 캡처하는 것을 시도하기 위해 통신 디바이스(100)를 자신들을 향해 지시하고, 사용자가 (이미지 캡처 모듈(194)(도 1)에 의해) 이미지 프레임 내의 좌측으로 너무 멀리 있는 것으로 결정되면, 통신 디바이스(100)의 우측이 진동할 수 있다. 마찬가지로, 사용자가 이미지 내의 우측으로 너무 멀리 있는 것으로 결정되면, 통신 디바이스(100)의 좌측이 진동할 수 있다. 다른 실시예들에서, 이것은 통신 디바이스(100)의 디스플레이를 따라 장착된 다수의 작동기들을 사용하여 달성될 수 있다. 다른 예에서, 사용자가 이미지 프레임 내의 우측 상의 한 그룹의 나무들을 막고 있는 것으로 결정되면, 사용자를 좌측으로 이동시키기 위한 명령으로서 통신 디바이스(100)의 좌측이 진동할 수 있다. 진동 기반 햅틱 피드백 이외에 다른 타입들의 햅틱 피드백이 최적의 위치 내에 자신들을 위치시키도록 사용자에게 지시하는데 사용될 수 있다는 것이 인지될 수 있다. 예를 들면, 정전기 기반 햅틱 피드백 및/또는 열 기반 햅틱 피드백이 사용될 수 있다. 일단 사용자가 이미지 프레임 내의, 예를 들면, 윤곽 박스(420) 내의 최적의 위치로 이동하였다면, 통신 디바이스(100)는 추가의 햅틱 피드백을 제공할 수 있다. 예를 들면, 일단 사용자가 이미지 프레임 내의 최적의 위치로 이동하였다면, 통신 디바이스(100)는 최적의 이미지가 이제 캡처될 수 있다는 것을 사용자에게 표시하기 위해 진동 기반 햅틱 피드백(430)을 제공할 수 있다.
[0086] 이어서, 사용자는 "셀피" 이미지를 캡처하기 위해 통신 디바이스(100)를 사용하는 것으로 진행할 수 있다. 사용자가 다량의 주변 광으로 인해 디스플레이(130)를 명확히 볼 수 없기 때문에, 사용자는 이미지를 캡처하기 위해 사용자 인터페이스 내의 셔터 버튼(250)을 누르려고 시도하는데 있어서 디스플레이(130) 주변에서 자신들의 손가락을 랜덤하게 이동시킬 수 있다. 통신 디바이스(100)는, 사용자가 셔터 버튼(250)을 정확히 누른 것을 표시하는 햅틱 피드백을 제공할 수 있다. 예를 들면, 일단 사용자가 디스플레이(130)의 사용자 인터페이스 내의 셔터 버튼(250) 위로 사용자의 손가락을 이동시키면, 통신 디바이스(100)는 사용자가 셔터 버튼(250)을 누름으로써 이미지를 정확히 캡처하였다는 것을 사용자에게 표시하기 위한 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 일부 실시예들에서, 하나보다 더 많은 버튼(421)이 존재하는 경우에, 통신 디바이스(100)는 각각의 버튼 상호작용마다 상이한 타입 또는 듀레이션의 햅틱 피드백을 제공할 수 있다. 예를 들면, 셔터 버튼(250) 및 예를 들면, 플래시 인에이블 버튼(미도시) 선택을 나타내는 2 개의 버튼들이 사용자에게 제공되면, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 진동 기반 햅틱 피드백(430)의 3 개의 빠른 인스턴스들 및 플래시 인에이블 버튼 선택을 위한 진동 기반 햅틱 피드백(430)의 2 개의 빠른 인스턴스들을 제공할 수 있다. 대안적으로, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 높은 듀레이션 진동 기반 햅틱 피드백(430) 및 플래시 인에이블 버튼 선택을 위한 낮은 듀레이션 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 다른 예에서, 통신 디바이스(100)는, 셔터 버튼(250)을 누르기 전에 사용자가 셔터 버튼(250)을 느끼도록 허용하기 위해 정전기 기반 햅틱 피드백을 제공할 수 있다.
[0087] 일부 실시예들에서, 이미지 캡처 모듈(194)(도 1)은, 사용자가 통신 디바이스(100)를 사용자로부터 최적의 거리로 이동시켰다는 것을 검출할 때, 이미지를 자동적으로 캡처 및 저장할 수 있다. 프레임을 검출하는 것과 이미지를 캡처하는 것 사이에 지연, 예를 들면, 2초가 존재할 수 있다. 통신 디바이스(100)는, 일단 이미지가 캡처되었다면, 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 이미지를 자동적으로 캡처함으로써, 통신 디바이스(100)는, 디스플레이(130) 상의 콘텐츠(230)가 보기 어려울 수 있는 밝은 환경에 있는 동안에, 이미지들을 캡처하는데 있어서 사용자에게 도움을 제공한다.
[0088] 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 오디오 피드백(450)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 "최적의 위치가 검출됨"을 상술하는 오디오 문구를 스피커(150)를 통해 재생할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 텍스트 피드백(440)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 디스플레이(130)의 사용자 인터페이스 내에서 "최적의 위치가 검출됨"을 디스플레이할 수 있다. 텍스트 피드백(440)은 가장 높은 밝기 설정으로 디스플레이될 수 있다. 일부 실시예들에서, 하나보다 더 많은 타입의 햅틱 피드백은 통신 디바이스(100)에 의해 동시에 제공될 수 있다. 예를 들면, 진동 기반 햅틱 피드백(430)은 정전기 기반 햅틱 피드백 및/또는 열 기반 햅틱 피드백과 동시에 제공될 수 있다.
[0089] 주변 광 센서(170)가 미리 정의된 임계량의 광 미만인 주변 광 측정을 획득하였다고 광 측정 모듈(192)(도 1)이 결정하면, 햅틱 피드백은 햅틱 피드백 모듈(196)(도 1)에 의해 디스에이블 또는 변경될 수 있다.
[0090] 도 7a는 일부 실시예들에 따른, 진동 기반 햅틱 피드백(430)을 사용하여 이미지를 캡처하기 위해 통신 디바이스(100)를 사용자로부터 떨어져 더 멀리 이동시키도록 사용자에게 지시하는 것을 예시한다. 앞서 설명된 바와 같이, 진동 기반 햅틱 피드백(430)은 통신 디바이스(100) 상에 제공될 수 있는 많은 타입들의 햅틱 피드백들 중 하나이다. 진동 기반 햅틱 피드백(430)은 환경에 존재하는 주변 광이 임계량의 광을 초과한다고 광 측정 모듈(192)(도 1)이 결정할 때 인에이블될 수 있다. 일부 실시예들에서, 진동 기반 햅틱 피드백(430)은 이미 인에이블될 수 있거나, 피드백의 강도는 광 측정 모듈(192)(도 1)에 의한 결정 시에 기초하여 변경될 수 있다.
[0091] 도 7a에 도시된 바와 같이, 디스플레이(130) 상에 도시된 콘텐츠(230)(카메라 이미지의 프리뷰)는 워시 아웃되어 보기 어렵다. "셀피" 이미지를 캡처하는데 있어서 사용자를 돕기 위해 진동 기반 햅틱 피드백(430)이 제공될 수 있다. 더 구체적으로, 진동 기반 햅틱 피드백(430)은 통신 디바이스(100)와 사용자 사이의 거리를 조절하기 위한 명령들을 사용자에게 제공할 수 있다. 이미지를 캡처 및 저장하기 전에, 이미지 캡처 모듈(194)(도 1)은 카메라(186)로부터의 현재 이미지 프레임들을 분석할 수 있다. 사용자가 이미지 프레임에 너무 가깝고, 사용자의 전체 신체가 캡처될 수 없다고 이미지 캡처 모듈(194)(도 1)이 결정하면, 통신 디바이스(100)는, 사용자가 더 멀리 떨어져 통신 디바이스(100)를 이동시킬 필요가 있다고 사용자에게 통지하기 위한 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 그러한 것을 사용자에게 통지하기 위한 진동 기반 햅틱 피드백(430)은 진동 모터(180)(도 1)를 사용함으로써 제공될 수 있다. 일부 실시예들에서, 진동 기반 햅틱 피드백(430)은 사용자가 통신 디바이스(100)에 너무 가깝다는 것을 표시하는 낮은 강도일 수 있다. 일부 실시예들에서, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)에 너무 가깝다는 것을 표시하기 위해 미리 정의된 수의 인스턴스들의 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)에 너무 가까운 경우에 3 번 진동할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)에 너무 가까운 경우에 특정 타입의 햅틱 피드백을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)에 너무 가까운 경우 열 또는 정전기 기반 햅틱 피드백을 제공할 수 있다. 일단 사용자가 통신 디바이스(100)를 적절한 거리로 이동시키면, 통신 디바이스(100)는, 사용자가 이미지 캡처하기 위한 적절한 거리에 있기 때문에 사용자가 이미지를 계속해서 캡처할 수 있다는 것을 사용자에게 표시하기 위한 추가의 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 다른 예에서, 통신 디바이스(100)는, 통신 디바이스(100)가 사용자에 너무 가깝거나 너무 멀다는 것을 전달하기 위해 정전기 기반 햅틱 피드백을 제공할 수 있다. 통신 디바이스(100)의 디스플레이 상에 제공된 줌 슬라이더(zoom slider)는 사용자의 안면이 시야에서 없어질 때 거칠어 질 수 있고, 사용자의 안면이 통신 디바이스(100)의 카메라의 시야 내에 있을 때 부드러워질 수 있다.
[0092] 사용자가 다량의 주변 광으로 인해 디스플레이(130)를 명확히 볼 수 없기 때문에, 사용자는 이미지를 캡처하기 위해 사용자 인터페이스 내의 셔터 버튼(250)을 누르려고 시도하는데 있어서 디스플레이(130) 주변에서 자신들의 손가락을 랜덤하게 이동시킬 수 있다. 통신 디바이스(100)는, 사용자가 셔터 버튼(250)을 정확히 누른 것을 표시하는 햅틱 피드백을 제공할 수 있다. 예를 들면, 일단 사용자가 디스플레이(130)의 사용자 인터페이스 내의 셔터 버튼(250) 위로 사용자의 손가락을 이동시키면, 통신 디바이스(100)는 사용자가 셔터 버튼(250)을 누름으로써 이미지를 정확히 캡처하였다는 것을 사용자에게 표시하기 위한 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 일부 실시예들에서, 하나보다 더 많은 버튼(421)이 존재하는 경우에, 통신 디바이스(100)는 각각의 버튼 상호작용마다 상이한 타입 또는 듀레이션의 햅틱 피드백을 제공할 수 있다. 예를 들면, 셔터 버튼(250) 및 예를 들면, 플래시 인에이블 버튼(미도시) 선택을 나타내는 2 개의 버튼들이 사용자에게 제공되면, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 진동 기반 햅틱 피드백(430)의 3 개의 빠른 인스턴스들 및 플래시 인에이블 버튼 선택을 위한 진동 기반 햅틱 피드백(430)의 2 개의 빠른 인스턴스들을 제공할 수 있다. 대안적으로, 통신 디바이스(100)는 셔터 버튼(250) 선택을 위한 높은 듀레이션 진동 기반 햅틱 피드백(430) 및 플래시 인에이블 버튼 선택을 위한 낮은 듀레이션 진동 기반 햅틱 피드백(430)을 제공할 수 있다.
[0093] 일부 실시예들에서, 이미지 캡처 모듈(194)(도 1)은 카메라(186)의 이미지 프레임 내에서 안면(410)을 검출할 때 이미지를 자동적으로 캡처 및 저장할 수 있다. 프레임을 검출하는 것과 이미지를 캡처하는 것 사이에 지연, 예를 들면, 2 초가 존재할 수 있다. 통신 디바이스(100)는, 일단 이미지가 캡처되었다면, 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 이미지를 자동적으로 캡처함으로써, 통신 디바이스(100)는, 디스플레이(130) 상의 콘텐츠(230)가 보기 어려울 수 있는 밝은 환경에 있는 동안에, 이미지들을 캡처하는데 있어서 사용자에게 도움을 제공한다.
[0094] 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 오디오 피드백(450)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 "디바이스를 당신으로부터 떨어져 이동시키라!"를 상술하는 오디오 문구를 스피커(150)를 통해 재생할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는 진동 기반 햅틱 피드백(430)과 동시에 텍스트 피드백(440)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는 디스플레이(130)의 사용자 인터페이스 내에서 "디바이스를 당신으로부터 떨어져 이동시키라!"를 디스플레이할 수 있다. 텍스트 피드백(440)은 가장 높은 밝기 설정으로 디스플레이될 수 있다. 일부 실시예들에서, 하나보다 더 많은 타입의 햅틱 피드백은 통신 디바이스(100)에 의해 동시에 제공될 수 있다. 예를 들면, 진동 기반 햅틱 피드백(430)은 정전기 기반 햅틱 피드백 및/또는 열 기반 햅틱 피드백과 동시에 제공될 수 있다.
[0095] 일단 주변 광 센서(170)가 미리 정의된 임계량의 광 미만인 주변 광 측정을 획득하였다고 광 측정 모듈(192)(도 1)이 결정하면, 햅틱 피드백은 햅틱 피드백 모듈(196)(도 1)에 의해 디스에이블 또는 변경될 수 있다.
[0096] 도 7b는 일부 실시예들에 따른, 진동 기반 햅틱 피드백(430)을 사용하여 이미지를 캡처하기 위해 통신 디바이스(100)를 사용자로부터 더 멀리 떨어져 이동시키도록 사용자에게 지시하는 것을 예시한다. 도 7b는, 도 7b가 사용자가 최적의 이미지를 캡처하기 위해 통신 디바이스(100)로부터 너무 떨어져 있는 것을 제외하면 도 7a와 유사하다. 사용자가 이미지 프레임으로부터 너무 멀리 있고 사용자의 세부사항들이 캡처될 수 없다고 이미지 캡처 모듈(194)(도 1)이 결정하면, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)를 더 가깝게 이동시킬 필요가 있다는 것을 사용자에게 통지하기 위해 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 일부 실시예들에서, 진동 기반 햅틱 피드백(430)은 사용자가 통신 디바이스(100)로부터 너무 멀리 있다는 것을 표시하는 고강도일 수 있다. 일부 실시예들에서, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)로부터 너무 멀리 있다는 것을 표시하기 위해 미리 정의된 수의 인스턴스들의 진동 기반 햅틱 피드백(430)을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)로부터 너무 멀리 있다면 5 번 진동할 수 있다. 일부 실시예들에서, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)로부터 너무 멀리 있다면 특정 타입의 햅틱 피드백을 제공할 수 있다. 예를 들면, 통신 디바이스(100)는, 사용자가 통신 디바이스(100)로부터 너무 멀리 있다면 열 또는 정전기 기반 햅틱 피드백을 제공할 수 있다. 일단 사용자가 통신 디바이스(100)를 적절한 거리로 이동시켰다면, 통신 디바이스(100)는, 사용자가 이미지를 캡처하기 위해 적절한 거리에 있기 때문에 사용자가 이미지를 계속해서 캡처할 수 있다는 것을 사용자에게 표시하기 위한 추가의 진동 기반 햅틱 피드백(430)을 제공할 수 있거나, 앞서 설명된 바와 같이 이미지를 자동적으로 캡처할 수 있다.
[0097] 도 7a에 설명된 것과 유사하게, 통신 디바이스(100)는 또한 디바이스를 사용자에게 더 가깝게 이동시키도록 사용자에게 지시하기 위한 햅틱 피드백과 동시에 오디오 피드백(450) 또는 텍스트 피드백(440)을 제공할 수 있다.
[0098] 도 8은 통신 디바이스를 통해 이미지들을 캡처하는 것을 돕기 위한 햅틱 피드백을 제공하기 위한 예시적인 동작을 도시한 예시적인 흐름도(800)이다. 블록(802)에서, 디바이스가 존재하는 환경의 주변 광 측정은, 디바이스를 통해, 획득된다. 주변 광 측정은 디바이스 내의 하나 이상의 주변 광 센서들을 사용하여 획득될 수 있다. 예를 들면, 도 2에서, 주변 광 센서는 통신 디바이스가 현재 있는 환경의 주변 광 측정을 획득한다. 이어서, 광 측정 모듈은 햅틱 피드백이 통신 디바이스의 사용자에게 제공되는 방식이 변경되는지를 결정하기 위해 획득된 주변 광 측정을 분석할 수 있다.
[0099] 블록(804)에서, 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내의 하나 이상의 물체들이 검출된다. 물체들의 검출은 이미지 캡처 모듈에 의해 수행될 수 있다. 예를 들면, 도 4a에서, 이미지 프레임 내의 사용자의 안면은 이미지 캡처 모듈에 의해 검출된다. 이미지 캡처 모듈은 물체가 이미지 프레임 내의 최적의 위치 및/또는 최적의 거리 내에 있는지를 결정할 수 있다.
[00100] 블록(806)에서, 햅틱 피드백이 디바이스의 사용자에 제공되는 방식은 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여 변경된다. 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 것은 디바이스 상의 햅틱 피드백을 인에이블하는 것을 포함한다. 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 것은 디바이스 상의 햅틱 피드백을 디스에이블하는 것을 포함한다. 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 것은 디바이스 상의 햅틱 피드백의 강도를 변경하는 것을 포함한다. 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 것은 디바이스 상의 햅틱 피드백의 빈도를 변경하는 것을 포함한다. 일부 실시예들에서, 햅틱 피드백이 제공되는 방식을 변경하는 것은 디바이스 상의 햅틱 피드백의 타입 또는 듀레이션을 변경하는 것을 포함한다. 일부 실시예들에서, 햅틱 피드백은 촉각 피드백, 진동 피드백, 정전기 피드백 또는 열 피드백 중 적어도 하나를 포함한다.
[00101] 예를 들면, 도 2에서, 햅틱 피드백 모듈은 광 측정 모듈에 의해 이루어진 결정에 기초하여 햅틱 피드백이 통신 디바이스에 제공되는 방식을 변경할 수 있다. 광 측정 모듈이 환경 내의 다량의 주변 광을 결정하였다면, 햅틱 피드백 모듈은 디바이스 상에 제공되는 햅틱 피드백을 인에이블하거나 햅틱 피드백의 타입을 변경할 수 있다. 역으로, 광 측정 모듈이 환경 내의 소량의 주변 광을 결정하였다면, 햅틱 피드백 모듈은 디바이스 상에 제공되는 햅틱 피드백을 디스에이블하거나 햅틱 피드백의 타입을 변경할 수 있다. 햅틱 피드백은 디바이스를 통해 이미지를 캡처하는데 있어서 사용자를 돕는데 사용될 수 있다.
[00102] 도 9는 하나 이상의 실시예들이 실시될 수 있는 컴퓨팅 시스템의 일 예를 도시한다. 도 9에 도시된 바와 같은 컴퓨터 시스템은, 상술된 컴퓨터화된 디바이스들의 일부를 포함할 수 있다. 예를 들어, 컴퓨터 시스템(900)은 텔레비전, 컴퓨팅 디바이스, 서버, 데스크탑, 워크스테이션, 자동차 내의 제어 또는 상호작용 시스템, 태블릿, 넷북 또는 임의의 다른 적절한 컴퓨팅 시스템의 컴포넌트들 중 일부를 나타낼 수 있다. 컴퓨팅 디바이스는 이미지 캡처 디바이스 또는 입력 감지 유닛 및 사용자 출력 디바이스를 지닌 임의의 컴퓨팅 디바이스일 수 있다. 이미지 캡처 디바이스 또는 입력 감지 유닛은 카메라 디바이스일 수 있다. 사용자 출력 디바이스는 디스플레이 유닛일 수 있다. 컴퓨팅 디바이스의 예들은 비디오 게임 콘솔들, 태블릿들, 스마트 폰들 및 임의의 다른 핸드-헬드 디바이스들을 포함하지만, 이것으로 제한되지 않는다. 도 9는, 본원에 설명된 바와 같이, 다양한 다른 실시예들에 의해 제공된 방법들을 수행할 수 있는 컴퓨터 시스템(900)의 일 실시예의 개략적인 도시를 제공하고, 그리고/또는 호스트 컴퓨터 시스템, 원격 키오스크/단말, 포인트-오브-세일 디바이스, 자동차 내의 전화 또는 내비게이션 또는 멀티미디어 인터페이스, 컴퓨팅 디바이스, 셋톱 박스, 테이블 컴퓨터 및/또는 컴퓨터 시스템으로서 기능할 수 있다. 도 9는 다양한 컴포넌트들의 일반화된 예시만을 제공하도록 의도되고, 다양한 컴포넌트들 중 임의의 컴포넌트 또는 컴포넌트들 전부가 적절하게 활용될 수 있다. 그러므로, 도 9는, 개별 시스템 엘리먼트들이 비교적 별개의 방식으로 또는 비교적 더욱 통합된 방식으로 어떻게 구현될 수 있는지를 폭넓게 예시한다. 일부 실시예들에서, 컴퓨터 시스템(900)의 엘리먼트들은 도 1의 디바이스(100)의 기능을 구현하기 위해 사용될 수 있다.
[00103] 버스(902)를 통해 전기적으로 결합될 수 있는(또는 적절히, 다른 방식으로 통신할 수 있는) 하드웨어 엘리먼트들을 포함하는 컴퓨터 시스템(900)이 도시된다. 하드웨어 엘리먼트들은 하나 이상의 프로세서들(904) ―프로세서들(904)은 하나 이상의 범용 프로세서들 및/또는 하나 이상의 특수-목적 프로세서들(예를 들어, 디지털 신호 프로세싱 칩들, 그래픽스 가속 프로세서들, 및/또는 등)을 포함함(이것으로 제한하지 않음)―; 초음파 또는 다른 사운드들을 검출하도록 구성된 하나 이상의 카메라들, 센서들, 마우스, 키보드, 마이크로폰 및/또는 등을 포함할 수 있는 하나 이상의 입력 디바이스들(908); 및 본 발명의 실시예들에서 사용된 디바이스와 같은 디스플레이 유닛, 프린터 등을 포함(이것으로 제한되지 않음)할 수 있는 하나 이상의 출력 디바이스들(910)을 포함할 수 있다.
[00104] 본 발명의 실시예들의 일부 구현들에서, 다양한 입력 디바이스들(908) 및 출력 디바이스들(910)은 디스플레이 디바이스들, 테이블들, 플로어들, 벽들, 및 윈도우 스크린들과 같은 인터페이스들 내부에 임베딩될 수 있다. 추가로, 프로세서들에 결합된 입력 디바이스들(908) 및 출력 디바이스들(910)은 다차원적 추적 시스템들을 형성할 수 있다.
[00105] 컴퓨터 시스템(900)은 하나 이상의 비-일시적 저장 디바이스들(906)을 더 포함할 수 있고(그리고/또는 비-일시적 저장 디바이스들(906)과 통신할 수 있고), 비-일시적 저장 디바이스들(906)은 로컬 및/또는 네트워크 액세스 가능 스토리지를 포함(이것으로 제한되지 않음)할 수 있고, 그리고/또는 디스크 드라이브, 드라이브 어레이, 광학 스토리지 디바이스, 고체-상태 스토리지 디바이스, 예를 들어 랜덤 액세스 메모리("RAM"), 및/또는 판독-전용 메모리("ROM")(이는, 프로그래밍 가능한 것, 플래시-업데이트 가능한 것 등일 수 있음))를 포함(이것으로 제한되지 않음)할 수 있다. 이러한 저장 디바이스들은, 제한 없이 다양한 파일 시스템들, 데이터베이스 구조들 등을 포함하여, 임의의 적절한 데이터 스토리지를 구현하도록 구성될 수 있다.
[00106] 또한, 컴퓨터 시스템(900)은 통신 서브시스템(912)을 포함할 수 있고, 통신 서브시스템(912)은 모뎀, 네트워크 카드(무선 또는 유선), 적외선 통신 디바이스, 무선 통신 디바이스, 및/또는 칩셋(예를 들어, 블루투스TM 디바이스, 802.11 디바이스, WiFi 디바이스, WiMax 디바이스, 셀룰러 통신 설비들 등)등을 포함(이것으로 제한되지 않음)할 수 있다. 통신 서브시스템(912)은, 네트워크, 다른 컴퓨터 시스템들, 및/또는 본원에 설명된 임의의 다른 디바이스들과 데이터가 교환되게 허용할 수 있다. 많은 실시예들에서, 컴퓨터 시스템(900)은 비일시적 작업 메모리(918)를 더 포함할 것이고, 비일시적 작업 메모리(918)는 위에서 설명된 바와 같이 RAM 또는 ROM 디바이스를 포함할 수 있다.
[00107] 또한, 컴퓨터 시스템(900)은 작업 메모리(918) 내에 현재 위치되어 있는 것으로서 도시된 소프트웨어 엘리먼트들을 포함할 수 있고, 소프트웨어 엘리먼트들은 운영 시스템(914), 디바이스 드라이버들, 실행 가능 라이브러리들, 및/또는 다른 코드, 예를 들어 하나 이상의 애플리케이션 프로그램들(916)을 포함하고, 본원에서 설명되는 바와 같이, 애플리케이션 프로그램들(916)은 다양한 실시예들에 의해 제공되는 컴퓨터 프로그램들을 포함할 수 있고, 그리고/또는 다른 실시예들에 의해 제공되는 방법들을 구현하고 그리고/또는 다른 실시예들에 의해 제공되는 시스템들을 구성하도록 설계될 수 있다. 단지 예로서, 위에서 논의된 방법(들)에 대하여 설명된 하나 이상의 프로시저들이 컴퓨터(및/또는 컴퓨터 내의 프로세서)에 의해 실행 가능한 명령들 및/또는 코드로서 구현될 수 있고; 일 양상에서, 그 다음, 설명된 방법들에 따라 하나 이상의 동작들을 수행하도록 범용 컴퓨터(또는 다른 디바이스)를 구성 및/또는 적응시키는데 이러한 코드 및/또는 명령들이 사용될 수 있다.
[00108] 이러한 명령들 및/또는 코드의 세트는 컴퓨터-판독가능 저장 매체, 예를 들어 위에서 설명된 비-일시적 저장 디바이스(들)(906)에 저장될 수 있다. 몇몇 경우들에서, 저장 매체는 컴퓨터 시스템, 예를 들어 컴퓨터 시스템(900) 내에 통합될 수 있다. 다른 실시예들에서, 저장 매체는 컴퓨터 시스템(예를 들어, 탈착 가능 매체, 예를 들어 콤팩트 디스크)과 별개일 수 있고, 그리고/또는 설치 패키지에 제공될 수 있으며, 따라서 저장 매체는, 명령들/코드가 저장되어 있는 범용 컴퓨터를 프로그래밍, 구성, 및/또는 적응시키는데 사용될 수 있다. 이러한 명령들은 실행 가능 코드(컴퓨터 시스템(900)에 의해 실행 가능함)의 형태를 취할 수 있고, 그리고/또는 소스 및/또는 설치가능 코드의 형태를 취할 수 있으며, 소스 및/또는 설치가능 코드는, (예를 들어, 다양한 일반적으로 이용 가능한 컴파일러들, 설치 프로그램들, 압축/압축해제 유틸리티들 등 중 임의의 것을 이용한) 컴퓨터 시스템(900) 상의 컴파일레이션 및/또는 설치 시, 이후, 실행 가능 코드의 형태를 취한다.
[00109] 실질적인 변형들이 특정 요건들에 따라 이루어질 수 있다. 예를 들어, 맞춤형 하드웨어가 또한 사용될 수 있고, 그리고/또는 특정 엘리먼트들이 하드웨어, 소프트웨어(휴대용 소프트웨어, 예를 들어 애플릿들 등을 포함함), 또는 이 둘 다로 구현될 수 있다. 추가로, 네트워크 입/출력 디바이스들과 같은 다른 컴퓨팅 디바이스들에 대한 연결이 사용될 수 있다. 일부 실시예들에서, 컴퓨터 시스템(900)의 하나 이상의 엘리먼트들이 생략될 수 있거나 또는 도시된 시스템들과는 별개로 구현될 수 있다. 예를 들어, 프로세서(904) 및/또는 다른 엘리먼트들은 입력 디바이스(908)와는 별개로 구현될 수 있다. 일 실시예에서, 프로세서는 별개로 구현되는 하나 이상의 카메라들로부터 이미지들을 수신하도록 구성된다. 일부 실시예들에서, 도 9에 도시된 것들 이외의 엘리먼트들이 컴퓨터 시스템(900)에 포함될 수 있다.
[00110] 일부 실시예들은 본 발명의 다양한 실시예들에 따른 방법들을 수행하기 위해 컴퓨터 시스템(예를 들어, 컴퓨터 시스템(900))을 사용할 수 있다. 예를 들어, 작업 메모리(918)에 포함된 하나 이상의 명령들(운영 시스템(914) 및/또는 다른 코드, 예를 들어 애플리케이션 프로그램(916)에 통합될 수 있음)의 하나 이상의 시퀀스들을 프로세서(904)가 실행하는 것에 응답하여, 설명된 방법들의 프로시저들 중 일부 또는 전부가 컴퓨터 시스템(900)에 의해 수행된다. 이러한 명령들은 다른 컴퓨터-판독가능 매체, 이를테면, 저장 디바이스(들)(906) 중 하나 이상로부터 작업 메모리(918)에 판독될 수 있다. 단지 예로서, 작업 메모리(918)에 포함된 명령들의 시퀀스들의 실행은 프로세서(들)(904)로 하여금 본원에 설명된 방법들의 하나 이상의 프로시저들을 수행하게 할 수 있다.
[00111] 본원에 사용된 바와 같은 용어들 "머신-판독가능 매체" 및 "컴퓨터-판독가능 매체"는, 머신으로 하여금 특정 방식으로 동작하게 하는 데이터를 제공하는 것에 참여하는 임의의 매체를 지칭한다. 컴퓨터 시스템(900)을 사용하여 구현되는 일부 실시예들에서는, 다양한 컴퓨터-판독가능 매체가 실행을 위해 명령들/코드를 프로세서(들)(904)에 제공하는 데 수반될 수 있고 그리고/또는 이러한 명령들/코드를 (예를 들어, 신호들로서) 저장 및/또는 반송하는데 사용될 수 있다. 많은 구현들에서, 컴퓨터-판독가능 매체는 물리적 및/또는 유형의 저장 매체이다. 이러한 매체는 비-휘발성 매체 또는 휘발성 매체, 및 송신 매체의 형태를 비롯하여(이것으로 제한되지 않음) 많은 형태들을 취할 수 있다. 비-휘발성 매체는, 예를 들어, 광학 및/또는 자기 디스크들, 예를 들어 비-일시적 저장 디바이스(들)(906)를 포함한다. 휘발성 매체는 동적 메모리, 이를테면, 작업 메모리(918)를 포함(이것으로 제한되지 않음)한다. 송신 매체는, 버스(902)를 포함하는 와이어들뿐만 아니라 통신 서브시스템(912)의 다양한 컴포넌트들(및/또는 통신 서브시스템(912)이 다른 디바이스들과 통신하게 제공되는 매체)을 비롯하여, 동축 케이블들, 구리 와이어 및 광섬유를 포함(이것으로 제한되지 않음)한다. 따라서, 송신 매체는 또한 (라디오, 어쿠스틱 및/또는 광파들(waves), 이를테면, 라디오-파 및 적외선 데이터 통신들 동안 생성된 것들을 포함하지만, 이것으로 제한되지 않는) 파들의 형태를 취할 수 있다.
[00112] 물리적 및/또는 유형 컴퓨터-판독가능 매체의 공통 형태들은, 예를 들어, 플로피 디스크, 플렉서블 디스크, 하드 디스크, 자기 테이프, 또는 임의의 다른 자기 매체, CD-ROM, 임의의 다른 광학 매체, 펀치카드들, 페이퍼테이프, 홀들의 패턴들을 갖는 임의의 다른 물리적 매체, RAM, PROM, EPROM, FLASH-EPROM, 임의의 다른 메모리 칩 또는 카트리지, 이후에 설명되는 바와 같은 캐리어 파, 또는 임의의 다른 매체 ―이 임의의 다른 매체로부터, 컴퓨터가 명령들 및/또는 코드를 판독할 수 있음― 를 포함한다.
[00113] 실행을 위해 하나 이상의 명령들의 하나 이상의 시퀀스들을 프로세서(들)(904)로 반송할 때 다양한 형태들의 컴퓨터-판독가능 매체가 수반될 수 있다. 단지 예로서, 명령들은 원격 컴퓨터의 자기 디스크 및/또는 광학 디스크 상에서 초기에 반송될 수 있다. 원격 컴퓨터는 명령들을 자신의 동적 메모리에 로딩할 수 있고, 그리고 컴퓨터 시스템(900)에 의해 수신 및/또는 실행되도록 명령들을 신호들로서 송신 매체를 통해 송신할 수 있다. 전자기 신호들, 어쿠스틱 신호들, 광학 신호들 등의 형태일 수 있는 이러한 신호들은, 모두 본 발명의 다양한 실시예들에 따라, 명령들이 인코딩될 수 있는 캐리어 파들의 예들이다.
[00114] 통신 서브시스템(912)(및/또는 그것의 컴포넌트들)이 일반적으로 신호들을 수신할 것이고, 그 다음, 버스(902)가 신호들(및/또는 신호들에 의해 반송되는 데이터, 명령들 등)을 작업 메모리(918)로 반송할 수 있으며, 작업 메모리(918)로부터, 프로세서(들)(904)는 명령들을 리트리빙 및 실행한다. 작업 메모리(918)에 의해 수신된 명령들은 선택적으로, 프로세서(들)(904)에 의한 실행 이전 또는 그 이후, 비-일시적 저장 디바이스(906)에 저장될 수 있다.
[00115] 위에서 논의된 방법들, 시스템들, 및 디바이스들은 예들이다. 다양한 실시예들이 적절히 다양한 프로시저들 또는 컴포넌트들을 생략, 치환, 또는 부가할 수 있다. 예를 들어, 대안적 구성들에서는, 설명된 방법들이 설명된 것과 상이한 순서로 수행될 수 있고, 그리고/또는 다양한 스테이지들이 부가, 생략, 및/또는 결합될 수 있다. 또한, 특정 실시예들에 대하여 설명된 특징들이 다양한 다른 실시예들로 결합될 수 있다. 실시예들의 상이한 양상들 및 엘리먼트들이 유사한 방식으로 결합될 수 있다. 또한, 기술이 진보하고, 따라서 엘리먼트들 중 다수는 본 개시물의 범위를 그러한 특정 예들로 제한하지 않는 예들이다.
[00116] 실시예들의 철저한 이해를 제공하기 위해 특정한 세부사항들이 설명에서 제공된다. 그러나, 이러한 특정한 세부사항들 없이도 실시예들이 실시될 수 있다. 예를 들어, 실시예들을 모호하게 하는 것을 방지하기 위하여, 불필요한 세부사항 없이, 잘 알려진 회로들, 프로세스들, 알고리즘들, 구조들, 및 기술들이 도시되었다. 이 설명은 예시적 실시예들만을 제공하며, 본 발명의 범위, 적용가능성, 또는 구성을 제한하도록 의도되지 않는다. 그 보다는, 실시예들의 앞선 설명은 기술분야의 당업자들에게, 본 발명의 실시예들을 구현하기 위해 실시가능한(enabling) 설명을 제공할 것이다. 본 발명의 사상 또는 범위로부터 벗어남 없이, 다양한 변경들이 엘리먼트들의 어레인지먼트 및 기능에서 이루어질 수 있다.
[00117] 또한, 일부 실시예들은 흐름도들 또는 블록도들로서 도시되는 프로세스로서 구성들이 설명된다. 각각이 순차적 프로세스로서 동작들을 설명할 수 있지만, 동작들 중 다수는 병렬로 또는 동시에 수행될 수 있다. 부가하여, 동작들의 순서는 재배열될 수 있다. 프로세스는 도면들에 포함되지 않은 부가적인 단계들을 가질 수 있다. 또한, 방법들의 실시예들은 하드웨어, 소프트웨어, 펌웨어, 미들웨어, 마이크로코드, 하드웨어 설명 언어들, 또는 이들의 임의의 결합에 의해 구현될 수 있다. 소프트웨어, 펌웨어, 미들웨어, 또는 마이크로코드로 구현될 때, 연관된 작업들을 수행하기 위한 프로그램 코드 또는 코드 세그먼트들은 저장 매체와 같은 컴퓨터-판독가능 매체에 저장될 수 있다. 프로세서들은 연관된 작업들을 수행할 수 있다. 따라서, 위의 설명에서, 컴퓨터 시스템에 의해 수행되는 것으로 설명되는 기능들 또는 방법들은 기능들 또는 방법들을 수행하도록 구성된 프로세서 ― 예를 들면, 프로세서(904) ― 에 의해 수행될 수 있다. 또한, 그러한 기능들 또는 방법들은 하나 이상의 컴퓨터 판독 가능 매체 상에 저장된 명령들을 실행하는 프로세서에 의해 수행될 수 있다.
[00118] 여러 실시예들을 설명했지만, 본 개시물의 사상으로부터 벗어남 없이, 다양한 수정들, 대안적 구성들, 및 대등물들이 사용될 수 있다. 예를 들어, 위의 엘리먼트들은 단지 더 큰 시스템의 컴포넌트일 수 있으며, 다른 규칙들이 본 발명의 애플리케이션보다 우선할 수 있거나 또는 그렇지 않으면 본 발명의 애플리케이션을 수정할 수 있다. 또한, 위의 엘리먼트들이 고려되기 이전에, 그 동안에, 또는 그 이후에, 다수의 단계들이 착수될 수 있다. 따라서, 위의 설명은 본 개시의 범위를 제한하지 않는다.
[00119] 다양한 예들이 설명되었다. 이들 및 다른 예들이 다음의 청구항들의 범위 내에 있다.

Claims (32)

  1. 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백(haptic feedback)을 제공하기 위한 방법으로서,
    이미지 캡처 디바이스를 통해, 상기 이미지 캡처 디바이스가 존재하는 환경의 주변 광 측정을 획득하는 단계,
    상기 이미지 캡처 디바이스를 통해, 상기 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 하나 이상의 물체들을 검출하는 단계, 및
    상기 이미지 캡처 디바이스를 통해, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 상기 이미지 캡처 디바이스의 사용자에게 제공되는 방식을 변경하는 단계를 포함하고,
    햅틱 피드백은 상기 주변 광 측정에 의존하여 인에이블되거나 디스에이블되고,
    햅틱 피드백이 인에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하여 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하고, 그리고
    햅틱 피드백이 디스에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하지 않고서 동일한 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  2. 제 1 항에 있어서,
    상기 하나 이상의 물체들을 검출하는 단계는 상기 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 안면을 검출하는 단계를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  3. 제 1 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하는 단계는 제공되는 햅틱 피드백의 강도(intensity)를 증가시키는 단계를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  4. 제 1 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하는 단계는 제공되는 햅틱 피드백의 타입을 변경하는 단계를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  5. 제 1 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하는 단계는 햅틱 피드백이 제공되는 빈도(frequency)를 변경하는 단계 또는 햅틱 피드백이 제공되는 듀레이션을 변경하는 단계 중 적어도 하나를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  6. 제 1 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들 내의 최적의 위치에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 위치에 적어도 부분적으로 기초하여 변경되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  7. 제 1 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들의 크기에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 크기에 적어도 부분적으로 기초하여 변경되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  8. 제 1 항에 있어서,
    상기 햅틱 피드백은 촉각(tactile) 피드백, 진동 피드백, 정전기(electrostatic) 피드백 또는 열(thermal) 피드백 중 적어도 하나를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  9. 제 1 항에 있어서,
    상기 햅틱 피드백의 타입은 상기 하나 이상의 검출된 물체들의 수량(quantity)에 적어도 부분적으로 기초하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  10. 제 1 항에 있어서,
    상기 획득하는 단계는 상기 이미지 캡처 디바이스 내의 하나 이상의 주변 광 센서들을 사용하여 수행되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 방법.
  11. 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치로서,
    하나 이상의 이미지 프레임들을 캡처하도록 구성된 이미지 캡처 디바이스,
    상기 장치가 존재하는 환경의 주변 광 측정을 획득하도록 구성된 주변 광 센서, 및
    상기 주변 광 센서 및 상기 이미지 캡처 디바이스에 커플링된 프로세서 ― 상기 프로세서는 상기 하나 이상의 이미지 프레임들 내의 하나 이상의 물체들을 검출하고, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 상기 장치의 사용자에게 제공되는 방식을 변경하도록 구성됨 ― 를 포함하고,
    상기 프로세서는 상기 주변 광 측정에 의존하여 햅틱 피드백을 인에이블하거나 디스에이블하도록 구성되고,
    햅틱 피드백이 인에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하여 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하도록 구성되고, 그리고
    햅틱 피드백이 디스에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하지 않고서 동일한 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하도록 구성되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  12. 제 11 항에 있어서,
    상기 하나 이상의 물체들을 검출하는 것은 상기 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 안면을 검출하는 것을 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  13. 제 11 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하는 것은 제공되는 햅틱 피드백의 강도를 증가시키는 것을 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  14. 제 11 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하는 것은 제공되는 햅틱 피드백의 타입을 변경하는 것을 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  15. 제 11 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하는 것은 햅틱 피드백이 제공되는 빈도를 변경하는 것 또는 햅틱 피드백이 제공되는 듀레이션을 변경하는 것 중 적어도 하나를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  16. 제 11 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들 내의 최적의 위치에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 위치에 적어도 부분적으로 기초하여 변경되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  17. 제 11 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들의 크기에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 크기에 적어도 부분적으로 기초하여 변경되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  18. 제 11 항에 있어서,
    상기 햅틱 피드백은 촉각 피드백, 진동 피드백, 정전기 피드백 또는 열 피드백 중 적어도 하나를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  19. 제 11 항에 있어서,
    상기 햅틱 피드백의 타입은 상기 하나 이상의 검출된 물체들의 수량에 적어도 부분적으로 기초하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  20. 제 11 항에 있어서,
    상기 햅틱 피드백과 동시에, 오디오 피드백을 상기 장치의 사용자에게 제공하도록 구성된 스피커를 더 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  21. 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치로서,
    이미지 캡처 디바이스를 통해, 상기 이미지 캡처 디바이스가 존재하는 환경의 주변 광 측정을 획득하기 위한 수단,
    상기 이미지 캡처 디바이스를 통해, 상기 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 하나 이상의 물체들을 검출하기 위한 수단, 및
    상기 이미지 캡처 디바이스를 통해, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 상기 이미지 캡처 디바이스의 사용자에게 제공되는 방식을 변경하기 위한 수단을 포함하고,
    햅틱 피드백은 상기 주변 광 측정에 의존하여 인에이블되거나 디스에이블되고,
    햅틱 피드백이 인에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하여 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하고, 그리고
    햅틱 피드백이 디스에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하지 않고서 동일한 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  22. 제 21 항에 있어서,
    상기 하나 이상의 물체들을 검출하기 위한 수단은 상기 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 안면을 검출하기 위한 수단을 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  23. 제 21 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하기 위한 수단은 제공되는 햅틱 피드백의 강도를 증가시키기 위한 수단, 제공되는 햅틱 피드백의 타입을 변경하기 위한 수단, 햅틱 피드백이 제공되는 듀레이션을 변경하기 위한 수단, 또는 햅틱 피드백이 제공되는 빈도를 변경하기 위한 수단 중 적어도 하나를 포함하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  24. 제 21 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들 내의 최적의 위치에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 위치에 적어도 부분적으로 기초하여 변경되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  25. 제 21 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들의 크기에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 크기에 적어도 부분적으로 기초하여 변경되는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  26. 제 21 항에 있어서,
    상기 햅틱 피드백의 타입은 상기 하나 이상의 검출된 물체들의 수량에 적어도 부분적으로 기초하는,
    이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 장치.
  27. 프로세서 판독 가능 명령들을 포함하는 프로세서-판독 가능 비일시적인 매체로서,
    상기 프로세서 판독 가능 명령들은 프로세서로 하여금,
    이미지 캡처 디바이스를 통해, 상기 이미지 캡처 디바이스가 존재하는 환경의 주변 광 측정을 획득하고,
    상기 이미지 캡처 디바이스를 통해, 상기 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 하나 이상의 물체들을 검출하고, 그리고
    상기 이미지 캡처 디바이스를 통해, 획득된 주변 광 측정 및 검출된 하나 이상의 물체들에 적어도 부분적으로 기초하여, 햅틱 피드백이 상기 이미지 캡처 디바이스의 사용자에게 제공되는 방식을 변경하게 하도록 구성되고,
    햅틱 피드백은 상기 주변 광 측정에 의존하여 인에이블되거나 디스에이블되고,
    햅틱 피드백이 인에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하여 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하고, 그리고
    햅틱 피드백이 디스에이블되면, 상기 이미지 캡처 디바이스는 햅틱 피드백을 사용하지 않고서 동일한 적어도 하나의 아이템의 정보를 상기 사용자에게 전달하는,
    프로세서-판독 가능 비일시적인 매체.
  28. 제 27 항에 있어서,
    상기 하나 이상의 물체들을 검출하는 것은 상기 이미지 캡처 디바이스에 의해 캡처된 하나 이상의 이미지 프레임들 내에서 안면을 검출하는 것을 포함하는,
    프로세서-판독 가능 비일시적인 매체.
  29. 제 27 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식을 변경하는 것은 제공되는 햅틱 피드백의 강도를 증가시키는 것, 제공되는 햅틱 피드백의 타입을 변경하는 것, 햅틱 피드백이 제공되는 듀레이션을 변경하는 것, 또는 햅틱 피드백이 제공되는 빈도를 변경하는 것 중 적어도 하나를 포함하는,
    프로세서-판독 가능 비일시적인 매체.
  30. 제 27 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들 내의 최적의 위치에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 위치에 적어도 부분적으로 기초하여 변경되는,
    프로세서-판독 가능 비일시적인 매체.
  31. 제 27 항에 있어서,
    상기 햅틱 피드백이 제공되는 방식은, 상기 하나 이상의 이미지 프레임들의 크기에 대해 검출된 물체들의, 상기 하나 이상의 이미지 프레임들 내의 크기에 적어도 부분적으로 기초하여 변경되는,
    프로세서-판독 가능 비일시적인 매체.
  32. 제 27 항에 있어서,
    상기 햅틱 피드백의 타입은 상기 하나 이상의 검출된 물체들의 수량에 적어도 부분적으로 기초하는,
    프로세서-판독 가능 비일시적인 매체.
KR1020167031325A 2014-05-13 2015-04-29 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 시스템 및 방법 KR101794842B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/276,926 2014-05-13
US14/276,926 US9507420B2 (en) 2014-05-13 2014-05-13 System and method for providing haptic feedback to assist in capturing images
PCT/US2015/028199 WO2015175217A1 (en) 2014-05-13 2015-04-29 System and method for providing haptic feedback to assist in capturing images

Publications (2)

Publication Number Publication Date
KR20170007285A true KR20170007285A (ko) 2017-01-18
KR101794842B1 KR101794842B1 (ko) 2017-11-07

Family

ID=53267572

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167031325A KR101794842B1 (ko) 2014-05-13 2015-04-29 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 시스템 및 방법

Country Status (7)

Country Link
US (1) US9507420B2 (ko)
EP (1) EP3143477B1 (ko)
JP (1) JP6143975B1 (ko)
KR (1) KR101794842B1 (ko)
CN (1) CN106462240B (ko)
BR (1) BR112016026613B1 (ko)
WO (1) WO2015175217A1 (ko)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2523345B (en) * 2014-02-20 2018-01-17 Samsung Electronics Co Ltd Detecting user viewing difficulty from facial parameters
US10235587B2 (en) * 2014-03-04 2019-03-19 Samsung Electronics Co., Ltd. Method and system for optimizing an image capturing boundary in a proposed image
US11375288B1 (en) * 2014-04-03 2022-06-28 Twitter, Inc. Method and apparatus for capturing and broadcasting media
US10133351B2 (en) * 2014-05-21 2018-11-20 Apple Inc. Providing haptic output based on a determined orientation of an electronic device
CN115756154A (zh) 2014-09-02 2023-03-07 苹果公司 用于可变触觉输出的语义框架
US9473687B2 (en) 2014-12-23 2016-10-18 Ebay Inc. Modifying image parameters using wearable device input
KR20160088081A (ko) * 2015-01-15 2016-07-25 삼성전자주식회사 영상 촬영 기기의 햅틱 인터페이스 및 이의 제어 방법
US10122914B2 (en) * 2015-04-17 2018-11-06 mPerpetuo, Inc. Method of controlling a camera using a touch slider
US9838607B2 (en) 2015-04-17 2017-12-05 mPerpetuo, Inc. Passive optical electronic camera viewfinder apparatus
US11099650B1 (en) 2015-09-07 2021-08-24 Oliver Markus Haynold Camera with improved shutter button
KR20170097860A (ko) * 2016-02-19 2017-08-29 삼성전자주식회사 디스플레이를 이용하여 이미지를 촬영하는 전자 장치 및 이미지 촬영 방법
US9800975B1 (en) 2016-04-18 2017-10-24 mPerpetuo, Inc. Audio system for a digital camera
US9854156B1 (en) 2016-06-12 2017-12-26 Apple Inc. User interface for camera effects
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK201770372A1 (en) * 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
DK180859B1 (en) * 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US10194078B2 (en) * 2017-06-09 2019-01-29 Immersion Corporation Haptic enabled device with multi-image capturing abilities
KR102333101B1 (ko) * 2017-06-21 2021-12-01 삼성전자주식회사 관심 객체에 대한 외부 광원의 속성 정보를 제공하는 방법을 지원하는 전자 장치
CN108134903B (zh) * 2017-12-25 2020-01-14 Oppo广东移动通信有限公司 拍摄方法及相关产品
US20190208115A1 (en) * 2017-12-28 2019-07-04 Facebook, Inc. Identifying User Intent for Auto Selfies
US10574881B2 (en) 2018-02-15 2020-02-25 Adobe Inc. Smart guide to capture digital images that align with a target image model
US10762336B2 (en) * 2018-05-01 2020-09-01 Qualcomm Incorporated Face recognition in low light conditions for unlocking an electronic device
US11029759B2 (en) 2018-09-19 2021-06-08 International Business Machines Corporation Haptic movable display for spatial correlation
EP3916479A4 (en) * 2019-02-06 2022-03-30 Sony Group Corporation IMAGING DEVICE, IMAGING OPERATING DEVICE AND CONTROL METHOD
EP3937506A4 (en) * 2019-03-04 2023-03-08 Maxell, Ltd. HEAD MOUNTED INFORMATION PROCESSING DEVICE
DE102019118752B4 (de) 2019-07-10 2023-06-15 Schölly Fiberoptic GmbH Verfahren zur adaptiven Funktionsneubelegung von Bedienelementen eines Bildaufnahmesystems sowie zugehöriges Bildaufnahmesystem
WO2021024753A1 (ja) * 2019-08-02 2021-02-11 ソニー株式会社 情報処理装置、情報処理方法、並びにプログラム
US11212449B1 (en) * 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
EP4227890A4 (en) * 2020-10-09 2023-12-06 NEC Corporation DEVICE FOR DETECTING A LIVING BODY, CONTROL METHOD AND COMPUTER READABLE MEDIUM
US11165953B1 (en) * 2020-12-17 2021-11-02 Gopro, Inc. Framing recommendations by image capture device
US11500454B2 (en) * 2020-12-29 2022-11-15 Snap Inc. Body UI for augmented reality components
KR20230124703A (ko) 2020-12-29 2023-08-25 스냅 인코포레이티드 증강 현실 컴포넌트들을 위한 신체 ui
WO2023096940A2 (en) * 2021-11-29 2023-06-01 Apple Inc. Devices, methods, and graphical user interfaces for generating and displaying a representation of a user
WO2024076631A1 (en) * 2022-10-06 2024-04-11 Google Llc Real-time feedback to improve image capture

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008112519A1 (en) 2007-03-12 2008-09-18 University Of Pittsburgh - Of The Commonwealth System Of Higher Education Fingertip visual haptic sensor controller
JP2009065577A (ja) * 2007-09-10 2009-03-26 Ricoh Co Ltd 撮像装置および撮像方法
US20090251421A1 (en) * 2008-04-08 2009-10-08 Sony Ericsson Mobile Communications Ab Method and apparatus for tactile perception of digital images
US20100225773A1 (en) * 2009-03-09 2010-09-09 Apple Inc. Systems and methods for centering a photograph without viewing a preview of the photograph
US8957981B2 (en) * 2010-03-03 2015-02-17 Intellectual Ventures Fund 83 Llc Imaging device for capturing self-portrait images
US8798534B2 (en) * 2010-07-09 2014-08-05 Digimarc Corporation Mobile devices and methods employing haptics
US9069760B2 (en) * 2010-08-24 2015-06-30 Lg Electronics Inc. Mobile terminal and controlling method thereof
US20120105663A1 (en) 2010-11-01 2012-05-03 Cazier Robert P Haptic Feedback Response
US8875286B2 (en) 2010-12-01 2014-10-28 Cisco Technology, Inc. Method and apparatus for detecting malicious software using machine learning techniques
US20120176525A1 (en) * 2011-01-12 2012-07-12 Qualcomm Incorporated Non-map-based mobile interface
US9672355B2 (en) 2011-09-16 2017-06-06 Veracode, Inc. Automated behavioral and static analysis using an instrumented sandbox and machine learning classification for mobile security
US20130089240A1 (en) 2011-10-07 2013-04-11 Aoptix Technologies, Inc. Handheld iris imager
US9411423B2 (en) 2012-02-08 2016-08-09 Immersion Corporation Method and apparatus for haptic flex gesturing
US8526677B1 (en) * 2012-07-16 2013-09-03 Google Inc. Stereoscopic camera with haptic feedback for object and location detection
KR20140090318A (ko) * 2013-01-07 2014-07-17 삼성전자주식회사 햅틱 기반 카메라 운용 지원 방법 및 이를 지원하는 단말기
WO2014209405A1 (en) * 2013-06-29 2014-12-31 Intel Corporation System and method for adaptive haptic effects

Also Published As

Publication number Publication date
JP6143975B1 (ja) 2017-06-07
US9507420B2 (en) 2016-11-29
BR112016026613A2 (ko) 2017-08-15
CN106462240A (zh) 2017-02-22
US20150334292A1 (en) 2015-11-19
EP3143477A1 (en) 2017-03-22
EP3143477B1 (en) 2019-11-06
BR112016026613B1 (pt) 2022-11-01
CN106462240B (zh) 2019-05-28
JP2017518691A (ja) 2017-07-06
KR101794842B1 (ko) 2017-11-07
WO2015175217A1 (en) 2015-11-19

Similar Documents

Publication Publication Date Title
KR101794842B1 (ko) 이미지들을 캡처하는 것을 돕기 위해 햅틱 피드백을 제공하기 위한 시스템 및 방법
US10445482B2 (en) Identity authentication method, identity authentication device, and terminal
CN110868626B (zh) 一种内容数据预加载的方法及装置
US20170091551A1 (en) Method and apparatus for controlling electronic device
US9817235B2 (en) Method and apparatus for prompting based on smart glasses
EP2925005A1 (en) Display apparatus and user interaction method thereof
EP3540645A1 (en) Display apparatus and image correction method thereof
EP3299946B1 (en) Method and device for switching environment picture
CN105528151A (zh) 亮度调整方法及装置
US20190318169A1 (en) Method for Generating Video Thumbnail on Electronic Device, and Electronic Device
CN108958587B (zh) 分屏处理方法、装置、存储介质和电子设备
EP3328062A1 (en) Photo synthesizing method and device
KR20140052263A (ko) 콘텐츠 서비스 시스템, 그 시스템에서의 콘텐츠 서비스를 위한 장치 및 방법
KR20130088493A (ko) Ｕｉ 제공 방법 및 이를 적용한 영상 수신 장치
CN112256181B (zh) 交互处理方法、装置、计算机设备及存储介质
US9921796B2 (en) Sharing of input information superimposed on images
JP2018532628A (ja) セルフバランスカーの制御方法、装置、プログラム及び記録媒体
CN104244132A (zh) 一种智能耳机系统及其控制方法
KR20190135794A (ko) 이동 단말기
CN109040427B (zh) 分屏处理方法、装置、存储介质和电子设备
US10742937B2 (en) Watching apparatus, watching method, and recording medium
CN105045510B (zh) 实现视频查看操作的方法及装置
TW201426569A (zh) 電子設備及其特定參數調整方法
JP2012174057A (ja) 表示装置、テレビジョン受像装置、特定方法、コンピュータプログラム及び記録媒体
EP2733954A1 (en) Display apparatus and method for delivering message thereof

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant