KR102013708B1 - 자동 초점 설정 방법 및 이를 위한 장치 - Google Patents

자동 초점 설정 방법 및 이를 위한 장치 Download PDF

Info

Publication number
KR102013708B1
KR102013708B1 KR1020130034842A KR20130034842A KR102013708B1 KR 102013708 B1 KR102013708 B1 KR 102013708B1 KR 1020130034842 A KR1020130034842 A KR 1020130034842A KR 20130034842 A KR20130034842 A KR 20130034842A KR 102013708 B1 KR102013708 B1 KR 102013708B1
Authority
KR
South Korea
Prior art keywords
eyeball
focus
user
image
distance
Prior art date
Application number
KR1020130034842A
Other languages
English (en)
Other versions
KR20140118608A (ko
Inventor
다비드 코진스키
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130034842A priority Critical patent/KR102013708B1/ko
Priority to US14/152,803 priority patent/US9225895B2/en
Priority to EP14152810.9A priority patent/EP2784561A1/en
Priority to CN201410125947.5A priority patent/CN104076481B/zh
Publication of KR20140118608A publication Critical patent/KR20140118608A/ko
Application granted granted Critical
Publication of KR102013708B1 publication Critical patent/KR102013708B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/958—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
    • H04N23/959—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging by adjusting depth of field during image capture, e.g. maximising or setting range based on scene characteristics
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/287—Systems for automatic generation of focusing signals including a sight line detecting device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/671—Focus control based on electronic image sensor signals in combination with active ranging signals, e.g. using light or sound signals emitted toward objects

Abstract

본 발명은 사용자의 안구 변화에 따라 자동으로 초점을 설정할 수 있는 자동 초점 설정 방법 및 이를 위한 장치를 제공한다. 본 발명에 따른 자동 초점 설정 방법은, 사용자의 안구와, 상기 사용자의 안구에 의해 응시되고 있는 지점인 초점까지의 거리를 계산한 거리 데이터를 생성하는 과정과, 상기 거리 데이터를 기초로 상기 초점이 포함된 초점면을 결정하는 과정을 포함한다.

Description

자동 초점 설정 방법 및 이를 위한 장치{METHOD FOR AUTOMATICALLY SETTING FOCUS AND THEREFOR}
본 발명은 자동 초점 설정 장치 및 방법에 관한 것으로, 더욱 자세히는 사용자의 안구 변화에 따라 자동으로 초점을 설정할 수 있는 자동 초점 설정 방법 및 이를 위한 장치에 관한 것이다.
최근 카메라 장치는 자동으로 초점을 조절해주는 기능인 자동 초점(AF: Auto Focusing) 검출 기능이 지원되고 있다. 그러나 상기의 자동 초점 검출 기능은 여러가지 문제점들을 내포하고 있기도 하다. 예를 들어, 초점이 맞춰져야 할 주요 피사체가, 상기 피사체보다 더 카메라 렌즈에 가까운 다른 물체에 의하여 부분적으로 가려지는 경우에 자동 초점 검출 기능을 이용하면, 카메라가 상기 주요 피사체를 검출하기 어렵다. 또한 사용자가 저조도(low light level)로 촬영을 하고 있는 경우에 자동 초점 검출 기능을 이용하면, 카메라가 주요 피사체와 다른 물체들 간의 차이를 인식하지 못하여 주요 피사체를 검출하지 못하는 경우가 종종 발생한다. 또한 주요 피사체가 적외선을 흡수하는 물체인 경우에 자동 초점 검출 기능을 이용하면, 카메라가 주요 피사체와의 거리를 제대로 측정하지 못한다. 뿐만 아니라 사용자가 낮은 콘트라스트(contrast)를 가지는 물체, 예를 들어 흰 벽, 하늘 등을 촬영하고자 하는 경우에 자동 초점 검출 기능을 사용하면 카메라가 초점을 검출하지 못한다.
카메라 장비를 이용하여 촬영을 하고자 할 때, 사용자는 초점을 수동으로 또는 자동으로 설정하게 된다. 통상적으로 자동모드에서 초점은 사용자에 의하여 선택된 물체에 설정된다. 일반적으로 프레임의 중심 영역에서 작은 사각형인, 상기 프레임의 특정 영역 내에 물체가 배치되도록 하는 것이 바람직하다. 다른 설정 방법으로는, 카메라 장치가 사용자로 하여금 초점 설정을 위한 복수의 영역들을 임시로 제안하고, 사용자가 그 복수의 영역들 중 어느 하나를 선택함으로써 초점을 설정할 수도 있다. 그 이후 사용자는 카메라 장치의 셔터 버튼을 반쯤 누름으로써 선택된 물체에 렌즈의 초점이 맞도록 조치할 수 있다. 프레임이 선택된 물체가 있는 위치를 벗어난다고 하더라도 사용자가 셔터 버튼을 반쯤 누르고 있는 동작을 유지하고 있는 경우에는 초점을 재조정하기 어렵다. 사용자가 셔터 버튼을 더 강하게 누르는 경우에는, 선택된 물체 상에 초점이 설정된 상태로 사진을 촬영하는 동작으로 이어진다. 상기와 같이 카메라 장치의 자동 초점 기능은 사용자의 세심한 주의를 필요로 한다.
일반적인 자동 초점 기능은 카메라 장치가 렌즈를 통해 입력되는 영상 상에서의 콘트라스트(contrast)값을 기초로 수행된다. 초점 조정을 위하여 이용되는 장면 또는 영역이 타당한 콘트라스트를 가지지 못하는 경우, 자동 초점은 실패할 수 있다. 이러한 현상은 어둠 속에서, 또는 크고 평평하고 유사한 색깔을 가지는 평면들의 사진을 촬영할 때 종종 발생한다. 또한 피사체가 프레임의 중심에 위치하지 않을 때에도 자동 초점 기능 수행에 문제가 발생할 수 있다. 피사체, 즉 선택된 물체가 카메라 장치에 더 가깝게 위치한 물체들에 의해 부분적 또는 전체적으로 모호하게 되면 카메라 장치는 자동 초점 기능을 수행하지 못하며, 사용자가 직접 수동으로 초점을 설정하여야 한다.
본 발명의 목적은 사용자의 안구 변화에 따라 자동으로 초점을 설정할 수 있는 자동 초점 설정 방법 및 이를 위한 장치를 제공함에 있다.
본 발명의 일 실시예에 따른 자동 초점 설정 방법은, 사용자의 안구와, 상기 사용자의 안구에 의해 응시되고 있는 지점인 초점까지의 거리를 계산한 거리 데이터를 생성하는 과정과, 상기 거리 데이터를 기초로 상기 초점이 포함된 초점면을 결정하는 과정을 포함한다.
본 발명의 일 실시예에 따른 자동 초점 설정 장치는, 사용자의 안구에 발생하는 변화를 감지하는 안구 측정부와, 사용자의 안구와, 상기 사용자의 안구에 의해 응시되고 있는 지점인 초점까지의 거리를 계산한 거리 데이터를 생성하고, 상기 거리 데이터를 기초로 상기 초점이 포함된 초점면을 결정하는 제어부를 포함한다.
본 발명에 따르면, 사용자의 안구 변화에 따라 자동으로 초점을 설정할 수 있는 자동 초점 설정 방법 및 이를 위한 장치를 제공한다.
도 1은 본 발명의 일 실시예에 따른 자동 초점 설정 장치가 포함된 초점 설정 시스템을 도시한 도면,
도 2는 도 1에 도시된 초점 설정 시스템에서의 초점을 자동으로 설정 하는 방법의 일 예를 나타낸 순서도,
도 3은 도 1에 도시된 초점 설정 시스템에서의 자동 초점 설정 방법의 다른 예를 나타낸 순서도,
도 4는 도 1에 도시된 초점 설정 시스템에서의 자동 초점 설정 방법의 또 다른 예를 나타낸 순서도,
도 5는 도 1에 도시된 초점 설정 시스템에서의 초점 설정 장치의 구성을 나타낸 블록도,
도 6a 내지 도 6c는 도 5에 도시된 자동 초점 설정 장치에서의 초점 설정 방법의 일 예를 나타낸 도면,
도 7은 도 5에 도시된 자동 초점 설정 장치에서의 초점 설정 방법의 다른 예를 나타낸 도면,
도 8a 및 도 8b는 도 5에 도시된 자동 초점 설정 장치에서 심도에 따라 각각 달라지는 영상을 사용자에게 제공하는 일 예를 나타낸 도면,
도 9a 및 도 9b는 도 5에 도시된 자동 초점 설정 장치에서 초점의 위치에 따라 각각 달라지는 영상을 사용자에게 제공하는 일 예를 나타낸 도면,
도 10a 내지 도 10c는 도 5에 도시된 자동 초점 설정 장치에서 초점의 위치에 따라 각각 달라지는 영상을 사용자에게 제공하는 다른 예를 나타낸 도면, 그리고
도 11은 도 5에 도시된 자동 초점 설정 장치에서 안구의 초음파 이미지를 촬영하는 초음파 촬영 센서의 일 예를 나타낸 도면이다.
제1실시예 : 카메라 장치에서 자동으로 초점을 설정하는 방법
본 발명의 제1실시예는 광학 기구들, 특히 디지털 SLR 카메라들에서 초점을 설정하기 위한 방법을 포함한다. 제1실시예에 따라 본 발명에 따른 자동 초점 설정 방법 및 장치에서는 인간-기계 인터페이스(Human-Machine Interface: HMI)를 제공할 수 있다.
카메라 장치를 이용하여 촬영을 하고자 할 때, 사용자는 초점을 수동으로 또는 자동으로 설정하게 된다. 통상적으로 자동모드에서 초점은 사용자에 의하여 선택된 물체에 설정된다. 일반적으로 프레임의 중심 영역에서 작은 사각형인, 상기 프레임의 특정 영역 내에 물체가 배치되도록 하는 것이 바람직하다. 다른 설정 방법으로는, 카메라 장치가 사용자로 하여금 초점 설정을 위한 복수의 영역들을 임시로 제안하고, 사용자가 그 복수의 영역들 중 어느 하나를 선택함으로써 초점을 설정할 수도 있다. 그 이후 사용자는 카메라 장치의 셔터 버튼을 반쯤 누름으로써 선택된 물체에 렌즈의 초점이 맞도록 조치할 수 있다. 프레임이 선택된 물체가 있는 위치를 벗어난다고 하더라도 사용자가 셔터 버튼을 반쯤 누르고 있는 동작을 유지하고 있는 경우에는 초점을 재조정하기 어렵다. 사용자가 셔터 버튼을 더 강하게 누르는 경우에는, 선택된 물체 상에 초점이 설정된 상태로 사진을 촬영하는 동작으로 이어진다. 상기와 같이 카메라 장치의 자동 초점 기능은 사용자의 세심한 주의를 필요로 한다.
일반적인 자동 초점 기능은 카메라 장치가 렌즈를 통해 입력되는 영상 상에서의 콘트라스트(contrast)값을 기초로 수행된다. 초점 조정을 위하여 이용되는 장면 또는 영역이 타당한 콘트라스트를 가지지 못하는 경우, 자동 초점은 실패할 수 있다. 이러한 현상은 어둠 속에서, 또는 크고 평평하고 유사한 색깔을 가지는 평면들의 사진을 촬영할 때 종종 발생한다. 또한 피사체가 프레임의 중심에 위치하지 않을 때에도 자동 초점 기능 수행에 문제가 발생할 수 있다. 피사체, 즉 선택된 물체가 카메라 장치에 더 가깝게 위치한 물체들에 의해 부분적 또는 전체적으로 모호하게 되면 카메라 장치는 자동 초점 기능을 수행하지 못하며, 사용자가 직접 수동으로 초점을 설정하여야 한다.
그에 따른 본 발명의 제1실시예에 따른 해결 수단은, 일반적으로 디지털 일안 반사형(Single Lens Reflex, SLR) 카메라의 기능을 제어하기 위한 방법으로서, 특히 초점을 설정하기 위한 사람의 안구 조절 메커니즘을 이용한다. 본 발명의 일 실시예에서 카메라 장치에는 소형화된 근전도 센서 및/또는 초음파 촬영 센서들이 뷰파인더 구조의 일부로서 내장될 수 있다. 근전도 센서 및/또는 초음파 촬영 센서들은 사람의 안구 조절과 관련된 매개변수들, 예를 들어 모양체근의 전기적 활동 및/또는 수정체의 두께 등을 측정할 수 있다. 자기 조절에 의하여 안구가 항상 적절한 초점을 유지한다는 사실에 기초하여, 카메라 장치는 측정된 매개변수들, 예를 들어 근전도 센서를 이용하여 측정된 값 또는 초음파 촬영 센서를 통해 측정된 값을 기초로 카메라 장치의 초점을 설정하기 위한 제어 신호를 생성할 수 있다. 이 제어 신호는 카메라 렌즈를 조절하는 근거로서 활용되거나 또는 뷰파인더를 통하여 사용자에게 제공되는 영상, 즉 사용자에 의해 관찰되는 영상을 변화시킬 수 있다. 상기와 같은 제어 방법은 아래 도 1에 도시된 바이오 피드백 루프에 의하여 지속적으로 수행될 수 있다.
이 기술 분야에서 통상의 지식을 가진 자가 용이하게 이해하는 바와 같이, 본 발명의 제1실시예는 다른 종류의 광학 장비 분야로 확장, 적용될 수 있다. 특히 본 발명의 제1실시예는 카메라들, 캠코더들, 현미경들, 의료 기구들, 망원경들, 쌍안경들 등을 포함하는 영상 등록 및 관찰을 위한 장치들에 적용되도록 구성될 수 있다. 또한 다른 실시예에 따라 제1실시예에 따른 방법 또는 장치는 사진술, 미시적 관찰들, 의학, 천문학 등의 분야에서도 적용될 수 있다.
제2실시예 : 디스플레이 장치들에서 자동으로 초점을 설정하는 방법
본 발명의 제2실시예는 새롭고 독특한 사용자 경험을 제공할 수 있다. 제1실시예보다 더 깊은 수준의 적응적 인간-기계 상호작용(adaptive human-machine interaction)이 사용자에게 제공함으로써, 영화를 감상하고, 게임을 플레이하고, 그리고 그래픽 사용자 인터페이스들을 조작할 때마다 사용자에게 더 많은 즐거움을 제공할 것이다.
제2실시예는 디스플레이 장치, 특히 3D 디스플레이 장치가 깊은 영상 심도 효과를 달성하기 위하여 고안된다. 본 발명의 제2실시예에 따른 사람 안구의 조절적 능력(accommodative ability)에 기초하여 디스플레이 장치가 초점의 일면(plane)(이하, 초점면)을 선택함으로써, 동적인 피사계 심도 효과(dynamic depth of filed effect)를 사용자에게 전달할 수 있다. 본 발명에서 초점면은 초점이 포함된 영역으로서, 사용자의 안구로부터 초점까지를 연결한 직선과 이루는 각이 직각인 선 또는 면일 수 있다. 또한 본 발명에서 사용자는 초점을 중심으로 초점면에 포함된 물체를 가장 뚜렷한 형태로 인식하게 되는 것으로 가정한다.
본 발명에 따른 디스플레이 장치 또한 제1실시예의 카메라 장치와 마찬가지로 근전도 센서 또는 초음파 촬영 센서를 포함하여 설계될 수있다. 디스플레이 장치는 사용자의 안구에 포함된 수정체 또는 모양체근의 변화를 측정한 신호를 수신한다. 디스플레이 장치는 상기 수신한 신호에 따라 사용자에게 상기 안구에 의하여 “요청된” 초점면을 제공한다. 초점의 복수의 면들(multiple planes of focus)을 이용하여 비디오(video)를 기록하기 위하여 공지된 방법들이 있다. 또한 초점면들 중 원하는 일면에 따라 3D 영상들을 표현하기 위하여 공지된 방법들이 있다. 그러나 본 발명과 같은 안구의 반응을 반영하는 바이오 피드백은 알려져 있지 않다. 제2실시예에 따른 디스플레이 장치는 사용자에게 더 좋은 사용자 경험(그 장면에 “몰두하는 것”)을 유발할 수 있을 것으로 기대된다. 이러한 효과는 또한 사용자로 하여금 눈의 피로(eye strain)를 줄일 수 있을 것으로 기대되며, 관찰자, 즉 사용자와 화면 간의 거리에 따라 발생되는 문제, 예를 들어 사용자에게 영상 신호가 겹쳐서 표시되는 현상 등을 완화시킬 수 있다.
본 발명의 예시적인 실시예에서, 소형화된 근전도 센서및/또는 초음파 촬영 센서들이 제3실시예에 따라 디스플레이 장치 중에서도 안경의 일부로서 내장될 수 있다. 근전도 센서 및/또는 초음파 촬영 센서는 사람의 안구 조절과 관련된 매개변수들, 예를 들어 모양체근의 전기적 활동 및/또는 수정체의 두께 등을 측정할 수 있다. 사람의 안구가 스스로, 항상 적절한 초점을 유지한다는 사실에 기초하여 디스플레이 장치는 측정된 매개변수들을 제어 신호로 변환한다. 이 제어 신호는 디스플레이 장치의 영상 신호를 조절하는 근거로서 활용되거나 또는 사용자에게 제공되는 영상, 즉 사용자에 의해 관찰되는 영상을 변화시킬 수 있다. 상기와 같은 제어 방법은, 제1실시예와 마찬가지로 도 1에 도시된 초점 설정 시스템의 바이오 피드백 루프에 의하여 지속적으로 수행될 수 있다.
특히 본 발명에 따른 접근법의 특징은, 사용자의 안구가 스크린 상에 표시된 영상에 영향을 미칠 수 있다는 점이다. 상기와 같은 점은, 무엇보다도 본 발명에서 채용하는 사용자 인터페이스들이 각기 다름에도 유지될 수 있다.
본 실시예는 두 가지의 주요 동작 모드를 가진다. 첫번째는 깊이감(depth perception)에 따른 착시(illusion)를 강화하는 것이고, 두번째는 관심 대상을 노출시키는 것이다.
이 기술 분야에서 통상의 지식을 가진 자가 용이하게 이해하는 바와 같이, 본 발명의 제2실시예 및 제3실시예는, 디지털 텔레비전, 영화들, 컴퓨터 게임들, 가상 현실, 설계 도구들(designing tools), 시각화, 의료 이미징(medical imaging), 영상 유도 수술(image guided surgery), 시뮬레이터들(simulators), 훈련 장치들(training devices) 등의 분야에서 확장, 응용될 수 있다.
특히 본 발명의 제2실시예는 신규한 3D 기반 사용자 인터페이스를 제어하기 위하여 구성될 수 있다. 예를 들어, 본 실시예에 따라 설계 가능한 3D 기반 사용자 인터페이스는 신체 내의 상이한 심도들을 가지는 해부학적 구조들(anatomical structures)의 선택(또는 강조, highlighting)에 의한 영상 유도 수술을 지원할 수 있다. 하나 이상의 외과 의사들은 약간 투명한(semi-translucent) 안경을 착용함으로써 수술용 도구들의 이용 결과들을 손쉽게 알 수 있게 된다.
다른 실시예에 따라 본 발명은 3D 의료 영상을 설명하는 사람으로 하여금, 본 발명에 따른 디스플레이 장치를 이용하여, 관찰 하의 조직에 따라 동적으로 영상 매개변수들(예를 들면, 하운스필드 스케일(Hounsfield scale))을 변화시키도록 할 수 있다.
또 다른 실시예에 따라 본 발명에 따른 그래픽 사용자 인터페이스를 갖는 컴퓨터 시스템의 사용자는, 양손을 이용하지 않고도 창들(windows), 위젯들(widgets), 또는 응용 프로그램들을 동적으로 선택하고, 상기 창들, 위젯들 또는 응용 프로그램들 사이에서 선택된 적어도 하나를 동적으로 움직일 수 있다.
본 발명에서 제안하는 방법들은 입체 영상 표현 시스템(stereoscopic image presentation system)들에 적용될 수 있으며, 상기 입체 영상 표현 시스템에는 디지털 텔레비전, 컴퓨터 비전(computer vision), 엔터테인먼트, 의료 장비 및 시스템들, 촬영술(cinematography) 및 영화 산업, 교육, 컴퓨터 이용 설계(computer aided design), 그래픽 사용자 인터페이스들 등은 물론이고, 입체 영상 표현 시스템들 중 상기의 분야들 외의 아직 발견되지 않은 분야들을 포함한다.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명에서는 구체적인 구성 소자 등과 같은 특정 사항들이 나타나고 있는데, 이는 본 발명의 보다 전반적인 이해를 돕기 위하여 제공된 것일 뿐 이러한 특정 사항들이 본 발명의 범위 내에서 소정의 변형이나 혹은 변경이 이루어질 수 있음은 이 기술분야에서 통상의 지식을 가진 자에게는 자명하다 할 것이다.
도 1은 본 발명의 일 실시예에 따른 자동 초점 설정 장치가 포함된 초절 설정 시스템을 도시한 도면이다.
도 1을 참조하면, 초점 설정 시스템은, 사용자의 안구(110), 측정 장치(120) 및 영상 제어 장치(130)를 포함할 수 있다. 실시예에 따라 측정 장치(120)는 영상 제어 장치(130)에 포함되는 형태로 구현될 수 있다.
사용자의 안구(110)에 의하여 관찰되는 영상은 영상 제어 장치(130)에 의하여 수정 또는 변형될 수 있다. 안구(110)는 사용자의 관심 대상에 자동적으로 초점을 맞춘다. 초점 조정의 과정은 안구(110)와 연관된 매개변수(안구 매개변수)들을 변화시킴으로써 이루어질 수 있다. 특히 안구(110)의 모양체근(ciliary mucle)의 활동으로 인하여 수정체(eye lens)의 두께가 변화함으로써 초점이 조정될 수 있다. 측정 장치(120)는 초점을 설정하기 위한 신호를 발생하는 장치로서, 예를 들어 근전도(EMG: eletromyogram) 센서 또는 초음파 촬영(USG: ultrasonographic) 센서 중 적어도 하나를 포함할 수 있다. 실시예에 따라 측정 장치(120)는 초점 설정에 관련된 신호를 획득하기 위해 적용 가능한 임의의 방법을 수행할 수 있다.
영상 제어 장치(130)는 출력되는 영상에 대한 보정(calibration) 및 스케일링(scaling)을 수행할 수 있다. 측정 장치(120)로부터 출력되는 측정 신호는 영상 제어 장치(130)로 피드백된다.
사용자, 즉 사람(human)은 수정체의 모양을 바꿈으로써, 즉 모양체근(ciliary muscle)의 모양을 변화시킴으로써 안구(110)에 의한 초점을 설정한다. 이미 언급한 바와 같이 사람의 경우에는 모양체근이 안구(110)의 유연한 수정체 모양을 변화시킨다. 모양체근은 수정체의 가장자리와 동심으로 연결된 인대들(ligaments)을 팽팽하게 하거나 또는 풀어줌으로써 수정체의 편평도(扁平度, oblateness)에 영향을 준다. 모양체근이 이완함으로써 인대들을 늘여서 수정체를 편평하게 하면, 사람은 멀리 위치하는 물체에 안구(110)의 초점을 맞출 수 있게 된다. 모양체근이 수축함으로써 인대들을 풀어주어 수정체를 둥글게 해주면, 사람은 가까이에 위치하는 물체에 안구(110)의 초점을 맞출 수 있게 된다.
안구(110)의 광학적 매개변수들은, 안구(110)에 포함된 근육의 전기적 활동, 수정체의 매개변수들과 연관된 신호들을 포함하며, 자동 초점 설정 시스템의 측정 장치(120)에 의하여 포착될 수 있다. 특히 본 실시예에 따른 측정 장치(120)는 수정체의 편평도를 측정할 수 있다.
EMG 방식, 즉 근전도 센서를 이용하여 상기 모양체근의 전기적 활동을 측정하기 위한 해결 수단들이 이미 존재하고 있다. 근전도 센서는 모양체근의 전기적 활동을 감지하여 처리한다. 근전도 센서는 모양체근의 활동으로 인하여 발생한 전기적 신호를 이용하여 상기 수정체의 편평함의 정도를 결정할 수 있다.
USG 방식, 즉 초음파 촬영 센서를 이용하여 상기 수정체의 모양을 측정하기 위한 해결 수단들도 존재하고 있다. 초음파 촬영 센서는 수축 또는 이완된 수정체의 모양을 촬영하고, 상기 촬영에 의하여 얻어진 영상들을 기초로 수정체에서의 편평함의 정도를 추정할 수 있다.
뿐만 아니라 EMG 방식과 USG 방식이 조합되어 이용될 수 있음을 당업자에게 자명할 것이다. 또한 미국 등록 특허 US 5139022A (title: METHOD AND APPATRAUS FOR IMAGEING AND ANALYSIS OF OCULAR TISSUE)에 개시된 기술 내용과 유사한 방식으로 안구(110)의 구조를 측정하기 위한 레이저 기반의 방법 또한 본 발명에서 고려될 수 있다.
상기와 같은 자동 초점 설정 방식이 검안법(optometry)에서 알려진 해결책들과 유사한 방식으로 구현될 수 있다는 것은 이 기술 분야에서 통상의 지식을 가진 자에게는 자명하다. 이하의 예시적인 실시예에서, 미리 정의된 장면들에 있어서 각각이 서로 다르게 선택된 초점을 가지는 복수 버전들이 상기 관찰자, 즉 사용자에게 보여질 수 있다. 또한 영상 제어 장치(130)에 의해 출력되는 각 장면 별로, 상기 안구(110)에 의한 초점 설정과 관련된 상기 신호, 예를 들어 측정 장치(120)에 의해 측정 신호가 측정되고, 측정 장치(120) 또는 영상 제어 장치(130) 내에 저장될 수 있다. 실시예에 따라 안구(110)에 대한 측정은 측정 장치(120)에 의해 지속적으로 이루어질 수 있으며, 그에 따라 영상 제어 장치(130)로부터 출력되는 영상 또한 지속적으로 변화할 수 있다.
도 2는 도 1에 도시된 초점 설정 시스템에서의 초점을 자동으로 설정 하는 방법의 일 예를 나타낸 순서도이다. 도 2에서 측정 장치(120)는 근전도 센서를 포함하는 형태로 구현된 것으로 가정한다.
도 2를 참조하면, 측정 장치(120)는 사용자의 안구(110)로부터 발생하는 근전도 신호(electromyogram signal)를 감지한다(S202). 이미 언급한 바와 같이, 안구(110)에 포함된 수정체는 모양체근의 움직임에 따라 수축 또는 이완된다. 본 실시예에서는, 설명의 편이를 위하여 상기와 같이 수정체의 두께를 조절하기 위하여 모양체근의 움직일 때 발생하는 전기 신호를 근전도 신호라 하기로 한다.
측정 장치(120)는 근전도 신호를 증폭하고(S204), 증폭된 근전도 신호를 디지털 신호로 변환한다(S206). 실시예에 따라 측정부(120)는 단계 S204에서 근전도 신호에 대한 신호 증폭 및 여과(filtering)를 수행할 수 있으며, 단계 S206에서 아날로그 신호의 형태를 가지는 근전도 신호를 디지털 신호의 형태로 변환할 수 있다.
측정 장치(120)는 디지털 신호로 변환된 근전도 신호를 영상 제어 장치(130)로 전송한다(S208). 영상 제어 장치(130)는 측정 장치(120)로부터 수신한 디지털 신호를 이용하여 사용자의 안구(110)로부터 초점면까지의 거리를 계산한다(S210). 안구(110)로부터 초점면까지의 거리가 계산되면, 영상 제어 장치(130)는 영상의 초점면을 재조정하여 사용자에게 출력한다(S212). 초점면(plane of focus)은 초점이 존재하는 면으로서, 사용자에게 가장 뚜렷한 형태로 보이는 면을 가리킨다. 본 실시예에서 영상 제어 장치(130)는 3D 영상 중에서도 초점면을 가장 뚜렷하게 표시하는 것이 바람직하다. 예를 들어, 도 2의 동작을 수행하기 전에 영상 제어 장치(130)에 의해 설정되어 있던 초점이, 사용자의 안구(110)에 의해 설정된 초점보다 후방으로 10cm 떨어진 면(제1초점면)이라고 가정한다. 영상 제어 장치(130)는 단계 S210에서 안구(110)에 의해 설정된 초점이 위치한 면을 계산한다. 그에 따라 영상 제어 장치(130)는 안구(110)에 의해 설정된 초점이 제1초점면보다 10cm 앞쪽에 위치함을 파악하게 된다. 영상 제어 장치(130)는 영상 제어 장치(130)를 통해 출력되는 영상의 초점을 10cm 앞쪽으로 재설정하고, 새로이 초점이 포함된 면(제2초점면)을 가장 뚜렷하게 표시한다. 이로써 사용자는 원하는 지점에 초점이 정확하게 맞춰진 영상을 영상 제어 장치(130)로부터 제공받을 수 있게 된다.
실시예에 따라 측정 장치(120)가 단계 S210의 동작, 즉 안구(110)로부터 초점면까지의 거리를 계산할 수도 있다. 상기와 같이 측정 장치(120)가 안구(110)로부터 초점면까지의 거리를 계산한 경우, 측정 장치(120)는 계산된 거리값을 포함하는 데이터(이하, 거리 데이터라 하기로 한다)를 영상 제어 장치(130)에 전달할 수 있다. 측정 장치(120)로부터 거리 데이터를 수신한 영상 제어 장치(130)는 영상의 초점면을 재조정하여 사용자에게 출력할 수 있다.
도 3은 도 1에 도시된 초점 설정 시스템에서의 자동 초점 설정 방법의 다른 예를 나타낸 순서도이다. 도 3에서 측정 장치(120)는 초음파 촬영 센서를 포함하는 형태로 구현된 것으로 가정한다.
도 3을 참조하면, 측정 장치(120)는 사용자의 안구(110)에 대한 초음파 촬영을 수행하고, 그에 대한 결과로서 초음파 이미지들을 수집한다(S302). 실시예에 따라 측정부(120)는 미리 정해진 시간마다 안구(110)에 대한 초음파 촬영을 수행하여 상기 안구(110)에 대한 초음파 이미지들을 수집할 수 있다.
측정 장치(120)는 단계 S302에서 수집된 이미지들을 기초로 사용자의 안구(110)에 포함된 수정체를 인식한다(S304). 수정체가 인식되면, 측정 장치(120)는 단계 S302에서 수집된 초음파 이미지들을 기초로 수정체의 편평도를 파악한다(S306). 측정부(120)는 단계 S306에서 파악된 수정체의 편평도를 나타내는 데이터(이하, 편평도 데이터라 하기로 한다)를 영상 제어 장치(130)에 전송한다(S308). 영상 제어 장치(130)는 측정 장치(120)로부터 전달받은 편평도 데이터를 기초로 사용자의 안구(110)로부터 초점면까지의 거리를 계산한다(S310). 안구(110)로부터 초점면까지의 거리가 계산되면, 영상 제어 장치(130)는 영상의 초점면을 재조정하여 사용자에게 출력한다(S312).
실시예에 따라 측정 장치(120)는 단계 S310의 동작, 즉 안구(110)로부터 초점면까지의 거리를 계산할 수도 있다. 상기와 같이 측정 장치(120)가 안구(110)로부터 초점면까지의 거리를 계산한 경우, 측정 장치(120)는 계산된 거리값을 포함하는 거리 데이터를 영상 제어 장치(130)에 전달할 수 있다.
다른 실시예에 따라 측정 장치(120)는 단계 S302에서 수집된 초음파 이미지들을 영상 제어 장치(130)로 전달할 수도 있다. 영상 제어 장치(130)는 상기 초음파 이미지들을 기초로 수정체의 편평도를 파악할 수 있다. 또한 영상 제어 장치(130)는 측정 장치(120)와 마찬가지로 수정체의 편평도를 포함하는 데이터, 즉 편평도 데이터를 생성할 수 있다. 이후 영상 제어 장치(130)는 편평도 데이터를 기초로 사용자의 안구(110)로부터 초점면까지의 거리를 계산한다. 안구(110)로부터 초점면까지의 거리가 계산되면, 영상 제어 장치(130)는 단계 S312에서와 마찬가지로 초점면을 재조정하여 사용자에게 출력할 수 있다.
도 4는 도 1에 도시된 초점 설정 시스템에서의 자동 초점 설정 방법의 또 다른 예를 나타낸 순서도이다. 도 4에서 측정 장치(120)는 근전도 센서 및 초음파 촬영 센서를 모두 포함한 형태로 구현된 것으로 가정하며, 도 4의 동작은 측정 장치(120)와 영상 제어 장치(130)가 통합되어 하나의 장치로서 구현된 자동 초점 설정 장치에 의하여 수행되는 것으로 가정한다.
도 4를 참조하면, 자동 초점 설정 장치는 자동 초점 설정을 위한 사용자 입력을 수신한다(S402). 본 실시예에 따른 자동 초점 설정 장치는 자동으로 초점을 설정하기 위한 사용자 입력을 수신할 수 있다. 또한 자동 초점 설정 장치는 상기 사용자 입력에 따라 자동으로 초점을 설정 또는 재설정하기 위한 동작을 수행할 수 있다.
실시예에 따라 자동 초점 설정 장치는 카메라 장치로 구현될 수 있다. 사용자가 자신의 안구(110)를 뷰파인더(522)에 근접시키면, 카메라 장치로 구현된 자동 초점 설정 장치는 상기 안구(110)의 근접을 상기 사용자 입력으로서 인식할 수 있다.
다른 실시예에 따라 자동 초점 설정 장치가, 입체 영상을 사용자에게 제공하는 3D 영상 디스플레이 장치로 구현될 수 있다. 상기 3D 영상 디스플레이 장치 중 스크린의 전면에 사용자가 위치하였음을 감지하면, 3D 영상 디스플레이 장치는 상기 사용자가 자동 초점 설정 동작을 요청한 것으로 간주하고 초점을 설정 또는 재설정할 수 있다. 이때 3D 영상 디스플레이 장치는 사용자가 스크린의 전면에 위치하였는지 여부를 감지하기 위한 카메라 또는 적외선 센서 등을 더 포함하여 구현될 수 있다.
상기와 같이 자동 초점 설정을 위한 사용자 입력을 수신하면, 자동 초점 설정 장치는, 근전도 신호를 감지하여 초점을 설정하는지 여부를 판단한다(S404). 본 실시예에서 자동 초점 설정 장치는, 근전도 센서를 이용하여 초점을 설정할 것인지 또는 초음파 촬영 센서를 이용하여 초점을 설정할 것인지 여부를 미리 결정할 수 있다.
단계 S404의 판단 결과 근전도 센서를 감지하여 초점을 설정하는 경우(S404: 예), 자동 초점 설정 장치는 사용자의 안구(110)로부터 발생하는 근전도 신호를 감지한다(S406). 초점 설정 장치는 근전도 신호를 기초로 안구로부터 초점면까지의 거리를 계산한다(S408). 초점 설정 장치는 단계 S408에서 계산된 거리값을 기초로 영상의 초점면을 재조정하여 사용자에게 출력한다(S410).
단계 S404의 판단 결과 근전도 센서를 감지하여 초점을 설정하지 않는 경우(S404: 아니오), 초점 설정 장치는 사용자의 안구(110)에 대한 초음파 이미지들을 촬영한다(S412). 초점 설정 장치는 초음파 이미지들을 기초로 사용자의 안구(110)에 포함된 수정체를 인식한다(S414). 수정체가 인식되면, 초점 설정 장치는 상기 초음파 이미지들을 기초로 수정체의 편평도를 결정한다(S416). 단계 S416에서 초점 설정 장치는 수정체의 편평도를 나타내는 편평도 데이터를 생성할 수 있다. 자동 초점 설정 장치는 편평도 데이터를 기초로 안구(110)로부터 초점면까지의 거리를 계산한다(S418). 자동 초점 설정 장치는 단계 S418에서 계산된 거리값을 기초로 영상의 초점면을 재조정하여 사용자에게 출력한다(S420).
도 5는 도 1에 도시된 초점 설정 시스템에서의 초점 설정 장치의 구성을 나타낸 블록도이다. 도 5의 초점 설정 장치(500)는 측정 장치(120) 및 영상 제어 장치(130)를 모두 포함하는 형태로 구현된 것으로 가정한다.
도 5를 참조하면, 초점 설정 장치(500)는 안구 측정부(510), 디스플레이부(520) 및 제어부(540)를 포함할 수 있으며 사용자 입력부(502), 메모리(504) 및 카메라(530)를 더 포함할 수 있다.
사용자 입력부(502)는 사용자로부터 입력되는 사용자 입력을 수신한다. 본 실시예에 따른 사용자 입력부(502)는 자동으로 초점을 설정하기 위한 사용자 입력을 수신할 수 있다. 사용자 입력부(502)는 디스플레이부(520)를 통해 2D 영상 또는 3D 영상이 표시되도록 하기 위한 사용자 입력을 수신할 수 있다.
메모리(504)에는 초점 설정 장치(500)의 동작을 제어하기 위한 각종 데이터가 저장된다. 본 실시예에서 메모리(504)에는 디스플레이부(520)에 의해 표시되고 있는 영상이 저장되어 있을 수 있다. 또한 메모리(504)에는 초점 설정 장치(500)의 현재 설정이, 근전도 센서를 이용하여 초점면을 조정하도록 설정되어 있는지 또는 초음파 촬영 이미지를 이용하여 초점면을 재조정하도록 설정되어 있는지 여부를 알 수 있는 상태 데이터 또한 저장될 수 있다.
안구 측정부(510)는 초점 설정 장치(500)를 사용하는 사용자의 안구(110)에서 일어나는 변화를 감지한다. 특히 안구 측정부(510)는 안구(110)의 변화(예를 들어, 수정체의 편평도 변화)를 측정하기 위한 근전도 센서(512) 및 초음파 촬영 센서(514) 중 적어도 하나를 포함할 수 있다. 또한 안구 측정부(510)는 근전도 센서(512) 및 초음파 촬영 센서(514) 중 어느 하나를 이용하여 안구(110)의 변화를 감지할 수 있다.
근전도 센서(512)는 안구(110)로부터 발생되는 근전도 신호를 감지한다. 초음파 촬영 센서(514)는 안구(110)에 대한 이미지를 초음파 촬영하여 초음파 이미지를 생성한다. 실시예에 따라 초음파 촬영 센서(514)는 메모리(504)에 미리 저장된 시간마다(예를 들어, 0.1초) 안구(110)에 대한 초음파 촬영을 수행할 수 있다.
안구(110)에 포함된 수정체는, 상기 수정체와 연결된 모양체근의 움직임에 따라 이완 또는 수축된다. 예를 들어 모양체근이 수축되면 수정체는 두꺼워지고(팽창), 모양체근이 이완되면 수정체는 얇아진다(수축). 상기와 같이 모양체근이 이완 또는 수축할 때마다 상기 모양체근에 인가된 활동전위(活動電位)의 값이 변화한다. 본 실시예에 따른 근전도 센서(512)는 모양체근의 이완 또는 수축에 따라 인가되는 활동전위를 근전도 신호로서 감지한다. 예를 들어, 모양체근이 이완되는 경우에는 상기 모양체근에 레벨 1의 전압이 인가되고, 모양체근이 수축되는 경우에는 상기 모양체근에 레벨 10의 전압이 인가된다고 가정한다. 근전도 센서(512)는 상기 레벨 1 또는 레벨 10의 전압을 감지함으로써 모양체근의 수축 또는 이완을 감지할 수 있다.
근전도 센서(512)에 의하여 근전도 신호가 감지되면, 안구 측정부(510)는 상기 근전도 신호를 디지털 신호로 변환하여 제어부(540)에 전달할 수 있다. 실시예에 따라 안구 측정부(510)는 상기 근전도 신호를 기초로 사용자의 안구(110)로부터 초점 또는 초점면까지의 거리를 계산하여 거리 데이터를 생성할 수도 있다.
초음파 촬영 센서(514)는 사용자의 안구(110)를 초음파 촬영하며, 바람직하게 안구(110)에 포함된 수정체를 초음파 촬영하여 초음파 이미지를 생성한다. 초음파 촬영 센서(514)에 의하여 초음파 이미지가 생성되면, 안구 측정부(510)는 상기 초음파 이미지를 제어부(540)에 전달할 수 있다. 실시예에 따라 안구 측정부(510)는 상기 초음파 이미지를 기초로 안구(110)에 포함된 수정체의 편평도를 결정하고, 편평도 데이터를 생성할 수도 있다. 또한 안구 측정부(510)는 상기 편평도 데이터를 기초로 사용자의 안구(110)로부터 초점 또는 초점면까지의 거리를 계산하여 거리 데이터를 생성할 수도 있다.
실시예에 따라 안구 측정부(510)는 근전도 센서(512) 및 초음파 촬영 센서(514) 모두를 이용하여 안구(110)의 변화를 감지할 수도 있음은 당업자에게 자명할 것이다. 안구 측정부(510)는 근전도 센서(512)에 의해 감지된 근전도 신호 및 초음파 촬영 센서(514)를 통해 촬영된 초음파 이미지를 제어부(540)로 전달할 수 있다. 제어부(540)는 근전도 신호 및 초음파 이미지를 모두 이용하여 사용자의 안구(110)로부터 초점면까지의 거리를 보다 정확하게 계산할 수 있다.
실시예에 따라 제어부(540)는 근전도 센서(512)로부터 출력된 근전도 신호를 이용하여 우선적으로 거리 데이터를 계산하고, 초음파 이미지를 이용하여 상기 거리 데이터가 올바르게 계산되었는지 여부를 검증할 수도 있다.
디스플레이부(520)는 자동 초점 설정 장치(500)의 각종 데이터를 표시한다. 실시예에 따라 디스플레이부(520)는 구비된 스크린 등을 이용하여 메모리(504)에 저장된 데이터 또는 카메라(530)을 통해 입력되고 있는 영상을 표시할 수 있다. 실시예에 따라 디스플레이부(520)는 터치 스크린 등을 포함하여 사용자로부터 사용자 입력을 수신하는 사용자 입력부(502)를 포함하는 형태로 구현될 수도 있다.
실시예에 따라 자동 초점 설정 장치(500)가 카메라 장치로 구현되는 경우, 디스플레이부(520)는 뷰파인더(522)를 더 포함할 수 있다. 뷰파인더(522)는 카메라 장치 내의 광학 장치의 일종으로서, 사용자는 뷰파인더(522)에 안구를 근접시킴으로써 카메라 장치의 렌즈를 통해 입력되는 영상을 편리하게 제공받을 수 있다.
또한 본 실시예에서, 자동 초점 설정 장치(500)는 뷰파인더(522)를 통해 자동 초점 설정 장치(500)에 의해 현재 설정되고 있는 초점을 표시하여 사용자에게 제공할 수도 있다. 예를 들어, 자동 초점 설정 장치(500)는 뷰파인더(522)를 통해 표시되고 있는 영상의 어느 한 지점을 빨간 점으로 표시함으로써, 현재 자동 초점 설정 장치(500)에 의해 설정되고 있는 초점을 사용자에게 알릴 수 있다. 실시예에 따라 뷰파인더(522)는 현재 설정되고 있는 초점에 따라 상기 뷰파인더(522)를 통해 표시되는 영상의 일부를 흐리게 하거나 또는 영상의 일부를 뚜렷하게 표시할 수 있다. 즉 뷰파인더(522)는 초점의 위치에 따라 달라지는 심도를 반영한 영상을 사용자에게 제공할 수 있다. 즉 뷰파인더(522)는 제어부(540)의 제어 하에 초점이 포함된 영역을 선명하게 표시하고, 초점이 포함되지 않은 영역을 흐릿하게 표시할 수 있다.
카메라(530)는 렌즈(미도시)를 통해 영상을 입력받는다. 본 실시예에 따른 자동 초점 설정 장치(500)는 카메라 장치로 구현되는 경우 카메라(530) 및 뷰파인더(522)를 포함할 수 있다. 카메라(530)는 렌즈를 통해 입력된 영상을 영상 프레임으로 변환할 수 있다. 또한 카메라(530)는 지속적으로 렌즈를 통해 입력되는 영상을 프레임 단위로 실시간으로 메모리(504)에 저장하거나 또는 임시 저장할 수 있다. 실시예에 따라 자동 초점 설정 장치(500)가 카메라 장치가 아닌 장치로서 구현되는 경우에는 카메라(530)가 생략된 형태로 구현될 수도 있다.
제어부(540)는 자동 초점 설정 장치(500)의 전반적인 동작을 제어한다. 본 실시예에 따른 제어부(540)는 근전도 센서(512)에 의해 감지된 근전도 신호를 기초로 안구(110)로부터 초점 또는 초점면까지의 거리를 계산하거나 또는 초음파 촬영 센서(514)에 의해 촬영된 초음파 이미지들을 기초로 안구(110)로부터 초점 또는 초점면까지의 거리를 계산한다. 제어부(540)는 안구(110)로부터 초점까지의 거리를 나타내는 거리 데이터를 생성하고, 생성된 거리 데이터를 기초로 영상의 초점면을 재조정할 수 있다. 즉 제어부(540)는 디스플레이부(520)를 통해 표시되고 있는 영상 중 초점의 위치를 재설정하고, 재설정된 위치에 따라 상기 영상을 변환시킬 수 있다.
본 실시예에서 제어부(540)는 안구(110)로부터 초점면까지의 거리에 따라 초점을 설정 또는 재설정하는 초점면 설정부(542)를 포함할 수 있다. 초점면 설정부(542)는 근전도 신호 또는 초음파 이미지들을 기초로 안구(110)로부터 초점면까지의 거리를 계산할 수 있다. 또한 실시예에 따라 초점면 설정부(542)는 디스플레이부(520)를 통해 표시되는 영상의 심도(depth of field)를 결정할 수 있다.
심도는 초점이 포함되어 피사체가 선명하게 포착되는 영역으로서, 디스플레이부(520)에 의해 표시되는 영상 중 적어도 일부를 포함한다. 심도는 초점으로부터 일정 또는 비일정 범위를 포함할 수 있다. 초점면 설정부(542)는 초점이 재설정되는 경우, 상기 재설정된 초점에 따라 영상에서의 심도를 재설정할 수 있다.
초점 및 심도가 재설정되면, 제어부(540)는 재설정된 초점 또는 심도에 따라 영상을 변환 처리하고, 디스플레이부(520)를 통해 표시할 수 있다.
도 6a 내지 도 6c는 도 5에 도시된 자동 초점 설정 장치에서의 초점 설정 방법의 일 예를 나타낸 도면이다.
도 6a 및 도 6b는, 자동 초점 설정 장치(500)가 근전도 센서(512)를 이용하여 안구(110)로부터 초점(601, 602)까지의 거리를 계산하는 동작을 나타낸 도면이다.
자동 초점 설정 장치(500)가 카메라 장치로 구현되는 경우, 본 실시예에 따른 안구 측정부(510), 즉 하나 이상의 근전도 센서들(512)은 카메라 장치의 뷰파인더(522) 내에 배치된다. 근전도 센서(512)는, 사용자의 안구(110)가 뷰파인더(522)에 인접하면, 상기 안구(110)에 포함된 수정체(610)의 편평도를 감지하기 위하여 스케일링을 수행한다. 상기 수정체(610)의 편평함의 정도는, 상기 안구(110)으로부터 상기 안구(110)의 초점이 맞추어지는 물체(601, 602)까지의 거리에 대응한다. 그에 따라 본 실시예에서는 카메라 렌즈의 서보 메커니즘의 적절한 작동을 통하여 상기 초점면이 재설정될 수 있다. 상기 초점면의 재설정이 상기 안구(110)에 의하여 감지되는 영상을 변화시킨다. 상기 감지되는 영상의 변화가 상기 안구(110)로부터 다시 감지되고, 감지 결과에 따라 제어부(540)는 영상을 재차 변환할 수 있다. 상기와 같이 본 발명에 따른 자동 초점 설정 장치(500)는 안구(110)에 의해 발생하는 초점의 변화를 지속적으로 입력받음으로써, 상기 안구(110) 및 자동 초점 설정 장치(500) 간의 지속적인 피드백을 수행할 수 있다.
도 6a를 참조하면, 초점이 맞추어지는 물체(601)가 안구(110)로부터 먼 거리에 위치하면, 안구(110)에 포함된 수정체(610)는 수축하게 된다. 수정체(610)가 수축되면, 안구 측정부(510)에 포함된 근전도 센서들(512)은, 상기 수정체(610)의 수축으로 인하여 발생한 근전도 신호를 감지함으로써, 상기 수정체(610)의 수축을 감지할 수 있다. 제어부(540)는 근전도 신호를 기초로 안구(110)로부터 물체(601)까지의 거리를 계산한다.
도 6b를 참조하면, 초점이 맞추어지는 물체(602)가 안구(110)로부터 가까운 거리에 위치하면, 안구(110)에 포함된 수정체(610)는 팽창하게 된다. 수정체(610)가 팽창되면, 안구 측정부(510)에 포함된 근전도 센서들(512)은, 상기 수정체(610)의 팽창으로 인하여 발생한 근전도 신호를 감지함으로써, 상기 수정체(610)의 팽창을 감지할 수 있다. 제어부(540)는 근전도 신호를 기초로 안구(110)로부터 물체(602)까지의 거리를 계산한다.
도 6c는 자동 초점 설정 장치(500)가 초음파 촬영 센서(514)를 이용하여 안구(110)에 대한 초음파 촬영을 하는 동작을 나타낸 도면이다. 도 6c를 참조하면, 초음파 촬영 센서(620)가 수정체(610)를 포함하는 안구(110)를 초음파 촬영한다.
도 7은 도 5에 도시된 자동 초점 설정 장치에서의 초점 설정 방법의 다른 예를 나타낸 도면이다. 도 7에서 자동 초점 설정 장치(500)는 카메라 장치(710)로서 구현된 것으로 가정한다.
도 7을 참조하면, 사용자(701)는 카메라 장치(710)를 이용하여 피사체(702)를 촬영하고 있다. 사용자(701)가 피사체(702)의 촬영을 위하여 안구(110)를 뷰파인더(522)에 근접시키면, 카메라 장치(710)는 초점(721)을 결정한다. 본 실시예에서 카메라 장치(710)는 근전도 센서(512) 또는 초음파 촬영 센서(514)를 이용하여 사용자(701)가 응시하고 있는 지점, 즉 초점(721)을 계산하여 결정할 수 있다. 또한 카메라 장치(710)는 초점(721)이 포함된 면을 초점면(720)으로서 결정한다.
도 7에서와 같이 자동 초점 설정 장치(500)가 카메라 장치(710)로 구현되는 경우, 초점면(720)은 카메라 장치(710)의 렌즈와 평행하게 형성될 수 있다. 카메라 장치(710)의 제어부(540)는 초점(721)이 포함된 초점면(720)이 가장 선명하게 표시될 수 있도록 디스플레이부(520), 특히 뷰 파인더(522)를 제어한다.
도 8a 및 도 8b는 도 5에 도시된 자동 초점 설정 장치에서 심도에 따라 각각 달라지는 영상을 사용자에게 제공하는 일 예를 나타낸 도면이다. 도 8에서도 도 7에서와 마찬가지로 자동 초점 설정 장치(500)가 카메라 장치(810)로서 구현된 것으로 가정한다.
도 8a 및 도 8b를 참조하면, 사용자(801)는 카메라 장치(810)를 이용하여 나뭇잎들을 촬영하고 있다. 도 8a는 심도가 얕을 경우에 카메라 장치(810)가 사용자에게 제공하는 제1영상(841)을 나타낸 것이고, 도 8b는 심도가 깊을 경우에 카메라 장치(810)가 사용자에게 제공하는 제1영상(842)를 나타내고 있다.
제1영상(841) 및 제2영상(842)은 동일한 피사체를 촬영한 영상들이다. 또한 도 8a 및 도 8b의 카메라 장치(810)는 동일한 초점(821) 및 동일한 초점면(820)을 결정하였다. 그러나 도 8a의 카메라 장치(810)는 심도가 얕게 설정되어 있어 초점면(820)을 포함하는 나뭇잎들(831)만이 선명하게 표시되고 있다. 반면에 도 8b의 카메라 장치(810)는 심도가 깊게 설정되어 있어 초점면(820)을 포함하는 나뭇잎들은 물론 초점면(820)으로부터 앞뒤로 특정 범위에 포함된 나뭇잎들(832)이 모두 선명하게 표시되고 있다. 상기와 같이 본 실시예에 따른 카메라 장치(810)는 초점(821), 초점면(820)의 위치 또는 범위뿐만 아니라 상기 초점(821)의 심도에 따라 각기 다른 영상을 사용자에게 제공할 수 있다.
도 9a 및 도 9b는 도 5에 도시된 자동 초점 설정 장치에서 초점의 위치에 따라 각각 달라지는 영상을 사용자에게 제공하는 일 예를 나타낸 도면이다.
도 9a 및 도 9b는 자동 초점 설정 장치에서 제공되는 영상의 일 예를 나타낸 것으로, 도 9a 및 도 9b의 영상은 모두 한 명의 사람(910)과 한 그루의 나무(920)를 포함하고 있다.
자동 초점 설정 장치(500)를 사용하는 사용자가 나무(920)를 응시하고 있다면, 자동 초점 설정 장치(500)는 나무(920)에 초점 및 초점면이 위치한 것으로 계산하고, 나무(920)를 선명하게 표시한 영상을 사용자에게 제공한다. 또한 자동 초점 설정 장치(500)는 나무(920)의 후면에 위치한 사람(910)을 흐릿하게 표시하여 선명하게 표시된 나무(920)와 대조시켜 사용자에게 제공할 수 있다.
자동 초점 설정 장치(500)를 사용하는 사용자가 사람(910)을 응시하고 있다면, 자동 초점 설정 장치(500)는 사람(910)에 초점 및 초점면이 위치한 것으로 계산하고, 사람(910)을 선명하게 표시한 영상을 사용자에게 제공한다. 이때, 자동 초점 설정 장치(500)는 사람(910)이 나무(920)에 비하여 후면에 위치하였다고 하더라도 나무(920)를 흐릿하게 표시하여 선명하게 표시된 사람(910)와 대조시켜 사용자에게 제공할 수 있다.
도 10a 내지 도 10c는 도 5에 도시된 자동 초점 설정 장치에서 초점의 위치에 따라 각각 달라지는 영상을 사용자에게 제공하는 다른 예를 나타낸 도면이다. 도 10a 내지도 10c에서 자동 초점 설정 장치(500)는 3D 영상 디스플레이 장치(1030)로 구현된 것으로 가정한다.
도 10a는 3D 영상 디스플레이 장치(1030)에 의하여 사용자(1001)에게 제공될 영상의 원본 영상을 나타낸 것이다. 도 10a를 참조하면, 원본 영상은 한 사람(1010)과 한 그루의 나무(1020)를 포함하고 있다.
도 10b를 참조하면, 3D 영상 디스플레이 장치(1030)는 사용자(1001)가 사람(1010)을 응시하고 있다면, 상기 사람(1010)에 초점 및 초점면이 위치한 것으로 계산한다. 그에 따라 3D 영상 디스플레이 장치(1030)는 사람(1010)을 선명하게 표시한 영상을 사용자(1001)에게 제공한다. 3D 영상 디스플레이 장치(1030) 는 사람(1010)의 후면에 위치한 나무(1020)을 흐릿하게 표시하여 선명하게 표시된 사람(1010)와 대조시켜 사용자에게 제공할 수 있다.
도 10b와 반대로, 3D 영상 디스플레이 장치(1030)는 사용자(1001)가 나무(1020)를 응시하고 있다면, 상기 나무(1020)에 초점 및 초점면이 위치한 것으로 계산한다. 그에 따라 3D 영상 디스플레이 장치(1030)는 나무(1020)을 선명하게 표시한 영상을 사용자(1001)에게 제공한다. 이때, 3D 영상 디스플레이 장치 (1030)는 나무(1020)가 사람(1010)에 비하여 후면에 위치하였다고 하더라도 사람(1010)를 흐릿하게 표시하여 선명하게 표시된 나무(1020)와 대조시켜 사용자(1001)에게 제공할 수 있다.
상기와 같이 본 발명에 따른 자동 초점 설정 장치(500)는 상기 자동 초점 설정 장치(500)와 물체들(1010, 1020) 간의 거리와 상관없이, 사용자(1001)가 응시하고 있는 지점, 즉 초점 및 초점면을 계산한다. 또한 본 발명에 따른 자동 초점 설정 장치(500)는 상기 자동 초점 설정 장치(500)와 물체들(1010, 1020) 간의 거리와 상관없이, 초점 및 초점면을 위주로 물체를 선명하게 표시한 영상을 사용자(1001)에게 제공함으로써, 사용자(1001)가 원하는 영상을 편리하게 볼 수 있도록 한다. 또한 사용자(1001)가 초점을 변경한다고 하더라도 본 발명에 따른 자동 초점 설정 장치(500)는 실시간으로 사용자(1001)에 의해 변경된 초점 또는 초점면을 추적함으로써 사용자(1001)가 원하는 초점으로 영상을 볼 수 있도록 한다.
도 11은 도 5에 도시된 자동 초점 설정 장치에서 안구의 초음파 이미지를 촬영하는 초음파 촬영 센서의 일 예를 나타낸 도면이다. 도 11에서 자동 초점 설정 장치(500)는 3D 영상 디스플레이 장치의 형태로 구현된 것으로 가정한다.
자동 초점 설정 장치(500)가 3D 영상 디스플레이 장치로 구현됨에 따라 자동 초점 설정 장치(500)는 사용자에게 3D 영상을 제공하기 위한 3D 입체 안경(1110)을 더 포함할 수 있다. 3D 입체 안경(1110)에는 초음파 촬영 센서(1120)가 탑재되어 사용자의 안구에 대한 초음파 촬영을 실시간으로 수행할 수 있다.
실시예에 따라 3D 입체 안경(1110)은 사용자의 3D 입체 안경(1110)의 착용 여부를 감지하기 위한 센서(미도시)를 더 포함할 수 있다. 사용자가 3D 입체 안경(1110)을 착용하면, 3D 입체 안경(1110)에 부착된 초음파 촬영 센서(1120)는 사용자의 안구에 대한 초음파 촬영을 수행하고, 촬영된 초음파 이미지를 영상 디스플레이 장치로 전송할 수 있다. 3D 영상 디스플레이 장치는 초음파 촬영 센서(1120)로부터 수신한 초음파 이미지를 이용하여 초점 또는 초점면을 재설정한다.
본 발명의 실시 예에 따른 초점 설정 방법은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 임의의 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 본 발명의 실시 예에 따른 초점 설정 방법은 제어부 및 메모리를 포함하는 컴퓨터 또는 휴대 단말에 의해 구현될 수 있고, 상기 메모리는 본 발명의 실시 예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 따라서 본 발명은 본 명세서의 임의의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계(컴퓨터 등)로 읽을 수 있는 저장 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.
또한 상기 자동 초점 설정 장치 또는 초점 설정 시스템에 포함된 장치 중 적어도 하나는 유선 또는 무선으로 연결되는 프로그램 제공 장치로부터 상기 프로그램을 수신하여 저장할 수 있다. 상기 프로그램 제공 장치는 상기 자동 초점 설정 장치 또는 초점 설정 시스템에 포함된 장치 중 적어도 하나가 미리 설정된 컨텐츠 보호 방법을 수행하도록 하는 지시들을 포함하는 프로그램, 컨텐츠 보호 방법에 필요한 정보 등을 저장하기 위한 메모리와, 상기 자동 초점 설정 장치 또는 초점 설정 시스템에 포함된 장치 중 적어도 하나와의 유선 또는 무선 통신을 수행하기 위한 통신부와, 상기 자동 초점 설정 장치 또는 초점 설정 시스템에 포함된 장치 중 적어도 하나의 요청 또는 자동으로 해당 프로그램을 상기 송수신 장치로 전송하는 제어부를 포함할 수 있다.
이외에도 본 발명의 다양한 실시예 또는 변형예가 있을 수 있으며, 따라서 본 발명의 범위는 설명된 실시예에 의하여 정할 것이 아니고, 청구범위와 청구범위의 균등한 것에 의하여 정하여져야 할 것이다.
500: 자동 초점 설정 장치 502: 사용자 입력부
504: 메모리 510: 안구 측정부
512: 근전도 센서 514: 초음파 촬영 센서
520: 디스플레이부 522: 뷰파인더
540: 제어부 542: 초점면 설정부

Claims (18)

  1. 초점을 설정하는 방법에 있어서,
    근전도 신호를 이용한 제1 방식 및 초음파 이미지를 이용한 제2 방식 중 초점 자동 설정을 위한 방식을 판단하는 동작-상기 제1 방식은 사용자의 안구로부터 발생하는 근전도 신호에 기초하여 물체(object)까지의 거리를 계산하는 방식이고, 상기 제2 방식은 상기 안구의 초음파 이미지에 기초하여 상기 물체까지의 거리를 계산하는 방식임-;
    상기 판단된 초점 자동 설정을 위한 방식에 따라 상기 안구와 상기 안구에 의해 응시되고 있는 물체까지의 거리를 계산한 거리를 계산하는 동작; 및
    상기 계산된 거리에 기초하여 상기 물체를 포함하는 초점면(a plane of focus)을 조정하는 동작;을 포함함을 특징으로 하는 초점 설정 방법.
  2. 제1항에 있어서, 상기 판단된 초점 자동 설정을 위한 방식에 따라 상기 안구와 상기 안구에 의해 응시되고 있는 물체까지의 거리를 계산하는 동작은,
    상기 안구로부터 발생하는 상기 근전도 신호를 감지하는 동작; 및
    상기 근전도 신호에 기초하여 거리 데이터를 생성하는 동작;을 포함함을 특징으로 하는 초점 설정 방법.
  3. 제1항에 있어서, 상기 판단된 초점 자동 설정을 위한 방식에 따라 상기 안구와 상기 안구에 의해 응시되고 있는 물체까지의 거리를 계산하는 동작은,
    상기 안구를 초음파 촬영한 초음파 이미지들을 수집하는 동작;
    상기 초음파 이미지들에 기초하여 상기 안구의 수정체를 식별하는 동작;
    상기 수정체의 편평도를 파악하여 편평도 데이터를 생성하는 동작; 및
    상기 편평도 데이터에 기초하여 거리 데이터를 생성하는 동작;을 포함함을 특징으로 하는 초점 설정 방법.
  4. 제1항에 있어서,
    상기 초점면이 포함된 이미지를 우선적으로 상기 사용자에게 제공하는 동작;을 더 포함함을 특징으로 하는 초점 설정 방법.
  5. 제4항에 있어서, 상기 초점면이 포함된 이미지를 우선적으로 상기 사용자에게 영상을 제공하는 동작은,
    상기 초점면 및 미리 설정된 심도에 기초하여 상기 이미지를 변환하는 동작; 및
    상기 변환된 이미지를 상기 사용자에게 제공하는 동작;을 포함함을 특징으로 하는 초점 설정 방법.
  6. 제1항에 있어서,
    자동 초점 설정을 위한 사용자 입력을 수신하는 동작;을 더 포함함을 특징으로 하는 초점 설정 방법.
  7. 제6항에 있어서, 상기 사용자 입력을 수신하는 동작은,
    뷰 파인더에 상기 안구가 근접하였음을 감지하는 동작;을 포함함을 특징으로 하는 초점 설정 방법.
  8. 제1항에 있어서,
    상기 제1 방식 및 상기 제2 방식 중 상기 초점 자동 설정을 위한 방식을 판단하는 동작은,
    상기 초점 자동 설정을 위한 방식을 상기 제1 방식으로 판단하는 동작을 포함하고,
    상기 안구와 상기 안구에 의해 응시되고 있는 물체까지의 거리를 계산하는 동작은,
    상기 근전도 신호를 감지하는 동작; 및
    상기 근전도 신호에 기초하여 거리 데이터를 생성하는 동작;을 포함함을 특징으로 하는 초점 설정 방법.
  9. 제1항에 있어서,
    제1 방식 및 상기 제2 방식 중 상기 초점 자동 설정을 위한 방식을 판단하는 동작은, 상기 초점 자동 설정을 위한 방식을 상기 제2 방식으로 판단하는 동작을 포함하고,
    상기 안구와 상기 안구에 의해 응시되고 있는 물체까지의 거리를 계산하는 동작은,
    상기 안구를 초음파 촬영한 초음파 이미지들을 수집하는 동작;
    상기 초음파 이미지들에 기초하여 상기 안구에 포함된 수정체를 식별하는 동작;
    상기 수정체의 편평도를 파악하여 편평도 데이터를 생성하는 동작; 및
    상기 편평도 데이터에 기초하여 거리 데이터를 생성하는 동작;을 포함함을 특징로 하는 초점 설정 방법.
  10. 초점을 설정하는 장치에 있어서,
    사용자의 안구에 발생하는 변화를 감지하는 안구 측정부; 및
    근전도 신호를 이용한 제1 방식 및 초음파 이미지를 이용한 제2 방식 중 초점 자동 설정을 위한 방식을 판단하는 동작-상기 제1 방식은 사용자의 안구로부터 발생하는 근전도 신호에 기초하여 물체(object)까지의 거리를 계산하는 방식이고, 상기 제2 방식은 상기 안구의 초음파 이미지에 기초하여 상기 물체까지의 거리를 계산하는 방식임-;
    상기 판단된 초점 자동 설정을 위한 방식에 따라 상기 안구와, 상기 안구에 의해 응시되고 있는 물체까지의 거리를 계산하고, 상기 계산된 거리에 기초하여 상기 물체를 포함하는 초점면(a plane of focus)을 조정하는 제어부;를 포함함을 특징으로 하는 초점 설정 장치.
  11. 제10항에 있어서,
    상기 안구 측정부는 상기 안구로부터 발생하는 근전도 신호를 감지하는 근전도 센서;를 포함하고,
    상기 제어부는, 상기 근전도 신호에 기초하여 거리 데이터를 생성함을 특징으로 하는 초점 설정 장치.
  12. 제10항에 있어서,
    상기 안구 측정부는 상기 안구의 초음파 촬영을 수행하고, 상기 안구의 초음파 촬영에 의해 생성된 초음파 이미지를 수집하는 초음파 촬영 센서;를 포함하고,
    상기 제어부는, 상기 초음파 이미지들에 기초하여 상기 안구의 수정체를 식별하고, 상기 수정체의 편평도를 파악하여 편평도 데이터를 생성하고, 상기 편평도 데이터에 기초하여 거리 데이터를 생성함을 특징으로 하는 초점 설정 장치.
  13. 제10항에 있어서,
    상기 초점면이 포함된 이미지를 우선적으로 상기 사용자에게 제공하는 디스플레이부;를 더 포함함을 특징으로 하는 초점 설정 장치.
  14. 제13항에 있어서, 상기 제어부는,
    상기 초점면 및 미리 설정된 심도에 기초하여 상기 이미지를 변환하고, 상기 변환된 이미지를 상기 사용자에게 제공하도록 상기 디스플레이부를 제어함을 특징으로 하는 초점 설정 장치.
  15. 제14항에 있어서,
    상기 디스플레이부는 뷰 파인더;를 포함하고,
    상기 제어부는, 상기 안구가 상기 뷰 파인더에 근접하면, 자동 초점 설정을 위한 사용자 입력이 입력된 것으로 판단함을 특징으로 하는 초점 설정 장치.
  16. 제10항에 있어서, 상기 제어부는,
    상기 자동 초점 설정을 위한 방식을 상기 제1 방식으로 판단하고,
    상기 안구 측정부에 포함된 심전도 센서가 상기 안구로부터 발생하는 근전도 신호를 감지하도록 제어함을 특징으로 하는 초점 설정 장치.
  17. 제10항에 있어서, 상기 제어부는,
    상기 자동 초점 설정을 위한 방식을 상기 제2 방식으로 판단하고,
    상기 안구 측정부에 포함된 초음파 촬영 센서를 이용하여 상기 안구를 초음파 촬영한 초음파 이미지들을 수집함을 특징으로 하는 초점 설정 장치.
  18. 제10항에 있어서, 상기 제어부는,
    상기 안구와 상기 안구에 의해 응시되고 있는 물체까지의 거리를 계산하기 전에, 상기 자동 초점 설정을 위한 사용자 입력을 감지함을 특징으로 하는 초점 설정 장치.
KR1020130034842A 2013-03-29 2013-03-29 자동 초점 설정 방법 및 이를 위한 장치 KR102013708B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020130034842A KR102013708B1 (ko) 2013-03-29 2013-03-29 자동 초점 설정 방법 및 이를 위한 장치
US14/152,803 US9225895B2 (en) 2013-03-29 2014-01-10 Automatic focusing method and apparatus for same
EP14152810.9A EP2784561A1 (en) 2013-03-29 2014-01-28 Automatic focusing method and apparatus for same
CN201410125947.5A CN104076481B (zh) 2013-03-29 2014-03-31 自动聚焦方法及其设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130034842A KR102013708B1 (ko) 2013-03-29 2013-03-29 자동 초점 설정 방법 및 이를 위한 장치

Publications (2)

Publication Number Publication Date
KR20140118608A KR20140118608A (ko) 2014-10-08
KR102013708B1 true KR102013708B1 (ko) 2019-08-23

Family

ID=49999834

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130034842A KR102013708B1 (ko) 2013-03-29 2013-03-29 자동 초점 설정 방법 및 이를 위한 장치

Country Status (4)

Country Link
US (1) US9225895B2 (ko)
EP (1) EP2784561A1 (ko)
KR (1) KR102013708B1 (ko)
CN (1) CN104076481B (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2536650A (en) 2015-03-24 2016-09-28 Augmedics Ltd Method and system for combining video-based and optic-based augmented reality in a near eye display
CN105208273A (zh) * 2015-09-24 2015-12-30 宇龙计算机通信科技(深圳)有限公司 使用双摄像头终端拍照的方法、装置及双摄像头终端
CN105516599A (zh) * 2015-12-31 2016-04-20 华勤通讯技术有限公司 一种自动拍摄方法、装置及移动终端
CN110520792B (zh) * 2017-03-30 2022-04-26 瑞典爱立信有限公司 成像装置和隐形眼镜
CN109905599A (zh) * 2019-03-18 2019-06-18 信利光电股份有限公司 一种人眼对焦方法、装置及可读存储介质
US11382712B2 (en) 2019-12-22 2022-07-12 Augmedics Ltd. Mirroring in image guided surgery
US11896445B2 (en) 2021-07-07 2024-02-13 Augmedics Ltd. Iliac pin and adapter

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001290101A (ja) 2000-04-06 2001-10-19 Tomohiko Hattori 奥行き方向視点調節意志検出と意志駆動方式および遠近自動補正眼鏡
US20060232665A1 (en) 2002-03-15 2006-10-19 7Tm Pharma A/S Materials and methods for simulating focal shifts in viewers using large depth of focus displays
JP2009285322A (ja) 2008-05-30 2009-12-10 Nidek Co Ltd 眼科用超音波プローブ及びこれを備える眼科用超音波診断装置
US20140022505A1 (en) 2012-07-18 2014-01-23 Randall Braxton Pugh Neuromuscular sensing for variable-optic electronic ophthalmic lens

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US47489A (en) 1865-04-25 Daniel c
JPS5039128A (ko) 1973-08-09 1975-04-11
US4170225A (en) 1976-09-20 1979-10-09 Somatronics, Inc. Biofeedback device
US4574314A (en) 1982-05-28 1986-03-04 Weinblatt Lee S Camera autofocus technique
GB2126745B (en) 1982-09-02 1986-07-23 Mo Nauchno Issledovatelskyinst Method and device for determining cornea surface topography
US4934370A (en) 1988-09-09 1990-06-19 Allergan Humphrey Pinhole focused optics for locating visual axis of the eye for ultrasonic interior measurement
JP2507039B2 (ja) 1989-04-20 1996-06-12 松下電器産業株式会社 生体フィ―ドバック装置
US4974010A (en) 1989-06-09 1990-11-27 Lc Technologies, Inc. Focus control system
US5333029A (en) 1990-10-12 1994-07-26 Nikon Corporation Camera capable of detecting eye-gaze
US5139022A (en) 1990-10-26 1992-08-18 Philip Lempert Method and apparatus for imaging and analysis of ocular tissue
JP3210027B2 (ja) 1991-04-05 2001-09-17 キヤノン株式会社 カメラ
DE19500315C1 (de) 1995-01-07 1995-10-26 Siegbert Prof Dr Ing Hentschke Personenadaptiver autostereoskoper Shutter-Bildschirm (PAAS)
US5720619A (en) 1995-04-24 1998-02-24 Fisslinger; Johannes Interactive computer assisted multi-media biofeedback system
GB9518477D0 (en) 1995-09-09 1995-11-08 Strachan John S Point of observation tracking system
JPH09197495A (ja) 1996-01-12 1997-07-31 Nikon Corp 物体位置検出系および該検出系を備えたオートフォーカス可能なカメラ
JPH09269527A (ja) * 1996-03-29 1997-10-14 Canon Inc 視線検出手段を有したファインダー系
JP3069893B2 (ja) * 1996-09-30 2000-07-24 旭精密株式会社 測量機の合焦方法及び合焦装置
JP3774528B2 (ja) 1997-02-05 2006-05-17 キヤノン株式会社 一眼レフカメラのファインダ
US20010043395A1 (en) 2000-02-03 2001-11-22 Costales Bryan L. Single lens 3D software method, system, and apparatus
US6361495B1 (en) 2000-02-07 2002-03-26 Leica Microsystems Inc. Hand-held non-contact tonometer
US6749568B2 (en) 2000-08-21 2004-06-15 Cleveland Clinic Foundation Intraocular pressure measurement system including a sensor mounted in a contact lens
US20030025996A1 (en) 2001-06-01 2003-02-06 Andrews Robert E. Autostereoscopic display system and components therefor
US6623427B2 (en) 2001-09-25 2003-09-23 Hewlett-Packard Development Company, L.P. Biofeedback based personal entertainment system
US7298414B2 (en) 2003-01-29 2007-11-20 Hewlett-Packard Development Company, L.P. Digital camera autofocus using eye focus measurement
KR100594117B1 (ko) * 2004-09-20 2006-06-28 삼성전자주식회사 Ｈｍｄ 정보 단말기에서 생체 신호를 이용하여 키를입력하는 장치 및 방법
US7464118B2 (en) 2004-12-03 2008-12-09 International Business Machines Corporation Algorithm for maximizing application availability during automated enterprise deployments
WO2006087663A1 (en) 2005-02-17 2006-08-24 Koninklijke Philips Electronics N.V. Autostereoscopic display
US20080218696A1 (en) 2005-07-01 2008-09-11 Jose Mir Non-Invasive Monitoring System
US20070066403A1 (en) 2005-09-20 2007-03-22 Conkwright George C Method for dynamically adjusting an interactive application such as a videogame based on continuing assessments of user capability
TWI314832B (en) 2006-10-03 2009-09-11 Univ Nat Taiwan Single lens auto focus system for stereo image generation and method thereof
US8002827B2 (en) * 2007-04-24 2011-08-23 Abbott Medical Optics Inc. Systems and methods for ocular measurements
US20100149073A1 (en) * 2008-11-02 2010-06-17 David Chaum Near to Eye Display System and Appliance
JP5308305B2 (ja) 2009-10-20 2013-10-09 株式会社トーメーコーポレーション 網膜電位測定装置
US20110208060A1 (en) 2010-02-24 2011-08-25 Haase Wayne C Non-contact Biometric Monitor
WO2012000164A1 (en) 2010-06-28 2012-01-05 Industrial Technology Research Institute Projection auto-stereoscopic display and stereo screen
KR101890717B1 (ko) * 2010-07-20 2018-08-23 삼성전자주식회사 생체 정보를 활용한 가상 세계 조작 장치 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001290101A (ja) 2000-04-06 2001-10-19 Tomohiko Hattori 奥行き方向視点調節意志検出と意志駆動方式および遠近自動補正眼鏡
US20060232665A1 (en) 2002-03-15 2006-10-19 7Tm Pharma A/S Materials and methods for simulating focal shifts in viewers using large depth of focus displays
JP2009285322A (ja) 2008-05-30 2009-12-10 Nidek Co Ltd 眼科用超音波プローブ及びこれを備える眼科用超音波診断装置
US20140022505A1 (en) 2012-07-18 2014-01-23 Randall Braxton Pugh Neuromuscular sensing for variable-optic electronic ophthalmic lens

Also Published As

Publication number Publication date
KR20140118608A (ko) 2014-10-08
CN104076481A (zh) 2014-10-01
EP2784561A1 (en) 2014-10-01
US9225895B2 (en) 2015-12-29
CN104076481B (zh) 2017-12-29
US20140293112A1 (en) 2014-10-02

Similar Documents

Publication Publication Date Title
KR102013708B1 (ko) 자동 초점 설정 방법 및 이를 위한 장치
JP5284731B2 (ja) 立体画像撮影表示システム
JP6159097B2 (ja) 画像処理装置、撮像装置、制御方法、及びプログラム
US9420261B2 (en) Image capturing apparatus, method of controlling the same and program
CN103081455A (zh) 从手持设备所捕获的多个图像进行肖像图像合成
JP6464281B2 (ja) 情報処理装置、情報処理方法、及びプログラム
TW201200959A (en) One-eyed stereo photographic device
JP2016036390A (ja) 情報処理装置、焦点検出方法、および焦点検出プログラム
JP2024036387A (ja) 電子機器およびその制御方法
JP2019208170A (ja) 画像処理装置、画像処理方法、プログラム、記憶媒体
KR102068048B1 (ko) 3차원 영상 제공 시스템 및 방법
JP5929922B2 (ja) 画像処理装置および画像処理方法
US20120236126A1 (en) Image pickup device, image pickup method, program, and integrated circuit
JP2012178688A (ja) 立体画像撮影装置
JP6491442B2 (ja) 画像処理装置、画像処理方法、プログラム及び記録媒体
JP2017161941A (ja) 再生装置、撮像装置および再生装置の制御方法
JP6157290B2 (ja) 再生装置、再生装置の制御方法およびプログラム
JP6336284B2 (ja) 画像処理装置、その制御方法およびプログラム
US20230254470A1 (en) Stereoscopic image pickup apparatus, control method, storage medium, and control apparatus
JP6387149B2 (ja) 画像処理装置、撮像装置、制御方法、及びプログラム
JP2013074428A (ja) 自分撮り判断装置、撮像装置、プログラム及び自分撮り判断方法
US20240015399A1 (en) Image processing apparatus, display apparatus, and image processing method
JP5344770B2 (ja) 撮影装置
JP2010050874A (ja) 画像処理装置、画像処理方法及びデジタルスチルカメラ
JP2023063023A (ja) 電子機器及び電子機器の制御方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant