KR20120120094A - 재현 장치 - Google Patents

재현 장치 Download PDF

Info

Publication number
KR20120120094A
KR20120120094A KR1020120089758A KR20120089758A KR20120120094A KR 20120120094 A KR20120120094 A KR 20120120094A KR 1020120089758 A KR1020120089758 A KR 1020120089758A KR 20120089758 A KR20120089758 A KR 20120089758A KR 20120120094 A KR20120120094 A KR 20120120094A
Authority
KR
South Korea
Prior art keywords
capture
image
camera
accelerometer
detection
Prior art date
Application number
KR1020120089758A
Other languages
English (en)
Inventor
케니스 로버트 우드
케빈 마이클 스초필드
린드세이 윌리암스
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Priority to KR1020120089758A priority Critical patent/KR20120120094A/ko
Publication of KR20120120094A publication Critical patent/KR20120120094A/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Biophysics (AREA)
  • Multimedia (AREA)
  • Biomedical Technology (AREA)
  • Physiology (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)

Abstract

작고 착용할 수 있는 재현 장치(recall device)가 캡처 컨디션(capture condition)(예로, 움직임, 온도 또는 조도(light level)의 변화)의 검출과 뒤를 잇는 가속도계(accelerometer)에 의해 검출되는 비교적 안정된 기간과의 조합으로 유발되는 이미지 캡처(image capture)를 하기 위해 제공된다. 검출된 캡처 컨디션과 뒤를 잇는 검출된 안정 컨디션과의 조합에 근거해 유발되는 것에 의해, 관심을 끄는 사건 환경의 더욱 선명한 이미지가 캡처될 것이라고 기대한다. 재현 장치의 작은 크기는 MP3 플레이어, 지갑, 의류, 모자, 배낭, 목걸이, 칼라(collar), 및 기타 사람이 착용할 수 있는 제품과 같은 일반적인 휴대용 소비자 제품과 재현 장치와의 통합을 가능하게 한다.

Description

재현 장치{RECALL DEVICE}
본 발명은 일반적으로 전자 장치, 더 특히 재현(recall) 장치에 관한 것이다.
사건(event), 개인 요소(parameter), 및 개인이 겪는 환경 요소(parameter)를 재현하는 능력은 많은 응용이 있다. 예를 들어, 알츠하이머 질병(Alzheimer's Disease)의 피해자와 같은 기억 장애인과 그의 간병인은 상기 장애인의 기억(예로, 장애인이 그들의 집 열쇠를 둔 곳을 확인하는 것, 장애인이 접촉한 사람들을 식별하는 것 등.)속에 공백을 채우는 것을 보조하기 위해 상기 장애인의 일상 활동의 일 부분을 재구성할 수 있다. 다른 응용으로, 노인이 넘어져 생긴 상처와 같은 외상 사건(traumatic event)과 관련된 사건과 요소를 상처의 원인과 범위를 잘 파악하기 위해 의사에 의해 재구성될 수도 있다. 마찬가지로, 어린이가 온 종일 겪은 사건과 요소를 재현하는 것은 부모 또는 선생님이 상기 어린이의 행동 장애를 진찰하는 것을 도울 수 있다.
그러나, 이러한 사건과 요소들을 감시하는 현존의 방법은 나타내지 않고 착용하는 장치 방면의 응용에는 도움이 되지 않는다. 이러한 방법은 실내 또는 제한된 구역에 있는 몰래 카메라(surveillance camera) 또는 마이크로폰(microphone), 그리고 크기, 저장 용량의 제한, 전력의 제한, 다른 여러 제한들 때문에 현실적으로 편리하게, 장시간(예로, 온 종일 사용함)에 걸쳐 개인적 사용으로 도모된 것이 아닌 큰 비디오 카메라 및 다른 감시 장치를 포함한다.
본 명세서에 설명되고 특허 청구되는 실시예는 작고 착용할 수 있는 재현 장치가 캡처 컨디션(예로, 움직임, 온도 또는 조도의 변화)의 검출과 뒤를 잇는 가속도계에 의해 검출되는 비교적 안정된 기간과의 조합으로 유발되는 이미지 캡처를 하기 위해 제공됨으로써 위에 서술한 문제들을 다룬다. 검출된 캡처 컨디션과 뒤를 잇는 검출된 안정 컨디션과의 조합에 근거해 유발되는 것에 의해, 관심을 끄는 사건 환경의 더욱 선명한 이미지가 캡처될 것이라고 기대한다. 재현 장치의 작은 크기는 MP3 플레이어, 지갑, 의류, 모자, 배낭, 목걸이, 안경, 손목 시계, 팔찌, 칼라(collar), 및 기타 사람이 착용할 수 있는 제품과 같은 일반적인 휴대용 소비자 제품과 재현 장치와의 통합을 가능하게 한다.
몇몇의 실시예에서, 제조품(articles of manufacture)은 컴퓨터 프로그램 제품으로 제공된다. 컴퓨터 프로그램 제품의 한 실시예는 컴퓨터가 판독할 수 있는 컴퓨터 프로그램 저장 매체와 컴퓨터 프로그램을 엔코딩하는 것을 제공한다. 컴퓨터 프로그램 제품의 다른 실시예는 컴퓨터 시스템에 의해 반송파에서 구현된 컴퓨터 데이터 신호와 컴퓨터 프로그램을 엔코딩하는 것에서 제공될 수도 있다.
컴퓨터 프로그램 제품은 컴퓨터 시스템에서 컴퓨터 프로세스를 수행하는 컴퓨터 프로그램을 엔코드한다. 적어도 한 축을 따르는 카메라의 가속도는 가속도계를 사용해서 감시한다. 카메라가 겪는 캡처 컨디션을 검출한다. 캡처 컨디션을 검출하는 동작에 반응하여, 안정된 컨디션은 적어도 한 축을 따르는 적어도 하나의 가속도계에 의해 검출된다. 카메라에 의한 이미지의 캡처는 안정된 컨디션의 검출이 수반되는 캡처 컨디션의 검출에 따라 유발된다.
다른 구현에서, 방법이 제공된다. 적어도 한 축을 따르는 카메라의 가속도는 가속도계를 사용해서 감시된다. 카메라가 겪는 캡처 컨디션이 검출된다. 캡처 컨디션을 검출하는 동작에 반응하여, 안정된 컨디션은 적어도 한 축을 따르는 적어도 하나의 가속도계에 의해 검출된다. 카메라에 의한 이미지의 캡처는 안정된 컨디션의 검출이 수반되는 캡처 컨디션의 검출에 따라 유발된다.
또 하나의 실시예에서, 휴대용 재현 장치가 착용자가 휴대하로록 제공된다. 상기 휴대용 재현 장치는 카메라와 카메라에 동작 가능하게 연결된 적어도 하나의 가속도계를 포함한다. 카메라에 의한 이미지의 캡처를 유발하는 가속도계는 적어도 하나의 가속도계에 의한 안정적인 컨디션의 검출을 수반하는 캡처 컨디션의 검출에 기초한다.
다른 실시예들도 위에 관점에서 설명 및 열거된다.
제조업자는 현재 높은 건전지 소모때문에 작은 휴대용 디지털 카메라에 GPS 기능을 첨가하지 않아다. 작동할 때, ADXL210 가속도계는 약 GPS 송수신기 전력(전형적으로, 0.6mA)의 1/130을 사용한다. 그러므로, 가속도계는 효율적인 전력 관리 부품으로 사용할 수 있다. 한 실시예에서, 가속도계는 GPS 송수신기의 전력 관리 부품으로 사용될 수 있다. GPS 송신기가 통합된 회로는 일반적으로 많은 전류(예, 80mA)를 사용해서, 시스템에 전력을 공급하는 건전지가 쉽게 소모된다. 가속도계에 의해 판독된 움직임을 주기적으로(예, 매 1초 마다, 등등) 샘플링해서, GPS 위치의 변화가 없으며 움직임이 없으므로, GPS의 전원을 끄도록 한다. 움직임이 저 전력 가속도계에 의해 검출되면, GPS 시스템을 다시 켜 놓는다. 유사한 전력 관리 메커니즘을 카메라의 전원을 끄기 위해 사용할 수 있다, 또한 카메라는 높은 전류 소모를 한다. 조도 센서와 같은 다른 센서 입력은 전력 절약을 하기 위해 사용될 수 있다. 예들 들어, 완전한 어둠속에서 카메라는 전원을 켜 놓을 필요가 없다.
본 명세서에 설명한 본 발명의 실시예는 하나 이상의 컴퓨터 시스템에서 논리적 단계들로 실행된다. 본 발명의 논리적 동작은 (1)하나 이상의 컴퓨터 시스템에서 수행되는 일련의 프로세서에 의해 실행될 단계 및 (2)하나 이상의 컴퓨터 시스템 안에 상호 연결된 머신 모듈로 실행된다. 실행은 선택의 문제로, 본 발명을 실행하는 컴퓨터 시스템의 작업 요구에 좌우된다. 따라서, 본 명세서에 설명한 본발명의 실시예를 완성하는 논리적 동작을 각각 동작, 단계, 물체, 또는 모듈로 기술한다.
상기 설명, 예시 및 데이터는 본 발명의 예시적인 실시예의 구조와 사용의 완전한 설명을 제공한다. 본 발명의 많은 실시예는 본 발명의 사상과 범위를 벗어나지 않고 이루어질 수 있으므로, 본 발명은 뒤에 첨부된 특허 청구 범위에 속한다.
도 1은 사람이 착용할 수 있는 예시적인 재현 장치를 도시한다.
도 2는 예시적인 재현 장치의 내부 평면 사진과 외부 투시도 사진을 도시한다.
도 3은 예시적인 재현 장치의 개념도를 도시한다.
도 4는 선택적인 이미지 캡처 프로세스의 예시적인 동작을 도시한다.
도 5는 이미지 캡처 사건과 관련된 예시적인 센서 판독을 도시한다.
도 6은 보통 렌즈로 캡처된 이미지, 어안 렌즈로 캡처된 이미지, 및 이 캡처된 이미지의 보정된 버젼을 도시한다.
도 1은 사람이 착용할 수 있는 예시적인 재현 장치를 도시한다. 목걸이에 재현 장치(102)를 착용한 착용자(100)를 나타낸다. 그러나, 착용자가 반드시 사람일 필요는 없고, 그리고 감시 받는 환경 컨디션을 선택적으로 기록하는 목적으로 동물, 차량, 및 다른 사물이 재현 장치를 착용할 수도 있다는 것을 이해해야 한다.
재현 장치(102)의 확대 도면을 박스(104) 안에 도시한다. 카메라(106)는 어안 렌즈, 광각 렌즈, 또는 임의의 다른 유형의 렌즈를 포함할 수 있고, 재현 장치(102)의 가운데에 놓여 있지만, 카메라(106)는 재현 장치(102)내의 다른 위치에도 놓일 수 있다.
네 개의 발광 다이오드(LED)가 재현 장치(102)의 앞면에 놓여 있다. 발광 다이오드(108)는 주어진 임계값보다 검출된 음향 레벨에 있어 큰 증가가 있거나 혹은 주어진 기간 안에 평균 음향 레벨에 있어 상당한 변화가 있는 것과 같은 음향 켑처 컨디션의 검출을 신호한다. 발광 다이오드(110)는 검출된 각도의 변화가 임계값(예, 20o)보다 큰 것과 같은 움직임의 캡처 컨디션의 검출을 신호한다. 발광 다이오드(112)는 주어진 기간 안에 평균 조도(light level)에 있어 상당한 변화가 있거나 혹은 주어진 임계값보다 검출된 조도에 있어 큰 증가가 있는 것과 같은 조도 켑처 컨디션의 검출을 신호한다. 발광 다이오드(114)는 주어진 임계값보다 검출된 주변 온도 레벨에 있어 큰 증가가 있거나 혹은 주어진 기간 안에 주변 온도 레벨에 있어 상당한 변화가 있는 것과 같은 온도 켑처 컨디션의 검출을 신호한다. 위에 열거된 캡처 컨디션과 다른 캡처 컨디션이 대신 사용될 수도 있다.
직렬 포트(116)는 재현 장치(102)가 감시한 데이터를 컴퓨터로 다운로드하기 위해 재현 장치(102)에 있다. 재현 장치(102) 안에 다양한 컨디션으로부터 기록한 데이터는 재현 장치(102) 안에 있는 메모리에 저장한다. 또한 이런 데이터는 추후 분석(예로, 마이크로소프트의 엑셀 스프레드시트 혹은 다른 분석 도구를 사용함)을 하기 위해 직렬 포트(116)를 통해서 데스크 탑 컴퓨터와 같은 보다 우월한 컴퓨터 시스템으로 다운로드할 수도 있다. 또한 컨디션 요소, 시간 설정, 등의 내부 설정을 직렬 포트를 통해 재현 장치(102)로 업 로드(upload) 할 수도 있다.
무선 송수신기(도시하지 않음)는 코드(118)에 걸친 안테나와 결합되어 있다. 무선 송수신기는 Wi-Fi 또는 블루투스(Bluetooth)와 같은 무선 네트워크 프로토콜과 접촉하는데 사용할 뿐만 아니라 데이터를 업로드 및 다운로드 하는데도 사용하고, 무선 주파수(radio frequency) 신호도 검출한다.
도 2는 예시적인 재현 장치의 내부 평면 사진(200)과 외부 투시도 사진(202)을 도시한다. 여기서 예시적인 재현 장치의 특정 부품이 설명된다. 재현 장치의 다른 실시예에서 다른 부품이 사용될 수 있다는 것을 이해해야 한다. 마이크로컨트롤러(도시하지 않음)는 인쇄 회로 기판(204) 뒤면에 장착되어 있다. 한 실시 예에서, 마이크로 칩(Microchip) 20Mhz PIC16F876 마이크로컨트롤러가 사용되었다. 카메라(206)와 렌즈(208)는 재현 장치의 인쇄 회로 기판(204)에 동작 가능하게 연결되어 있다. 한 실시예에서, Edmunds Optics 사의 f2, f2.2 mm 렌즈가 추가된 Sipix 사의 50mm x 30mm x 14mm Snap 300k 화소 카메라 모듈이 사용 된다. 다른 구성으로, Edmunds Optics 사의 2.9mm 렌즈가 추가된 Philips 사의 Key008 카메라가 사용 된다. 카메라의 셔터(shutter)와 모드(mode) 제어의 인터페이스는 리드 계전기(reed relay)에 의해 제공되지만, 광학 MOSFET 트랜지스터와 같은 다른 스위치 부품이 대신 사용될 수도 있다.
가속도계(210)가 인쇄 회로 기판(204)에 장착되어 있다. 제시된 실시예에서, Analog Devices 사의 단일 이중 축(single dual axis) +/-10g ADXL210 가속도계가 사용 된다. 다른 실시예에서, 복수 다중 축(multiple multi-axis) 혹은 단일 축(single axis) 가속도계가 사용될 수도 있다. 예를 들어, 개별 단일 축 가속도계가 세개 축(X, Y, 그리고 Z)상의 각기 가속도를 검출하기 위해 장착될 수 있다. 한 다른 실시예에서, 세개 축을 롤(roll), 피치(pitch), 및 요(yaw)로 지정하고, 자이로스코프(gyroscope)를 사용하여 요(yaw)(회전 가속도)를 검출한다.
조도(light level) 센서(212)가 인쇄 회로 기판(204)에 장착되어 있다. 한 실시예에서, TCS230과 같은 TAOS사의 디지털 주변 조도 센서가 재현 장치 및 착용자가 겪는 주변 조도의 크기 및 변화를 검출하기 위해서 사용 된다. 주변 조도의 변화는 착용자가 한 방에서 다른 방으로 혹은 실내에서 바깥으로의 움직임을 가리키는 예시적인 캡처 컨디션을 나타낸다. 또한, 주변 조도의 변화는 재현 장치에다 손을 흔들어 조도 센서 위에 그림자를 만드는 것과 같은 손짓으로 모방할 수 있다. 이와 같이, 이미지 캡처는 착용자가 실제로 재현 장치의 유발 스위치를 누를 필요 없이 착용자의 손짓으로 유발될 수 있다. 이와 같은 한 실시예에서, 캡처 사건의 검출과 이미지 캡처의 유발간의 지연을 타깃에 카메라가 정확하게 겨냥하기 위해 적어도 예정된 지연 기간 동안만큼 연장한다.
주변 온도 센서(도시하지 않음)가 인쇄 회로 기판(204)에 장착되어 있다. 한 실시예에서, National Semiconductor 사의 LM75 센서가 재현 장치가 겪는 주변 온도 레벨의 크기 및 변화를 검출하기 위해서 사용된다. 예로, 주변 온도의 변화는 착용자가 안에서 바깥으로의 움직임을 포시할 수 있는 예시적인 캡처 컨디션을 나타낸다.
직렬 버스 포트(214)가 인쇄 회로 기판(204)에 장착되어 있다. 한 실시예에서, USB(universal serial bus) 인터페이스가 사용되지만, RS-232 인터페이스, IRDA 인터페이스, 또는 임의의 다른 포트와 같은 다른 직렬 포트가 사용될 수 있다. 상기 직렬 포트(또는 다른 인터페이스)는 재현 장치에 데이터를 업로드 또는 다운로드하기 위해 사용할 수 있다. 발광 다이오드(216)는 도 1에서 설명한 다양한 캡처 사건의 검출을 표시한다.
도 3은 예시적인 재현 장치의 부품(300)의 개념도를 도시한다. 마이크로컨트롤러(302)는 셔터 제어 라인(306)과 모드 제어 라인(308)을 이용해 카메라(304)를 제어하기 위해 결합되어 있다. 셔터 제어 라인(306)상에 마이크로컨트롤러(302)가 발생한 신호는 카메라(304)에 이미지 캡처를 유발한다. 모드 제어 라인(308)상에 마이크로 컨트롤러(302)가 발생한 신호는 카메라가 고 해상도 또는 저 해상도 모드로 설정하거나, 혹은 캡처된 이미지의 삭제를 유발한다. 보통 렌즈, 광각 렌즈, 또는 어안 렌즈와 같은 렌즈(310)는 카메라(304)에 연결되어 있다.
NiMH AA 1.5볼트 건전지와 같은 건전지(312)는 카메라(304)를 포함하는 도시된 재현 장치에 전력을 공급한다. 스텝업(step-up) 회로(314)는 인쇄 회로 기판상에 마이크로컨트롤러(302)와 다른 부품에 전력을 공급하기 위해 건전지(312)가 제공하는 전압을 3.7볼트로 올린다.
I2C 버스(316)는 메모리 블록(318)을 마이크로컨트롤러(302)에 연결한다. 메모리 블록(318)은 기록된 센서 데이터와 캡처된 이미지 및 음향을 저장하기 위해 사용된다. 한 실시예에서, 두개의 128Kbyte의 FLASH 메모리 칩(Microchip 24LC512)이 사용된다. 한 다른 실시예에서, 보다 크고 가능한 한 SD 또는 MMC 카드와 같은 분리식 메모리 모듈이 연결되어 1Gbyte 저장 용량까지 허용한다. 또한 실 시간 시계 칩(320)(Dallas/Maxim)과 주변 온도 센서(322)(National Semiconductor LM75)가 I2C 버스(316)에 의해 마이크로컨트롤러(302)에 연결된다.
위치 및 움직임의 변화를 검출하기 위해 적어도 하나의 가속도계(324)가 마이크로컨트롤러(302)에 연결되어 있다. 제시된 실시예에서, 세 개의 단일 축 가속도계(326)가 각 축(X, Y, 및 Z)에 하나씩 사용된다. USB 또는 RS-232 인터페이스와 같은 직렬 버스 인터페이스(328)는 데이터의 업로딩(uploading)과 다운로딩(downloading)을 허용하기 위해 마이크로컨트롤러(302)에 연결되어 있다. 또한 음향 기록 회로(330)는 주변 음향을 기록하기 위해 마이크로컨트롤러(302)에 연결되어 있다. 한 실시예에서, 음향 기록 회로(330)는 일정 시간 동안 연속적으로 기록할 수 있지만, 다른 실시예에서, 음향 기록 회로(330)는 캡처 컨디션의 검출에 반응하여 기록하도록 유발된다. 디지털 조도 센서(332)는 조도 캡처 컨디션을 검출하기 위해 마이크로컨트롤러(302)에 연결되어 있다. RF 송수신기(334)와 안테나(336)는 마이크로컨트롤러에 연결되어 Wi-Fi 신호 통신(signal communications)을 제공 또는 검출하고, RFID 중계기(transponder)를 검출하고, 그리고/혹은 RF 신호를 검출한다. 한 실시예에서, 433MHz 의 송수신기가 사용된다. 다른 실시예에서, 무선 네트워크를 검출하기 위해 2.4GHz 무선 수신기가 사용된다. 재현 장치가 무선 통신 기능을 갖춘 컴퓨터 근처에 들어가면, 재현 장치는 컴퓨터(예, 블루투스(Bluetooth) 또는 Wi-Fi를 사용 함)에 엑세스하여, 이미지, 음향, 그리고 다른 센서 데이터를 전송한다. 이와 같이, 원격 컴퓨터 시스템은 카메라 설정, 센서 설정, 시간 설정 등과 같은 장치 설정을 제공하도록 사용될 수 있다.
한정된 용량의 스위치, 버튼 등을 갖추거나 혹은 갖추지 않은 재현 장치는 다른 사용자 인터페이스 모드를 사용할 수 있다. 스위치가 필요 없이 컴퓨터에다 캡처 되고 기록된 데이터의 전송을 가능케 하기 위해, 카메라를 예정된 포지션(position)(예로, 테이블에다 앞면을 댄다)에 설정할 수 있다. 전원을 켰을 경우, 예정된 포지션을 검출한 하나 이상의 가속도계는 어떤 사용자의 간섭 없이 무선 네트워크를 통해 컴퓨터에다 데이터의 자동적인 다운로드를 유발할 수 있다.
다른 예시적인 입력 부품이 위성 위치 확인 시스템(Global Positioning System) 송수신기(예, Garmin Geko사의 10m급 해상도, 지리적인 위치, 고도, 및 나침반 방향 측정 기능을 갖춘 GPS 송수신기), 심장 박동율 감시기(예, Polar 감시기), 비디오 카메라, 회전 컨디션을 검출하는 자이로스코프(예, Analog Devices 사의 ADXRS 자이로스코프), 화학적 센서(예, Figaro 일산화탄소 센서 또는 연기 검출기), 주변 조명 변화에 의거하여 단순한 광학적 움직임 검출을 제공하는 역 바이어스 LED, 및 착용자로부터 2.5m 내의 사람을 검출하는 수동 적외선 복사 검출기(예, Seiko의 수동 적외선 온도 검출기)를 포함해서, 센서 데이터를 감시 및 기록하는 것에 사용될 수 있으며, 이에 제한을 두지 않는다.
다른 예시적인 캡처 컨디션은 음향 레벨의 변화, 조도의 변화, 움직임의 변화(예, 가속도계 또는 자이로스코프로 검출됨), 심장 박동율의 변화, 주변 온도 또는 착용자 신체 온도의 변화, 부근 환경(예, 공기)의 화학적 성분의 변화, Wi-Fi 신호의 검출, RFID 중계기(transponder)의 검출, 또는 실 시간 시계의 기간 종료에 의해 충족될 수 있다.
이들 부품의 다양한 조합이, 캡처 컨디션의 검출에 의해 표시되는, 근본적으로 관심을 끄는 컨디션의 검출에 의거한 주변의 음향 및 이미지를 선택적으로 캡처하기 위해 사용될 수 있다. 이 방식으로, 선택적인 이미지와 음향의 캡처는 불필요한 컨디션의 연속적인 캡처를 피함으로써 저장 장치 자원의 효율적인 사용을 높일 수 있다.
도 4는 선택적인 이미지 캡처 프로세스의 예시적인 동작(400)을 도시한다. 감시 동작(402)은 적어도 하나의 가속도계를 이용해서 카메라의 움직임을 감시한다. 검출 동작(404)은 카메라가 겪는 "캡처 컨디션"으로 지정된 환경 컨디션을 검출한다. 캡처 컨디션은 근본적으로 관심을 끄는 발생한 환경 사건과 이미 관련이 되어있다는 것을 표시한다. 예를 들어, 한 방에서 다른 방으로의 움직임을 관심을 끄는 환경 사건으로 간주하며, 주변 조도의 변화가 착용자가 다른 방으로 이동했다는 것을 가리키는 것으로 간주할 수 있다.
한 실시예에서, 예시적인 검출 동작은 의사 부호(pseudocode)로 서술된 아래 단계를 포함한다:
Detect_light_level:
(1) TCS230을 이용해 현재 감시 구간에서 Lux 단위로 주변 조도를 판 독한다.
(2) 현 조도 판독과 전 감시 구간(예, 1초 전)의 조도 판독과 비교한 다.
(3) 현 판독 < 전 판독의 50% 이거나 현 판독 > 전 판독의 200% 일 경 우, 캡처 컨디션을 표시한다.
(4) Detect_light_level로 간다.
캡처 컨디션을 검출하는 목적은 이미지 캡처의 유발을 "일러 주기"위해서다. 그러나, 재현 장치가 착용하는 장치일 때, 쉽게 흔들려, 이미지 캡처 자체는 가속도계에 의해 안정적 컨디션이 검출될 때 까지 지연된다(즉, 관리된다). 따라서, 지연 동작(406)은 유발 동작(408)을 가속도계에 의해 안정적 컨디션이 검출될 때까지 지연한다. 이 방식으로, 캡처된 이미지의 품질(예, 선명도)은 관리하지 않은 이미지 캡처로 얻은 이미지보다 나을 것으로 기대된다.
카메라에 있는 하나 이상의 가속도계가 예정된 범위 안에서의 움직임 또는 예정된 임계값보다 낮거나 같은 움직임을 검출할 때 안정적 컨디션이 검출된다. 예를 들어, 모든 가속도계가 각기 자기 축에 대해 움직임을 감지 못할 때 예시적인 재현 장치는 안정적인 컨디션을 검출할 수 있게 설정될 수 있다. 그러나, 이런 설정은 착용자가 거의 정지 상태로 서있을 경우와 같은 수용할 수 있는 카메라의 움직임의 기간 동안 이미지 캡처의 가능성을 엄격히 제한할 수 있다. 따라서, 안정적인 컨디션은 측정 기간(예, 1초) 동안 임의의 주어진 가속도계 출력의 각도에 있어임계각 변화(예, 20o)보다 작게 설정될 수 있다.
한 실시예에서, 예시적인 지연 동작은 의사 부호(pseudocode)로 서술된 아래 단계를 포함한다.
Capture_image:
(5) 현 감시 구간에서 가속도계의 경사 각도를 판독한다.
(6) 경사 각도를 전 감시 구간의 경사 각도와 비교한다.
(7) 임의의 경사 각도의 차이가 20 도를 넘으면, Capture_image로 간 다.
(8) 카메라에서 이미지 캡처를 유발한다.
(9) 되돌아 감(return).
안정적인 컨디션의 검출이후, 유발 동작(408)은 카메라 모듈을 통해서 이미지 캡처를 유발한다. 다른 실시예에서, 또한 다른 환경 상태도 주어진 기간 동안의 음향 기록, GPS 판독, 실 시간 시계 판독, 등을 포함해서 캡처될 수 있으며, 이에 제한을 두지 않는다. 캡처 사건이 캡처 컨디션의 순간적인 부근에 존재할 때, 캡처 사건의 목적은 환경의 스냅샷(snapshot)을 만드는 것이다. 그 후, 캡처된 데이터는 근본적으로 상관 사건과 관련된 환경 컨디션의 복원을 가능케 하기 위해 컴퓨터 시스템에 다운로드될 수 있다.
다른 실시예에서, 심지어 선행 캡처 컨디션 없이, 이미지 캡처(비디오 캡처를 포함해서)가 연속적으로 또는 주기적으로 발생할 수 있다. 예를 들어, 재현 장치가 안정적 컨디션을 검출하고 이미지 캡처를 유발해 메모리에 저장한다. 그 후, 순간적인 근접 캡처 컨디션이 검출되어, 캡처된 이미지는 이어지는 캡처 컨디션과 관련되어 유지된다. 만약 순간적인 근접 캡처 컨디션이 검출되지 않을 경우, 캡처된 이미지는 저장 공간을 관리하기 위해서 메모리에서 삭제될 수 있다. 이 방식으로, 캡처 사건보다 바로 앞에 존재하는 환경 컨디션이 캡처되고 효율적으로 기록될 수 있다. 유사한 알고리듬(algorithm)을 음향 기록과 다른 감지 데이터에 적용할 수 있다.
도 5는 이미지 캡처 사건과 관련된 예시적인 센서 판독(500)을 도시한다. 데이터(502)는 시간 대비 X 축과 관련된 가속도계의 판독을 표시한다. 데이터(504)는 시간 대비 Y 축과 관련된 가속도계의 판독을 표시한다. (차트상의 가속도계의 판독은 각도와 대응한다. 예를 들어, 한 실시예에서, 진폭이 0 인 가속도계의 신호는 0 도를 의미하며, 진폭이 90 인 가속도계의 신호는 90 도를 의미하고, 이하 등등.) 데이터(506)는 주변 조도 센서의 판독을 표시한다. 데이터(508)는 안정적 컨디션의 검출로 이어진 캡처 컨디션의 검출에 의해 유발된 이미지 캡처를 표시한다.
시간(510)에서 보여주듯이, 캡처 컨디션이 데이터(502)와 데이터(504)가 표시하는 안정적인 컨디션으로 이어진 조도 데이터(506)의 상당한 변화에 근거하여 검출되었다. 대조하여, 시간(512)에서 조도 데이터(506)에 상당한 변화는 캡처 컨디션을 나타내나, 이미지 캡처는 데이터(502)와 데이터(504) 둘다에 관련되어 안정적 컨디션이 검출되는 시간(514)까지 지연된다. 이런 방식으로 캡처를 관리하는 것에 의해, 안정된 기간과 연결된 근본적으로 관심을 끄는 사건의 검출에 근거하여 이미지는 선택적으로 캡처된다.
도 6은 보통 렌즈로 캡처된 이미지(600), 어안 렌즈로 캡처된 이미지(602), 및 어안 렌즈 이미지의 보정된 버젼(604)을 도시한다. 상용 이미지 편집 소프트웨어를 이용해서, 어안 렌즈를 통해 캡처된 이미지는 어안 렌즈에 의해 도입된 방사상 변형(radial distortion)을 제거하도록 보정될 수 있다. 어안 이미지 캡처와 보정 소프트웨어의 결합은 착용자가 이미지로 최대한의 환경을 캡처하도록 하고, 차후 방사상 변형을 제거하여 비교적 보통 이미지를 얻게 한다. 이와 같이, 어안 렌즈의 사용은 특히 환경에 비교적 임의적으로 맞추어 이미지를 캡처하는 재현 장치에 적합하다.
다양한 데이터가 기록되고 후속 처리를 위해 컴퓨터에 다운로드 되어 그리고/또는 착용자의 최근 경험에서 사건을 재 구성하기 위해 분석된다는 것을 이해해야 한다. 재현 장치의 예시적인 출력은 연속적인 음향 기록; 일련의 음향 스냅샷(snapshot); 일련의 이미지 스냅샷; 일련의 GPS 위치, 고도, 및 방향의 판독; 움직임 기록; 주변 온도 기록; 심장 박동율 기록; RFID 검출 기록; 및 무선 네트워크 검출 기록 등을 포함하나, 이에 제한을 두지 않는다.
또한, 기억 재현을 촉진 하기 위해 의도된 응용에서, "신속한 연속 시각적 제시"(Rapid Serial Visual Presentation) 또는 RSVP 라 일컫는 기술을 사용한다. RSVP는 책 내용을 파악하기 위해 책을 흘러 보는 것과 전자적으로 동등한 것을 의미하고, 그 것은 2000년 5월, Oscar de Bruijn 과 Robert Spence에 의해 파일 http://www.iis.ee.ic.ac.uk/~o.debruijn/avi2000.pdf로 "신속한 연속 시각적 제시: 정보 제시에 관한 공간과 시간의 균형"(Rapid Serial Visual Presentation: A space-time trade-off in information presentation)에 서술되어 있다. 이 기술을 이용하여, 속도, 방향, 및 동시에 볼 수 있는 이미지의 개수 등을 포함하나 이에 제한을 두지 않는 다양한 요인을 사용자가 직접적으로 제어하는 상태하에서, 재현 장치 또는 캡처된 데이터를 다운로드 받은 클라이언트 컴퓨터 시스템상의 것과 같은 사용자 인터페이스는 캡처된 순서대로 신속하게 이미지를 표시한다. 이와 같은 표시는 일시적으로 재현 장치에 의해 캡처 동기화된 음향 또는 다른 기록된 데이터와 결합될 수 있다.
100: 착용자 102: 재현장치
104: 박스 106: 카메라
108, 110, 112, 114: 발광 다이오드 116: 직렬 포트
118: 코드 200: 내부 평면 사진
202: 외부 투시도 사진 204: 인쇄 회로 기판
206: 카메라 208: 렌즈
210: 가속도계 212: 센서
214: 직렬 버스 포트 216: 발광 다이오드
302: 마이크로 컨트롤러 304: 카메라
306: 셔터 제어 라인 308: 모드 제어 라인
310: 렌즈 312: 건전지
314: 스텝업 회로 316: I2C 버스
318: 메모리 블록 320: 실 시간 시계 칩
322: 온도 센서 324, 326: 가속도계
328: 직렬 인터페이스 330: 음향 기록 회로
332: 디지털 조도 센서 334: RF 송수신기
336: 안테나

Claims (15)

  1. 착용자가 휴대할 수 있도록 구성된 휴대용 재현 장치(recall device)로서,
    카메라; 및
    상기 카메라에 동작 가능하게 연결된 적어도 하나의 가속도계
    를 포함하고,
    상기 가속도계는 캡처 컨디션(capture condition)의 검출에 기초하여 상기 카메라에 의해 이미지의 캡처를 유발하고,
    상기 휴대용 재현 장치는 상기 적어도 하나의 가속도계가 미리 정의된 범위 내 또는 미리 정의된 임계값 이하의 움직임을 검출할 때까지 상기 이미지의 캡처의 유발을 지연시키도록 구성되는 휴대용 재현 장치.
  2. 제1항에 있어서,
    상기 적어도 하나의 가속도계는 상기 미리 정의된 범위 내 또는 상기 미리 정의된 임계값 이하의 움직임 및 상기 캡처 컨디션을 검출하는 휴대용 재현 장치.
  3. 제1항에 있어서,
    상기 캡처 컨디션의 검출에 반응하여, 주변 음향들을 기록하는 음향 기록 회로를 더 포함하는 휴대용 재현 장치.
  4. 제1항에 있어서,
    상기 적어도 하나의 가속도계는 다수의 가속도계를 포함하고, 각각의 가속도계는 각기 다른 축을 따라 가속도를 검출하기 위해 지향되고(oriented), 상기 휴대용 재현 장치는 각각의 가속도계로부터의 신호가, 카메라 가속도가 각각의 축에서의 미리 정의된 임계값보다 낮은 것을 표시할 때까지 유발을 지연시키도록 더 구성되는 휴대용 재현 장치.
  5. 제1항에 있어서,
    상기 캡처 컨디션의 검출은 주변 조명의 변화의 검출을 포함하고, 상기 이미지의 캡처의 유발은 상기 캡처 컨디션의 검출 후에 적어도 미리 정의된 지연 기간만큼 지연되는 휴대용 재현 장치.
  6. 제1항에 있어서,
    상기 캡처 컨디션의 검출은 상기 재현 장치 부근에 있는 사람으로부터의 열에 의해 유발되는 수동(passive) 적외선 검출기로부터의 신호의 변화의 검출을 포함하는 휴대용 재현 장치.
  7. 제1항에 있어서,
    상기 캡처의 순간적인 근접(temporal proximity)에서 캡처 컨디션이 검출될 경우, 상기 이미지의 캡처의 유발에 반응하여, 상기 이미지의 저장을 유지하는 메모리를 더 포함하고, 상기 메모리는 상기 캡처의 정의된 순간적인 근접에서 캡처 컨디션이 검출되지 않을 경우, 상기 이미지의 저장을 삭제하는 휴대용 재현 장치.
  8. 착용자가 휴대할 수 있도록 구성된 휴대용 재현 장치로서,
    카메라; 및
    상기 카메라에 동작 가능하게 연결된 자이로스코프
    를 포함하고,
    상기 자이로스코프는 캡처 컨디션의 검출에 기초하여 상기 카메라에 의해 이미지의 캡처를 유발하고,
    상기 휴대용 재현 장치는 상기 자이로스코프가 상기 카메라의 요잉 움직임(yawing movement)이 정의된 임계값보다 낮은 것을 표시하는 신호를 검출할 때까지 상기 이미지의 캡처의 유발을 지연시키도록 구성되는 휴대용 재현 장치.
  9. 가속도계를 이용해 적어도 한 축을 따라 카메라의 가속도를 감시하는 단계;
    상기 카메라가 겪는 캡처 컨디션을 검출하는 단계;
    상기 캡처 컨디션을 검출하는 단계에 반응하여, 상기 적어도 한 축을 따라 적어도 하나의 가속도계에 의해 미리 정의된 범위 내 또는 미리 정의된 임계값 이하의 움직임을 검출하는 단계; 및
    상기 미리 정의된 범위 내 또는 상기 미리 정의된 임계값 이하의 움직임의 검출을 수반하는 상기 캡처 컨디션의 검출에 기초하여 상기 카메라에 의해 이미지의 캡처를 유발하는 단계
    를 포함하는, 이미지를 캡처하는 방법.
  10. 제9항에 있어서,
    상기 캡처 컨디션을 검출하는 단계는 상기 캡처 컨디션을 검출하기 위해 환경 센서를 사용해서 주변 컨디션들을 감시하는 단계를 포함하는, 이미지를 캡처하는 방법.
  11. 제9항에 있어서,
    상기 캡처 컨디션의 검출에 반응하여 주변 음향들을 기록하는 단계를 더 포함하는, 이미지를 캡처하는 방법.
  12. 제9항에 있어서,
    상기 카메라에 의한 상기 이미지의 캡처는 메모리로 트리거(trigger)되고,
    상기 방법은, 상기 캡처의 정의된 순간적인 근접에서 캡처 컨디션이 검출되지 않을 경우, 상기 메모리로부터 상기 이미지를 삭제하는 단계를 더 포함하는, 이미지를 캡처하는 방법.
  13. 제12항에 있어서,
    주변 음향들을 상기 메모리에 기록하는 단계; 및
    상기 캡처의 순간적인 근접에서 캡처 컨디션이 검출되지 않을 경우, 기록된 상기 주변 음향들을 삭제하는 단계
    를 더 포함하는, 이미지를 캡처하는 방법.
  14. 카메라가 겪는 캡처 컨디션을 검출하는 단계;
    상기 카메라의 요잉 움직임이 정의된 임계값보다 낮은 것을 표시하는 자이로스코프로부터의 신호를 검출하는 단계; 및
    상기 자이로스코프로부터의 신호의 검출을 수반하는 상기 캡처 컨디션의 검출에 기초하여 상기 카메라에 의해 이미지의 캡처를 유발하는 단계
    를 포함하는, 이미지를 캡처하는 방법.
  15. 프로세서에 의해 실행될 때, 상기 프로세서로 하여금 제9항 내지 제14항 중 어느 한 항의 방법을 수행하게 하는 컴퓨터 실행가능 명령어들을 포함하는 프로그램들이 기록되어 있는 컴퓨터 판독가능 기록 매체.
KR1020120089758A 2004-03-01 2012-08-16 재현 장치 KR20120120094A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120089758A KR20120120094A (ko) 2004-03-01 2012-08-16 재현 장치

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/790,602 2004-03-01
KR1020120089758A KR20120120094A (ko) 2004-03-01 2012-08-16 재현 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020050017429A Division KR101376847B1 (ko) 2004-03-01 2005-03-02 재현 장치

Publications (1)

Publication Number Publication Date
KR20120120094A true KR20120120094A (ko) 2012-11-01

Family

ID=47507144

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120089758A KR20120120094A (ko) 2004-03-01 2012-08-16 재현 장치

Country Status (1)

Country Link
KR (1) KR20120120094A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101506075B1 (ko) * 2013-04-05 2015-03-26 동국대학교 산학협력단 심부 체온 모니터링을 위한 비침습 및 무구속적 단층 체온계
WO2018117456A1 (ko) * 2016-12-23 2018-06-28 전자부품연구원 전자직물 구조에서의 생체환경정보 측정 및 보정 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101506075B1 (ko) * 2013-04-05 2015-03-26 동국대학교 산학협력단 심부 체온 모니터링을 위한 비침습 및 무구속적 단층 체온계
WO2018117456A1 (ko) * 2016-12-23 2018-06-28 전자부품연구원 전자직물 구조에서의 생체환경정보 측정 및 보정 방법

Similar Documents

Publication Publication Date Title
KR101376847B1 (ko) 재현 장치
US10900943B2 (en) Method, apparatus and system for food intake and physical activity assessment
US7633527B2 (en) Attention detection
CN103581550B (zh) 数据存储装置和存储介质
US20190132502A1 (en) Method of operating a wearable lifelogging device
US20180020193A1 (en) Wearable band
US20050128293A1 (en) Video records with superimposed information for objects in a monitored area
US20120327242A1 (en) Surveillance camera with rapid shutter activation
CN110876613A (zh) 一种人体运动状态识别方法、系统及电子设备
KR20160123294A (ko) 도메인 인식 카메라 시스템
US20160088206A1 (en) Depth sensors
JP2010271978A (ja) 行動推定装置
KR20120120094A (ko) 재현 장치
Yoon et al. Virtual lock: a smartphone application for personal surveillance using camera sensor networks
CN106936461B (zh) 一种基于iot平台的智能穿戴马甲
JP2021512433A (ja) 手首装着型製品コード・リーダ
US20230033053A1 (en) Human falling detection employing thermal sensor and image sensor
CN213070105U (zh) 基于imu的翻身监护系统
KR20240044110A (ko) 모니터링 디바이스 및 그 제어 방법
CN114821738A (zh) 一种安全预警的方法、装置、计算机设备及可读存储介质
Sharma et al. A Comprehensive Survey On Smart Safety Devices For Women

Legal Events

Date Code Title Description
A107 Divisional application of patent
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid