KR20130076948A - 디지털 영상장치 및 그 제어방법 - Google Patents

디지털 영상장치 및 그 제어방법 Download PDF

Info

Publication number
KR20130076948A
KR20130076948A KR1020110145392A KR20110145392A KR20130076948A KR 20130076948 A KR20130076948 A KR 20130076948A KR 1020110145392 A KR1020110145392 A KR 1020110145392A KR 20110145392 A KR20110145392 A KR 20110145392A KR 20130076948 A KR20130076948 A KR 20130076948A
Authority
KR
South Korea
Prior art keywords
user
image
external
input unit
light source
Prior art date
Application number
KR1020110145392A
Other languages
English (en)
Other versions
KR101910659B1 (ko
Inventor
서영광
박승권
김창용
박종진
정웅재
조대우
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020110145392A priority Critical patent/KR101910659B1/ko
Priority to EP12199363.8A priority patent/EP2611141A3/en
Priority to CN201210584649.3A priority patent/CN103188540B/zh
Priority to US13/730,242 priority patent/US9288433B2/en
Priority to JP2012289025A priority patent/JP2013141247A/ja
Publication of KR20130076948A publication Critical patent/KR20130076948A/ko
Application granted granted Critical
Publication of KR101910659B1 publication Critical patent/KR101910659B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/148—Interfacing a video terminal to a particular transmission medium, e.g. ISDN

Abstract

본 발명은 디지털 영상장치의 사용자 입력부에 별도의 영상 엔코더를 구비하지 않고 본체에 구비된 영상 엔코더를 이용하여 외부 영상신호를 압축함으로써 재료비 및 원가를 절감할 수 있는 디지털 영상장치 및 그 제어방법을 제공한다. 또한, 본 발명은 디지털 영상장치의 사용자 입력부에 광원을 구비하여 저조도 환경에서도 일정한 프레임 레이트를 유지할 수 있는 디지털 영상장치 및 그 제어방법을 제공한다.
이를 위해, 본 발명의 일 측면에 따른 디지털 영상장치는 외부 영상을 입력받고, 상기 입력된 외부 영상에 대응되는 외부 영상신호를 생성하는 영상 입력부를 포함하는 사용자 입력부; 상기 영상 입력부에서 생성한 외부 영상신호를 상기 디지털 영상장치의 본체로 전송하는 데이터 인터페이스; 및 상기 본체에 구비되고, 데이터 인터페이스를 통해 전송받은 외부 영상신호를 소정의 포맷으로 엔코딩하는 영상 엔코더를 포함한다.

Description

디지털 영상장치 및 그 제어방법{DIGITAL IMAGING APPARATUS AND CONTROL METHOD FOR THE SAME}
본 발명은 화상통화 또는 다양한 어플리케이션의 실행이 가능한 디지털 영상장치 및 그 제어방법에 관한 것이다.
일반적으로 영상장치란 영상신호를 처리하여 다양한 형태로 출력하는 장치로서, 대표적인 영상장치로는 TV를 들 수 있다. 최근에는 기존의 아날로그 TV보다 우수한 신호 처리 및 저장 능력을 가진 디지털 TV가 개발되고 상용화되면서 각 가정에 연결되어 있는 인터넷 망을 이용하여 실시간 방송, COD(Contents on Demand), 게임, 화상 통신 등 다양한 종류의 컨텐츠 서비스를 사용자에게 제공할 수 있게 되었다.
디지털 TV에는 사용자의 영상을 입력받는 카메라 모듈(MoIP)이 구비되고, 상기 카메라로 촬영한 사용자 영상을 이용하여 화상통신 및 다양한 어플리케이션을 실행한다.
기존의 카메라 모듈은 디지털 TV 본체의 작업 로드를 감소시키기 위하여 카메라 모듈 내에 사용자 영상신호를 압축하는 별도의 영상 엔코더를 구비하였는 바, 이로 인해 원가가 상승되는 문제점이 있었고, 또한, 화상통화를 위한 포맷으로 압축된 사용자 영상신호 및 디스플레이부에 표시하기 위한 사용자 영상신호를 별개로 전송함으로써 데이터 인터페이스의 bandwidth load 부담이 되었다.
아울러, 기존의 카메라 모듈은 저조도 환경에서 낮은 프레임 레이트로 영상신호를 생성하였는 바, 이는 디스플레이부에 부자연스러운 영상으로 표시될 수 있고, 디지털 TV의 본체가 다양한 어플리케이션을 위해 비젼 프로세싱을 수행할 때에 부정확한 결과를 야기할 수 있다.
본 발명은 디지털 영상장치의 사용자 입력부에 별도의 영상 엔코더를 구비하지 않고 본체에 구비된 영상 엔코더를 이용하여 외부 영상신호를 압축함으로써 재료비 및 원가를 절감할 수 있는 디지털 영상장치 및 그 제어방법을 제공한다.
또한, 본 발명은 디지털 영상장치의 사용자 입력부에 광원을 구비하여 저조도 환경에서도 일정한 프레임 레이트를 유지할 수 있는 디지털 영상장치 및 그 제어방법을 제공한다.
본 발명의 일 측면에 따른 디지털 영상장치는 외부 영상을 입력받고, 상기 입력된 외부 영상에 대응되는 외부 영상신호를 생성하는 영상 입력부; 상기 영상 입력부에서 생성한 외부 영상신호를 로우 데이터(raw data) 형태로 상기 디지털 영상장치의 본체로 전송하는 데이터 인터페이스; 및 상기 본체에 구비되고, 상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 소정의 포맷으로 엔코딩하는 영상 엔코더를 포함한다.
상기 디지털 영상장치는 상기 데이터 인터페이스를 통해 전송받은 외부 영상신호에 기초하여 사용자를 인식하는 비젼 프로세서를 더 포함한다.
상기 영상 입력부에서 생성한 외부 영상신호는 사용자 주변환경의 조도 변화에 관계없이 일정한 프레임 레이트를 갖는다.
상기 디지털 영상장치는 상기 사용자 주변환경의 조도를 상승시키는 적외선 광원; 및 상기 영상 입력부의 저항 변화량에 기초하여 상기 사용자 주변환경의 조도를 획득하고, 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 광원 제어부를 더 포함한다.
상기 디지털 영상장치는 사용자 주변환경의 조도를 상승시키는 적외선 광원; 및 상기 영상 입력부를 통해 입력된 외부 영상을 분석하여 상기 사용자 주변환경의 조도를 획득하고, 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 광원 제어부를 더 포함한다.
상기 디지털 영상장치는 상기 사용자 주변환경의 조도를 감지하는 조도센서;상기 사용자 주변환경의 조도를 향상시키는 적외선 광원; 및 상기 조도센서의 출력값에 기초하여 상기 사용자 주변환경의 조도를 획득하고, 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 광원 제어부를 더 포함한다.
상기 광원 제어부는, 상기 획득된 조도에 따라서 상기 적외선 광원의 세기를 조절한다.
본 발명의 다른 측면에 따른 디지털 영상장치는 외부 영상을 입력받고, 상기 입력된 외부 영상에 대응되는 외부 영상신호를 생성하는 영상 입력부 및 상기 외부 영상신호를 MJPEG 방식으로 압축하는 MJPEG 엔코더를 포함하는 사용자 입력부; 상기 MJPEG 방식으로 압축된 외부 영상신호를 상기 디지털 영상장치의 본체로 전송하는 데이터 인터페이스; 및 상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 디코딩하는 MJPEG 디코더 및 상기 디코딩된 외부 영상신호를 소정의 포맷으로 압축하는 영상 엔코더를 포함하는 본체를 포함한다.
상기 본체는, 상기 디코딩된 외부 영상신호에 기초하여 사용자를 인식하는 비젼 프로세서를 더 포함한다.
본 발명의 일 측면에 따른 디지털 영상장치의 제어방법은 사용자 입력부를 통해 외부 영상을 입력받아 이에 대응되는 외부 영상신호를 생성하고; 상기 생성된 외부 영상신호를 로우 데이터(raw data) 형태로 데이터 인터페이스를 통해 상기 디지털 영상장치의 본체로 전송하고; 상기 데이터 인터페이스를 통해 전송받은 외부 영상신호에 기초하여 사용자를 인식하고; 상기 인식결과에 기초하여 상기 디지털 영상장치의 어플리케이션을 실행한다.
상기 디지털 영상장치의 제어방법은 상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 상기 본체에 구비된 영상 엔코더를 이용하여 소정의 포맷으로 압축하고; 상기 압축된 외부 영상신호를 화상통화 상대방에게 송신하는 것을 더 포함한다.
상기 사용자 입력부에서 생성한 외부 영상신호는 사용자 주변환경의 조도변화에 관계없이 일정한 프레임 레이트를 갖는다.
상기 사용자 입력부는, 상기 주변환경의 조도를 향상시키는 적외선 광원을 포함하고, 상기 사용자 입력부의 저항 변화량에 기초하여 상기 사용자 주변환경의 조도를 획득하고; 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시킨다.
상기 사용자 입력부는, 상기 주변환경의 조도를 향상시키는 적외선 광원을 포함하고, 상기 영상 입력부를 통해 입력된 외부 영상을 분석하여 상기 사용자 주변환경의 조도를 획득하고; 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시킨다.
상기 사용자 입력부는, 상기 사용자 주변환경의 조도를 감지하는 조도센서 및 상기 사용자 주변환경의 조도를 향상시키는 적외선 광원을 포함하고, 상기 조도센서의 출력값에 기초하여 상기 사용자 주변환경의 조도를 획득하고; 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시킨다.
본 발명의 다른 측면에 따른 디지털 영상장치의 제어방법은 사용자 입력부를 통해 외부 영상을 입력받아 이에 대응되는 외부 영상신호를 생성하고; 상기 외부 영상신호를 MJPEG 엔코더를 이용해 압축하고; 상기 MJPEG 엔코더로 압축된 외부 영상신호를 데이터 인터페이스를 통해 상기 디지털 영상장치의 본체로 전송하고; 상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 MJPEG 디코더를 이용해 디코딩하고; 상기 디코딩된 외부 영상신호에 기초하여 사용자를 인식하고, 상기 인식결과에 기초하여 상기 디지털 영상장치의 어플리케이션을 실행한다.
상기 디코딩된 외부 영상신호를 소정의 포맷으로 압축하여 화상통화 상대방에게 송신하는 것을 더 포함한다.
본 발명의 일 측면에 따른 디지털 영상장치 및 그 제어방법에 의하면, 사용자 입력부에 별도의 영상 엔코더를 구비하지 않고 본체에 구비되어 있는 영상 엔코더를 이용하여 외부 영상신호를 송신 포맷으로 압축함으로써 재료비 및 원가를 절감할 수 있다.
또한, 사용자 입력부에서 로우 데이터(raw data) 형태인 외부 영상신호를 전송함으로써 이를 기초로 수행되는 비젼 프로세싱 결과의 정확도가 향상된다.
또한, 사용자 입력부에 광원을 구비하고 저조도 환경에서 상기 광원을 on 시킴으로써 저조도 환경에서도 일정한 프레임 레이트를 유지하여 자연스러운 외부 영상을 디스플레이할 수 있고, 비젼 프로세싱 결과의 정확도도 향상될 수 있다.
도 1에는 본 발명의 일 실시예에 따른 디지털 영상장치의 전체 외관을 나타낸 외관도가 도시되어 있다.
도 2에는 화상 통신 시스템의 구성을 나타낸 간략한 블록도가 도시되어 있다.
도 3에는 본 발명의 제1실시예에 따른 디지털 영상장치의 개략적인 제어 블록도가 도시되어 있다.
도 4에는 본 발명의 일 실시예에 따른 디지털 영상장치에서 수행되는 어플리케이션의 화면이 도시되어 있다.
도 5에는 기존의 디지털 영상장치의 사용자 입력부가 저조도 환경에서 외부 영상을 촬영할 때 카메라 노출구간을 나타내는 time chart가 도시되어 있다.
도 6에는 본 발명의 일 실시예에 따른 디지털 영상장치에 있어서, 사용자 입력부에 별도의 광원을 구비하는 디지털 영상장치에 관한 제어 블록도가 도시되어 있다.
도 7에는 본 발명의 다른 실시예에 따른 디지털 영상장치에 있어서, 사용자 입력부에 별도의 광원을 구비하는 디지털 영상장치에 관한 제어 블록도가 도시되어 있다.
도 8에는 본 발명의 일 실시예에 따른 디지털 영상장치에 있어서, 적외선 광원의 on 시간과 영상 입력부 노출 시간을 나타낸 time chart가 도시되어 있다.
도 9에는 본 발명의 제2실시예에 따른 디지털 영상장치에 관한 제어 블록도가 도시되어 있다.
도 10에는 본 발명의 제1실시예에 따른 디지털 영상장치의 제어방법에 관한 순서도가 도시되어 있다.
도 11에는 본 발명의 제2실시예에 따른 디지털 영상장치의 제어방법에 관한 순서도가 도시되어 있다.
이하 첨부된 도면을 참조하여 본 발명의 실시예를 상세히 설명하도록 한다.
도 1에는 본 발명의 일 실시예에 따른 디지털 영상장치(10)의 전체 외관을 나타낸 외관도가 도시되어 있다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 디지털 영상장치(10)는 디지털 TV로 구현될 수 있으며, 디지털 TV는 방송 프로그램의 영상 신호 또는 화상 통화 상대방의 영상신호를 영상으로 출력하는 디스플레이부(281), 방송 프로그램의 음향 신호 또는 화상 통화 상대방의 음성 신호를 음향으로 출력하는 음향 출력부(미도시), 사용자의 영상 및 음성을 입력하는 사용자 입력부(100)를 포함한다.
또한, 디지털 TV와 이격된 위치에서도 디지털 TV의 동작을 제어할 수 있는 리모트 컨트롤러(20)를 더 포함할 수 있으며, 리모트 컨트롤러(20)는 방송 프로그램의 출력에 관한 제어 외에 화상 통화에 관련된 제어도 수행할 수 있다.
디스플레이부(281)에는 세 종류의 영상이 동시에 표시될 수 있다. 따라서 디스플레이부(281)는 방송신호를 표시하는 방송 영역(Ⅰ), 사용자 영상을 표시하는 사용자 영상영역(Ⅱ) 및 상대방의 영상을 표시하는 상대방 영상영역(Ⅲ)을 포함하며, 디스플레이부(281)에 세 영역이 동시에 표시되므로 사용자는 방송 프로그램을 시청하면서 동시에 화상통화를 진행할 수 있다.
음향 출력부는 스피커(speaker) 등으로 구현될 수 있으며, 방송 프로그램 신호에 포함된 음향신호와 화상 통화 상대방의 음성신호를 동시에 출력할 수 있다. 당해 실시예의 디지털 영상장치는 그 후면에 음향 출력부를 구비하나 본 발명의 실시예가 이에 한정되는 것은 아니며, 사용자에게 음향을 출력할 수 있는 곳이면 그 위치에 제한은 없다.
사용자 입력부(100)는 MoIP(Multimedia over IP)로 구현될 수 있으며, 사용자의 음성을 입력하는 음성 입력부(130)와, 사용자의 영상을 입력하는 영상 입력부(110)를 포함한다. 음성 입력부(130)는 마이크(microphone) 등으로 구현될 수 있으며, 사용자의 음성을 취음하는 것이 목적이나 사용자의 음성 외에 배경음 특히, 디지털 TV의 음향 출력부에서 출력되는 방송 프로그램의 음향 또는 상대방의 음성이 함께 취음될 수 있다.
영상 입력부(110)는 사용자의 영상을 받아들이는 렌즈와 CCD 센서, CMOS 센서 등의 촬상소자를 포함한다. 사용자는 디지털 영상장치에 구비된 영상 입력부(110)를 이용하여 자신의 영상을 촬영하고 이를 상대방에게 송신한다. 또한, 촬영된 영상은 사용자 측의 디지털 영상장치에도 디스플레이될 수 있다.
도 2에는 화상 통신 시스템의 구성을 나타낸 간략한 블록도가 도시되어 있다.
화상 통신 시스템은 영상 데이터와 음성 데이터의 처리 및 송수신이 가능한 복수의 장치들을 이용하여 호출 측(calling party) 및 피호출 측(called party)이 반대측에서 송신한 영상을 보고 음성을 들으면서 서로 대화할 수 있도록 하는 시스템이다.
도 2를 참조하면, 디지털 TV는 카메라로 구현되는 영상 입력부로부터 사용자의 영상에 대응되는 영상 데이터를 획득하고, 마이크(microphone)로 구현되는 음성 입력부(130)로부터 사용자의 음성에 대응되는 음성 데이터를 획득하여 획득된 영상 데이터 및 음성 데이터를 유무선 네트워크로 연결된 상대방 측의 외부장치들로 송신할 수 있다.
상대방 측의 외부장치들은 사용자 측과 마찬가지로 디지털 TV일 수 있고, 휴대폰, PDA, 노트북 컴퓨터 등과 같은 이동식 단말기이거나 PC일 수도 있다.
사용자의 디지털 TV와 상대방 측의 외부장치들을 연결하는 네트워크는 화상 통신을 위한 통신 규격에 따른 영상 및 음성 데이터의 송수신을 가능하게 한다. 예를 들어, 사용자의 디지털 TV와 상대방 측의 장치들은 이더넷(ethernet) 또는 IEEE 802.3 등에 따른 네트워크를 이용하여 상기 영상 및 음성 데이터를 송수신하거나, IEEE 802. 11 등에 따른 네트워크를 이용하여 상기 데이터들을 송수신할 수도 있다.
한편, 상기 네트워크는 VOBB(Voice over BroadBand) 또는 레거시(legacy) 서비스 등을 이용하여 사용자 측의 디지털 TV와 상대방 측의 외부장치 사이의 데이터 송수신을 할 수 있다.
구체적으로, VOBB는 VoCM(Voice over Cable Modem), VoDSL(Voice over DSL), VoIP(Voice over Internet Protocol), FWA(Fixed Wireless Access), FTTH(Fiber To The Home) 또는 VoATM(Voice over ATM) 등의 서비스를 포함할 수 있으며, 레거시 서비스는 ISDN(Intergrated Service Digital Network), POTS(Plain Old Telephone Service), 셀룰러 또는 3G 서비스 등을 포함할 수 있다.
이에 따라, 디지털 TV와 외부장치들은 무선 네트워크, 종래의 전화 네트워크, 인터넷 등과 같은 데이터 네트워크, 케이블 모뎀 시스템 또는 셀룰러 네트워크 등을 이용해 영상 및 음성 데이터를 송수신하여 화상통화를 가능하게 한다.
한편, 디지털 TV와 외부장치들은 상호 간에 설정된 규격에 따라 영상 및 음성 데이터를 송수신할 수 있으며, 예를 들어 영상 데이터의 코딩을 위한 H.261 표준, 영상 및 음성 데이터의 통신을 H.221 표준 및 호출 설정 및 해제를 위한 H.242 표준 등과 같은 프로토콜들을 이용할 수 있다.
예를 들어, 인터넷을 이용한 화상 통신 시스템의 경우, 영상 코딩을 위한 H.323, H.263 및 H.264 표준과 음성 코딩을 위한 G.711, G.729 등과 같은 화상 통신 표준에서 구현된 프로토콜들이 이용될 수도 있다.
그러나 본 발명의 실시예에 따른 디지털 영상장치가 화상통신을 구현하는데 사용되는 데이터 송수신 방법은 상술한 예에 한정되는 것이 아니며, 디지털 영상장치가 화상통신을 구현할 수 있도록 하는 것이면 그 방법에 제한은 없다.
도 3에는 본 발명의 제1실시예에 따른 디지털 영상장치의 개략적인 제어 블록도가 도시되어 있다.
도 3을 참조하면, 본 발명의 일 실시예에 따른 디지털 영상장치는 방송신호를 수신하는 방송신호 수신부(211), 화상통화 상대방과 영상신호 및 음성신호를 송수신하는 송수신부(212), 영상 엔코더(260), 방송신호 수신부 및 송수신부에서 수신한 음향신호를 디코딩하는 음향 처리부(220), 음향 처리부에서 디코딩한 음향신호를 출력하는 음향 출력부(282), 사용자의 영상 및 음성을 입력하는 사용자 입력부(100), 사용자 영상신호를 압축하는 영상 엔코더(260)를 포함한다.
방송신호 수신부(211)는 영상신호 및 음향신호를 포함하는 방송신호를 수신한다. 방송신호 수신부(211)는 안테나 및 튜너 등으로 구성되며, 영상신호는 디스플레이부(281)를 통해 영상으로 출력되고, 음향신호는 음향 출력부(282)를 통해 음향으로 출력된다.
송수신부(211)는 소정의 통신경로를 통하여 화상통화의 상대방으로부터 영상신호 및 음성신호를 수신하고, 상대방에게 사용자의 영상신호 및 음성신호를 송신한다. 송수신부(211)에서 사용하는 소정의 통신경로는 앞서 설명한 바와 같이 인터넷(internet), 이더넷(ethernet) 호스트, 공중전화망(Public Switched Telephone Network) 등을 포함하는 네트워크 통신망일 수도 있고 일대일 통신망일 수도 있다. 또한, 유무선 통신망을 모두 포함할 수 있다.
사용자 입력부(100)는 MoIP 등으로 구현될 수 있으며, 사용자로부터 영상을 입력받는 영상 입력부(110) 및 음성을 입력받는 음성 입력부(130)를 포함하고, 영상 입력부(110) 및 음성 입력부(130)는 입력받은 영상 및 음성에 관한 데이터를 전기신호로 변환하여 영상신호 및 음성신호로 출력할 수 있다. 사용자 입력부(100)는 영상 입력부(110)에서 출력된 영상신호를 압축하는 영상 엔코더를 구비하지 않는다.
영상 입력부(110)는 사용자의 영상을 광신호로 받아들이는 렌즈(111) 및 렌즈에서 받아들인 광신호를 전기신호로 변환하여 사용자의 영상에 대응되는 사용자 영상신호를 출력하는 촬상소자(112)를 포함한다. 촬상소자(112)는 CCD 센서, CMOS 센서 등의 이미지 센서로 구현될 수 있으며, 촬상소자(112) 내에는 전기신호를 데이터 처리 가능한 디지털 신호로 변환하는 영상 A/D 변환부 및 디지털 신호로 변환된 영상신호에 대해 영상 처리를 수행하는 영상신호처리부(Image Signal Processor;ISP)가 구비될 수 있다.
참고로, 사용자 입력부를 통해 입력되는 영상에는 사용자가 포함될 수도 있고 포함되지 않을 수도 있으며, 사용자 입력부를 통해 입력되는 음성에는 사용자의 음성이 포함될 수도 있고 포함되지 않을 수도 있다. 이하 상술할 실시예에서는 사용자 입력부(100)를 통해 입력되는 영상을 '외부 영상'이라 하고, 음성을 '외부 음성'이라 하기로 한다.
영상 입력부(110)에서 생성되는 외부 영상신호는 디지털 변환 및 영상처리까지 모두 수행된 신호일 수도 있다. 그러나, 디지털 변환 및 영상처리를 거쳤는지 여부와 상관없이 영상 입력부(110)에서 출력된 영상신호는 압축되지 않은 로우 데이터(raw data) 형태로 데이터 인터페이스(300)를 거쳐 본체(200)로 전송된다.
음성 A/D 변환부(140)는 음성 입력부(130)를 통해 입력된 음성신호를 디지털 신호로 변환시키는 샘플링을 수행하고, 디지털 신호로 변환된 음성신호는 본체(200)에서 압축되어 상대방에게 전송된다.
사용자 입력부(100)와 본체(200)는 데이터 인터페이스(300)를 통하여 연결될 수 있고, 일 실시예로서 데이터 인터페이스(300)는 USB 인터페이스일 수 있다. 그러나, 본 발명의 실시예가 이에 한정되는 것은 아니며, 본체(200)와 사용자 입력부(100)를 연결하는 다양한 인터페이스가 사용될 수 있다.
디지털 영상장치의 본체(200)에는 다른 휴대기기와의 데이터 전송 또는 다양한 어플리케이션의 수행 등을 위해 영상 엔코더(260)가 구비된다. 이 영상 엔코더(260)는 데이터 인터페이스(300)를 통해 전송된 외부 영상신호를 송신 포맷에 맞게 압축하여 송수신부(212)를 통해 상대방에게 전송할 수 있다. 예를 들어, 화상통신의 송신 포맷으로 H.264 표준을 사용하는 경우, 영상 엔코더(260)는 외부 영상신호를 H.264 포맷에 맞게 압축하여 송수신부(212)로 전송한다.
따라서, 본 발명의 제1실시예에 따른 디지털 영상장치는 사용자 입력부(100)에 별도의 영상 엔코더를 구비하지 않고, 로우 데이터(raw data) 형태의 외부 영상신호를 본체(200)로 전송하여 본체(200)에 원래 구비되어 있던 영상 엔코더(260)를 이용함으로써 제조 원가 절감을 기대할 수 있다.
또한, 사용자 입력부(100)에서 영상신호를 압축하지 않으므로 사용자 입력부(100)에 음성신호와의 동기화를 위한 신호 합성부를 구비하지 않아도 되며, 본체(200)에 신호 분리부를 구비하지 않아도 된다.
음성 엔코더(250)는 데이터 인터페이스(300)를 통해 전송된 외부 음성신호를 송신 포맷에 맞게 압축하여 송수신부(212)로 전송한다.
송수신부(212)는 영상 엔코더(260) 및 음성 엔코더(250)로부터 전송받은 외부 영상신호 및 음성신호를 상대방에게 송신하고, 소정의 통신경로를 통하여 상대방으로부터 부호화된 영상신호 및 음성신호를 수신한다. 수신된 영상신호는 영상 처리부(230)로 전송되고, 수신된 음성신호는 음향 처리부(220)로 전송된다.
방송신호 수신부(211)를 통해 수신된 방송 영상신호 및 방송 음향신호 역시 각각 영상 처리부(230) 및 음향 처리부(220)로 전송된다.
음향 처리부(220)는 압축된 음향신호를 디코딩하는 디코더를 포함하며, 방송신호 수신부(211)를 통해 수신된 방송 음향신호 및 송수신부(212)를 통해 수신된 상대방 음성신호를 디코딩한다. 또한, 음향 처리부(220)는 음향 D/A 변환부를 구비하여 디지털 신호인 음향신호를 아날로그 신호로 변환한 후에 음향 출력부(282)로 전송한다.
영상 처리부(230)는 방송신호 수신부(211)에서 수신한 영상신호, 데이터 인터페이스(300)를 통해 전송된 외부 영상신호 및 송수신부(212)에서 수신한 상대방의 영상신호를 처리하여 디스플레이부(281)에 출력한다.
영상 처리부(230)는 방송 영상신호, 상대방 영상신호를 각각 디코딩하고 이들을 복수의 레이어로 처리하여 디스플레이부에 출력한다. 방송 영상신호를 디코딩하는 디코더와 상대방 영상신호를 디코딩하는 디코더는 물리적으로 독립된 하드웨어 디코더일 수 있다.
디스플레이부(281)에 출력되는 예시로서, 방송 영상신호와 상대방 영상신호는 제1레이어로, 외부 영상신호는 제1레이어와 중첩되는 제2레이어로 처리될 수 있다. 영상 처리부(230)는 각각의 영상신호들을 다양한 레이어 구조로 합성하여 디스플레이부(281)에 출력할 수 있다.
또한, 영상 처리부(230)는 디지털 영상장치의 디스플레이부(281)에 방송 영상, 상대방 영상 또는 외부 영상을 출력하기 위한 각종 영상 처리를 수행한다. 영상 처리부(230)는 영상 D/A 변환부를 구비하여 영상신호를 아날로그 신호로 변환한 후 디스플레이부(281)로 전송한다.
디스플레이부(281)는 영상 처리부(230)로부터 전송되는 세 종류의 영상을 표시한다. 디스플레이부(281)는 LCD 패널, OLED 패널, LED 패널, PDD 등으로 구현될 수 있다.
음향 출력부(282)는 음향 처리부(220)에서 전송된 상대방 음성신호 및 방송 음향신호를 출력하여 사용자가 상대방의 음성 및 방송 프로그램의 음향을 들을 수 있도록 한다.
디지털 영상장치는 방송 프로그램의 시청이나 화상통신 외에도 다양한 어플리케이션을 실행할 수 있다. 스마트폰처럼 네트워크 상에서 어플리케이션을 다운받아 실행할 수 있으며, 많은 어플리케이션들이 사용자의 모션 인식을 기반으로 하고 있다. 따라서, 디지털 영상장치의 본체(200)에는 사용자 인식에 사용되는 비젼 프로세서(241)가 포함될 수 있으며, 비젼 프로세서(241)의 프로세싱 결과에 기초하여 어플리케이션을 실행하고 이를 디스플레이부(281)에 표시하는 어플리케이션 실행부(242)도 포함될 수 있다. 여기서, 사용자를 인식하는 것은, 사용자의 동작 인식, 사용자의 얼굴 인식, 사용자의 얼굴 표정 인식, 사용자의 존재 인식 등을 모두 포함하는 개념이다.
비젼 프로세서(241)는 사용자 입력부(100)에서 전송한 외부 영상신호를 이용하는 바, 사용자 입력부(100)에서 전송한 외부 영상신호가 로우 데이터(raw data) 형태이므로 데이터 압축으로 인해 발생하는 데이터의 손실이 없어 정확한 결과를 산출할 수 있다.
도 4에는 본 발명의 일 실시예에 따른 디지털 영상장치에서 수행되는 어플리케이션의 화면이 도시되어 있다.
본 발명의 일 실시예에 따른 디지털 영상장치(10)는 다양한 어플리케이션을 수행할 수 있는 바, 일 예로서 도 4에 도시된 바와 같이 사용자가 디스플레이부(281)를 직접 터치하거나, 리모트 컨트롤러 등의 입력장치를 이용하지 않고서도 동작만으로 디스플레이부(281)에 표시된 메뉴를 선택하도록 할 수 있다.
이 때, 본 발명의 제1실시예에 따른 디지털 영상장치(10)의 사용자 입력부(100)는 로우 데이터(raw data) 형태의 외부 영상신호를 본체(200)로 전송하며, 본체(200)의 비젼 프로세서(241)는 전송된 신호를 이용하여 사용자를 인식한다. 로우 데이터(raw data) 형태의 신호는 정확한 엣지 검출을 가능하게 하는 바, 비젼 프로세서(241)는 사용자를 정확하게 인식할 수 있으며, 이를 기초로 수행되는 어플리케이션의 정확도 역시 향상된다.
도 4는 본 발명에 적용될 수 있는 어플리케이션의 일 실시예에 불과하며, 이 외에도 사용자의 동작에 기반한 게임 등 다양한 어플리케이션이 적용 가능하다.
도 5에는 기존의 디지털 영상장치의 사용자 입력부가 저조도 환경에서 외부 영상을 촬영할 때 카메라 노출구간을 나타내는 time chart가 도시되어 있다.
일반적으로 디지털 영상장치의 사용자 입력부는 피사체의 주변환경이 어두운 경우에, 선명한 영상을 얻기 위해 프레임 레이트(frame rate)를 낮춘다. 이는 도 5에 도시된 바와 같이, 카메라 노출 시간의 구간을 늘려서 촬영되는 이미지의 선명도 및 밝기를 높이기 위함이다. 예를 들어, 피사체의 주변환경이 어두워 30lux의 낮은 조도를 나타내는 경우에 사용자 입력부는 프레임 레이트를 15fps 정도로 낮춘다.
그러나, 디지털 영상장치의 비젼 프로세서에서 사용자의 핸드 제스쳐를 인식하기 위해서는 외부 영상신호가 30fps 이상의 프레임 레이트를 가져야 한다. 따라서, 사용자 입력부가 저조도 환경에서 프레임 레이트를 낮춘 외부 영상신호를 전송하는 경우에 비젼 프로세서는 사용자의 모션을 정확하게 인식할 수 없게 된다.
따라서, 본 발명의 일 실시예에 따른 디지털 영상장치는 사용자 입력부(100)에 별도의 광원을 구비하여 저조도 환경에서도 일정한 프레임 레이트를 유지하여 외부 영상을 촬영할 수 있도록 한다.
도 6에는 본 발명의 일 실시예에 따른 디지털 영상장치에 있어서, 사용자 입력부(100)에 별도의 광원을 구비하는 디지털 영상장치에 관한 제어 블록도가 도시되어 있다.
발명의 각 구성요소 간의 상관관계를 명확히 하기 위하여 디지털 영상장치 전체 구성에 대한 제어 블록도를 도시하였으나, 광원 제어부(150) 및 적외선 광원(160) 외의 구성요소는 앞서 도 3에서 설명하였으므로 이에 대한 중복되는 설명은 생략하도록 한다.
도 6을 참조하면, 본 발명의 일 실시예에 따른 디지털 영상장치의 사용자 입력부(100)는 적외선 광원(160) 및 이를 제어하는 광원 제어부(150)를 포함한다.
적외선 광원(160)은 사용자 주변환경의 조도를 상승시킬 수 있도록 사용자 입력부(100)의 외부로 노출되며, 광원으로 적외선을 사용하기 때문에 사용자의 눈부심을 방지할 수 있다. 적외선 광원은 적외선 영역 뿐만 아니라 근적외선 영역의 광원까지 포함한다.
광원 제어부(150)는 적외선 광원(160)의 on/off 및 세기를 제어한다. 광원 제어부(150)는 사용자 주변환경의 조도가 소정의 기준값 미만인 경우에 적외선 광원(160)을 on 시킬 수 있고, 조도에 따라 적외선 광원(160)의 세기를 적절하게 조절할 수 있다. 예를 들어, 조도가 낮을수록 광원의 세기를 세게 하고 조도가 높을수록 광원의 세기를 약하게 할 수 있다.
당해 실시예에서는 영상 입력부(110)를 통해 입력된 외부 영상을 분석하거나, 촬상소자(112)의 저항값 변화를 분석하여 사용자 주변환경의 조도를 획득할 수 있고, 소정의 기준값은 비젼 프로세서(241)의 결과에 영향을 주거나 디스플레이부(281)를 통해 출력되는 외부 영상이 부자연스러워지는 프레임 레이트를 고려하여 결정될 수 있다. 일 예로, 300lux를 소정의 기준값으로 하는 것이 가능하다.
도 7에는 본 발명의 다른 실시예에 따른 디지털 영상장치에 있어서, 사용자 입력부(100)에 별도의 광원 및 조도센서를 구비하는 디지털 영상장치에 관한 제어 블록도가 도시되어 있다.
도 7 역시, 발명의 각 구성요소 간의 상관관계를 명확히 하기 위하여 디지털 영상장치 전체 구성에 대한 제어 블록도를 도시하였으나, 광원 제어부(150), 조도 센서(170) 및 적외선 광원(160) 외의 구성요소는 앞서 도 3에서 설명하였으므로 이에 대한 중복되는 설명은 생략하도록 한다.
당해 실시예에서는 조도 센서(170)가 사용자 주변환경의 조도를 직접 감지하고, 광원 제어부(150)는 조도 센서(170)의 출력값에 기초하여 적외선 광원(160)의 on/off 및 세기를 제어한다. 이에 관한 내용은 도 6에서 설명한 바와 같다.
도 7의 실시예에서와 같이, 조도 센서(170)로부터 사용자 주변환경의 조도를 획득하게 되면, 촬상소자(111)의 저항값 변화를 분석할 때에 발생할 수 있는 I2C(Inter-Intergrated Circuit)-interrupt를 방지할 수 있고, 외부 영상을 분석하여 조도를 획득할 때에 발생할 수 있는 광원 제어부(150)의 작업로드 부하를 방지할 수 있는 이점이 있다.
도 6 및 도 7에 도시된 바와 같이, 사용자 입력부(100)에 적외선 광원을 구비하여 사용자 주변환경의 조도가 소정의 기준값 미만인 경우 적외선 광원을 on 시키면, 사용자 주변환경의 실제 조도에 관계없이 항상 일정한 프레임 레이트를 갖는 외부 영상신호를 본체로 전송할 수 있다. 따라서, 어두운 환경에서 외부 영상을 촬영하더라도 본체로 전송되는 외부 영상신호의 프레임 레이트는 낮아지지 않고, 비젼 프로세서의 정확도도 유지될 수 있다.
도 8에는 본 발명의 일 실시예에 따른 디지털 영상장치에 있어서, 적외선 광원(160)의 on 시간과 영상 입력부(110) 노출 시간을 나타낸 time chart가 도시되어 있다.
도 8을 참조하면, 본 발명의 일 실시예에 따른 디지털 영상장치는 저조도 환경에서도 영상 입력부(110)의 노출시간(T_exp)을 늘리지 않아도 되고, 광원 제어부(150)는 영상 입력부(110)의 노출시간(T_exp) 구간에서만 적외선 광원(160)을 on 시킴으로써 적외선 광원(160)의 on 시간(T_IR)은 영상 입력부(110)의 노출시간(T_exp)보다 작거나 같게 할 수 있다. 따라서, 적외선 광원(160)에 의한 전류 소모를 최소화하면서 그 동작을 효율적으로 제어할 수 있다.
도 9에는 본 발명의 제2실시예에 따른 디지털 영상장치에 관한 제어 블록도가 도시되어 있다.
도 9를 참조하면, 본 발명의 제2실시예에 따른 디지털 영상장치는 앞서 검토한 제1실시예에 따른 디지털 영상장치에서 MJPEG 엔코더(180)와 MJPEG 디코더(270)를 추가적으로 더 구비한다.
bandwidth가 작은 데이터 인터페이스(300)를 사용하는 경우에는 사용자 입력부(100)에서 본체(200)로 용량이 큰 로우 데이터(raw data)를 전송하는 것이 용이하지 않다. 따라서, 이 경우에는 사용자 입력부(100)에 외부 영상신호를 MJPEG 방식으로 압축하는 MJPEG 엔코더(180)를 구비하고, MJPEG 방식으로 압축된 외부 영상신호를 데이터 인터페이스(300)를 통해 본체(200)로 전송한다.
MJPEG 엔코더(180)는 외부 영상신호를 압축하기는 하지만, 압축률이 높지 않아 데이터 손실률이 비교적 적다. 일 예로, 640×480의 해상도를 갖는 영상신호를 전송할 때에 H.264 포맷으로 압축된 경우에는 평균 1M 정도의 네트워크 사용량을 갖지만, MJPEG 포맷으로 압축된 경우에는 평균 3M 정도의 네트워크 사용량을 갖는다. 즉, MJPEG 포맷으로 압축된 경우 데이터 용량이 더 크다는 것을 알 수 있고 이는 압축으로 인한 데이터 손실이 더 적다는 것을 의미한다.
본체(200)에는 MJPEG 디코더(270)가 구비되고 데이터 인터페이스(300)를 통해 전송된 외부 영상신호는 MJPEG 디코더(180)에서 디코딩(압축 해제)된 후, 영상 엔코더(260)로 전송되어 송신 포맷, 예를 들어 H.264 포맷으로 압축되어 상대방에게 전송되거나, 비젼 프로세서(241)로 전송되어 어플리케이션 실행에 사용되거나, 영상 처리부(230)로 전송되어 영상처리를 거친 후 디스플레이부(281)를 통해 출력된다.
상기 제2실시예에서는 MJPEG 엔코더(180) 및 MJPEG 디코더(270)를 사용하였으나, 압축으로 인한 데이터의 손실을 방지할 수 있는 무손실 코덱(lossless 코덱)을 사용하는 것도 가능하다.
본 발명의 제2실시예에 있어서도 사용자 입력부(100)에 적외선 광원(160) 및 광원 제어부(150)를 더 구비하여 저조도 환경에서도 일정한 프레임 레이트가 유지되는 외부 영상신호를 본체(200)로 전송하도록 할 수 있다. 또한, 광원 제어부(150)가 사용자 주변환경의 조도를 획득함에 있어서도, 앞서 도 6 및 도 7에서 설명한 영상 입력부(110)의 영상을 분석하는 방법, 촬상소자(111)의 저항값 변화를 분석하는 방법 및 조도 센서(170)를 구비하여 조도 센서 출력값으로부터 획득하는 방법이 제2실시예에도 그대로 적용될 수 있다.
이하, 본 발명의 일 실시예에 따른 디지털 영상장치의 제어방법에 관해 설명하도록 한다.
도 10에는 본 발명의 제1실시예에 따른 디지털 영상장치의 제어방법에 관한 순서도가 도시되어 있다.
도 10을 참조하면, 먼저 사용자 입력부(100)에서 외부 영상신호를 생성한다(S410). 여기서, 외부 영상신호를 생성하는 것은 렌즈를 통해 외부 영상을 광신호로 받아들이고 이미지 센서로 구현되는 촬상소자에서 광신호를 전기신호로 변환하는 것을 의미한다. 더불어, 촬상소자 내에 구비된 영상 A/D 변환부에 의해 디지털 신호로 변환하고, 영상신호처리부에 의해 영상신호처리를 수행하는 것까지 포함할 수도 있다.
그리고, 데이터 인터페이스를 통해 외부 영상신호를 본체로 전송한다(S411). 여기서, 데이터 인터페이스를 통해 본체로 전송되는 것은 압축되지 않은 로우 데이터(raw data) 형태의 외부 영상신호이다.
외부 영상신호가 본체로 전송되면, 본체에 포함되는 비젼 프로세서가 외부 영상신호를 기초하여 사용자를 인식한다(S412). 비젼 프로세서가 로우 데이터(raw data) 형태의 외부 영상신호를 이용하므로, 산출하는 결과의 정확도가 향상된다.
그리고 사용자 인식 결과에 기초하여 디지털 영상장치의 어플리케이션을 수행한다(S413). 여기서, 어플리케이션은 디지털 영상장치에서 수행될 수 있는 다양한 어플리케이션 중 사용자 인식에 기초하는 것이면 어떤 것이든 가능하다.
도 10에서는 사용자 입력부(100)에서 촬영한 영상을 디지털 영상장치의 어플리케이션에 이용하는 것까지만 설명하였으나, 상기 영상은 본체(200)에 구비된 영상 엔코더(260)에 의해 송신 포맷(예: H.264)으로 압축되어 송수신부(211)를 통해 상대방에게 전송될 수도 있다.
도 11에는 본 발명의 제2실시예에 따른 디지털 영상장치의 제어방법에 관한 순서도가 도시되어 있다.
도 11을 참조하면, 먼저 사용자 입력부(100)에서 외부 영상신호를 생성한다(S510). 여기서, 외부 영상신호를 생성하는 것은 앞서 설명한 바와 같이, 렌즈(111)를 통해 외부 영상을 광신호로 받아들이고 이미지 센서로 구현되는 촬상소자(112)에서 광신호를 전기신호로 변환하는 것을 의미한다. 더불어, 촬상소자(112) 내에 구비된 영상 A/D 변환부에 의해 디지털 신호로 변환하고, 영상신호처리부에 의해 영상신호처리를 수행하는 것까지 포함할 수도 있다.
그리고, 외부 영상신호를 MJPEG 엔코더를 이용하여 압축한다(S511). MJPEG 엔코더는 동영상을 압축하는데 일반적으로 사용되는 엔코더로서, 압축률이 비교적 크지 않고 압축으로 인한 데이터 손실 역시 비교적 작다.
압축된 외부 영상신호를 데이터 인터페이스(300)를 통해 본체(200)로 전송한다(S512). 그리고, 전송된 외부 영상신호를 MJPEG 디코더(270)를 이용하여 디코딩(압축 해제)한다(S513). 즉, 본 발명의 제2실시예에 따른 디지털 영상장치의 제어방법에 있어서는, 사용자 입력부(100)에 MJPEG 엔코더(180)가 구비되고, 본체(200)에 MJPEG 디코더(270)가 구비되는 디지털 영상장치를 사용한다.
디코딩된 외부 영상신호는 본체의 비젼 프로세서(241)로 전송되고, 비젼 프로세서(241)는 디코딩된 외부 영상신호에 기초하여 사용자를 인식한다(S514). 그리고 사용자 인식 결과에 기초하여 디지털 영상장치의 어플리케이션을 수행한다(S515).
본 발명의 제1실시예에 따른 디지털 영상장치의 제어방법 및 제2실시예에 따른 디지털 영상장치의 제어방법에 있어서도, 사용자 입력부(100)에 적외선 광원(160) 및 광원 제어부(150)를 포함시킬 수 있고, 영상 입력부(110)를 통해 입력된 외부 영상 또는 촬상소자(112)의 저항값 변화를 분석하여 획득된 사용자 주변환경의 조도가 소정의 기준값 미만이면 적외선 광원(160)을 on 시켜 저조도 환경에서도 외부 영상신호의 프레임 레이트를 일정하게 유지시킬 수 있다.
또는, 사용자 입력부(100)에 조도 센서(170)를 더 구비하여 조도 센서(170)의 출력값으로부터 사용자 주변환경의 조도를 획득하도록 하는 것도 가능하다.
상술한 바와 같이, 본 발명의 실시예에 따른 디지털 영상장치 및 그 제어방법에 의하면, 사용자 입력부(100)에 영상 엔코더를 구비하지 않고 본체에 구비되어 있는 영상 엔코더를 이용하여 외부 영상신호를 송신 포맷으로 압축함으로써 재료비 및 원가를 절감할 수 있다.
또한, 사용자 입력부(100)에서 로우 데이터(raw data) 형태인 외부 영상신호를 전송함으로써 이를 기초로 수행되는 비젼 프로세싱 결과의 정확도가 향상된다.
또한, 사용자 입력부(100)에 광원을 구비하고 저조도 환경에서 상기 광원을 on 시킴으로써 저조도 환경에서도 일정한 프레임 레이트를 유지하여 자연스러운 외부 영상을 디스플레이할 수 있고, 비젼 프로세싱 결과의 정확도도 향상될 수 있다.
100 : 사용자 입력부 200 : 본체
300 : 데이터 인터페이스 150 : 광원 제어부
160 : 적외선 광원 170 : 조도 센서
260 : 영상 엔코더 241 : 비젼 프로세서
242 : 어플리케이션 실행부

Claims (17)

  1. 외부 영상을 입력받고, 상기 입력된 외부 영상에 대응되는 외부 영상신호를 생성하는 영상 입력부;
    상기 영상 입력부에서 생성한 외부 영상신호를 로우 데이터(raw data) 형태로 상기 디지털 영상장치의 본체로 전송하는 데이터 인터페이스; 및
    상기 본체에 구비되고, 상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 소정의 포맷으로 엔코딩하는 영상 엔코더를 포함하는 디지털 영상장치.
  2. 제 1 항에 있어서,
    상기 데이터 인터페이스를 통해 전송받은 외부 영상신호에 기초하여 사용자를 인식하는 비젼 프로세서를 더 포함하는 디지털 영상장치.
  3. 제 2 항에 있어서,
    상기 영상 입력부에서 생성한 외부 영상신호는 사용자 주변환경의 조도 변화에 관계없이 일정한 프레임 레이트를 갖는 디지털 영상장치.
  4. 제 3 항에 있어서,
    상기 사용자 주변환경의 조도를 상승시키는 적외선 광원; 및
    상기 영상 입력부의 저항 변화량에 기초하여 상기 사용자 주변환경의 조도를 획득하고, 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 광원 제어부를 더 포함하는 디지털 영상장치.
  5. 제 3 항에 있어서,
    상기 사용자 주변환경의 조도를 상승시키는 적외선 광원; 및
    상기 영상 입력부를 통해 입력된 외부 영상을 분석하여 상기 사용자 주변환경의 조도를 획득하고, 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 광원 제어부를 더 포함하는 디지털 영상장치.
  6. 제 3 항에 있어서,
    상기 사용자 주변환경의 조도를 감지하는 조도센서;
    상기 사용자 주변환경의 조도를 향상시키는 적외선 광원; 및
    상기 조도센서의 출력값에 기초하여 상기 사용자 주변환경의 조도를 획득하고, 상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 광원 제어부를 더 포함하는 디지털 영상장치.
  7. 제 4 항 내지 제 5 항 중 어느 한 항에 있어서,
    상기 광원 제어부는,
    상기 획득된 조도에 따라서 상기 적외선 광원의 세기를 조절하는 디지털 영상장치.
  8. 외부 영상을 입력받고, 상기 입력된 외부 영상에 대응되는 외부 영상신호를 생성하는 영상 입력부 및 상기 외부 영상신호를 MJPEG 방식으로 압축하는 MJPEG 엔코더를 포함하는 사용자 입력부;
    상기 MJPEG 방식으로 압축된 외부 영상신호를 상기 디지털 영상장치의 본체로 전송하는 데이터 인터페이스; 및
    상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 디코딩하는 MJPEG 디코더 및 상기 디코딩된 외부 영상신호를 소정의 포맷으로 압축하는 영상 엔코더를 포함하는 본체를 포함하는 디지털 영상장치.
  9. 제 8 항에 있어서,
    상기 본체는,
    상기 디코딩된 외부 영상신호에 기초하여 사용자를 인식하는 비젼 프로세서를 더 포함하는 디지털 영상장치.
  10. 사용자 입력부를 통해 외부 영상을 입력받아 이에 대응되는 외부 영상신호를 생성하고;
    상기 생성된 외부 영상신호를 로우 데이터(raw data) 형태로 데이터 인터페이스를 통해 상기 디지털 영상장치의 본체로 전송하고;
    상기 데이터 인터페이스를 통해 전송받은 외부 영상신호에 기초하여 사용자를 인식하고;
    상기 인식결과에 기초하여 상기 디지털 영상장치의 어플리케이션을 실행하는 디지털 영상장치의 제어방법.
  11. 제 10 항에 있어서,
    상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 상기 본체에 구비된 영상 엔코더를 이용하여 소정의 포맷으로 압축하고;
    상기 압축된 외부 영상신호를 화상통화 상대방에게 송신하는 것을 더 포함하는 디지털 영상장치의 제어방법.
  12. 제 11 항에 있어서,
    상기 사용자 입력부에서 생성한 외부 영상신호는 사용자 주변환경의 조도변화에 관계없이 일정한 프레임 레이트를 갖는 디지털 영상장치의 제어방법.
  13. 제 12 항에 있어서,
    상기 사용자 입력부는, 상기 주변환경의 조도를 향상시키는 적외선 광원을 포함하고,
    상기 사용자 입력부의 저항 변화량에 기초하여 상기 사용자 주변환경의 조도를 획득하고;
    상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 것을 더 포함하는 디지털 영상장치의 제어방법.
  14. 제 12 항에 있어서,
    상기 사용자 입력부는, 상기 주변환경의 조도를 향상시키는 적외선 광원을 포함하고,
    상기 영상 입력부를 통해 입력된 외부 영상을 분석하여 상기 사용자 주변환경의 조도를 획득하고;
    상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 것을 더 포함하는 디지털 영상장치의 제어방법.
  15. 제 12 항에 있어서,
    상기 사용자 입력부는, 상기 사용자 주변환경의 조도를 감지하는 조도센서 및 상기 사용자 주변환경의 조도를 향상시키는 적외선 광원을 포함하고,
    상기 조도센서의 출력값에 기초하여 상기 사용자 주변환경의 조도를 획득하고;
    상기 획득된 조도가 소정의 기준값 미만인 경우에 상기 적외선 광원을 on 시키는 것을 더 포함하는 디지털 영상장치의 제어방법.
  16. 사용자 입력부를 통해 외부 영상을 입력받아 이에 대응되는 외부 영상신호를 생성하고;
    상기 외부 영상신호를 MJPEG 엔코더를 이용해 압축하고;
    상기 MJPEG 엔코더로 압축된 외부 영상신호를 데이터 인터페이스를 통해 상기 디지털 영상장치의 본체로 전송하고;
    상기 데이터 인터페이스를 통해 전송받은 외부 영상신호를 MJPEG 디코더를 이용해 디코딩하고;
    상기 디코딩된 외부 영상신호에 기초하여 사용자를 인식하고, 상기 인식결과에 기초하여 상기 디지털 영상장치의 어플리케이션을 실행하는 디지털 영상장치의 제어방법.
  17. 제 16 항에 있어서,
    상기 디코딩된 외부 영상신호를 소정의 포맷으로 압축하여 화상통화 상대방에게 송신하는 것을 더 포함하는 디지털 영상장치의 제어방법.
KR1020110145392A 2011-12-29 2011-12-29 디지털 영상장치 및 그 제어방법 KR101910659B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020110145392A KR101910659B1 (ko) 2011-12-29 2011-12-29 디지털 영상장치 및 그 제어방법
EP12199363.8A EP2611141A3 (en) 2011-12-29 2012-12-24 Digital imaging apparatus and control method thereof
CN201210584649.3A CN103188540B (zh) 2011-12-29 2012-12-28 数字成像设备及其控制方法
US13/730,242 US9288433B2 (en) 2011-12-29 2012-12-28 Digital imaging apparatus and control method thereof
JP2012289025A JP2013141247A (ja) 2011-12-29 2012-12-28 デジタル映像装置及びその制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110145392A KR101910659B1 (ko) 2011-12-29 2011-12-29 디지털 영상장치 및 그 제어방법

Publications (2)

Publication Number Publication Date
KR20130076948A true KR20130076948A (ko) 2013-07-09
KR101910659B1 KR101910659B1 (ko) 2018-10-24

Family

ID=47709771

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110145392A KR101910659B1 (ko) 2011-12-29 2011-12-29 디지털 영상장치 및 그 제어방법

Country Status (5)

Country Link
US (1) US9288433B2 (ko)
EP (1) EP2611141A3 (ko)
JP (1) JP2013141247A (ko)
KR (1) KR101910659B1 (ko)
CN (1) CN103188540B (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104994270A (zh) * 2015-08-06 2015-10-21 麦格纳斯太尔汽车技术（上海）有限公司 一种低照度环境下车载摄像头图像处理系统
CN106210534A (zh) * 2016-08-01 2016-12-07 武汉光之谷文化科技股份有限公司 一种数字成像系统及其控制方法
KR102252298B1 (ko) * 2016-10-21 2021-05-14 삼성전자주식회사 표정 인식 방법 및 장치
CN112637508B (zh) * 2020-12-31 2022-11-11 维沃移动通信有限公司 摄像头的控制方法、装置和电子设备

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3150294B2 (ja) * 1996-12-27 2001-03-26 キヤノン株式会社 ビデオ信号処理装置
US6356313B1 (en) * 1997-06-26 2002-03-12 Sony Corporation System and method for overlay of a motion video signal on an analog video signal
US6642955B1 (en) * 2000-01-10 2003-11-04 Extreme Cctv Inc. Surveillance camera system with infrared and visible light bandpass control circuit
AU2001283550A1 (en) * 2000-08-10 2002-02-18 Quindi Audio and video notetaker
US20060248210A1 (en) * 2005-05-02 2006-11-02 Lifesize Communications, Inc. Controlling video display mode in a video conferencing system
CN101184177A (zh) * 2007-03-12 2008-05-21 深圳创维数据技术股份有限公司 一种数字电视画面捕捉方法及系统
EP2597868B1 (en) * 2007-09-24 2017-09-13 Qualcomm Incorporated Enhanced interface for voice and video communications
CN201111169Y (zh) * 2007-12-04 2008-09-03 张咏辉 汽车黑匣子
US20090172756A1 (en) * 2007-12-31 2009-07-02 Motorola, Inc. Lighting analysis and recommender system for video telephony
JP5410720B2 (ja) * 2008-09-25 2014-02-05 日立コンシューマエレクトロニクス株式会社 ディジタル情報信号送受信装置、およびディジタル情報信号送受信方法
JP2010157854A (ja) * 2008-12-26 2010-07-15 Sony Corp 情報処理装置、情報処理方法およびプログラム
US8988437B2 (en) * 2009-03-20 2015-03-24 Microsoft Technology Licensing, Llc Chaining animations
WO2011024193A2 (en) * 2009-08-20 2011-03-03 Natarajan Kannan Electronically variable field of view (fov) infrared illuminator
CN101697034B (zh) * 2009-10-30 2012-02-15 广州市晶华光学电子有限公司 便携式日夜两用夜视仪电路
JP5695347B2 (ja) * 2010-05-28 2015-04-01 株式会社Ｎｔｔドコモ 表示装置
CN201845346U (zh) * 2010-11-12 2011-05-25 中国船舶重工集团公司第七一○研究所 一种手指静脉图像采集识别装置
JP5073049B2 (ja) * 2010-12-27 2012-11-14 株式会社東芝 映像表示装置

Also Published As

Publication number Publication date
EP2611141A2 (en) 2013-07-03
EP2611141A3 (en) 2013-08-07
CN103188540B (zh) 2018-05-11
CN103188540A (zh) 2013-07-03
US20130169738A1 (en) 2013-07-04
JP2013141247A (ja) 2013-07-18
KR101910659B1 (ko) 2018-10-24
US9288433B2 (en) 2016-03-15

Similar Documents

Publication Publication Date Title
US20080151126A1 (en) Remote control having audio-visual function
US9438854B2 (en) Imaging apparatus and control method thereof
KR100678209B1 (ko) 휴대단말기의 이미지 제어방법
KR100651521B1 (ko) 휴대단말기의 속력측정방법
US8743172B2 (en) Image capturing for video conference system
KR101910659B1 (ko) 디지털 영상장치 및 그 제어방법
US20130088561A1 (en) Television system and control method thereof
KR100826157B1 (ko) 이동통신 단말기의 디지털 방송 전송 방법 및 장치
JP2004289688A (ja) テレビ電話装置
JP2005151450A (ja) 携帯端末、ビデオ電話システム、制御プログラム、および該プログラムを記録した記録媒体
KR20080106668A (ko) 휴대단말기의 영상 촬영 방법
KR100703354B1 (ko) 휴대단말기의 화상통화모드에서 영상데이터 전송방법
KR100735415B1 (ko) 휴대단말기의 다자간 화상통화수행방법
CN114339140A (zh) 一种可交互监控装置、视频传输方法及装置
KR100641176B1 (ko) 휴대단말기에서 삼차원 영상데이터 표시방법
KR100647954B1 (ko) 화질 개선부가 구비된 이동 단말기 및 이동 단말기표시장치 화질 개선 방법
KR100769672B1 (ko) 화상 통신이 가능한 이동통신단말기
KR100292569B1 (ko) 휴대형 디지털 화상 모니터링 시스템
KR100770927B1 (ko) 휴대용 단말기에서 영상을 촬영하는 방법
KR20130078849A (ko) 디지털 영상장치 및 그 제어방법
KR20070044426A (ko) 휴대단말기의 화상통화모드에서 영상데이터 제어방법
JP2006211137A (ja) 通信端末
KR20070027943A (ko) 휴대단말기에서 수화 화상통화의 수행방법
KR20060029058A (ko) 휴대단말기의 영상이동 표시방법
CN113923528A (zh) 屏幕共享方法、终端和存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant