KR102462073B1 - 촬영 시스템 및 촬영 시스템 제어방법 - Google Patents

촬영 시스템 및 촬영 시스템 제어방법 Download PDF

Info

Publication number
KR102462073B1
KR102462073B1 KR1020200137185A KR20200137185A KR102462073B1 KR 102462073 B1 KR102462073 B1 KR 102462073B1 KR 1020200137185 A KR1020200137185 A KR 1020200137185A KR 20200137185 A KR20200137185 A KR 20200137185A KR 102462073 B1 KR102462073 B1 KR 102462073B1
Authority
KR
South Korea
Prior art keywords
processing target
change request
image sensor
target area
register value
Prior art date
Application number
KR1020200137185A
Other languages
English (en)
Other versions
KR20200127924A (ko
Inventor
김성주
김상량
경동혁
박상호
Original Assignee
주식회사 미래오토스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020180139469A external-priority patent/KR102170921B1/ko
Application filed by 주식회사 미래오토스 filed Critical 주식회사 미래오토스
Priority to KR1020200137185A priority Critical patent/KR102462073B1/ko
Publication of KR20200127924A publication Critical patent/KR20200127924A/ko
Application granted granted Critical
Publication of KR102462073B1 publication Critical patent/KR102462073B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N5/341
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/766Addressed sensors, e.g. MOS or CMOS sensors comprising control or output lines used for a plurality of functions, e.g. for pixel output, driving, reset or power
    • H04N5/2254
    • H04N5/23216
    • H04N5/3572
    • H04N5/3741

Abstract

본 발명의 일실시예에 따른 촬영 시스템은, 빛에 반응하여 전기적 신호를 생성하는 픽셀들이 배열되어 이루어지는 픽셀 어레이를 포함하는 이미지 센서; 상기 이미지 센서의 레지스터값이 저장되는 메모리; 및 상기 레지스터값을 설정하는 센서 컨트롤러;를 포함하되, 상기 픽셀 어레이 중에서 처리대상 영역을 정의하는 정보가 상기 레지스터값에 포함되고, 상기 센서 컨트롤러는, 상기 처리대상 영역의 위치 및 크기 중 적어도 하나를 변경하는 변경요청이 수신되면 상기 변경요청에 대응되도록 상기 레지스터값을 조정하는 레지스터 수정명령을 상기 이미지 센서 또는 상기 메모리에 제공할 수 있다.

Description

촬영 시스템 및 촬영 시스템 제어방법 {PHOTOGRAPING SYSTEM AND CONTROLLING METHOD OF PHOTOGRAPING SYSTEM}
본 발명은 촬영 시스템에 관한 것이다.
사진 촬영시 주변부의 광량 저하로 이미지의 모서리나 외곽 부분이 어두워지거나 검게 가려지는 비네팅(vignetting) 현상 등을 방지하기 위해서 출력 해상도 보다 더 많은 픽셀들을 배열해서 이미지 센서를 제작하는 경우가 많았다.
이 경우, 사용하지 않고 유휴되고 있는 픽셀들이 많이 발생했고, 이는 불필요한 자원 낭비를 초래하고 있었다.
이에, 본 발명의 발명자는 유휴되고 있는 픽셀들의 활용방법을 찾는 과정에서 본 발명을 착안하게 되었다.
KR 2009-0118857 A
본 발명의 일 측면은, 자원 활용 효율이 향상될 수 있는 촬영 시스템을 제공할 수 있다.
본 발명의 다른 측면은, 자원 활용 효율이 향상될 수 있는 촬영 시스템 제어방법을 제공할 수 있다.
본 발명의 일실시예에 따른 촬영 시스템은, 빛에 반응하여 전기적 신호를 생성하는 픽셀들이 배열되어 이루어지는 픽셀 어레이를 포함하는 이미지 센서; 상기 이미지 센서의 레지스터값이 저장되는 메모리; 및 상기 레지스터값을 설정하는 센서 컨트롤러;를 포함하되, 상기 픽셀 어레이 중에서 처리대상 영역을 정의하는 정보가 상기 레지스터값에 포함되고, 상기 센서 컨트롤러는, 상기 처리대상 영역의 위치 및 크기 중 적어도 하나를 변경하는 변경요청이 수신되면 상기 변경요청에 대응되도록 상기 레지스터값을 조정하는 레지스터 수정명령을 상기 이미지 센서 또는 상기 메모리에 제공할 수 있다.
이때, 유저 인터페이스부를 통하여 사용자의 입력을 받아서 상기 변경요청을 생성하는 제어부를 더 포함할 수 있다.
또한, 촬영된 영상 데이터, 촬영된 사진 데이터 및 근접센서의 센싱 데이터 중 적어도 하나 이상을 분석한 결과가 미리 정해진 조건에 해당하면 상기 변경요청을 생성하는 제어부를 더 포함할 수 있다.
또한, 상기 처리대상 영역의 위치는, 상기 처리대상 영역의 일측하단 평면좌표값인 시작값, 상기 처리대상 영역의 타측상단 평면좌표값인 종료값, 및 상기 처리대상 영역의 중앙지점 평면좌표값인 중앙값 중 적어도 하나에 의하여 정의될 수 있다.
또한, 상기 처리대상 영역의 크기는, 상기 처리대상 영역의 일측하단 평면좌표값인 시작값, 상기 처리대상 영역의 타측상단 평면좌표값인 종료값, 및 상기 처리대상 영역의 중앙지점 평면좌표값인 중앙값 중 선택되는 두 값에 의하여 정의될 수 있다.
또한, 상기 이미지 센서에서 출력되는 이미지 신호를 처리하는 이미지 신호 처리부를 더 포함하고, 상기 이미지 신호 처리부가 상기 제어부로부터 상기 변경요청을 수신할 수 있다.
또한, 상기 레지스터 수정명령이 상기 메모리에 제공되면, 상기 레지스터값은 상기 메모리에 저장된 상태에서 상기 이미지 센서가 턴온 되거나 리셋되면 상기 이미지 센서로 로드되도록 할 수 있다.
본 발명의 일실시예에 따른 촬영 시스템 제어방법은, 처리대상 영역의 위치 및 크기 중 적어도 하나를 변경하는 변경요청이 입력되는 단계; 상기 변경요청에 대응되도록 레지스터값을 조정하는 레지스터 수정명령이 이미지 센서 또는 메모리에 인가되는 단계; 상기 레지스터 수정명령에 의하여 상기 이미지 센서의 레지스터값이 변경되는 단계; 상기 처리대상 영역의 위치 및 크기 중 적어도 하나가 변경된 상태로 상기 이미지 센서로부터 이미지 신호가 출력되는 단계; 및 상기 이미지 센서로부터 출력된 이미지 신호가 처리되어 표시 또는 저장되는 단계;를 포함할 수 있다.
이때, 촬영된 영상 데이터, 촬영된 사진 데이터 및 근접센서의 센싱 데이터 중 적어도 하나 이상을 분석하는 단계; 및 상기 분석 결과가 미리 정해진 조건에 해당하면 상기 변경요청을 생성하는 단계;를 더 포함할 수 있다.
또한, 상기 촬영된 영상 데이터에서 관심사물을 결정하는 단계; 및 상기 관심사물의 이동방향을 따라 상기 처리대상 영역의 위치를 변경하는 변경요청을 생성하는 단계;를 더 포함할 수도 있다.
본 발명의 일실시예에 따른 촬영 시스템은 자원 활용 효율이 향상될 수 있다는 유용한 효과를 제공한다.
도 1은 본 발명의 일실시예에 따른 촬영 시스템을 개략적으로 보인 블록도이고,
도 2는 본 발명의 일실시예에 따른 촬영 시스템의 처리대상 영역을 설명하기 위한 개념도이고,
도 3은 본 발명의 일실시예에 따른 촬영 시스템의 유저 인터페이스부를 개략적으로 예시한 도면이고,
도 4는 본 발명의 일실시예에 따른 촬영 시스템 제어방법을 개략적으로 예시한 도면이고,
도 5는 본 발명의 일실시예에 따른 촬영 시스템을 설명하기 위한 도면이고,
도 6은 본 발명의 일실시예에 따른 촬영 시스템을 설명하기 위한 도면이고,
도 7은 본 발명의 일실시예에 따른 촬영 시스템을 설명하기 위한 도면이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면들과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공될 수 있다. 명세서 전문에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다
본 명세서에서 사용된 용어들은 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 단계는 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 '포함한다(comprise)' 및/또는 '포함하는(comprising)'은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
또한, 본 명세서에서 기술하는 실시예들은 본 발명의 이상적인 예시도인 단면도 및/또는 평면도들을 참고하여 설명될 것이다. 도면들에 있어서, 각 구성들의 세부 크기, 형태, 두께, 곡률 등은 기술적 내용의 효과적인 설명을 위해 과장되거나 도식화된 것으로서, 허용 오차 등에 의해 그 형태가 변형될 수 있다.
이하에서는 첨부된 도면을 참조하여 본 발명의 구성 및 작용효과를 더욱 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 촬영 시스템을 개략적으로 보인 블록도이고, 도 2는 본 발명의 일실시예에 따른 촬영 시스템의 처리대상 영역을 설명하기 위한 개념도이고, 도 3은 본 발명의 일실시예에 따른 촬영 시스템의 유저 인터페이스부를 개략적으로 예시한 도면이고, 도 4는 본 발명의 일실시예에 따른 촬영 시스템 제어방법을 개략적으로 예시한 도면이고, 도 5 내지 도 7은 본 발명의 일실시예에 따른 촬영 시스템을 설명하기 위한 도면이고, 도 6은 본 발명의 일실시예에 따른 촬영 시스템을 설명하기 위한 도면이다.
본 발명의 일실시예에 따른 촬영 시스템은, 이미지 센서, 메모리, 센서 컨트롤러를 포함할 수 있고, 더 나아가, 이미지 신호 처리부, 제어부, 유저 인터페이스부, 표시부, 통신부, 메모리부 등을 더 포함할 수 있다.
일실시예에서, 촬영 시스템은, 표시부나 별도의 외부장치와의 연동을 통해서 이미지 표시 작업을 수행할 수 있다. 또한, 촬영 시스템은 네트워크에 연결될 수 있으며, 카메라 모듈에 의해 촬상된 이미지를 네트워크 등을 통해 다른 기기로 전달할 수도 있다.
일실시예에서, 이미지 센서는 픽셀 어레이를 포함한다. 이 픽셀 어레이는 픽셀들이 행과 열로 배열된 것일 수 있으며, 픽셀은 빛에 반응하여 전기적 신호를 생성하는 소자로써, 화소라고 칭해지기도 한다. 이러한 픽셀, 픽셀 어레이 등을 포함하는 카메라 관련 기술들은 특허문헌1 등을 비롯해서 다수의 문헌에 소개되어 있다.
일실시예에서, 메모리는 휘발성 메모리, 비휘발성 메모리 중 적어도 하나를 포함할 수 있다. 이러한 메모리 중 적어도 일부에는 레지스터값이 저장될 수 있고, 메모리는 레지스터로 활용될 수 있다.
일실시예에서, 레지스터는 SRAM(Static Random Access Memory), 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 선택되는 적어도 한 타입의 저장매체를 포함할 수 있다.
센서 컨트롤러는 이미지 센서를 제어하거나 이미지 센서와 다른 구성요소 사이의 인터페이스 역할을 수행할 수 있다. 일실시예에서, 센서 컨트롤러는 이미지 센서의 레지스터값을 설정하는 기능을 수행할 수 있다. 그 밖에도, 센서 컨트롤러는 다양한 기능들을 수행할 수 있으며, 이미지 신호 처리기의 프로세서, 시스템 메인 프로세서, 마이크로 컨트롤러 등 다양한 프로세서들 중 적어도 하나에 의하여 구현될 수 있다.
일실시예에서, 이미지 센서의 레지스터값에는 픽셀 어레이 중에서 처리대상 영역을 정의하는 정보가 포함된다.
처리대상 영역은 활성픽셀(Active pixel), 크롭 영역(cropped area) 등으로 칭할 수도 있으며다, 처리대상 영역 내의 픽셀에서 출력되는 이미지 신호가 처리되어 메모리부에 저장되거나 표시부를 통해 표시될 수 있다. 반면에, 이미지 센서 상의 처리대상 영역 외부에 위치하는 픽셀에서 출력되는 이미지 신호는 메모리부에 저장되거나 표시부에 표시되지 않을 수 있다. 다만, 일실시예에서, 처리대상 영역 외부에 위치하는 픽셀에서 출력되는 이미지 신호는, 인접 픽셀의 왜곡보정이나, 디지털 줌인(Zoom In) 또는 줌아웃(Zoom out)을 위한 보간 과정 등에 활용될 수 있다.
일실시예에서, 센서 컨트롤러는 레지스터 수정명령을 이미지 센서 또는 메모리에 제공할 수 있다. 이 레지스터 수정명령에는 처리대상 영역의 위치 또는 크기를 변경하게 하는 레지스터값이 포함될 수 있다.
일실시예에서, 센서 컨트롤러는 소정의 변경요청을 수신하면 전술한 레지스터 수정명령을 발생하는 방식으로 작동할 수 있다. 이때, 변경요청은 처리대상 영역의 위치를 좌측이나 우측 또는 상측이나 하측으로 이동시키는 요청일 수 있다. 또한, 변경요청은 처리대상 영역의 크기를 확대하거나 축소하는 요청일 수 있다.
일실시예에서, 변경요청은 제어부에서 생성될 수 있다.
일실시예에서, 제어부는 사용자의 명령을 입력받아 변경요청을 생성할 수 있는데, 이때, 사용자의 명령을 입력받는 수단으로써 유저 인터페이스부가 활용될 수 있다.
여기서, 유저 인터페이스는 도 3에 예시된 바와 같은 리모콘 형태로 구현될 수 있다. 일실시예에서, 확대 또는 축소 버튼을 입력할 경우 처리대상 영역의 크기를 변경하는 변경요청이 생성될 수 있다. 일실시예에서, 상향, 하향, 좌향, 우향 버튼 중 하나 이상이 입력될 경우, 처리대상 영역의 위치를 변경하는 변경요청이 생성될 수 있다.
다른 실시예에서, 제어부에서 분석 프로그램이 실행될 수 있다. 이 분석 프로그램은 카메라 모듈이 촬영한 영상 데이터나 사진 데이터를 분석할 수 있다. 또한, 분석 프로그램은 근접센서, 조도센서 등의 센싱 데이터를 분석할 수 있다. 일실시예에서, 분석 프로그램은 소정의 거리로 근접한 물체가 감지되는 상황에서 표시부에는 대응되는 물제가 표시되지 않는 경우 등을 검출해 낼 수 있다. 이 경우, 근접한 물체가 감지되는 방향이 카메라 시야 기준으로 어느 방향인지에 따라서 처리대상 영역의 위치가 해당 방향으로 이동되도록 하는 변경요청을 생성할수 있다. 예컨대, 카메라 시야를 기준으로 좌측에 물체가 감지되는 경우 처리대상 영역의 위치가 좌측 방향으로 이동되도록 하는 변경요청이 생성될 수 있다는 것이다. 이렇게 생성된 변경요청은 센터 컨트롤러에 인가되고, 센터 컨트롤러는 이미지 센서의 레지스터값을 조정함으로써 처리대상 영역의 위치가 이동되도록 할 수 있다. 이 상태에서 촬영과정이 진행됨으로써 화면에서 보이지 않던 근접 물체가 화면에 표시될 수 있게 된다. 이에 따라, 사용자가 의식적으로 의도하지 않은 경우라도, 제어부의 분석결과에 의하여 화각을 넓히거나 화면을 이동시켜서 근접 물체를 시각적으로도 확인할 수 있도록 함으로써 안전성을 향상시킬 수 있다. 더 나아가, 처리대상 영역을 상대적으로 좁게 해 둔 상태에서 관심사물을 트래킹하도록 레지스트값을 수정할 수도 있다.
도 3, 5 및 도 6을 참조하면, 주변부 광량 저하 현상, 이른바 비네팅(vignetting) 현상 등으로 인해서 제1, 2 여유영역(EAP1, EAP2)은 표시부 등으로 출력되지 않는 경우가 많다. 뿐만 아니라, 기존에는 일반적인 처리대상 영역 만을 활용했을 뿐 제1 내지 제4 추가영역(AAP1, 2, 3, 4)을 활용하기 위해서 처리대상 영역의 레지스트값을 수정하는 방식을 적용한 예가 없었다. 그러나, 본 발명의 일실시에에 따르면, 이미지 센서의 레지스트값 수정을 통해서 제1 내지 제4 추가영역(AAP1, 2, 3, 4)을 활용할 수 있게 되는 것이며, 따라서, 자원 활용 효율이 향상될 수 있게 된다.
일실시예에서, 처리대상 영역의 위치는, 처리대상 영역의 일측하단(P1) 평면좌표값인 시작값, 상기 처리대상 영역의 타측상단(P2) 평면좌표값인 종료값, 및 상기 처리대상 영역의 중앙지점 (P3) 평면좌표값인 중앙값 중 적어도 하나에 의하여 정의될 수 있다. 또한, 처리대상 영역의 일측하단(P1) 평면좌표값인 시작값, 상기 처리대상 영역의 타측상단(P2) 평면좌표값인 종료값, 및 상기 처리대상 영역의 중앙지점 (P3) 평면좌표값인 중앙값 중 선택되는 한 값과 처리대상 영역의 높이(H1) 및 폭(W1)에 의하여 정의될 수도 있다. 일실시예에서, 픽셀들 중에서 처리대상 영역의 위치 또는 크기에 대응되는 픽셀들의 물리적인 범위를 정의하는 정보가 상기 레지스터값에 포함될 수 있다.
일실시예에서, 처리대상 영역의 크기는, 처리대상 영역의 일측하단(P1) 평면좌표값인 시작값, 상기 처리대상 영역의 타측상단(P2) 평면좌표값인 종료값, 및 상기 처리대상 영역의 중앙지점 (P3) 평면좌표값인 중앙값 중 선택되는 두 값에 의하여 정의될 수 있다. 또한, 처리대상 영역의 높이(H1) 및 폭(W1)에 의하여 정의될 수도 있다.
일실시예에서, 이미지 신호를 처리하는 이미지 신호 처리부가 더 구비될 수 있다. 이미지 신호 처리부는 인터페이스부(210) 및 이미지 처리부(220)를 포함할 수 있으며, 카메라 모듈의 촬상 이미지를 처리해서 표시부로 출력되게 하거나, 통신부를 통해 다른 장치로 전송되도록 하거나, 메모리부에 저장되도록 할 수 있다.
한편, 이미지 신호 처리부와 이미지 센서가 시스템 온 칩(System on chip) 방식으로 구현될 수도 있는데, 이 경우 이미지 신호 처리부가 센서 컨트롤러의 기능을 수행할 수도 있다.
일실시예에서, 레지스터 수정명령이 이미지 센서가 아닌 메모리에 제공될 수 있다.
이 경우, 레지스터값은 메모리에 저장된 상태에서 이미지 센서가 턴온 되거나 리셋되면 이미지 센서로 로드되도록 할 수도 있다.
본 발명의 일실시예에 따르면, 표시부에 출력되는 화면의 범위를 조정할 수 있다. 디스플레이 출력옵션에 따라서 디스플레이에 꽉찬 화면으로 출력되는 경우 화면의 범위 조정을 통해서 유저에게는 줌인/줌아웃 효과를 제공할 수 있다. 처리대상 영역에 포함되는 픽셀의 수를 증가시키면 출력대상 영역이 넓어지면서, 꽉찬 화면에서 피사체가 상대적으로 작게 출력되므로 줌아웃 처럼 인식될 수 있다. 처리대상 영역에 포함되는 픽셀의 수를 감소시키면 출력대상 영역이 좁아지면서, 꽉찬 화면에서 피사체가 상대적으로 크게 출력되므로 줌인 처럼 인식될 수 있다. 렌즈를 물리적으로 구동하지 않고, ISP의 로직을 수정하거나, 확대축소를 위한 ISP의 별도 연산 필요가 없으므로 리소스 활용을 줄이면서도 출력대상 영역을 조정하거나 화면을 확대/축소 할 수 있다.
또한, 표시부에 출력되는 화면의 화각을 변경할 수도 있다. 여기서, 본 발명의 일실시예에 따르면, 별도의 모터를 구동하거나 ISP의 복잡한 처리과정 없이도 차량용 사이드미러의 틸팅조절과 비슷한 결과를 구현할 수 있다. 이미지 센서의 픽셀 어레이 영역은 실제 출력될 영역보다 더 넓게 형성되는 것이 일반적인데, 이는 렌즈의 형상때문에 상의 외주변에 왜곡현상 발생이 필연적이기 때문이며, 이러한 왜곡을 감소시키는 디지털 데이터 처리 알고리즘이 널리 활용되고 있다. 그러나, 이 과정에서 픽셀 어레이중 외곽부분은 실제로 활용되지 않는 경우가 많아 자원낭비로 인식되고 있었는데, 본 발명에 따르면 이러한 외곽 영역도 활용할 수 있는 길이 열리게 되는 것이다.
한편, 카메라 렌즈가 지향하는 방향을 물리적으로 조정하는 방식으로도, 전술한 본 발명의 기능과 유사한 기능을 수행할 수 있다. 그러나, 이렇게 카메라의 지향 방향을 조정하기 위해서는 모터 등 별도의 부품들이 더 필요하며, 에너지와 리소스의 소비를 수반할 수 밖에 없다. 반면, 본 발명의 일실시예에 따르면, 레지스터값 변경이라는 매우 간편하면서도 에너지 소모도 극히 낮으며, 작동에 소요되는 시간이나 자원이 현저히 낮은 방식에 의하여 소기의 목적을 달성할 수 있게 되는 바, 자원 활용의 효율성이 향상될 수 있는 것이다.
도 4를 참조하면, 본 발명의 일실시예에 따른 촬영 시스템 제어방법은, 처리대상 영역의 위치 및 크기 중 적어도 하나를 변경하는 변경요청이 입력되는 단계; 상기 변경요청에 대응되도록 레지스터값을 조정하는 레지스터 수정명령이 이미지 센서 또는 메모리에 인가되는 단계; 상기 레지스터 수정명령에 의하여 상기 이미지 센서의 레지스터값이 변경되는 단계; 상기 처리대상 영역의 위치 및 크기 중 적어도 하나가 변경된 상태로 상기 이미지 센서로부터 이미지 신호가 출력되는 단계; 및 상기 이미지 센서로부터 출력된 이미지 신호가 처리되어 표시 또는 저장되는 단계;를 포함할 수 있다.
이때, 촬영된 영상 데이터, 촬영된 사진 데이터 및 근접센서의 센싱 데이터 중 적어도 하나 이상을 분석하는 단계; 및 상기 분석 결과가 미리 정해진 조건에 해당하면 상기 변경요청을 생성하는 단계;를 더 포함할 수 있다.
또한, 상기 촬영된 영상 데이터에서 관심사물을 결정하는 단계; 및 상기 관심사물의 이동방향을 따라 상기 처리대상 영역의 위치를 변경하는 변경요청을 생성하는 단계;를 더 포함할 수도 있다.
본 발명의 일 실시예에 따른 촬영 시스템은, 빛에 반응하여 전기적 신호를 생성하는 픽셀들이 배열되어 이루어지는 픽셀 어레이를 포함하는 이미지 센서; 상기 이미지 센서의 레지스터값이 저장되는 메모리; 및 상기 레지스터값을 설정하는 센서 컨트롤러;를 포함하되, 상기 픽셀 어레이의 픽셀들 중에서 처리대상 영역을 정의하는 정보가 상기 레지스터값에 포함되고, 상기 센서 컨트롤러는, 상기 처리대상 영역의 위치 및 크기 중 적어도 하나를 변경하는 변경요청이 수신되면 상기 변경요청에 대응되도록 상기 레지스터값을 조정하는 레지스터 수정명령을 상기 이미지 센서 또는 상기 메모리에 제공하고, 상기 변경요청을 생성하는 제어부는, 미리 정해진 거리 이내로 접근하는 물체가 검출될 경우에, 상기 픽셀 어레이 중 상기 물체에 대한 상이 도달하는 픽셀이 상기 처리대상 영역에 포함되도록 하는 변경요청을 생성할 수 있다.
이때, 상기 이미지 센서는 카메라 모듈에 포함되고, 물체를 감지하는 근접센서 및 상기 카메라 모듈에서 출력되는 영상이 표시되는 표시부를 더 포함하고, 상기 제어부는 상기 물체가 상기 표시부에 표시되지 않는 경우에, 상기 카메라 모듈의 시야 기준으로 상기 물체가 감지되는 방향인 방향을 판단하여 상기 처리대상 영역의 위치가 변경되도록 하는 변경요청을 생성할 수 있다.
또한, 상기 픽셀 어레이의 픽셀들 중에서 상기 처리대상 영역의 위치 또는 크기에 대응되는 픽셀들의 물리적인 범위를 정의하는 정보가 상기 레지스터값에 포함될 수 있다.
삭제
1000 : 촬영 시스템
100 : 카메라 모듈
105 : 렌즈
110 : 이미지 센서
112 : 픽셀 어레이
115 : 더미 픽셀
120 : 메모리
122 : 휘발성 메모리
124 : 비휘발성 메모리
130 : 센서 컨트롤러
200 : 이미지 신호 처리부
210 : 인터페이스부
220 : 이미지 처리부
300 : 제어부
400 : 유저 인터페이스부
500 : 표시부
600 : 통신부
700 : 메모리부
AP1 : 처리대상 영역

Claims (3)

  1. 빛에 반응하여 전기적 신호를 생성하는 픽셀들이 배열되어 이루어지는 픽셀 어레이를 포함하는 이미지 센서;
    상기 이미지 센서의 레지스터값이 저장되는 메모리; 및
    상기 레지스터값을 설정하는 센서 컨트롤러;를 포함하되,
    상기 픽셀 어레이의 픽셀들 중에서 처리대상 영역을 정의하는 정보가 상기 레지스터값에 포함되고,
    상기 센서 컨트롤러는, 상기 처리대상 영역의 위치 및 크기 중 적어도 하나를 변경하는 변경요청이 수신되면 상기 변경요청에 대응되도록 상기 레지스터값을 조정하는 레지스터 수정명령을 상기 이미지 센서 또는 상기 메모리에 제공하고,
    상기 변경요청을 생성하는 제어부는, 미리 정해진 거리 이내로 접근하는 물체가 검출될 경우에, 상기 픽셀 어레이 중 상기 물체에 대한 상이 도달하는 픽셀이 상기 처리대상 영역에 포함되도록 하는 변경요청을 생성하되,
    상기 픽셀 어레이의 픽셀들 중에서 상기 처리대상 영역의 위치 또는 크기에 대응되는 픽셀들의 물리적인 범위를 정의하는 정보가 상기 레지스터값에 포함되는 것을 특징으로 하는 촬영 시스템.
  2. 청구항 1에 있어서,
    상기 이미지 센서는 카메라 모듈에 포함되고,
    물체를 감지하는 근접센서 및 상기 카메라 모듈에서 출력되는 영상이 표시되는 표시부를 더 포함하고,
    상기 제어부는 상기 물체가 상기 표시부에 표시되지 않는 경우에, 상기 카메라 모듈의 시야 기준으로 상기 물체가 감지되는 방향을 판단하여 상기 처리대상 영역의 위치가 변경되도록 하는 변경요청을 생성하는 것을 특징으로 하는 촬영 시스템.
  3. 삭제
KR1020200137185A 2018-11-13 2020-10-22 촬영 시스템 및 촬영 시스템 제어방법 KR102462073B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200137185A KR102462073B1 (ko) 2018-11-13 2020-10-22 촬영 시스템 및 촬영 시스템 제어방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020180139469A KR102170921B1 (ko) 2018-11-13 2018-11-13 촬영 시스템 및 촬영 시스템 제어방법
KR1020200137185A KR102462073B1 (ko) 2018-11-13 2020-10-22 촬영 시스템 및 촬영 시스템 제어방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020180139469A Division KR102170921B1 (ko) 2018-11-13 2018-11-13 촬영 시스템 및 촬영 시스템 제어방법

Publications (2)

Publication Number Publication Date
KR20200127924A KR20200127924A (ko) 2020-11-11
KR102462073B1 true KR102462073B1 (ko) 2022-11-03

Family

ID=84040879

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200137185A KR102462073B1 (ko) 2018-11-13 2020-10-22 촬영 시스템 및 촬영 시스템 제어방법

Country Status (1)

Country Link
KR (1) KR102462073B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100505802B1 (ko) * 2002-07-26 2005-08-04 미쓰비시덴키 가부시키가이샤 촬상 장치

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070112949A (ko) * 2006-05-24 2007-11-28 삼성전자주식회사 멀티 이미지 센서 튜닝 장치 및 방법
JP5266864B2 (ja) 2008-05-13 2013-08-21 ソニー株式会社 イメージセンサ、データ出力方法、撮像デバイス、及び、カメラ
KR20170011817A (ko) * 2015-07-24 2017-02-02 주식회사 아이엠랩 영상 처리 장치 및 그 동작 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100505802B1 (ko) * 2002-07-26 2005-08-04 미쓰비시덴키 가부시키가이샤 촬상 장치

Also Published As

Publication number Publication date
KR20200127924A (ko) 2020-11-11

Similar Documents

Publication Publication Date Title
US11082605B2 (en) Method of photography processing for camera module, terminal, using same and storage medium implementing same
EP3328055B1 (en) Control method, control device and electronic device
JP4539729B2 (ja) 画像処理装置、カメラ装置、画像処理方法、およびプログラム
US8803918B2 (en) Methods and apparatus for calibrating focused plenoptic camera data
WO2018058934A1 (zh) 拍摄方法、拍摄装置和存储介质
CN111345026B (zh) 图像呈现方法、图像获取设备及终端装置
JP2012523783A (ja) 軌跡に基づいて画像センサーを読み出すための方法とシステム
US20140211047A1 (en) Digital photographing apparatus and control method thereof
US20220060674A1 (en) Application processor, electronic device including the same and operation method of the electronic device
CN106131397A (zh) 一种多媒体数据显示的方法及电子设备
CN111091494B (zh) 影像拼接处理方法以及其系统
US20140313359A1 (en) Camera assembly and image acquisition method using the same
US20220182582A1 (en) Image processing method and apparatus, device and storage medium
US11178337B2 (en) Image capturing apparatus, method of controlling the same, and non-transitory computer readable storage medium for calculating a depth width for an object area based on depth information
CN112543291A (zh) 基于多个图像数据执行视频hdr处理的电子装置
KR102170921B1 (ko) 촬영 시스템 및 촬영 시스템 제어방법
KR102462073B1 (ko) 촬영 시스템 및 촬영 시스템 제어방법
US11917295B2 (en) Method for correcting shaking at high magnification and electronic device therefor
CN111131714A (zh) 图像采集控制方法、装置及电子设备
US20220279127A1 (en) Image signal processor for performing auto zoom and auto focus, image processing method thereof, and image processing system including the image signal processor
JP7415439B2 (ja) プロジェクターの制御方法及びプロジェクター
KR20140091117A (ko) 촬영 장치 및 촬영 장치의 라이브 뷰 표시 방법
JP6708402B2 (ja) 電子機器、タッチパネルの制御方法、プログラム及び記憶媒体
CN116347006A (zh) 用于合成图像生成的方法和装置

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right