KR102558488B1 - 고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램 - Google Patents

고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램 Download PDF

Info

Publication number
KR102558488B1
KR102558488B1 KR1020207012956A KR20207012956A KR102558488B1 KR 102558488 B1 KR102558488 B1 KR 102558488B1 KR 1020207012956 A KR1020207012956 A KR 1020207012956A KR 20207012956 A KR20207012956 A KR 20207012956A KR 102558488 B1 KR102558488 B1 KR 102558488B1
Authority
KR
South Korea
Prior art keywords
read
imaging device
solid
state imaging
pixel area
Prior art date
Application number
KR1020207012956A
Other languages
English (en)
Other versions
KR20200096495A (ko
Inventor
토모히로 타카하시
타카히로 이이누마
히로시 스미히로
Original Assignee
소니 세미컨덕터 솔루션즈 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 세미컨덕터 솔루션즈 가부시키가이샤 filed Critical 소니 세미컨덕터 솔루션즈 가부시키가이샤
Publication of KR20200096495A publication Critical patent/KR20200096495A/ko
Application granted granted Critical
Publication of KR102558488B1 publication Critical patent/KR102558488B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/42—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H04N25/532—Control of the integration time by controlling global shutters in CMOS SSIS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/79—Arrangements of circuitry being divided between different or multiple substrates, chips or circuit boards, e.g. stacked image sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Studio Devices (AREA)

Abstract

[과제] 피사체의 검출에서부터 촬상 처리 완료까지의 시간을 단축시키는 것이 가능한 고체 촬상 장치를 제공한다. [해결 수단] 복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및, 제1 판독 속도 및 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 제어부를 구비하고, 상기 제어부는, 상기 제1 판독 속도에서의 판독 동작이 완료하고, 상기 화소 영역에서 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역 중 적어도 한 행에 대한 상기 셔터 동작을 개시시키는, 고체 촬상 장치.

Description

고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램
본 개시는, 고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램에 관한 것이다.
주기적으로 이미지 센서 내의 적어도 일부의 화소로부터 판독한 데이터에 소정의 피사체가 존재하고 있는 것을 검지하면, 이미지 센서에서 데이터를 판독하는 촬상 처리를 개시하는 촬상 장치의 기술이, 예를 들면 특허문헌 1등에 개시되어 있다.
특허문헌 1: 일본특허공개공보 2017-126894호 공보
소정의 피사체의 검출을 위한 검출 처리에는 소정의 시간을 필요로 한다. 따라서, 검출 처리가 완료하고 나서 이미지 센서의 셔터 동작을 개시시키는 것으로는, 피사체의 검출에서부터 촬상 처리 완료까지의 시간이 길어진다. 피사체의 검출에서부터 촬상 처리 완료까지의 시간이 길어지면, 경우에 따라서는 검출한 피사체가 촬상 처리에 의해 얻어지는 화상에 비치치 않을 가능성도 있다.
이에 본 개시에서는, 피사체의 검출에서부터 촬상 처리 완료까지의 시간을 단축시키는 것이 가능한, 신규이면서 개량된 고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램을 제안한다.
본 개시에 의하면, 복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및, 제1 판독 속도 및 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 제어부를 구비하고, 상기 제어부는, 상기 제1 판독 속도에서의 판독 동작이 완료하고, 상기 제1 판독 속도에서의 판독 동작에 의해 상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역 중 적어도 한 행에 대한 상기 셔터 동작을 개시시키는, 고체 촬상 장치가 제공된다.
또 본 개시에 의하면, 프로세서가, 복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및 제1 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과, 상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역에 대한 적어도 한 행에 대해 상기 셔터 동작을 개시시킴과 함께, 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것을 실행하는 것을 포함하는, 고체 촬상 장치의 제어 방법이 제공된다.
또 본 개시에 의하면, 컴퓨터에, 복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및 제1 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과, 상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역에 대한 적어도 한 행에 대한 상기 셔터 동작을 개시시킴과 함께, 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것을 실행시키는, 컴퓨터 프로그램이 제공된다.
이상 설명한 바와 같이 본 개시에 의하면, 피사체의 검출에서부터 촬상 처리 완료까지의 시간을 단축시키는 것이 가능한, 신규이면서 개량된 고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램을 제공할 수 있다.
한편, 상기의 효과는 반드시 한정적인 것이 아니고, 상기의 효과와 함께, 또는 상기의 효과에 대신하여, 본 명세서에 나타내진 임의의 효과, 또는 본 명세서로부터 파악될 수 있는 다른 효과가 얻어져도 된다.
도 1은 CMOS 고체 촬상 장치의 개략 구성을 나타내는 설명도이다.
도 2는 본 개시에 따른 기술을 적용할 수 있는 적층형의 고체 촬상 장치의 구성예의 개요를 나타내는 도이다.
도 3은 본 개시의 실시형태에 따른 촬상 장치(100)의 기능 구성예에 대해 나타내는 설명도이다.
도 4a는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 4b는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 5a는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 5b는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 6은 본 개시의 실시형태에 따른 고체 촬상 장치(1)의 동작예를 나타내는 플로우 차트이다.
도 7은 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 8은 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 9a는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 9b는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 10a는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 10b는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 11은 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 12는 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다.
도 13a는 고체 촬상 장치(1)에 의한 저해상도 판독 및 고해상도 판독을 설명하는 설명도이다.
도 13b는 고체 촬상 장치(1)에 의한 저해상도 판독 및 고해상도 판독을 설명하는 설명도이다.
이하에 첨부 도면을 참조하면서, 본 개시의 바람직한 실시형태에 대해 상세하게 설명한다. 한편, 본 명세서 및 도면에 있어서, 실질적으로 동일한 기능 구성을 가지는 구성요소에 대해서는, 동일한 부호를 붙여 중복 설명을 생략한다.
한편, 설명은 이하의 순서로 하는 것으로 한다.
1. 본 개시의 실시형태
1.1. 개략 구성
1.2. 기능 구성예
1.3. 동작예
2. 정리
<1. 본 개시의 실시형태>
<1.1. 개략 구성>
도 1에, 본 개시의 일 실시형태에 따른 고체 촬상 장치의 구성의 일례로서, CMOS 고체 촬상 장치의 개략 구성을 나타낸다. 이 CMOS 고체 촬상 장치는, 각 실시형태의 고체 촬상 장치에 적용된다. 본 예의 고체 촬상 장치(1)는, 도 1에 도시된 바와 같이, 반도체 기판(11), 예를 들면 실리콘 기판에 복수의 광전 변환부를 포함하는 화소(2)가 규칙적으로 2차원 어레이 형상으로 배열된 화소 어레이(즉 화소 영역)(3)와, 주변 회로부를 가지고 구성된다. 화소(2)는, 광전 변환부가 되는 예를 들면 포토다이오드와, 복수의 화소 트랜지스터(즉, MOS 트랜지스터)를 가지고 이루어진다. 복수의 화소 트랜지스터는, 예를 들면 전송 트랜지스터, 리셋 트랜지스터 및 증폭 트랜지스터의 3개의 트랜지스터로 구성될 수 있다. 그 외, 선택 트랜지스터를 추가하여 4개의 트랜지스터로 구성될 수도 있다. 한편, 단위 화소의 등가 회로 일례에 대해서는 별도로 후술한다. 화소(2)는, 하나의 단위 화소로서 구성할 수 있다. 또한, 화소(2)는, 공유 화소 구조로 할 수도 있다. 이 공유 화소 구조는, 복수의 포토다이오드와, 복수의 전송 트랜지스터와, 공유하는 한 개의 플로팅 디퓨전과, 공유하는 한 개씩의 다른 화소 트랜지스터로 구성된다. 즉, 공유 화소에서는, 복수의 단위 화소를 구성하는 포토다이오드 및 전송 트랜지스터가, 다른 1개씩의 화소 트랜지스터를 공유하여 구성된다.
주변 회로부는, 수직 구동 회로(4)와, 컬럼 신호 처리 회로(5)와, 수평 구동 회로(6)와, 출력 회로(7)와, 제어 회로(8) 등을 가지고 구성된다.
제어 회로(8)는, 입력 클럭과, 동작 모드 등을 지령하는 데이터를 수취하고, 또한 고체 촬상 장치의 내부 정보 등의 데이터를 출력한다. 즉, 제어 회로(8)에서는, 수직 동기 신호, 수평 동기 신호 및 마스터 클럭에 기초하여, 수직 구동 회로(4), 컬럼 신호 처리 회로(5), 수평 구동 회로(6) 등의 동작의 기준이 되는 클럭 신호나 제어 신호를 생성한다. 그리고, 이 신호를 수직 구동 회로(4), 컬럼 신호 처리 회로(5) 수평 구동 회로(6) 등에 입력한다.
수직 구동 회로(4)는, 예를 들면 시프트 레지스터에 의해 구성되어, 화소 구동 배선을 선택하고, 선택된 화소 구동 배선에 화소를 구동하기 위한 펄스를 공급하여, 행 단위로 화소를 구동한다. 즉, 수직 구동 회로(4)는, 화소 어레이(3)의 각 화소(2)를 행 단위로 순차적으로 수직 방향으로 선택 주사하고, 수직 신호선(9)을 통해 각 화소(2)의 광전 변환부가 되는 예를 들면 포토다이오드에서의 수광량에 따라 생성된 신호 전하에 기초하는 화소 신호를 컬럼 신호 처리 회로(5)에 공급한다.
컬럼 신호 처리 회로(5)는, 화소(2)의, 예를 들면 열마다 배치되어 있으며, 한 행분의 화소(2)로부터 출력되는 신호를 화소열마다 노이즈 제거 등의 신호 처리를 행한다. 즉, 컬럼 신호 처리 회로(5)는, 화소(2) 고유의 고정 패턴 노이즈를 제거하기 위한 CDS나, 신호 증폭, AD 변환 등의 신호 처리를 행한다. 컬럼 신호 처리 회로(5)의 출력 단에는 수평 선택 스위치(미도시)가 수평 신호선(10)과의 사이에 접속되어 설치된다.
수평 구동 회로(6)는, 예를 들면 시프트 레지스터에 의해 구성되어, 수평 주사 펄스를 순차 출력함으로써, 컬럼 신호 처리 회로(5)의 각각을 차례로 선택하여, 컬럼 신호 처리 회로(5)의 각각으로부터 화소 신호를 수평 신호선(10)으로 출력시킨다.
출력 회로(7)는, 컬럼 신호 처리 회로(5)의 각각으로부터 수평 신호선(10)을 통해서 순차적으로 공급되는 신호에 대해, 신호 처리를 행하여 출력한다. 예를 들면, 버퍼링만 할 경우도 있고, 흑(black) 레벨 조정, 열 편차 보정, 각종 디지털 신호 처리 등이 행해지는 경우도 있다. 입출력 단자(12)는, 외부와 신호의 교환을 한다.
또한, 도 2는, 본 개시에 따른 기술을 적용할 수 있는 적층형의 고체 촬상 장치의 구성예 개요를 나타내는 도이다.
도 2의 A는, 비적층형의 고체 촬상 장치의 개략 구성예를 나타내고 있다. 고체 촬상 장치(23010)는, 도 2의 A에 도시된 바와 같이, 1장의 다이(반도체 기판)(23011)를 갖는다. 이 다이(23011)에는, 화소가 어레이 형상에 배치된 화소 영역(23012)과, 화소의 구동 그 밖의 각종의 제어를 행하는 제어 회로(23013)와, 신호 처리하기 위한 로직 회로(23014)가 탑재되어 있다.
도 2의 B 및 C는, 적층형의 고체 촬상 장치의 개략 구성예를 나타내고 있다. 고체 촬상 장치(23020)는, 도 2의 B 및 C에 도시된 바와 같이, 센서 다이(23021)와 로직 다이(23024)의 2장의 다이가 적층되고, 전기적으로 접속되어, 하나의 반도체 칩으로서 구성되어 있다.
도 2의 B에서는, 센서 다이(23021)에는, 화소 영역(23012)과 제어 회로(23013)가 탑재되고, 로직 다이(23024)에는, 신호 처리를 행하는 신호 처리 회로를 포함하는 로직 회로(23014)가 탑재되어 있다.
도 2의 C에서는, 센서 다이(23021)에는, 화소 영역(23012)이 탑재되고, 로직 다이(23024)에는, 제어 회로(23013) 및 로직 회로(23014)가 탑재되어 있다.
도 2에 도시된 로직 회로(23014)에서는, 이하에서 상세하게 설명하는 검출 처리가 실행된다. 로직 회로(23014)에서의 검출 처리의 결과, 제어 회로(23013)에 의해 화소 영역(23012)에 대한 화소의 구동이 행해진다.
<1.2. 기능 구성예>
계속해서, 본 개시의 실시형태에 따른 고체 촬상 장치(1)가 탑재되는 촬상 장치(100)의 기능 구성예를 설명한다. 도 3은, 본 개시의 실시형태에 따른 촬상 장치(100)의 기능 구성예에 대해서 나타내는 설명도이다. 도 3에 도시된 촬상 장치(100)는, 예를 들면 CCTV의 용도로 이용될 수 있는 장치이다. 촬상 장치(100)는, 정기적으로 소정의 피사체의 검출 처리를 행하고, 검출 결과에 기초하여 촬상 처리를 실행하도록 구성된 장치이다.
도 3에 나타낸 바와 같이, 본 개시의 실시형태에 따른 촬상 장치(100)는, 고체 촬상 장치(1)와, 신호 처리부(110)와, 표시부(120)와, 기억부(130)를 포함하여 구성된다.
신호 처리부(110)는, 고체 촬상 장치(1)로부터 출력되는 데이터에 대해 신호 처리를 실행한다. 따라서, 신호 처리부(110)는, 소정의 프로세서로 구성될 수 있다. 구체적으로는, 신호 처리부(110)는, 고체 촬상 장치(1)에서 출력되는 데이터를 이용한 화상 생성 처리를 실행한다. 신호 처리부(110)는, 생성한 화상을 표시부(120)로 출력하거나, 기억부(130)에 기억시킨다. 한편, 본 실시형태에서는, 피사체의 검출 처리는 고체 촬상 장치(1)에서 실행되나, 본 개시와 관련되는 예에 한정되는 것은 아니고, 예를 들면, 신호 처리부(110)에 있어서 피사체의 검출 처리가 실행되어도 된다.
표시부(120)는, 액정 모니터나 유기 EL 디스플레이 등의 디스플레이 디바이스로 구성되어, 다양한 정보, 예를 들면, 고체 촬상 장치(1)에 의해 촬상된 화상을 표시한다. 또한 기억부(130)는, ROM, RAM 등의 기억 디바이스로 구성되어, 촬상 장치(100)를 동작시키기 위한 각종 컴퓨터 프로그램이나 설정 등을 기억한다. 또한 기억부(130)는, 고체 촬상 장치(1)에 의해 촬상되어, 신호 처리부(110)에 의해 생성된 화상 데이터를 기억한다.
<1.3. 동작예>
(롤링 셔터의 경우)
계속해서, 본 개시의 실시형태에 따른 고체 촬상 장치(1)의 동작예를 설명한다. 먼저, 본 개시의 실시형태에 따른 고체 촬상 장치(1)의 동작예를 설명하기 전에, 고체 촬상 장치(1)에 의해 촬상된 화상을 이용한 검출 처리가 완료하고 나서, 고체 촬상 장치(1)의 셔터 동작을 개시하여 화상 데이터를 얻을 경우의 동작을 설명한다. 또한 이후의 설명에서는, 고체 촬상 장치(1)가 롤링 셔터 방식, 즉 화소의 행마다 순차 노광하는 방식에 의해 촬상하는 것으로 한다.
도 4a, 4b는, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 도 4a의 센서 동작 중, 파선으로 나타낸 것은 검출 대상의 피사체를 검출하기 위한 셔터 및 판독 동작이며, 실선으로 나타낸 것은, 검출 대상의 피사체가 존재한 경우의 셔터 및 판독 동작이다. 이후 마찬가지의 도면에 있어서, 센서 동작으로서 나타내고 있는 것은, 화소의 최상행부터 최하행까지의 셔터 및 판독 동작을 나타내고 있다.
고체 촬상 장치(1)로부터 판독한 데이터로 피사체를 검출하기 위해서는, 화소의 모두를 이용할 필요는 없으며, 일부의 행, 또는 영역에 한정한 셔터 동작 및 판독 동작을 행하면 된다. 따라서, 피사체를 검출하기 위한 셔터 및 판독 동작은, 검출 대상의 피사체가 존재하였을 경우의 셔터 및 판독 동작보다도 고속으로 동작한다. 피사체를 검출하기 위한 셔터 및 판독 동작을 총칭해서 저해상도 판독, 검출 대상의 피사체가 존재하였을 경우의 셔터 및 판독 동작을 총칭해서 고해상도 판독이라고도 칭한다. 한편, 본 실시형태에서는, 피사체를 검출하기 위한 셔터 및 판독 동작과, 피사체가 존재하였을 경우의 셔터 및 판독 동작의 속도를 변화시키고 있으나, 본 개시와 관련되는 예에 한정되는 것이 아니고, 각각의 동작이 같은 속도로 행해져도 된다.
도 4a는, 최초의 검출 처리로 검출 대상의 피사체를 검출할 수 있으면, 고해상도 판독을 실행하고, 고해상도 판독의 이후에 저해상도 판독을 실행할 경우의 고체 촬상 장치(1)의 동작예이다. 또한 도 4b는, 검출 처리로 검출 대상의 피사체를 검출할 수 없을 경우의 고체 촬상 장치(1)의 동작예이다. 한편, 이후의 도면에 있어서, 저해상도 판독, 고해상도 판독 및 검출 처리의 소요시간은 일례에 지나지 않음은 말할 필요도 없다.
고체 촬상 장치(1)에 의해 촬상된 화상을 이용한 검출 처리가 완료하고 나서, 고체 촬상 장치(1)의 셔터 동작을 개시하여 화상 데이터를 얻을 경우, 도 4a, 도 4b 중 어떠한 케이스라도, 검출 처리가 완료하지 않으면, 저해상도 판독 또는 고해상도 판독을 실행할 수 없다. 특히, 고해상도 판독은 저해상도 판독에 비해 동작시간을 필요로 하기 때문에, 검출 처리의 결과, 검출 대상의 피사체가 검출되었다고 해도, 그 피사체의 이동 속도에 따라서는 고해상도 판독을 행하여도 그 피사체가 화상에 비치치 않을 가능성도 있다.
이에 본 실시형태에 따른 고체 촬상 장치(1)는, 저해상도 판독을 행하고, 저해상도 판독에 의한 데이터를 이용한 검출 처리를 행하고 있는 도중에 고해상도 판독을 위한 셔터 동작을 실행시킨다. 이와 같이 고해상도 판독을 위한 셔터 동작을 선행하여 실행함으로써, 본 실시형태에 따른 고체 촬상 장치(1)는, 피사체의 검출에서부터 촬상 처리 완료까지의 시간을 단축시키는 것이 가능해진다.
도 5a, 5b는, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 도 5a는, 최초의 검출 처리로 검출 대상의 피사체를 검출할 수 있으면, 고해상도 판독을 실행하고, 고해상도 판독의 이후에 저해상도 판독을 실행할 경우의 고체 촬상 장치(1)의 동작예이다. 또한 도 5b는, 검출 처리로 검출 대상의 피사체를 검출할 수 없을 경우의 고체 촬상 장치(1)의 동작예이다.
도 5a에 나타낸 바와 같이, 본 개시의 실시형태에 따른 고체 촬상 장치(1)는, 검출 처리가 완료하고 나서 고해상도 판독을 위한 셔터 동작을 개시하는 것이 아니고, 검출 처리에 의한 검출 결과에 관계없이, 검출 처리의 도중에 고해상도 판독을 위한 셔터 동작을 실시한다. 고해상도 판독을 위한 셔터 동작의 개시 타이밍은, 도 5a에서는 검출 처리의 도중으로 되어 있으나, 검출 처리를 행하고 있는 도중에 어느 하나의 행에서 고해상도 판독이 행해지고 있으면, 그리고, 검출 처리가 종료하고, 피사체를 검출할 수 있었다고 판정한 직후에 최상행의 화소로부터의 판독 처리가 개시 가능하다면, 고해상도 판독을 위한 셔터 동작의 개시 타이밍은 묻지 않는다.
그리고 고체 촬상 장치(1)는, 도 5a에 나타낸 바와 같이, 고해상도 판독을 행하고 있는 도중에, 다시 저해상도 판독을 위한 셔터 동작을 개시한다. 도 5a에서는, 고해상도 판독 동작의 종료 시점과, 저해상도 판독에서의 셔터 동작의 종료 시점이 겹치도록, 고해상도 판독을 행하고 있는 도중에, 저해상도 판독을 위한 셔터 동작을 개시하고 있으나, 이 저해상도 판독을 위한 셔터 동작의 개시 타이밍도 도 5a에 나타낸 것에 한정되는 것은 아니다.
한편, 검출 처리로 검출 대상의 피사체를 검출할 수 없을 경우는, 고체 촬상 장치(1)는, 도 5b에 나타낸 바와 같이, 검출 처리의 종료 시점에서 고해상도 판독에서의 셔터 동작을 정지하고, 고해상도 판독에서의 셔터 동작에 의해 화소에 축적된 전하를 파기하고, 다시 저해상도 판독을 위한 셔터 동작을 개시한다.
도 6은, 본 개시의 실시형태에 따른 고체 촬상 장치(1)의 동작예를 제시하는 플로우 차트이다. 도 6에 나타낸 것은, 고체 촬상 장치(1)가 촬상한 화상에 검출 대상의 피사체가 존재하는지를 판정하고, 존재하고 있으면 고해상도의 화상을 촬상할 경우의, 고체 촬상 장치(1)의 동작예이다. 이하, 도 6을 이용하여 본 개시의 실시형태에 따른 고체 촬상 장치(1)의 동작예를 설명한다.
고체 촬상 장치(1)는, 검출 처리를 위해, 먼저 저해상도 판독용의 셔터 동작을 개시하여(스텝(S101)), 저해상도 판독으로서, 셔터 동작에 의해 화소에 축적된 데이터를 판독한다(스텝(S102)).
계속해서 고체 촬상 장치(1)는, 저해상도 판독에 의한 화상을 이용한 피사체의 검출 처리를 개시한다(스텝(S103)). 그리고, 고체 촬상 장치(1)는, 피사체의 검출 처리가 완료하기 전에, 고해상도 판독용의 셔터 동작을 개시한다(스텝(S104)).
계속해서 고체 촬상 장치(1)는, 저해상도 판독에 의한 화상을 이용한 피사체의 검출 처리를 완료하고(스텝(S105)), 소정의 검출 대상의 피사체를 검출한 것인지 아닌지 판정한다(스텝(S106)). 소정의 검출 대상의 피사체를 검출하고 있으면 (스텝(S106), Yes), 고체 촬상 장치(1)는 고해상도 판독용의 셔터 동작에 의해 화소에 축적된 데이터를 판독한다(스텝(S107)). 고체 촬상 장치(1)는, 화소에 축적된 데이터를 판독하면, 스텝(S101)의 저해상도 판독용의 셔터 동작으로 되돌아간다. 한편, 소정의 검출 대상의 피사체를 검출하고 있지 않으면(스텝(S106), No), 고체 촬상 장치(1)는 고해상도 판독용의 셔터 동작에 의해 화소에 축적된 데이터를 파기하고, 스텝(S101)의 저해상도 판독용의 셔터 동작으로 되돌아간다.
고체 촬상 장치(1)는, 저해상도 판독에 의한 화상을 이용한 피사체의 검출 처리에 의해 검출 대상의 피사체를 검출하였을 경우, 고해상도 판독 시에 부분적으로 판독을 행하여도 된다. 도 7은, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 이와 같이, 고체 촬상 장치(1)는 검출 대상의 피사체를 검출하였을 경우, 고해상도 판독 시에 모든 행에 대해 판독을 실행하는 것이 아니고, 피사체를 검출한 부분을 포함한 영역(주목 영역(ROI:Region-of-Interest))에 대해서 부분적으로 판독을 실행하여도 된다.
고체 촬상 장치(1)는, 저해상도 판독에 의한 화상을 이용한 피사체의 검출 처리에 의해 검출 대상의 피사체를 검출하지 않았을 경우, 선행하여 실행하고 있는 고해상도 판독용의 셔터 동작을 계속하고, 화소에 축적된 데이터를 판독할 때에, 저해상도로, 즉 일부의 화소에 대해 판독 동작을 실행하여도 된다.
도 8은, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 도 8에 나타낸 바와 같이, 고체 촬상 장치(1)는 검출 대상의 피사체를 검출하지 않았을 경우, 선행하여 실행하고 있는 고해상도 판독용의 셔터 동작을 계속하고, 일부의 화소에 대하여 판독 동작을 실행하여도 된다. 고체 촬상 장치(1)는, 이때의 판독 속도를, 고해상도 판독용의 셔터 동작과 맞추어도 된다.
(글로벌 셔터의 경우)
여기까지는, 고체 촬상 장치(1)가 화소의 행마다 순차 노광하는 롤링 셔터 방식에 의해 촬상하는 것일 경우를 설명하였다. 계속해서, 고체 촬상 장치(1)가 모든 화소에 한 번에 노광하는 글로벌 셔터 방식에 의해 촬상하는 것일 경우를 설명한다.
먼저, 본 개시의 실시형태에 따른 고체 촬상 장치(1)의 동작예를 설명하기 전에, 고체 촬상 장치(1)에 의해 촬상된 화상을 이용한 검출 처리가 완료하고 나서, 고체 촬상 장치(1)의 셔터 동작을 개시하여 화상 데이터를 얻을 경우의 동작을 설명한다.
도 9a, 9b는, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 도 9a의 센서 동작 중, 파선으로 나타낸 것은 검출 대상의 피사체를 검출하기 위한 셔터 및 판독 동작이며, 실선으로 나타낸 것은, 검출 대상의 피사체가 존재하였을 경우의 셔터 및 판독 동작이다. 이후 마찬가지의 도면에 있어서, 센서 동작으로서 나타내고 있는 것은, 화소의 최상행부터 최하행까지의 셔터 및 판독 동작을 나타내고 있다.
피사체를 검출하기 위해서는, 화소의 모두를 이용할 필요는 없고, 일부의 행, 또는 영역에 한정한 판독 동작을 행하면 된다. 따라서, 피사체를 검출하기 위한 판독 동작은, 검출 대상의 피사체가 존재하였을 경우의 판독 동작보다도 고속으로 동작한다. 피사체를 검출하기 위한 셔터 및 판독 동작을 총칭해서 저해상도 판독, 검출 대상의 피사체가 존재하였을 경우의 셔터 및 판독 동작을 총칭해서 고해상도 판독이라고도 칭한다.
도 9a는, 최초의 검출 처리에서 검출 대상의 피사체를 검출할 수 있으면, 고해상도 판독을 실행하고, 고해상도 판독의 이후에 저해상도 판독을 실행할 경우의 고체 촬상 장치(1)의 동작예이다. 또한, 도 9b는, 검출 처리에서 검출 대상의 피사체를 검출할 수 없을 경우의 고체 촬상 장치(1)의 동작예이다. 한편, 이후의 도면에 있어서, 저해상도 판독, 고해상도 판독 및 검출 처리의 소요시간은 일례에 지나지 않음은 말할 필요도 없다.
고체 촬상 장치(1)에 의해 촬상된 화상을 이용한 검출 처리가 완료하고 나서, 고체 촬상 장치(1)의 셔터 동작을 개시하여 화상 데이터를 얻을 경우, 도 9a, 도 9b 중 어떠한 케이스이라도, 검출 처리가 완료하지 않으면, 저해상도 판독 또는 고해상도 판독을 위한 셔터 동작을 실행할 수 없다. 특히, 고해상도 판독은 저해상도 판독에 비해서 동작시간을 필요로 하기 때문에, 검출 처리의 결과, 검출 대상의 피사체가 검출되었다고 해도, 그 피사체의 이동 속도에 따라서는 고해상도 판독을 행하여도 그 피사체가 화상에 비치지 않을 가능성도 있다.
이에 본 실시형태에 따른 고체 촬상 장치(1)는, 저해상도 판독을 행하고, 저해상도 판독에 의한 데이터를 이용한 검출 처리를 행하고 있는 도중에 고해상도 판독을 위한 셔터 동작을 실행시킨다. 이와 같이 고해상도 판독을 위한 셔터 동작을 선행하여 실행함으로써, 본 실시형태에 따른 고체 촬상 장치(1)는, 피사체의 검출에서부터 촬상 처리 완료까지의 시간을 단축시키는 것이 가능해진다.
도 10a, 10b는, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 도 10a는, 최초의 검출 처리에서 검출 대상의 피사체를 검출할 수 있으면, 고해상도 판독을 실행하고, 고해상도 판독의 이후에 저해상도 판독을 실행할 경우의 고체 촬상 장치(1)의 동작예이다. 또한, 도 10b는, 검출 처리로 검출 대상의 피사체를 검출할 수 없을 경우의 고체 촬상 장치(1)의 동작예이다.
도 10a에 나타낸 바와 같이, 본 개시의 실시형태에 따른 고체 촬상 장치(1)는, 검출 처리가 완료하고 나서 고해상도 판독을 개시하는 것이 아니고, 검출 처리에 의한 검출 결과에 관계없이, 검출 처리의 도중에 고해상도 판독을 위한 셔터 동작을 실시한다.
그리고, 고체 촬상 장치(1)는, 도 10a에 나타낸 바와 같이, 검출 처리에서 검출 대상의 피사체를 검출할 수 있으면, 고해상도 판독을 실행한다. 나아가 고체 촬상 장치(1)는, 도 10a에 나타낸 바와 같이, 고해상도 판독을 실행하고 있는 도중에, 다음 검출 처리를 위한 셔터 동작을 실행한다.
한편, 검출 처리에서 검출 대상의 피사체를 검출할 수 없을 경우는, 고체 촬상 장치(1)는, 도 10b에 나타낸 바와 같이, 검출 처리의 종료 시점에서, 저해상도 판독을 위한 셔터 동작을 개시한다. 검출 처리의 도중에 셔터 동작이 행해지고 있으므로, 검출 처리로 검출 대상의 피사체를 검출할 수 없을 경우라도, 그 셔터 동작에 의해 화소에 축적된 데이터는 소용없게 되지 않고, 고체 촬상 장치(1)는, 검출 처리의 도중에 실행된 셔터 동작에 의해 화소에 축적된 데이터를 그대로 검출 처리에 이용할 수 있다.
고체 촬상 장치(1)는, 저해상도 판독에 의한 화상을 이용한 피사체의 검출 처리에 의해 검출 대상의 피사체를 검출하였을 경우, 고해상도 판독 시에 부분적으로 판독을 행하여도 된다. 도 11은, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 이와 같이, 고체 촬상 장치(1)는 검출 대상의 피사체를 검출하였을 경우, 고해상도 판독 시에 모든 행에 대해 판독을 실행하는 것이 아니고, 피사체를 검출한 부분을 포함한 영역에 대해서 부분적으로 판독을 실행하여도 된다.
글로벌 셔터 방식의 경우, 셔터 동작은 모든 화소에 대해 행하여지나, 판독 동작은 일부의 화소에 대해 행하는 것이 가능하다. 이에 고체 촬상 장치(1)는, 저해상도 판독에 의한 화상을 이용한 피사체의 검출 처리에 의해 검출 대상의 피사체를 검출하였을 경우, 저해상도 판독에 있어서 판독되지 않은 화소의 데이터를 판독함으로써 고해상도 판독을 행하여도 된다. 고체 촬상 장치(1)는 이러한 동작을 함으로써, 검출을 위한 화상과, 고해상도로 촬상하였을 경우의 시간차를 없앨 수 있다.
도 12는, 고체 촬상 장치(1)의 동작예를 설명하기 위한 설명도이다. 저해상도 판독에 의한 화상을 이용한 피사체의 검출 처리에 의해 검출 대상의 피사체를 검출하였을 경우, 판독에 있어서 판독되지 않은 화소의 데이터를 판독함으로써 고해상도 판독을 행한다. 이 경우, 고체 촬상 장치(1)는, 고해상도 판독 시에, 예를 들면 주목 영역에 한정하고, 부분적으로 판독을 행하여도 된다.
도 13a, 13b는, 본 개시의 실시형태에 따른 고체 촬상 장치(1)에 의한 저해상도 판독 및 고해상도 판독을 설명하는 설명도이다. 도 13a는, 행 단위로 화소로부터 데이터를 판독할 경우의, 고체 촬상 장치(1)에 의한 저해상도 판독 및 고해상도 판독을 설명하고, 도 13b는, 화소 단위로 화소로부터 데이터를 판독할 경우의, 고체 촬상 장치(1)에 의한 저해상도 판독 및 고해상도 판독을 설명한 것이다.
도 13a와 같이, 고체 촬상 장치(1)에 의한 저해상도 판독이 행 단위로 화소로부터 데이터를 판독하는 것일 경우, 저해상도 판독에 의해 판독되지 않은 행을 고해상도 판독의 판독 대상으로 한다. 도 13a의 예에서는, 1행째, 4행째, 7행째, 10행째가 저해상도 판독에 의해 판독된 행이다. 따라서, 고해상도 판독의 판독 대상은 이들 행 이외의 행이 된다. 이때, 고체 촬상 장치(1)는, 주목 영역에 한정해서 고해상도 판독을 실행하여도 된다. 예를 들면, 주목 영역이 4행째에서부터 9행째일 경우, 고체 촬상 장치(1)는, 5행째, 6행째, 8행째, 9행째를 고해상도 판독의 판독 대상으로 한다.
이와 같이 저해상도 판독에 의해 판독되지 않은 행을 고해상도 판독의 판독 대상으로 할 경우, 고체 촬상 장치(1)는, 저해상도 판독에 의해 판독된 행에 대해서는, 고해상도 판독에 의해 판독한 화소의 정보를 이용하여 보간 처리를 행한다.
도 13b와 같이, 고체 촬상 장치(1)에 의한 저해상도 판독이 화소 단위로 화소로부터 데이터를 판독하는 것일 경우, 저해상도 판독에 의해 판독되지 않은 화소를 고해상도 판독의 판독 대상으로 한다. 도 13b의 예에서는, 세로 방향, 가로 방향 모두 3화소에 1화소의 비율로 저해상도 판독이 행해지고 있다. 따라서, 고체 촬상 장치(1)는, 저해상도 판독에 의해 판독되지 않은 화소를 고해상도 판독의 판독 대상으로 한다. 이때, 고체 촬상 장치(1)는, 상술한 바와 같이, 주목 영역에 한정하여 고해상도 판독을 실행하여도 된다.
도 13b와 같이, 화소 단위로 화소로부터 데이터를 판독할 경우, 저해상도 판독 시에는, 고체 촬상 장치(1)는, 녹색 화소만을 사용하여 판독해도 된다. 이는, 피사체를 검출하기 위해서는 휘도 정보가 있으면 충분하기 때문이다.
이와 같이 저해상도 판독에 의해 판독되지 않은 화소를 고해상도 판독의 판독 대상으로 할 경우, 고체 촬상 장치(1)는, 저해상도 판독에 의해 판독된 화소에 대해서는, 고해상도 판독에 의해 판독한 화소의 정보를 이용해서 보간 처리를 행한다. 도 13b와 같이, 화소 단위로 화소로부터 데이터를 판독함으로써, 고체 촬상 장치(1)는, 고해상도 판독 시에 보간 처리를 보다 용이하게 할 수 있다.
<2. 정리>
이상 설명한 바와 같이 본 개시의 실시형태에 의하면, 저해상도 판독을 행하고, 저해상도 판독에 의한 데이터를 이용한 검출 처리를 행하고 있는 도중에 고해상도 판독을 위한 셔터 동작을 실행시키는 고체 촬상 장치(1)가 제공된다. 이와 같이 고해상도 판독을 위한 셔터 동작을 선행하여 실행함으로써, 본 실시형태에 따른 고체 촬상 장치(1)는, 피사체의 검출에서부터 촬상 처리 완료까지의 시간을 단축시키는 것이 가능해진다.
본 명세서의 각 장치가 실행하는 처리에 있어서의 각 스텝은, 반드시 시퀀스 도면 또는 순서도로서 기재된 순서에 따라 시계열로 처리할 필요는 없다. 예를 들면, 각 장치가 실행하는 처리에 있어서의 각 스텝은, 순서도로서 기재한 순서와 다른 순서로 처리되어도, 병렬적으로 처리되어도 된다.
또한, 각 장치에 내장되는 CPU, ROM 및 RAM 등의 하드웨어를, 상술한 각 장치의 구성과 동등한 기능을 발휘시키기 위한 컴퓨터 프로그램도 작성 가능하다. 또한, 해당 컴퓨터 프로그램을 기억시킨 기억 매체도 제공되는 것이 가능하다. 또한, 기능 블록도로 나타낸 각각의 기능 블록을 하드웨어로 구성함으로써, 일련의 처리를 하드웨어로 실현할 수도 있다.
이상, 첨부 도면을 참조하면서 본 개시의 바람직한 실시형태에 대해서 상세하게 설명하였으나, 본 개시의 기술적 범위는 이러한 예에 한정되지 않는다. 본 개시의 기술 분야에 있어서의 통상의 지식을 가진 자라면, 특허청구의 범위에 기재된 기술적 사상의 범주 내에서, 각종 변경예 또는 수정예를 생각해 낼 수 있음은 자명하며, 이것들에 대해서도 당연히 본 개시의 기술적 범위에 속하는 것이라고 이해된다.
또한, 본 명세서에 기재된 효과는, 어디까지나 설명적 또는 예시적인 것이며 한정적이지 않다. 즉, 본 개시에 따른 기술은, 상기의 효과와 함께, 또는 상기의 효과에 대신하여, 본 명세서의 기재로부터 당업자에게는 자명한 다른 효과를 얻을 수 있다.
한편, 이하와 같은 구성도 본 개시의 기술적 범위에 속한다.
(1)
복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및, 제1 판독 속도 및 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 제어부를 구비하고,
상기 제어부는, 상기 제1 판독 속도에서의 판독 동작이 완료하고, 상기 제1 판독 속도에서의 판독 동작에 의해 상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역 중 적어도 한 행에 대한 상기 셔터 동작을 개시시키는, 고체 촬상 장치.
(2)
상기 제어부는, 상기 검출 처리에 의해 소정의 피사체가 검출되면, 개시시킨 상기 셔터 동작을 계속하고, 상기 제2 판독 속도에서의 판독 동작을 개시시키는, 상기(1)에 기재된 고체 촬상 장치.
(3)
상기 제어부는, 상기 제2 판독 속도에서의 판독 동작을 개시시킬 때에, 상기 화소 영역의 일부 영역에 대해서만 판독 동작을 개시시키는, 상기(2)에 기재된 고체 촬상 장치.
(4)
상기 제어부는, 상기 검출 처리에 의해 검출 대상의 피사체가 검출된 영역을 포함하는 영역에 대하여 판독 동작을 개시시키는, 상기(3)에 기재된 고체 촬상 장치.
(5)
상기 제어부는, 상기 검출 처리에 의해 소정의 피사체가 검출되지 않으면, 개시시킨 상기 셔터 동작을 정지하고, 상기 화소 영역에 대한 셔터 동작 및, 제1 판독 속도에서의 판독 동작을 개시시키는, 상기(1)에 기재된 고체 촬상 장치.
(6)
상기 제어부는, 화소행마다 순차 노광하는 방식에 의한 상기 화소 영역에 대한 셔터 동작을 제어하는, 상기(1)∼(5) 중 어느 하나에 기재된 고체 촬상 장치.
(7)
상기 제어부는, 모든 화소행에 대해 한번에 노광하는 방식에 대한 상기 화소 영역에 대한 셔터 동작을 제어하는, 상기(1)에 기재된 고체 촬상 장치.
(8)
상기 제어부는, 상기 검출 처리에 의해 소정의 피사체가 검출되면, 상기 제1 판독 속도에서의 판독 동작에서는 판독되지 않은 화소에 대해, 상기 제2 판독 속도에서의 판독 동작을 개시시키는, 상기(7)에 기재된 고체 촬상 장치.
(9)
상기 제어부는, 상기 제2 판독 속도에서의 판독 동작을 개시시킬 때에, 상기 화소 영역의 일부 영역에 대해서만 판독 동작을 개시시키는, 상기(8)에 기재된 고체 촬상 장치.
(10)
상기 제어부는, 상기 검출 처리에 의해 검출 대상의 피사체가 검출된 영역을 포함하는 영역에 대해 판독 동작을 개시시키는, 상기(9)에 기재된 고체 촬상 장치.
(11)
상기 제1 판독 속도는, 상기 제2 판독 속도보다도 고속인, 상기(1)∼(10) 중 어느 하나에 기재된 고체 촬상 장치.
(12)
상기 제1 판독 속도에서의 판독 동작에 의해 상기 화소 영역으로부터 판독된 피사체의 검출 처리를 실행하는 검출부를 더 구비하는, 상기(1)∼(11) 중 어느 하나에 기재된 고체 촬상 장치.
(13)
프로세서가,
복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및 제1 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과,
상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역에 대한 적어도 한 행에 대한 상기 셔터 동작을 개시시킴과 함께, 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것을 실행하는 것을 포함하는, 고체 촬상 장치의 제어 방법.
(14)
컴퓨터에,
복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및 제1 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과,
상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역에 대한 적어도 한 행에 대한 상기 셔터 동작을 개시시킴과 함께, 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것을 실행시키는, 컴퓨터 프로그램.
1: 고체 촬상 장치
100: 촬상 장치
110: 신호 처리부
120: 표시부
130: 기억부

Claims (14)

  1. 복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및, 제1 판독 속도 및 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 제어부를 구비하고,
    상기 제어부는, 상기 제1 판독 속도에서의 판독 동작이 완료하고, 상기 제1 판독 속도에서의 판독 동작에 의해 상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역 중 적어도 한 행에 대한 상기 셔터 동작을 개시시키고,
    상기 제어부는, 상기 검출 처리에 의해 소정의 피사체가 검출되면, 개시시킨 상기 셔터 동작을 계속하고, 상기 제2 판독 속도에서의 판독 동작을 개시시키는, 고체 촬상 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 제어부는, 상기 제2 판독 속도에서의 판독 동작을 개시시킬 때에, 상기 화소 영역의 일부 영역에 대해서만 판독 동작을 개시시키는, 고체 촬상 장치.
  4. 제3항에 있어서,
    상기 제어부는, 상기 검출 처리에 의해 검출 대상의 피사체가 검출된 영역을 포함하는 영역에 대해 판독 동작을 개시시키는, 고체 촬상 장치.
  5. 제1항에 있어서,
    상기 제어부는, 상기 검출 처리에 의해 소정의 피사체가 검출되지 않으면, 개시시킨 상기 셔터 동작을 정지하고, 상기 화소 영역에 대한 셔터 동작 및, 제1 판독 속도에서의 판독 동작을 개시시키는, 고체 촬상 장치.
  6. 제1항에 있어서,
    상기 제어부는, 화소행마다 순차 노광하는 방식에 의한 상기 화소 영역에 대한 셔터 동작을 제어하는, 고체 촬상 장치.
  7. 제1항에 있어서,
    상기 제어부는, 모든 화소행에 대해 한번에 노광하는 방식에 의한 상기 화소 영역에 대한 셔터 동작을 제어하는, 고체 촬상 장치.
  8. 제7항에 있어서,
    상기 제어부는, 상기 검출 처리에 의해 소정의 피사체가 검출되면, 상기 제1 판독 속도에서의 판독 동작에서는 판독되지 않은 화소에 대하여, 상기 제2 판독 속도에서의 판독 동작을 개시시키는, 고체 촬상 장치.
  9. 제8항에 있어서,
    상기 제어부는, 상기 제2 판독 속도에서의 판독 동작을 개시시킬 때에, 상기 화소 영역의 일부 영역에 대해서만 판독 동작을 개시시키는, 고체 촬상 장치.
  10. 제9항에 있어서,
    상기 제어부는, 상기 검출 처리에 의해 검출 대상의 피사체가 검출된 영역을 포함하는 영역에 대하여 판독 동작을 개시시키는, 고체 촬상 장치.
  11. 제1항에 있어서,
    상기 제1 판독 속도는, 상기 제2 판독 속도보다도 고속인, 고체 촬상 장치.
  12. 제1항에 있어서,
    상기 제1 판독 속도에서의 판독 동작에 의해 상기 화소 영역으로부터 판독된 피사체의 검출 처리를 실행하는 검출부를 더 구비하는, 고체 촬상 장치.
  13. 프로세서가,
    복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및 제1 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과,
    상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역에 대한 적어도 한 행에 대한 상기 셔터 동작을 개시시킴과 함께, 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과,
    상기 검출 처리에 의해 소정의 피사체가 검출되면, 개시시킨 상기 셔터 동작을 계속하고, 상기 제2 판독 속도에서의 판독 동작을 개시시키도록 제어하는 것을 실행하는 것을 포함하는, 고체 촬상 장치의 제어 방법.
  14. 컴퓨터에,
    복수의 화소가 매트릭스 형상으로 배치되는 화소 영역에 대한 셔터 동작 및 제1 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과,
    상기 화소 영역으로부터 판독된 피사체의 검출 처리가 실행되고 있는 도중에, 상기 화소 영역에 대한 적어도 한 행에 대한 상기 셔터 동작을 개시시킴과 함께, 제2 판독 속도에서의 상기 화소 영역으로부터의 판독 동작을 제어하는 것과,
    상기 검출 처리에 의해 소정의 피사체가 검출되면, 개시시킨 상기 셔터 동작을 계속하고, 상기 제2 판독 속도에서의 판독 동작을 개시시키도록 제어하는 것을 실행시키는, 컴퓨터 판독 가능한 기록매체에 저장된 프로그램.
KR1020207012956A 2017-12-06 2018-10-10 고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램 KR102558488B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017234218 2017-12-06
JPJP-P-2017-234218 2017-12-06
PCT/JP2018/037804 WO2019111528A1 (ja) 2017-12-06 2018-10-10 固体撮像装置、固体撮像装置の制御方法およびコンピュータプログラム

Publications (2)

Publication Number Publication Date
KR20200096495A KR20200096495A (ko) 2020-08-12
KR102558488B1 true KR102558488B1 (ko) 2023-07-20

Family

ID=66750953

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207012956A KR102558488B1 (ko) 2017-12-06 2018-10-10 고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램

Country Status (5)

Country Link
US (1) US11240447B2 (ko)
JP (1) JP7179759B2 (ko)
KR (1) KR102558488B1 (ko)
DE (1) DE112018006264T5 (ko)
WO (1) WO2019111528A1 (ko)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11330989B2 (en) 2014-06-16 2022-05-17 Medtronic Vascular, Inc. Microcatheter sensor design for mounting sensor to minimize induced strain
US10686996B2 (en) 2017-06-26 2020-06-16 Facebook Technologies, Llc Digital pixel with extended dynamic range
US10598546B2 (en) 2017-08-17 2020-03-24 Facebook Technologies, Llc Detecting high intensity light in photo sensor
US12034015B2 (en) 2018-05-25 2024-07-09 Meta Platforms Technologies, Llc Programmable pixel array
US11906353B2 (en) 2018-06-11 2024-02-20 Meta Platforms Technologies, Llc Digital pixel with extended dynamic range
US11463636B2 (en) 2018-06-27 2022-10-04 Facebook Technologies, Llc Pixel sensor having multiple photodiodes
US10897586B2 (en) 2018-06-28 2021-01-19 Facebook Technologies, Llc Global shutter image sensor
US10931884B2 (en) 2018-08-20 2021-02-23 Facebook Technologies, Llc Pixel sensor having adaptive exposure time
US11956413B2 (en) 2018-08-27 2024-04-09 Meta Platforms Technologies, Llc Pixel sensor having multiple photodiodes and shared comparator
US11595602B2 (en) 2018-11-05 2023-02-28 Meta Platforms Technologies, Llc Image sensor post processing
US11888002B2 (en) 2018-12-17 2024-01-30 Meta Platforms Technologies, Llc Dynamically programmable image sensor
US11962928B2 (en) 2018-12-17 2024-04-16 Meta Platforms Technologies, Llc Programmable pixel array
US11218660B1 (en) 2019-03-26 2022-01-04 Facebook Technologies, Llc Pixel sensor having shared readout structure
US11943561B2 (en) 2019-06-13 2024-03-26 Meta Platforms Technologies, Llc Non-linear quantization at pixel sensor
JP7348756B2 (ja) * 2019-06-21 2023-09-21 キヤノン株式会社 撮像装置、制御方法及びプログラム
US11936998B1 (en) 2019-10-17 2024-03-19 Meta Platforms Technologies, Llc Digital pixel sensor having extended dynamic range
US11935291B2 (en) 2019-10-30 2024-03-19 Meta Platforms Technologies, Llc Distributed sensor system
US11948089B2 (en) * 2019-11-07 2024-04-02 Meta Platforms Technologies, Llc Sparse image sensing and processing
US11902685B1 (en) 2020-04-28 2024-02-13 Meta Platforms Technologies, Llc Pixel sensor having hierarchical memory
US11825228B2 (en) 2020-05-20 2023-11-21 Meta Platforms Technologies, Llc Programmable pixel array having multiple power domains
US11910114B2 (en) 2020-07-17 2024-02-20 Meta Platforms Technologies, Llc Multi-mode image sensor
US12075175B1 (en) 2020-09-08 2024-08-27 Meta Platforms Technologies, Llc Programmable smart sensor with adaptive readout
US11956560B2 (en) 2020-10-09 2024-04-09 Meta Platforms Technologies, Llc Digital pixel sensor having reduced quantization operation
CN112584066B (zh) * 2020-11-20 2024-01-05 格科微电子（上海）有限公司 曝光及读取的控制方法及装置、存储介质、图像处理设备
US11935575B1 (en) 2020-12-23 2024-03-19 Meta Platforms Technologies, Llc Heterogeneous memory system
US12022218B2 (en) 2020-12-29 2024-06-25 Meta Platforms Technologies, Llc Digital image sensor using a single-input comparator based quantizer

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015119206A (ja) 2013-12-16 2015-06-25 キヤノン株式会社 画像処理装置、その制御方法及びプログラム
JP2016116008A (ja) 2014-12-12 2016-06-23 カシオ計算機株式会社 撮影装置、撮影方向の制御方法及びプログラム
JP2017120279A (ja) * 2015-12-28 2017-07-06 キヤノン株式会社 撮像装置およびその制御方法
JP2017126894A (ja) 2016-01-14 2017-07-20 ソニー株式会社 撮像制御装置、撮像制御方法、プログラム
JP2017138434A (ja) 2016-02-03 2017-08-10 キヤノン株式会社 撮像装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101797037B1 (ko) * 2011-03-07 2017-11-13 삼성전자주식회사 디지털 촬영 장치 및 이의 제어 방법
JP6159105B2 (ja) * 2013-03-06 2017-07-05 キヤノン株式会社 撮像装置及びその制御方法
FR3033118B1 (fr) 2015-02-19 2017-02-17 Sigfox Procede et systeme de communication sans fil entre des terminaux et des stations de base semi-duplex
JP6610860B2 (ja) * 2015-06-16 2019-11-27 公立大学法人大阪 Ｉｌ−６産生抑制作用を有する非下痢原性分散接着性大腸菌及びその利用

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015119206A (ja) 2013-12-16 2015-06-25 キヤノン株式会社 画像処理装置、その制御方法及びプログラム
JP2016116008A (ja) 2014-12-12 2016-06-23 カシオ計算機株式会社 撮影装置、撮影方向の制御方法及びプログラム
JP2017120279A (ja) * 2015-12-28 2017-07-06 キヤノン株式会社 撮像装置およびその制御方法
JP2017126894A (ja) 2016-01-14 2017-07-20 ソニー株式会社 撮像制御装置、撮像制御方法、プログラム
JP2017138434A (ja) 2016-02-03 2017-08-10 キヤノン株式会社 撮像装置

Also Published As

Publication number Publication date
JPWO2019111528A1 (ja) 2020-12-10
JP7179759B2 (ja) 2022-11-29
US20200280689A1 (en) 2020-09-03
US11240447B2 (en) 2022-02-01
WO2019111528A1 (ja) 2019-06-13
KR20200096495A (ko) 2020-08-12
DE112018006264T5 (de) 2020-08-20

Similar Documents

Publication Publication Date Title
KR102558488B1 (ko) 고체 촬상 장치, 고체 촬상 장치의 제어 방법 및 컴퓨터 프로그램
US10044947B2 (en) Electronic apparatus and driving method therefor
TWI357761B (ko)
JP5641287B2 (ja) 固体撮像装置、固体撮像装置の駆動方法、および、電子機器
KR101459146B1 (ko) 이미지 센서, 전자 장치, 및 전자 장치의 구동 방법
JP5601001B2 (ja) 固体撮像素子および駆動方法、並びに電子機器
US9438836B2 (en) Solid-state image sensor and image sensing system with different charge accumulation periods
KR101945052B1 (ko) 고체 촬상 장치, 고체 촬상 장치의 구동 방법, 및 전자 기기
JP2006050566A (ja) 物理情報取得方法および物理情報取得装置並びに物理量分布検知の半導体装置
US20170125464A1 (en) Solid state imaging device and imaging apparatus
JP2007104241A (ja) 固体撮像装置、固体撮像装置の駆動方法および撮像装置
JP2013162148A (ja) 個体撮像装置および駆動方法、並びに電子機器
JP6120042B2 (ja) 固体撮像素子および駆動方法、並びに、電子機器
JP2009089087A (ja) 固体撮像装置及び撮像装置
CN114128252B (zh) 摄像设备及其控制方法
CN114128251B (zh) 成像装置及其控制方法
JP2008005155A (ja) 増幅型固体撮像装置およびその駆動方法、電子情報機器
US20080055437A1 (en) Solid-state imaging device
JP2009021889A (ja) 固体撮像装置及びその駆動方法
JP4483422B2 (ja) 画素アレイ装置および画素アレイ装置の駆動方法
JP5553121B2 (ja) 固体撮像装置、固体撮像装置の駆動方法および電子機器
JP2005223681A (ja) 固体撮像装置
JP4883192B2 (ja) 画素アレイ装置及び画素アレイ装置の駆動方法
JP5253280B2 (ja) 固体撮像素子、カメラシステム、および信号読出し方法
JP2008118371A (ja) 撮像素子

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant