KR20160022247A

KR20160022247A - 이미지 추출 장치, 이미지 추출 방법 및 기록 매체에 저장된 컴퓨터 프로그램

Info

Publication number: KR20160022247A
Application number: KR1020150107388A
Authority: KR
Inventors: 요시노리 토미도코로
Original assignee: 가시오게산키 가부시키가이샤
Priority date: 2014-08-19
Filing date: 2015-07-29
Publication date: 2016-02-29
Also published as: JP2016046540A; CN105376480B; CN105376480A; US20160055662A1; US9767587B2; JP5884873B1

Abstract

본 발명의 과제는, 복수의 이미지로부터 원하는 이미지를 더욱 용이하게 추출할 수 있도록 하는 것이다. 본 발명의 이미지 추출 장치는, 기준 이미지 선택부와, 이미지 추출부를 포함한다. 기준 이미지 선택부는, 하나의 이미지를 기준 이미지로서 선택한다. 이미지 추출부는, 각 이미지로부터 취득되는 시간에 관한 정보에 기초해서, 기준 이미지 선택부에 의해 선택된 기준 이미지에, 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출한다.

Description

이미지 추출 장치, 이미지 추출 방법 및 기록 매체에 저장된 컴퓨터 프로그램{IMAGE EXTRACTING APPARATUS, IMAGE EXTRACTING METHOD AND COMPUTER PROGRAM STORED IN RECORDING MEDIUM}

본 발명은, 이미지 추출 장치, 이미지 추출 방법 및 기록 매체에 저장된 컴퓨터 프로그램에 관한 것이다.

종래, 디지털 카메라로 촬영된 이미지의 활용 방법으로서, 콜라주(collage)라고 불리는 기법이 알려져 있다.

콜라주란, 배경이 되는 이미지에 복수의 촬영 이미지를 크기나 위치 관계 혹은 각도 등을 디자인해서 붙여서 한 장의 새로운 이미지를 생성하는 것으로, 시각적 효과가 높은 것이다. 그 때문에, 작성자 혼자 즐기는 것뿐만 아니라, 웹(web) 등에 공개해서 여러 사람이 즐기는 것이 널리 행해지고 있다.

콜라주에 관련되는 기술로서, 예를 들면, 일본 특허출원공개 특개2006-80632호 공보에는, 사용자가 선택한 복수의 이미지로부터 비교적 용이하게 레이아웃된 합성 이미지를 생성하는 기술이 개시되어 있다.

그렇지만, 콜라주 등과 같이 사용자가 원하는 복수의 이미지를 이용해서 어떠한 화상 처리를 행하는 종래의 기술에 있어서는, 사용자가 복수의 이미지를 선택해야 할 필요가 있는 등, 효과적인 화상 처리를 행할 때까지 많은 수고가 든다는 문제가 있었다.

일본 특허출원공개 2006-80632호 공보. 2006.3.23.

본 발명은 이러한 상황에 착안한 것으로, 본 발명의 목적 중 하나는 복수의 이미지로부터 원하는 이미지를 보다 용이하게 추출할 수 있도록 하는 것이다.

본 발명의 일 실시예에 의하면, 하나의 이미지를 기준 이미지로서 선택하는 이미지 선택부와, 이미지의 시간에 관한 정보를 취득하는 취득부와, 상기 취득부에 의해 취득되는 시간에 관한 정보에 기초해서, 상기 이미지 선택부에 의해 선택된 기준 이미지에 대하여 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출하는 추출부를 포함하는 이미지 추출 장치가 제공된다.

본 발명의 일 실시예에 의하면, 이미지 추출 장치에 의해 실행되는 이미지 추출 방법이 제공된다. 상기 이미지 추출 방법은, 하나의 이미지를 기준 이미지로서 선택하는 이미지 선택 처리와, 이미지의 시간에 관한 정보를 취득하는 취득 처리와, 상기 취득 처리에 의해서 취득되는 시간에 관한 정보에 기초해서, 상기 이미지 선택 처리에 의해서 선택된 기준 이미지에, 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출하는 추출 처리를 포함한다.

본 발명의 일 실시예에 의하면, 이미지를 추출하는 장치에, 하나의 이미지를 기준 이미지로서 선택하는 이미지 선택 기능과, 이미지의 시간에 관한 정보를 취득하는 취득 기능과, 상기 취득 기능에 의해 취득되는 시간에 관한 정보에 기초해서, 상기 이미지 선택 기능에 의해 선택된 기준 이미지에, 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출하는 추출 기능을 실현시키는, 컴퓨터로 읽을 수 있는 기록 매체에 저장된 프로그램이 제공된다.

본 발명의 상기한 그리고 다른 목적 및 신규한 구성들은 첨부된 도면과 함께 이하의 상세한 설명에 상세히 개시되어 있다. 그러나, 이러한 도면들은 예시의 목적일 뿐이며 본 발명의 범위를 제한하려는 것은 아니라는 점에 유의하여야 한다.

이하의 상세한 설명을 이하의 도면과 함께 고려하면, 본원에 대한 보다 깊은 이해를 얻을 수 있다.
도 1a 및 1b는 본 발명의 일 실시 형태에 관련된 이미지 추출 장치의 외관 구성을 도시한 모식도이다. 도 1a는, 배면 유닛 1B를 표준의 위치에 배치한 상태를, 도 1b는, 배면 유닛 1B를 힌지를 중심으로 회전시킨 상태를 도시한 도면이다.
도 2는 본 발명의 일 실시 형태에 관련된 이미지 추출 장치의 하드웨어 구성을 도시한 블록도이다.
도 3은 이미지 추출 장치의 기능적 구성 중, 이미지 생성 처리를 실행하기 위한 기능적 구성을 도시한 기능 블록도이다.
도 4는 레이아웃의 예를 도시한 모식도이다.
도 5는 이미지 추출부 52에 있어서의 이미지 군의 추출 처리의 예를 도시한 모식도이다.
도 6은 이미지 추출부 52에 있어서의 이미지 군의 추출 처리의 예를 도시한 모식도이다.
도 7은 도 3의 기능적 구성을 갖는 도 1a 및 1b에 도시된 이미지 추출 장치가 실행하는 이미지 생성 처리의 흐름을 설명하는 흐름도이다.

이하, 본 발명의 실시 형태에 대해서, 도면을 이용해서 설명한다.

도 1a와 1b는, 본 발명의 일 실시 형태에 관련된 이미지 추출 장치 1의 외관 구성을 도시한 모식도로서, 도 1a는, 배면 유닛 1B를 표준의 위치에 배치한 상태를, 도 1b는, 배면 유닛 1B를 힌지를 중심으로 회전시킨 상태를 도시한 도면이다.

또, 도 2는, 본 발명의 일 실시 형태에 관련된 이미지 추출 장치 1의 하드웨어 구성을 도시한 블록도이다.

이미지 추출 장치 1은, 예를 들면 디지털 카메라로서 구성된다. 본 실시 형태에 있어서, 이미지 추출 장치 1은, 본체 1A와, 본체 배면을 구성하는 배면 유닛 1B를 포함하고, 본체 1A와 배면 유닛 1B가 힌지에 의해 회전가능하게 연결된 구성으로 되어 있다.

이미지 추출 장치 1은, CPU(Central Processing Unit) 11과, ROM(Read Only Memory) 12와, RAM(Random Access Memory) 13과, 버스 14와, 입출력 인터페이스 15와, 촬상부 16과, 입력부 17과, 출력부 18과, 기억부 19와, 통신부 20과, 드라이브 21을 포함한다.

CPU 11은, ROM 12에 기록되어 있는 프로그램, 또는, 기억부 19로부터 RAM 13에 로드된 프로그램에 따라서 각종 처리를 실행한다.

RAM 13에는, CPU 11이 각종 처리를 실행함에 있어서 필요한 데이터 등도 적절히 기억된다.

CPU 11, ROM 12 및 RAM 13은, 버스 14를 통해서 서로 접속되어 있다. 이 버스 14에는 또한, 입출력 인터페이스 15도 접속되어 있다. 입출력 인터페이스 15에는, 촬상부 16, 입력부 17, 출력부 18, 기억부 19, 통신부 20 및 드라이브 21이 접속되어 있다.

촬상부 16은, 도시는 하지 않지만, 광학 렌즈(optical lens)부와, 이미지 센서를 포함한다.

광학 렌즈부는, 피사체를 촬영하기 위해서, 빛을 모으는 렌즈, 예를 들면, 포커스 렌즈나 줌 렌즈 등으로 구성된다.

포커스 렌즈는, 이미지 센서의 수광면에 피사체 상을 결상시키는 렌즈다. 줌 렌즈는, 초점 거리를 일정한 범위에서 자유자재로 변화시키는 렌즈다.

광학 렌즈부에는 또한, 필요에 따라, 초점, 노출, 화이트 밸런스 등의 파라미터를 조정하는 주변 회로가 설치된다.

이미지 센서는, 광전 변환 소자나, AFE(Analog Front End) 등으로 구성된다.

광전 변환 소자는, 예를 들면 CMOS(Complementary Metal Oxide Semiconductor) 형의 광전 변환 소자 등으로 구성된다. 광전 변환 소자에는, 광학 렌즈부로부터 피사체 상이 입사된다. 광전 변환 소자는, 피사체 상을 광전 변환(촬상)해서 이미지 신호를 일정시간 축적하고, 축적한 이미지 신호를 아날로그 신호로서 AFE에 순차 공급한다.

AFE는, 이 아날로그의 이미지 신호에 대하여, A/D(Analog/Digital) 변환 처리 등의 각종 신호 처리를 실행한다. 각종 신호 처리에 의해, 디지털 신호가 생성되고, 촬상부 16의 출력 신호로서 출력된다.

이러한 촬상부 16의 출력 신호를, 이하, "촬상 이미지"라고 부른다. 촬상 이미지는, CPU 11 등에 적절히 공급된다.

입력부 17은, 출력부 18의 디스플레이 18a에 적층되는 터치 패널(touch panel)을 포함하고, 사용자의 지시 조작에 따라서 각종 정보를 입력한다. 또한, 터치 패널은 접촉식이어도 좋고, 비접촉식이어도 좋다. 또한, 입력부 17은, 터치 패널에 더해서, 메인 셔터 버튼 17a, 전방(front) 셔터 버튼 17b를 포함하는 각종 버튼 등을 포함하고, 사용자의 지시 조작에 따라서 각종 정보를 입력한다. 본 실시 형태에 있어서, 메인 셔터 버튼 17a는, 이미지 추출 장치 1의 윗면에 설치되고, 전방 셔터 버튼 17b는, 이미지 추출 장치 1의 전면(광학 렌즈부가 돌출되어 있는 쪽의 면)에 설치되어 있다. 이미지 추출 장치 1이, 이미지를 촬영하는 촬영 모드인 경우에는, 메인 셔터 버튼 17a 및 전방 셔터 버튼 17b 모두, 이미지의 촬영을 지시하는 셔터 버튼으로서 기능한다. 또한, 이미지 추출 장치 1이, 촬영된 이미지를 재생하는 재생 모드인 경우, 메인 셔터 버튼 17a는, 이미지의 촬영을 행하는 촬영 모드로 이행하는 지시를 행하기 위한 다이렉트 버튼으로서 기능하고, 전방 셔터 버튼 17b는, 콜라주 이미지를 간단히 생성시키는 처리(후술하는 다이렉트 콜라주 모드)의 지시를 행하기 위한 다이렉트 버튼으로서 기능한다.

출력부 18은, 디스플레이 18a나 스피커 등으로 구성되고, 이미지나 음성을 출력한다. 본 실시 형태에 있어서, 이미지 추출 장치 1의 본체 배면은, 본체 1A와는 다른 배면 유닛 1B로서 구성되어 있다. 배면 유닛 1B는, 디스플레이 18a를 포함하고, 본체 배면의 윗변을 회전축으로 하는 힌지에 의해 본체 1A와 연결되어 있다. 그 때문에, 스냅 사진이나 풍경 사진 등을 촬영하는 표준의 사용 상태에서는, 디스플레이 18a를 본체 배면으로 향하게 할 수 있고(도 1a 참조), 셀프 촬영 등의 특수한 사용 상태에서는, 배면 유닛 1B를 힌지 중심으로 회전시키고, 디스플레이 18a를 본체 전면으로 향하게 할 수 있다(도 1b 참조).

기억부 19는, 하드 디스크 또는 DRAM(Dynamic Random Access Memory) 등으로 구성되고, 각종 이미지 데이터를 기억한다.

통신부 20은, 인터넷을 포함하는 네트워크를 통해서 다른 장치(도시는 생략)와의 사이에서 행하는 통신을 제어한다.

드라이브 21에는, 자기 디스크, 광 디스크, 광자기 디스크, 또는 반도체 메모리 등으로 이루어지는, 리무버블(removable) 미디어 31이 적절히 장착된다. 드라이브 21에 의해 리무버블 미디어 31로부터 독출된 프로그램은, 필요에 따라 기억부 19에 인스톨된다. 또, 리무버블 미디어 31은, 기억부 19에 기억되어 있는 이미지 데이터 등의 각종 데이터도, 기억부 19과 동일하게 기억할 수 있다.

도 3은, 이미지 추출 장치 1의 기능적 구성 중, 이미지 생성 처리를 실행하기 위한 기능적 구성을 도시한 기능 블록도이다.

이미지 생성 처리란, 복수의 이미지 중에서, 자동 또는 수동에 의해 기준 이미지 및 다른 이미지를 선택하고, 이 이미지들을 레이아웃한 하나의 이미지(콜라주 이미지)를 생성하는 일련의 처리를 말한다.

이미지 생성 처리가 실행되는 경우, 도 3에 도시된 것처럼, CPU 11에 있어서, 기준 이미지 선택부 51과, 이미지 추출부 52와, 레이아웃 선택부 53과, 이미지 생성부 54와, 기본 제어부 55와, 표시 제어부 56이 기능한다.

또, 기억부 19의 일 영역에는, 이미지 기억부 71과, 레이아웃 기억부 72가 설정된다.

이미지 기억부 71에는, 이미지 생성 처리에 있어서 콜라주 이미지의 생성에 이용할 이미지의 데이터가 기억된다. 이미지 기억부 71에 기억되는 이미지의 데이터는, 예를 들면, 이미지 추출 장치 1에서 촬영된 이미지나, 다른 장치로부터 입력된 이미지의 데이터이다.

레이아웃 기억부 72에는, 이미지 생성 처리에 있어서 콜라주 이미지의 생성에 이용할 레이아웃의 데이터가 기억된다.

도 4는, 레이아웃의 예를 도시한 모식도이다. 한편, 도 4에 있어서는, 레이아웃 기억부 72에 기억된 4개의 레이아웃(레이아웃 A~D)을 하나의 예로서 도시하고 있다.

도 4에 도시된 것처럼, 레이아웃은, 기준 이미지를 포함하는 소정 매수의 이미지를 각각 삽입하는 레이아웃 프레임과 배경의 이미지에 의해 구성된 템플릿이다. 레이아웃에는, 레이아웃 프레임의 수(즉, 콜라주 이미지를 생성하는 이미지의 수)가 설정되고, 각 레이아웃 프레임에는, 위치 관계(중심 위치), 우선 순위, 삽입할 이미지의 크기 및 회전 각도가 설정되어 있다. 본 실시 형태에 있어서는, 사이즈가 최대인 레이아웃 프레임이 우선 순위가 가장 높은 "주(主) 레이아웃 프레임"이 되고, 다른 레이아웃 프레임은, 왼쪽에 위치할수록, 그리고, 위에 위치할수록 우선 순위가 높아진다. 콜라주 이미지가 생성되는 경우, 기준 이미지가 주 레이아웃 프레임에 배치되고, 다른 이미지는, 기준 이미지와 시간의 관련성(후술함)이 높은 순서대로, 우선 순위가 높은 레이아웃 프레임에 배치된다. 한편, 레이아웃 기억부 72에 기억되는 레이아웃의 데이터는, 미리 준비되어 있는 것으로 한다.

기준 이미지 선택부 51은, 콜라주 이미지를 생성할 때의 기준이 되는 이미지(기준 이미지)를 선택한다. 본 실시 형태에 있어서는, 콜라주 이미지를 생성하는 모드로서, 콜라주 이미지에 이용할 기준 이미지를 자동적으로 선택하는 제1 퀵 콜라주 모드와, 콜라주 이미지에 이용할 기준 이미지를 수동으로 선택하는 제2 퀵 콜라주 모드가 준비되어 있다. 제1 퀵 콜라주 모드가 지정된 경우, 기준 이미지 선택부 51은, 디스플레이 18a에 표시되고 있는 이미지를 기준 이미지로서 자동적으로 선택한다. 한편, 제2 퀵 콜라주 모드가 지정된 경우, 기준 이미지 선택부 51은, 사용자가 수동으로 선택한 이미지를 기준 이미지로 한다. 한편, 본 실시 형태에 있어서는, 제1 퀵 콜라주 모드에 있어서의 사용자의 조작을 더욱 간략화한 다이렉트 콜라주 모드가 준비되어 있다. 재생 모드에서 전방 셔터 버튼 17b가 조작되면, 다이렉트 콜라주 모드로 이행한다. 다이렉트 콜라주 모드에서는, 기준 이미지 선택부 51에 의한 기준 이미지의 선택에 더해, 레이아웃 선택부 53에 의한 레이아웃의 선택이 자동적으로 행해진다. 본 실시 형태에서는, 다이렉트 콜라주 모드에 있어서, 기준 이미지 선택부 51은, 디스플레이 18a에 표시되고 있는 이미지를 기준 이미지로서 자동적으로 선택하고, 레이아웃 선택부 53은, 전회의 콜라주 이미지의 생성에 이용된 레이아웃을 자동적으로 선택한다.

이미지 추출부 52는, 각 이미지의 시간에 관한 정보를 취득한다. 구체적으로는, 이미지 추출부 52는, 기준 이미지의 촬영 일시(년월일)를 초 단위로 취득한다.

또, 이미지 추출부 52는, 기준 이미지와의 시간의 관련성에 기초해서, 기준 이미지와 함께 콜라주 이미지를 생성할 이미지 군을 추출한다. 구체적으로는, 이미지 추출부 52는, 기준 이미지를 중심으로 해서, 선택된 레이아웃의 레이아웃 프레임의 수에 따라서, 시간적으로 인접하는 일군의 이미지(예를 들면, 레이아웃 프레임이 4개인 경우에는, 기준 이미지 및 시간적으로 오래된 방향 및 새로운 방향으로 3장씩의 합계 7장의 이미지)를 이미지 기억부 71로부터 취득한다. 즉, 이미지 추출부 52는, 기준 이미지를 가장 새로운 이미지로 해서, 촬영 시간이 가까운 설정 매수(예를 들면, 4장)의 이미지 군, 기준 이미지를 2번째로 새로운 이미지로 해서, 촬영 시간이 가까운 설정 매수의 이미지 군, 기준 이미지를 3번째로 새로운 이미지로 해서, 촬영 시간이 가까운 설정 매수의 이미지 군 등과 같이 시간적으로 인접하는 설정 매수의 이미지를, 기준 이미지를 가장 오래된 이미지로 하는 이미지 군까지 추출가능한 것과 같이, 일련의 이미지를 취득한다.

또한, 이미지 추출부 52는, 취득한 일련의 이미지의 촬영 일시로부터, 간격 시간 및 이격 값 시간을 산출한다. 간격 시간이란, 인접하는 이미지끼리의 촬영 시간의 차이이고, 이격 값 시간이란, 기준 이미지의 촬영 시간과 각 이미지의 촬영 시간의 차이다. 또, 이미지 추출부 52는, 각 이미지 군에 있어서, 간격 시간의 합계 및 이격 값 시간의 합계를 산출한다.

그리고, 이미지 추출부 52는, 일련의 이미지에 포함되는 각 이미지 군에 대해서 간격 시간의 합계 및 이격 값 시간의 합계를 산출하고, 이들 간격 시간의 합계 및 이격 값 시간의 합계에 기초해서, 각 이미지 군 중에서, 기준 이미지와 시간의 관련성이 가장 높은 이미지 군을 추출한다. 본 실시 형태에 있어서, 이미지 추출부 52는, 이격 값 시간의 합계가 가장 작은 이미지 군을, 기준 이미지와 시간의 관련성이 가장 높은 이미지 군으로서 추출한다. 여기서, 이격 값 시간의 합계가 가장 작은 이미지 군이 복수 존재하는 경우, 이미지 추출부 52는, 모든 이미지 군에 있어서, 간격 시간의 합계가 가장 작은 이미지 군을, 기준 이미지와 시간의 관련성이 가장 높은 이미지 군으로서 추출한다. 한편, 간격 시간의 합계가 가장 작은 이미지 군이 복수 존재하는 경우, 이미지 추출부 52는, 모든 이미지 군에 있어서, 가장 오래된 이미지를 포함하는 이미지 군을, 기준 이미지와 시간의 관련성이 가장 높은 이미지 군으로서 추출한다. 이렇게 선택된 이미지 군이, 콜라주 이미지를 생성하기 위해서 이용된다.

도 5 및 도 6은, 이미지 추출부 52에 있어서의 이미지 군의 추출 처리의 예를 도시한 모식도이다. 한편, 도 5 및 도 6에 있어서의 N, M은, 이미지의 번호를 나타내는 자연수다.

도 5 및 도 6에 도시된 것처럼, 기준 이미지를 포함하는 4장의 이미지에 의해 콜라주 이미지를 생성하는 경우, 각 이미지의 촬영 일시를 참조해서, 기준 이미지에 인접하는 오래된 이미지 및 새로운 이미지가 각 3장씩, 기준 이미지를 포함하는 합계 7장의 이미지가, 이미지 기억부 71로부터 RAM 13에 읽어 들여진다(절차 1). 이들 7장의 이미지에 대해서는, 인접하는 4장의 이미지 군으로서, 제1 내지 제4의 선택 패턴을 상정할 수 있다.

다음으로, 절차 1에서 읽은 7장의 이미지에 있어서, 간격 시간이 산출된다(절차 2).

그 다음, 절차 2에서 산출된 간격 시간으로부터, 기준 이미지의 촬영 일시에 대한 이격 값 시간이 산출된다(절차 3).

그 다음, 절차 2에서 산출된 간격 시간 및 절차 3에서 산출된 이격 값 시간으로부터, 각 선택 패턴에 대해서 간격 시간의 합계 및 이격 값 시간의 합계가 산출된다(절차 4).

다음으로, 절차 4에서 산출된 이격 값 시간의 합계를 값이 작은 순서대로 정렬하고, 이격 값 시간의 합계가 가장 작은 선택 패턴이, 기준 이미지와 시간의 관련성이 가장 높은 이미지 군으로서 추출된다(절차 5).

촬영 일시가 다른 기준 이미지를 기초로 다른 7장의 이미지를 읽고, 절차 5에 있어서, 이격 값 시간의 합계가 가장 작은 선택 패턴이 복수 존재하는 경우, 절차 4에서 산출된 간격 시간의 합계를 값이 작은 순서대로 정렬하고, 간격 시간의 합계가 가장 작은 선택 패턴이, 기준 이미지와 시간의 관련성이 가장 높은 이미지 군으로서 추출된다(절차 6).

이러한 처리에 의해, 복수의 이미지로부터 사용자가 원하는 이미지를 더욱 용이하게 추출할 수 있다.

도 3으로 돌아가서, 레이아웃 선택부 53은, 제1 퀵 콜라주 모드 및 제2 퀵 콜라주 모드에 있어서는, 사용자에 의해 수동으로 선택된 레이아웃을 콜라주 이미지에 이용할 레이아웃으로서 선택한다. 또, 레이아웃 선택부 53은, 다이렉트 콜라주 모드에 있어서는, 전회의 콜라주 이미지의 생성에서 선택된 레이아웃을 자동적으로 선택한다. 예를 들면, 레이아웃 선택부 53은, 전회의 콜라주 이미지의 생성에서 선택된 레이아웃을 자동적으로 선택한다. 또한, 다이렉트 콜라주 모드에 있어서, 자동적으로 선택하는 디폴트의 레이아웃을 사용자가 지정할 수 있도록 해도 좋다.

이미지 생성부 54는, 기준 이미지 선택부 51에 의해 선택된 기준 이미지와, 이미지 추출부 52에 의해 추출된 이미지 군의 이미지를, 레이아웃 선택부 53에 의해 선택된 레이아웃의 레이아웃 프레임에 배치하는 것에 의해, 콜라주 이미지를 생성한다. 이때, 이미지 생성부 54는, 레이아웃에 있어서, 기준 이미지를 주 레이아웃 프레임, 다른 이미지를, 기준 이미지와 시간의 관련성이 높은 순(즉, 촬영 시간이 가까운 순)으로, 우선 순위가 높은 레이아웃 프레임에 배치한다. 또, 이미지 생성부 54는, 각 이미지의 크기, 중심 위치 및 회전 각도를 각각의 레이아웃 프레임에 맞춰서 변경한 후, 각 이미지를 각각의 레이아웃 프레임에 배치한다. 이에 의해, 기준 이미지, 이미지 군의 이미지 및 레이아웃으로부터, 하나의 콜라주 이미지가 생성된다.

기본 제어부 55는, 이미지 추출 장치 1의 기본 제어 처리를 실행하고, 메뉴 화면의 생성 처리, 메뉴 화면에 있어서 선택된 각종 조작에 대응하는 처리, 입력부 17에 포함되는 각종 버튼의 조작에 대응하는 처리를 실행한다.

표시 제어부 56은, 이미지 생성 처리에 있어서의 각종 이미지나 메뉴 화면을 디스플레이 18a에 표시시키는 제어를 실행한다. 예를 들면, 표시 제어부 56은, 기준 이미지의 후보를 순차적으로 디스플레이 18a에 표시시키거나, 레이아웃의 후보를 디스플레이 18a에 일람 표시시키거나 한다. 또, 표시 제어부 56은, 이미지 생성부 54에 의해 생성된 콜라주 이미지를 디스플레이 18a에 표시시킨다.

도 7은, 도 3의 기능적 구성을 갖는 도 1a 및 1b에 도시된 이미지 추출 장치 1이 실행하는 이미지 생성 처리의 흐름을 설명하는 흐름도이다.

이미지 생성 처리는, 입력부 17을 통해서 재생 모드로 이행되고, 이미지 기억부 71에 기억되어 있는 이미지가 표시되는 것에 대응해서 개시된다.

단계 S1에 있어서, 기본 제어부 55는, 사용자에 의해 표시 화면에 표시되는 이미지의 선택 조작이 행해졌는지 아닌지의 판정을 행한다.

사용자에 의해 표시 화면에 표시되는 이미지의 선택 조작이 행해진 경우, 단계 S1에 있어서 "예"로 판정되고, 처리는 단계 S2로 이행한다.

한편, 사용자에 의해 표시 화면에 표시되는 이미지의 선택 조작이 행해지지 않는 경우, 단계 S1에 있어서 "아니오"로 판정되고, 처리는 단계 S3으로 이행한다.

단계 S2에 있어서, 기본 제어부 55는, 선택 조작이 행해진 이미지를 표시 화면에 표시시킨다.

단계 S3에 있어서, 기본 제어부 55는, 전방 셔터 버튼 17b가 조작되었는지 아닌지의 판정을 행한다.

전방 셔터 버튼 17b가 조작되지 않는 경우, 단계 S3에 있어서 "아니오"로 판정되고, 처리는 단계 S4로 이행한다.

한편, 전방 셔터 버튼 17b가 조작된 경우, 단계 S3에 있어서 "예"로 판정되고, 처리는 단계 S12로 이행한다.

단계 S4에 있어서, 기본 제어부 55은, 메뉴 조작이 행해졌는지 아닌지의 판정을 행한다.

메뉴 조작이 행해지지 않는 경우, 단계 S4에 있어서 "아니오"로 판정되고, 처리는 단계 S5로 이행한다.

한편, 메뉴 조작이 행해진 경우, 단계 S4에 있어서 "예"로 판정되고, 처리는 단계 S6으로 이행한다.

단계 S5에 있어서, 기본 제어부 55는, 메뉴 조작 이외의 처리(촬영 모드로의 이행 등)를 실행한다.

단계 S5 후에, 이미지 생성 처리는 종료된다.

단계 S6에 있어서, 기본 제어부 55는, 사용자에 의해 제1 퀵 콜라주 모드가 지정되었는지 아닌지의 판정을 행한다.

사용자에 의해 제1 퀵 콜라주 모드가 지정되지 않은 경우, 처리는 단계 S7로 이행한다.

사용자에 의해 제1 퀵 콜라주 모드가 지정된 경우, 처리는 단계 S10으로 이행한다.

단계 S7에 있어서, 기본 제어부 55는, 사용자에 의해 제2 퀵 콜라주 모드가 지정되었는지 아닌지의 판정을 행한다.

사용자에 의해 제2 퀵 콜라주 모드가 지정되지 않은 경우, 처리는 단계 S8로 이행한다.

사용자에 의해 제2 퀵 콜라주 모드가 지정된 경우, 처리는 단계 S9로 이행한다.

단계 S8에 있어서, 기본 제어부 55는, 메뉴 조작으로 선택된 기능에 따른 처리(이미지의 카피나 슬라이드 쇼 등)를 실행한다.

단계 S8 후에, 이미지 생성 처리는 종료된다.

단계 S9에 있어서, 기준 이미지 선택부 51은, 사용자에 의한 기준 이미지의 선택을 수신한다. 이때 사용자에 의해 선택된 이미지가, 기준 이미지 선택부 51에 의해 기준 이미지로 지정된다.

단계 S9 후에, 처리는 단계 S11로 이행한다.

단계 S10에 있어서, 기준 이미지 선택부 51은, 디스플레이 18a에 표시되어 있는 이미지를 기준 이미지로서 선택한다.

단계 S11에 있어서, 레이아웃 선택부 53은, 사용자에 의한 레이아웃의 선택을, 레이아웃을 나타내는 썸네일이 일람 표시되어 있는 선택 화면에서 행해지는 선택 조작으로부터 수신한다. 이때 사용자에 의해 선택된 레이아웃이, 레이아웃 선택부 53에 의해 콜라주 이미지에 채용할 레이아웃으로 지정된다. 한편, 선택 화면의 표시 형태는 썸네일의 일람 표시에 한하지 않고, 레이아웃을 나타내는 명칭의 일람 표시 등이어도 좋다.

단계 S12에 있어서, 기준 이미지 선택부 51은, 디스플레이 18a에 표시되어 있는 이미지를 기준 이미지로서 선택한다.

단계 S13에 있어서, 레이아웃 선택부 53은, 전회의 콜라주 이미지의 생성에서 선택된 레이아웃을 콜라주 이미지에 이용할 레이아웃으로서 선택한다.

단계 S14에 있어서, 이미지 추출부 52는, 콜라주 이미지의 생성에 이용할 이미지의 추출 처리를 실행한다. 구체적으로는, 이미지 추출부 52는, 각 이미지의 시간에 관한 정보를 취득한다. 또, 이미지 추출부 52는, 각 이미지의 시간에 관한 정보를 기초로, 기준 이미지를 중심으로 해서, 시간적으로 인접하는 일 군의 이미지를 이미지 기억부 71로부터 취득한다. 또한, 이미지 추출부 52는, 취득한 일 군의 이미지의 촬영 일시로부터, 간격 시간 및 이격 값 시간을 산출한다. 그리고, 이미지 추출부 52는, 일련의 이미지에 포함되는 각 이미지 군에 대해서 간격 시간의 합계 및 이격 값 시간의 합계를 산출하고, 이들 간격 시간의 합계 및 이격 값 시간의 합계에 기초해서, 각 이미지 군 중에서, 기준 이미지와 시간의 관련성이 가장 높은 이미지 군을 추출한다.

단계 S15에 있어서, 이미지 생성부 54는, 기준 이미지 선택부 51에 의해 선택된 기준 이미지와, 이미지 추출부 52에 의해 추출된 이미지 군의 이미지를, 레이아웃 선택부 53에 의해 선택된 레이아웃의 레이아웃 프레임에 배치하는 것에 의해, 콜라주 이미지를 생성한다.

단계 S16에 있어서, 이미지 생성부 54는, 생성한 콜라주 이미지를 이미지 기억부 71에 기억(저장)한다.

단계 S16 후에, 이미지 생성 처리는 종료된다.

이상과 같은 처리에 의해, 제1 퀵 콜라주 모드에서는, 사용자가 제1 퀵 콜라주 모드로 설정하면, 디스플레이 18a에 표시되어 있는 이미지가 기준 이미지로서 선택되고, 기준 이미지와 시간의 관련성이 높은 이미지 군이 자동적으로 추출된다. 그리고, 사용자가 선택한 레이아웃에 기준 이미지 및 이미지 군의 이미지가 배치되는 것에 의해, 콜라주 이미지가 생성된다.

이에 의해, 복수의 이미지로부터 효과적인 이미지를 용이하게 생성할 수 있다.

또, 다이렉트 콜라주 모드에서는, 디스플레이 18a에 이미지가 표시되어 있을 때에, 사용자가 전방 셔터 버튼 17b를 조작하면, 사용자가 메뉴 조작을 하지 않고, 디스플레이 18a에 표시되어 있는 이미지가 기준 이미지로서 선택되고, 기준 이미지와 시간의 관련성이 높은 이미지 군이 자동적으로 추출된다. 그리고, 전회의 콜라주 이미지의 생성에 이용된 레이아웃이 자동적으로 선택되고, 그 레이아웃에 기준이미지 및 이미지 군의 이미지가 배치되는 것에 의해, 콜라주 이미지가 생성된다.

이에 의해, 사용자가 이미지 군의 이미지나 레이아웃을 선택하는 수고를 줄일 수 있고, 복수의 이미지로부터 효과적인 이미지를 더욱 용이하게 생성할 수 있다.

(응용예 1)

상기 실시 형태에 있어서, 기준 이미지와의 시간의 관련성에 기초해서, 기준 이미지와 함께 콜라주 이미지를 생성할 이미지 군을 추출하는 것으로 했다. 이에 대하여, 각 이미지에 있어서의 시간 이외의 요소에 기초해서, 기준 이미지와의 관련성을 판정할 수 있다.

구체적으로는, 기준 이미지의 피사체와의 관련성에 기초해서, 기준 이미지와의 관련성을 판정할 수 있다.

예를 들면, 기준 이미지에 포함되는 피사체의 얼굴과 일치하는 피사체를 포함하는 이미지를 대상으로 하고, 콜라주 이미지의 생성에 이용할 이미지 군을 추출할 수 있다.

이 경우, 이미지 추출부 52가, 기준 이미지에 포함되는 피사체의 얼굴을 검출하고, 이미지 기억부 71에 기억되어 있는 각 이미지에 있어서, 기준 이미지에 포함되는 피사체의 얼굴과 동일한 얼굴이 포함되는 이미지를 취득한다. 그리고, 이미지 추출부 52는, 취득된 이미지를 대상으로 해서, 기준 이미지와 시간의 관련성이 높은 이미지 군을 추출한다.

이에 의해, 기준 이미지와 동일한 인물의 이미지로 이루어지는 콜라주 이미지를 간단히 생성하는 것이 가능해진다.

또, 각 이미지에 있어서의 시간 이외의 요소로서, 예를 들면, 각 이미지의 촬영 위치에 기초해서, 기준 이미지와의 관련성을 판정할 수 있다.

예를 들면, 기준 이미지와 촬영 위치가 보다 가까운 이미지를 대상으로 해서, 콜라주 이미지의 생성에 이용할 이미지 군을 추출할 수 있다.

이 경우, GPS(Global Psitioning System) 등의 측위 기술을 이용해서 이미지에 촬영 위치의 정보를 부가해 두고, 이미지 추출부 52는, 각 이미지의 촬영 위치를 취득해서, 기준 이미지와 촬영 위치가 보다 가까운 이미지를, 기준 이미지와의 관련성이 보다 높은 것이라고 판정한다.

이에 의해, 기준 이미지와 가까운 위치에서 촬영된 이미지로 이루어지는 콜라주 이미지를 간단히 생성하는 것이 가능해진다.

(응용예 2)

상기 실시 형태에 있어서, 기준 이미지에 대하여 소정 시간 내(예를 들면 1시간 이내 등)의 이미지를 추출하고, 추출된 이미지의 수에 따라서, 레이아웃을 자동적으로 선택하는 것으로 하여도 좋다. 그리고, 레이아웃을 선택할 때에, 전회의 콜라주 이미지의 생성에 이용된 레이아웃과 근사한 레이아웃을 자동적으로 선택하는 것으로 해도 좋다. 즉, 레이아웃을 배경의 종류나 레이아웃 프레임의 위치 관계에 따라서, 근사한 것끼리의 그룹으로 분류해 두고, 전회의 콜라주 이미지의 생성에 이용된 레이아웃과 동일한 그룹 내의 레이아웃을 자동적으로 선택할 수 있다.

이에 의해, 사용자가 이미지 군의 이미지나 레이아웃을 선택하는 수고를 줄일 수 있고, 콜라주 이미지를 더욱 간단히 생성하는 것이 가능해진다.

(응용예 3)

상기 실시 형태에 있어서, 기준 이미지와의 시간의 관련성에 기초해서, 기준 이미지와 함께 콜라주 이미지를 생성할 이미지 군을 추출할 때에, 달력의 해마다 또는 달마다 시간의 관련성을 판정하는 것으로 해도 좋다. 즉, 시간의 관련성을 판정할 때에, 년 또는 월의 정보를 마스크하고, 월 이하 또는 일 이하의 단위로 시간의 관련성을 판정하는 것에 의해, 각 연도의 같은 시기 또는 각 달의 같은 시기를 시간의 관련성이 높은 것이라고 판정할 수 있다.

이에 의해, 매년 또는 매월의 같은 시기의 이벤트(생일이나 월례의 발표회 등)에서 촬영된 이미지로 이루어지는 콜라주 이미지를 간단히 생성할 수 있다.

(응용예 4)

상기 실시 형태에 있어서, 레이아웃을 선택할 때에, 콜라주 이미지에 이용될 이미지의 매수에 따라서, 레이아웃을 자동적으로 선택하는 것으로 해도 좋다. 즉, 이미지 추출부 52에 의해 추출된 이미지 군에 포함되는 이미지의 매수에 맞춘 레이아웃 프레임의 수를 갖는 레이아웃을, 레이아웃 선택부 53이, 자동적으로 1개 또는 여러개 선택하는 것으로 해도 좋다.

이에 의해, 사용자가 레이아웃을 선택하는 수고를 줄일 수 있고, 콜라주 이미지를 더욱 간단히 생성하는 것이 가능해 진다.

상기와 같이 구성되는 이미지 추출 장치 1은, 기준 이미지 선택부 51과, 이미지 추출부 52를 포함한다.

기준 이미지 선택부 51은, 하나의 이미지를 기준 이미지로서 선택한다.

이미지 추출부 52은, 이미지의 시간에 관한 정보를 취득한다.

또한, 이미지 추출부 52는, 상기 취득된 시간에 관한 정보에 기초해서, 상기 기준 이미지 선택부 51에 의해 선택된 기준 이미지에 대하여 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출한다.

이에 의해, 기준 이미지와 시간의 관련성이 높은 적어도 하나의 이미지를 자동적으로 선택할 수 있다.

따라서, 복수의 이미지로부터 원하는 이미지를 더욱 용이하게 추출할 수 있다.

몇몇 실시예에서, 이미지 추출부 52는, 기준 이미지를 포함하는 이미지의 시간에 관한 정보를 취득한다.

이에 의해, 기준 이미지를 포함하는 이미지의 시간에 관한 정보를 기초로, 다른 복수의 이미지에 대해서 시간의 관련성을 판단할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 시간에 관한 정보에 기초해서, 시간으로 배열된 복수의 이미지로부터, 기준 이미지의 시간에 관한 정보와 시간적으로 연속하는 시간에 관한 정보를 갖는 이미지의 조합을 추출한다.

이에 의해, 기준 이미지와 시간적으로 연속하는 적절한 이미지의 조합을 용이하게 추출할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 추출에 앞서, 시간에 관한 정보 및 소정의 이미지 수에 기초해서, 시간적으로 연속하는 이미지의 조합으로서 추출의 후보가 될 수 있는, 시간적으로 연속하는 시간에 관한 정보를 갖는 복수의 이미지들로 범위를 좁히고, 좁힌 범위에서 추출을 행한다.

이에 의해, 기준 이미지와 시간적으로 연속하는 적절한 이미지의 조합을 효율적으로 추출할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 기준 이미지를 포함하는 소정의 이미지 수만큼 시간적으로 전후로 연속하는 시간에 관한 정보를 갖는 복수의 이미지로 범위를 좁히고, 좁힌 범위에서 소정의 이미지 수만큼의 이미지를 추출한다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 기준 이미지와 다른 복수의 이미지의 시간의 관련성을 소정의 기준으로 평가하고, 그 평가 결과에 기초해서, 적어도 하나의 이미지를 소정의 이미지 수만큼 추출한다.

이에 의해, 기준 이미지와 시간적으로 연속하는 적절한 이미지를 추출할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 기준 이미지의 시간에 관한 정보와 다른 이미지가 갖는 시간에 관한 정보와의 차이를, 제1 차이로서 산출하고, 산출한 제1 차이에 기초해서, 적어도 하나의 이미지를 추출한다.

이에 의해, 기준 이미지와의 시간에 관한 정보의 차이를 고려해서, 적어도 하나의 이미지를 추출할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 시간적으로 인접하는 시간에 관한 정보를 갖는 복수의 이미지의 각각의, 제1 차이의 합계에 기초해서, 적어도 하나의 이미지를 추출한다.

이에 의해, 기준 이미지와의 시간에 관한 정보의 차이의 합계를 고려해서, 적어도 하나의 이미지를 추출할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 시간적으로 인접하는 두 개의 이미지가 갖는 시간에 관한 정보의 차이를 제2 차이로서 산출하고, 산출한 제2 차이에 기초해서, 적어도 하나의 이미지를 추출한다.

이에 의해, 시간적으로 인접하는 이미지와의 시간에 관한 정보의 차이를 고려해서, 적어도 하나의 이미지를 추출할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 복수의 이미지 중 시간적으로 인접하는 시간에 관한 정보를 갖는 두 개의 이미지마다의, 제2 차이의 합계에 기초해서, 적어도 하나의 이미지를 추출한다.

이에 의해, 시간적으로 인접하는 이미지와의 시간에 관한 정보의 차이의 합계를 고려해서, 적어도 하나의 이미지를 추출할 수 있다.

또, 몇몇 실시예에서, 이미지 추출부 52는, 시간에 관한 정보에 기초해서, 시간으로 배열된 복수의 이미지로부터, 기준 이미지의 시간에 관한 정보와 소정의 시간의 주기로 시간적으로 근사한 시간에 관한 정보를 갖는 이미지들의 조합을 추출한다.

이에 의해, 소정의 주기마다 취득된 이미지를 적절하고 용이하게 추출할 수 있다.

또한, 본 발명은, 상기한 실시 형태로 한정되는 것은 아니고, 본 발명의 목적을 달성할 수 있는 범위에서의 변형, 개량 등은 본 발명에 포함되는 것이다.

상기 실시 형태에서는, 레이아웃을 공간적인 배치라고 했지만, 이것으로 한정되지 않는다. 즉, 시간적인 배치도 좋다.

예를 들면, 상기 실시 형태와 마찬가지로 기준이 되는 이미지를 선택하고, 기준이 되는 이미지와 관련성을 갖는 이미지를 자동적으로 추출한 후에, 기준이 되는 이미지 및 추출된 이미지로부터 1개의 동영상을 생성하는 경우에, 본 발명을 적용할 수 있다.

이 경우, 상기 실시 형태에 있어서의 레이아웃의 레이아웃 프레임은, 각 이미지의 시간 축 상의 배치 순서에 대응시킬 수 있고, 레이아웃의 배경은, 각 이미지를 연결하는 연출의 패턴 등에 대응시킬 수 있다.

또, 기준 이미지를 포함하는 복수의 이미지에 의해 콜라주 이미지를 생성하는 경우에 본 발명을 적용하는 것으로 했지만, 이것으로 한정되지 않는다. 즉, 이미지 이외를 대상으로 해서, 본 발명을 적용할 수 있다. 예를 들면, 문서, 음악 등의 각종 콘텐츠에 본 발명을 적용할 수 있다.

또, 상기 실시 형태에서는, 기준 이미지와 이미지 군과의 시간의 관련성을 판정할 때에, 이격 값 시간의 합계를 간격 시간의 합계보다도 우선해서 판정하는 것으로 했지만, 이것으로 한정되지 않는다. 즉, 간격 시간의 합계를 이격 값 시간의 합계보다도 우선해서 판정하거나, 이격 값 시간의 합계 또는 간격 시간의 합계 중 어느 하나만을 판정해도 좋다. 또, 이격 값 시간 또는 간격 시간의 합계를 산출할 때에, 이격 값 시간 또는 간격 시간을 단순 가산하는 경우 외에, 이격 값 시간 또는 간격 시간 각각을 제곱해서 가산하는 것이 가능하다. 또, 이격 값 시간 또는 간격 시간의 합계 외에, 이격 값 시간 또는 간격 시간끼리를 곱해서 얻은 값이 더 작은 것을 기준 이미지와의 시간의 관련성이 큰 것이라고 판정해도 좋다.

또, 상기 실시 형태에서는, 본 발명이 적용되는 이미지 추출 장치 1은, 디지털 카메라를 예로서 설명했지만, 특별히 이것으로 한정되지 않는다.

예를 들면, 본 발명은, 화상 처리 기능을 갖는 전자 기기 일반에 적용할 수 있다. 구체적으로는, 예를 들면, 본 발명은, 노트형의 PC, 프린터, 텔레비전 수상기, 비디오 카메라, 휴대형 네비게이션 장치, 휴대 전화기, 스마트폰, 포터블 게임기 등에 적용가능하다.

상기한 일련의 처리는, 하드웨어에 의해 실행시킬 수도 있고, 소프트웨어에 의해 실행시킬 수도 있다.

환언하면, 도 3의 기능적 구성은 예시에 지나지 않고, 특별히 한정되지 않는다. 즉, 상기한 일련의 처리를 전체로서 실행할 수 있는 기능이 이미지 추출 장치 1에 구비되어 있으면 충분하고, 이 기능을 실현하기 위해서 어떤 기능 블록을 이용할 것일지는 특별히 도 3의 예로 한정되지 않는다.

또, 한 개의 기능 블록은, 하나의 하드웨어로 구성해도 좋고, 하나의 소프트웨어로 구성해도 좋고, 이들의 조합으로 구성해도 좋다.

일련의 처리를 소프트웨어에 의해 실행시키는 경우에는, 그 소프트웨어를 구성하는 프로그램이, 컴퓨터 등에 네트워크나 기록 매체로부터 인스톨된다.

컴퓨터는, 전용의 하드웨어에 갖추어져 있는 컴퓨터이어도 좋다. 또한, 컴퓨터는, 각종 프로그램을 인스톨하는 것으로, 각종 기능을 실행하는 것이 가능한 컴퓨터, 예를 들면, 범용 PC여도 좋다.

이러한 프로그램을 포함하는 기록 매체는, 사용자에게 프로그램을 제공하기 위해서 장치 본체와는 별도로 배포되는 도 2의 리무버블(removable) 미디어 31에 의해 구성될 뿐만 아니라, 장치 본체에 미리 갖추어진 상태로 사용자에게 제공되는 기록 매체 등으로 구성된다. 리무버블 미디어 31은, 예를 들면, 자기 디스크(floppy disk를 포함함), 광 디스크, 또는 광자기 디스크 등에 의해 구성된다. 광 디스크는, 예를 들면, CD-ROM(Compact Disk-Read Only Memory), DVD(Digital Versatile Disk), Blu-ray(등록상표) Disc(블루레이 디스크) 등에 의해 구성된다. 광자기 디스크는, MD(Mini-Disk) 등으로 구성된다. 또, 장치 본체에 미리 갖추어진 상태로 사용자에게 제공되는 기록 매체는, 예를 들면, 프로그램이 기록되어 있는 도 2의 ROM 12나, 도 2의 기억부 19에 포함되는 하드 디스크 등으로 구성된다.

또한, 본 명세서에 있어서, 기록 매체에 기록되는 프로그램을 기술하는 단계는, 그 순서에 따라 시계열적으로 행해지는 처리는 물론, 반드시 시계열적으로 처리되지 않더라도, 병렬적 또는 개별적으로 실행되는 처리도 포함하는 것이다.

이상, 본 발명의 몇 가지의 실시 형태에 대해서 설명했지만, 이 실시 형태는, 예시에 지나지 않고, 본 발명의 기술적 범위를 한정하는 것은 아니다. 본 발명은 기타 다양한 실시 형태를 취하는 것이 가능하고, 본 발명의 요지를 일탈하지 않는 범위에서, 생략이나 치환 등 여러 가지 변경을 행할 수 있다. 이들 실시 형태나 그 변형은, 본 명세서 등에 기재된 발명의 범위나 요지에 포함되는 동시에, 특허청구의 범위에 기재된 발명과 그 균등한 범위에 포함된다.

Claims

하나의 이미지를 기준 이미지로서 선택하는 이미지 선택부와,
이미지의 시간에 관한 정보를 취득하는 취득부와,
상기 취득부에 의해 취득되는 시간에 관한 정보에 기초해서, 상기 이미지 선택부에 의해 선택된 기준 이미지에 대하여 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출하는 추출부
를 포함하는 이미지 추출 장치.
제1항에 있어서,
상기 취득부는, 상기 기준 이미지를 포함하는 이미지의 시간에 관한 정보를 취득하는, 이미지 추출 장치.
제2항에 있어서,
상기 추출부는, 상기 시간에 관한 정보에 기초해서, 시간으로 배열된 복수의 이미지로부터, 상기 기준 이미지의 시간에 관한 정보와 시간적으로 연속하는 시간에 관한 정보를 갖는 이미지들의 조합을 추출하는,
이미지 추출 장치.
제3항에 있어서,
상기 추출부는, 상기 추출 이전에, 상기 시간에 관한 정보 및 상기 소정의 이미지 수에 기초해서, 시간적으로 연속하는 조합으로서 후보가 될 수 있는, 시간적으로 연속하는 시간에 관한 정보를 갖는 복수의 이미지로 범위를 좁히고, 좁힌 범위에서 추출을 행하는,
이미지 추출 장치.
제4항에 있어서,
상기 추출부는, 상기 기준 이미지를 포함하는, 상기 소정의 이미지 수만큼 시간적으로 전후로 연속하는 시간에 관한 정보를 갖는 복수의 이미지로 범위를 좁히고, 좁힌 범위에서 상기 소정의 이미지 수만큼의 이미지를 추출하는,
이미지 추출 장치.
제2항에 있어서,
상기 추출부는, 상기 기준 이미지와 다른 복수의 이미지의 시간의 관련성을 소정의 기준으로 평가하고, 그 평가 결과에 기초해서, 적어도 하나의 이미지를 상기 소정의 이미지 수만큼 추출하는,
이미지 추출 장치.
제6항에 있어서,
상기 추출부는, 상기 기준 이미지의 시간에 관한 정보와 다른 이미지가 갖는 시간에 관한 정보의 차이를, 제1 차이로서 산출하는 제1 산출부를 포함하고, 상기 제1 산출부에 의해 산출된 제1 차이에 기초해서, 적어도 하나의 이미지를 추출하는,
이미지 추출 장치.
제7항에 있어서,
상기 추출부는, 시간적으로 인접하는 시간에 관한 정보를 갖는 복수의 이미지의 각각의 상기 제1 차이의 합계에 기초해서, 적어도 하나의 이미지를 추출하는,
이미지 추출 장치.
제6항에 있어서,
상기 추출부는, 시간적으로 인접하는 두 개의 이미지가 갖는 시간에 관한 정보의 차이를 제2 차이로서 산출하는 제2 산출부를 포함하고, 상기 제2 산출부에 의해 산출된 제2 차이에 기초해서, 적어도 하나의 이미지를 추출하는,
이미지 추출 장치.
제9항에 있어서,
상기 추출부는, 복수의 이미지 중 시간적으로 인접하는 시간에 관한 정보를 갖는 두 개의 이미지마다의, 상기 제2 차이의 합계에 기초해서, 적어도 하나의 이미지를 추출하는,
이미지 추출 장치.
제6항에 있어서,
상기 추출부는, 시간에 관한 정보에 기초해서, 시간으로 배열된 복수의 이미지로부터, 상기 기준 이미지의 시간에 관한 정보와, 소정의 시간의 주기로 시간적으로 근사한 시간에 관한 정보를 갖는 이미지들의 조합을 추출하는,
이미지 추출 장치.
이미지 추출 장치에 의해 실행되는 이미지 추출 방법에 있어서,
하나의 이미지를 기준 이미지로서 선택하는 이미지 선택 처리와,
이미지의 시간에 관한 정보를 취득하는 취득 처리와,
상기 취득 처리에 의해서 취득되는 시간에 관한 정보에 기초해서, 상기 이미지 선택 처리에 의해서 선택된 기준 이미지에, 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출하는 추출 처리
를 포함하는 이미지 추출 방법.
이미지를 추출하는 장치에,
하나의 이미지를 기준 이미지로서 선택하는 이미지 선택 기능과,
이미지의 시간에 관한 정보를 취득하는 취득 기능과,
상기 취득 기능에 의해 취득되는 시간에 관한 정보에 기초해서, 상기 이미지 선택 기능에 의해 선택된 기준 이미지에, 시간의 관련성이 보다 높은 적어도 하나의 이미지를 소정의 이미지 수만큼 추출하는 추출 기능
을 실현시키는, 컴퓨터로 읽을 수 있는 기록 매체에 저장된 프로그램.