KR101662074B1 - 제어 장치, 카메라 시스템 및 기록 매체 - Google Patents

제어 장치, 카메라 시스템 및 기록 매체 Download PDF

Info

Publication number
KR101662074B1
KR101662074B1 KR1020117028827A KR20117028827A KR101662074B1 KR 101662074 B1 KR101662074 B1 KR 101662074B1 KR 1020117028827 A KR1020117028827 A KR 1020117028827A KR 20117028827 A KR20117028827 A KR 20117028827A KR 101662074 B1 KR101662074 B1 KR 101662074B1
Authority
KR
South Korea
Prior art keywords
image
panoramic image
camera
display
panorama
Prior art date
Application number
KR1020117028827A
Other languages
English (en)
Other versions
KR20120030403A (ko
Inventor
가즈노리 사까끼
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20120030403A publication Critical patent/KR20120030403A/ko
Application granted granted Critical
Publication of KR101662074B1 publication Critical patent/KR101662074B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678—User interface
    • G08B13/19691—Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G06T3/4038—Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]

Abstract

본 발명에 따른 제어 장치는, 카메라 단말 장치(200)에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 파노라마 화상에 지정된 위치에 대응하는 영역을 확대하여 확대 화상을 표시하는 확대 화상 표시 영역을, 표시하도록 제어하는 표시 처리부(305)와, 파노라마 화상 상에 지정된 위치에 대응하는 영역을 카메라 단말 장치(200)에 의해 촬상하도록 제어하는 제어부(310)를 가지며, 표시 처리부(305)는, 제어부(310)의 제어에 의해 카메라 단말 장치(200)에 의해 촬영된화상을 확대 화상 표시 영역에 표시하고, 파노라마 화상은, 원형의 파노라마 화상인 센터 서버(300)가 제공된다.

Description

제어 장치, 카메라 시스템 및 기록 매체{CONTROL DEVICE, CAMERA SYSTEM, AND RECORDING MEDIUM}
본 발명은, 제어 장치, 카메라 시스템 및 프로그램에 관한 것이다.
종래, 예를 들면 아래와 같은 특허 문헌 1에 기재되어 있는 바와 같이, 촬상 장치의 촬상 방향을 신속하게 목적으로 하는 방향으로 이동시키는 것을 목적으로 한 촬상 시스템이 알려져 있다.
특허 문헌 1:일본 특허 공개 제 2007-43505호 공보
특허 문헌 1에 기재된 기술은, 장방형의 파노라마 화상에 기초하여 촬상 장치의 촬상 방향을 이동시키도록 제어하는 것이다. 그러나, 파노라마 화상에 대응하는 촬상 대상이, 장방형의 경우 밖에, 파노라마 화상에 기초한 제어가 직감적으로는 되지 않는다는 과제를 발생시킨다.
그래서, 본 발명은, 상기 과제에 비추어 이루어진 것으로, 본 발명이 목적으로 하는 것은, 촬상 대상이 장방형 이외의 경우에도, 파노라마 화상에 기초한 촬상 장치의 촬상 방향의 제어를 보다 직감적으로 할 수 있는 제어 장치, 카메라 시스템 및 프로그램을 제공하는 것이다.
상기 과제를 해결하기 위하여, 본 발명의 어느 관점에 따르면, 카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에 지정된 위치에 대응하는 영역을 확대하여 확대 화상을 표시하는 확대 화상 표시 영역을, 표시하도록 제어하는 표시 제어부와, 상기 파노라마 화상 상에 지정된 위치에 대응하는 영역을 상기 카메라에 의해 촬상하도록 제어하는 카메라 제어부를 가지며, 상기 표시 제어부는, 상기 카메라 제어부의 제어에 의해 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고, 상기 파노라마 화상은 원형의 파노라마 화상인 제어 장치가 제공된다.
또, 상기 원형의 파노라마 화상은 상기 카메라에 의해 복수회 촬영된 화상에 기초하여 생성된 것이어도 된다.
또, 상기 표시 제어부는 파노라마 화상 전환 조작에 따라 상기 파노라마 화상 표시 영역에 표시하는 파노라마 화상을 원형의 파노라마 화상으로부터 장방형의 파노라마 화상으로 전환하는 것이어도 된다.
또, 상기 표시 제어부는 상기 파노라마 화상 표시 영역에 원형의 파노라마 화상 및 장방형의 파노라마 화상을 표시하는 것이어도 된다.
또, 상기 표시 제어부는 상기 파노라마 화상 표시 영역을 화면상에서 이동시키는 것이 가능한 것이어도 된다.
또, 상기 과제를 해결하기 위하여, 본 발명의 다른 관점에 따르면, 카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에 지정된 위치에 대응하는 영역을 확대하여 확대 화상을 표시하는 확대 화상 표시 영역을, 표시하도록 제어하는 표시 제어부와, 상기 파노라마 화상 상에 지정된 위치에 대응하는 영역을 상기 카메라에 의해 촬상하도록 제어하는 카메라 제어부를 가지며, 상기 표시 제어부는, 상기 카메라 제어부의 제어에 의해 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고,
상기 표시 제어부는 파노라마 화상 전환 조작에 따라 상기 파노라마 화상의 형상을 전환하는 제어 장치가 제공된다.
또, 상기 표시 제어부는 파노라마 화상 전환 조작에 따라 상기 파노라마 화상의 형상을, 원형으로부터 장방형으로 전환하는 것이어도 된다.
또, 상기 과제를 해결하기 위하여, 본 발명의 다른 관점에 따르면, 화상을 촬상하는 카메라와, 상기 카메라를 제어하는 제어 장치를 갖는 카메라 시스템으로서, 상기 제어 장치는, 상기 카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에 지정된 위치에 대응하는 영역을 확대하여 확대 화상을 표시하는 확대 화상 표시 영역을, 표시하도록 제어하는 표시 제어부와, 상기 파노라마 화상 상에 지정된 위치에 대응하는 영역을 상기 카메라에 의해 촬상하도록 제어하는 카메라 제어부를 가지며, 상기 표시 제어부는, 상기 카메라 제어부의 제어에 의해 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고, 상기 파노라마 화상은 원형의 파노라마 화상인 카메라 시스템이 제공된다.
또, 상기 원형의 파노라마 화상은 상기 카메라에 의해 복수회 촬영된 화상에 기초하여 생성된 것이어도 된다.
또, 상기 표시 제어부는 파노라마 화상 전환 조작에 따라 상기 파노라마 화상 표시 영역에 표시하는 파노라마 화상을 원형의 파노라마 화상으로부터 장방형의 파노라마 화상으로 전환하는 것이어도 된다.
또, 상기 표시 제어부는 상기 파노라마 화상 표시 영역에 원형의 파노라마 화상 및 장방형의 파노라마 화상을 표시하는 것이어도 된다.
또, 상기 표시 제어부는 상기 파노라마 화상 표시 영역을 화면상에서 이동시키는 것이 가능한 것이어도 된다.
또, 상기 과제를 해결하기 위하여, 본 발명의 다른 관점에 따르면, 화상을 촬상하는 카메라와, 상기 카메라를 제어하는 제어 장치를 갖는 카메라 시스템으로서, 상기 제어 장치는, 카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에 지정된 위치에 대응하는 영역을 확대하여 확대 화상을 표시하는 확대 화상 표시 영역을 표시하도록 제어하는 표시 제어부와, 상기 파노라마 화상 상에 지정된 위치에 대응하는 영역을 상기 카메라에 의해 촬상하도록 제어하는 카메라 제어부를 가지며, 상기 표시 제어부는 상기 카메라 제어부의 제어에 의해 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고, 상기 표시 제어부는 파노라마 화상 전환 조작에 따라 상기 파노라마 화상의 형상을 전환하는 카메라 시스템이 제공된다.
또, 상기 표시 제어부는 파노라마 화상 전환 조작에 따라 상기 파노라마 화상의 형상을, 원형으로부터 장방형으로 전환하는 것이어도 된다.
또, 상기 과제를 해결하기 위하여, 본 발명의 다른 관점에 따르면, 카메라에 의해 촬상된 원형의 파노라마 화상을 표시하는 파노라마 화상 표시 영역과 상기 카메라에 의해 촬영된 화상 중 상기 파노라마 화상에 지정된 위치에 대응하는 영역을 확대하여 확대 화상을 표시하는 확대 화상 표시 영역을 표시하도록 제어하는 제1 수단, 상기 파노라마 화상 상에 지정된 위치에 대응하는 영역을 상기 카메라에 의해 촬상하도록 제어하는 제2 수단으로서 컴퓨터를 기능시키기 위한 프로그램이 제공된다.
또, 상기 원형의 파노라마 화상은 상기 카메라에 의해 복수회 촬영된 화상에 기초하여 생성된 것이어도 된다.
또, 상기 제1 수단은 파노라마 화상 전환 조작에 따라 상기 파노라마 화상 표시 영역에 표시하는 파노라마 화상을 원형의 파노라마 화상으로부터 장방형의 파노라마 화상으로 전환하는 것이어도 된다.
또, 상기 제1 수단은 상기 파노라마 화상 표시 영역에 원형의 파노라마 화상 및 장방형의 파노라마 화상을 표시하는 것이어도 된다.
또, 상기 제1 수단은 상기 파노라마 화상 표시 영역을 화면상에서 이동시키는 것이 가능한 것이어도 된다.
본 발명에 따르면, 파노라마 화상 상에서, 촬상 장치의 촬상 방향의 제어를 보다 직감적으로 할 수 있는, 제어 장치, 카메라 시스템 및 프로그램을 제공할 수 있다.
도 1은 본 발명의 일 실시 형태에 따른 촬상 시스템의 전체 구성을 도시하는 모식도이다.
도 2는 도 1의 시스템에서 카메라 단말 장치와 센터 서버의 구성을 상세하게 도시하는 모식도이다.
도 3은 카메라 단말 장치(200)의 팬 동작, 틸트 동작을 설명하기 위한 모식도이다.
도 4는 파노라마 화상와 부감(俯瞰) 화상의 표시 상태를 도시하는 모식도이다.
도 5는 부감 화상 신호 DF를 생성하는 처리를 설명하기 위한 모식도이다.
도 6은 부감 화상 신호 DF를 생성하는 처리를 설명하기 위한 모식도이다.
도 7은 부감 화상 신호 DF를 생성하는 처리를 설명하기 위한 모식도이다.
도 8은 부감 화상 신호 DF를 생성하는 처리를 설명하기 위한 모식도이다.
도 9는 모니터의 표시 화면을 도시하는 모식도이다.
도 10은 조작 패널에 의한 조작을 설명하기 위한 모식도이다.
도 11은 패널 "View"를 클릭했을 경우에 "Screen Mode", "View Size" "Image Codec", "Frame Rate" 등의 메뉴가 표시된 상태를 도시하는 모식도이다.
도 12는 패널 "Camera"를 클릭했을 경우에 표시되는 메뉴를 도시하는 모식도이다.
도 13은 "Preset position", "Trigger", "Other", "information"를 클릭했을 경우에 표시되는 각 메뉴를 도시하는 모식도이다.
도 14는 부감 화상의 표시에 대하여 설명하기 위한 모식도이다.
도 15는 부감 화상의 표시에 대하여 설명하기 위한 모식도이다.
도 16은 부감 화상의 표시에 대하여 설명하기 위한 모식도이다.
도 17은 부감 화상의 표시에 대하여 설명하기 위한 모식도이다.
도 18은 부감 화상의 표시에 대하여 설명하기 위한 모식도이다.
도 19는 통상의 파노라마 화상 대신에, 원통형의 곡면에 파노라마 화상을 표시하여 참조 화상으로 한 예를 도시하는 모식도이다.
도 20은 제1 파노라마 화상의 표시에 의한 효과에 대해 설명하기 위한 모식도이다.
도 21은 제1 파노라마 화상의 표시에 의한 효과에 대해 설명하기 위한 모식도이다.
도 22는 제1 파노라마 화상의 표시에 의한 효과에 대해 설명하기 위한 모식도이다.
이하에 첨부 도면을 참조하면서, 본 발명의 바람직한 실시의 형태에 대하여 상세하게 설명한다. 또한, 본 명세서 및 도면에서, 실질적으로 동일한 기능 구성을 갖는 구성 요소에 대해서는, 동일한 부호를 붙여 중복 설명을 생략한다.
또한, 설명은 이하의 순서로 실시하는 것으로 한다.
1. 제1 실시의 형태(카메라 단말 장치와 서버로 이루어지는 촬상 시스템의 예)
(1) 촬상 시스템의 구성예
(2) 카메라 단말 장치와 센터 서버의 구성예
(3) 제1 파노라마 화상 및 제2 파노라마 화상의 표시 동작에 대하여
(4) 제1 파노라마 화상을 생성하는 처리에 대하여
(5) GUI에 대하여
(6) 제1 파노라마 화상 상에서의 촬영 방향의 지정
<1.제1 실시 형태>
(1) 촬상 시스템의 구성예
도 1은, 본 발명의 일 실시 형태에 따른 촬상 시스템의 전체 구성을 도시하는 모식도이다. 촬상 시스템(100)은, 카메라 단말 장치(IP 카메라)(200), 센터 서버(300), 클라이언트(400)를 가지고 있고, 복수의 카메라 단말 장치(200), 센터 서버(300) 및 클라이언트(400)는, 네트워크(500)를 개재하여 접속되어 있다. 또, 네트워크(500)에는, 프록시 서버(600)가 접속되어 있고, 프록시 서버(600)에는 복수의 카메라 단말 장치(200)가 접속되어 있다. 또, 센터 서버(300)에는 모니터(310)가 접속되어 있다. 본 실시 형태에서, 카메라 단말 장치(200)는, 예를 들면 옥내 또는 옥외에 설치되는 감시 카메라로서, 카메라 단말 장치(200)에서 취득한 화상을 센터 서버(300)의 모니터(310)에 표시함으로써, 카메라 단말 장치(200)가 설치된 영역을 감시할 수 있다. 클라이언트(400)는, 네트워크(500)를 개재하여 카메라 단말 장치(200), 센터 서버(300), 또는 프록시 서버(600)와 접속된다. 또, 클라이언트(400)는, 후술하는 센터 서버(300)의 기능과 모니터(310)의 기능을 구비하는 것이어도 좋다. 카메라 단말 장치(200)에 의해 촬영된 영상은, 네트워크(500)를 개재하여 클라이언트(400)에 보내져 클라이언트(400)의 표시 화면에는 후술하는 라이브 영상과 함께 제1 파노라마 화상, 제2 파노라마 화상이 표시된다. 또한, 카메라 단말 장치(200)의 예로서 IP 카메라를 들고 있지만, 이것으로 한정되지 않고, 아날로그 카메라이어도 된다.
파노라마 화상은, 카메라 단말 장치(200)로 촬상 가능한 범위를 나타내고 있다. 파노라마 화상에는, 여러가지 형상이 있고, 예를 들면, 도 4와 같이, 원형의 파노라마 화상이나 장방형의 파노라마 화상, 도 19와 같이, 원통면 상에 투사한 것과 같은 고리 형상의 파노라마 화상 등이 있다. 이하, 실시 형태에서, 제1 파노라마 화상 및 제2 파노라마 화상의 예로서 각각 원형의 파노라마 화상 및 장방형의 파노라마 화상을 들어 설명한다.
(2) 카메라 단말 장치와 센터 서버의 구성예
도 2는, 도 1의 시스템에서, 카메라 단말 장치(200)와 센터 서버(300)의 구성을 상세하게 도시하는 모식도이다. 도 2에 나타내는 카메라 단말 장치(200) 또는 센터 서버(300)의 각 구성 요소는, 하드웨어(회로 등) 또는, CPU 등의 연산 처리 장치와 이것을 기능시키기 위한 소프트웨어(프로그램)에 의해 구성할 수 있다. 카메라 단말 장치(200)의 카메라부(201)는, 촬상 광학계를 포함하고, 후술하는 단말 제어부(210)로부터 공급된 촬상 제어 신호 CTa에 기초하여 촬상 동작을 실시하여 영상 신호 Dcam을 생성한다. 또, 카메라부(201)는, 생성된 영상 신호 Dcam을, 버스(220)을 개재하여 신호 처리부(202)에 공급한다. 또한, 버스(220)에는, 메모리부(203), 촬상 방향 제어부(204), 네트워크 인터페이스부(206), 기억부(207), 단말 제어부(210)도 접속되어 있다.
신호 처리부(202)는, 영상 신호 Dcam의 압축 처리를 실시하고, 얻어진 영상 부호화 신호 DV를 메모리부(203)에 기억시킨다. 또, 카메라부(201)의 촬상 방향을 순차 이동하여 얻어진 영상 신호 Dcam을 이용하여 제1 파노라마 화상의 영상 신호(이하 「제1 파노라마 화상 신호라고 한다」DF 및 제2 파노라마 화상의 영상 신호(이하 「제2 파노라마 화상 신호」라고 한다) DP를 생성하여 기억부(207)에 기억시킨다. 또한, 영상 신호 Dcam의 압축 처리나, 제1 파노라마 화상 신호 DF 또는 제2 파노라마 화상 신호 DP의 생성은, 후술하는 단말 제어부(210)으로부터 공급된 신호 처리 제어 신호 CTb에 기초하여 실시한다.
촬상 방향 제어부(204)는, 카메라부(201)의 촬상 방향을, 후술하는 단말 제어부(210)로부터 공급된 방향 제어 신호 CTc에 의해 지시된 방향으로 이동시키기 위해, 촬상 방향을 이동할 때의 속도나 가속도의 계산을 실시한다. 또, 계산 결과에 기초하여 팬 동작을 행하기 위한 구동 신호 MDp나 틸트 동작을 행하기 위한 구동 신호 MDt를 생성하여 촬상 방향 조정부(205)로 공급한다. 또, 촬상 방향 제어부(204)는, 카메라부(201)의 촬상 방향이 어느 방향인지를 나타내는 카메라 위치 정보 신호 PM를 생성하여 단말 제어부(210)에 공급한다.
촬상 방향 조정부(205)는, 카메라부(201)를 좌우 방향으로 이동시키는 팬 동작 모터와 카메라부(201)를 상하 방향으로 이동시키는 틸트 동작 모터를 가지고 있다. 촬상 방향 조정부(205)는, 구동 신호 MDp에 의해서 팬 동작 모터, 구동 신호 MDt에 의해 틸트 동작 모터를 각각 구동하고, 카메라부(201)의 촬상 방향을 방향 제어 신호 CTc에 의해 지시된 방향으로 조정한다. 또, 촬상 방향 조정부(205)는, 동작 범위가 제한되지 않고 엔드리스로 팬 동작을 실시하는 것으로 한다.
도 3은, 카메라 단말 장치(200)의 팬 동작, 틸트 동작을 설명하기 위한 모식도로서, 카메라 단말 장치(200)를 천정 등에 장착했을 경우를 나타내고 있다. 여기서, 도 3의 (B)는, 본 실시 형태에 따른 카메라 단말 장치(200)의 팬ㆍ틸트 동작을 나타내고 있다. 한편, 도 3의 (A)는, 비교를 위해 일반적인 카메라 단말 장치의 팬ㆍ틸트 동작을 나타내고 있다. 도 3의 (A)에 나타내는 바와 같이, 일반적인 카메라 단말 장치에서는, 팬 동작을 360°의 엔드리스로 실시하고, 틸트 동작에 대해서는, 연직 방향에서 수평 방향까지의 90°의 범위에서 실시한다. 이에 대하여, 본 실시 형태에 따른 카메라 단말 장치(200)는, 팬 동작을 360°의 엔드리스로 실시함과 동시에, 틸트 동작에 대해서는, 연직 방향을 중심으로 220°의 범위에서 실시할 수 있다. 따라서, 후술하는 수법에 의해 제1 파노라마 화상의 영상 신호 DF를 생성하여 기억부(207)에 기억할 수 있다. 후술하는 제1 파노라마 화상은, 원형의 파노라마 화상이며, 원의 중앙 부근을 중심을 걸쳐, 촬상 방향을 조작하는 경우에, 본 실시 형태에 따른 카메라 단말 장치(200)는, 목적 촬상 방향까지 최단으로 기계적으로도 이동할 수 있다. 한편, 일반적인 카메라 단말 장치에서는, 원의 중심을 걸치도록 해서는 카메라 촬상 방위를 기계적으로 이동시킬 수 없다.
네트워크 인터페이스부(206)는, 카메라 단말 장치(200)와 센터 서버(300) 사이에서, 네트워크(500)를 개재하여 통신을 행하기 위한 인터페이스이다.
단말 제어부(210)는, 촬상 제어 신호 CTa에 의해서 카메라부(201)를 제어하고, 신호 처리 제어 신호 CTb에 의해서 신호 처리부(202)를 제어하고, 방향 제어 신호 CTc에 의해서 촬상 방향 제어부(204)를 제어하고, 촬상 방향을 차례차례 이동하면서 촬상을 실시한다. 그리고, 단말 제어부(210)는, 얻어진 영상 신호 Dcam에 기초하여 제1 파노라마 화상 신호 DF 및 제2 파노라마 화상 신호 DP를 생성시켜 기억부(207)에 기억시킨다.
본 실시 형태에 따른 촬상 시스템(100)은, 영상 신호 Dcam에 의한 라이브 영상과 제1 파노라마 화상 신호 DF 또는 제2 파노라마 화상 신호 DP에 의한 제1 파노라마 화상 또는 제2 파노라마 화상를 모두 카메라 단말 장치(200)로부터 센터 서버(300)에 송신하여 모니터(310)에 표시할 수 있다. 또한, 본 명세서에서, 제1 파노라마 화상 및 제2 파노라마 화상을 참조 화상으로 하는 경우가 있다. 도 4는, 제2 파노라마 화상와 제1 파노라마 화상의 표시 상태를 도시하는 모식도이다. 센터 서버(300)는, 유저의 선택에 따라 제1 파노라마 화상 또는 제2 파노라마 화상의 한쪽을 모니터(310)에 라이브 영상과 함께 표시할 수 있다. 또, 센터 서버(300)는, 제1 파노라마 화상 및 제2 파노라마 화상의 쌍방을 라이브 영상과 함께 표시하도록 구성되어 있어도 좋다. 또한, 도 4의 우측 도면에서는, 중앙 부근의 화상이 일그러진 원형의 파노라마 화상을 제1 파노라마 화상으로 하고 있지만, 이것으로 한정되지 않고, 중앙 부근의 화상이 일그러지지 않은 원형의 파노라마 화상을 제1 파노라마 화상으로 하여도 좋다.
카메라 단말 장치(200)는, 천정 등에 설치되어 카메라 단말 장치(200)의 아래 방향의 화상을 표시한다. 이 때문에, 도 4에 나타내는 바와 같이, 제1 파노라마 화상는, 카메라 단말 장치(200)로부터 하향으로 연재하는 연직선을 중심으로 하여 팬 360°, 틸트 220°의 범위에서 취득되어 그 윤곽은 원형이 된다.
또, 촬상 방향 조정부(205)는, 위에서 설명한 바와 같이 엔드리스로 팬 동작을 실시할 수 있도록 구성되어 있다. 따라서, 기억부(207)에 기억하는 제2 파노라마 화상은, 예를 들면 도 4에 나타내는 바와 같이, 화상이 중복하지 않도록, 한쪽 단부가 기준 방향에서 「+180°」각도 차이, 다른 쪽 단부가 기준 방향에서 「-180°」의 각도 차이를 갖는 것으로 한다. 또, 팬 동작의 동작 범위가 제한되지 않으므로, 예를 들면 동작 범위가 제한되어 있는 경우와 같이, 동작 범위의 중앙 위치를 기준 방향으로 할 수 없다. 따라서, 기준 방향을 미리 설정해 두고, 이 기준 방향이 제2 파노라마 화상의 중앙 위치가 되도록 제2 파노라마 화상 신호 DP를 생성한다. 또, 촬상 방향 제어부(204)는, 카메라 위치 정보 신호 PM로서 미리 설정된 기준 방향에 대한 촬상 방향의 예를 들면 각도 차이를 나타내는 신호를 생성한다.
이와 같이 기준 방향을 미리 설정해 두는 것으로 하면, 제2 파노라마 화상이 어느 방향을 기준으로 한 촬상 동작에 의해서 생성된 화상인지를 판별할 필요가 없다. 또, 카메라 위치 정보 신호 PM에 의해서, 기준 방향에 대한 촬상 방향의 각도 차이를 나타내는 것으로 하면, 제2 파노라마 화상 상에 있어서의 카메라 위치 정보 신호 PM에 근거하는 촬상 방향의 위치를 용이하게 판별할 수 있다.
틸트 동작에서도, 미리 기준 방향을 설정해 두고, 카메라 위치 정보 신호 PM에 의해, 기준 방향에 대한 촬상 방향의 각도 차이를 나타내는 것으로 한다. 이에 따라, 제1 파노라마 화상, 제2 파노라마 화상의 쌍방에서, 카메라 위치 정보 신호 PM에 근거하는 촬상 방향의 위치를 용이하게 판별할 수 있다. 또한, 틸트 동작에 대해서는, 카메라 단말 장치(200)가 천정에 설치되어 있는 경우, 연직 방향을 기준 방향으로 할 수 있다.
단말 제어부(210)는, 네트워크 인터페이스부(206)을 개재하여 센터 서버(300)로부터 공급된 커맨드 신호 CM를 해석하고, 촬상 제어 신호 CTa나 신호 처리 제어 신호 CTb, 방향 제어 신호 CTc의 생성을 실시한다. 또, 메모리부(203)에 기억되어 있는 영상 부호화 신호 DV나, 기억부(207)에 기억되어 있는 제1 파노라마 화상 신호 DF, 제2 파노라마 화상 신호 DP, 및 촬상 방향 제어부(204)로부터 공급된 카메라 위치 정보 신호 PM를 센터 서버(300)에 송출하는 처리 등을 실시한다.
센터 서버(300)의 네트워크 인터페이스부(301)는, 카메라 단말 장치(200)와 센터 서버(300)로, 네트워크(500)를 개재하여 통신을 행하기 위한 인터페이스이다. 네트워크 인터페이스부(301)는, 카메라 단말 장치(200)로부터 공급된 영상 부호화 신호 DV를 신장 처리부(302)에 공급한다. 또, 네트워크 인터페이스부(301)는, 카메라 위치 정보 신호 PM를 위치 판별 처리부(303)에 공급하고, 제1 파노라마 화상 신호 DF 및 제2 파노라마 화상 신호 DP를 화상 처리부(304)에 공급한다.
신장 처리부(302)는, 영상 부호화 신호 DV의 신장 처리를 실시하고, 얻어진 영상 신호 Dcam을 표시 처리부(305)에 공급한다.
위치 판별 처리부(303)는, 카메라 위치 정보 신호 PM로 나타난 촬상 방향이 제1 파노라마 화상 또는 제2 파노라마 화상의 어느 위치에 대응하는지 판별하고, 위치 판별 결과 KP를 화상 처리부(304)에 공급한다. 여기서, 카메라 위치 정보 신호 PM는, 위에서 설명한 바와 같이 미리 설정한 기준 방향이 팬 동작, 틸트 동작의 중앙 위치가 되도록 제1 파노라마 화상 신호 DF 또는 제2 파노라마 화상 신호 DP를 생성하고, 카메라 위치 정보 신호 PM는 기준 방향과 현재의 촬상 방향의 각도 차이를 나타내는 것으로 하면, 카메라 위치 정보 신호 PM에 기초하여, 현재의 촬상 방향이 부감 화상 또는 제2 파노라마 화상의 어느 위치에 대응하는지 용이하게 판별할 수 있다.
화상 처리부(304)는, 위치 판별 결과 KP에 기초하여 화상 처리를 실시하고, 제1 파노라마 화상의 제1 파노라마 화상 신호 DFC, 및 제2 파노라마 화상의 제2 파노라마 화상 신호 DPC를 생성한다. 제2 파노라마 화상 신호 DPC에 대해서는, 위치 판별 결과 KP에 의해 판별된 위치가 중앙 위치가 된 제2 파노라마 화상 신호 DPC를 생성할 수 있다. 이 경우, 화상 처리부(304)에서는, 판별된 위치와 제2 파노라마 화상의 중심 위치와의 차분량을 판별하고, 이 판별한 차분량에 기초하여 판별된 위치가 화상의 중앙 위치가 되도록 제2 파노라마 화상을 처리한다. 즉, 판별된 위치를 중앙 위치로 하여 「±180°」의 제2 파노라마 화상 표시화 범위를 설정하고, 제2 파노라마 화상 표시화 범위로부터 벗어나는 차분량 분의 영역의 제2 파노라마 화상을, 화상이 없는 영역에 붙임으로써, 판별된 위치를 중앙 위치로 한 제2 파노라마 화상의 제2 파노라마 화상 신호 DPC를 생성한다. 제1 파노라마 화상 신호 DFC의 경우에서도, 후술하는 「제1 파노라마 화상을 회전시키는 모드」의 경우는, 제2 파노라마 화상 신호 DPC와 마찬가지로, 판별된 위치와 제1 파노라마 화상의 팬 방향의 기준 위치와의 차분량을 판별하고, 이 판별한 차분량에 기초하여 판별된 위치가 화상 위에 위치하도록 제1 파노라마 화상을 처리한다. 또, 화상 처리부(304)는, 제1 파노라마 화상 신호 DFC 및 제2 파노라마 화상 신호 DPC의 각각에서, 위치 판별 결과 KP에 근거하는 위치(카메라부(201)의 촬상 광학계의 광축이 향하고 있는 위치)를 표시한다. 또한 화상 처리부(304)는, 화상 처리를 실시함으로써 생성된 제1 파노라마 화상 신호 DFC 및 제2 파노라마 화상 신호 DPC를 표시 처리부(305)에 공급한다.
표시 처리부(305)는, 신장 처리부(302)로부터 공급된 영상 신호 Dcam나, 화상 처리부(304)로부터 공급된 제1 파노라마 화상 신호 DFC 및 제2 파노라마 화상 신호 DPC를 이용하여 표시 구동 신호 HD를 생성해 모니터(310)에 공급한다. 또, 표시 처리부(305)는, 후술하는 제어부(310)으로부터 공급된 GUI 표시 제어 신호 CTg에 기초하여 생성한 GUI용 영상 신호를 이용하고, 표시 구동 신호 HD를 생성해 모니터(310)에 공급한다.
모니터(310)는, 표시 구동 신호 HD에 기초하여, 표시 소자 예를 들면 액정 표시 소자나 플라스마 표시 소자 혹은 음극선관 등을 구동하고, 제1 파노라마 화상, 촬상 방향을 중앙 위치로 한 제2 파노라마 화상이나 카메라부(201)의 촬상 화상(라이브 영상), GUI 화상 등을 화면상에 표시한다.
유저 인터페이스부(315)는, GUI가 이용되고 있고, 모니터(310)를 이용하여 유저에 대한 정보의 제시를 실시하고, 제시된 정보에 기초하여 조작 입력 수단인 포인팅 디바이스나 키보드 등으로 유저 조작을 했을 때, 유저 조작에 따른 조작 신호 US를 제어부(310)에 공급하여 목적으로 하는 동작 등을 실시하게 한다.
제어부(310)는, 조작 신호 US와 모니터(310)의 표시 상태에 기초하여, 유저가 어떠한 처리의 선택이나 어떠한 처리의 실행을 요구했는지 판별하고, 판별 결과에 기초하여 제어 신호 CTm를 생성하고 각부에 공급하여 센터 서버(300)의 동작을 제어한다. 또, 판별 결과에 기초하여 커맨드 신호 CM를 생성하고, 네트워크 인터페이스부(301)을 개재하여 카메라 단말 장치(200)에 공급하여 카메라 단말 장치(20)의 동작을 제어한다. 또한 제어부(310)는, GUI 표시 제어 신호 CTg를 생성하여 표시 처리부(305)에 공급한다.
또한, 상술한 예에서는, 카메라 단말 장치(200)가 영상 신호 Dcam로부터 제1 파노라마 화상의 영상 신호 DF 및 제2 파노라마 화상의 영상 신호 DP를 생성했지만, 센터 서버(300) 또는 클라이언트(400)이 제1 파노라마 화상의 영상 신호 DF 및 제2 파노라마 화상의 영상 신호 DP를 생성하여도 좋다. 이 경우, 카메라 단말 장치(200)의 네트워크 인터페이스부(206)는, 카메라 블록(201)으로부터 출력된 영상 신호 Dcam을 센터 서버(300) 또는 클라이언트(400)에 보낸다. 센터 서버(300) 또는 클라이언트(400)는, 카메라 단말 장치(200)로 같은 신호 처리부를 구비함으로써, 제1 파노라마 화상의 영상 신호 DF 및 제2 파노라마 화상의 영상 신호 DP를 생성할 수 있다. 제1 파노라마 화상의 영상 신호 DF 및 제2 파노라마 화상의 영상 신호 DP는, 센터 서버(300) 또는 클라이언트(400)가 구비하는 하드 디스크 등의 메모리에 기억된다.
(3) 제1 파노라마 화상 및 제2 파노라마 화상의 표시 동작에 대하여
다음에, 제1 파노라마 화상 및 제2 파노라마 화상 표시 동작에 대하여 설명한다. 제어부(310)는, 동작 개시시에, 카메라 단말 장치(200)에 대하여 제1 파노라마 화상 신호 DF 및 제2 파노라마 화상 신호 DP와 카메라 위치 정보 신호 PM 및 영상 부호화 신호 DV를 요구하는 커맨드 신호 CM를 송신한다. 카메라 단말 장치(200)는, 기억부(207)에 제1 파노라마 화상 신호 DF, 제2 파노라마 화상 신호 DP를 기억하고 있을 때, 이 제1 파노라마 화상 신호 DF, 제2 파노라마 화상 신호 DP를 읽어내 센터 서버(300)에 송신한다. 또, 카메라 단말 장치(200)는, 화상 기억부(207)에 제1 파노라마 화상 신호 DF 또는 제2 파노라마 화상 신호 DP가 기억되어 있지 않을 때, 카메라부(201)나 신호 처리부(202) 및 촬상 방향 제어부(204)를 제어하고, 촬상 방향을 이동하면서 촬상 동작을 실시하고, 제1 파노라마 화상 신호 DF 및 제2 파노라마 화상 신호 DP를 생성하여 센터 서버(300)에 송신한다. 또한, 카메라 단말 장치(200)는, 생성된 제1 파노라마 화상 신호 DF 및 제2 파노라마 화상 신호 DP는, 기억부(207)에 기억시킨다.
카메라 단말 장치(200)는, 촬상 방향 제어부(204)에서 생성된 카메라 위치 정보 신호 PM를 센터 서버(300)에 공급한다. 또, 카메라 단말 장치(200)는, 카메라부(201)의 촬상 동작을 개시하고, 얻어진 영상 신호 Dcam을 신호 처리부(202)로 압축하여 영상 부호화 신호 DV를 메모리부(203)에 기억시킨다. 또한 메모리부(203)에 기억되어 있는 영상 부호화 신호 DV를 센터 서버(300)에 공급한다. 또한, 도 1에 나타내는 바와 같이, 카메라 단말 장치(200)와 네트워크(500)가 프록시 서버(600)를 개재하여 접속되어 있는 경우, 카메라 단말 장치(200)와 센터 서버(300) 사이의 정보의 교환은, 프록시 서버(600)를 경유하여 이루어진다.
센터 서버(300)의 위치 판별 처리부(303)는, 카메라 위치 정보 신호 PM으로 표시된 촬상 방향이 제1 파노라마 화상 또는 제2 파노라마 화상의 어느 위치에 대응하는지 판별하여 위치 판별 결과 KP를 화상 처리부(304)에 공급한다. 제2 파노라마 화상을 예로 들면, 카메라 위치 정보 신호 PM으로 표시되는 각도 차이가 「0°」일 때, 촬상 방향은 기준 방향으로 설정되어 있으므로, 촬상 방향의 위치는 제2 파노라마 화상의 중앙 위치로 되어 있다.
화상 처리부(304)는, 위치 판별 결과 KP에 기초하여 화상 처리를 실시한다. 여기서, 위치 판별 결과 KP에 의해서, 촬상 방향의 위치가 제2 파노라마 화상의 중앙 위치라는 것이 나타났을 때는, 촬상 방향의 화상이 제2 파노라마 화상의 중앙으로 되고 있으므로, 제2 파노라마 화상 처리를 실시하지 않고, 제2 파노라마 화상 신호 DP를 제2 파노라마 화상 신호 DPC로서 표시 처리부(305)에 공급한다. 한편, 촬상 방향의 위치가 제2 파노라마 화상의 중앙 위치가 아닌 경우는, 판별된 촬상 방향의 위치와 제2 파노라마 화상의 중심 위치와의 차분량을 판별하고, 이 판별한 차분량에 기초하여, 판별된 위치가 화상의 중앙 위치가 되도록 제2 파노라마 화상을 처리하여 제2 파노라마 화상 신호 DPC를 생성한다.
이 때문에, 제2 파노라마 화상에서는, 예를 들면 카메라 위치 정보 신호 PM으로 표시되는 각도 차이가 「0°」일 때, 표시 처리부(305)로부터의 표시 구동 신호 HD에 의해서 구동되는 모니터(310)의 화면상에는, 카메라부(201)에서 촬영된 촬상 화상과 기준 방향이 중앙 위치로 되어 있는 제2 파노라마 화상, 및 GUI에 관한 화상이 표시된다.
제1 파노라마 화상의 경우, 후술하는 「제1 파노라마 화상을 회전시키는 모드」인 경우는, 제2 파노라마 화상 신호 DPC와 마찬가지로, 판별된 위치와 제1 파노라마 화상의 팬 방향의 기준 위치와의 차분량을 판별하고, 이 판별한 차분량에 기초하여 판별된 위치가 화상 아래(후술하는 직선 L상)에 위치하도록 제1 파노라마 화상을 회전시켜 제1 파노라마 화상 신호 DFC를 생성한다. 또, 화상 처리부(304)는, 제1 파노라마 화상 신호 DFC 및 제2 파노라마 화상 신호 DPC의 각각에서, 위치 판별 결과 KP에 근거하는 촬상 방향의 위치(카메라부(201)의 촬상 광학계의 광축이 향하고 있는 위치)를 표시한다.
신장 처리부(302)는, 영상 부호화 신호 DV를 신장하고, 얻어진 영상 신호 Dcam을 표시 처리부(305)에 공급한다. 또, 제어부(310)는, GUI 표시를 행하기 위한 GUI 표시 제어 신호 CTg를 표시 처리부(305)에 공급한다.
(4) 제1 파노라마 화상을 생성하는 처리에 대하여
다음에, 제1 파노라마 화상 신호 DF를 생성하는 처리에 대하여, 도 5 내지 도 8에 기초하여 설명한다. 제1 파노라마 화상 신호 DF를 생성할 때, 제1 파노라마 화상의 영역마다 화상을 취득한다. 먼저, 도 5에 나타내는 바와 같이, 카메라 단말 장치(200)의 줌을 고정하고, 어느 임의의 간격으로 팬, 틸트를 실시하여 정지 화면을 취득한다. 도 5 중에 나타내는 숫자는 화상 취득의 차례를 나타내고 있다.
다음에, 이하의[1] 내지 [3]의 순서에 의해, 정지 화상 좌표계의 좌표 변화를 실시한다. 여기에서는, 도 6에 나타내는 바와 같이, 정지 화면상의 각 점을, 카메라 단말 장치(200)의 회전 중심에서 본 상대 위치(x, y, z)로 변환한다.
[1] 수평 화각 thh[degree], 종횡비 a의 카메라의 시점을 원점에 두고, -z 방향을 향한다. 거리 L의 위치에 피사체 평면(x, y, -L)을 생각하면, 보이는 범위는 2Lx×Ly의 장방형이 된다. 여기서, Lx=Lㆍtan(thh/2), Ly=Lx/a의 관계가 성립한다.
[2] 카메라의 자세는 본래(x, y, z, p, q, r)이지만, 시점의 위치가 원점에 고정되어 있다고 생각하면, x=y=z=0이고, 여기에서는(p, q, r)(p: Pan(y축 회전), q: Tilt(x축 회전), r:roll(z축 회전)) 만을 생각한다.
[3](2Lx)×2Ly)의 장방형 내의 점(j, i)을 이용하면 아래와 같은 식이 성립된다.
x=Lx×(j-Lx)/Lx
y = Ly×(i-Ly)/Ly
z = -L
[4](x, y, z)를 이용하여 이하의 Roll 변환, Tilt 변환, Pan 변환식을 적용한다.
[수학식 1]
■Roll 변환
Figure 112011095666288-pct00001
■Tilt 변환
Figure 112011095666288-pct00002
■Pan 변환
Figure 112011095666288-pct00003
여기에서 얻어진 (x3, y3, z3)이, 정지 화상의 어느 점 (x, y, z)을 카메라의 회전 중심에서 본 좌표계로 나타낸 값이 된다.
다음에, 상대 위치를 위도, 경도로 변환한다. 여기에서는, 도 7에 나타내는 바와 같이, 상기에서 얻어진 (x3, y3, z3)을 위도, 경도로 변환한다. (x3, y3, z3)의 방향이 z 방향에 대하여 수평 방향이 이루는 각도가 경도이며, 또 x-z 평면이 이루는 각도가 위도가 되어, 이하의 식으로 구할 수 있다.
ㆍ 위도 (Latitude)
La = tan-1
(y3/ ::sqrt(x3 *x3 +z3 *z3))
ㆍ 경도 (Lo)
0.0<z3 일 때
0.0<x3의 경우 Lo =90.0 + La
0.0≥x3의 경우 Lo = -90.0 - La
0.0 ≥z3일 때
Lo =tan-1(x3/z3)/RAD
단,
RAD =π/180(π:원주율)
다음에, 제1 파노라마 화상으로의 변환을 실시한다. 여기에서는, 도 8에 나타내는 바와 같이, 얻어진 위도, 경도 (La, Lo)를, 위도를 반경의 축, 경도를 원주 방향의 좌표계로 나타낸다.
이상과 같이 하여 제1 파노라마 화상 신호 DF를 생성할 수 있다.
(5) GUI에 대하여
다음에, GUI에 대하여 설명한다. 도 9는, 모니터(310)의 표시 화면을 도시하는 모식도이다. 도 9에서는, 통상의 화면과 전체 화면 표시의 쌍방을 나타내고 있고, 어떤 경우에서도, 화면 좌측으로 조작 패널(컨트롤 패널)이 표시되고 화면 우측에 라이브 영상이 표시되어 있다. 조작 패널의 "Screen Mode"를 "Full"로 하면 전체 화면 표시가 된다.
도 10은, 조작 패널에 의한 조작을 설명하기 위한 모식도이다. 조작 패널 내는 기능 마다의 패널로 되어 있고, 각 패널을 절첩하여 격납할 수 있다. 패널의 분류는 이하와 같다.
ㆍ View
표시에 관한 설정
ㆍ Camera control
카메라 조작에 관한 설정
ㆍ Panorama
파노라마 표시
ㆍ Preset position
pre-set에 관한 설정
ㆍ Trigger
트리거에 관한 설정
ㆍ Other
그 밖의 설정
각 패널을 클릭하면, 그 패널이 열리도록 구성되어 있다. 도 10의 (A)은, "View"를 클릭한 상태를 나타내고 있고, "View"란의 아래에 메뉴가 표시된다. 한편, 도 10의 (B)는, "Camera control"을 클릭한 상태를 나타내고 있고, "Camera control"란의 아래에 메뉴가 표시된다. 또, 도 10의 (C)는 패널 "Camera control"을 드래그한 상태를 나타내고 있고, 드래그함으로써 패널 "Camera control"을 플로팅 윈도우로 할 수 있다.
도 11은, 패널 "View"를 클릭했을 경우에 "Screen Mode", "View Size" "Image Codec", "Frame Rate"등의 메뉴가 표시된 상태를 나타내고 있다. "Screen Mode" 메뉴에서는, 표시 모드를 노멀과 풀 스크린으로 변경할 수 있다. "View Size"에서는, 화상의1/4, 1/2, 등배, Fit 모드를 지정할 수 있다. Fit 모드는 현재의 표시 에리어의 크기에 맞추어 화상을 표시한다. "Image Codec" 메뉴에서는, Codec의 변경을 실시할 수 있다. "Frame Rate" 메뉴에서는, JPEG의 Frame Rate을 변경할 수 있다. 동영상 보존 버튼은 동영상의 보존에, 정지 화면 보존 버튼은 정지 화면의 보존을 위해서 이용한다. 그 외, 마이크 볼륨 슬라이더, 마이크 뮤트 온/오프 버튼, 음성 볼륨 슬라이더, 음성 뮤트 온/오프 버튼 등이 설치되어 있다.
도 12는, 패널 "Camera"를 클릭했을 경우에 표시되는 메뉴를 나타내고 있다. "Operation Mode" 메뉴에서는, 화상 상에서의 조작 모드 전환을 실시할 수 있다. 팬, 틸트 제어 버튼에서는, 화살표 방향의 버튼을 조작함으로써 팬, 틸트 방향을 지정할 수 있다. 팬, 틸트 제어 버튼의 한가운데에 위치하는 버튼은, 홈 포지션 버튼이다. 줌 버튼은, 카메라 단말 장치(200)의 줌을 지정하는 버튼이며, 광학 줌과 디지털 줌의 경계를 알 수 있도록 구성되어 있다. 줌 버튼의 「W」, 「T」를 계속 누르면 줌 조작이 계속해 행해진다. 또, 포커스 버튼은, 포커스를 「원거리」, 「근거리」로 설정하기 위해서 이용된다. 그 외, ONE PUSH AUTO FOCUS 버튼, 배타 제어의 제어권 획득 버튼등의 각종 버튼이 설치되어 있다.
도 13은, "Preset position", "Trigger", "Other", "information"를 클릭했을 경우에 표시되는 각 메뉴를 나타내고 있다. "Preset position"는, 미리 정해진 복수의 촬영 방향의 화상을 섬네일 표시한 것으로, 섬네일 화상의 하나를 클릭하여 선택함으로써, 카메라 단말 장치(200)를 선택한 섬네일 화상의 방향으로 향할 수 있다.
(6) 제1 파노라마 화상 상에서의 촬영 방향의 지정
다음에, 도 14 내지 도 18에 기초하여, 제1 파노라마 화상의 표시에 대하여 설명한다. 도 14는, 모니터(310)의 표시 화면에서, 조작 패널의 "Preset position"를 클릭하여 제1 파노라마 화상을 표시한 상태를 도시하는 모식도이다. 또한, 조작 패널의 우측에는 라이브 영상이 표시되어 있다. 상술한 바와 같이, "Preset position"란을 드래그하여 이동함으로써, 도 15에 나타내는 바와 같이, 제1 파노라마 화상이 표시된 서브 패널을 조작 패널 밖에 배치할 수 있다. 또, 제1 파노라마 화상이 표시된 서브 패널은 표시 화면 내에서 이동할 수 있다.
도 16은, 제1 파노라마 화상이 표시된 서브 패널을 상세하게 도시하는 모식도이다. 제1 파노라마 화상에는, 우측의 라이브 영상으로 표시되어 있는 화상의 방향(카메라 단말 장치(200)의 촬상 광학계의 광축의 방향)이, +표시로 표시되어 있다. 또, 도 16에 나타내는 바와 같이, 제1 파노라마 화상의 우측 위의 파노라마 전환 버튼을 클릭함으로써, 제1 파노라마 화상을 제2 파노라마 화상으로 전환할 수 있다.
도 17은, 제1 파노라마 화상을 이용하여 라이브 영상의 방향을 변경하는 조작을 나타내고 있다. 카메라 단말 장치(200)의 팬ㆍ틸트 방향을 변경하는 경우, 상술한 팬, 틸트 제어 버튼에 의해서 실시할 수 있지만, 제1 파노라마 화상 중의 임의의 점을 지정하는 것에 의해서도 실시할 수 있다. 도 17 상태에서는, +표시의 방향으로 카메라 단말 장치(200)의 촬상 광학계의 광축을 향해지고, 그 방향의 라이브 영상이 표시되어 있다. 이 상태에서 도 17의 제1 파노라마 화상에 나타내는●표시 부분을 클릭하면, 유저 조작에 따른 조작 신호 US가 제어부(310)에 보내지고, 이것에 기초하여 카메라 단말 장치(200)의 촬상 방향 제어부(204)가 제어되는 것으로, ●표시 방향으로 카메라 단말 장치(200)의 촬상 광학계의 광축을 향할 수 있다. 따라서, 조작 패널의 우측으로 표시되는 라이브 영상은, ●표시 방향의 영상으로 완전히 교체된다.
이에 따라, 유저는, 제1 파노라마 화상 중의 임의의 점을 지정함으로써 카메라 단말 장치(200)의 팬ㆍ틸트 방향을 지정할 수 있다. 제1 파노라마 화상에는, 카메라 단말 장치(200)가 촬영 가능한 팬ㆍ틸트 방향의 영상이 모두 포함되어 있으므로, 유저는, 제1 파노라마 화상 상에서 카메라 단말 장치(200)의 방향을 지정하여 목적으로 하는 방향의 라이브 영상을 표시할 수 있다. 또한, 클릭하는 위치를 나타내는 +표시 대신에, 소정 범위를 둘러싸는 테두리로 영역 지정하여 광축의 방향을 제어하도록 해도 좋다.
제1 파노라마 화상 상에서 카메라 단말 장치(200)의 방향을 지정했을 경우에, 제1 파노라마 화상의 표시 상태는 변함없이 라이브 영상만이 완전히 교체되는 모드와 제1 파노라마 화상이 회전하는 모드가 있다. 제1 파노라마 화상이 회전하는 모드에서는, 도 18에 나타내는 바와 같이, 현재 라이브 영상이 표시되어 있는 위치(+표시)는 제1 파노라마 화상의 중심으로부터 윗쪽으로 향하는 직선 L상에 위치하도록 제1 파노라마 화상의 각도 위치가 설정된다. 다음에 제1 파노라마 화상 상에서 ●표를 클릭하면, 조작 패널의 우측으로 표시되는 라이브 영상은, ●표시 방향의 영상으로 완전히 교체되고, 동시에 제1 파노라마 화상에 대해 ●표시 위치가 직선 L상에 위치하도록 제1 파노라마 화상이 회전한다. 따라서, 유저는, 제1 파노라마 화상을 봄으로써, 라이브 영상의 방향이 제1 파노라마 화상의 직선 L상인 것을 즉석에서 인식할 수 있다.
제2 파노라마 화상에서도 마찬가지로 유저는, 제2 파노라마 화상 중의 임의의 점을 지정함으로써, 카메라 단말 장치(200)의 팬 방향을 지정할 수 있고 이것에 기초하여 라이브 영상의 방향을 전환할 수 있다.
도 19는, 도 4에 나타낸 바와 같은 파노라마 화상 대신에, 원통형의 곡면에 파노라마 화상을 표시하여 참조 화상으로 한 예를 나타내고 있다. 이와 같이, +180° 내지 -180°의 범위로 표시되는 장방형의 파노라마 화상을 원통면 상에 표시하도록 해도 좋다. 이에 따라, 유저에 의한 시인성을 높일 수 있어 목적으로 하는 방향의 영상을 표시시킬 수 있다. 도 19의 경우에서도, 유저는, 곡면상의 「표시 지정점」을 지정함으로써, 카메라 단말 장치(200)의 팬 방향을 지정할 수 있고 이것에 기초하여 라이브 영상의 방향을 전환할 수 있다. 또한, 촬영 방향의 지정을 포함한 상기 처리는, GUI 표시 제어 신호 CTg에 기초하여 표시 처리부(305)에 의해 행해진다.
(7) 제1 파노라마 화상을 표시한 것에 의한 효과
다음에, 도 20 내지 도 22에 기초하여 제1 파노라마 화상의 표시에 의한 효과에 대해 설명한다. 도 20은, 바닥 면상에 「금고」와 「테이블」이 배치되고 「금고」와「테이블」의 중간 위치(점 O)의 바로 윗쪽에 카메라 단말 장치(200)가 설치된 모습을 나타내고 있다. 그리고, 카메라 단말 장치(200)의 라이브 영상에 의해 「금고」에 근접하는 수상한 사람을 감시할 수 있는 것으로 한다.
도 21은, 도 20 상태에서, 제1 파노라마 화상을 라이브 영상과 함께 모니터(310)에 표시한 상태(도 21의 (A))와 제2 파노라마 화상을 라이브 영상과 함께 모니터(310)에 표시한 상태(도 21의 (B))를 모식적으로 나타내고 있다. 이미 설명한 바와 같이, 제1 파노라마 화상 또는 제2 파노라마 화상 상의 임의의 위치를 클릭하면, 카메라 단말 장치(200)의 광축의 방향을 클릭한 위치로 변경할 수 있어 라이브 영상의 촬영 방향을 변경할 수 있다.
도 21의 (B)에 나타내는 바와 같이, 제2 파노라마 화상의 경우, 카메라 단말 장치(200)의 바로 밑, 즉, 「금고」와「테이블」의 중간의 위치에서는, 화상이 왜곡되어 있기 때문에, 클릭한 위치에 광축의 방향을 변경했다고 해도, 광축의 방향은 실제의 「금고」와「테이블」의 중간 위치(도 20에 나타내는 점 O)의 위치는 되지 않는다. 즉, 「금고」와「테이블」의 중심의 주변을 보고자 하는 경우에, 제2 파노라마 화상(장방형 파노라마 화상) 상에서 조작하면, 본래 유저가 보고자 하는 개소로부터 벗어난 영상이 되어 버려 직감적인 제어를 할 수 없다. 이 때문에, 도 21의 (B)에 나타내는 바와 같이, 라이브 영상의 하변으로부터 「금고」와「테이블」의 영상이 표시 화면에서는 벗어나는 사태가 생긴다.
한편, 도 21의 (A)에 나타내는 바와 같이, 부감한 상태에서 화상이 표시되므로, 「금고」와「테이블」의 중간 위치(도 20에 나타내는 점 O)를 직감적으로 클릭할 수 있다. 또, 제1 파노라마 화상의 경우는, 점 O부근의 영상의 왜곡이 비교적 적기 때문에, 광축의 방향은 정확하게 점 O의 위치를 향한다. 따라서, 라이브 영상에서도, 「금고」와「테이블」의 영상이 표시 화면에서는 벗어나 버리지 않는다.
또, 도 22는, 도 20 및 도 21의 경우에서, 라이브 영상 중에 「금고」의 부근을 수상한 사람이 이동하고 있는 모습과, 제1 파노라마 화상 및 제2 파노라마 화상을 나타내고 있다. 라이브 영상 중에서 「금고」의 부근을 수상한 사람이 이동하고 있는 경우, 수상한 사람을 추적하기 위해서는, 수상한 사람의 움직임에 맞추어 카메라 단말 장치(200)의 광축의 방향을 바꾸어 갈 필요가 있다.
이러한 경우에서, 제2 파노라마 화상의 경우, 「금고」와「테이블」의 중간의 위치에서는 화상이 왜곡되어 있기 때문에, 화상의 바로 밑에서 이동 방향을 바꾸도록 클릭 위치를 의도적으로 조작할 필요가 생긴다.
한편, 제1 파노라마 화상의 경우, 「금고」와「테이블」의 중간의 위치에서의 화상의 왜곡이 적기 때문에, 라이브 영상을 보면서, 수상한 사람의 이동에 맞추어 직감적으로 클릭을 해 나감으로써, 수상한 사람의 이동에 맞추어 광축의 방향을 이동시킬 수 있다.
또한, 카메라 단말 장치(200)의 바로 아래가 아니고, 주변 부근을 보고자 하는 경우에는, 제2 파노라마 화상이, 왜곡이 적고, 제1 파노라마 화상보다 보다 직감적인 제어가 가능해진다. 본 실시 형태에서는, 상황에 따라 제1 파노라마 화상과 제2 파노라마 화상을 전환하는 것이 가능하기 때문에, 장면에 따라 유저의 쓰기 쉬움을 향상시키는 것이 가능하다. 또, 표시 화면 내에 스페이스가 있으면, 제1 파노라마 화상과 제2 파노라마 화상을 양쪽 모두 표시함으로써, 변환 조작이 불필요해져, 쓰기 쉬움을 향상시키는 것이 가능하다.
이상의 실시의 형태에서는, 장방형의 파노라마 화상에서, 촬상 방향을 중앙 위치가 되도록 제어하였지만, 이것으로 한정하지 않고, 촬상 방향을 바꾸어도 파노라마 화상을 회전시키지 않고 고정으로 한 채이어도 좋다.
이상, 첨부 도면을 참조하면서 본 발명의 적절한 실시 형태에 대하여 상세하게 설명하였지만, 본 발명은 이러한 예로 한정되지 않는다. 본 발명이 속하는 기술의 분야에 있어서의 통상의 지식을 가지는 사람이면, 특허 청구의 범위에 기재된 기술적 사상의 범주 내에서, 각종 변경예 또는 수정예로 상도할 수 있는 것은 분명하고, 이것들에 대해서도, 당연하게 본 발명의 기술적 범위에 속하는 것이라고 이해된다.
<산업상의 이용가능성>
이 발명은, 예를 들면 감시 카메라의 제어 장치, 카메라 시스템 및 프로그램등에 널리 적용할 수 있다.
100: 촬상 시스템
200: 카메라 단말 장치
300: 센터 서버
301: 네트워크 인터페이스부
305: 표시 처리부
310: 제어부
500: 네트워크
700: 촬상 장치
701: 기억부
704: 화상 처리부
705: 표시 처리부
710: 제어부

Claims (19)

  1. 카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에서 지정된 위치에 대응하는 영역을 파노라마 화상 상에서보다 크게 표시하는 확대 화상 표시 영역을 표시하도록 제어하는 표시 제어부와,
    상기 파노라마 화상 상에서 지정된 위치의 정보를 취득하는 취득 수단을 가지며,
    상기 표시 제어부는, 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고,
    상기 파노라마 화상은 원형의 파노라마 화상이며,
    상기 표시 제어부는, 파노라마 화상 전환 조작에 따라, 상기 파노라마 화상 표시 영역에 표시하는 파노라마 화상을 원형의 파노라마 화상으로부터 장방형의 파노라마 화상으로 전환하는, 감시 카메라 시스템에서 사용되는 제어 장치.
  2. 제1항에 있어서,
    상기 원형의 파노라마 화상은 상기 카메라에 의해 복수회 촬영된 화상에 기초하여 생성된, 감시 카메라 시스템에서 사용되는 제어 장치.
  3. 제1항에 있어서,
    상기 표시 제어부는, 상기 파노라마 화상 표시 영역을 화면 상에서 이동시키는 것이 가능한, 감시 카메라 시스템에서 사용되는 제어 장치.
  4. 제1항에 있어서,
    상기 파노라마 화상 상에서 지정된 영역의 화상을 송신하도록 카메라를 제어하는 카메라 제어부를 더 가지는, 감시 카메라 시스템에서 사용되는 제어 장치.
  5. 화상을 촬상하는 카메라와, 상기 카메라를 제어하는 감시 카메라 시스템에서 사용되는 제어 장치를 갖는 카메라 시스템으로서,
    상기 감시 카메라 시스템에서 사용되는 제어 장치는,
    카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에서 지정된 위치에 대응하는 영역을 파노라마 화상 상에서보다 크게 표시하는 확대 화상 표시 영역을 표시하도록 제어하는 표시 제어부와,
    상기 파노라마 화상 상에서 지정된 위치의 정보를 취득하는 취득 수단을 가지며,
    상기 표시 제어부는, 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고,
    상기 파노라마 화상은 원형의 파노라마 화상이며,
    상기 표시 제어부는, 파노라마 화상 전환 조작에 따라, 상기 파노라마 화상 표시 영역에 표시하는 파노라마 화상을 원형의 파노라마 화상으로부터 장방형의 파노라마 화상으로 전환하는, 카메라 시스템.
  6. 표시 제어부 및 취득 수단을 갖는 감시 카메라 시스템에서의 카메라 제어 방법으로서,
    카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에서 지정된 위치에 대응하는 영역을 파노라마 화상 상에서보다 크게 표시하는 확대 화상 표시 영역을 표시하도록 상기 표시 제어부에 의해 제어하는 표시 제어 단계와,
    상기 파노라마 화상 상에서 지정된 위치의 정보를 상기 취득 수단에 의해 취득하는 취득 단계를 가지며,
    상기 표시 제어 단계에서는, 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고,
    상기 파노라마 화상은 원형의 파노라마 화상이며,
    상기 표시 제어 단계는, 파노라마 화상 전환 조작에 따라, 상기 파노라마 화상 표시 영역에 표시하는 파노라마 화상을 원형의 파노라마 화상으로부터 장방형의 파노라마 화상으로 전환하는 단계를 포함하는, 감시 카메라 시스템에서의 카메라 제어 방법.
  7. 카메라에 의해 촬상된 파노라마 화상을 표시하는 파노라마 화상 표시 영역과, 상기 파노라마 화상에서 지정된 위치에 대응하는 영역을 파노라마 화상 상에서보다 크게 표시하는 확대 화상 표시 영역을 표시하도록 제어하는 제1 수단과,
    상기 파노라마 화상 상에서 지정된 위치의 정보를 취득하는 제2 수단으로서 컴퓨터를 기능시키기 위한 프로그램을 기록한 컴퓨터 판독가능한 기록 매체로서,
    상기 제1 수단은, 상기 카메라에 의해 촬영된 화상을 상기 확대 화상 표시 영역에 표시하고,
    상기 파노라마 화상은 원형의 파노라마 화상이며,
    상기 제1 수단은, 파노라마 화상 전환 조작에 따라, 상기 파노라마 화상 표시 영역에 표시하는 파노라마 화상을 원형의 파노라마 화상으로부터 장방형의 파노라마 화상으로 전환하는, 프로그램을 기록한 컴퓨터 판독가능한 기록 매체.
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
KR1020117028827A 2009-06-09 2010-06-01 제어 장치, 카메라 시스템 및 기록 매체 KR101662074B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009138594A JP5338498B2 (ja) 2009-06-09 2009-06-09 監視カメラシステムで使用される制御装置、カメラシステム及びプログラム
JPJP-P-2009-138594 2009-06-09
PCT/JP2010/059248 WO2010143558A1 (ja) 2009-06-09 2010-06-01 制御装置、カメラシステム及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020167026684A Division KR101782282B1 (ko) 2009-06-09 2010-06-01 제어 장치, 카메라 시스템 및 카메라 제어를 행하는 제어 방법

Publications (2)

Publication Number Publication Date
KR20120030403A KR20120030403A (ko) 2012-03-28
KR101662074B1 true KR101662074B1 (ko) 2016-10-05

Family

ID=43308813

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020117028827A KR101662074B1 (ko) 2009-06-09 2010-06-01 제어 장치, 카메라 시스템 및 기록 매체
KR1020167026684A KR101782282B1 (ko) 2009-06-09 2010-06-01 제어 장치, 카메라 시스템 및 카메라 제어를 행하는 제어 방법

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020167026684A KR101782282B1 (ko) 2009-06-09 2010-06-01 제어 장치, 카메라 시스템 및 카메라 제어를 행하는 제어 방법

Country Status (9)

Country Link
US (2) US10798280B2 (ko)
EP (3) EP3923565A1 (ko)
JP (1) JP5338498B2 (ko)
KR (2) KR101662074B1 (ko)
CN (1) CN102461153B (ko)
BR (1) BRPI1012976A2 (ko)
RU (1) RU2528566C2 (ko)
TW (1) TWI422218B (ko)
WO (1) WO2010143558A1 (ko)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5820210B2 (ja) * 2011-09-15 2015-11-24 キヤノン株式会社 撮像装置、撮像装置の制御方法
JP6186775B2 (ja) 2012-05-31 2017-08-30 株式会社リコー 通信端末、表示方法、及びプログラム
CN103731630B (zh) * 2012-10-16 2019-01-11 华为技术有限公司 一种视频监控方法、设备和系统
NO334902B1 (no) * 2012-12-07 2014-07-07 Kongsberg Defence & Aerospace As System og fremgangsmåte for overvåking av minst ett observasjonsområde
KR20150068299A (ko) * 2013-12-09 2015-06-19 씨제이씨지브이 주식회사 다면 영상 생성 방법 및 시스템
JP6071866B2 (ja) * 2013-12-18 2017-02-01 キヤノン株式会社 表示制御装置、表示装置、撮像システム、表示制御方法、及びプログラム
US9934222B2 (en) 2014-04-22 2018-04-03 Google Llc Providing a thumbnail image that follows a main image
USD781317S1 (en) 2014-04-22 2017-03-14 Google Inc. Display screen with graphical user interface or portion thereof
USD781318S1 (en) 2014-04-22 2017-03-14 Google Inc. Display screen with graphical user interface or portion thereof
US9972121B2 (en) * 2014-04-22 2018-05-15 Google Llc Selecting time-distributed panoramic images for display
USD780777S1 (en) 2014-04-22 2017-03-07 Google Inc. Display screen with graphical user interface or portion thereof
MX357098B (es) * 2014-06-16 2018-06-26 Braeburn Systems Llc Realce luminoso para programar un control.
JP2016033620A (ja) * 2014-07-31 2016-03-10 キヤノン株式会社 画像取得装置
US9876954B2 (en) 2014-10-10 2018-01-23 Iec Infrared Systems, Llc Calibrating panoramic imaging system in multiple dimensions
TWI578781B (zh) * 2014-10-21 2017-04-11 群暉科技股份有限公司 藉助於全景地圖來管理一監視系統之方法與裝置
JP6504793B2 (ja) * 2014-11-14 2019-04-24 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
US11856297B1 (en) * 2014-12-31 2023-12-26 Gn Audio A/S Cylindrical panorama hardware
JP6543108B2 (ja) * 2015-06-29 2019-07-10 キヤノン株式会社 情報処理装置およびその制御方法、並びにプログラム
CN107438152B (zh) * 2016-05-25 2023-04-07 中国民用航空总局第二研究所 一种运动摄像机对全景目标快速定位捕捉方法及系统
WO2017205642A1 (en) * 2016-05-25 2017-11-30 Livit Media Inc. Methods and systems for live sharing 360-degree video streams on a mobile device
JP6786378B2 (ja) * 2016-12-26 2020-11-18 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
JP6938237B2 (ja) * 2017-06-21 2021-09-22 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
JP6482696B2 (ja) 2017-06-23 2019-03-13 キヤノン株式会社 表示制御装置、表示制御方法、およびプログラム
CN107682621A (zh) * 2017-09-06 2018-02-09 深圳天珑无线科技有限公司 旋转拍照方法、装置、移动终端及计算机可读存储介质
CN109001208A (zh) * 2018-05-28 2018-12-14 南京中电熊猫平板显示科技有限公司 一种显示面板的缺陷定位装置及缺陷定位方法
JP6777208B2 (ja) * 2019-09-05 2020-10-28 株式会社リコー プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001148850A (ja) * 1999-11-18 2001-05-29 Canon Inc 映像処理装置、映像処理方法、映像配信システム、記憶媒体
JP2007043505A (ja) * 2005-08-03 2007-02-15 Sony Corp 撮像システムとカメラ制御装置およびパノラマ画像生成方法とプログラム
JP2008301191A (ja) * 2007-05-31 2008-12-11 Victor Co Of Japan Ltd 映像監視システム、映像監視制御装置、映像監視制御方法、及び映像監視制御用プログラム

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5359363A (en) * 1991-05-13 1994-10-25 Telerobotics International, Inc. Omniview motionless camera surveillance system
JP3348285B2 (ja) * 1992-12-21 2002-11-20 恆明 日比 パノラマ撮影装置
US6037936A (en) * 1993-09-10 2000-03-14 Criticom Corp. Computer vision system with a graphic user interface and remote camera control
US6020931A (en) * 1996-04-25 2000-02-01 George S. Sheng Video composition and position system and media signal communication system
US6529234B2 (en) * 1996-10-15 2003-03-04 Canon Kabushiki Kaisha Camera control system, camera server, camera client, control method, and storage medium
US7092012B2 (en) * 1996-11-15 2006-08-15 Canon Kabushiki Kaisha Image processing apparatus and method, storage medium, and communication system
JP4332231B2 (ja) * 1997-04-21 2009-09-16 ソニー株式会社 撮像装置コントローラおよび撮像システム
US6044181A (en) * 1997-08-01 2000-03-28 Microsoft Corporation Focal length estimation method and apparatus for construction of panoramic mosaic images
US6552744B2 (en) * 1997-09-26 2003-04-22 Roxio, Inc. Virtual reality camera
US6977676B1 (en) * 1998-07-08 2005-12-20 Canon Kabushiki Kaisha Camera control system
JP2000152168A (ja) * 1998-11-13 2000-05-30 Olympus Optical Co Ltd 画像再生装置
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6769131B1 (en) 1999-11-18 2004-07-27 Canon Kabushiki Kaisha Image processing apparatus and method, image distribution system and storage medium
JP2002034032A (ja) * 2000-07-13 2002-01-31 Asahi Optical Co Ltd 監視カメラシステム用コントローラ
JP2002200210A (ja) * 2000-12-28 2002-07-16 Asobous:Kk 野球におけるスコアメイカーシステムと、自動編集システムと、動作分析システムよりなる情報処理の方法
US7134093B2 (en) 2001-04-18 2006-11-07 International Business Machines Corporation Graphical user interface for direct control of display of data
FR2827680B1 (fr) * 2001-07-20 2003-10-10 Immervision Internat Pte Ltd Procede de capture d'une image panoramique au moyen d'un capteur d'image de forme rectangulaire
US7940299B2 (en) * 2001-08-09 2011-05-10 Technest Holdings, Inc. Method and apparatus for an omni-directional video surveillance system
JP4010444B2 (ja) * 2002-02-28 2007-11-21 シャープ株式会社 全方位監視制御システム、全方位監視制御方法および全方位監視制御プログラム
JP4100934B2 (ja) * 2002-02-28 2008-06-11 シャープ株式会社 複合カメラシステム、ズームカメラ制御方法およびズームカメラ制御プログラム
WO2004004320A1 (en) * 2002-07-01 2004-01-08 The Regents Of The University Of California Digital processing of video images
US6839067B2 (en) * 2002-07-26 2005-01-04 Fuji Xerox Co., Ltd. Capturing and producing shared multi-resolution video
US20040254982A1 (en) * 2003-06-12 2004-12-16 Hoffman Robert G. Receiving system for video conferencing system
US7336299B2 (en) * 2003-07-03 2008-02-26 Physical Optics Corporation Panoramic video system with real-time distortion-free imaging
US7746404B2 (en) * 2003-11-10 2010-06-29 Hewlett-Packard Development Company, L.P. Digital camera with panoramic image capture
JP2005148265A (ja) * 2003-11-13 2005-06-09 Sony Corp カメラ装置
US20070182812A1 (en) * 2004-05-19 2007-08-09 Ritchey Kurtis J Panoramic image-based virtual reality/telepresence audio-visual system and method
US7746376B2 (en) * 2004-06-16 2010-06-29 Felipe Mendoza Method and apparatus for accessing multi-dimensional mapping and information
US20060028550A1 (en) * 2004-08-06 2006-02-09 Palmer Robert G Jr Surveillance system and method
JP2006211105A (ja) * 2005-01-26 2006-08-10 Konica Minolta Holdings Inc 画像生成装置およびシステム
US20080062168A1 (en) * 2005-02-09 2008-03-13 David Poullier Method For Bulk Provision Of Interactive Virtual Visits For Multimedia Broadcast, And System Therefor
AU2005200888B2 (en) * 2005-02-28 2009-01-08 Canon Kabushiki Kaisha Visualising camera position in recorded video
KR100715026B1 (ko) * 2005-05-26 2007-05-09 한국과학기술원 단일카메라 전방향 양안시 영상 획득 장치
DE102006003524A1 (de) * 2006-01-24 2007-07-26 Oerlikon Contraves Ag Panorama-Sicht-System insbesondere in Kampfahrzeugen
US20100045773A1 (en) * 2007-11-06 2010-02-25 Ritchey Kurtis J Panoramic adapter system and method with spherical field-of-view coverage
KR100765209B1 (ko) * 2006-03-23 2007-10-09 삼성전자주식회사 전방향 스테레오 카메라 및 그 제어 방법
US20070285570A1 (en) * 2006-04-05 2007-12-13 Graco Children's Products Inc. Video Baby Monitor System with On-Screen Display
JP2008028778A (ja) * 2006-07-21 2008-02-07 Sony Corp 画像処理装置、画像処理方法及びそのプログラム
US20080049099A1 (en) * 2006-08-25 2008-02-28 Imay Software Co., Ltd. Entire-view video image process system and method thereof
US20080062250A1 (en) * 2006-09-13 2008-03-13 X10 Wireless Technologies, Inc. Panoramic worldview network camera with instant reply and snapshot of past events
US20080111831A1 (en) * 2006-11-15 2008-05-15 Jay Son Efficient Panoramic Image Generation
JP4931055B2 (ja) * 2006-11-22 2012-05-16 ソニー株式会社 画像処理装置及び画像処理方法
ES2370032T3 (es) * 2006-12-20 2011-12-12 Axis Ab Detección de la manipulación indebida de una cámara.
US7768545B2 (en) * 2007-03-06 2010-08-03 Otto Gregory Glatt Panoramic image management system and method
US8717412B2 (en) * 2007-07-18 2014-05-06 Samsung Electronics Co., Ltd. Panoramic image production
US20090073254A1 (en) 2007-09-17 2009-03-19 Hui Li Omnidirectional imaging system with concurrent zoom
KR101467870B1 (ko) 2008-04-10 2014-12-02 삼성전자주식회사 디지털 영상 촬영 장치, 그 제어방법 및 이를 실행시키기위한 프로그램을 저장한 기록매체
US20090290024A1 (en) * 2008-05-21 2009-11-26 Larson Bradley R Providing live event media content to spectators
RU83675U1 (ru) * 2008-10-03 2009-06-10 Закрытое Акционерное Общество "Голлард" Система видеомониторинга
RU2008139232A (ru) * 2008-10-03 2010-04-10 Закрытое акционерное общество "ГОЛЛАРД" (RU) Система и способ видеомониторинга
US20100265313A1 (en) * 2009-04-17 2010-10-21 Sony Corporation In-camera generation of high quality composite panoramic images
US10080006B2 (en) * 2009-12-11 2018-09-18 Fotonation Limited Stereoscopic (3D) panorama creation on handheld device
JP2011239150A (ja) 2010-05-10 2011-11-24 Sony Corp 制御装置、カメラシステム及びプログラム
JP2011239149A (ja) 2010-05-10 2011-11-24 Sony Corp 制御装置、カメラシステム及びプログラム
US10645344B2 (en) * 2010-09-10 2020-05-05 Avigilion Analytics Corporation Video system with intelligent visual display
JP5569329B2 (ja) * 2010-10-15 2014-08-13 大日本印刷株式会社 会議システム、監視システム、画像処理装置、画像処理方法及び画像処理プログラム等

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001148850A (ja) * 1999-11-18 2001-05-29 Canon Inc 映像処理装置、映像処理方法、映像配信システム、記憶媒体
JP2007043505A (ja) * 2005-08-03 2007-02-15 Sony Corp 撮像システムとカメラ制御装置およびパノラマ画像生成方法とプログラム
JP2008301191A (ja) * 2007-05-31 2008-12-11 Victor Co Of Japan Ltd 映像監視システム、映像監視制御装置、映像監視制御方法、及び映像監視制御用プログラム

Also Published As

Publication number Publication date
JP5338498B2 (ja) 2013-11-13
RU2528566C2 (ru) 2014-09-20
BRPI1012976A2 (pt) 2018-01-16
CN102461153B (zh) 2015-02-25
RU2011149201A (ru) 2013-06-10
KR20120030403A (ko) 2012-03-28
US20200404176A1 (en) 2020-12-24
EP3367662B1 (en) 2021-12-29
WO2010143558A1 (ja) 2010-12-16
KR101782282B1 (ko) 2017-09-26
US10798280B2 (en) 2020-10-06
EP3367662A1 (en) 2018-08-29
TWI422218B (zh) 2014-01-01
KR20160116044A (ko) 2016-10-06
US20120062695A1 (en) 2012-03-15
EP3923565A1 (en) 2021-12-15
CN102461153A (zh) 2012-05-16
EP2442548A4 (en) 2012-11-28
EP2442548B1 (en) 2018-05-02
TW201123856A (en) 2011-07-01
EP2442548A1 (en) 2012-04-18
JP2010287965A (ja) 2010-12-24
US11477375B2 (en) 2022-10-18

Similar Documents

Publication Publication Date Title
KR101662074B1 (ko) 제어 장치, 카메라 시스템 및 기록 매체
US11146726B2 (en) Control device, camera system and program
US20040179121A1 (en) System and method for displaying captured images according to imaging device position
JP2004282162A (ja) カメラ、監視システム
JP2013239986A (ja) 補助情報生成装置、撮影画像表示システム、補助情報生成方法、撮影画像表示方法、及びコンピュータプログラム
KR102009988B1 (ko) 초광각 카메라를 이용한 렌즈 왜곡 영상 보정 카메라 시스템의 영상 보정 방법 및 그가 적용된 tvi 장치
JP5464290B2 (ja) 制御装置、制御方法、及びカメラシステム
KR20180111535A (ko) 영상 표시장치 및 영상 표시장치의 제어방법
KR20050062859A (ko) 감시카메라의 포지셔닝 방법
JP2011205574A (ja) 制御装置、カメラシステム及びプログラム
JP5765279B2 (ja) カメラ制御装置、カメラ制御方法及びカメラ制御プログラム
KR200481796Y1 (ko) Ptz 카메라 컨트롤러
JP2019140566A (ja) 情報処理装置、情報処理方法及びプログラム
JP2019140599A (ja) 情報処理装置、情報処理方法及びプログラム

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant