KR100482727B1 - 전방향성결상장치및방법 - Google Patents

전방향성결상장치및방법 Download PDF

Info

Publication number
KR100482727B1
KR100482727B1 KR10-1998-0709047A KR19980709047A KR100482727B1 KR 100482727 B1 KR100482727 B1 KR 100482727B1 KR 19980709047 A KR19980709047 A KR 19980709047A KR 100482727 B1 KR100482727 B1 KR 100482727B1
Authority
KR
South Korea
Prior art keywords
image
reflector
scene
omnidirectional imaging
additional
Prior art date
Application number
KR10-1998-0709047A
Other languages
English (en)
Other versions
KR20000010900A (ko
Inventor
쉬리 케이. 나야르
Original Assignee
더 트러스티스 오브 컬럼비아 유니버시티 인 더 시티 오브 뉴욕
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 더 트러스티스 오브 컬럼비아 유니버시티 인 더 시티 오브 뉴욕 filed Critical 더 트러스티스 오브 컬럼비아 유니버시티 인 더 시티 오브 뉴욕
Priority to KR10-1998-0709047A priority Critical patent/KR100482727B1/ko
Publication of KR20000010900A publication Critical patent/KR20000010900A/ko
Application granted granted Critical
Publication of KR100482727B1 publication Critical patent/KR100482727B1/ko

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/12Panospheric to cylindrical image transformations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00Optical objectives specially designed for the purposes specified below
    • G02B13/06Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • G08B13/19626Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • G08B13/19626Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses
    • G08B13/19628Surveillance camera constructional details optical details, e.g. lenses, mirrors or multiple lenses of wide angled cameras and camera groups, e.g. omni-directional cameras, fish eye, single units having multiple cameras achieving a wide angle view
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19641Multiple cameras having overlapping views on a single scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/74Projection arrangements for image reproduction, e.g. using eidophor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

하나의 관측 지점에서 대체로 반구형인 장면의 이미지를 감지하기 위한 전방향성 결상 장치(130)는 대체로 반구형인 장면의 이미지를 정사영으로 반사하도록 배치된 대체로 포물면 모양의 절단된 볼록 반사경(135)과 정사영으로 반사된 이미지를 수신하도록 배치된 이미지 센서(110)를 포함한다. 하나의 관측 지점에서 보이는 것 같이 대체로 반구형인 장면의 이미지를 투영하기 위한 전방향성 이미지 투영 장치는 이미지로 변화된 평행 광선을 투영하는 수단과 반구형인 장면을 투영하기 위하여 이미지로 변화된 평행 광선을 정사영으로 반사하도록 배치된 대체로 포물면 모양의 절단된 볼록 반사경을 포함한다.

Description

전방향성 결상 장치 및 방법
본 발명은 전방향 이미지(image) 감지와 하나의 관측 지점에 관한 투영에 관한 것으로, 특히 대체로 포물면 모양의 절단된 볼록 반사체를 사용하는 이미지 감지와 투영에 관한 것이다.
감시, 원격지간 회의, 원격 감지, 사진 측량, 모델 습득(model acquisition), 가상 현실, 컴퓨터 그래픽, 기계 시력 그리고 로봇 공학 등과 같은 많은 응용 분야에서, 결상(imaging) 시스템이 결상 시스템 주변 상황에 대하여 되도록 많은 정보를 얻기 위하여 넓은 시야를 가지는 것이 바람직하다.
일반적인 결상 시스템은 이미지를 원근 투영하는 렌즈를 가지는 카메라를 포함한다. 그러나, 매우 넓은 광각 렌즈를 가지는 카메라도 한정된 시야를 가진다(즉, 완전한 반구보다 작은 시야를 가진다). 이와 같이 한정된 시야는 전체 결상 시스템을 그 투영 중심에 대하여 경사를 주거나 상하좌우로 이동시킴으로써 확대될 수 있다. 그런 시스템 중 하나가 S.E. Chen의 "Quicktime VR - An Image-Based Approach to Virtual Environment Navigation", Proc. of SIGGRAPH 95, (8):29-38, August(1995)에 기재되어 있다. L. Mcmillan과 G. Bishop의 저서인 "Plenoptic Modeling: An Image-Based Rendering System", Computer Graphics:Proc. of SIGGRAPH, August 1995, pp. 39-46에도 일반적인 팬-틸트 시스템(pan-and-tilt system)이 기재되어 있다. 이 형태의 시스템은 두 가지 중요한 결점을 가지고 있는데, 첫째는 중요한 이동부를 가지는 장치와 관련되어 명백하게 불리하다는 것이고, 둘째는 주변 상황을 보기 위하여 완전히 회전하는데 상당한 시간이 필요하다는 것이다. 이러한 시간 제한으로 인하여 그러한 장치는 리얼타임(real-time) 응용 분야에 적합하지 않다.
결상 시스템에서 시야를 증가시키기 위한 다른 시도가 E.L. Hall et al.의 "Omnidirectional Viewing Using a Fish Eye Lens", SPIE Vol. 728 Optics, Illumination, and Image Sensing for Machine Vision (1986), p. 250에 개시되어 있는 것과 같은 소위 "어안(fish eye)"을 사용함으로써 행해진다. 어안 렌즈는 매우 짧은 초점 거리를 가지기 때문에, 시야가 반구와 같을 정도로 넓을 수가 있다. 그러나, 어안 렌즈가 일반적인 렌즈에 비하여 매우 크고 더 복잡하다는 점에서, 결상 시스템에서 그러한 렌즈의 사용이 문제가 된다. 게다가, 관련 장면의 모든 지점에 대하여 고정된 관측 지점을 가지는 어안 렌즈를 개발하는 것은 어렵다. Zimmerman의 미국 특허 번호 5,187,667와, Kuban et al.의 미국 특허 번호 5,359,363는 일반적인 팬과 틸트 메커니즘을 대신하는 어안 렌즈의 사용에 관하여 지시되어 있고, 따라서 상기와 같은 점에서 불리하다.
다른 종래 기술의 장치는 시야를 증가시키기 위하여 반사 표면을 사용한다. 그러한 종래 기술 장치 중 하나는 V.S. Nalwa의 "A True Omni Directional Viewer", ATT Bell Laboratories Technical Memorandum, BL0115500-960115-01, Jan. 1996에 개시되어 있다. Nalwa는 반구형 장면의 50°밴드(band)의 360°파노라마식 이미지를 얻기 위하여 다수의 전하 결합 소자(CCD:Charge Coupled Device)와 함께 다수의 평면 반사면의 사용에 대하여 개시하고 있다. 특히, Nalwa에서, 4개의 평면경이 피라미드 형태로 배열되어 있고, 4개의 평면 반사면 위에 각각 하나의 카메라가 놓여 있고, 각 카메라는 50°의 반구형 장면을 90°보다 조금 더 넓게 본다. 이러한 시스템은 반구형 이미지를 얻기 위하여 다수의 센서가 필요하다는 결점을 가지고 있다. 게다가, 이러한 시스템은 분리된 이미지가 완전한 360°시야를 제공하기 위하여 결합될 때 "경계"에서의 왜곡과 관련된 근본적인 문제를 가지고 있다.
곡선 모양의 반사 표면 또한 이미지 센서와 함께 사용된다. 그러나, 원근 투영에 있어서, 하나의 관측 지점에서 보이는 장면의 이미지를 형성하는 반사 표면만이 렌즈와 상기 관측 지점 사이의 선분의 중심을, 선분의 수직 방향으로, 지나가는 평면이라는 것은 종래 기술에서 잘 알려져 있다. 따라서, 곡선 모양의 표면은 반드시 다수의 관측 지점을 가져야 할 것이다. Yagi et al.의 "Evaluating Effectivity of Map Generation by Tracking Vertical Edges in Omindirectional Image Sequence", IEEE International Conference on Robotics and Automation, June 1995, p. 2334와 Yage et al.의 "Map-Based Navigation for a Mobile Robot With Omnidirectional Image Sensor COPIS", IEEE Transactions on Robotics and Automation, Vol. II, No. 5, Oct. 1995는 모두 주변 상황으로부터 이미지를 모으기 위하여 원뿔형 반사 표면을 사용하고, 이동 로봇의 항해를 안내하기 위하여 정보를 처리하는 원뿔형 투영 이미지 센서(COPIS:COnical Projection Image Sensor)를 개시하고 있다. 비록 원뿔형 투영 이미지 센서가 360°로 볼 수 있도록 하지만, 원뿔형 거울의 꼭지점 각과 카메라 렌즈의 시야각에 의하여 시야가 한정되기 때문에 원뿔형 투영 이미지 센서는 진정한 전방향성 이미지 센서가 아니다. 더욱이, 상기한 바와 같이, 곡선 모양의 표면에서 벗어난 반사가 원뿔에 대한 관측 지점의 궤적이 원인 다수의 관측 지점에 도달한다. 다수의 관측 지점은 상당한 왜곡을 발생하고 복잡한 처리와 하나의 관측 지점에서 보이는 것과 같이 장면을 재구성하기 위한 상의 변경을 필요로 한다.
Yamazawa et al.의 "Obstacle Detection With Omnidirectional Image Sensor HyperOmni Vision", IEEE International Conference on Robotics and Automation, Oct. 1995, p. 1062는 원뿔형 표면 대신에 쌍곡면의 반사 표면의 사용을 포함하는 원뿔형 투영 이미지 센서 시스템에서의 개선을 개시하고 있다. 거기에 기재되어 있는 바와 같이, 쌍곡면의 표면을 벗어나서 반사되는 광선이 시작점이 어디인지에 상관없이 하나의 지점에 모두 집중될 것이고, 따라서 원근법에 의한 관측이 가능하다. 비록 완전한 원근법에 의한 이미지 감지가 가능하다는 점에서 쌍곡면 거울의 사용이 유리하더라도, 반사된 이미지를 구성하는 광선이 반사체의 초점에 집중되기 때문에, 반사 표면에 관련된 센서의 위치가 중요하고, 어떠한 방해로 인하여 이미지의 질이 떨어질 것이다. 게다가, 원근-투영 모델의 사용은 본래 센서와 거울 사이의 거리가 증가함에 따라 거울의 단면이 증가하여야 한다는 것을 필요로 한다. 그러므로, 거울을 적당한 크기로 유지하기 위하여 거울이 센서에 가깝게 위치하여야 한다는 실제적인 고려가 필요하다. 이것은 차례로 이미지 센서 광학의 설계에 관하여 발생하는 복잡한 문제의 원인이 된다. 게다가, 감지된 이미지를 사용가능한 좌표로 맵핑(mapping)하는 것은 집중된 이미지의 본질 때문에 복잡한 측정을 필요로 한다.
상기한 종래 기술의 장치는 하나의 관측 지점에서 대체로 반구형인 장면을 감지할 수 있는 진정으로 전방향성인 결상 장치를 제공하지 못한다. 이러한 장치는 구조 재구성 또는 복잡한 구조 변환을 다 요구하지 않고, 대체로 반구형인 장면의 어떤 선택된 부분이 보여질 수 있고, 또한 그 장면이 상하좌우로 이동될 수 있는 결상 시스템을 제공하지 못한다.
도 1a는 전방향성 결상 장치의 모범적인 실시예의 측면도이고,
도 1b는 포물면 모양 반사경이 투명 지지체에 의하여 이미지 센서에도 연결된 다른 실시예의 측면도이고,
도 2는 기판 위에 설치된 포물면 모양 반사경의 등축도이고,
도 3은 원통 좌표계로 변환된 포물면 모양 반사경의 부분적인 등축도이고,
도 4는 곡선 모양의 반사 표면으로부터의 정사영 반사를 기하학적으로 나타낸 도면이고,
도 5는 대체로 포물면 모양인 반사경으로부터 이미지 센서로의 정사영 반사를 나타낸 도면이고,
도 6은 반구형 장면의 어떤 선택된 부분이 하나의 관측 지점에서 어떻게 보이는 가를 나타낸 도면이고,
도 7은 후면이 맞닿고 대체로 포물면 모양인 두 개의 반사경과 두 개의 이미지 센서를 가지는 전방향성 결상 장치의 측면도이고,
도 8은 후면이 맞닿도록 배치되고 공통 회전축과 공통 초점을 가지는 대체로 포물면 모양인 두 개의 반사경의 단면도이고,
도 9a는 전방향성 이미지 투영 장치의 모범적인 실시예의 측면도이고,
도 9b는 이미지로 변화된 평행 광선을 투영하기 위한 모범적인 실시예의 측면도이고,
도 10은 후면이 맞닿고 대체로 포물면 모양인 두 개의 반사경과, 대체로 반구형인 두 개의 장면에 대한 각각의 이미지로 변화된 두 개의 평행 광선을 대응하는 반사경으로 투영하기 위한 두 개의 광원과 두 개의 투명한 이미지 전달 매체를 가지는 전방향성 이미지 투영 장치의 측면도이고,
도 11은 원통형 좌표계로 변환된 전방향성 이미지 투영 장치의 포물면 모양의 반사경의 부분적인 등축도이고,
도 12는 하나의 관측 지점에서 대체로 반구형인 장면의 이미지를 감지하고 처리하는 방법의 모범적인 실시예의 순서도이고,
도 13은 대체로 반구형인 장면을 하나의 관측 지점에서 보이는 것과 같이 나타내는 이미지를 투영하는 방법의 순서도이다.
상기한 바와 같은 종래 기술의 결점은, 하나의 관점에서, 대체로 반구형인 장면의 이미지를 정사영으로(orthographically) 반사하도록 반사체의 초점이 하나의 관측 지점과 일치하는 곳에 배치된 절단되고 대체로 포물면 모양의 반사체를 가지는 전방향성 결상 장치인 본 발명에 의하여 대체로 개선된다. 이미지 센서는 상의 수직 반사를 수신하도록 배치된다.
본 발명의 한 실시예에서, 반사체의 표면은 대체로 원통 좌표로 표시된 식
을 따르며, 여기에서, r은 반경 방향의 좌표이고, z는 회전축이고, h는 상수이다. 상기 식이 회전의 대칭 표면을 나타내기 때문에, 표면의 형상은 각 좌표 ø의 함수가 아니다. 반사체는 z축에 대체로 수직하고, 포물면 반사체의 초점을 포함하는 평면에서 절단된다. 이미지 센서는 반사체의 z축과 일치하는 광축을 따라 바람직하게 배치된다.
모범적인 배열에서, 이미지 센서는 전자 센서이고 정사영으로 반사된 이미지를 나타내는 이미지 신호를 제공한다. 이러한 이미지 신호는 디지털화되어 이미지 처리 장치로 전달된다. 이미지 처리 장치는 반구형 장면의 어떤 부분이라도 볼 수 있도록 하고, 장면의 일부를 확대하도록 하고, 그리고 특정 관측 지점에서 장면을 상하좌우로 이동시킬 수 있도록 유리하게 개조된다.
발명의 다른 모범적인 실시예는 하나의 관측 지점에서 추가의 반구형 장면의 이미지를 정사영으로 반사하도록 배치된 추가의 대체로 포물면 모양의 절단된 볼록 반사체를 포함한다. 반구형 장면과 추가의 반구형 장면은 그들의 결합이 구형 장면이 되도록 서로 보완적이다. 추가의 이미지 센서가 추가의 반사체로부터 정사영으로 반사되는 이미지를 수신하도록 배치된다.
이러한 실시예에서, 반사체와 추가의 반사체는 후면이 맞닿도록 배치되고, 광축에 정렬된 공통 z축과 공통 초점을 가진다. 각각은 공통 z축에 대체로 수직하고, 공통 초점을 포함하는 평면에서 절단된다.
본 발명의 다른 관점은 대체로 반구형인 장면을 하나의 관측 지점에서 보이는 것과 같이 나타내는 이미지를 투영하는 전방향성 이미지 투영 장치이다. 전방향성 이미지 투영 장치는 이미지로 (공간적으로 및 될 수 있는 한 일시적으로) 변화된 평행 광선을 투영하기 위하여 반구형 장면의 이미지를 가지는 투명 매체 뒤에 있는 평행 광원과, 이미지로 변화된 평행 광선을 정사영으로 반사하도록 배치된 대체로 포물면 모양의 절단된 볼록 반사체를 포함하고, 그에 따라 대체로 반구형인 장면을 투영한다.
전방향성 이미지 투영 장치의 다른 모범적인 실시예는 추가의 대체로 반구형인 장면을 하나의 관측 지점에서 보이는 것과 같이 나타내는 다른 이미지로 변화된 다른 평행 광선을 투영하기 위하여 추가의 광원과 이미지 전달 투명 매체를 포함한다. 반구형 장면과 추가의 반구형 장면은 그들의 결합이 대체로 구형 장면이 되도록 서로 보완적이다. 포물면 모양의 절단된 볼록 반사체는 추가의 반구형 장면을 투영하기 위하여 추가의 평행 광선을 정사영으로 반사하도록 배치된다. 반사체와 추가의 반사체는 후면이 맞닿도록 배치되고, 공통 광축과 공통 초점을 가진다. 각각은 광축에 대체로 수직하고, 공통 초점을 포함하는 평면에서 절단된다.
본 발명은 하나의 관측 지점에서 대체로 반구형인 장면이 이미지를 감지하는 방법을 또한 제공하며, 이러한 방법은 모범적인 실시예에서 (a) 하나의 관측 지점이 반사 표면의 초점과 일치하는 것과 같은 대체로 포물면 모양인 반사 표면에 대체로 반구형인 장면의 이미지를 정사영으로 반사하는 단계, 및 (b) 정사영으로 반사된 이미지를 감지하는 단계를 포함한다. 단계 (b)는 반사체의 광축을 따라 하나의 위치로부터 대체로 정사영으로 반사된 이미지를 감지하는 것을 포함한다.
결상 방법의 다른 모범적인 실시예에서, 정사영으로 반사된 이미지를 나타내는 이미지 신호를 제공하는 단계, 이미지 신호를 이미지 데이터로 변환하는 단계, 이미지 데이터를 직각 좌표계(cartesian coordinate system)로 변환하는 단계, 이미지 데이터를 보간하는 단계, 및 변환된 이미지 데이터와 보간된 이미지 데이터로부터 디지털 이미지를 형성하는 단계가 추가로 포함된다. 바람직하다면, 보는 방향, 초점 거리 및 이미지의 크기를 설정한 후에, 이렇게 선택된 이미지의 일부가 상기 보간 단계를 실행하기 전에 확대될 수 있다.
마지막으로, 결상 방법의 또 다른 모범적인 실시예에서, 추가의 장면에 대한 하나의 관측 지점이 추가의 반사 표면의 초점과 일치하는 것과 같은 대체로 포물면 모양의 실질적인 반사 표면에 대체로 반구형인 장면의 추가의 이미지를 정사영으로 반사하는 단계, 및 수직으로 반사된 추가의 이미지를 감지하는 단계가 추가로 포함된다.
본 발명은 대체로 반구형인 장면을 나타내는 이미지를 하나의 관측 지점에서 보이는 것과 같이 투영하는 방법을 또한 제공하며, 이러한 방법은 모범적인 실시예에서, (a) 대체로 포물면 모양인 반사 표면에 이미지로 (공간적으로 그리고 될 수 있는 한 일시적으로) 변화된 평행 광선을 투영하는 단계, 및 (b) 그 이미지에 대한 하나의 관측 지점이 정사영의 반사 표면의 초점과 일치하는 것과 같은 대체로 포물면 모양인 반사 표면에 이미지로 변화된 평행 광선을 정사영으로 반사하는 단계를 포함한다. 이미지 투영 방법의 다른 모범적인 실시예는 대체로 반구형인 추가의 장면을 나타내는 추가의 이미지로 변화된 추가의 평행 광선을 하나의 관측 지점에서 보이는 것과 같이 투영하는 단계, 및 다른 반구형 장면에 보완적인 추가의 반구형 장면을 투영하기 위하여 추가의 이미지로 변화된 추가의 평행 광선을 정사영으로 반사하는 단계를 포함한다.
이하, 본 발명의 모범적인 실시예가 첨부된 도면을 참조로 하여 상세히 설명된다.
도 1a는 본 발명의 모범적인 실시예에 따른 전방향성 결상 장치(100)를 예시한다. 기판(140) 위에 설치된 포물면 모양의 볼록 반사경(135)이 대체로 반구형인 장면의 이미지(130)를 정사영으로 반사하도록 배치된다. 확대 렌즈(112)와 텔레센트릭(telecentric) 렌즈 또는 텔레센트릭 구멍(aperture)(113)을 가지는 상업적으로 사용가능한 소니 3CCD 컬러 비디오 카메라 장치(Sony 3CCD color video camera device)(111)와 같은 이미지 센서(110)가 정사영으로 반사된 이미지를 수신하도록 배치된다. 텔레센트릭 렌즈(113)는 렌즈면에 수직이 아닌 모든 광선, 즉 반구형 장면의 정사영 반사의 일부를 형성하지 않는 배경 광을 제거하도록 작용한다.
비록 여기에서 가시 광선에 관하여 설명하고 있지만, 본 발명은 자외선 또는 적외선과 같은 전자기 방사의 다른 형태에도 동일하게 적용된다.
도 1b에 도시된 발명에 따른 결상 장치(100)의 다른 모범적인 실시예에서, 포물면 모양 반사경이 길이가 긴 투명한 관과 같은 투명한 지지체(136)에 의하여 이미지 센서에 연결될 수 있다.
도 1a를 다시 참조하면, 비디오 카메라(110)는 정사영으로 반사된 이미지를 나타내는 아날로그 비디오 신호를 생성하여 케이블(150)을 통하여 내보낸다. 비디오 신호는 디지타이저(120)에 의하여 디지털 신호로 변환되며, 이 때 디지타이저(120)는 상업적으로 사용가능한 NTSC 비디오 신호 아날로그-디지털 변환기이다.
다음에 디지털 신호는 케이블(155)을 통하여 DEC Alpha 3000/600 워크스테이션과 같은 범용 컴퓨터(125)로 보내진다. 보다 더 상세하게 설명하면, 컴퓨터(125)는 사용자가 반구형 장면의 어떤 희망하는 부분을 볼 수 있고, 그 장면의 선택된 부분을 확대할 수 있고, 또는 어떤 희망하는 방식으로 그 장면을 상하좌우로 이동시킬 수 있도록 프로그램된다.
이미지 센서(110)는 단순하게 스틸(still) 카메라 또는 일반적인 촬영 필름을 사용하는 영화 촬영 카메라일 수 있다. 이미지 센서(110)는 또한 아날로그-디지털 변환기(120)가 필요없이 컴퓨터(125)로 직접 제공될 수 있는 디지털 비디오 신호 출력을 제공할 수 있다.
도 2는 기판(140) 위에 형성되고, 기판(140)으로부터 확장된 포물면 모양 반사경(135)의 등축도를 예시한다. 반사경(135)을 포함하여, 기판(140)의 전체 표면은 은과 같이 반사가 잘 되는 금속으로 된 얇은 층(145)으로 덮혀있다.
도 3은 대체로 반구형인 장면(130)의 이미지를 이미지 센서(110)로 정사영으로 반사하는 것은 물론, 포물면 모양 반사경(135)의 바람직한 지오메트리(geometry)를 보다 상세하게 예시한다. 도 3의 반사경(135)은 원통 좌표, r, ø 및 z로 정의되고, 대체로 식
(2)
을 따르며, 여기에서, z는 회전축이고, r은 반경 방향의 좌표이고, h는 상수이다. z축은 결상 배열의 광축과 일치하고, 식(1)에 의하여 정의된 포물면의 초점(315)은 좌표계의 원점과 일치한다. 도 3의 반사경(135)은 z축(310)에 대체로 수직하고, 그 포물면의 표면의 초점(315)을 포함하는 평면(p)에서 절단된다.
모든 입력되는 광선(305)은 초점(315)을 지나가지 않고 반사 포물면의 표면에 의하여 이미지 센서(110)를 향하여 정사영으로 반사된다. 따라서, 초점(315)은 대체로 반구형인 장면(130)이 보이는 하나의 관측 지점과 일치한다. 이미지 센서(110)는 결상 시스템의 광축(310)을 따라 배치되고, 그 감광성 표면은 광축에 수직이다.
원근 투영을 제공하는 곡선 모양의 표면으로부터의 반사가 다수의 관측 지점을 필요로 한다는 것은 종래 기술에서 잘 알려진 것이기 때문에, 하나의 관측 지점에서 대체로 반구형인 장면을 볼 수 있도록 하는 정사영 반사의 사용이 본 발명의 이점이다.
정사영 반사가 하나의 관측 지점에서 볼 수 있도록 한다는 것은 도 4를 참조하여 설명될 수 있다. 도 4에서, z과 r은 각 좌표에서 주어진 값 ø에 대한 수직 원통 좌표이다. 입력되는 광선(405)의 축에 관련된 각은 θ이다. 입력 광선(405)은 반사 표면(415)에 의하여 출력 광선(410)으로 정사영 반사된다.
하나의 관측 지점을 가지기 위하여, 어떠한 입력 광선도
tan(θ) = z/r (3)
을 만족하여야 하고, 정사영 반사를 위하여 모든 광선은 각
α = π/2 (4)
에서 반사되어야 하며, 여기에서 α는 출력 광선(410)과 축 사이의 각이다. 만족되어야 하는 두 개의 조건과 반사각과 같은 입사각에 대해서, 반사 광선(410)과 반사점에서 표면의 법선 사이의 각(β)은
(5)
와 같아야 하고, 이것은 또한
(6)
로 표현될 수 있다.
마지막으로, 반사점에서의 평면에 대한 반사 표면의 기울기는
(7)
이다.
(6)과 (4)를 (5)로 대입하면
(8)
가 산출된다.
식(7)의 이차 방정식은 에 대한 두 개의 해를 얻고, 오른쪽 사분면에서의 곡선의 기울기가 음수가 되기 때문에, 즉 표면이 볼록하기 때문에 반사 표면에 의한 자기 차단을 제거함으로써 해결될 수 있다. 그 결과는
(10)
이다.
만약 a = z/r이면, 상기 표현식은
로 축소되며, 여기에서 h는 적분 상수이다. z=ra를 식(9)로 대입하면 식(1)이 산출된다.
따라서, 곡선이 존재하고, 이러한 곡선은 축에 대하여 회전될 때 하나의 관측 지점에서 대체로 반구형인 장면의 정사영 반사를 허용하는 표면을 생성한다. 이러한 곡선은 식(1)에 의하여 정의된 포물선으로, 포물선의 초점(420)과 일치하는 하나의 관측 지점을 가진다.
하나의 관측 지점에서 대체로 반구형인 장면을 볼 수 있도록 하는 것외에, 본 발명에 따른 전방향성 결상 장치는 하나의 관측 지점에 관하여 모두, 그리고 이미지 개조 또는 복잡한 구조 변경을 필요로 하지 않고, 그 장면의 어떠한 영역이라도 볼 수 있도록 하고, 선택된 부분을 확대할 수 있고, 그리고 어떠한 방식으로 그 장면을 상하좌우로 이동시킬 수가 있다.
도 5는 대체로 반구형인 장면의 일부가 이미지 센서에 의하여 하나의 관측 지점에서 어떻게 보이는 가를 설명한다. 절단되고 볼록하고 대체로 포물면 모양인 반사경(135)이 직각 좌표계로 변환된다. 결상 배열의 광축(502)은 z축과 일치하고, 대체로 포물면인 반사경(135)은 원점에 위치한다. 보여질 장면(300)의 일부로부터 입력되는 광선(505, 510)은 점(515 및 520)에서의 반사 표면을 교차하고, 이것은 각각의 x 및 y 좌표에 의하여 정의될 수 있다. 점(515 및 520)은 가상의 광선(516 및 521)을 따라 각각 놓여 있고, 이러한 점은 그 장면의 관측 지점, 즉 포물면 반사경의 초점(501)에서 시작한다. 이러한 광선은 z축에 수직인 빛에 민감한 평면의 표면을 가지는 이미지 센서(110)를 향하여 정사영으로 반사되기 때문에, 투영된 광선은 동일한 각각의 x 및 y 좌표에서 빛에 민감한 표면을 교차할 것이다. z축만이 변할 것이다. 따라서, 정사영으로 투영되는 광선의 반사경(135)에서의 교차점의 x-y 좌표와 정사영으로 투영된 광선이 이미지 센서(110)의 빛에 민감한 평면의 표면을 교차하는 점의 x-y 좌표 사이에는 일대일의 대응이 있다.
바람직한 배열에서, 이미지 센서(110)는 빛을 감지하는 소자들의 배열을 가지는 2차원-전하결합소자(CCD) 이미지 센서를 포함한다. 따라서, 일대일 대응에 의하여, x-y 좌표의 특정 범위를 격자(grid)로 형성하는 전하결합소자 셀에 의하여 생성된 이미지 신호는 동일 범위의 x-y 좌표 내의 점에서 반사 표면(135)로부터 정사영으로 반사되는 광선을 나타낸다. 결국, 이미지의 맵핑은 본 기술 분야에서 숙련된 자에게는 간단한 일이다.
상기한 일대일 대응을 사용하여, 도 6은 대체로 반구형인 장면의 어떤 선택된 부분을 확대하는 기술을 설명한다. 반사경(135)은 도 5에서와 같은 방식으로 직교의 x, y 및 z축에 관하여 배치된다. 점(550)을 중심으로 하는 주변 장면의 특정 크기로 선택된 영역 이미지의 초점 거리(f)에서 확대하기 위하여, 그 장면의 선택된 영역을 투영하는 반사 표면의 영역과 동일한 범위의 x-y 좌표에 위치한 전하결합소자 셀의 이미지 신호만이 확대 및 관측을 위해 선택된다.
보다 상세하게, 그 장면의 선택된 영역 내에 있는 점(570)에 대한 적당한 빛의 강도를 결정하기 위하여, 지점(580)에 위치하는 전하결합소자 셀에 의하여 생성된 빛의 강도 신호가 선택된다. 도 6에 도시되어 있듯이, 점(570)과 초점(551) 사이에 도시된 선분은 점(552)에서 반사경(135)과 교차한다. 점(570)에서의 빛의 강도는 점(552)의 x-y 좌표와 가장 가까운 격자 이미지의 x-y 좌표에 위치하는 지점(580)에서의 전하결합소자 셀에 의하여 생성되는 이미지 신호에 의하여 나타나는 빛의 강도와 같게 설정된다. 그 장면의 선택된 영역을 투영하는 반사 표면의 영역과 동일한 x-y 좌표의 범위 내에 있는 각 전하결합소자 셀에 대해서도 동일하다. 상기한 정사영 반사와 일대일 대응의 결과로서, 이미지 개조 또는 복잡한 구조 변환이 필요하지 않게 된다. 범용 컴퓨터(125)는 본 기술 분야에서 숙련된 자에 의하여 하나의 관측 지점에서 반구형 장면의 어떤 영역을 관측할 수 있도록 하고, 또한 그 영역의 확대된 이미지를 제공하기 위하여 어떤 특정 영역을 확대할 수 있도록 하는 상기 단계를 수행하도록 쉽게 프로그램되어 질 수 있다. 게다가, 반사경을 따라서 연속적인 점을 지정함으로써, 하나의 관측 지점에서 그 장면을 보고 있는 것과 같이 상하좌우로 이동될 수가 있다.
상기한 실시예에서, 장면의 보다 작은 영역을 확대하기 때문에 컴퓨터(125)로 정보를 제공하는 전하결합소자 셀의 수가 감소되고, 따라서 보이는 이미지의 입도(granularity)가 증가된다는 것은 명백하다. 바람직한 실시예에서, 전하결합소자 셀에 정확하게 일치하지 않는 그 장면 내의 점에 대한 정보는 보간법에 의하여 보다 더 접근된다. 컴퓨터(125) 상에서 실행될 수 있는 바람직한 보간 프로그램의 소스 코드는 [표 1]과 같다.
[표 1]과 같은 프로그램은 감지된 전방향성 이미지를 컴퓨터(125) 상에 표시하기에 적합한 통상의 투영 이미지로 맵핑할 것이다. 프로그램은 사용자가 이름, 중심 위치, 그리고 변환될 전방향성 이미지의 반경을 입력하기를 요구한다. 프로그램은 또한 초점 거리 및 투영 이미지에 대한 크기는 물론 생성된 투영 이미지에 대한 이름 입력을 요구한다.
따라서, 전하결합소자 셀에 정확하게 일치하지 않는 이미지의 영역을 나타내는 가장 가까운 전하결합소자 셀에 의하여 생성된 이미지 신호를 단순히 선택하는 대신에, 그러한 장면 영역에 대한 이미지가 그 장면에 이웃하는 영역과 일치하는 전하결합소자 셀에 의하여 생성된 이미지 신호의 적당한 평균에 기초하여 상기한 프로그램에 의하여 평가된다. 물론, 다항식(polynomial) 또는 시간 정합(temporal matching)에 기초한 것과 같이, 본 기술 분야에서 숙련된 자들에게 알려진 보다 복잡한 보간 프로그램이 여기 청구항에 의하여 한정된 본 발명의 범위를 벗어나지 않고 사용될 수 있다.
본 발명의 다른 모범적인 실시예에서, 전방향성 결상 장치는 도 7에 도시되어 있듯이 대체로 포물면 모양인 추가의 반사경(735)을 포함한다. 추가의 반사경은 함께 구형 장면을 구성하도록 반구형 장면(130)을 보완하는 추가의 반구형 장면(730)의 이미지를 정사영으로 투영하도록 배치된다. 추가의 이미지 센서(710)는 추가의 반사경(735)에 의하여 정사영으로 투영되는 이미지를 수신하도록 배치된다.
추가의 반사경(735)의 정사영 반사를 나타내는 이미지 신호는 상기한 바와 같은 방법으로 변환기(720)에 의하여 디지털 신호로 변환되고, 선(725)을 통하여 동일한 범용 컴퓨터(125)로 전달된다.
도 8에 도시되어 있듯이, 반사경(135 및 735)은 후면이 맞닿도록 배치되고, 결상 장치의 광축인 공통 회전축(810)과 공통 초점(805)을 공유하고, 회전축(810)에 대체로 수직하고 초점(805)을 포함하는 평면(p)에서 각각 절단된다.
도 9a는 하나의 관측 지점에서 보이는 것과 같이 대체로 반구형인 장면을 나타내는 이미지를 투영하기 위한 본 발명에 따른 전방향성 이미지 투영 장치의 모범적인 실시예를 예시한다. 전방향성 이미지 투영 장치는 평행 광원(910), 대체로 반구형인 장면의 이미지를 전달하는 투명 매체(920)를 포함한다. 투명한 이미지 전달 매체는 상기한 전방향성 결상 장치에 의하여 생성된 촬영용 투명슬라이드(photographic transparency)일 수 있고, 또는 대체로 반구형인 장면의 정지화상 또는 동화상을 전달하는 투명한 액정 표시 장치(LCD)일 수 있다.
광원(910)은 투명 매체(920) 상에 공간적으로( 또한 될 수 있는 한 일시적으로) 이미지로 변화된 평행 광선(940)을 생성하기 위하여 투명한 이미지 전달 매체(920)를 통하여 평행 광선(940)을 투영한다. 대체로 포물면 모양인 반사경(930)은 본 발명의 실시예에서 도 2 및 도 3을 참조하여 상기에서 설명된 거울이고, 대체로 반구형인 장면을 투영하기 위하여 광선(940)으로 변화된 평행 이미지를 정사영으로 반사하도록 배치된다.
도 9b에 도시되어 있는 본 발명에 따른 투영 시스템의 다른 모범적인 실시예에서, 평행 광원 및 투명한 이미지 전달 매체는 범용 컴퓨터(970)에 의하여 제어되는 비디오 프로젝션 시스템(video projection system)(960)에 의하여 대체된다. 비디오 프로젝션 시스템(960)은 바람직한 이미지 정보로 변화된 평행 광선(940)을 생성한다. 이 때문에, 컴퓨터(970)는 프로젝션 시스템(960)으로부터 방사된 빛(940)의 강도 분배를 제어할 수 있다.
본 발명에 따른 전방향성 이미지 투영 장치의 다른 모범적인 실시예는, 도 10에 도시되어 있듯이, 대체로 반구형인 추가의 장면을 나타내는 추가의 이미지를 유지하는 추가의 투명한 이미지 전달 매체(1020) 및 대체로 포물면 모양인 추가의 반사경(1030)을 포함한다. 대체로 반구형인 장면과 대체로 반구형인 추가의 장면은 둘의 조합이 구형 장면이 되도록 서로 보완된다.
대체로 포물면 모양인 추가의 반사경(1030)은 추가의 평행 광선(1040)을 정사영으로 반사하도록 배치되고, 그로 인하여 추가의 반구형 장면을 투영한다.
두 개의 반사경은 후면이 맞닿도록 배치되고, 도 8에 도시된 바와 같이 공통 회전축과 공통 초점을 공유한다. 각각은 공통 회전축에 대체로 수직하고 공통 초점을 포함하는 평면에서 절단된다.
도 12를 참조하여, 본 발명의 모범적인 실시예에 따라 대체로 반구형인 또는 하나의 관측 지점에서의 구형인 장면의 이미지를 감지하는 방법을 설명하는 순서도가 도시되어 있다. 순서도(1200)에는 하나의 관측 지점에서 반구형 장면을 감지하는데에 필요한 단계가 도시되어 있다. 그 방법은 대체로 반구형인 장면을 정사영으로 반사하는 단계(1210)와 정사영으로 반사된 이미지를 감지하는 단계(1220)를 필요로 한다.
그 방법은 이미지 신호를 이미지 신호 데이터로 변환하는 단계(1230), 이미지 데이터를 직각 좌표계로 맵핑하는 단계(1240), 누락된 이미지 데이터에 대한 근사값을 추출하기 위하여 보간하는 단계(1260), 그리고 맵핑된 이미지 데이터와 보간된 이미지 데이터로부터 디지털 이미지를 형성하는 단계(1270)를 추가로 포함할 수 있다. 유리하게, 관측 방향, 초점 거리 및 이미지 크기를 설정하는 단계(1245)와 이미지 데이터의 선택된 영역을 확대하는 단계(1250)가 보간 단계 전에 수행될 수 있다.
마지막으로, 도 13은 본 발명의 모범적인 실시예에 따라 하나의 관측 지점에서 보이는 것 같이 대체로 반구형인 장면을 나타내는 이미지를 투영하는 방법의 순서도를 예시한다. 그 방법은 이미지로 변화된 평행 광선을 투영하는 단계(1310)와 이미지에 대한 하나의 관측 지점이 반사 표면의 초점과 일치하는 것과 같은 방식으로 대체로 포물면 모양인 반사 표면 상에 평행 광선을 정사영으로 반사시키는 단계(1320)를 포함한다.
그 방법은 하나의 관측 지점에서 보이는 것 같이 대체로 반구형인 추가의 장면을 나타내는 추가의 이미지로 변화된 추가의 평행 광선으로 투영하는 단계(1330)와 대체로 반구형인 추가의 장면을 재현하기 위하여 추가의 평행 광선을 정사영으로 반사하는 단계(1340)를 더 포함한다.
따라서, 본 발명은 움직이는 부분을 가지고 있지 않은 하나의 관측 지점에서의 대체로 반구형인 장면의 이미지를 감지하는 전방향성 결상 장치를 제공한다. 본 발명의 장치는 이미지의 질을 개선시키고, 복잡한 이미지 개조 또는 복잡한 구조 변환없이 장면의 어떤 영역이든 확대할 수 있고, 그 장면을 상하좌우로 이동시킬 수 있도록 하기 위하여 정사영 반사를 사용한다.
본 발명은 하나의 관측 지점에서 보이는 것 같이 대체로 반구형인 장면을 나타내는 이미지를 투영할 수 있는 전방향성 이미지 투영 장치를 또한 제공한다.
상기한 설명은 본 발명에 포함된 원리를 단순히 예시하고 있다. 본 발명의 다른 변형이 본 기술 분야에서 숙련된 자에게는 명백할 것이고, 본 발명의 범위는 후술되는 특허청구범위에 나타나는 것에 의해서만 제한된다.
[표 1]

Claims (21)

  1. 하나의 관측 지점에서 실질적으로 반구형인 장면의 이미지를 감지하는 전방향성 결상 장치(omnidirectional imaging apparatus)에 있어서,
    a) 실질적으로 반구형인 장면의 이미지를 정사영으로 반사하도록 배치된 실질적으로 포물면 모양의 절단된 볼록 반사경;
    b) 상기 반사경에 광학적으로 결합되고, 상기 반사경에 의해 정사영으로 반사되지 않은 전자기 방출의 주요 광선을 필터링하여 제거하는 텔레센트릭(telecentric) 수단; 및
    c) 상기 이미지의 필터링된 정사영 반사를 수신하도록 배치된 이미지 센서를 포함하고,
    상기 포물면의 반사경은 상기 전방향성 결상 장치의 단일 관측 지점과 일치하는 초점을 가지는 것을 특징으로 하는 전방향성 결상 장치.
  2. 제1항에 있어서, 상기 이미지 센서가 전하 결합 소자(charged coupled device) 이미지 센서를 포함하는 전방향성 결상 장치.
  3. 제1항에 있어서, 상기 이미지 센서가 촬영 필름을 포함하는 전방향성 결상 장치.
  4. 제1항에 있어서, 상기 이미지 센서가 비디오 카메라를 포함하는 전방향성 결상 장치.
  5. 제1항에 있어서,
    상기 반사경이 실질적으로 포물면인 거울을 포함하고, 상기 포물면의 표면이 원통 좌표로 표현된 아래의 관계식
    여기서 z는 상기 표면의 회전축,
    r은 반경 방향의 좌표,
    h는 상수임
    을 실질적으로 따르는 전방향성 결상 장치.
  6. 제1항에 있어서,
    상기 반사경이 회전축을 가지고, 상기 회전축에 대체로 수직하고 상기 반사경의 초점을 포함하는 평면에서 절단된 거울을 포함하는, 전방향성 결상 장치.
  7. 제1항에 있어서, 상기 이미지 센서가 상기 반사경의 회전축을 따라 배치되는 전방향성 결상 장치.
  8. 제1항에 있어서, 상기 반사경과 상기 이미지 센서의 상대적인 위치를 유지하기 위하여 상기 반사경을 상기 이미지 센서에 연결하는 투명 지지체를 추가로 포함하는 전방향성 결상 장치.
  9. 제1항에 있어서,
    상기 이미지 센서가 정사영으로 반사된 이미지를 나타내는 이미지 신호를 제공하고,
    상기 이미지 센서에 연결되어, 상기 이미지 신호를 이미지 신호 데이터로 변환하고 상기 이미지 신호 데이터를 직각 좌표계(cartesian coordinate system)로 맵핑(mapping)하는 이미지 신호 처리 장치를 추가로 포함하는 전방향성 결상 장치.
  10. 제9항에 있어서,
    상기 이미지 신호 처리 장치가 보간된 이미지 데이터를 제공하는 보간 수단을 추가로 포함함으로써, 상기 보간된 이미지 데이터와 상기 이미지 신호 데이터가 디지털 이미지를 형성하도록 결합되는,
    전방향성 결상 장치.
  11. 제10항에 있어서,
    상기 이미지 처리 장치가 상기 디지털 이미지의 미리 선택된 부분을 확대하는 수단을 추가로 포함함으로써, 미리 설정된 초점 거리에서 상기 미리 선택된 부분의 확대된 상을 제공하는,
    전방향성 결상 장치.
  12. 제1항에 있어서,
    상기 이미지 센서와 상기 반사경을 광학적으로 연결하고, 상기 이미지 센서와 상기 반사경 사이에 배치되는 적어도 하나의 렌즈
    를 추가로 포함하는 전방향성 결상 장치.
  13. 제1항에 있어서, 상기 텔레센트릭 수단은 텔레센트릭 렌즈(telecentric lens)를 포함하는, 전방향성 결상 장치.
  14. 제1항에 있어서,
    상기 텔레센트릭 수단은 텔레센트릭 개구(aperture)를 포함하는, 전방향성 결상 장치.
  15. 제1항에 있어서,
    상기 하나의 관측 지점에서 추가의 반구형인 장면의 이미지를 정사영으로 반사하도록 배치된 추가의 실질적으로 포물면 모양의 절단된 볼록 반사경과,
    상기 추가의 반구형 장면이 이미지의 정사영 반사를 수신하도록 배치된 추가의 이미지 센서
    를 추가로 포함하고,
    상기 반구형 장면과 상기 추가의 반구형 장면을 결합하면 실질적으로 구형의 장면을 이루도록, 상기 반구형 장면과 상기 추가의 반구형 장면이 상호 보완적인 것을 특징으로 하는 전방향성 결상 장치.
  16. 제15항에 있어서,
    상기 반사경과 추가의 반사경은 후면이 맞닿도록 배치되고, 공통 광축과 공통 초점을 가지며,
    상기 각각의 반사경은, 상기 광축에 실질적으로 수직이고, 상기 공통 초점을 포함하는 평면에서 절단된 거울을 포함하는
    전방향성 결상 장치.
  17. 하나의 관측 지점에서 보이는 실질적으로 반구형인 장면을 나타내는 이미지를 투영하는 전방향성 이미지 투영 방법(omnidirectional imnage projection apparatus)에 있어서,
    a) 실질적으로 반구형인 장면의 이미지를 실질적으로 포물면 모양인 반사 표면에서 정사영으로 반사시키는 단계;
    b) 상기 정사영으로 반사된 부분이 아닌 전자기 방출의 주요 광선의 실질적인 부분을 텔레센트릭하게(telecentrically) 필터링하여 제거하는 단계; 및
    c) 상기 필터링된 정사영으로 반사된 이미지를 감지하는 단계
    를 포함하고,
    상기 반사 표면에서 상기 장면을 반사하는 단계를 포함하는 상기 전방향성 결상 방법의 하나의 관측 지점은 상기 반사 표면의 초점과 일치하는 것을 특징으로 하는 전방향성 결상 방법.
  18. 제17항에 있어서,
    상기 b) 단계가, 한 위치로부터 상기 반사경의 회전축을 따라서 실질적으로 정사영으로 반사된 이미지를 감지하는 단계를 포함하는,
    전방향성 결상 방법.
  19. 제18항에 있어서,
    상기 정사영으로 반사된 이미지를 나타내는 이미지 신호를 제공하는 단계;
    상기 이미지 신호를 이미지 신호 데이터로 변환하는 단계; 및
    상기 이미지 신호 데이터를 직각 좌표계로 맵핑하는 단계
    를 추가로 포함하는 전방향성 결상 방법.
  20. 제19항에 있어서,
    누락된 이미지 데이터에 대한 근사값을 정의하기 위하여 상기 이미지 신호 데이터를 보간하는 단계; 및
    상기 맵핑된 이미지 데이터와 상기 보간된 이미지 데이터로부터 디지털 이미지를 형성하는 단계
    를 추가로 포함하는 전방향성 결상 방법.
  21. 제18항에 있어서,
    대체로 반구형인 추가의 장면의 추가의 이미지를 정사영으로 반사하는 단계; 및
    상기 정사영으로 반사된 추가의 이미지를 감지하는 단계
    를 추가로 포함하는 전방향성 결상 방법.
KR10-1998-0709047A 1996-05-10 1997-04-30 전방향성결상장치및방법 KR100482727B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR10-1998-0709047A KR100482727B1 (ko) 1996-05-10 1997-04-30 전방향성결상장치및방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US08/644,903 1996-05-10
KR10-1998-0709047A KR100482727B1 (ko) 1996-05-10 1997-04-30 전방향성결상장치및방법

Publications (2)

Publication Number Publication Date
KR20000010900A KR20000010900A (ko) 2000-02-25
KR100482727B1 true KR100482727B1 (ko) 2005-09-02

Family

ID=43668121

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-1998-0709047A KR100482727B1 (ko) 1996-05-10 1997-04-30 전방향성결상장치및방법

Country Status (1)

Country Link
KR (1) KR100482727B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001333303A (ja) 2000-05-23 2001-11-30 Sharp Corp 全方位視覚システム
JP3651844B2 (ja) * 2001-02-09 2005-05-25 シャープ株式会社 撮像装置およびその製造方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4549209A (en) * 1983-07-06 1985-10-22 John K. Grady X-Ray image converter system
JPH11219016A (ja) * 1998-01-30 1999-08-10 Mita Ind Co Ltd 静電潜像現像装置およびこれに適用する現像剤収納容器

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4549209A (en) * 1983-07-06 1985-10-22 John K. Grady X-Ray image converter system
JPH11219016A (ja) * 1998-01-30 1999-08-10 Mita Ind Co Ltd 静電潜像現像装置およびこれに適用する現像剤収納容器

Also Published As

Publication number Publication date
KR20000010900A (ko) 2000-02-25

Similar Documents

Publication Publication Date Title
RU2195085C2 (ru) Установка формирования изображения со всех направлений
KR100599423B1 (ko) 전방향성 이미징 장치
Nayar Catadioptric omnidirectional camera
Nayar Omnidirectional vision
US6313865B1 (en) Method and apparatus for implementing a panoptic camera system
Nayar Omnidirectional video camera
JP3485261B2 (ja) 半球状視野の電子結像及び処理のためのシステム及び方法
US7298548B2 (en) Multi-directional viewing and imaging
US7336299B2 (en) Panoramic video system with real-time distortion-free imaging
US6744569B2 (en) Method and apparatus for omnidirectional three dimensional imaging
RU2000117577A (ru) Всенаправленное устройство формирования изображения
EP1580986A2 (en) Method and apparatus for creating spherical images
GB2425363A (en) Panoramic adapter with mirrors formed by rotating conic section
US20050117227A1 (en) Panoramic imaging system with optical zoom capability
Lin et al. True single view point cone mirror omni-directional catadioptric system
KR100482727B1 (ko) 전방향성결상장치및방법
US7253969B2 (en) Spherical and nearly spherical view imaging assembly
CA2251879C (en) Omnidirectional imaging apparatus
Ohte et al. A practical spherical mirror omnidirectional camera
MXPA00005531A (en) An omnidirectional imaging apparatus
HICKS et al. Catadioptric sensors for panoramic viewing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120326

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20130329

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee