KR102368225B1 - 전자 디바이스 상의 디워프 이미지 뷰를 자동으로 변경하는 방법 및 장치 - Google Patents

Abstract

본 발명의 실시예들은 어안 카메라의 디워프 이미지를 자동으로 변경하는 방법 및 장치를 개시한다. 본 발명의 방법은 어안 카메라에 의하여 캡쳐된 어안 이미지의 복수의 디워프 이미지들을 디스플레이하는 단계를 포함한다. 또한 본 발명의 방법은 복수의 디워프 이미지들 중 적어도 하나의 디워프 이미지를 이벤트의 검출에 기초하여 자동으로 변경하는 단계를 포함한다.

Description

전자 디바이스 상의 디워프 이미지 뷰를 자동으로 변경하는 방법 및 장치{METHOD AND APPARATUS FOR AUTOMATICALLY CHANGING DEWRAP IMAGE VIEWS ON AN ELECTRONIC DEVICE}

본 발명의 실시예는 모니터링 장치에 관련되고, 보다 상세하게는 전자 디바이스 상의 디워프 이미지 뷰를 자동으로 변경하는 방법 및 장치에 관한 것이다.

일반적으로, 어안 카메라는 공공장소, 예컨대 기차역, 시장, 거리의 교차로, 및 에이전시, 도서관, 법정, 교도소 등의 공공빌딩을 모니터링하기 위하여 사용된다. 또한 어안 카메라는 민간부문, 예컨대 경보 시스템 또는 주의가 필요한 개인들을 감시하기 위해 사용된다. 어안 카메라는 실내 및 실외 애플리케이션 모두에 대하여 적합할 수 있다.

일반적으로, 어안 카메라는 사각 지대가 없는 360도의 전체 상황 인식을 제공하는데, 여기에서 사용자 또는 차량과 같은 이동하는 객체를 추적하기 위하여 어안 카메라가 사용될 수도 있다. 어안 카메라는 주변의 관련된 영역들을 모니터링하기 위하여 다양한 뷰(예를 들어, 이중 파노라마 뷰, 단일 파노라마 뷰, 및 쿼드 뷰(quad view))를 생성할 수 있다. 어안 카메라는 물리적으로 카메라를 원하는 부분을 향하게 함으로써 또는 모니터링된 영역의 광각 이미지로부터 원하는 부분이 정정된 뷰를 생성함으로써 사용자들이 모니터링된 영역의 부분들을 보도록 할 수도 있다. 전자 디바이스 상에 디스플레이되는 어안 카메라의 모든 뷰들은 정적이고 장면 변화 및 관심 지역(region of interest; ROI)에 기초하여 사용자에 의하여 수동으로 변경되거나 수정될 수 없다.

따라서, 검출된 이벤트에 따라서 전자 디바이스 상의 이미지를 자동으로 변경하기 위한 강건한 방법 및 장치에 대한 필요성이 요구된다.

본 발명의 실시예들은 전자 디바이스 상의 이미지를 검출된 이벤트에 기초하여 자동으로 변경하기 위한 방법 및 장치를 제공하는 것을 목적으로 한다.

본 발명의 실시예들은 하나 이상의 파라미터에 기초하여 어안 카메라의 화각(Field Of View, FOV) 내의 이벤트를 검출하기 위한 방법을 제공하는 것을 목적으로 한다.

본 발명의 실시예들은 검출된 이벤트가 복수의 디워프 이미지들 중 어떤 디워프 이미지의 FOV 내를 지나가는지를 결정하기 위한 방법을 제공하는 것을 목적으로 한다.

본 발명의 일 실시예는 어안 카메라의 이미지를 자동적으로 변경하는 방법을 제공한다. 상기 방법은 어안 이미지에 대한 복수의 디워프 이미지들을 전자 디바이스 상에 디스플레이하는 단계를 포함하는데, 여기에서 어안 이미지는 어안 카메라에 의하여 캡쳐된 이미지이다. 상기 방법은 이벤트의 검출에 기초하여 복수의 디워프 이미지들 중 일부 이미지를 자동으로 변경하는 단계를 포함한다.

본 발명의 또 다른 실시예는 이미지를 자동으로 변경하는 장치를 제공한다. 상기 장치는 어안 이미지의 복수의 디워프 이미지를 전자 디바이스 상에 디스플레이하도록 구성되는데, 여기에서 어안 이미지는 상기 장치에 의하여 캡쳐된 이미지이다. 상기 장치는 이벤트의 검출에 기초하여 복수의 디워프 이미지들 중 일부 이미지를 자동으로 변경하도록 구성된다.

본 발명의 또 다른 실시예는 컴퓨터 판독가능한 비 휘발성 저장매체 상에 기록된 컴퓨터 프로그램 코드를 포함하는 컴퓨터 프로그램 제품을 제공한다. 상기 컴퓨터 프로그램 코드는 어안 이미지에 대한 복수의 디워프 이미지들을 전자 디바이스 상에 디스플레이하는 단계를 포함하는 동작을 수행하고, 여기에서 어안 이미지는 어안 카메라에 의하여 캡쳐된 이미지이다. 상기 컴퓨터 프로그램 코드는 이벤트의 검출에 기초하여 복수의 디워프 이미지들 중 일부 이미지를 자동으로 변경하는 단계를 포함하는 동작을 수행한다.

본 명세서에 기술된 실시예들의 양태 및 다른 양태들은 후술하는 상세한 설명 및 첨부 도면을 함께 고려하면 더욱 잘 이해될 것이다. 그러나, 후술하는 상세한 설명은 비록 바람직한 실시예들 및 그들의 다수의 구체적인 세부 내용들을 표시하고 있으나, 이는 예시적인 방법으로 제공된 것이고 이에 한정되지 않음이 이해되어야 한다. 많은 변형 및 변경들이 실시예들의 기술적 사상에서 벗어나지 않으면서 본 명세서의 실시예들의 범위 내에서 이루어질 수 있으며, 본 명세서의 실시예들은 모든 변경들을 포함한다.

본 발명의 실시예들에 따르면 전자 디바이스 상의 이미지를 검출된 이벤트에 기초하여 자동으로 변경하기 위한 방법 및 장치를 구현할 수 있다.

본 발명의 실시예들에 따르면 하나 이상의 파라미터에 기초하여 어안 카메라의 화각(Field Of View,FOV) 내의 이벤트를 검출하기 위한 방법을 구현할 수 있다.

본 발명의 실시예들에 따르면 검출된 이벤트가 복수의 디워프 이미지들 중 어떤 디워프 이미지의 FOV 내를 지나가는지를 결정하기 위한 방법을 구현할 수 있다.

본 발명은 첨부 도면에서 예시되는데, 첨부 도면 전체에 걸쳐서 동일한 문자들은 다양한 도면 내의 대응하는 부분들을 표시한다. 본 명세서의 실시예들은 도면을 참조하여 후술하는 상세한 설명으로부터 더욱 잘 이해될 것이다.
도 1은 본 발명의 일 실시예들에 따른 전자 디바이스 상에 디스플레이될 이미지를 자동으로 변경하기 위한 장치를 도시한다;
도 2는 본 발명의 일 실시예들에 따른 어안 카메라의 다양한 구성들을 도시한다;
도 3a는 본 발명의 일 실시예들에 따른 어안 카메라의 이미지를 자동으로 변경하기 위한 방법을 도시하는 흐름도이다;
도 3b는 본 발명의 일 실시예들에 따른 어안 카메라의 이미지를 자동으로 변경하기 위한 방법을 도시하는 다른 흐름도이다;
도 3c는 본 발명의 일 실시예들에 따른 어안 카메라의 이미지를 자동으로 변경하기 위한 방법을 도시하는 다른 흐름도이다;
도 4a 내지 도 4f는 본 발명의 일 실시예들에 따른 어안 카메라의 이미지를 자동으로 변경하기 위한 예시적인 도면들이다;
도 5는 본 발명의 일 실시예들에 따른 어안 카메라의 이미지를 자동으로 변경하기 위한 방법 및 시스템을 구현하는 컴퓨팅 환경을 도시한다.

본 명세서의 실시예들, 그들의 다양한 특징적 구성 및 세부사항들은 첨부 도면에 도시되며, 후술하는 발명을 실시하기 위한 구체적인 내용에서 상세히 설명되는 비 한정적인 실시예를 참조하면 더욱 완전하게 설명된다. 주지된 컴포넌트 및 처리 기법들의 설명은 본 명세서의 실시예들을 불필요하게 모호하게 하지 않기 위하여 생략된다. 또한, 몇몇 실시예들이 하나 이상의 다른 실시예와 결합되어 새로운 실시예를 형성할 수 있기 때문에, 본 명세서에서 설명되는 다양한 실시예들은 반드시 상호 배타적인 것이 아니다. 용어 "또는"은 본 명세서에서 사용될 때, 달리 표시되지 않는 한 비-배타적 논리합(or)을 지칭한다. 본 명세서에서 사용되는 예들은 본 명세서의 실시예들이 실시될 수 있는 방식의 이해를 용이화하고 더 나아가 당업자들이 본 명세서의 실시예들을 실시할 수 있도록 하기 위한 의도만을 가진다. 따라서 본 실시예들은 본 명세서의 실시예들의 범위를 한정하는 것으로 해석되어서는 안 된다.

본 명세서의 실시예들은 이미지를 자동으로 변경하기 위한 방법 및 장치이다. 일반적으로, 어안 카메라는 복수의 어안 이미지들을 캡쳐한다. 본 발명의 실시예들에 따른 방법은 전자 디바이스 상에 어안 이미지의 복수의 디워프 이미지들을 디스플레이하는 단계를 포함한다. 일 실시예에서, 어안 이미지의 일부는 디워핑 파라미터(dewarping parameter)를 사용하여 디워핑되어 상기 디워프 이미지들로 생성된다. 일 실시예에서, 상기 디워프 이미지는 2차원 이미지 또는 3차원 이미지일 수 있다. 또한, 상기 방법은 어안 카메라의 화각(Field Of View) 내에서 파라미터에 기초하여 이벤트를 검출하는 단계를 포함한다. 어안 카메라의 FOV 내에서 이벤트가 검출되면, 상기 방법은 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지를 판단하는 단계를 포함한다. 또한, 상기 방법은 이벤트의 검출에 기초하여 복수의 디워프 이미지들 중 일부 디워프 이미지를 자동으로 변경하는 단계를 포함한다.

종래의 시스템에서, 어안 이미지의 FOV는 180도이거나 360도이다. 디워핑 기법을 사용함으로써, 이중 파노라마 뷰(Double panorama view), 또는 단일 파노라마 뷰(Single panorama view), 또는 쿼드 뷰(Quad view)와 같은 상이한 뷰들이 생성되는데, 여기에서 생성된 뷰의 FOV는 정적이다. 상기 생성된 뷰들은 사용자 개입이 없이는 장면 변화 및 관심 지역(ROI)에 따라서 적응적으로 변경되거나 수정될 수 없다. 종래의 시스템들과는 달리, 본 발명의 방법 및 장치는 전자 디바이스 상에 디스플레이되는 복수의 디워프 이미지들 중 적어도 하나의 이미지를 자동으로 변경한다. 변경된 이미지는 임의의 사용자 개입이 없이 모션 검출, 사람 계수, 시간 기반의 객체 추적 등에 기초하여 전자 디바이스 상에 디스플레이될 수 있다. 본 발명의 방법 및 장치는 처리 부하 및 리소스 사용을 감소시킬 수 있다. 더욱이, 본 발명의 방법, 시스템, 또는 장치는 현존 기반구조를 사용하여 구현될 수 있고 광범위한 설정 또는 기계장치를 요구하지 않을 수 있다.

용어 "단일 사각형(Single rectangle)" 및 "쿼드 뷰(quad view)"는 명세서 전체에서 상호 교환가능하게 혼용될 수 있다.

이하, 도 1 내지 도 5를 참조하여, 바람직한 실시예들을 설명하겠으며, 여기에서 유사한 참조 문자 및 부호들은 도면 전체에서 일관적으로 대응하는 특징 요소들을 나타낸다.

도 1은 본 발명의 일 실시예에 따른, 전자 디바이스(102) 상에 디스플레이될 이미지를 자동으로 변경하기 위한 장치(100)를 도시한다. 일 실시예에서, 상기 장치(100)는 어안 카메라이다.

어안 카메라(100)는 180도 이상의 FOV를 갖는 깨끗한 이미지를 캡쳐할 수 있고, 전체 영역(entire region) 내에서 사용자의 이동을 감지하고 추적함으로써, 사각 지대가 없는 360도의 모든 상황 인식을 제공할 수 있다. 어안 카메라(100)는 어안 이미지를 캡쳐한다. 어안 이미지를 캡쳐할 때, 어안 카메라(100)는 캡쳐된 어안 이미지에 디워핑 프로세스를 수행하여 어안 이미지의 일부를 디워핑 파라미터를 사용하여 2차원 이미지 또는 3차원 이미지로 변환하도록 구성된다. 일 실시예에서, 디워핑 파라미터는 CMOS(Complementary Metal Oxide Semiconductor) 특성, CCD(Charge-Coupled Device) 특성, 렌즈 특성 등을 사용하여 획득될 수 있다. 또한, 어안 카메라(100)는 어안 이미지의 복수의 디워프 이미지들을 네트워크(104)를 통하여 전자 디바이스(102)로 전송하도록 구성된다.

전자 디바이스(102)는 예를 들어, 모바일 폰, 스마트 폰, 태블릿, 패블릿, 컴퓨터, 랩탑, 데스크탑, 서버, 또는 임의의 다른 전자 디바이스일 수 있지만 이들로 한정되는 것은 아니다.

본 명세서에서 설명되는 네트워크(104)는 예를 들어, 무선 네트워크, 유선 네트워크, 인터넷과 같은 공용 네트워크, 사설 네트워크, 모바일 통신 네트워크용 광역 시스템(global system for mobile communication network; GSM) 네트워크, 범용 패킷 무선 네트워크(general packet radio network; GPRS), 근거리 네트워크(local area network; LAN), 광역 네트워크(wide area network; WAN), 거대도시 네트워크(metropolitan area network; MAN), 셀룰러 네트워크, 공중 전화 교환 네트워크(public switched telephone network; PSTN), 개인 네트워크(personal area network), 블루투스, Wi-Fi 다이렉트(Wi-Fi Direct), 근거리장 통신(Near Field communication), 초 광 대역(Ultra Wide band), 이들의 조합, 또는 임의의 다른 네트워크일 수 있지만 이들로 한정되는 것은 아니다.

일 실시예에서, 전자 디바이스(102)는 어안 이미지의 복수의 디워프 이미지들을 어안 카메라(100)로부터 수신한다. 어안 이미지의 복수의 디워프 이미지들을 어안 카메라(100)로부터 수신하면, 전자 디바이스(102)는 복수의 디워프 이미지들을 디스플레이한다. 일 실시예에서, 어안 카메라(100)는 복수의 디워프 이미지들 중 적어도 하나의 디워프 이미지를 이벤트의 검출에 기초하여 자동으로 변경하도록 구성될 수 있다. 어안 카메라(100)는 변경된 디워프 이미지를 전자 디바이스(102)로 전송하도록 구성될 수 있다. 변경된 디워프 이미지를 어안 카메라(100)로부터 수신하면, 전자 디바이스(102)는 변경된 디워프 이미지를 사용자에게 디스플레이한다. 변경된 디워프 이미지는 현재 디스플레이부의 상단 상에 오버레이로서 또는 변경된 디워프 이미지를 단일 파노라마 뷰 또는 이중 파노라마 뷰 형태로 보여주는 팝업 스크린으로서 사용자에게 디스플레이된다. 일 실시예에서, 이벤트는 예를 들어, 객체 추적 이벤트, 얼굴 검출 이벤트, 오디오 추적 이벤트 등일 수 있지만 이들로 한정되는 것은 아니다. 파라미터들은 사용자에 의하여 미리 규정되는데, 여기에서 파라미터들은 예를 들어, 시간, 얼굴 등일 수 있지만 이들로 한정되는 것은 아니다.

도 1의 어안 카메라(100) 및 전자 디바이스(102)는 임의의 개수의 전자 장치 및 서버 외에 서로 통신하고 있는 다른 하드웨어 또는 소프트웨어 컴포넌트를 포함한다. 예를 들어, 컴포넌트는 제어기 또는 프로세서 상에서 실행중인 프로세스, 오브젝트, 실행가능 프로세스, 실행 쓰레드(thread of execution), 프로그램, 또는 컴퓨터일 수도 있지만 그것들로 제한되지 않는다. 예시로서, 디바이스 상에서 실행중인 애플리케이션 및 디바이스 자체가 컴포넌트일 수 있다.

도 2는 본 발명의 실시예들에 따른, 어안 카메라(100)의 다양한 구성요소들을 도시한다. 일 실시예에서, 어안 카메라(100)는 센서부(202), 프로세서(204), 통신부(206), 및 저장부(208)를 포함한다.

어안 카메라(100)는 어안 이미지를 캡쳐하도록 구성된다. 프로세서(204)는 캡쳐된 어안 이미지에 디워핑 프로세스를 수행하여 어안 이미지의 일부를 디워핑 파라미터를 사용하여 2차원의 이미지 또는 3차원의 이미지로 변환하도록 구성된다. 통신부(206)는 어안 이미지의 복수의 디워프 이미지들을 네트워크(104)를 통하여 전자 디바이스(102)로 전송하도록 구성된다. 전자 디바이스(102)는 어안 이미지의 복수의 디워프 이미지들을 어안 카메라(100)로부터 수신하면, 복수의 디워프 이미지들을 디스플레이한다.

일 실시예에서, 센서부(202)는 어안 카메라(100)의 FOV 내의 이벤트를 파라미터에 기초하여 검출하도록 구성될 수 있다. 센서부(202)는 예를 들어, 모션 센서, 온도 센서, 화학 센서, 생물학 센서, 방사선 센서, 원자력 센서, 폭발물 센서, 및 사운드 센서(예를 들어, 총성 검출기)일 수 있지만 이들로 한정되는 것은 아니다. 일 실시예에서, 이벤트는 예를 들어, 객체 추적 이벤트, 얼굴 검출 이벤트, 오디오 추적 이벤트 등일 수 있으며 이들로 한정되는 것은 아니다. 파라미터들은 사용자에 의하여 미리 규정되는데, 여기에서 파라미터들은 예를 들어, 시간, 얼굴 등일 수 있지만 이들로 한정되는 것은 아니다.

프로세서(204)는 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지 판단하도록 구성될 수 있다. 또한, 프로세서(204)는 복수의 디워프 이미지들 중 적어도 하나의 디워프 이미지를 이벤트의 검출에 기초하여 자동으로 변경하도록 구성될 수 있다. 변경된 디워프 이미지는 변경된 디워프 이미지의 FOV 내에 검출된 이벤트를 디스플레이한다. 프로세서(204)는 변경된 이미지를 통신부(206)를 사용하여 전자 디바이스(102)로 전송하도록 구성될 수 있다. 전자 디바이스(102)는 변경된 이미지를 수신하면, 변경된 이미지를 사용자에게 디스플레이한다. 변경된 이미지는 현재 디스플레이부의 상단 상에 오버레이로서 또는 변경된 이미지를 단일 파노라마 뷰 또는 이중 파노라마 뷰로 사용자에게 보여주는 팝업 스크린으로서 사용자에게 디스플레이된다.

저장부(208)는 사용자에 의하여 미리 규정(정의)된 파라미터들을 저장하도록 구성될 수 있다. 또한, 저장부(208)는 본 발명의 실시예들에서 설명되는 다양한 동작을 수행하기 위하여 사용되는 제어 명령 및 동작들을 저장한다.

도 2는 어안 카메라(100)의 제한된 개관을 도시하나, 이에 한정되지 않는다는 것이 이해되어야 한다. 또한, 어안 카메라(100)는 어안 카메라(100)의 다른 컴포넌트와 함께 상호 통신하는 임의의 개수의 유닛들을 포함할 수 있다.

도 3a는 본 발명의 실시예들에 따른, 어안 카메라(100)의 이미지를 자동으로 변경하기 위한 방법(300a)을 도시하는 흐름도이다.

상기 방법(300a)은 어안 이미지의 복수의 디워프 이미지들을 전자 디바이스(102) 상에 디스플레이하는 단계(단계 302a)를 포함한다. 어안 이미지는 어안 카메라(100)에 의하여 캡쳐된다. 일 실시예에서, 상기 방법(300a)은 전자 디바이스(102)가 어안 카메라(100)로부터 수신된 어안 이미지의 복수의 디워프 이미지들을 디스플레이하도록 한다.

일 실시예에서, 어안 이미지의 일부는 디워핑 파라미터를 사용하여 디워핑된다. 디워핑 파라미터는 어안 카메라(100)로부터 획득된 어안 이미지를 2차원의 이미지 또는 3차원의 이미지로 변환하기 위하여 사용된다. 일 실시예에서, 디워핑 파라미터는 어안 카메라(100)의 CMOS 특성, CCD 특성, 렌즈 특성 등과 같은 알려진 정보를 사용하여 획득될 수 있다.

상기 방법(300a)은 복수의 디워프 이미지들 중 적어도 하나의 디워프 이미지를 검출된 이벤트에 기초하여 자동으로 변경하는 단계(단계 304a)를 포함한다. 일 실시예에서, 상기 방법(300a)은 프로세서(204)가 복수의 디워프 이미지들 중 적어도 하나의 이미지를 검출된 이벤트에 기초하여 자동으로 변경하도록 한다.

상기 방법(300a) 내의 다양한 액션, 동작, 블록, 단계들은 제시된 순서로, 상이한 순서로, 또는 동시에 수행될 수도 있다. 또한, 몇 가지 실시예들에서, 몇몇 액션, 동작, 블록, 단계 등은 본 발명의 범위로부터 벗어나지 않고서 생략, 추가, 수정, 스킵 등이 가능할 수도 있다.

도 3b는 본 발명의 일 실시예들에 따른, 어안 카메라(100)의 이미지를 자동으로 변경하는 방법(300b)을 도시하는 다른 흐름도이다.

상기 방법(300b)은 어안 이미지의 복수의 디워프 이미지들을 전자 디바이스(102) 상에 디스플레이하는 단계(단계 302b)를 포함한다. 어안 이미지는 어안 카메라(100)에 의하여 캡쳐된다. 일 실시예에서, 상기 방법(300b)은 전자 디바이스(102)가 어안 이미지의 복수의 디워프 이미지들을 디스플레이하도록 한다.

일 실시예에서, 어안 이미지의 일부는 디워핑 파라미터를 사용하여 디워핑된다. 디워핑 파라미터는 어안 카메라(100)로부터 획득된 어안 이미지를 2차원의 이미지 또는 3차원의 이미지로 변환하기 위하여 사용된다. 일 실시예에서, 디워핑 파라미터는 CMOS 특성, CCD 특성, 렌즈 특성 등과 같은 알려진 정보를 사용하여 획득될 수 있다.

상기 방법(300b)은 어안 카메라(100)의 FOV 내의 이벤트를 파라미터에 기초하여 검출하는 단계(단계 304b)를 포함한다. 일 실시예에서, 상기 방법(300b)은 센서부(202)가 어안 카메라(100)의 FOV 내의 이벤트를 파라미터에 기초하여 검출하도록 한다. 일 실시예에서, 이벤트는 예를 들어, 객체 추적 이벤트, 얼굴 검출 이벤트, 오디오 추적 이벤트 등일 수 있으며 이들로 한정되는 것은 아니다. 파라미터들은 사용자에 의하여 미리 규정(정의)되는데, 여기에서 파라미터들은 예를 들어 시간, 얼굴 등일 수 있지만 이들로 한정되는 것은 아니다.

상기 방법(300b)은 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지를 판단하는 단계(단계 306b)를 포함한다.

검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나간다는 판단에 응답하여, 상기 방법(300b)은 이벤트를 검출한 이후에 복수의 디워프 이미지들 중 검출된 이벤트가 지나간 적어도 하나의 디워프 이미지를 자동으로 변경하는 단계(단계 308b)를 포함한다. 일 실시예에서, 상기 방법(300b)은 프로세서(204)가 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지를 판단하고, 복수의 디워프 이미지들 중 검출된 이벤트가 지나간 디워프 이미지를 이벤트를 검출한 이후에 자동으로 변경하도록 한다.

검출된 이벤트가 복수의 디워프 이미지들의 FOV 내를 지나가지 않는다는 판단에 응답하여, 상기 방법(300b)은 어안 카메라(100)에 의하여 캡쳐된 어안 이미지의 복수의 디워프 이미지들을 전자 디바이스(102) 상에 디스플레이하는 단계(단계 302b)를 포함한다. 일 실시예에서, 상기 방법(300b)은 프로세서(204)가 어안 카메라(100)에 의하여 캡쳐된 어안 이미지의 복수의 디워프 이미지들을 전자 디바이스(102) 상에 디스플레이하게 한다. 그러나, 변경된 디워프 이미지는 변경된 디워프 이미지의 FOV 내에 검출된 이벤트를 디스플레이한다.

예를 들어, 검출된 이벤트는 센서부(202)가 어안 카메라(100)의 화각(FOV) 내에서 연관된 화학적, 생물학적, 방사선, 원자력, 및 폭발물 위험 중 하나를 검출하는 것에 대응할 수 있다. 이 경우에, 어안 카메라(100)의 FOV 내에서 검출된 이벤트에 기초하여, 프로세서(204)는 검출된 이벤트가 복수의 디워프 이미지들 중 적어도 하나의 디워프 이미지의 FOV 내를 지나가는지를 결정한다. 검출된 이벤트가 복수의 디워프 이미지들 중 적어도 하나의 디워프 이미지의 FOV 내를 지나간다는 결정에 응답하여, 프로세서(204)는 복수의 디워프 이미지들 중 해당 디워프 이미지를 자동적으로 변경하여, 임의의 사용자 개입 없이 이벤트 검출에 따라 자동으로 디워프 이미지(뷰)들을 변경한다.

다른 예에서, 어안 카메라(100) 또는 센서부(202)가 의심스러운 객체를 검출하는 시나리오를 고려하면, 어안 카메라(100)의 FOV 내에서 검출된 이벤트에 기초하여, 프로세서(204)는 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지를 결정한다. 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나간다는 판단에 응답하여, 프로세서(204)는 복수의 디워프 이미지들 중 검출된 이벤트가 지나간 해당 이미지를 자동으로 변경한다.

다른 예에서, 센서부(202)가 어안 카메라(100)의 FOV 내로 이동 객체의 침입을 식별하는 시나리오를 고려한다. 이동 객체 검출 이벤트는 사용자 또는 차량과 같은 이동 객체의 어안 카메라(100)의 FOV 내로의 침입을 검출하는 기능이다. 이동 객체 검출 이벤트가 검출되면, 프로세서(204)는 어안 카메라(100)의 FOV 내에서 검출된 이벤트에 기초하여 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지를 결정한다. 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나간다는 결정에 응답하여, 프로세서(204)는 복수의 디워프 이미지들 중 해당 디워프 이미지를 자동으로 변경한다.

다른 예에서, 센서부(202)가 어안 카메라(100)의 FOV 내의 이동 없는 객체(예를 들어, 사무실의 입구 문, 사무실의 출구 문 등)를 모니터링하는 시나리오를 고려한다. 이 경우에, 모션 센서는 어안 카메라(100)의 FOV 내에서 모션 이벤트를 검출하도록 구성된다. 어안 카메라(100)의 FOV 내에서 검출된 이벤트에 기초하여, 프로세서(204)는 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지를 판단한다. 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나간다는 판단에 응답하여, 프로세서(204)는 복수의 디워프 이미지들 중 해당 디워프 이미지를 자동으로 변경한다.

상기 방법(300b) 내의 다양한 액션, 동작, 블록, 단계들은 제시된 순서로, 상이한 순서로, 또는 동시에 수행될 수도 있다. 또한, 몇 가지 실시예들에서, 몇몇 액션, 동작, 블록, 단계, 등은 본 발명의 범위로부터 벗어나지 않고서 생략, 추가, 수정, 스킵 등이 가능할 수 있다.

도 3c는 본 발명의 실시예들에 따른, 어안 카메라(100)의 이미지를 자동으로 변경하기 위한 방법(300c)을 도시하는 다른 흐름도이다.

상기 방법(300c)은 어안 이미지의 복수의 디워프 이미지들을 전자 디바이스(102) 상에 디스플레이하는 단계(단계 302c)를 포함한다. 어안 이미지는 어안 카메라(100)에 의하여 캡쳐된다. 일 실시예에서, 상기 방법(300c)은 전자 디바이스(102)가 어안 이미지의 복수의 디워프 이미지들을 디스플레이하도록 한다.

상기 방법(300c)은 어안 카메라의 FOV 내에서 파라미터에 기초하여 이벤트를 검출하는 단계(단계 304c)를 포함한다. 일 실시예에서, 상기 방법(300b)은 센서부(202)가 어안 카메라의 FOV 내에서 파라미터에 기초하여 이벤트를 검출하도록 한다.

상기 방법(300c)은 복수의 디워프 이미지들 중 소정의 디워프 이미지를 검출된 이벤트에 기초하여 자동으로 변경하는 단계(단계 306c)를 포함한다. 일 실시예에서, 상기 방법(300c)은 프로세서(204)가 복수의 디워프 이미지들 중 소정의 디워프 이미지를 검출된 이벤트에 기초하여 자동으로 변경하도록 한다.

상기 방법(300c) 내의 다양한 액션, 동작, 블록, 단계들은 제시된 순서로, 상이한 순서로, 또는 동시에 수행될 수도 있다. 또한, 몇 가지 실시예들에서, 몇몇 액션, 동작, 블록, 단계 등은 본 발명의 범위로부터 벗어나지 않고서 생략, 추가, 수정, 스킵 등이 가능할 수도 있다.

도 4a 내지 도 4f는 본 발명의 일 실시예들에 따른, 전자 디바이스(102) 상에 디스플레이되는 어안 카메라(100)의 이미지를 자동으로 변경하는 방법의 예시적 도면들이다.

센서부(202)는 이동 객체(moving object)가 어안 카메라(100)의 FOV 내로 침입함을 검출한다. 이벤트가 검출되면, 프로세서(204)는 검출된 이벤트가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나가는지를 어안 카메라(100)의 FOV 내에서 검출된 이벤트에 기초하여 판단한다. 검출된 이벤트(즉, 객체 이동)가 복수의 디워프 이미지들 중 소정의 디워프 이미지의 FOV 내를 지나간다고 판단되면, 프로세서(204)는 복수의 디워프 이미지들 중 검출된 이벤트가 지나간 해당 디워프 이미지를 자동으로 변경한다. 도 4a에 도시된 바와 같이, 객체의 이동 방향 및 이동량은 전자 디바이스(102)에서 증가된 영역 및 감소된 영역으로부터 획득될 수 있다.

일 실시예에서, 시스템은 센서부(202) 또는 어안 카메라(100)를 사용하여 객체의 이동 방향(예를 들어, 좌에서 우로의 이동 방향, 우에서 좌로의 이동 방향, 상단부터 하단까지의 이동 방향, 및 하단부터 상단까지의 이동 방향)을 식별할 수 있다.

일 실시예에서, 이벤트는 시간 파라미터에 기초하여 자동으로 검출될 수 있다. 도 4b에 도시된 바와 같이, 어안 카메라(100)는 근무 시간 동안(예를 들어, 오전 10시)에는, 전자 디바이스(102) 상의 이동 없는 물체(즉, 제1 쿼드 뷰 내의 로비영역1, 제2 쿼드 뷰 내의 입구1, 제3 쿼드 뷰 내의 입구2, 및 제4 쿼드 뷰 내의 리셉션1 등)를 자동으로 모니터링할 수 있다. 또한, 어안 카메라(100)는 비 근무 시간 동안(예를 들어, 오후 6시)에는, 사용자 개입 없이 전자 디바이스(102) 상의 이동 없는 객체(예를 들어, 제1 쿼드 뷰 내의 출구1, 제2 쿼드 뷰 내의 입구1, 제3 쿼드 뷰 내의 출구2, 및 제4 쿼드 뷰 내의 리셉션1 등)를 자동으로 모니터링할 수 있다.

도 4c에 도시된 바와 같이, 전자 디바이스(102) 상에 어안 카메라(100)에 의하여 캡쳐된 어안 이미지의 디워프 이미지들이 복수의 쿼드 뷰들(즉, 제1 쿼드 뷰, 제2 쿼드 뷰, 제3 쿼드 뷰, 및 제4 쿼드 뷰)로 디스플레이되는 시나리오를 고려한다. 만일 제1 쿼드 뷰 내에 디스플레이된 객체가 제1 쿼드 뷰 밖으로 이동하여 제2 쿼드 뷰 내로 진입한다면, 운영자가 현재 시청하고 있는 쿼드 뷰들을 유지하면서 특정 영역의 단일 파노라마 뷰가 생성되어 사용자에게 디스플레이될 수 있다. 일 실시예에서, 단일 파노라마 뷰는 쿼드 뷰 상에 오버레이로서 또는 단일 파노라마 뷰를 보여주는 팝업 스크린으로서 운영자에게 디스플레이될 수 있다.

도 4d에 도시된 바와 같이, 객체가 단일 사각형 뷰(즉, 제1 쿼드 뷰) 밖으로 이동하여 다른 단일 사각형 뷰(즉, 제4 쿼드 뷰) 내로 진입하고 있는 시나리오에서, 단일 사각형 뷰는 단일 파노라마 뷰(즉, 제1 쿼드 뷰 및 제4 쿼드 뷰)로 변경됨으로써 사용자는 단일 파노라마 뷰에서 객체 이동을 자동으로 관찰할 수 있게 된다.

도 4e에 도시된 바와 같이, 전자 디바이스(102) 상에 어안 카메라(100)에 의하여 캡쳐된 어안 이미지의 디워프 이미지들을 복수의 쿼드 뷰들(즉, 제1 쿼드 뷰, 제2 쿼드 뷰, 제3 쿼드 뷰, 및 제4 쿼드 뷰)로 디스플레이하고 있는 시나리오를 고려한다. 만일 제1 쿼드 뷰 내에 디스플레이된 객체가 밖으로 이동하여 제4 쿼드 뷰 내로 진입하고 있다면, 센서부(202)에 의하여 검출된 모션 검출 이벤트에 기초하여 제1 쿼드 뷰 및 제4 쿼드 뷰를 결합한 단일 파노라마 뷰가 자동으로 생성된다.

도 4f에 도시된 바와 같이, 어안 카메라(100)는 원 광각 어안 이미지를 이중 파노라마 이미지로 디워핑할 수 있다. 예를 들어, 제1 워프 이미지는 이중 파노라마 이미지의 제1 디워프 파노라마 이미지로 디워핑되고, 제2 워프 이미지는 이중 파노라마 이미지의 제2 디워프 파노라마 이미지로 디워핑될 수 있다.

도 5는 본 발명의 실시예에 따른, 어안 카메라(100)의 이미지를 자동으로 변경하기 위한 방법 및 시스템을 구현하는 컴퓨팅 환경(502)을 도시한다.

도면에 도시된 바와 같이, 컴퓨팅 환경(502)은 제어부(504) 및 산술적 로직부(Arithmetic Logic Unit; ALU)(506)가 탑재된 적어도 하나의 프로세서(PU)(508), 메모리(510), 저장부(512), 복수의 네트워킹 디바이스(516) 및 복수의 입출력(I/O) 디바이스(514)를 포함한다. 프로세서(508)는 알고리즘의 명령들을 처리하는 것을 담당한다. 프로세서(508)는 제어부로부터 커맨드를 수신하여 자신의 프로세싱 동작을 수행한다. 또한, 명령들의 실행에 수반되는 임의의 논리적 및 산술 연산들은 ALU(506)의 도움으로 계산된다.

전체 컴퓨팅 환경(502)은 다중의 동종의 및/또는 이종의 코어들, 상이한 종류의 다중 CPU들, 특수 미디어 및 다른 가속기들로 구성될 수 있다. 프로세서(508)는 알고리즘의 명령들을 처리하는 것을 담당한다. 또한, 복수의 프로세서(508)는 단일 칩 또는 다중 칩에 위치될 수 있다.

알고리즘은 구현예를 실시하기 위하여 요구되는 명령 및 코드들로 이루어지고 메모리(510) 또는 저장부(512) 중 어느 하나 또는 두 개 모두에 저장된다. 실행시, 명령들은 대응하는 메모리(510) 및/또는 저장부(512)로부터 불러와지고 프로세서(508)에 의하여 실행될 수 있다.

임의의 하드웨어 구현예의 경우에, 다양한 네트워킹 디바이스(516) 또는 외부 I/O 디바이스(514)가 컴퓨팅 환경(502)에 연결되어 네트워킹부 및 I/O 디바이스부를 통한 구현을 지원할 수 있다.

여기에 개시된 실시예들은 적어도 하나의 하드웨어 디바이스에서 실행되어 구성 요소들을 제어하기 위한 네트워크 관리 기능을 수행하는 적어도 하나의 소프트웨어 프로그램을 통하여 구현될 수 있다. 도 1 내지 도 5에 도시된 구성요소들은 하드웨어 디바이스, 또는 하드웨어 디바이스 및 소프트웨어 유닛의 조합 중 적어도 하나의 블록들을 포함한다.

본 발명의 실시예들에 대한 전술된 설명은 실시예들의 전체적인 본질을 완전히 드러낼 것이며, 이러한 실시예들은 현재의 지식을 적용하여 전체적인 개념으로부터 벗어나지 않으면서 용이하게 변경 및/또는 이러한 특정 실시예들과 같은 다양한 애플리케이션들에 대하여 적응시킬 수 있다. 그러므로, 이러한 적응 및 변경들은 개시된 실시예들의 균등물의 의미 및 범위 내에서 이해되어야 하고 또한 그렇게 이해되는 것이 의도된다. 본 명세서에서 채용된 어법 또는 용어는 설명하기 위한 목적을 위한 것이며 한정하는 목적이 아님이 이해되어야 한다. 그러므로, 본 명세서의 실시예들이 바람직한 실시예들의 관점에서 지금까지 설명되어 왔지만, 당업자들은 본 명세서의 실시예들이 설명된 바와 같은 본 명세서의 실시예들의 사상 및 범위 내에서 변형되어 실시될 수 있다는 것을 인식할 것이다.

100: 어안 카메라
102: 전자 디바이스
104: 네트워크
202: 센서부
204: 프로세서
206: 통신부
208: 저장부

Claims (18)

1. 전자 디바이스 상에 어안 카메라에 의하여 캡쳐된 어안 이미지의 복수의 디워프 이미지(dewarp image)들을 디스플레이하는 단계; 및
   상기 복수의 디워프 이미지들 중 적어도 하나의 디워프 이미지를 적어도 하나의 이벤트의 검출에 기초하여 자동으로 변경하는 단계;를 포함하고,
   상기 자동으로 변경하는 단계는;
   상기 어안 이미지에 대한 적어도 하나의 파라미터에 기초하여 적어도 하나의 이벤트를 검출하는 단계;
   상기 어안 이미지로부터 생성된 상기 복수의 디워프 이미지들 중 상기 검출된 이벤트가 지나가는 적어도 하나의 디워프 이미지를 결정하는 단계; 및
   상기 결정에 따라, 상기 복수의 디워프 이미지들 중 상기 검출된 이벤트가 지나가는 적어도 하나의 디워프 이미지를 자동으로 변경하는 단계;를 포함하는 어안 카메라의 이미지 자동 변경 방법.
2. 삭제
3. 삭제
4. 삭제
5. 삭제
6. 삭제
7. 삭제
8. 삭제
9. 삭제
10. 삭제
11. 삭제
12. 삭제
13. 삭제
14. 삭제
15. 삭제
16. 삭제
17. 삭제
18. 삭제

Images