KR20170136576A - 프라이버시 보호 원격 뷰 시스템 - Google Patents

프라이버시 보호 원격 뷰 시스템 Download PDF

Info

Publication number
KR20170136576A
KR20170136576A KR1020177032268A KR20177032268A KR20170136576A KR 20170136576 A KR20170136576 A KR 20170136576A KR 1020177032268 A KR1020177032268 A KR 1020177032268A KR 20177032268 A KR20177032268 A KR 20177032268A KR 20170136576 A KR20170136576 A KR 20170136576A
Authority
KR
South Korea
Prior art keywords
vehicle
privacy
images
ecu
control unit
Prior art date
Application number
KR1020177032268A
Other languages
English (en)
Other versions
KR102027098B1 (ko
Inventor
제임스 스테판 밀러
패트릭 그래프
로버트 존스
베른하르트 힐리거
Original Assignee
로베르트 보쉬 게엠베하
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 로베르트 보쉬 게엠베하 filed Critical 로베르트 보쉬 게엠베하
Publication of KR20170136576A publication Critical patent/KR20170136576A/ko
Application granted granted Critical
Publication of KR102027098B1 publication Critical patent/KR102027098B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06K9/00832—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/30—Detection related to theft or to other events relevant to anti-theft systems
    • B60R25/305—Detection related to theft or to other events relevant to anti-theft systems using a camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/593—Recognising seat occupancy
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/02—Protecting privacy or anonymity, e.g. protecting personally identifiable information [PII]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2325/00—Indexing scheme relating to vehicle anti-theft devices
    • B60R2325/10—Communication protocols, communication systems of vehicle anti-theft devices
    • B60R2325/101—Bluetooth
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/30—Detection related to theft or to other events relevant to anti-theft systems
    • B60R25/31—Detection related to theft or to other events relevant to anti-theft systems of human presence inside or outside the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30268—Vehicle interior

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

프라이버시 보호 원격 뷰 시스템을 동작시키는 방법 및 프라이버시 보호 원격 뷰 시스템을 개시한다. 한 실시예에 있어서, 상기 방법은 차량 내부의 하나 이상의 이미지에 대한 원격 장치로부터의 요청을 수신하는 단계, 차량 내부의 하나 이상의 이미지를 수신하는 단계, 프라이버시 키가 차량 내부에 위치되는지를 결정하는 단계, 한 명 이상의 탑승자가 차량 내부에 위치되는지를 결정하는 단계, 메모리에 저장된 차량 내부의 프라이버시 설정들을 검색하는 단계, 상기 프라이버시 키 및 상기 한 명 이상의 탑승자가 차량 내부에 위치되는 것으로 결정하는 것에 응답하여, 상기 차량 내부의 하나 이상의 이미지 및 프라이버시 설정들에 기초하여 하나 이상의 프라이버시 이미지를 생성하는 단계, 상기 하나 이상의 프라이버시 이미지를 안테나를 통해 상기 원격 장치로 전송하도록 트랜시버를 제어하는 단계를 포함한다.

Description

프라이버시 보호 원격 뷰 시스템
관련 출원에 대한 상호 참조
본 출원은 2015년 4월 10일자로 출원된 미국 가 출원번호 62/145,946의 이익을 주장하며, 그 전체 내용이 본원에 참고로 인용된다.
본 발명은 프라이버시 보호 원격 뷰 시스템(remote view system with privacy protection)에 관한 것이다.
현재 차량에는 차량의 내부, 일부 경우에는 차량의 탑승자들을 볼 수 있는 내부 카메라가 장착될 수 있다. 내부 카메라는 차량 내부의 탑승자의 안전, 보안, 편안함 및 편의성과 관련된 여러 가지 응용들을 위해 사용될 수 있다.
그러나 차량 내부의 한 명 이상의 탑승자의 아이덴티티(identity)는 내부 카메라들이 원격으로 액세스 가능할 때 원격으로 액세스 가능하게 된다. 따라서, 프라이버시 보호 원격 뷰 시스템 및 프라이버시 보호 원격 뷰 시스템을 동작시키는 방법이 요구된다.
본 명세서에 개시된 특정 실시예들의 요약이 하기에 제시된다. 이들 양태들은 단지 이들 특정 실시예들의 간략한 요약을 독자에게 제공하기 위한 것이며 이들 양태들은 본 개시의 범위를 제한하지 않는다는 것을 이해해야한다. 실제로, 본 개시는 이하에서 설명되지 않을 수 있는 다양한 양태들을 포함할 수 있다.
한 실시예에서, 본 발명은 프라이버시 설정들(privacy settings)을 갖는 원격 뷰 시스템을 동작시키는 방법을 제공한다. 상기 방법은 전자 제어 유닛으로, 차량 내부의 하나 이상의 이미지에 대한 원격 장치로부터의 요청을 수신하는 단계를 포함한다. 상기 방법은 또한 전자 제어 유닛으로, 차량 내부의 하나 이상의 이미지를 수신하는 단계를 포함한다. 상기 방법은 또한 전자 제어 유닛으로, 프라이버시 키(privacy key)가 차량 내부에 위치되는지를 결정하는 단계를 포함한다. 상기 방법은 또한 전자 제어 유닛으로, 한 명 이상의 탑승자가 차량 내부에 위치되는지를 결정하는 단계를 포함한다. 상기 방법은 또한 전자 제어 유닛으로 메모리에 저장된 차량 내부의 프라이버시 설정들을 검색하는 단계를 포함한다. 상기 방법은 또한, 상기 프라이버시 키 및 상기 한 명 이상의 탑승자가 차량 내부에 위치되는 것으로 결정하는 것에 응답하여, 전자 제어 유닛으로, 상기 차량 내부의 하나 이상의 이미지 및 프라이버시 설정들에 기초하여 하나 이상의 프라이버시 이미지를 생성하는 단계를 포함한다. 또한, 상기 방법은 상기 하나 이상의 프라이버시 이미지를 안테나를 통해 상기 원격 장치로 전송하도록 트랜시버를 제어하는 단계를 더 포함한다.
다른 실시예에서, 본 발명은 프라이버시 보호 원격 뷰 시스템을 제공한다. 상기 시스템은 차량 내부의 하나 이상의 이미지를 캡처하도록 구성된 카메라와, 제 1 안테나에 전기적으로 결합된 제 1 트랜시버, 제 2 안테나에 전기적으로 결합된 제 2 트랜시버, 메모리, 및 상기 메모리에 전기적으로 결합된 전자 프로세서를 갖는 전자 제어 유닛을 포함한다. 상기 전자 제어 유닛은 원격 장치로부터 상기 제 1 트랜시버 및 상기 제 1 안테나를 통해 상기 차량 내부의 하나 이상의 이미지에 대한 요청을 수신하고, 상기 차량 내부의 하나 이상의 이미지를 수신하고, 프라이버시 키가 상기 제 2 트랜시버 및 상기 제 2 안테나를 통해 상기 차량 내부에 위치되는지를 결정하고, 한 명 이상의 탑승자가 상기 차량 내부에 위치되는지를 결정하고, 상기 메모리에 저장된 상기 차량 내부의 프라이버시 설정들을 검색하고, 상기 프라이버시 키 및 상기 한 명 이상의 탑승자가 상기 차량 내부에 위치된다는 결정에 응답하여 상기 차량 내부의 상기 하나 이상의 이미지들 및 프라이버시 설정들에 기초하여 하나 이상의 프라이버시 이미지를 생성하고, 상기 하나 이상의 프라이버시 이미지를 상기 제 1 안테나를 통해 상기 원격 장치로 전송하기 위해 상기 제 1 트랜시버를 제어하도록 구성된다.
본 발명의 다른 양태들은 상세한 설명 및 첨부하는 도면들을 고려함으로써 명백해질 것이다.
도 1은 프라이버시 보호 원격 뷰 시스템이 장착된 차량 내부의 블록도를 도시한다.
도 2는 도 1의 원격 뷰 시스템의 이미지 처리 전자 제어 유닛의 블록도를 도시한다.
도 3은 도 1의 원격 뷰 시스템의 전자 제어 유닛의 블록도를 도시한다.
도 4는 도 1의 원격 뷰 시스템을 동작시키는 방법의 흐름도를 도시한다.
도 5는 프라이버시 보호가 없는 차량 내부의 이미지를 도시한다.
도 6 내지 도 8은 프라이버시 보호가 있는 차량 내부의 프라이버시 이미지를 도시한다.
본 발명의 임의의 실시예가 상세히 설명되기 전에, 본 발명은 이하의 설명에서 설명되거나 다음의 도면에 도시된 구성요소들의 구성 및 배열의 상세한 설명에 의해 그 응용들이 제한되지 않는 것으로 이해되어야한다. 본 발명은 다른 실시예들이 가능하고 다양한 방법으로 실시되거나 실행될 수 있다.
본 발명을 구현하기 위해 복수의 상이한 구조적 구성요소들뿐만 아니라 복수의 하드웨어 및 소프트웨어 기반 장치들이 사용될 수 있다는 것을 알아야한다. 또한, 본 발명의 실시예들은 하드웨어, 소프트웨어, 및 구성요소들 또는 모듈들을 포함할 수 있으며, 설명의 목적으로 구성요소들의 대부분이 마치 하드웨어 내에서 단독으로 실행되는 것으로 도시되고 설명되고 기술될 수 있다. 하지만, 당업자는, 본 상세한 설명의 이해를 통해, 적어도 하나의 실시예에서, 본 발명의 전자 기반의 양태들은 하나 이상의 프로세서들로 실행가능한(예를 들면, 비-일시적 컴퓨터 판독가능한 매체에 저장된) 소프트웨어로 구현될 수 있다는 것을 인식할 수 있을 것이다. 그와 같이, 다수의 하드웨어 및 소프트웨어 기반의 장치뿐만 아니라 다수의 상이한 구조적 구성요소들이 본 발명을 구현하는데 이용될 수 있다는 것을 알아야한다. 예를 들어, 본 명세서에 기술된 "제어 유닛" 및 "제어기"는 하나 이상의 프로세서들, 비-일시적 컴퓨터 판독가능한 매체를 포함하는 하나 이상의 메모리 모듈들, 하나 이상의 입력/출력 인터페이스들, 및 상기 구성요소들을 접속하는 다양한 접속부들(예를 들어, 시스템 버스)을 포함할 수 있다.
도 1은 프라이버시 보호(privacy protection)가 있는 원격 뷰 시스템(102)("원격 뷰 시스템(102)"이라 함)이 장착된 차량 내부(100)를 도시한 블록도이다. 원격 뷰 시스템(102)은 이미지 처리 전자 제어 유닛(ECU)(110), 카메라(112)(예를 들면, 어안 렌즈 카메라(fisheye lens camera) 또는 광각 렌즈 카메라), 선택적 카메라(optional camera)(114), 포인트-투-포인트 접속부들(115A 및 115B)(집합적으로 "포인트-투-포인트 접속부(115)"), 차량 통신 인터페이스들(116A-116C)(집합적으로 "차량 통신 인터페이스(116)"), 전자 제어 유닛(ECU)(120), 차량 센서들(140), 프라이버시 키(142), 원격 장치(144), 무선 네트워크(146), 및 무선 네트워크(148)를 포함한다. 무선 네트워크(146)는 셀룰러 네트워크, 블루투스®(Bluetooth®) 네트워크, 무선 로컬 액세스 네트워크(WLAN), 단거리(short range) 무선 네트워크, 장거리(long range) 무선 네트워크, 또는 다른 적절한 무선 네트워크의 일부 또는 전부로 구현될 수 있다. 무선 네트워크(148)는 블루투스® 네트워크, 근거리 통신(NFC) 네트워크, 단거리 무선 네트워크, 장거리 무선 네트워크, 또는 다른 적절한 무선 네트워크의 일부 또는 전부로 구현될 수 있다.
또한, 차량 내부(100)는 운전석(130), 조수석(132), 좌측 뒷좌석(134), 중간 뒷좌석(136), 우측 뒷좌석(138)을 포함한다. 이미지 처리 ECU(110) 및 ECU(120)는 분리된 구성요소로서 기술되고 도시되어 있지만, 이미지 처리 ECU(110) 및 ECU(120)는 단일 전자 제어 유닛으로서 함께 구현될 수 있음을 이해해야한다. 또한, 이미지 처리 ECU(110) 및 ECU(120) 각각에 속하는 기능들은 이미지 처리 ECU(110) 또는 ECU(120) 중 어느 하나에 의해 전체적으로 수행될 수 있고, 또는 이미지 처리 ECU(110) 및 ECU(120) 모두의 다양한 조합들에 의해 전체적으로 수행될 수 있다.
카메라(112)는 포인트-투-포인트 접속부(115A)를 통해 이미지 처리 ECU(110)에 통신가능하게 결합되고, 이미지 처리 ECU(110)에 하나 이상의 이미지 또는 비디오 스트림을 전송한다. 또한, 일부 실시예에서, 선택적 카메라(114)가 포인트-투-포인트 접속부(115B)를 통해 이미지 처리 ECU(110)에 통신가능하게 결합되고, 하나 이상의 이미지 또는 비디오 스트림을 이미지 처리 ECU(110)에 전송한다. 선택적 카메라(114)는 카메라(112)의 위치와는 다른 위치에 배치된다. 예를 들어, 카메라(112)가 차량 내부(100)의 전방 근처에 배치될 때, 선택적 카메라(114)는 차량 내부(100)의 후방 근처에 배치된다.
이미지 처리 ECU(110)는 카메라(112)로 캡처된(일부 실시예에서는 선택적 카메라(114)로 캡처된) 하나 이상의 이미지들(예를 들면, 전방향의 이미지들(omnidirectional images))을 수신한다. 일부 실시예에서, 이미지 처리 ECU(110)는 미리 결정된 시간 간격으로 상기 하나 이상의 이미지를 처리하고, 상기 하나 이상의 이미지 및 관련 데이터를 기록한다. 예를 들어, 이미지 처리 ECU(110)는 적어도 부분적으로 차량 내부(100)로 이동된 거리에 기초하여 상기 하나 이상의 이미지를 처리한다. 이미지 처리 ECU(110)는 차량 통신 인터페이스(116A)를 통해 ECU(120)에 통신가능하게 결합되고, 상기 하나 이상의 이미지를 ECU(120)로 전송한다. 예를 들어, 도 2는 도 1의 원격 뷰 시스템(102)의 이미지 처리 ECU(110)의 블록도이다. 이미지 처리 ECU(110)는 카메라(112) 및/또는 이미지 처리 ECU(110) 내의 구성요소들 및 모듈들에 전력, 동작 제어 및 보호를 제공하는 복수의 전기 및 전자 구성요소들을 포함한다. 예를 들면, 이미지 처리 ECU(110)는 무엇보다도 (예를 들어, 프로그램가능한 전자 마이크로프로세서, 마이크로컨트롤러 또는 다른 적절한 프로세싱 장치와 같은) 제어기(205), 전원 공급 장치(210), 및 입력/출력 모듈(215)을 포함한다. 일부 실시예에서, 이미지 처리 ECU(110)는 카메라(112)와 단일 장치로 통합된다.
도 2의 예에서, 제어기(205)는 전자 프로세서(220) 및 메모리(225)를 포함한다. 전자 프로세서(220)는 메모리(225)에 통신가능하게 결합되고(예를 들어, 전기적으로 접속되고), 메모리(225)에 저장될 수 있는 명령들을 처리한다. 제어기(205)는 메모리(225)로부터 검색하고 무엇보다도, 여기에 설명된 제어 프로세스 및 방법과 관련된 명령들을 실행하도록 구성된다. 제어기(205)는 또한 메모리(225)로부터 검색하고 공동 계류중인 PCT 출원 번호 PCT/US16/26747(2016년 4월 8일 출원됨)에 개시되고 그 전체 내용이 여기에 참조로 포함된 탑승자 검출 프로세스 및 방법과 관련된 명령들을 실행하도록 구성된다. 특히, 이미지 처리 ECU(110)는 차량 내부(100)의 한 명 이상의 탑승자들의 수, 크기, 자세 및 대응하는 위치를 식별하도록 탑승자 검출 시스템을 사용한다. 이미지 처리 ECU(110)는 상기 한 명 이상의 탑승자들의 정보를 차량 내부(100)의 하나 이상의 이미지들과 연관된 메타데이터로서 상기 ECU(120)에 출력할 수 있다. 다른 실시예들에서, 이미지 처리 ECU(110)는 추가적인, 더 적은, 또는 상이한 구성요소들을 포함한다. 이미지 처리 ECU(110)는 각각 여기에 열거된 특정 기능들을 수행하도록 구성된 몇몇의 독립적인 전자 제어 유닛들로 구현될 수 있음을 알아야한다. 또한, 이미지 처리 ECU(110)는 특정 유형의 센서 데이터를 입력하고 관련된 처리를 수행하는 서브 모듈들을 포함할 수 있다.
이미지 처리 ECU(110)는 카메라(112)로부터 하나 이상의 이미지를 수신하고 상기 하나 이상의 이미지를 처리하도록 구성된다. 예를 들어, 도 2의 실시예에서, 입력/출력 모듈(215)은 카메라(112)로부터 상기 하나 이상의 이미지를 수신하고, 이미지 처리를 위해 제어기(205)에 상기 하나 이상의 이미지를 전송한다. 제어기(205)는 상기 하나 이상의 이미지를 처리한다. 대안적으로, 이미지 처리 ECU(110)의 제어기(205)에 의해 실행되는 분석 모듈이 카메라(112)로부터 하나 이상의 이미지를 수신하고, 상기 하나 이상의 이미지를 적합한 포맷으로 변환하며, 상기 하나 이상의 이미지 내에서 객체들(objects) 및 특징들(features)(예를 들어, 차량 내부의 한 사람 이상의 탑승자들)을 인식하고, 상기 하나 이상의 이미지 내에서 객체들 및 특징들을 추적하고, 다른 ECU들(예컨대, ECU(120))을 제어하거나 이러한 프로세스들로부터의 데이터 출력을 다른 ECU들로(예를 들면, 하나 이상의 이미지들 및/또는 메타데이터를 ECU(120)로) 전송할 수 있다.
이미지 처리 ECU(110), 이미지 처리 ECU(110)의 서브 모듈들, 및 추가의 ECU들(예를 들면, ECU(120))은 차량 통신 인터페이스(116) 상의 하나 이상의 통신 모듈을 통해 링크될 수 있고 및/또는 이미지 처리 ECU(110)의 입력/출력 모듈(215)을 통해 직접 접속될 수 있다. 일부 실시예에서, ECU(120)는 이미지 처리 ECU(110)의 입력/출력 모듈(215)과 통신하기 위해 J1939 또는 CAN 버스와 같은 프로토콜을 사용하여 통신한다. 다른 실시예에서, ECU(120)는 특정 애플리케이션의 요구에 따라 다른 적절한 프로토콜 하에서 이미지 처리 ECU(110)의 입력/출력 모듈(215)과 통신한다. 일부 실시예에서, 이미지 처리 ECU(110)의 입력/출력 모듈(215)은 다양한 제어 및 센서로부터의 전용 신호 라인들을 사용하여 정보를 직접 입력한다.
다시 도 1을 참조하면, ECU(120)는 이미지 처리 ECU(110)로부터 하나 이상의 이미지를 수신하고, 이하에서 더 상세하게 설명되는 다양한 결정에 따라, 전술된 바와 같은 하나 이상의 이미지 또는 하나 이상의 프라이버시 이미지를 무선 네트워크(146)를 통한 원격 장치(144)로부터의 요청을 수신함에 응답하여 원격 장치(144)로 전송한다. 예를 들어, ECU(120)는 하나 이상의 이미지 또는 하나 이상의 프라이버시 이미지를 무선 네트워크(146)를 통해 원격 장치(144)로 전송할 수 있다.
원격 장치(144)로부터의 요청은 아이템(item)이 차량 내부(100)에 위치되는지를 결정하도록 차량 내부(100)로부터 이미지 또는 비디오에 액세스하기 위해 원격 장치(144)의 사용자에 의해 개시될 수 있다. 부가적으로 또는 대안적으로, 원격 장치(144)로부터의 요청은 임의의 탑승자들이 차량 내부(100)에 있는지를 결정하도록 차량 내부(100)로부터 이미지 또는 비디오에 액세스하기 위해 원격 장치(144)의 사용자에 의해 개시될 수 있다. 일부 실시예에서, 원격 장치(144)는 스마트폰, 태블릿, 서버, 또는 다른 적절한 통신 장치가 된다. 일부 실시예에서, 원격 장치(144)는 차량 내부(100)의 사용자에 의해 또는 제 3 자 사용자(예를 들어, 비상 대응 요원)에 의해 액세스된다.
일부 실시예에서, ECU(120)가 차량 내부(100)의 이미지를 전송하기 위해 원격 장치(144)로부터 요청을 수신할 때, 차량 내부(100)는 한 명 이상의 탑승자들을 갖는다. 차량 내부(100)의 하나 이상의 이미지 또는 하나 이상의 프라이버시 이미지를 전송할 때, 차량 내부(100)의 한 명 이상의 탑승자에 대한 프라이버시 보호를 실행하기 위해, ECU(120)는 ECU(120)의 메모리에 저장된 프라이버시 설정들을 사용한다.
ECU(120)는 ECU(120)의 메모리로부터 검색된 프라이버시 설정들에 적어도 부분적으로 기초하여 하나 이상의 이미지로부터 하나 이상의 프라이버시 이미지를 생성할 수 있다. 예를 들어, 도 3은 도 1의 원격 뷰 시스템(102)의 ECU(120)의 블록도를 도시한다. ECU(120)는 이미지 처리 ECU(110)와 유사한 구성요소들을 포함하며, 따라서 이들 구성요소들은 더 상세히 설명되지 않을 것이다. ECU(120)는 제 1 트랜시버(302), 제 1 안테나(304), 제 2 트랜시버(306), 및 제 2 안테나(308)를 포함한다. 일부 실시예에서, ECU(120)는 원격 뷰 시스템(102)에 전용으로 사용된다. 다른 실시예에서, ECU(120)는 원격 뷰 시스템(102)을 포함하는 다양한 차량 시스템들 사이에 공유된다. 일부 실시예에서, ECU(120)는 다중 카메라 시스템(예를 들어, 외부 서라운드 뷰 시스템, 백업 카메라 시스템, 또는 다른 차량 카메라 시스템)의 일부가 된다.
ECU(120)의 제어기(205)는 전자 프로세서(220) 및 메모리(225)를 포함한다. 전자 프로세서(220)는 메모리(225)에 통신 가능하게 결합되며(예를 들어, 전기적으로 접속되며), 메모리(225)에 저장될 수 있는 명령들을 실행한다. 또한, ECU(120)의 메모리(225)는 차량 내부(100)와 연관된 프라이버시 설정들을 저장한다. 제어기(205)는 메모리(225)로부터 검색하고, 무엇보다도, 본 명세서에 기술된 제어 프로세스 및 방법(이하에서 더 상세히 기술되는 프라이버시 설정들에 기초한 제어 프로세스 및 방법)과 관련된 명령들을 실행한다. 다른 실시예에서, ECU(120)는 추가의, 더 적은, 또는 상이한 구성요소들을 포함한다. ECU(120)는 본 명세서에 나열된 특정 기능들을 수행하도록 각각 구성된 몇몇의 독립적인 전자 제어 유닛들로 구현될 수 있음을 알아야한다. 부가적으로, ECU(120)는 특정 유형의 센서 데이터를 입력하고 관련된 프로세스를 수행하는 서브-모듈들을 포함할 수 있다.
ECU(120)의 입력/출력 모듈(215)은 관련 메타데이터와 함께 이미지 처리 ECU(110)로부터 하나 이상의 이미지를 수신하도록 구성된다(예를 들어, 메타데이터는 탑승자의 수, 하나 이상의 탑승자들 각각의 자세, 하나 이상의 탑승자들 각각의 크기, 하나 이상의 탑승자들 각각의 위치, 또는 다른 적절한 메타데이터를 포함할 수 있다). 제어기(205)는 입력/출력 모듈(215)에 의해 수신된 비디오 또는 하나 이상의 이미지를 처리하도록 구성된다. 예를 들어, 도 3의 실시예에서, 입력/출력 모듈(215)은 이미지 처리 ECU(110)로부터 하나 이상의 이미지를 수신하고, 상기 하나 이상의 이미지를 이미지 처리를 위해 제어기(205)로 전송한다. 그러면, 제어기(205)는 상기 하나 이상의 이미지를 처리한다. 상기 하나 이상의 이미지를 처리함으로써, ECU(120)의 제어기(205)는 상기 하나 이상의 이미지로부터 하나 이상의 프라이버시 이미지를 생성할 수 있다. 또한, 다양한 결정에 따라, 제어기(205)는 하나 이상의 프라이버시 이미지를 원격 장치(예를 들어, 원격 장치(144))로 전송하도록 제 1 트랜시버(302) 및 제 1 안테나(304)를 제어할 수 있다. 대안적으로, 다양한 결정에 따라, 제어기(205)는 이미지 처리 ECU(110)로부터 원격 장치(예를 들어, 원격 장치(144))로 하나 이상의 이미지를 직접 전송하도록 제 1 트랜시버(302) 및 제 1 안테나(304)를 제어할 수 있다. 제 1 트랜시버(302)는 장거리 무선 주파수(RF) 트랜시버(예를 들면, 제 2 세대(2G), 제 3 세대(3G) 또는 제 4 세대 롱 텀 에볼루션(4G LTE) 중 하나를 통해 통신하는 RF 트랜시버, WLAN(wireless local area network) 트랜시버, 또는 다른 적합한 장거리 RF 트랜시버)가 된다.
ECU(120), 서브 모듈, 및 추가의 ECU(예를 들면, 이미지 처리 ECU(110))는 차량 통신 인터페이스(116) 상의 하나 이상의 통신 모듈들을 통해 링크될 수 있고, 및/또는 입력/출력 모듈(215)을 통해 직접 접속될 수 있다. 일부 실시예에서, 이미지 처리 ECU(110)는 입력/출력 모듈(215)과 통신하기 위해 J1939 또는 CAN 버스와 같은 프로토콜을 사용하여 통신한다. 다른 실시예에서, 이미지 처리 ECU(110)는 특정 응용 프로그램의 필요에 따라 다른 적합한 프로토콜 하에서 입력/출력 모듈(215)과 통신한다. 일부 실시예에서, 입력/출력 모듈(215)은 다양한 제어 및 센서로부터의 전용 신호 라인들을 사용하여 정보를 직접 입력한다.
다시 도 1을 참조하면, 일부 실시예에서, ECU(120)는 또한 무선 네트워크(148)를 통해 차량 내부(100)의 프라이버시 키(142)를 검출 또는 통신할 수 있다. 도 3의 예에서, 제 2 트랜시버(306)는 단거리 RF 트랜시버(예를 들면, 블루투스® 트랜시버, NFC 트랜시버, 또는 다른 적절한 단거리 RF 트랜시버)가 된다. 프라이버시 키(142)는 스마트폰, 키 포브(key fob), 태블릿, 스마트워치(smartwatch), 또는 ECU(120) 또는 다른 차량 시스템에 의해 검출될 수 있는 다른 적절한 무선 장치가 될 수 있다. 프라이버시 키(142)는 또한 차량 내부(100)의 프라이버시 설정들을 추가로 제어하기 위해 ECU(120)에 의해 사용될 수 있다.
일부 실시예에서, 프라이버시 설정들은 상이한 임계치들을 포함하고, ECU(120)는 차량 내부(100)의 프라이버시 키(142)의 검출에 기초하여 프라이버시 설정들의 상이한 임계치들을 변경 또는 조정한다. 예를 들어, ECU(120)는 프라이버시 키(142)가 차량 내부(100)에 존재할 때, 원격 뷰 시스템(102)을 디스에이블할 수 있다(예를 들어, 프라이버시 설정들을 최대 프라이버시 임계치로 설정한다). 대안적으로, ECU(120)는 프라이버시 키(142)가 차량 내부(100)에 존재하지 않을 때, 원격 뷰 시스템(102)을 인에이블할 수 있다(예를 들어, 프라이버시 설정들을 비활성화하거나 최대 프라이버시 임계치로부터 프라이버시 설정들을 감소시킨다). 또한, 프라이버시 설정들의 상이한 임계치들에 따라서, ECU(120)는 이하에서 더 상세하게 설명되는 바와 같이, 하나 이상의 탑승자를 포함하는 하나 이상의 이미지의 하나 이상의 부분을 다양한 정도로 검열(censoring)함으로써 하나 이상의 프라이버시 이미지를 생성할 수 있다.
ECU(120)는 무선 네트워크(146)를 통해 원격 장치(144)로 프라이버시 이미지를 전송하기 전에 하나 이상의 프라이버시 이미지를 생성한다. 이러한 방식으로, 원격 장치(144)로 전송된 임의의 프라이버시 이미지들이 차량 내부(100)에 위치된 한 명 이상의 탑승자들의 아이덴티티들을 감소하거나 제거하게 될 것이다.
일부 실시예에서, ECU(120)는 차량 내부(100)에 대해 적어도 낮은 임계치로 설정된 프라이버시 설정들을 디폴트한다. 도 1의 도시된 실시예에서, ECU(120)는 차량 통신 인터페이스(116C)를 통하여, 차량 내부(100)의 사용자로 하여금 디폴트 임계치 설정을 포함하는 프라이버시 설정들의 상이한 임계치들을 조정할 수 있게 하는 사용자 인터페이스(150)에 접속된다. 사용자 인터페이스는 또한 사용자로 하여금 ECU(120)에 상이한 프라이버시 키들을 등록하거나 페어링(pair)할 수 있게 한다. 추가적으로 또는 대안적으로, ECU(120)는 다른 차량 시스템으로부터 수신된 입력들 또는 명령들에 응답하여 프라이버시 설정들을 활성화 또는 비활성화할 수 있다. 사용자 인터페이스(150)는 터치스크린 디스플레이 상에 디스플레이되고 그로부터 입력들을 수신하는 그래픽 사용자 인터페이스, 디스플레이 상에 디스플레이되고 제어 장치로부터 입력들을 수신하는 그래픽 사용자 인터페이스, 또는 다른 적절한 사용자 인터페이스를 포함할 수 있다.
차량 센서들(140)은 차량 통신 인터페이스(116B)를 통해 ECU(120)에 통신 가능하게 결합되고 차량 센서들(140)은 차량 내부(100)를 포함하는 차량에 사고가 났는지를 나타낼 수 있다. 일부 실시예에서, 차량 센서들(140)은 ECU(120)로 하여금 차량의 위치, 방위 및 움직임을 결정할 수 있게 하는 정보를 전송한다. 일부 실시예에서, ECU(120)는 차량 센서들(140)로부터 수신된 정보에 기초하여 차량에 사고가 났는지를 결정한다. ECU(120)는 차량 내부(100)를 포함하는 차량에 사고가 났을 때 프라이버시 설정들을 비활성화한다. 프라이버시 설정들의 비활성화는 비상 사태 관리자(emergency dispatcher) 또는 다른 비상 대응 요원(emergency personnel)이 프라이버시 보호 없이 차량 내부(100)의 하나 이상의 이미지에 액세스하여 원격적으로 볼 수 있게 한다. 일부 실시예에서, 차량 센서들(140)은 GPS(global positioning system), 하나 이상의 에어백 센서, 또는 다른 적절한 충돌 센서를 포함한다.
도 4는 원격 뷰 시스템(102)을 동작시키는 방법(400)의 흐름도를 도시한다. 방법(400)은 도 3과 관련하여 설명된다. 하지만, 방법(400)에서 설명된 기능은 이미지 처리 ECU(110), ECU(120) 및/또는 다른 차량 시스템들 사이에서와 같이 다수의 장치들 사이에 분배될 수 있다는 것을 이해해야한다. 또한, 방법(400)에서 설명된 기능은 ECU(120)에 의해 수행되는 것에 한정되지 않고, 이미지 처리 ECU(110) 또는 다른 차량 시스템에 의해 수행될 수도 있음을 이해해야한다.
도 4에 도시된 바와 같이, ECU(120)는 원격 장치(예를 들면, 상술한 바와 같은 원격 장치(144))로부터 이미지 요청을 수신한다(블록 402). 일부 실시예에서, ECU(120)는 제 1 트랜시버(302) 및 제 1 안테나(304)를 통해 원격 서버(예를 들면, 비상 관리 센터의 컴퓨터)로부터 이미지 요청을 수신한다.
ECU(120)는 또한 이미지 처리 ECU(110)를 통해 카메라(112)로부터 차량 내부(예를 들면, 전술된 바와 같은 차량 내부(100))의 하나 이상의 이미지를 수신한다(블록 404). 일부 실시예들에서, ECU(120)는 이미지 처리 ECU(110)로부터 하나 이상의 이미지를 요청할 때 또는 연속적으로 하나 이상의 이미지를 수신한다. 다른 실시예에서, 하나 이상의 이미지는 차량 내부의 모든 좌석 영역들을 커버하는 광각 렌즈를 갖는 카메라(112)로부터의 비디오 스트림이다. 상기 하나 이상의 이미지는 미가공 이미지(raw image), 처리된 이미지, 압축된 이미지, 또는 압축되지 않은 이미지 중 하나가 될 수 있다. 또한, ECU(120)는 이미지 처리 ECU(110)로부터 하나 이상의 이미지와 연관된 메타데이터를 수신한다.
ECU(120)는 프라이버시 키(예를 들면, 전술한 프라이버시 키(142))가 차량 내부에 위치하는지를 결정한다(결정 블록 406). 예를 들어, ECU(120)의 제 2 트랜시버(306)는 제 2 안테나(308)를 통해 무선 키 포브(wireless key fob)로부터 신호를 수신하는 단거리 무선 주파수(RF) 트랜시버가 된다. 무선 키 포브는 ECU(120)의 메모리(225)에 프라이버시 키로서 등록될 수 있다. 다른 예에서, ECU(120)는 무선 네트워크(예를 들면, 전술한 무선 네트워크(148))를 통해 스마트폰이 ECU(120)에 접속되는지, 프라이버시 키로서 메모리(225)에 등록되는지, 및 차량 내부에 위치하는지를 결정할 수 있다.
ECU(120)는 프라이버시 키로부터 수신된 위치 정보(예를 들어, GPS 정보 또는 다른 위치 기반 정보)에 기초하여 프라이버시 키가 차량 내부에 위치하는지를 결정할 수 있다. 대안적으로, ECU(120)는 제 2 트랜시버(306) 및 제 2 안테나(308)를 통해 ECU(120) 및 프라이버시 키를 연결하는 무선 네트워크의 특성에 기초하여 프라이버시 키가 차량 내에 위치되는지를 결정할 수 있다. 예를 들어, ECU(120)는 무선 네트워크의 최대 거리와 관련하여 ECU(120)의 메모리(225)에 저장된 정보를 갖고, 상기 최대 거리에 기초하여 ECU(120)는 프라이버시 키가 차량 내부에 위치하는지를 결정한다. 다시 말해서, ECU(120)는 무선 네트워크의 최대 거리가 6 피트인 ECU(120)의 메모리(225)에 저장된 정보를 가질 수 있다. 차량 내부가 6 피트 길이이고 ECU(120)가 무선 네트워크를 통해 프라이버시 키를 검출하지 않거나 그에 접속하지 않으면, ECU(120)는 프라이버시 키가 차량 내부에 위치하지 않는다고 결정할 수 있다.
ECU(120)가 프라이버시 키가 차량 내부에 위치하지 않는다고 결정하면(결정 블록 406), ECU(120)는 무선 네트워크(예를 들면, 무선 네트워크(146))를 통해서 제 1 안테나를 통해 이미지 처리 ECU(110)로부터 하나 이상의 이미지를 전송하도록 제 1 트랜시버(302)를 제어한다(블록 408). 이러한 방식으로, ECU(120)는 프라이버시 키가 차량 내부에 위치하지 않기 때문에 프라이버시 보호가 있는 어떠한 이미지도 생성하지 않는다. 예를 들어, 도 5는 프라이버시 보호가 없는 차량 내부의 이미지(500)를 도시한다. 이 도시된 실시예에서, 이미지(500)는 2 명의 탑승자인 제 1 탑승자(505)와 제 2 탑승자(510)를 포함한다. 2 명의 탑승자는 전술한 바와 같이 이미지 처리 ECU(110)의 탑승자 검출 시스템에 의해 검출된 관심의 객체들이 되며, 두 탑승자와 관련한 정보가 연관된 메타데이터로서 ECU(120)에 제공된다. 도 5에 도시된 바와 같이, 제 1 탑승자(505) 및 제 2 탑승자(510)는 카메라(112)로부터 이미지(500)의 부분들(예를 들면, 운전석(130) 및 차량 내부의 우측 뒷좌석(138)이 각각된다)을 점유한다.
ECU(120)가 프라이버시 키가 차량 내부에 위치한다고 결정하면, ECU(120)는 한 명 이상의 탑승자가 차량 내부에 위치하는지를 결정한다(결정 블록 410). 예를 들어, ECU(120)는 한 명 이상의 탑승자가 차량 내부에 위치하는지를 결정하기 위해 차량 내부의 하나 이상의 이미지와 연관된 메타데이터를 사용할 수 있다. 대안적으로, ECU(120)는 다른 차량 센서들(예를 들어, 전술한 바와 같은 차량 센서들(140))로부터 정보를 수신하고, ECU(120)는 상기 다른 차량 센서들로부터의 정보에 기초하여 한 명 이상의 탑승자가 차량 내에 있는지를 결정할 수 있다. 예를 들어, ECU(120)가 좌석벨트 맞물림 센서로부터의 표시 또는 중량 센서로부터의 표시를 수신하면, ECU(120)는 한 명 이상의 점유자가 차량 내부에 있다는 것을 결정할 수 있다.
ECU(120)가 차량 내부에 탑승자가 없다고 결정하면, ECU(120)는 무선 네트워크를 통하여 제 1 안테나(304)를 통해 이미지 처리 ECU(110)로부터 하나 이상의 이미지(예를 들어, 전술한 바와 같은 이미지(500))를 전송하기 위해 제 1 트랜시버(302)를 제어한다. 이러한 방식으로, ECU(120)는 차량 내부(100)에 탑승자가 없기 때문에 프라이버시 보호가 있는 어떠한 이미지도 생성하지 않는다.
ECU(120)가 차량 내부에 탑승자가 있다고 결정하면(결정 블록 410), ECU(120)는 ECU(120)의 메모리(225)에 저장된 프라이버시 설정들을 검색하고 프라이버시 설정들이 활성화되는지를 결정한다(결정 블록 412). ECU(120)가 프라이버시 설정들이 활성화되지 않았다고 결정하면(결정 블록 412), ECU(120)는 무선 네트워크를 통하여 제 1 안테나(304)를 통해 이미지 처리 ECU(110)로부터 원격 장치로 하나 이상의 이미지(예를 들면, 전술한 바와 같은 화상(500))를 전송하기 위해 제 1 트랜시버(302)를 제어한다(블록 408). 이러한 방식으로, ECU(120)는 프라이버시 설정들이 활성화되지 않기 때문에 프라이버시 보호가 있는 어떠한 이미지도 생성하지 않는다.
ECU(120)가 프라이버시 설정들이 활성화되었다고 결정하면(결정 블록 412), ECU(120)는 하나 이상의 이미지로부터 하나 이상의 프라이버시 이미지를 생성하고, 무선 네트워크를 통하여 제 1 안테나(304)를 통해 원격 장치(예를 들면, 원격 장치(144))로 하나 이상의 프라이버시 이미지를 전송하기 위해 제 1 트랜시버(302)를 제어한다(블록 414). 이러한 방식으로, ECU(120)는, ECU(120)가 프라이버시 키 및 하나 이상의 탑승자가 차량 내부에 있다고 결정하고, ECU(120)가 프라이버시 설정들이 활성화되었다고 결정했으므로, 프라이버시 보호가 있는 하나 이상의 프라이버시 이미지를 생성한다. 일부 실시예에서, 프라이버시 키는 ECU(120)의 메모리에 저장된 프라이버시 설정들을 활성화 또는 조정할 수 있다. 일부 실시예에서, 프라이버시 설정들은 원격 장치에 제공되는 정보의 유형을 결정하는 상이한 임계치들을 갖는다.
프라이버시 설정들의 최대 임계치는 차량 내부의 어떠한 이미지 또는 정보도 없는 것에 대응할 수 있다. 프라이버시 설정들의 최소 임계치는 차량 내부의 하나 이상의 미검열된(uncensored) 이미지들에 대응할 수 있다. 프라이버시 설정들의 높은 임계치는 이미지 없이 차량 내부의 정보(예를 들어, 탑승자의 수)에만 대응할 수 있다. 프라이버시 설정들의 중간-높은 임계치는 차량 내부의 한 명 이상의 탑승자를 포함하는 프라이버시 이미지의 부분들을 검열하는 프라이버시 이미지에 대응할 수 있다. 예를 들어, 도 6은 프라이버시 보호가 있는 차량 내부의 프라이버시 이미지(600)를 도시한다. 도시된 실시예에서, 프라이버시 이미지(600)는 프라이버시 이미지(600)의 두 부분, 즉 제 1 부분(605) 및 제 2 부분(610)을 포함한다. 도 6에 도시된 바와 같이, 제 1 부분(605) 및 제 2 부분(610)은 프라이버시 이미지(600)의 완전한 검열 부분들(예를 들면, 각각, 운전석(130) 및 우측 뒷좌석(138))이며, 여기서 ECU(120)는 이미지 처리 ECU(110)로부터의 메타데이터에 기초하여 2 명의 탑승자(예를 들면, 도 5에 도시된 바와 같은 제 1 탑승자(505) 및 제 2 탑승자(510))의 위치를 결정한다.
ECU(120)에 의해 생성된 프라이버시 이미지들은 프라이버시 이미지(600)에 도시된 바와 같이 완전히 검열된 부분들로 제한되지 않고, 대신에 검열 정도가 변경될 수 있음을 이해해야한다. 예를 들어, 도 7은 프라이버시 보호가 있는 차량 내부의 프라이버시 이미지(700)를 도시한다. 프라이버시 이미지(600)의 완전한 검열 부분들 대신에, 프라이버시 이미지(700)는 두 탑승자(705 및 710)의 흐릿한 얼굴(blurred face)을 포함한다. 대안적으로, 도 8은 프라이버시 보호가 있는 차량 내부의 프라이버시 이미지(800)를 도시한다. 프라이버시 이미지(600)의 완전히 검열된 부분들 또는 프라이버시 이미지(700)의 흐릿한 얼굴 대신에, 프라이버시 이미지(800)는 두 탑승자(예를 들면, 탑승자(705 및 710))의 형상에 대응하는 검열된 부분들(805 및 810)을 포함한다.
선택적으로, 일부 실시예에서, ECU(120)는 또한 상기 차량 내부를 포함하는 차량에 사고가 났는지를 결정할 수 있다(결정 블록 416). ECU(120)가 차량에 사고가 났다고 결정하면(결정 블록 416), ECU(120)는 무선 네트워크를 통하여 제 1 안테나(304)를 통해 이미지 처리 ECU(110)로부터 원격 장치로 하나 이상의 이미지들(예를 들면, 전술된 바와 같은 이미지(500))을 전송하도록 제 1 트랜시버(302)를 제어한다(블록 408). 이러한 방식으로, ECU(120)는, 차량에 사고가 났고 비상 대응 요원이 차량 내부의 한 명 이상의 탑승자들에 관한 정보를 수집할 필요가 있기 때문에, 프라이버시 보호가 있는 임의의 이미지를 생성하지 않는다. 즉, 사고는 차량 내부와 연관된 프라이버시 설정들을 비활성화한다.
ECU(120)가 차량에 사고가 나지 않았다고 결정하고(결정 블록 416), ECU(120)가 프라이버시 설정들이 활성화되었다고 결정하면(결정 블록 412), ECU(120)는 하나 이상의 이미지로부터 하나 이상의 프라이버시 이미지를 생성하고, 무선 네트워크를 통하여 안테나를 통해 원격 장치(예를 들면, 원격 장치(144))로 상기 하나 이상의 프라이버시 이미지를 전송한다(블록 414). 이러한 방식으로, ECU(120)가 프라이버시 키 및 하나 이상의 탑승자가 차량 내부에 위치하고, 프라이버시 설정들이 활성화되고, 상기 차량 내부를 포함하는 차량에 사고가 나지 않았다고 결정했기 때문에, ECU(120)는 프라이버시 보호가 있는 하나 이상의 프라이버시 이미지를 생성한다.
따라서, 본 발명은 무엇보다도 프라이버시 보호 원격 뷰 시스템 및 프라이버시 보호 원격 뷰 시스템을 동작시키는 방법을 제공한다. 본 발명의 다양한 특징들 및 이점들은 다음의 청구 범위에 기재된다.

Claims (14)

  1. 프라이버시 보호(privacy protection) 원격 뷰 시스템을 동작시키기 위한 방법에 있어서:
    전자 제어 유닛으로, 차량 내부의 하나 이상의 이미지에 대한 원격 장치로부터의 요청을 수신하는 단계;
    상기 전자 제어 유닛으로, 상기 차량 내부의 하나 이상의 이미지를 수신하는 단계;
    상기 전자 제어 유닛으로, 프라이버시 키(privacy key)가 상기 차량 내부에 위치되는지를 결정하는 단계;
    상기 전자 제어 유닛으로, 한 명 이상의 탑승자가 상기 차량 내부에 위치되는지를 결정하는 단계;
    상기 전자 제어 유닛으로, 메모리에 저장된 차량 내부의 프라이버시 설정들(privacy settings)을 검색하는 단계;
    상기 프라이버시 키 및 상기 한 명 이상의 탑승자가 차량 내부에 위치되는 것으로 결정하는 것에 응답하여, 상기 전자 제어 유닛으로, 상기 차량 내부의 하나 이상의 이미지 및 프라이버시 설정들에 기초하여 하나 이상의 프라이버시 이미지를 생성하는 단계; 및
    상기 하나 이상의 프라이버시 이미지를 안테나를 통해 상기 원격 장치로 전송하도록 트랜시버를 제어하는 단계를 포함하는, 프라이버시 보호 원격 뷰 시스템의 동작 방법.
  2. 제 1 항에 있어서,
    상기 전자 제어 유닛으로, 상기 차량 내부를 포함하는 차량에 사고가 났는지를 결정하는 단계를 더 포함하며, 상기 하나 이상의 이미지로부터 및 상기 차량 내부의 프라이버시 설정들에 기초하여 상기 하나 이상의 프라이버시 이미지를 생성하는 상기 단계는 또한 상기 차량에 사고가 나지 않았다는 결정에 응답하는, 프라이버시 보호 원격 뷰 시스템의 동작 방법.
  3. 제 2 항에 있어서,
    상기 차량에 사고가 났다는 결정에 응답하여, 상기 방법은 상기 전자 제어 유닛으로, 상기 하나 이상의 이미지를 상기 안테나를 통해 상기 원격 장치로 전송하도록 상기 트랜시버를 제어하는 단계를 더 포함하는, 프라이버시 보호 원격 뷰 시스템의 동작 방법.
  4. 제 1 항에 있어서,
    상기 프라이버시 키가 상기 차량 내부에 위치되지 않는다는 결정에 응답하여, 상기 방법은 상기 전자 제어 유닛으로, 상기 하나 이상의 이미지를 상기 안테나를 통해 상기 원격 장치로 전송하도록 상기 트랜시버를 제어하는 단계를 더 포함하는, 프라이버시 보호 원격 뷰 시스템의 동작 방법.
  5. 제 1 항에 있어서,
    상기 한 명 이상의 탑승자가 상기 차량 내부에 위치되지 않는다는 결정에 응답하여, 상기 방법은 상기 전자 제어 유닛으로, 상기 하나 이상의 이미지를 상기 안테나를 통해 상기 원격 장치로 전송하도록 상기 트랜시버를 제어하는 단계를 더 포함하는, 프라이버시 보호 원격 뷰 시스템의 동작 방법.
  6. 제 1 항에 있어서,
    상기 차량 내부의 프라이버시 설정들은 비활성화되고, 상기 하나 이상의 프라이버시 이미지는 상기 하나 이상의 이미지와 실질적으로 유사한, 프라이버시 보호 원격 뷰 시스템의 동작 방법.
  7. 제 1 항에 있어서,
    상기 차량 내부의 프라이버시 설정들은 상기 한 명 이상의 탑승자 중 적어도 한 명의 아이덴티티(identity)를 제거하도록 설정되고, 상기 하나 이상의 프라이버시 이미지는 상기 하나 이상의 프라이버시 이미지 내의 상기 한 명 이상의 탑승자 중 적어도 한 명의 아이덴티티를 제거하는, 프라이버시 보호 원격 뷰 시스템의 동작 방법.
  8. 프라이버시 보호 원격 뷰 시스템에 있어서:
    차량 내부의 하나 이상의 이미지를 캡처하도록 구성된 카메라; 및
    전자 제어 유닛을 포함하고,
    상기 전자 제어 유닛은:
    제 1 안테나에 전기적으로 결합된 제 1 트랜시버;
    제 2 안테나에 전기적으로 결합된 제 2 트랜시버;
    메모리; 및
    상기 메모리에 전기적으로 결합된 전자 프로세서를 가지며,
    상기 전자 제어 유닛은:
    원격 장치로부터 상기 제 1 트랜시버 및 상기 제 1 안테나를 통해 상기 차량 내부의 하나 이상의 이미지에 대한 요청을 수신하고;
    상기 차량 내부의 하나 이상의 이미지를 수신하고;
    프라이버시 키가 상기 제 2 트랜시버 및 상기 제 2 안테나를 통해 상기 차량 내부에 위치되는지를 결정하고;
    한 명 이상의 탑승자가 상기 차량 내부에 위치되는지를 결정하고;
    상기 메모리에 저장된 상기 차량 내부의 프라이버시 설정들을 검색하고;
    상기 프라이버시 키 및 상기 한 명 이상의 탑승자가 상기 차량 내부에 위치된다는 결정에 응답하여, 상기 차량 내부의 하나 이상의 이미지 및 프라이버시 설정들에 기초하여 하나 이상의 프라이버시 이미지를 생성하고;
    상기 하나 이상의 프라이버시 이미지를 상기 제 1 안테나를 통해 상기 원격 장치로 전송하도록 상기 제 1 트랜시버를 제어하도록 구성되는, 프라이버시 보호 원격 뷰 시스템.
  9. 제 8 항에 있어서,
    상기 전자 제어 유닛은 또한 상기 차량 내부를 포함하는 차량에 사고가 났는지를 결정하도록 구성되고, 상기 하나 이상의 이미지로부터 및 상기 차량 내부의 프라이버시 설정들에 기초하여 상기 하나 이상의 프라이버시 이미지를 생성하는 것은 또한 상기 차량에 사고가 나지 않았다는 결정에 응답하는, 프라이버시 보호 원격 뷰 시스템.
  10. 제 9 항에 있어서,
    상기 전자 제어 유닛은 또한 상기 차량에 사고가 났다는 결정에 응답하여, 상기 하나 이상의 이미지를 상기 제 1 안테나를 통해 상기 원격 장치로 전송하기 위해 상기 제 1 트랜시버를 제어하도록 구성되는, 프라이버시 보호 원격 뷰 시스템.
  11. 제 8 항에 있어서,
    상기 전자 제어 유닛은 또한 상기 프라이버시 키가 상기 차량 내부에 위치되지 않는다는 결정에 응답하여, 상기 하나 이상의 이미지를 상기 제 1 안테나를 통해 상기 원격 장치로 전송하기 위해 상기 제 1 트랜시버를 제어하도록 구성되는, 프라이버시 보호 원격 뷰 시스템.
  12. 제 8 항에 있어서,
    상기 전자 제어 유닛은 또한 상기 한 명 이상의 탑승자가 상기 차량 내부에 위치되지 않는다는 결정에 응답하여, 상기 하나 이상의 이미지를 상기 제 1 안테나를 통해 상기 원격 장치로 전송하기 위해 상기 트랜시버를 제어하도록 구성되는, 프라이버시 보호 원격 뷰 시스템.
  13. 제 8 항에 있어서,
    상기 차량 내부의 프라이버시 설정들은 비활성화되고, 상기 하나 이상의 프라이버시 이미지는 상기 하나 이상의 이미지와 실질적으로 유사한, 프라이버시 보호 원격 뷰 시스템.
  14. 제 8 항에 있어서,
    상기 차량 내부의 프라이버시 설정들은 상기 한 명 이상의 탑승자 중 적어도 한 명의 아이덴티티를 제거하도록 설정되고, 상기 하나 이상의 프라이버시 이미지는 상기 하나 이상의 프라이버시 이미지 내의 상기 한 명 이상의 탑승자 중 상기 적어도 한 명의 아이덴티티를 제거하는, 프라이버시 보호 원격 뷰 시스템.
KR1020177032268A 2015-04-10 2016-04-08 프라이버시 보호 원격 뷰 시스템 KR102027098B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562145946P 2015-04-10 2015-04-10
US62/145,946 2015-04-10
PCT/US2016/026778 WO2016164820A1 (en) 2015-04-10 2016-04-08 Remote view system with privacy protection

Publications (2)

Publication Number Publication Date
KR20170136576A true KR20170136576A (ko) 2017-12-11
KR102027098B1 KR102027098B1 (ko) 2019-10-01

Family

ID=55967404

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020177032268A KR102027098B1 (ko) 2015-04-10 2016-04-08 프라이버시 보호 원격 뷰 시스템

Country Status (6)

Country Link
US (1) US10423845B2 (ko)
EP (1) EP3281148B1 (ko)
JP (1) JP6509369B2 (ko)
KR (1) KR102027098B1 (ko)
CN (1) CN107810506B (ko)
WO (1) WO2016164820A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021132798A1 (en) * 2019-12-23 2021-07-01 Samsung Electronics Co., Ltd. Method and apparatus for data anonymization

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7118529B2 (ja) * 2018-03-29 2022-08-16 矢崎総業株式会社 車内監視モジュール、及び、監視システム
JP7076331B2 (ja) * 2018-08-10 2022-05-27 本田技研工業株式会社 車両システム
JP7143736B2 (ja) * 2018-11-20 2022-09-29 トヨタ自動車株式会社 運転支援装置、ウェアラブル装置、運転支援方法およびプログラム
JP2020156033A (ja) * 2019-03-22 2020-09-24 日産自動車株式会社 情報処理装置及び情報処理方法
JP2021043571A (ja) * 2019-09-09 2021-03-18 ソニーセミコンダクタソリューションズ株式会社 情報処理装置、移動装置、情報処理システム、および方法、並びにプログラム
US10893302B1 (en) * 2020-01-09 2021-01-12 International Business Machines Corporation Adaptive livestream modification
US11960621B2 (en) * 2021-02-09 2024-04-16 Ford Global Technologies, Llc Systems and methods for ensuring privacy in an autonomous vehicle
DE102021207437A1 (de) * 2021-07-13 2023-01-19 Hyundai Motor Company Verfahren und System zum Schutz der Privatspähre bei der Vorbereitung eines Telefongesprächs zwischen einem Fahrzeuginsassen eines Fahrzeugs und einem entfernten Gesprächspartner
CN114021183A (zh) * 2021-10-26 2022-02-08 集度汽车有限公司 基于乘员信息的隐私保护方法、装置、座舱、车辆及介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008009761A (ja) * 2006-06-29 2008-01-17 Toyota Motor Corp 車内環境記録装置

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6748536B1 (en) * 2000-01-13 2004-06-08 Visteon Global Technologies, Inc. Key security system for vehicle-based information node
US6423487B2 (en) * 2000-04-13 2002-07-23 Fuji Photo Film Co., Ltd. Thermally processed image recording material
DE10063697B4 (de) 2000-12-20 2006-07-13 Siemens Ag Verfahren und Vorrichtung zur Erfassung der Position eines Elements in einem Fahrzeug, insbesondere für Insassenschutzsysteme
EP1363810B1 (en) * 2001-01-23 2007-05-30 Donnelly Corporation Improved vehicular lighting system
JP2003306106A (ja) * 2002-04-12 2003-10-28 Matsushita Electric Ind Co Ltd 緊急通報装置
US7401233B2 (en) * 2003-06-24 2008-07-15 International Business Machines Corporation Method, system, and apparatus for dynamic data-driven privacy policy protection and data sharing
US7366279B2 (en) * 2004-07-29 2008-04-29 General Electric Company Scatter control system and method for computed tomography
US7784080B2 (en) * 2004-09-30 2010-08-24 Smartvue Corporation Wireless video surveillance system and method with single click-select actions
CN1852184A (zh) * 2005-04-22 2006-10-25 鸿富锦精密工业（深圳）有限公司 车辆网络系统
JP2007094935A (ja) * 2005-09-30 2007-04-12 Omron Corp 情報処理装置および情報処理方法、情報処理システム、プログラム、並びに、記録媒体
KR101502012B1 (ko) 2008-10-06 2015-03-12 엘지전자 주식회사 텔레매틱스 단말기 및 텔레매틱스 단말기의 비상 상황 알림방법
CN201457305U (zh) * 2009-04-13 2010-05-12 复旦大学 图像加密车辆中控锁装置
CN101739615A (zh) * 2009-11-30 2010-06-16 交通部公路科学研究院 出租车智能综合监管与服务系统
US20120256769A1 (en) 2011-04-07 2012-10-11 GM Global Technology Operations LLC System and method for real-time detection of an emergency situation occuring in a vehicle
US9102299B2 (en) * 2011-12-21 2015-08-11 GM Global Technology Operations LLC System and method for determining driver identification by a remote device
CN103246835A (zh) * 2012-02-06 2013-08-14 吉菲斯股份有限公司 基于隐私的身份
CN102752359B (zh) * 2012-02-17 2015-05-13 浙江吉利汽车研究院有限公司 一种远程客服协助式汽车指纹识别认证方法及其系统
US8594861B2 (en) 2012-02-27 2013-11-26 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for communicating with a vehicle user
US8654329B2 (en) * 2012-06-19 2014-02-18 The United States Of America, As Represented By The Secretary Of The Navy Parallel multisensor optical particle sensors for flowing fluid systems
US20140019219A1 (en) * 2012-07-13 2014-01-16 Google Inc. Regulating Impression Frequency in Content Display
EP2713582B1 (en) * 2012-09-28 2018-08-01 Harman Becker Automotive Systems GmbH Method and apparatus for personalized access to automotive telematic services
US20140192194A1 (en) * 2013-01-07 2014-07-10 Linda Bedell Vehicle Surveillance System
WO2014172581A1 (en) * 2013-04-17 2014-10-23 Hovtag Llc Managing vehicular traffic on a roadway
US9479075B2 (en) * 2013-07-31 2016-10-25 General Electric Company Multilevel converter system
US9503694B2 (en) 2013-08-13 2016-11-22 GM Global Technology Operations LLC Methods and apparatus for utilizing vehicle system integrated remote wireless image capture
US20150077556A1 (en) 2013-09-13 2015-03-19 Ford Global Technologies, Llc Vehicle system for automated video recording
GB2524869A (en) * 2014-02-04 2015-10-07 Menachem Mendel Sudak Monitoring system and method
BR112016029038B1 (pt) * 2014-06-11 2023-02-28 Veridium Ip Limited Sistema e método para facilitar acesso de usuário a veículos com base em informações biométricas
CN104325946A (zh) * 2014-11-28 2015-02-04 天津博信汽车零部件有限公司 基于乘客检测的车辆控制系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008009761A (ja) * 2006-06-29 2008-01-17 Toyota Motor Corp 車内環境記録装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021132798A1 (en) * 2019-12-23 2021-07-01 Samsung Electronics Co., Ltd. Method and apparatus for data anonymization
US11430088B2 (en) 2019-12-23 2022-08-30 Samsung Electronics Co., Ltd. Method and apparatus for data anonymization

Also Published As

Publication number Publication date
CN107810506B (zh) 2021-10-01
JP2018513804A (ja) 2018-05-31
EP3281148B1 (en) 2022-08-24
US10423845B2 (en) 2019-09-24
CN107810506A (zh) 2018-03-16
WO2016164820A1 (en) 2016-10-13
KR102027098B1 (ko) 2019-10-01
US20180068192A1 (en) 2018-03-08
EP3281148A1 (en) 2018-02-14
JP6509369B2 (ja) 2019-05-08

Similar Documents

Publication Publication Date Title
KR102027098B1 (ko) 프라이버시 보호 원격 뷰 시스템
US20240109514A1 (en) Recording video of an operator and a surrounding visual field
KR102464898B1 (ko) 차량과 관련된 영상 정보를 공유하는 방법 및 장치
US11463408B2 (en) Vehicular secure gateway system
CN110612236B (zh) 用于车辆的智能事件系统和方法
KR102192260B1 (ko) 카메라 위치 판별 장치 및 그 제어방법
US20140375808A1 (en) Apparatus, method, and computer readable medium for monitoring a number of passengers in an automobile
CN105320520A (zh) 用于将数据功能集成在用于车辆的运动控制系统中的方法
KR102307149B1 (ko) 차량, 통신 제어 방법, 차량 탑재 통신기, 차량 탑재 통신기에서의 통신 제어 방법, 서버 장치, 서버 장치에서의 통신 제어 방법, 및 프로그램을 기억한 비일시적 기억 매체
US9596225B2 (en) Out-of-vehicle device interface apparatus and method for protecting in-vehicle network
US11127226B2 (en) On-board device adapted to acquire data relating to motion and/or driving parameters of a vehicle
CN105320035A (zh) 用于将数据功能集成在用于车辆的运动控制系统中的设备
US20200198537A1 (en) Portable device and vehicle
JP2019026211A (ja) 操作監視システム
US20060012679A1 (en) Multifunction vehicle interior imaging system
WO2020194584A1 (ja) 物体追跡装置、制御方法、及びプログラム
JP2020113106A (ja) 盗難車両追跡システム
KR100925721B1 (ko) 차량 도난 경보 시스템
US20160167581A1 (en) Driver interface for capturing images using automotive image sensors
US20150116491A1 (en) Private and automatic transmission of photograph via occupant's cell phone following impact event
US11710326B1 (en) Systems and methods for determining likelihood of traffic incident information
US10868975B2 (en) Image processing system for acquiring an image picked up by a camera provided in a vehicle an image processing method executed by a computer and a non-transitory storage medium storing an image processing program executed by a computer
WO2018223234A1 (en) Virtual instrument cluster system for a motorcycle
JP2023084162A (ja) 車両監視装置及び車両監視方法
WO2019071343A1 (en) MOTORCYCLE SAFETY SYSTEM

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant