KR101682880B1 - 차량 및 이를 포함하는 원격 차량 조작 시스템 - Google Patents

차량 및 이를 포함하는 원격 차량 조작 시스템 Download PDF

Info

Publication number
KR101682880B1
KR101682880B1 KR1020150038434A KR20150038434A KR101682880B1 KR 101682880 B1 KR101682880 B1 KR 101682880B1 KR 1020150038434 A KR1020150038434 A KR 1020150038434A KR 20150038434 A KR20150038434 A KR 20150038434A KR 101682880 B1 KR101682880 B1 KR 101682880B1
Authority
KR
South Korea
Prior art keywords
vehicle
image
remote terminal
control signal
input
Prior art date
Application number
KR1020150038434A
Other languages
English (en)
Other versions
KR20160112539A (ko
Inventor
김성운
강경현
Original Assignee
현대자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020150038434A priority Critical patent/KR101682880B1/ko
Priority to US14/944,812 priority patent/US9669783B2/en
Priority to CN201510850281.4A priority patent/CN105984425A/zh
Publication of KR20160112539A publication Critical patent/KR20160112539A/ko
Application granted granted Critical
Publication of KR101682880B1 publication Critical patent/KR101682880B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/10Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device
    • B60R25/102Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device a signal being sent to a remote location, e.g. a radio signal being transmitted to a police station, a security company or the owner
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373Voice control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • B60R2016/02
    • B60W2050/08
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means

Abstract

본 발명의 일 측면은, 원격 단말에서 사용자 단말로부터 전송되는 이미지에 대한 조작명령이 입력되면, 차량에서 조작명령에 대응하여, 차량에서 조작 장치를 제어하는 원격 차량 조작 시스템을 제공한다. 개시된 실시예에 따른 원격 차량 조작 시스템은 차량의 조작 장치에 대한 영상을 원격 단말로 전송하도록 마련되는 사용자 단말; 상기 사용자 단말로부터 전송된 영상을 표시하고, 상기 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하는 원격 단말; 및 상기 제어신호에 따라 상기 조작 장치의 기능을 제어하는 차량;을 포함한다.

Description

차량 및 이를 포함하는 원격 차량 조작 시스템{VEHICLE AND REMOTE VEHICLE MANIPULATING SYSTEM COMPRISING THE SAME}
차량과 차량을 원격으로 조작할 수 있는 원격 차량 조작 시스템에 관한 것이다.
자동차 기술이 발달함에 따라 다양한 기술과 기능들이 자동차에 적용되고 있다. 자동차에 적용되는 기술과 기능들이 증가할수록 이러한 기능들을 활성화시키기 위해 차량에 적용되는 조작 장치들의 개수가 증가하게 된다.
다수의 조작 장치들은 서로 다른 방식의 조작방법을 갖기 때문에 운전자가 조작 장치들을 익숙하게 조작하는데 시간이 소요될 수 있다.
익숙한 차량이 아닌 처음 접하는 차량을 사용하게 될 경우, 조작 장치의 조작에 어려움을 겪을 수 있고, 운전 중이라면 운전자는 운전에 집중하기 어려울 수도 있다.
본 발명의 일 측면은, 원격 단말에서 사용자 단말로부터 전송되는 이미지에 대한 조작명령이 입력되면, 차량에서 조작명령에 대응하여, 차량에서 조작 장치를 제어하는 원격 차량 조작 시스템을 제공한다.
개시된 실시예에 따른 원격 차량 조작 시스템은 차량의 조작 대상에 대한 영상을 원격 단말로 전송하도록 마련되는 사용자 단말; 상기 사용자 단말로부터 전송된 영상을 표시하고, 상기 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 입력된 조작명령에 대응하는 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하는 원격 단말; 및 상기 제어신호에 따라 상기 조작 장치의 기능을 제어하는 차량;을 포함한다.
또한, 상기 원격 단말은 상기 사용자 단말로부터 전송된 영상을 표시하고, 상기 조작 장치에 대한 조작명령을 미리 정해진 터치 제스처로 입력 받는 디스플레이부;를 포함할 수 있다.
또한, 상기 원격 단말은 상기 조작 장치에 대한 조작명령을 입력받도록 마련되는 입력부;를 포함할 수 있다.
또한, 상기 입력부는 상기 조작 명령을 음성으로 입력 받는 음성인식장치 또는 상기 조작명령을 동작으로 입력 받는 동작인식장치를 포함할 수 있다.
또한, 상기 원격 단말은 상기 조작 장치에 대한 조작명령이 입력되면, 상기 입력된 조작명령에 대응하는 조작 장치와 상기 입력된 조작명령을 식별하고, 상기 식별된 조작 장치와 관련된 기능을 수행하는 차량의 장치를 상기 식별된 조작명령에 따라 원격으로 제어하기 위한 제어신호를 생성할 수 있다.
또한, 상기 원격 단말은 상기 사용자 단말로부터 전송되는 영상을 수신하고, 상기 제어신호를 상기 사용자 단말로 전송하는 통신부를 더 포함할 수 있다.
또한, 상기 통신부는 3g, 4g 또는 5g 통신방식을 이용하여 상기 사용자 단말 및 상기 차량과의 통신을 수행할 수 있다.
또한, 상기 사용자 단말은 영상을 획득할 수 있는 카메라; 및 상기 획득한 영상을 상기 원격 단말로 전송할 수 있는 통신부;를 포함할 수 있다.
또한, 상기 차량은 상기 원격 단말과 통신을 수행할 수 있는 통신부; 및 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어하는 제어부;를 포함할 수 있다.
개시된 실시예에 따른 원격 차량 조작 방법은 사용자 단말에서 차량의 조작 대상에 대한 영상을 원격 단말로 전송하고; 상기 원격 단말에서 상기 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하고; 상기 차량에서 상기 제어신호에 따라 상기 조작 장치의 기능을 제어하는 것;을 포함할 수 있다.
또한, 상기 원격 단말에서 상기 사용자 단말로부터 전송된 영상을 표시하고; 상기 원격 단말에서 상기 영상에 나타난 조작 장치에 대한 조작명령을 입력 받는 것;을 더 포함할 수 있다.
또한, 상기 조작명령을 입력 받는 것은, 상기 조작 장치에 대한 조작명령을 상기 원격 단말의 디스플레이부에 대한 미리 정해진 터치 제스처로 입력 받는 것;을 포함할 수 있다.
또한, 상기 조작명령을 입력 받는 것은, 상기 조작 장치에 대한 조작명령을 상기 원격 단말의 입력부를 통해 입력 받는 것;을 포함할 수 있다.
또한, 상기 조작명령을 입력 받는 것은, 상기 조작 장치에 대한 조작명령을 음성 또는 동작으로 입력 받는 것;을 포함할 수 있다.
또한, 상기 제어신호를 상기 차량으로 전송하는 것은, 상기 조작 장치에 대한 조작명령이 입력되면, 상기 원격 단말에서 상기 입력된 조작명령에 대응하는 조작 장치와 상기 입력된 조작명령을 식별하고; 상기 식별된 조작 장치와 관련된 기능을 수행하는 차량의 장치를 상기 식별된 조작명령에 따라 원격으로 제어하기 위한 제어신호를 생성하는 것;을 포함할 수 있다.
또한, 상기 제어신호를 상기 차량으로 전송하는 것은, 상기 원격 단말은 3g, 4g 또는 5g 통신방식을 이용하여 상기 제어신호를 상기 차량으로 전송하는 것;을 포함할 수 있다.
또한, 상기 조작 장치의 기능을 제어하는 것은, 상기 차량에서 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어하는 것;을 포함할 수 있다.
개시된 실시예에 따른 차량은 원격 단말로부터 전송된 조작 장치의 제어신호를 수신하는 통신부; 및 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치의 기능을 제어하는 제어부;를 포함한다.
또한, 상기 제어부는 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어할 수 있다.
개시된 실시예에 따른 차량의 제어방법은 차량의 통신부에서 원격 단말로부터 전송된 조작 장치의 제어신호를 수신하고; 상기 차량의 제어부에서 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치의 기능을 제어하는 것;을 포함한다.
또한, 상기 조작 장치의 기능을 제어하는 것은, 상기 제어부에서 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어하는 것;을 포함할 수 있다.
본 발명의 일 측면에 따른 원격 차량 조작 시스템에 의하면, 원격 단말을 통한 제어 또는 설명에 의해 운전자는 익숙하지 않은 복잡한 조작 장치도 쉽게 조작할 수 있다.
도 1은 개시된 실시예에 따른 차량의 외관도이다.
도 2는 개시된 실시예에 따른 차량의 내부의 구성을 나타낸 도면이다.
도 3은 개시된 실시예에 따른 원격 차량 조작 시스템의 구성을 개념적으로 나타낸 도면이다.
도 4는 개시된 실시예에 따른 원격 차량 조작 시스템의 구성을 구체적으로 나타낸 블록도이다.
도 5는 개시된 실시예에 따른 5G 통신방식에 따른 기지국의 대규모 안테나 시스템을 도시한 도면이다.
도 6a 내지 도 6c는 개시된 실시예에 따른 5G 통신방식에 따른 네트워크 망을 도시한 도면이다.
도 7은 개시된 실시예에 따른 원격 차량 제어 방법을 나타낸 순서도이다.
이하 첨부된 도면을 참조하여 본 발명의 일 측면에 따른 차량용 입력장치 및 이를 포함하는 차량에 관한 실시예를 상세하게 설명하도록 한다.
도 1은 본 발명의 일 실시예에 따른 차량의 외관도이고, 도 2는 본 발명의 일 실시예에 따른 차량 내부의 구성을 나타낸 도면이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 차량(100)은 차량(100)의 외관을 형성하는 본체(1), 차량(100)을 이동시키는 차륜(51, 52), 차륜(51, 52)을 회전시키는 구동 장치(80), 차량(100) 내부를 외부로부터 차폐시키는 도어(71), 차량(100) 내부의 운전자에게 차량(100) 전방의 시야를 제공하는 전면 유리(30), 운전자에게 차량(100) 후방의 시야를 제공하는 사이드 미러(81, 82)를 포함한다.
차륜(51, 52)은 차량의 전방에 마련되는 전륜(51), 차량의 후방에 마련되는 후륜(52)을 포함한다.
구동 장치(80)는 본체(1)가 전방 또는 후방으로 이동하도록 전륜(51) 또는 후륜(52)에 회전력을 제공한다. 이와 같은 구동 장치(60)는 화석 연료를 연소시켜 회전력을 생성하는 엔진(engine) 또는 축전기(미도시)로부터 전원을 공급받아 회전력을 생성하는 모터(motor)를 포함할 수 있다.
도어(71)는 본체(1)의 좌측 및 우측에 회동 가능하게 마련되어 개방 시에 운전자가 차량(100)의 내부에 탑승할 수 있도록 하며, 폐쇄 시에 차량(100)의 내부를 외부로부터 차폐시킨다.
윈드쉴드 글래스(windshield glass)라고 불리는 전면 유리(30)는 본체(100)의 전방 상측에 마련된다. 차량(100) 내부의 운전자는 전면 유리(30)를 통해 차량(100)의 전방을 볼 수 있다.
또한, 사이드 미러(81, 82)는 본체(1)의 좌측에 마련되는 좌측 사이드 미러(81) 및 우측에 마련되는 우측 사이드 미러(82)를 포함한다. 차량(100) 내부의 운전자는 사이드 미러(81, 82)를 통해 차량(100)의 측면 및 후방의 상황을 눈으로 확인할 수 있다.
이외에도 차량(100)은 차량 주변의 장애물 등을 감지하여 차량 주변의 상황을 운전자가 인식할 수 있도록 도움을 주는 다양한 센서를 포함할 수 있다. 또한, 차량(100)은 차량의 속도 등과 같은 차량의 주행정보를 감지할 수 있는 다양한 센서를 포함할 수 있다.
도 2에 도시된 바를 참조하면 차량은 기어박스(120), 센터페시아(130), 스티어링 휠(140) 및 계기판(150) 등이 마련된 대시보드(dashboard)를 포함할 수 있다.
기어박스(120)에는 차량 변속을 위한 기어 레버(121)가 설치될 수 있다. 또한, 도면에 도시된 것처럼, 기어박스에는 사용자가 내비게이션 장치(10)나 오디오 장치(133) 등을 포함하는 멀티미디어 장치의 기능이나 차량의 주요 기능의 수행을 제어할 수 있도록 마련된 다이얼 조작부(111)와 다양한 버튼들을 포함하는 입력장치(110)가 설치될 수 있다.
센터페시아(130)에는 공조 장치(132), 오디오 장치(133) 및 내비게이션 장치(10) 등이 설치될 수 있다.
공조 장치는 차량 내부의 온도, 습도, 공기의 청정도, 공기의 흐름을 조절하여 차량의 내부를 쾌적하게 유지한다. 공조 장치는 센터페시아(130)에 설치되고 공기를 토출하는 적어도 하나의 토출구를 포함할 수 있다. 센터페시아(130)에는 공조 장치 등을 제어하기 위한 버튼이나 다이얼 등이 설치될 수 있다. 운전자 등의 사용자는 센터페시아에 배치된 버튼이나 다이얼을 이용하여 차량의 공조 장치를 제어할 수 있다. 물론 기어박스(120)에 설치된 입력장치(110)의 버튼들이나 다이얼 조작부(111)를 통해 공조장치를 제어할 수도 있다.
실시예에 따라서 센터페시아(130)에는 내비게이션 장치(10)가 설치될 수 있다. 내비게이션 장치(10)는 차량의 센터페시아(130) 내부에 매립되어 형성될 수 있다. 일 실시예에 의하면 센터페시아에는 내비게이션 장치(10)를 제어하기 위한 입력부가 설치될 수도 있다. 실시예에 따라서 내비게이션 장치(10)의 입력부는 센터페시아가 아닌 다른 위치에 설치될 수도 있다. 예를 들어 내비게이션 장치(10)의 입력부는 내비게이션 장치(10)의 디스플레이부(300) 주변에 형성될 수도 있다. 또한 다른 예로 내비게이션 장치(10)의 입력부는 기어 박스(120) 등에 설치될 수도 있다.
스티어링 휠(140)은 차량의 주행 방향을 조절하기 위한 장치로, 운전자에 의해 파지되는 림(141) 및 차량의 조향 장치와 연결되고 림(141)과 조향을 위한 회전축의 허브를 연결하는 스포크(142)를 포함할 수 있다. 실시예에 따라서 스포크(142)에는 차량 내의 각종 장치, 일례로 오디오 장치 등을 제어하기 위한 조작 장치(142a, 142b)가 마련될 수 있다. 스티어링 휠은 운전자가 안전한 주행을 할 수 있도록 운전자의 주의를 환기시키는 기능을 수행할 수도 있다. 예를 들면, 스티어링 휠은 운전자의 졸음운전 시, 진동하여 촉각적으로 운전자에게 졸음운전에 대해 경고할 수도 있고, 주행환경의 변화에 따른 사고위험 발생 시 마찬가지로 진동을 통해 위험에 대해 경고할 수도 있다.
또한 대시보드에는 차량의 주행 속도, 엔진 회전수 또는 연료 잔량 등을 표시할 수 있는 각종 계기판이 설치될 수 있다. 계기판은 차량 상태, 차량 주행과 관련된 정보, 멀티미디어 장치의 조작과 관련된 정보 등을 표시하는 계기판 디스플레이부를 포함할 수 있다.
운전자는 대시보드에 마련된 전술한 다양한 장치들을 조작하여 차량을 운행할 수 있다. 도 2에 도시된 것처럼, 차량 내부에는 다양한 기능이 수행되도록 운전자가 조작할 수 있는 다양한 조작 장치(130)가 마련된다. 전술한 것처럼, 스티어링 휠, 기어박스, 센터페시아 등에는 버튼 또는 다이얼 조작부 등과 같은 서로 다른 방식의 조작을 요구하는 다양한 종류의 조작 장치(130)가 마련된다. 이러한 다양한 조작 장치(130)를 통한 입력은 실현시키고자 하는 기능에 따라 수행해야 하는 조작방법이 미리 정해져 있기 때문에, 미리 약속된 조작에 익숙하지 않을 경우 운전자나 동승자는 원하는 기능을 수월하게 실현시키기 어렵다. 이에 개시된 실시예에 따른 원격 차량 조작 시스템은 사용자 단말(300)과 원격 단말(500)을 통해 운전자로 하여금 보다 수월하게 차량의 조작 장치(130)를 조작할 수 있도록 한다. 이하 개시된 실시예에 따른 원격 차량 조작 시스템에 대해 구체적으로 설명한다.
도 3은 개시된 실시예에 따른 원격 차량 조작 시스템의 구성을 개념적으로 나타낸 도면이고, 도 4는 개시된 실시예에 따른 원격 차량 조작 시스템의 구성을 구체적으로 나타낸 블록도이다.
도 3 및 도 4에 도시된 것처럼, 개시된 실시예에 따른 원격 차량 조작 시스템은 차량의 조작 장치(130)에 대한 영상을 획득하여 원격 단말(500)로 전송하는 사용자 단말(300)과, 사용자 단말(300)로부터 전송된 영상을 표시하고 표시된 영상에 나타난 조작 장치(130)에 대한 조작명령이 입력되면 그에 대응하는 제어신호를 차량으로 전송하는 원격 단말(500)과, 원격 단말(500)로부터 전송된 제어신호에 따라 조작 장치(130)의 조작을 제어하는 차량을 포함한다.
도 3 및 도 4에 도시된 것처럼, 사용자 단말(300)은 외부의 영상을 획득할 수 있는 카메라(310)와 카메라(310)에서 획득한 영상을 원격 단말(500)로 전송하는 통신부(330)를 포함할 수 있다. 카메라(310)에서 획득한 영상은 사진 같은 정지영상이거나 동영상일 수 있다.
도 3에 도시된 것처럼, 스마트 폰이나 태블릿 컴퓨터와 같은 카메라 기능, 통신 기능과 함께 통화 기능까지 지원하는 휴대용 단말이나, 안경 형태나 손목시계 형태로 카메라 기능과 통신 기능을 지원하는 웨어러블 단말 등이 개시된 실시예에 따른 사용자 단말(300)에 포함될 수 있다.
도 3에 도시한 것은 일 예일 뿐, 카메라 기능과 통신 기능을 포함하는 단말이라면 개시된 실시예의 사용자 단말(300)의 범주에 포함된다.
사용자 단말(300)은 카메라(310)에서 획득한 영상을 원격 단말(500)의 프로세서(530)가 처리할 수 있는 해상도의 영상으로 변환하거나 원격 단말(500)의 프로세서(530)가 처리할 수 있는 포맷으로 변환할 수 있는 영상 처리부를 포함할 수도 있다.
통신부(330)는 카메라(310)에서 획득한 영상 또는 영상 처리부에서 변환된 영상의 데이터를 통신 네트워크를 통해 원격 단말(500)로 전송할 수 있다.
데이터의 전송을 위한 통신 네트워크로는 기존의 상용화된 3g, 4g 통신방식이 사용될 수 있고, 실시간에 가까운 보다 빠른 정보의 송수신을 위해 5g 통신방식이 사용될 수도 있다. 통신부(330)는 통신 네트워크가 채용하고 있는 3g, 4g 및 5g 통신 방식을 지원하는 장치로 구성될 수 있다. 개시된 실시예에 따른 사용자 단말(300)의 통신부(330)와 원격 단말(500)의 통신부(510) 및 원격 단말(500)의 통신부(510)와 차량의 통신부(190)는 실시간에 가까운 데이터의 송수신을 위해 5g 통신방식을 채용한 통신 네트워크를 통해 정보를 주고 받을 수 있다. 이하 도 5 및 도 6a 내지 도 6c를 참조하여 5g 통신방식에 대해 보다 구체적으로 설명한다.
도 5는 일 실시예에 따른 5G 통신방식에 따른 기지국의 대규모 안테나 시스템을 도시한 도면이고, 도 6a 내지 도 6c는 일 실시예에 따른 5G 통신방식에 따른 네트워크 망을 도시한 도면이다.
통신부(330)는 전술한 것처럼 3G(3Generation), 4G(4Generation) 등과 같은 통신방식을 통해 기지국을 거쳐 서버 등의 장치로 무선 신호를 송신하거나 서버 등의 장치로부터 무선신호를 수신할 수 있다. 또한, 통신부(330)는 무선 랜(Wireless LAN), 와이파이(Wi-Fi), 블루투스(Bluetooth), 지그비(Zigbee), WFD(Wi-Fi Direct), UWB(Ultra wideband), 적외선 통신(IrDA; Infrared Data Association), BLE (Bluetooth Low Energy), NFC(Near Field Communication) 등과 같은 통신방식을 통해 소정 거리 이내의 단말로 데이터가 포함된 무선 신호를 송신하거나, 소정 거리 이내의 단말로부터 무선 신호를 수신할 수 있다.
또한, 통신부(330)는 전술한 것처럼,5G(5Generation) 통신방식을 통해 무선 신호를 송수신할 수 있다. 4G 통신방식은 2GHz 이하의 주파수 대역을 사용하지만, 5G 통신방식은 약 28GHz 대의 주파수 대역을 사용하는 것이 가능하다. 다만, 5G 통신방식이 사용하는 주파수 대역이 이에 한정되는 것은 아니다.
5G 통신방식은 대규모 안테나 시스템을 채용할 수 있다. 대규모 안테나 시스템은 안테나를 수십 개 이상 사용하여 초고대역 주파수까지 커버 가능하고, 다중 접속을 통해 많은 양의 데이터를 동시에 송수신 가능한 시스템을 의미한다. 구체적으로, 대규모 안테나 시스템은 안테나 소자의 배열을 조정하여 특정 방향으로 더 멀리 전파를 송수신할 수 있게 해줌으로써, 대용량 전송을 가능하게 할 뿐만 아니라, 5G 통신 네트워크 망이 사용될 수 있는 영역을 확장시킬 수 있다.
도 5를 참조하면, 기지국(20)은 대규모 안테나 시스템을 통해 많은 디바이스들과 데이터를 동시에 송수신할 수 있다. 또한, 대규모 안테나 시스템은 전파를 전송하는 방향 외의 방향으로 유출되는 전파를 최소화하여 노이즈를 감소시킴으로써, 송신 품질 향상과 전력량의 감소를 함께 도모할 수 있다.
또한, 5G 통신방식은 직교주파수 분할(Orthogonal Frequency Division Multiplexing, OFDM) 방식을 통해 송신 신호를 변조하는 기존과 달리, 비직교 다중접속(Non-Orthogonal Multiplexing Access, NOMA) 방식을 통해 변조한 무선 신호를 전송할 수 있다. 이로 인해 더 많은 디바이스의 다중 접속이 가능하며, 대용량 송수신이 동시에 가능하다.
예를 들어, 5G 통신방식은 최고 1Gbps의 전송속도의 제공이 가능하다. 5G 통신방식은 대용량 전송을 통해 UHD(Ultra-HD), 3D, 홀로그램 등과 같이 대용량 전송이 요구되는 몰입형 통신의 지원이 가능하다. 이에 따라, 사용자는 5G 통신방식을 통해 보다 정교하고 몰입이 가능한 초 고용량 데이터를 보다 빠르게 주고 받을 수 있다.
또한, 5G 통신방식은 최대 응답 속도 1ms 이하의 실시간 처리가 가능하다. 이에 따라, 5G 통신방식에서는 사용자가 인지하기 전에 반응하는 실시간 서비스의 지원이 가능하다. 예를 들어, 차량은 주행 중에도 각종 디바이스로부터 센서정보를 전달 받아, 실시간 처리를 통해 자율주행 시스템을 제공할 수 있을 뿐만 아니라, 각종 원격제어를 제공할 수 있다. 또한, 차량은 5G 통신방식을 통해 차량 주변에 존재하는 다른 차량들과의 센서정보를 실시간으로 처리하여 충돌발생 가능성을 실시간으로 사용자에게 제공할 수 있을 뿐만 아니라, 주행경로 상에 발생될 교통상황 정보들을 실시간으로 제공할 수 있다.
또한, 5G 통신이 제공하는 초 실시간 처리 및 대용량 전송을 통해, 차량은 차량 내 탑승객들에게 빅데이터 서비스를 제공할 수 있다. 예를 들어, 차량은 각종 웹 정보, SNS 정보 등을 분석하여, 차량 내 탑승객들의 상황에 적합한 맞춤형 정보를 제공할 수 있다. 일 실시예로, 차량은 빅데이터 마이닝을 통해 주행 경로 주변에 존재하는 각종 맛집, 볼거리 정보들을 수집하여 실시간으로 이를 제공함으로써, 탑승객들이 주행 중인 지역 주변에 존재하는 각종 정보들을 바로 확인할 수 있게 한다.
한편, 5G 통신의 네트워크 망은 셀을 보다 세분화하여, 네트워크의 고밀도화 및 대용량 전송을 지원할 수 있다. 여기서, 셀은 이동 통신에서 주파수를 효율적으로 이용하기 위하여 넓은 지역을 작은 구역으로 세분화한 구역을 의미한다. 이때. 각 셀 내에 소출력 기지국을 설치하여 단말 간의 통신을 지원한다. 예를 들어, 5G 통신의 네트워크 망은 셀의 크기를 줄여 더욱 세분화함으로써, 매크로셀 기지국-분산 소형 기지국-통신 단말의 2단계 구조로 형성될 수 있다.
또한, 5G 통신의 네트워크 망에서는 멀티홉(multihop) 방식을 통한 무선 신호의 릴레이 전송이 수행될 수 있다. 예를 들어, 도 6a에 도시된 바와 같이, 제1 단말(401)은 기지국(400)의 네트워크 망 외부에 위치한 제3 단말(403)이 전송하고자 하는 무선 신호를 기지국(400)으로 릴레이 전송할 수 있다. 또한, 제1 단말(401)은 기지국(400)의 네트워크 망 내부에 위치한 제2 단말(402)이 전송하고자 하는 무선 신호를 기지국(400)으로 릴레이 전송할 수 있다. 전술한 바와 같이, 5G 통신의 네트워크 망을 사용 가능한 디바이스들 중 적어도 하나의 디바이스가 멀티홉 방식을 통한 릴레이 전송을 수행할 수도 있으나, 이에 한정되는 것은 아니다. 이에 따라, 5G 통신 네트워크 망이 지원되는 영역을 확대함과 동시에, 셀 내의 사용자가 많을 경우 생기는 버퍼링 문제를 해결할 수 있다.
한편, 5G 통신방식은 차량, 웨어러블 디바이스 등에 적용되는 디바이스간(Device-to-Device, D2D) 통신을 지원할 수 있다. 디바이스간 통신은 디바이스 간에 이루어지는 통신으로써, 디바이스가 센서를 통해 감지한 데이터뿐만 아니라, 디바이스 내에 저장되어 있는 각종 데이터가 포함된 무선 신호를 송수신하는 통신을 의미한다. 디바이스간 통신방식에 의할 경우, 기지국을 거쳐 무선 신호를 주고 받을 필요가 없고, 디바이스 간에 무선 신호 전송이 이루어지므로, 불필요한 에너지를 절감할 수 있다. 이때, 차량, 웨어러블 디바이스 등이 5G 통신방식을 이용하기 위해서는 해당 디바이스 내에 안테나가 내장되어야 한다. 차량(100)은 디바이스간 통신을 통해 차량 주변에 존재하는 다른 차량들과 무선 신호를 송수신할 수 있다. 예를 들어, 차량(100)은 도 6b에 도시된 바와 같이, 차량 주변에 존재하는 다른 차량들(101, 102, 103) 등과 디바이스간 통신이 가능하다. 이외에도, 차량(100)뿐만 아니라, 교차로 등에 설치되어 있는 교통정보 장치(미도시)와 디바이스간 통신이 가능하다.
또 다른 예로, 차량(100)은 도 6c에 도시된 바와 같이 디바이스간 통신을 통해 제1 차량(101), 및 제3 차량(103)과 무선 신호를 송수신할 수 있으며, 제3 차량(103)은 디바이스간 통신을 통해 차량(100) 및 제2 차량(102)과 데이터를 송수신할 수 있다. 즉, 디바이스간 통신이 가능한 거리 내에 위치한 복수의 차량(100, 101, 102, 103) 간에는 가상 네트워크 망이 형성되어, 무선 신호를 송수신할 수 있다.
한편, 5G 통신망은 디바이스간 통신이 지원되는 영역을 확대함으로써, 보다 먼 곳에 위치한 디바이스와 디바이스간 통신이 가능하다. 또한, 응답 속도 1ms 이하의 실시간 처리와 1Gbps 이상의 고용량 통신을 지원하므로, 주행 중인 차량 간에도 원하는 데이터가 포함된 신호를 주고 받을 수 있다.
예를 들어, 차량은 5G 통신방식을 통해 주행 중에도 차량 주변에 존재하는 다른 차량, 각종 서버, 시스템 등과 실시간으로 접속하여, 데이터를 주고 받을 수 있고, 이를 처리하여 증강 현실을 통해 경로안내 제공서비스 등과 같은 각종 서비스를 제공할 수 있다.
이외에도, 차량은 전술한 주파수 대역 외의 대역을 이용하여, 기지국을 거쳐 또는 디바이스간 통신을 통해 데이터가 포함된 무선 신호를 송수신할 수 있으며, 전술한 주파수 대역을 이용한 통신방식에만 한정되는 것은 아니다.
원격 단말(500)은 사용자 단말(300)로부터 전송되는 영상을 수신하는 통신부(510)와, 통신부(510)에서 수신한 영상을 표시하는 디스플레이부(550)와, 디스플레이부(550)에 표시된 조작 장치(130)에 대한 조작명령이 입력되면 그에 대응되는 제어신호를 생성하여 통신부(510)를 통해 차량으로 전송하는 프로세서(530)와, 조작 장치와 관련된 정보가 저장된 메모리(570)를 포함할 수 있다. 원격 단말(500)은 전술한 사용자 단말(300)처럼, 스마트폰이나 태블릿 pc와 같은 휴대용 통신장치이거나, 랩탑 컴퓨터나 데스크탑 컴퓨터와 같은 컴퓨터일 수 있고, 차량의 원격제어를 위해 마련된 서버일 수도 있다. 통신 기능과 디스플레이 기능을 지원하고, 조작명령에 대응하는 제어신호를 생성할 수 있는 프로세싱 기능을 지원하는 장치는 개시된 실시예에 따른 원격 단말(500)의 범주에 포함될 수 있다.
원격 단말(500)의 통신부(510)는 전술한 사용자 단말(300)의 통신부(330)와 마찬가지로 통신 네트워크가 채용하고 있는 3g, 4g 및 5g 통신 방식을 지원하는 장치로 구성될 수 있다.
디스플레이부(550)는 통신부(510)에서 수신한 영상을 실시간으로 표시한다. 디스플레이부(550)는 원격 단말(500)의 사용자가 입력한 명령에 대응하여 원격 단말(500)의 정보를 표시할 수 있다.
이와 같은 디스플레이부(550)는 자체 발광이 가능한 발광 다이오드(Light Emitting Diode: LED)와 유기 발광 다이오드(Organic Light Emitting Diode: OLED) 또는 별도의 발광원을 구비하는 액정 디스플레이(Liquid Crystal Display) 등을 채용할 수 있다.
또한, 디스플레이부(550)는 사용자로부터 제어 명령을 입력받고, 입력받은 제어 명령에 대응하는 동작 정보를 표시하는 터치 스크린 패널(Touch Screen Panel: TSP)을 채용할 수도 있다. 터치 스크린 패널은 동작 정보 및 사용자가 입력할 수 있는 제어 명령을 표시하는 디스플레이, 사용자의 신체 일부가 접촉한 좌표를 검출하는 터치 패널(touch panel), 터치 패널이 검출한 접촉 좌표를 기초로 사용자가 입력한 제여 명령을 판단하는 터치 스크린 컨트롤러를 포함할 수 있다. 터치 스크린 컨트롤러는 터치 패널을 통하여 검출하는 사용자의 터치 좌표와 디스플레이를 통하여 표시하는 제어 명령의 좌표를 비교하여 사용자가 입력한 제어 명령을 인식할 수 있다.
디스플레이부(550)에 사용자 단말(300)에서 획득한 영상, 즉 차량 내부의 조작 장치(130)에 대한 영상이 표시되면, 사용자는 디스플레이부(550)에 표시된 영상에 나타난 조작 장치(130) 중 제어하고자 하는 조작 장치(130)에 대한 명령을 디스플레이부(550)에 대한 터치를 통해 입력한다.
예를 들어, 디스플레이부(550)에 표시된 영상이 오디오 시스템의 조작 장치(130)에 대한 영상이고, 영상에 나타난 오디오 시스템 조작 장치(130)의 다양한 버튼 중 원격 단말(500)의 사용자가 라디오 기능을 실행시키고자 하는 경우, 라디오 기능 실행 버튼에 대응되는 디스플레이부(550)의 위치를 터치하여 라디오 기능의 원격실행을 위한 명령을 원격 단말(500)을 통해 입력할 수 있다. 이런 방식으로 원격 단말(500)의 디스플레이부(550)에 표시된 영상에 나타난 다양한 종류의 조작 장치(130)에 대한 조작명령이 입력될 수 있다.
이와 같이 원격 단말(500)에서 차량의 조작 장치(130)에 대한 조작명령을 차량으로 전송할 수도 있고, 사용자 단말(300)의 사용자가 차량의 조작 장치(130) 중 조작방법을 모르는 조작 장치(130)에 대한 영상을 원격 단말(500)로 전송하면서 원격 단말(500)의 사용자에게 조작하고자 하는 조작 장치(130)의 조작방법을 문의할 수도 있다. 조작방법의 문의는 통화나 단문메시지 등 상용화된 통신 서비스를 통해 이루어질 수 있다. 원격 단말(500)의 사용자는 사용자 단말(300)의 사용자의 문의사항에 대해 마찬가지로 통화나 단문메시지 서비스를 통해 답해줄 수도 있고, 전술한 것처럼 직접 해당 조작 장치(130)를 조작해줄 수도 있다.
원격 단말(500)의 사용자는 전술한 디스플레이부(550)의 터치를 통한 조작명령을 입력할 수도 있고, 원격 단말(500)의 입력부를 통해 조작명령을 입력할 수도 있을 것이다. 원격 단말(500)의 입력부는 키보드, 마우스, 조이스틱, 트랙볼, 음성인식장치 또는 동작인식장치 등을 포함할 수 있다. 예를 들면, 도 3에 도시된 것처럼 사용자는 디스플레이부(550)에 표시된 영상에 나타난 조작 장치(130) 중 라디오 기능 실행 버튼에 커서를 위치시키고, 마우스를 클릭하여 차량의 라디오 기능을 원격으로 실행시킬 수 있을 것이다. 전술한 터치입력이나 입력부를 통한 입력은 원격 단말(500)의 디스플레이부(550)에 표시된 영상에 대한 조작명령의 입력방식의 일 예에 불과하고 다양한 입력방식이 채용될 수 있음은 물론이다.
디스플레이부(550)에 표시된 영상에 대한 조작명령이 입력되면, 프로세서(530)는 영상에서 터치되거나 클릭된 부분에 대응하는 조작 장치(130)가 어떤 조작 장치(130)인지 식별할 수 있다. 즉, 터치나 클릭을 통해 프로세서(530)로 입력되는 신호는 디스플레이부(550) 상에서 터치되거나 클릭된 위치의 좌표에 대한 정보를 포함할 뿐, 조작 장치(130)에 대한 실질적인 조작명령을 포함하는 것은 아니다. 따라서, 프로세서(530)는 터치나 클릭 등을 통해 입력된 신호로부터 실제 조작명령의 대상이 된 조작 장치(130)에 대한 정보를 산출한다. 즉, 프로세서(530)는 터치위치나 클릭위치가 영상에 나타난 어떤 조작 장치(130)에 대응되는지를 결정한다. 또한, 프로세서(530)는 조작 장치(130)를 식별하는 것과 함께, 터치나 클릭을 통해 입력되는 조작명령이 조작 장치(130)를 어떤 방식으로 조작하고자 하는 것인지 조작명령을 식별할 수 있다. 예를 들어, 푸시를 통한 조작과 회전을 통한 조작과 같이 서로 다른 방식의 조작이 가능한 조작 장치(130)에 대한 터치나 클릭이 입력된 경우, 입력이 단순한 터치나 클릭이라면 프로세서(530)는 푸시를 통한 조작이라고 판단할 수 있고, 입력이 터치와 드래그 또는 클릭과 드래그라면 프로세서(530)는 회전을 통한 조작이라고 판단할 수 있을 것이다. 그리고 터치와 드래그 또는 클릭과 드래그가 입력된 경우. 드래그의 방향에 따라 프로세서(530)는 입력된 조작이 특정 기능(예를 들면, 볼륨이나 공조기에서 나오는 바람의 세기)을 증가시키는 입력인지 감소시키는 입력인지 판단할 수 있다. 프로세서(530)는 터치나 클릭을 통해 프로세서(530)로 입력되는 신호로부터 전술한 것처럼 조작 장치(130)와 조작명령을 식별하기 위해 메모리(570)에 미리 저장된 정보를 이용할 수 있다. 메모리(570)에는 차량의 조작 장치(130)에 대한 정보가 차량의 기종 별로 분류되어 저장될 수 있고, 버튼이나 회전 조작부와 같은 다양한 조작 장치(130)의 조작방법에 대한 정보가 저장될 수 있다.
메모리(570)에 저장되는 조작 장치(130)에 대한 정보는 사용자 단말로부터 전송되는 조작 장치(130)의 이미지로부터 조작 장치(130)를 식별할 수 있도록 차량의 기종 별로 분류된 다양한 조작 장치(130)에 대한 이미지 정보를 포함할 수 있다. 즉, 프로세서(530)는 사용자 단말로부터 전송된 이미지를 메모리(570)에 저장된 다양한 조작 장치(130)에 대한 이미지와 비교하여 사용자 단말로부터 전송된 조작 장치(130)가 어떤 차종의 조작 장치(130)인지 식별할 수 있다. 이미지의 비교 및 매칭에는 특징점 기반 이미지 매칭 알고리즘이 사용될 수 있다.
사용자 단말로부터 전송된 이미지에 나타난 조작 장치(130)가 식별되면, 프로세서(530)는 상기 사용자 단말로부터 전송된 이미지와 매칭된 메모리(570)의 이미지로부터 터치나 클릭을 통해 입력된 신호에 포함되는 좌표정보에 대응하는 조작 장치(130)를 결정한다.
터치나 클릭을 통해 입력된 조작명령에 대응되는 조작 장치(130)가 결정되면, 프로세서(530)는 터치나 클릭을 통해 입력된 조작명령을 메모리(570)에 저장된 상기 결정된 조작 장치(130)의 조작방법과 비교하여 입력된 조작명령을 식별한다.
전술한 것처럼, 프로세서(530)는 디스플레이부(550) 또는 입력부를 통해 입력되는 신호를 분석하여 조작명령의 대상이 되는 조작 장치(130)와 해당 조작 장치(130)에 대한 조작명령을 식별하고, 이에 기초하여 해당 조작 장치(130)에 대한 제어신호를 생성할 수 있다.
프로세서(530)에서 제어신호를 생성하면, 통신부(510)는 생성된 제어신호를 차량으로 전송한다. 원격 단말(500)의 통신부(510)와 차량의 통신부(190) 간의 통신은 전술한 사용자 단말(300)과 원격 단말(500)의 통신과 마찬가지로 3g, 4g 및 5g 통신 네트워크를 통해 이루어질 수 있다. 원격 단말(500)에 대한 조작명령의 입력과 실제 차량에서의 조작 장치(130)의 조작에 의한 특정 기능의 실현이 실시간에 가깝게 이루어질 수 있도록 원격 단말(500)의 통신부(510)와 차량의 통신부(190) 사이의 통신은 5g 통신 네트워크를 통해 이루어지는 것이 바람직하다. 전술한 것처럼, 5G 통신방식은 최대 응답 속도 1ms 이하의 실시간 처리가 가능하므로, 실시간 서비스의 지원이 가능하다.
차량의 통신부(190)에서 원격 단말(500)로부터 전송되는 제어신호를 수신하면, 차량의 제어부(170)는 원격 단말(500)로부터 전송된 제어신호에 따라 제어 대상 장치에 대한 제어를 수행한다.
예를 들어, 제어신호가 오디오 시스템의 라디오를 on시키는 명령을 포함하면, 제어부(170)는 오디오 시스템의 라디오를 동작시킬 수 있다. 또한 제어신호가 에어컨을 동작시키는 명령을 포함하면, 공조장치의 압축기를 구동시켜 에어컨을 동작시킬 수 있다. 즉, 제어부(170)는 제어신호가 수신되면 제어 대상이 되는 장치를 결정하고, 결정된 장치의 구동을 제어하여 원격 단말(500)의 사용자가 입력한 조작명령이 실현되도록 한다.
다른 실시예로, 원격 단말(500)로부터 전송되는 신호가 차량으로 바로 전송되지 않고 사용자 단말(300)을 거쳐 차량으로 전송될 수도 있다. 차량의 통신부(190)가 3g, 4g 또는 5g 통신방식을 지원하지 않고 블루투스 같은 근거리 통신만 지원하는 경우, 원격 단말(500)에서 전송되는 제어신호는 3g, 4g 또는 5g 통신방식을 지원하는 사용자 단말(300)로 우선 전송될 수 있다. 제어신호를 수신한 사용자 단말(300)은 차량의 통신부(190)와 페어링(paring)된 상태에서 근거리 통신방식을 이용하여 차량의 통신부(190)로 제어신호를 전송할 수 있다.
또 다른 실시예로, 차량은 차량의 내부를 촬영할 수 있는 카메라(미도시)와, 운전자의 시선을 추적할 수 있는 시선추적장치(미도시)를 포함할 수 있다. 즉, 차량 내부의 카메라는 시선추적장치와 연동되어, 시선추적장치에서 인식하는 운전자의 시선이 머무는 조작 장치(130)를 촬영하여, 차량의 통신부(190)를 통해 원격 단말(500)로 조작 장치(130)에 대한 영상을 전송할 수도 있다. 이 경우, 차량의 통신부(190)는 전술한 3g, 4g 또는 5g 통신방식을 지원한다. 차량의 통신부는 원격 단말(500)에서 전송되는 제어신호를 수신하고, 전술한 것처럼 차량의 제어부(170)는 수신된 제어신호에 따라 조작대상 장치들의 구동을 제어할 수 있다.
도 7은 개시된 실시예에 따른 원격 차량 제어 방법을 나타낸 순서도이다.
도 7을 참조하면, 사용자 단말(300)은 차량의 조작 장치(130)에 대한 영상을 획득하여(700) 원격 단말(500)로 전송한다(710). 원격 단말(500)에 조작 장치(130)에 대한 조작명령이 입력되면(720), 원격 단말(500)은 조작명령이 입력된 조작 장치(130)를 제어하기 위한 제어신호를 생성하여 차량으로 전송한다(730).
도 3 및 도 4에 도시된 것처럼, 사용자 단말(300)은 외부의 영상을 획득할 수 있는 카메라(310)와 카메라(310)에서 획득한 영상을 원격 단말(500)로 전송하는 통신부(330)를 포함할 수 있다. 카메라(310)에서 획득한 영상은 사진 같은 정지영상이거나 동영상일 수 있다.
통신부(330)는 카메라(310)에서 획득한 영상 또는 영상 처리부에서 변환된 영상의 데이터를 통신 네트워크를 통해 원격 단말(500)로 전송할 수 있다. 데이터의 전송을 위한 통신 네트워크로는 기존의 상용화된 3g, 4g 통신방식이 사용될 수 있고, 실시간에 가까운 보다 빠른 정보의 송수신을 위해 5g 통신방식이 사용될 수도 있다. 통신부(330)는 통신 네트워크가 채용하고 있는 3g, 4g 및 5g 통신 방식을 지원하는 장치로 구성될 수 있다. 개시된 실시예에 따른 사용자 단말(300)의 통신부(330)와 원격 단말(500)의 통신부(510) 실시간에 가까운 데이터의 송수신을 위해 5g 통신방식을 채용한 통신 네트워크를 통해 정보를 주고 받을 수 있다.
원격 단말(500)의 통신부(510)는 전술한 사용자 단말(300)의 통신부(330)와 마찬가지로 통신 네트워크가 채용하고 있는 3g, 4g 및 5g 통신 방식을 지원하는 장치로 구성될 수 있다. 디스플레이부(550)는 통신부(510)에서 수신한 영상을 실시간으로 표시한다. 디스플레이부(550)는 원격 단말(500)의 사용자가 입력한 명령에 대응하여 원격 단말(500)의 정보를 표시할 수 있다.
디스플레이부(550)에 사용자 단말(300)에서 획득한 영상, 즉 차량 내부의 조작 장치(130)에 대한 영상이 표시되면, 사용자는 디스플레이부(550)에 표시된 영상에 나타난 조작 장치(130) 중 제어하고자 하는 조작 장치(130)에 대한 명령을 디스플레이부(550)에 대한 터치를 통해 입력한다. 예를 들어, 디스플레이부(550)에 표시된 영상이 오디오 시스템의 조작 장치(130)에 대한 영상이고, 영상에 나타난 오디오 시스템 조작 장치(130)의 다양한 버튼 중 원격 단말(500)의 사용자가 라디오 기능을 실행시키고자 하는 경우, 라디오 기능 실행 버튼에 대응되는 디스플레이부(550)의 위치를 터치하여 라디오 기능의 원격실행을 위한 명령을 원격 단말(500)을 통해 입력할 수 있다. 이런 방식으로 원격 단말(500)의 디스플레이부(550)에 표시된 영상에 나타난 다양한 종류의 조작 장치(130)에 대한 조작명령이 입력될 수 있다. 원격 단말(500)의 사용자는 전술한 디스플레이부(550)의 터치를 통한 조작명령을 입력할 수도 있고, 원격 단말(500)의 입력부를 통해 조작명령을 입력할 수도 있을 것이다. 원격 단말(500)의 입력부는 키보드, 마우스, 조이스틱, 트랙볼, 음성인식장치 또는 동작인식장치 등을 포함할 수 있다. 예를 들면, 도 3에 도시된 것처럼 사용자는 디스플레이부(550)에 표시된 영상에 나타난 조작 장치(130) 중 라디오 기능 실행 버튼에 커서를 위치시키고, 마우스를 클릭하여 차량의 라디오 기능을 원격으로 실행시킬 수 있을 것이다. 전술한 터치입력이나 입력부를 통한 입력은 원격 단말(500)의 디스플레이부(550)에 표시된 영상에 대한 조작명령의 입력방식의 일 예에 불과하고 다양한 입력방식이 채용될 수 있음은 물론이다.
디스플레이부(550)에 표시된 영상에 대한 제어명령이 입력되면, 프로세서(530)는 영상에서 터치되거나 클릭된 부분에 대응하는 조작 장치(130)가 어떤 조작 장치(130)인지 식별할 수 있다. 즉, 터치나 클릭을 통해 프로세서(530)로 입력되는 신호는 디스플레이부(550) 상에서 터치되거나 클릭된 위치의 좌표에 대한 정보를 포함할 뿐, 조작 장치(130)에 대한 실질적인 제어명령은 포함되지 않을 수 있다. 따라서, 프로세서(530)는 터치나 클릭 등을 통해 입력된 신호로부터 실제 조작명령의 대상이 된 조작 장치(130)에 대한 정보를 산출한다. 즉, 프로세서(530)는 터치위치나 클릭위치가 영상에 나타난 어떤 조작 장치(130)에 대응되는지를 결정한다. 또한, 프로세서(530)는 조작 장치(130)를 식별하는 것과 함께, 터치나 클릭을 통해 입력되는 조작명령이 조작 장치(130)를 어떤 방식으로 조작하고자 하는 것인지 조작명령을 식별할 수 있다. 예를 들어, 푸시를 통한 조작과 회전을 통한 조작과 같이 서로 다른 방식의 조작이 가능한 조작 장치(130)에 대한 터치나 클릭이 입력된 경우, 입력이 단순한 터치나 클릭이라면 프로세서(530)는 푸시를 통한 조작이라고 판단할 수 있고, 입력이 터치와 드래그 또는 클릭과 드래그라면 프로세서(530)는 회전을 통한 조작이라고 판단할 수 있을 것이다. 그리고 터치와 드래그 또는 클릭과 드래그가 입력된 경우. 드래그의 방향에 따라 프로세서(530)는 입력된 조작이 특정 기능(예를 들면, 볼륨이나 공조기에서 나오는 바람의 세기)을 증가시키는 입력인지 감소시키는 입력인지 판단할 수 있다. 전술한 것처럼, 프로세서(530)는 디스플레이부(550) 또는 입력부를 통해 입력되는 신호를 분석하여 제어명령의 대상이 되는 조작 장치(130)와 해당 조작 장치(130)에 대한 조작명령을 식별하고, 이에 기초하여 해당 조작 장치(130)에 대한 제어신호를 생성할 수 있다.
프로세서(530)에서 제어신호를 생성하면, 통신부(510)는 생성된 제어신호를 차량으로 전송한다. 원격 단말(500)의 통신부(510)와 차량의 통신부(190) 간의 통신은 전술한 사용자 단말(300)과 원격 단말(500)의 통신과 마찬가지로 3g, 4g 및 5g 통신 네트워크를 통해 이루어질 수 있다. 원격 단말(500)에 대한 조작명령의 입력과 실제 차량에서의 조작 장치(130)의 조작에 의한 특정 기능의 실현이 실시간에 가깝게 이루어질 수 있도록 원격 단말(500)의 통신부(510)와 차량의 통신부(190) 사이의 통신은 5g 통신 네트워크를 통해 이루어지는 것이 바람직하다. 전술한 것처럼, 5G 통신방식은 최대 응답 속도 1ms 이하의 실시간 처리가 가능하므로, 실시간 서비스의 지원이 가능하다.
원격 단말(500)에서 제어신호가 전송되면, 차량은 상기 제어신호에 따라 조작 장치(130)의 기능을 제어할 수 있다(740).
차량의 통신부(190)에서 원격 단말(500)로부터 전송되는 제어신호를 수신하면, 차량의 제어부(170)는 원격 단말(500)로부터 전송된 제어신호에 따라 제어 대상 장치에 대한 제어를 수행한다. 예를 들어, 제어신호가 오디오 시스템의 라디오를 on시키는 명령을 포함하면, 제어부(170)는 오디오 시스템의 라디오를 동작시킬 수 있다. 또한 제어신호가 에어컨을 동작시키는 명령을 포함하면, 공조장치의 압축기를 구동시켜 에어컨을 동작시킬 수 있다. 즉, 제어부(170)는 제어신호가 수신되면 제어 대상이 되는 장치를 결정하고, 결정된 장치의 구동을 제어하여 원격 단말(500)의 사용자가 입력한 조작명령이 실현되도록 한다.
100: 차량
300: 사용자 단말
500: 원격 단말

Claims (30)

  1. 차량의 조작 장치에 대한 영상을 원격 단말로 전송하도록 마련되는 사용자 단말;
    상기 사용자 단말로부터 상기 차량 조작 장치에 대한 영상이 전송되면, 전송된 영상을 표시하고, 상기 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 입력된 조작명령에 대응하는 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하는 원격 단말; 및
    상기 제어신호에 따라 상기 조작 장치의 기능을 제어하는 차량;을 포함하고,
    상기 차량은,
    사용자의 시선을 추적하도록 마련된 시선추적장치;
    상기 시선추적장치에서 인식된 사용자의 시선방향에 대응하는 차량의 조작 장치에 대한 영상을 촬영하도록 마련된 카메라; 및
    상기 카메라에서 촬영된 조작장치에 대한 영상을 원격단말로 전송하도록 마련된 통신부;를 포함하고,
    상기 원격 단말은 상기 통신부로부터 상기 조작 장치에 대한 영상이 전송되면, 전송된 영상을 표시하고, 상기 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 입력된 조작명령에 대응하는 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하는 원격 차량 조작 시스템.
  2. 제1항에 있어서,
    상기 원격 단말은 상기 사용자 단말로부터 전송된 영상을 표시하고, 상기 조작 장치에 대한 조작명령을 미리 정해진 터치 제스처로 입력 받는 디스플레이부;를 포함하는 원격 차량 조작 시스템.
  3. 제1항에 있어서,
    상기 원격 단말은 상기 조작 장치에 대한 조작명령을 입력받도록 마련되는 입력부;를 포함하는 원격 차량 조작 시스템.
  4. 제3항에 있어서,
    상기 입력부는 상기 조작 명령을 음성으로 입력 받는 음성인식장치 또는 상기 조작명령을 동작으로 입력 받는 동작인식장치를 포함하는 원격 차량 조작 시스템.
  5. 제1항에 있어서,
    상기 원격 단말은 상기 조작 장치에 대한 조작명령이 입력되면, 상기 입력된 조작명령에 대응하는 조작 장치와 상기 입력된 조작명령을 식별하고, 상기 식별된 조작 장치와 관련된 기능을 수행하는 차량의 장치를 상기 식별된 조작명령에 따라 원격으로 제어하기 위한 제어신호를 생성하는 원격 차량 조작 시스템
  6. 제1항에 있어서,
    상기 원격 단말은 상기 사용자 단말로부터 전송되는 영상을 수신하고, 상기 제어신호를 상기 사용자 단말로 전송하는 통신부를 더 포함하는 원격 차량 조작 시스템.
  7. 제6항에 있어서,
    상기 통신부는 3g, 4g 또는 5g 통신방식을 이용하여 상기 사용자 단말 및 상기 차량과의 통신을 수행하는 원격 차량 조작 시스템.
  8. 제1항에 있어서,
    상기 사용자 단말은 영상을 획득할 수 있는 카메라; 및
    상기 획득한 영상을 상기 원격 단말로 전송할 수 있는 통신부;를 포함하는 원격 차량 조작 시스템.
  9. 제1항에 있어서,
    상기 차량은 상기 원격 단말과 통신을 수행할 수 있는 통신부; 및
    상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어하는 제어부;를 포함하는 원격 차량 조작 시스템.
  10. 삭제
  11. 삭제
  12. 사용자 단말에서 차량의 조작 대상에 대한 영상을 원격 단말로 전송하고;
    상기 사용자 단말로부터 전송된 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 원격 단말에서 상기 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하고;
    상기 차량에서 상기 제어신호에 따라 상기 조작 장치의 기능을 제어하는 것;을 포함하고,
    상기 차량의 시선추적장치에서 사용자의 시선을 추적하고;
    상기 시선추적장치에서 인식된 사용자의 시선방향에 대응하는 차량의 조작 장치에 대한 영상을 상기 차량의 카메라에서 촬영하고;
    상기 차량의 통신부에서 상기 카메라에서 촬영된 조작장치에 대한 영상을 상기 원격단말로 전송하고;
    상기 원격단말에서 상기 통신부로부터 전송된 영상을 표시하고;
    상기 통신부로부터 전송되어 상기 원격단말에 표시된 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 원격 단말에서, 상기 입력된 조작명령에 대응하는 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하는 것;을 더 포함하는 원격 차량 조작 방법.
  13. 제12항에 있어서,
    상기 원격 단말에서 상기 사용자 단말로부터 전송된 영상을 표시하고;
    상기 원격 단말에서 상기 영상에 나타난 조작 대상 중에서 조작 장치에 대한 조작명령을 입력 받는 것;을 더 포함하는 원격 차량 조작 방법.
  14. 제13항에 있어서,
    상기 조작명령을 입력 받는 것은,
    상기 조작 장치에 대한 조작명령을 상기 원격 단말의 디스플레이부에 대한 미리 정해진 터치 제스처로 입력 받는 것;을 포함하는 원격 차량 조작 방법.
  15. 제13항에 있어서,
    상기 조작명령을 입력 받는 것은,
    상기 조작 장치에 대한 조작명령을 상기 원격 단말의 입력부를 통해 입력 받는 것;을 포함하는 원격 차량 조작 방법.
  16. 제13항에 있어서,
    상기 조작명령을 입력 받는 것은,
    상기 조작 장치에 대한 조작명령을 음성 또는 동작으로 입력 받는 것;을 포함하는 원격 차량 조작 방법.
  17. 제13항에 있어서,
    상기 사용자 단말로부터 전송된 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 원격 단말에서 상기 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하는 것은,
    상기 조작 장치에 대한 조작명령이 입력되면, 상기 원격 단말에서 상기 입력된 조작명령에 대응하는 조작 장치와 상기 입력된 조작명령을 식별하고;
    상기 식별된 조작 장치와 관련된 기능을 수행하는 차량의 장치를 상기 식별된 조작명령에 따라 원격으로 제어하기 위한 제어신호를 생성하는 것;을 포함하는 원격 차량 조작 방법.
  18. 제17항에 있어서,
    조작 장치와 상기 입력된 조작명령을 식별하는 것은,
    상기 사용자 단말로부터 전송된 영상을 미리 저장된 조작 장치에 대한 정보와 비교하여 조작 장치를 식별하고;
    미리 저장된 상기 식별된 조작 장치의 조작방법에 대한 정보를 이용하여 상기 입력된 조작명령을 식별하는 것;을 포함하는 원격 차량 조작 방법.
  19. 제13항에 있어서,
    상기 제어신호를 상기 차량으로 전송하는 것은,
    상기 원격 단말은 3g, 4g 또는 5g 통신방식을 이용하여 상기 제어신호를 상기 차량으로 전송하는 것;을 포함하는 원격 차량 조작 방법.
  20. 제12항에 있어서,
    상기 조작 장치의 기능을 제어하는 것은,
    상기 차량에서 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어하는 것;을 포함하는 원격 차량 조작 방법.
  21. 삭제
  22. 원격 단말로부터 전송된 조작 장치의 제어신호를 수신하는 통신부; 및
    상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치의 기능을 제어하는 제어부;를 포함하고,
    사용자의 시선을 추적하도록 마련된 시선추적장치; 및
    상기 시선추적장치에서 인식된 사용자의 시선방향에 대응하는 차량의 조작 장치에 대한 영상을 촬영하도록 마련된 카메라;를 더 포함하고,
    상기 통신부는 상기 카메라에서 촬영된 조작장치에 대한 영상을 상기 원격단말로 전송하는 차량.
  23. 제22항에 있어서,
    상기 제어부는 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어하는 차량.
  24. 삭제
  25. 삭제
  26. 차량의 통신부에서 원격 단말로부터 전송된 조작 장치의 제어신호를 수신하고;
    상기 차량의 제어부에서 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치의 기능을 제어하는 것;을 포함하고,
    상기 차량의 시선추적장치에서 사용자의 시선을 추적하고;
    상기 시선추적장치에서 인식한 사용자의 시선방향에 대응하는 차량의 조작 장치에 대한 영상을 상기 차량의 카메라에서 촬영하고;
    상기 차량의 통신부에서, 상기 카메라에서 촬영된 조작장치에 대한 영상을 상기 원격단말로 전송하는 것;을 더 포함하는 차량의 제어방법.
  27. 제26항에 있어서,
    상기 조작 장치의 기능을 제어하는 것은,
    상기 제어부에서 상기 원격 단말로부터 전송된 제어신호에 따라 상기 조작 장치와 관련된 기능을 수행하는 장치의 동작을 제어하는 것;을 포함하는 차량의 제어방법.
  28. 삭제
  29. 사용자의 시선을 추적하도록 마련된 시선추적장치, 상기 시선추적장치에서 인식된 사용자의 시선방향에 대응하는 차량의 조작 장치에 대한 영상을 촬영하도록 마련된 카메라, 상기 카메라에서 촬영된 조작장치에 대한 영상을 원격단말로 전송하도록 마련된 통신부 및 상기 조작장치의 기능을 제어하는 제어부를 포함하는 차량; 및
    상기 통신부로부터 전송된 영상을 표시하고, 상기 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 입력된 조작명령에 대응하는 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하는 원격 단말;을 포함하고,
    상기 제어부는 상기 제어신호에 따라 상기 조작 장치의 기능을 제어하는 원격 차량 조작 시스템.
  30. 차량의 시선추적장치에서 사용자의 시선을 추적하고;
    상기 시선추적장치에서 인식된 사용자의 시선방향에 대응하는 차량의 조작 장치에 대한 영상을 상기 차량의 카메라에서 촬영하고;
    상기 차량의 통신부에서 상기 카메라에서 촬영된 조작장치에 대한 영상을 원격단말로 전송하고;
    상기 원격 단말에서 상기 영상에 나타난 조작 장치에 대한 조작명령이 입력되면, 상기 조작 장치의 조작을 제어하기 위한 제어신호를 상기 차량으로 전송하고;
    상기 차량에서 상기 제어신호에 따라 상기 조작 장치의 기능을 제어하는 것;을 포함하는 원격 차량 조작 방법.
KR1020150038434A 2015-03-19 2015-03-19 차량 및 이를 포함하는 원격 차량 조작 시스템 KR101682880B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020150038434A KR101682880B1 (ko) 2015-03-19 2015-03-19 차량 및 이를 포함하는 원격 차량 조작 시스템
US14/944,812 US9669783B2 (en) 2015-03-19 2015-11-18 Vehicle and vehicle remote control system including the same
CN201510850281.4A CN105984425A (zh) 2015-03-19 2015-11-27 车辆以及包括车辆的车辆远程控制系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150038434A KR101682880B1 (ko) 2015-03-19 2015-03-19 차량 및 이를 포함하는 원격 차량 조작 시스템

Publications (2)

Publication Number Publication Date
KR20160112539A KR20160112539A (ko) 2016-09-28
KR101682880B1 true KR101682880B1 (ko) 2016-12-20

Family

ID=56923611

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150038434A KR101682880B1 (ko) 2015-03-19 2015-03-19 차량 및 이를 포함하는 원격 차량 조작 시스템

Country Status (3)

Country Link
US (1) US9669783B2 (ko)
KR (1) KR101682880B1 (ko)
CN (1) CN105984425A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210109467A (ko) * 2020-02-27 2021-09-06 폭스바겐 악티엔게젤샤프트 자동 차량 및 그 조작 방법

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112016007429T5 (de) * 2016-11-11 2019-08-01 Honda Motor Co., Ltd. Entferntes Betriebssystem, Transportsystem und entferntes Betriebsverfahren
US10591912B2 (en) * 2016-11-30 2020-03-17 Nissan North America, Inc. Autonomous vehicle remote support mapping interface
EP3334198B1 (en) 2016-12-12 2021-01-27 AO Kaspersky Lab Secure control of automotive systems using mobile devices
RU2652665C1 (ru) * 2016-12-12 2018-04-28 Акционерное общество "Лаборатория Касперского" Система и способ управления транспортным средством
JP6774445B2 (ja) * 2018-02-05 2020-10-21 本田技研工業株式会社 移動体制御システム、移動体及び移動体制御方法
CN108466599A (zh) * 2018-02-28 2018-08-31 上海擎感智能科技有限公司 一种车辆监控方法及系统
US10300888B1 (en) * 2018-03-06 2019-05-28 GM Global Technology Operations LLC Performing remote vehicle commands using live camera supervision
CN109857129A (zh) * 2019-01-21 2019-06-07 维沃移动通信有限公司 一种控制电子设备的方法、装置、移动终端及存储介质
CN109803184A (zh) * 2019-01-22 2019-05-24 深圳壹账通智能科技有限公司 车辆控制方法、装置、电子设备及存储介质
JP7269069B2 (ja) * 2019-03-29 2023-05-08 本田技研工業株式会社 車両制御システム
EP3731048B1 (en) * 2019-04-26 2022-09-21 Siemens Aktiengesellschaft A method for cooperatively carrying a work piece
US11809181B2 (en) * 2021-02-11 2023-11-07 Ford Global Technologies, Llc Systems and methods for remote control of vehicles

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101219933B1 (ko) * 2010-09-13 2013-01-08 현대자동차주식회사 증강현실을 이용한 차량 내 디바이스 제어 시스템 및 그 방법

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4428146B2 (ja) 2004-06-02 2010-03-10 トヨタ自動車株式会社 遠隔制御装置及び遠隔制御システム
KR20090089501A (ko) 2008-02-19 2009-08-24 정상복 이동 통신 단말기를 이용한 자동차 원격 제어 시스템
US9092772B2 (en) * 2009-02-16 2015-07-28 Xius Corp. Integrated system and method for enabling mobile commerce transactions using “contactless identity modules in mobile handsets”
CN201622839U (zh) * 2009-12-16 2010-11-03 比亚迪股份有限公司 一种无线语音汽车远程控制系统
JP5905031B2 (ja) * 2011-01-28 2016-04-20 インタッチ テクノロジーズ インコーポレイテッド モバイルテレプレゼンスロボットとのインタフェーシング
JP5353989B2 (ja) * 2011-02-28 2013-11-27 株式会社リコー 伝送管理装置、伝送端末、伝送システム、伝送管理方法、伝送端末制御方法、伝送管理プログラム及び伝送端末制御プログラム
KR20120127830A (ko) * 2011-05-16 2012-11-26 삼성전자주식회사 차량용 단말을 위한 사용자 인터페이스 방법 및 장치
US10250687B2 (en) * 2012-01-25 2019-04-02 Toyota Jidosha Kabushiki Kaisha Vehicle remote operation information provision device, vehicle-mounted remote operation information acquisition device, and vehicle remote operation system comprising these devices
CN202511417U (zh) * 2012-02-15 2012-10-31 苏州新同创汽车空调有限公司 一种用于客车空调远程控制的系统
US20140309893A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Health statistics and communications of associated vehicle users
KR20140033294A (ko) * 2012-09-08 2014-03-18 인포뱅크 주식회사 자동차 및 그의 단말기 인터페이스 제어 방법
JP6056331B2 (ja) 2012-09-27 2017-01-11 三菱自動車工業株式会社 車載機器類の遠隔操作システム
US9183372B2 (en) * 2012-11-07 2015-11-10 Lg Electronics Inc. Mobile terminal and control method thereof
CN103118176A (zh) * 2013-01-16 2013-05-22 广东好帮手电子科技股份有限公司 一种通过车载主机实现手机语音控制功能的方法及系统
US9325782B2 (en) * 2013-04-10 2016-04-26 Lg Electronics Inc. Information providing apparatus and method thereof
EP2801919A1 (en) * 2013-05-10 2014-11-12 LG Electronics, Inc. Mobile terminal and controlling method thereof
DE102014109079A1 (de) * 2013-06-28 2014-12-31 Harman International Industries, Inc. Vorrichtung und verfahren zur erfassung des interesses eines fahrers an einer werbeanzeige durch die verfolgung der blickrichtung des fahrers
KR102254886B1 (ko) * 2014-06-30 2021-05-24 엘지전자 주식회사 이동 단말기 및 이를 이용한 외부 디바이스의 제어 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101219933B1 (ko) * 2010-09-13 2013-01-08 현대자동차주식회사 증강현실을 이용한 차량 내 디바이스 제어 시스템 및 그 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210109467A (ko) * 2020-02-27 2021-09-06 폭스바겐 악티엔게젤샤프트 자동 차량 및 그 조작 방법
KR102574666B1 (ko) 2020-02-27 2023-09-04 폭스바겐 악티엔게젤샤프트 자동 차량 및 그 조작 방법

Also Published As

Publication number Publication date
CN105984425A (zh) 2016-10-05
KR20160112539A (ko) 2016-09-28
US20160272135A1 (en) 2016-09-22
US9669783B2 (en) 2017-06-06

Similar Documents

Publication Publication Date Title
KR101682880B1 (ko) 차량 및 이를 포함하는 원격 차량 조작 시스템
CN106027749B (zh) 车辆、移动终端及其控制方法
US10489100B2 (en) Electronic device and method for sharing images
US10019070B2 (en) Vehicle-wearable device interface and methods for using the same
KR101728326B1 (ko) 차량, 서버 및 이를 포함하는 차량 모니터링 시스템
KR101711835B1 (ko) 차량, 차량의 동작 방법 및 웨어러블 디바이스의 동작 방법
JP6555599B2 (ja) 表示システム、表示方法、およびプログラム
US10235879B2 (en) Notification system of a car and method of controlling therefor
US10099616B2 (en) Vehicle and method for controlling the vehicle
US20160275360A1 (en) Vehicle and method for controlling the same
KR20170025179A (ko) 보행자 추돌 방지 시스템 및 그 동작방법
KR101878811B1 (ko) 실시간 지도 생성을 위한 v2x 통신 시스템 및 그 동작방법
KR20160107054A (ko) 차량 제어 장치, 차량 운전 보조 장치, 이동 단말기 및 그 제어 방법
KR101716145B1 (ko) 이동단말기, 차량과 이동 단말기의 연동 시스템
KR20160114486A (ko) 이동단말기 및 이동 단말기의 제어방법
KR101841501B1 (ko) 카 쉐어링을 위한 이동 단말기 및 카 쉐어링 시스템의 동작 방법
KR101828400B1 (ko) 휴대용 v2x 단말기 및 그 동작방법
US20190296833A1 (en) Terminal apparatus and apparatus system
KR101698102B1 (ko) 차량 제어 장치 및 이의 제어 방법
KR101859043B1 (ko) 이동단말기, 차량과 이동 단말기의 연동 시스템
KR20170009558A (ko) 차량간 블랙박스 영상을 공유하는 내비게이션 단말 장치
KR101916425B1 (ko) 차량용 사용자 인터페이스 장치, 차량과 이동 단말기의 연동 시스템
KR101892498B1 (ko) 차량용 사용자 인터페이스 장치, 차량과 이동 단말기의 연동 시스템
KR20100082230A (ko) 네비게이션 단말기 및 네비게이션 단말기의 운행안내방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)