KR101994438B1

KR101994438B1 - 이동 단말기 및 이의 제어 방법

Info

Publication number: KR101994438B1
Application number: KR1020130083064A
Authority: KR
Inventors: 조경민
Original assignee: 엘지전자 주식회사
Priority date: 2013-07-15
Filing date: 2013-07-15
Publication date: 2019-06-28
Also published as: KR20150009121A

Abstract

이동 단말기 및 이의 제어방법이 개시된다. 본 발명의 실시예들에 의하면, 상기 이동 단말기는 차량내 제 1 및 제 2 영상표시장치와 접속하는 무선 통신부와, 상기 접속된 제 1 영상표시장치와 상기 본체의 디스플레이부를 기준으로 소정 범위내에 있는 운전자의 시선이 향하는 방향을 감지하는 사용자 추적부와, 영상 공유 모드 진입시, 상기 제 1 영상표시장치의 디스플레이에 표시되는 제 1 영상과 상기 디스플레이부에 표시되는 제 2 영상 중 상기 감지된 운전자의 시선이 향하는 방향에 대응되는 영상을 상기 접속된 제 2 영상표시장치로 전송하도록 상기 무선 통신부를 제어하는 제어부를 포함한다. 그에 따라, 운전자가 보고 있는 영상을 차량내 다른 동승자가 실시간으로 공유할 수 있고, 또한 동승자가 검색한 운행 경로와 관련된 정보를 운전자가 아이 트래킹(eye-tracking)을 통해 실시간으로 확인할 수 있어서 운전에 방해가 되지 않으면서 운전자에게 편의를 제공한다.

Description

이동 단말기 및 이의 제어 방법{MOBILE TERMINAL AND CONTROL METHOD THEREOF}

본 발명은 이동 단말기 및 이의 제어 방법에 관한 것으로, 특히, 차량내의 영상표시장치와 접속가능한 이동 단말기 및 이의 제어방법에 관한 것이다.

단말기(terminal)는 이동 가능 여부에 따라 이동 단말기(mobile/portable terminal) 및 고정 단말기(stationary terminal)로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mount terminal)로 나뉠 수 있다.

이와 같은 단말기는 기능이 다양화됨에 따라, 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(Multimedia player) 형태로 구현되고 있다. 나아가 단말기의 기능 지지 및 증대를 위해, 단말기의 구조적인 부분 및 소프트웨어적인 부분을 개량하는 것이 고려될 수 있다.

한편, 이와 같은 단말기는 차량내 영상표시장치와 접속하여 적어도 하나의 컨텐츠를 표시하는 것이 가능하다. 여기서, 차량내 영상표시장치는 차량에 고정식 또는 착탈식으로 장착되어, 운전자의 편의를 위해 카메라를 통해 차량의 외부를 촬영하는 기능과, 차량을 목적지로 안내하는 기능과, 기타 사용자가 시청할 수 있는 영상 및 소리를 출력하는 기능을 포함하는 모든 장치를 포함할 수 있다.

이와 같은 차량내 영상표시장치는 일반적으로 운전석 앞쪽에 위치한 대쉬보드(dash board)에 부착되는데, 예를 들어 헤드 유닛(H/U, Head Unit)으로 지칭될 수 있다. 이와 같이, 차량내 영상표시장치가 전자화되고 이동 단말기의 기능이 다양화되면서, 상기 헤드 유닛과 이동 단말기 간에 연동되는 서비스가 더욱 개발되고 있다. 예를 들어, 상기 이동 단말기에내의 네비게이션 애플리케이션 또는 서비스 화면이 차량내 헤드 유닛의 디스플레이에 동일하게 표시되거나, 또는 이동 단말기의 조작이 헤드 유닛에서 이루어질 수 있다.

그러나, 안전 운전을 위해, 차량의 주행중에는 헤드 유닛과 이동 단말기를 통해 상술한 바와 같은 애플리케이션과 서비스 화면을 제어하기 위한 조작이 제한된다. 또한, 운전자와 동승자가 차량 운행시 운행 경로와 관련하여 대화를 시도하는 경우 운전자의 주위가 분산되어 안전 운전에 방해가 된다.

따라서, 운전자가 차량 운행 중에 별도의 조작행위 없이 동승자로부터 운행 경로와 관련된 정보를 제공받거나 위험요소를 미리 안내받을 수 있다면, 운전자의 주위 분산 행동이 최소화되어 안전 운행에 더욱 유리하고 운전자에게 편의를 제공할 수 있을 것이다.

이에, 본 발명의 일 목적은 운전에 방해를 주지 않으면서 운전자의 시선이 향하는 디스플레이에 표시되는 영상을 차량내 다른 영상표시장치에 표시해줌으로써, 운전자가 보는 영상을 동승자가 공유할 수 있도록 구현한 이동 단말기 및 이의 제어방법을 제공하는데 그 목적이 있다.

또한, 본 발명의 다른 목적은 차량의 동승자가 차량내 영상표시장치를 통해 운행 경로와 관련된 정보를 검색하여 운전자에게 공유 요청한 경우, 운전자는 별도의 조작 없이 아이 트래킹(eye-tracking)을 통해 공유 요청한 영상을 확인을 할 수 있도록 구현한 이동 단말기 및 이의 제어방법을 제공하는데 그 목적이 있다.

이를 위해, 본 발명의 실시예에 따른 이동 단말기는, 단말기 본체와; 차량내 제 1 및 제 2 영상표시장치와 접속하는 무선 통신부와; 상기 접속된 제 1 영상표시장치와 상기 본체의 디스플레이부를 기준으로 소정 범위내에 있는 운전자의 시선이 향하는 방향을 감지하는 사용자 추적부와; 영상 공유 모드 진입시, 상기 제 1 영상표시장치에 표시되는 제 1 영상과 상기 디스플레이부에 표시되는 제 2 영상 중 상기 감지된 운전자의 시선이 향하는 방향에 대응되는 영상을 상기 접속된 제 2 영상표시장치에 전송하도록 상기 무선 통신부를 제어하는 제어부를 포함하여 이루어진다.

일 실시예에서, 상기 제어부는, 기기 접속 모드 진입시, 상기 본체와 접속가능한 차량내 영상표시장치를 나타내는 식별 이미지를 상기 디스플레이부에 표시하고, 사용자 입력에 의하여 선택된 식별 이미지에 대응되는 영상표시장치가 상기 본체와 접속되도록 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 차량내 영상표시장치의 상대적 위치를 고려하여 상기 식별 이미지를 표시하고, 상기 선택된 식별 이미지에 대한 체크 표시가 나타나도록 상기 디스플레이부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 감지된 운전자의 시선이 고정된 위치의 화면정보를 상기 선택된 식별 이미지에 대응되는 영상표시장치로 실시간 전송하고, 상기 선택된 식별 이미지에 대응되는 영상표시장치에 기설정된 시간 동안 사용자의 시선이 감지되지 않으면, 상기 화면정보가 더 이상 전송되지 않도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 사용자 추적부는, 제 1 카메라를 통해 상기 제 1 영상표시장치의 디스플레이를 기준으로 촬영된 운전자의 이미지와 제 2 카메라를 통해 상기 본체의 디스플레이부를 기준으로 촬영된 운전자의 이미지를 분석하여 운전자의 시선이 고정된 위치를 감지하고,

상기 제어부는, 기설정된 음성명령이 입력되면 상기 영상 공유 모드로 진입하여, 상기 운전자의 시선이 고정된 위치에 표시되는 영상을 상기 제 2 영상표시장치로 전송하도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 감지된 운전자의 시선이 상기 제 2 영상에 고정된 경우, 상기 제어부는, 상기 제 2 영상표시장치에 상기 제 2 영상의 표시 여부를 묻는 메시지를 전송한다. 전송된 메시지에 대한 응답 신호가 수신되면, 상기 제 2 영상을 상기 제 2 영상표시장치에 실시간으로 전송하도록 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제 1 영상표시장치는 차량 헤드 유닛이고, 상기 제 1 영상은 차량의 전방시야 대응되는 외부 영상이거나 상기 차량의 운행 경로를 안내하는 영상이고, 상기 제 2 영상은 사용자 조작에 대응되는 컨텐츠와 관련된 영상인 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 2 영상표시장치로부터 상기 전송된 영상에 소정의 입력이 포함된 업데이트 영상을 수신하고, 수신된 업데이트 영상을, 영상 공유를 수락한 상기 제 1 영상표시장치에 전송하도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 영상 공유 모드 진입시, 상기 제 2 영상표시장치로부터 전송되는 컨텐츠 영상을 수신하고, 상기 제 1 영상표시장치로부터 영상 공유 수락이 수신되면, 상기 제 1 영상표시장치의 디스플레이에 상기 컨텐츠 영상에 대응되는 이미지 객체가 표시되도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 1 영상표시장치로부터 영상 공유 수락시, 상기 디스플레이에서 운전자의 시선이 고정된 위치에 상기 컨텐츠 영상에 대응되는 이미지 객체가 표시되도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 컨텐츠 영상에 대응되는 이미지 객체는 상기 컨텐츠 영상의 대표 이미지 및 상기 제 2 영상표시장치의 사용자 이미지 중 적어도 하나를 포함하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 1 영상표시장치의 디스플레이에 상기 컨텐츠 영상에 대응되는 이미지 객체가 표시된 상태에서 기설정된 시간 동안 운전자의 시선이 상기 이미지 객체에 고정되면, 상기 이미지 객체를 상기 컨텐츠 영상으로 변경하여 표시하도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 1 영상표시장치의 디스플레이에, 상기 제 3 영상에 대응되는 제 1 이미지 객체와 제 3 영상표시장치로부터 수신된 제 4 영상에 대응되는 제 2 이미지 객체가 표시된 상태에서, 상기 감지된 운전자의 시선이 상기 제 1 이미지 객체에 기설정된 시간 동안 고정되면, 상기 제 3 영상을 상기 디스플레이에 확대하여 표시하고 상기 제 4 영상을 상기 디스플레이로부터 사라지도록 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 1 영상표시장치의 디스플레이에 상기 제 3 영상에 대응되는 제 1 이미지 객체와 제 3 영상표시장치로부터 수신된 제 4 영상에 대응되는 제 2 이미지 객체가 표시된 상태에서, 상기 제 1 및 제 2 이미지 객체 중 적어도 하나에 제 1 입력이 감지되면 해당 이미지 객체에 대응되는 영상을 확대시켜서 표시하도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 1 영상표시장치의 디스플레이에 상기 제 3 영상과 상기 제 3 영상표시장치로부터 수신된 제 4 영상이 표시된 상태에서, 상기 제 3 및 제 4 영상 중 적어도 하나에 제 2 입력이 감지되면 해당 영상이 상기 디스플레이에서 사라지도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 1 영상표시장치의 디스플레이에 상기 제 3 영상에 대응되는 이미지 객체가 표시된 상태에서 잠금 기능이 활성화되면,상기 제 3 영상이 상기 디스플레이에 지속적으로 표시되도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 제 1 영상표시장치의 디스플레이에, 상기 제 3 영상에 대응되는 이미지 객체가 표시된 상태에서 상기 제 2 영상표시장치로부터 새로운 영상의 공유 요청이 수신되면, 상기 새로운 영상의 공유 요청에 대응되는 알림 메시지를 상기 디스플레이의 일 영역에 출력하도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

일 실시예에서, 상기 제어부는, 상기 새로운 영상의 공유 요청에 대해 상기 제 1 영상표시장치로부터 수락 신호가 수신되면, 상기 새로운 영상을 기존 영상위에 오버레이시켜서 출력하고, 상기 새로운 영상의 공유 요청에 대해 상기 제 1 영상표시장치로부터 거절 신호가 수신되면, 상기 제 2 영상표시장치의 디스플레이에 공유 요청이 거절되었음을 알리는 메시지를 출력하도록 상기 무선 통신부를 제어하는 것을 특징으로 한다.

또한, 본 발명의 실시예에 따른 이동 단말기의 제어방법은, 차량내 제 1 및 제 2 영상표시장치와 접속하는 단계와; 상기 접속된 제 1 영상표시장치와 상기 본체의 디스플레이부를 기준으로 소정 범위내에 있는 운전자의 시선이 향하는 방향을 감지하는 단계와; 영상 공유 모드에의 진입 여부를 판단하는 단계와; 영상 공유 모드 진입시, 상기 접속된 제 1 영상표시장치에 표시되는 제 1 영상과 상기 디스플레이부에 표시되는 제 2 영상 중 상기 감지된 운전자의 시선이 향하는 방향에 대응되는 영상을 상기 접속된 제 2 영상표시장치로 전송하는 단계를 포함하여 이루어진다.

일 실시예에서, 상기 제 2 영상표시장치로부터 상기 전송된 영상에 소정의 입력이 포함된 업데이트 영상을 수신하는 단계와; 상기 업데이트 영상을, 영상 공유를 수락한 상기 제 1 영상표시장치에 전송하는 단계를 더 포함하는 것을 특징으로 한다.

이상에서 설명한 바와 같이, 본 발명의 실시예에 따른 이동 단말기 및 이동 단말기의 제어방법에 의하면, 운전자가 보고 있는 영상을 차량내 다른 동승자가 실시간으로 공유할 수 있고, 또한 동승자가 검색한 운행 경로와 관련된 정보를 운전자가 아이 트래킹(eye-tracking)을 통해 확인할 수 있도록 구현함으로써, 차량 운행 중에도 운전자의 주위 분산 행동이 최소화되어 안전 운행이 가능하고 별다른 조작없이 화면 제어가 가능하여 운전자에게 편의를 제공한다. 또한, 운전자와 동승자가 영상 공유를 통하여 인터랙션(interaction)을 수행함으로써, 운전자가 맞춤형 교통 정보를 제공받을 수 있다.

도 1은 본 발명의 일 실시 예에 따른 이동 단말기 및 상기 이동 단말기와 접속하는 차량내 영상표시장치의 예시를 보인 도면이다.
도 2a 및 도 2b는 본 발명의 일 실시 예에 따라, 상호 접속된 이동 단말기 및 차량내 영상표시장치가 인터랙션하는 모습을 개념적으로 보여주는 도면이다.
도 3은 본 발명의 일 실시 예에 따른 이동 단말기의 구성을 보인 도면이다.
도 4는 본 발명의 일 실시 예에 따른 이동 단말기와 접속하는 차량내 영상표시장치의 예시 구성을 보인 도면이다.
도 5는 본 발명의 일 실시 예에 따른 이동 단말기의 제어방법을 설명하기 위한 흐름도이다.
도 6a 및 도 6b는 도 5의 흐름도를 설명하기 위한 개념도들이다.
도 7은 본 발명의 일 실시 예에 따른 이동 단말기의 제어방법을 설명하기 위한 흐름도이다.
도 8a 내지 8e는 도 7의 흐름도를 설명하기 위한 개념도들이다.
도 9는 본 발명의 일 실시 예에 따라, 동승자가 제공하는 영상을 공유하기 위한 이동 단말기의 제어방법을 설명하기 위한 흐름도이다.
도 10a 내지 10c는 도 9의 흐름도를 설명하기 위한 개념도들이다.
도 11a 및 도 11b는 본 발명의 일 실시 예에 따라, 복수의 영상표시장치로부터 영상의 공유 요청이 있는 경우 차량내 영상표시장치에 표시하는 방법을 설명하기 위한 개념도들이다.
도 12a 내지 12c는 본 발명의 일 실시 예에 따라, 동일 영상표시장치로부터 새로운 영상의 공유 요청이 있는 경우 차량내 영상표시장치에 표시하는 방법을 설명하기 위한 개념도들이다.

본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.

또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.

또한, 본 명세서에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.

또한, 본 명세서에서 사용되는 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.

도 1은 본 발명의 일 실시 예에 따른 이동 단말기 및 상기 이동 단말기와 접속하는 차량내 영상표시장치의 예시를 보인 도면이다.

본 명세서에서 설명되는 이동 단말기(100)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 슬레이트 PC(slate PC), 태블릿 PC(tablet PC), 울트라북(ultrabook) 등이 포함될 수 있다.

또한, 본 명세서에서 설명되는 차량내 영상표시장치(200a)는 도 1 에 도시된 것처럼 접속된 이동 단말기(100)로부터 전송된 영상을 차량의 운행에 따른 다양한 운전시야각을 반사경(예, 사이드 미러(201b, 201c), 리어 뷰 미러(rear view mirror)(201d))에 표시하거나, 내비게이션의 디스플레이(201e)에 표시하거나, 차량의 계기판(dashboard)에 표시하거나, HUD(Head-Up Display) 또는 프로젝터를 이용하여 차량의 앞유리(예, 201a)에 표시할 수 있다. 또한, 상기 차량내 영상표시장치(200a)는 상기 반사경(예, 사이드 미러(201b, 201c), 리어 뷰 미러(rear view mirror)(201d)), 디스플레이(201e), 계기판(dashboard), 그리고/또는 차량의 앞유리(예, 201a)에 표시되는 영상을 상기 접속된 이동 단말기(100)로 전송해줄 수 있다.

이와 같이, 상기 차량내 영상표시장치(200a)의 표시부는 영상표시장치(200) 본체와 이격된 위치에 마련될 수 있고, 운전시야각에 따라 이하에 설명되는 바와 같이 복수 개로 이루어질 수 있다.

또한, 도 1에 도시된 바와 같이, 본 명세서 설명되는 차량내 영상표시장치는, 상술한 차량내 영상표시장치(200a) 외에도 차량의 후석에 탈착가능하게 배치되는 제 2 영상표시장치(200b)와 차량내 다른 동승자가 소지한 단말인 제 3 영상표시장치(200c)가 모두 포함되는 개념이다.

또한, 이와 같이 차량내 영상표시장치(200a), 이동 단말기(100), 및 차량내 다른 영상표시장치들(200b, 200c)는 상기 이동 단말기(100)를 통해 접속되어, 차량의 외부 상황(예, 사각지대의 물체 출현 등), 차량의 내부 상태 정보(예, 브레이크 동작신호), 및 운행 경로와 관련된 정보나(예, 길 안내 지도) 엔터테인먼트 효과를 위한 컨텐츠 정보(예, 사진 정보 등)를 서로 주고 받음으로써, 마치 하나의 차량 시스템처럼 동작할 수 있다.

이와 같은 차량내 영상표시장치들(200a, 200b, 200c)은 이동 단말기(100)를 통해 후석에 배치된 벤더(vendor)가 상이한 디스플레이와 통신할 수 있다. 또한, 상기 차량내 영상표시장치들(200a, 200b, 200c)은 하나의 이동 단말기와 접속할 수도 있고, 복수의 이동 단말기와 접속할 수도 있다.

한편, 이와 같은 차량내 영상표시장치들(200a, 200b, 200c)은 LAN(Local Area Network), WAN(Wide Area Network)과 같은 유무선 통신 네트워크를 통해 교통 정보 및 각종 데이터(예를 들면, 프로그램, 실행 파일 등)를 제공하는 정보 제공 센터 등과 연결될 수도 있다. 또한, 여기서 차량은 일반적인 승용차, 버스, 기차, 선박, 항공기 등 사람이나 물건의 이동을 목적으로 기계, 전자 장치를 이용하여 구현된 가능한 모든 운반체를 포함하는 개념이다.

이하에서는, 설명하기 위한 목적으로, 이동 단말기(100) 및 이와 접속하는 차량내 영상표시장치(200)를 복수의 디스플레이를 포함하는 차량 헤드 유닛(HUD, Head-Up Display)(200a)을 예시로 하여 기술하기로 한다.

계속해서 도 1을 참조하면, 이동 단말기(100)는 차량내 영상표시장치(200)와 유선 또는 무선으로 연결되어, 차량내 영상표시장치(200)에 표시되는 화면을 수신하여 영상 처리한 후에 다른 영상표시장치나 다른 디스플레이로 전송하는 것이 가능하다. 또한, 상기 이동 단말기(100)는 인터페이스를 통해 이동 단말기(100)에서 실행되는 애플리케이션의 실행 결과(예, 화면 이미지 또는 음성)나 차량의 목적지 또는 주행경로에 관한 정보를 영상표시장치(200)로 송신해줄 수 있다.

여기서, 상기 이동 단말기(100)는 차량내에 위치할 수도 있고, 무선 연결이 가능한 범위에서 차량의 외부에 위치할 수도 있다.

또한 차량내 영상표시장치(200)는, 적어도 하나의 이동 단말기(100)와 유선 또는 무선으로 연결되어, 이동 단말기(100)로부터 전송되는 화면 및 음성이나 차량의 목적지 또는 주행경로에 관한 정보를 수신하여 출력하거나 또는 차량내 영상표시장치(200)에 전송해줄 수 있다. 이와 같이, 이동 단말기(100)가 차량에 위치한 영상표시장치(200)와 접속되어 상호 연동된 상태를 이하에서는 '커넥티드 카(Connected car)'로 명명할 수 있다.

이와 같이, '커넥티드 카' 상태가 되면, 상기 이동 단말기(100)는 소정의 인터페이스를 통해서 이동 단말기(100)에 표시되는 화면 또는 음성이나 다른 영상표시장치(200b, 200c)에 표시되는 화면을 영상표시장치(200)로 송신해줄 수 있다. 이때, 화면 전송을 위한 인터페이스의 수단으로는, 예를 들어, WiFi(Wireless Fidelity) 송수신기, 블루투스(bluetooth) 송수신기와 같은 무선 통신을 지원하는 수단이거나, 또는 USB(Universal Serial Bus) 단자 등과 같이 유선 통신을 지원하는 수단일 수 있다.

또한, 상기 영상표시장치(200)는 차량내 구비된 카메라, 예를 들어 전방 카메라(277) 또는 블랙박스내 전방 카메라(미도시)를 통해 차량의 전방시야에 보여지는 외부 영상을 획득하여서, 이를 접속된 이동 단말기(100)로 전송해줄 수 있다. 그러면, 상기 이동 단말기(100)는 촬영된 영상을 분석하여, 운전자의 얼굴 방향 및/또는 운전자의 눈동자가 향하는 방향을 파악할 수 있다. 이에 의하여, 차량 운행중에 운전자의 시선변화를 감지할 수 있다.

이와 같이, 감지된 운전자의 시선변화에 따라 상기 이동 단말기(100)는 대응되는 적어도 하나의 기능을 실행할 수 있다. 예를 들어, 운전자의 시선이 차량의 전방시야를 주시하고 있다가 내비게이션 장치로 시선이 향하게 되면, 상기 이동 단말기(100)는 이하에 보다 상세하게 기술되는 바와 같이, 운전자의 시선이 옮겨진 내비게이션 장치에 표시되는 영상을 실시간으로 수신하여 차량내 다른 영상표시장치에 표시되도록 제어할 수 있다.

도 2a 및 도 2b는 본 발명의 일 실시 예에 따라, 상호 접속된 이동 단말기 및 차량내 영상표시장치가 인터랙션하는 모습을 개념적으로 보여주는 도면이다.

도 2a에 도시된 바와 같이, 본 발명의 일 실시 예에 따라, 차량내 상호 접속된 이동 단말기(100) 및 영상표시장치(200)를 포함한다.

이동 단말기(100)는 차량내 영상표시장치(200)와 무선으로 연결되어 이미지 및 음성 중 적어도 하나를 영상표시장치(200)에 송신할 수 있다.

영상표시장치(200)는 차량에 고정된 방식으로 장착되고, 이동 단말기(100)와 무선으로 연결되어 이동 단말기(100)로부터 화면 이미지 및 음성 중 적어도 하나를 수신할 수 있다. 또한, 영상표시장치(200)는 이동 단말기(100)로부터 수신한 화면 이미지 및 음성 중 적어도 하나를 출력할 수 있다.

영상표시장치(200)는 사용자로부터 입력을 수신할 수 있고, 수신한 입력을 이동 단말기(100)에 송신할 수 있다. 예를 들어, 사용자가 영상표시장치(200)에 구비된 터치 스크린을 통해 터치 입력을 인가하면, 화면 이미지에서 터치 입력이 인가된 지점의 위치를 인식하고, 인식된 위치에 관한 정보를 이동 단말기(100)에 송신할 수 있다. 이동 단말기(100)는 터치 입력이 인가된 지점에서 터치 이벤트가 발생한 것으로 판단하고, 발생한 터치 이벤트에 대응하는 동작을 수행할 수 있다. 즉, 사용자는 영상표시장치(200)에 구비된 터치 스크린, 하드 키 등을 이용하여, 이동 단말기(100)의 동작을 제어할 수 있다.

영상 전송 시스템이 적용되는 일 사용 예는, 사용자가 이동 단말기(100)에 설치된 길 안내 애플리케이션(또는 다이얼링, 폰북, 이메일, 동영상 재생 애플리케이션 등)을 실행하고, 이동 단말기(100)가 길 안내 애플리케이션의 실행 영상을 영상표시장치(200)에 송신하여 영상표시장치(200)에서 길 안내 애플리케이션의 실행 영상이 표시되게 하는 것이다.

사용자는 이동 단말기(100)의 작은 화면을 대신하여 영상표시장치(200)의 큰 화면에서 길 안내 애플리케이션의 실행 영상을 볼 수 있다. 또한, 사용자는 이동 단말기(100)의 스피커를 대신하여 차량에 구비된 스피커를 통해 길 안내 음성을 들을 수 있다. 또한, 사용자가 영상표시장치(200)에 구비된 터치 스크린 또는 하드 키를 이용하여 길 안내와 관련된 메뉴를 선택하면, 이동 단말기(100)에서 해당 메뉴에 대한 동작을 수행할 수 있다. 그리고, 이동 단말기(100)는 해당 메뉴에 대한 동작의 수행 결과를 영상표시장치(200)에 송신하여 출력할 수 있다.

이동 단말기(100)와 영상표시장치(200)는 블루투스(Bluetooth) 등의 근거리 통신 규격, 와이 파이(Wi-Fi) 등의 무선 인터넷 규격, USB(Universal Serial Bus) 등의 외부 장치 인터페이스 규격 등을 이용하여 연결될 수 있다.

또한, 이동 단말기(100)에는 클라이언트의 요청에 의해 서비스를 제공하는 서버 애플리케이션이 설치될 수 있고, 영상표시장치(200)에는 서버에서 제공하는 서비스에 접속할 수 있는 클라이언트 애플리케이션이 설치될 수 있다.

이동 단말기(100)의 서버 애플리케이션은 이동 단말기의 애플리케이션 타입에 관계없이 이동 단말기(100)의 화면을 캡처하고, 캡처된 화면을 영상표시장치(200)의 클라이언트 애플리케이션에 전송한다. 또한, 서버 애플리케이션은 클라이언트 애플리케이션으로부터 영상표시장치(200)에서 발생한 이벤트에 관한 정보에 기초하여, 이동 단말기(100)의 동작을 제어한다.

예를 들어, 영상표시장치(200)는 그래픽 유저 인터페이스(graphical user interfaces)에 대한 원격 접근을 제공하는 RFB(Remote Frame Buffer) 프로토콜을 이용하는 VNC(Virtual Network Computing) 방식으로 이동 단말기(100)를 원격으로 제어할 수 있다. VNC는 네트워크를 통해 이동 단말기(100)가 화면 업데이트를 영상표시장치(200)에 전달하면서, 영상표시장치(200)에서 발생한 입력 이벤트를 이동 단말기(100)에 전송되게 한다.

또한, 이동 단말기(100)는 예를 들어, 블루투스 연결을 통해 제 1 장치에서 제 2 장치로 스트리밍 될 수 있는 오디오(스테레오 또는 모노)의 음질을 정의하는 A2DP(Advanced Audio Distribution Profile), 특히 블루투스 헤드셋에 관한 HSP(HeadSet Profile), 특히 차량용 핸즈프리 킷에 적용되는 HFP(Hands-Free) 등에 따라 영상표시장치(200), 헤드셋 또는 헨즈프리 등에 음성을 송신할 수 있다.

한편, 이동 단말기(100) 및 영상표시장치(200)는 별도의 프로토콜에 기초하여 부가 정보를 상호 교환할 수 있다. 예를 들어, 영상표시장치(200)는 차량 주행 정보, 속도 정보, 연료 정보 등과 같은 차량 상태 정보를 이동 단말기(100)에 제공할 수 있다.

이동 단말기(100)에 설치된 몇몇 애플리케이션들은 별도의 프로토콜을 이용하여 영상표시장치(200)로부터 수신한 차량 상태 정보를 이용할 수 있다. 또한, 이와 같은 애플리케이션들은 영상표시장치(200)에 애플리케이션의 타입(예를 들어, 길 안내, 멀티미디어, 게임 등), GUI(Graphic User Interface)의 타입(예를 들어, 지도, 비디오, 메뉴 등), 애플리케이션의 상태(예를 들어, 포그라운드(foreground)에서 실행 중인지 백그라운드(background)에서 실행 중인지 등) 등 애플리케이션에 관한 정보를 제공할 수 있다.

계속해서 도 2b를 참조하면, 본 발명의 실시 예에 따른 이동 단말기(100)와 접속하는 상기 영상표시장치(200)는 예를 들어, 차량의 전석에 위치한 차량 헤드 유닛(HUD, Head-Up Display)(200a)일 수 있다. 차량 헤드 유닛(200a)은 본체에 구비된 디스플레이에 영상이 표시되거나 또는 프로젝터(projector)를 통해 투사되는 영상이 차량의 계기판이나 앞유리 등에 표시된다. 또한, 상기 영상표시장치(200)는 예를 들어, 차량의 후석에 위치한 디스플레이(200b)거나, 차량의 다른 동승자가 소지한 노트북 등의 단말(200c)일 수 있다. 또한, 상기 영상표시장치(200)는 하나의 외부 전자기기와 접속할 수도 있고, 복수의 외부 전자기기와 접속할 수도 있다.

한편, 영상표시장치(200)는 LAN(Local Area Network), WAN(Wide Area Network)과 같은 유무선 통신 네트워크를 통해 교통 정보 및 각종 데이터(예를 들면, 프로그램, 실행 파일, 교통 정보 등)를 제공하는 정보 제공 센터 등과 연결될 수도 있다.

도 3은 본 발명의 일 실시 예에 따른 이동 단말기(100)의 세부구성을 보인 도면이다.

도 3에 도시한 바와 같이, 이동 단말기(100)는 무선 통신부(110), 사용자 추적부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 다만, 도 3에 도시된 이동 단말기(100)의 구성요소 모두가 필수 구성요소인 것은 아니며, 도 3에 도시된 구성요소보다 많은 구성요소에 의해 이동 단말기(100)가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 이동 단말기(100)가 구현될 수도 있다.

상기 무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템간의 무선 통신 또는 이동 단말기(100)와 그 이동 단말기(100)가 위치한 네트워크간의 무선 통신을 수행하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들면, 무선 통신부(110)는 방송 수신 모듈(111), 이동 통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치 정보 모듈(115) 등을 포함할 수 있다.

상기 방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 미리 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 이동 단말기(100)에 송신하는 서버를 의미할 수 있다. 상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.

한편, 상기 방송 관련 정보는, 이동 통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 상기 이동 통신 모듈(112)에 의해 수신될 수 있다. 상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들면, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.

상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다. 방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.

상기 이동 통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 및/또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.

상기 무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 의미하는 것으로, 상기 무선 인터넷 모듈(113)은 이동 단말기(100)에 내장되거나 외장 될 수 있다. 여기서, 무선 인터넷 기술로는 WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband; Wibro), 와이맥스(World Interoperability for Microwave Access; Wimax), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.

상기 근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 의미한다. 근거리 통신 기술로서 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee, Wireless LAN (Bluetooth, 802.11n 등등 프로토콜)등이 이용될 수 있다.

상기 위치 정보 모듈(115)은 이동 단말기의 위치(이동 단말기가 차량에 장착되었을 때는 차량의 위치 확인 가능)를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기서, 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다. 예를 들면, GPS 모듈은, 3개 이상의 위성으로부터 정확한 시간과 거리를 측정하여 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 정확히 계산할 수 있다. 3개의 위성으로부터 거리와 시간 정보를 얻고 1개 위성으로 오차를 수정하는 방법이 사용될 수 있다. 특히, GPS 모듈은 위성으로부터 수신한 위치 정보로부터, 위도, 경도, 고도의 위치뿐만 아니라 3차원의 속도 정보와 함께 정확한 시간까지 얻을 수 있다. 상기 위치 정보 모듈(115)로서 와이 파이 위치추적 시스템(Wi-Fi Positioning System) 및/또는 하이브리드 위치추적 시스템(Hybrid Positioning System)이 적용될 수도 있다.

사용자 추적부(120)는 오디오 신호 및 비디오 신호를 입력받고, 입력받은 신호를 이용하여 사용자를 추적하기 위한 것으로, 여기에는 카메라(121), 마이크(122), 적외선 센서(미도시), 및 영상 분석 모듈(123) 등이 포함될 수 있다.

카메라(121)는 화상 통화 모드 또는 일반 촬영 모드에서 이미지 센서에 의해 얻어진 정지영상, 동영상 등의 화상 프레임을 처리한다. 카메라(121)에 의해 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다. 그리고, 이러한 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 사용 환경에 따라 2개 이상이 구비될 수 있다.

마이크(122)는 통화 모드, 녹음 모드, 음성 선택 모드 등에서 외부로부터 입력되는 음향 신호를 전기적인 음성 데이터로 처리한다. 통화 모드에서 마이크(122)에 의해 처리된 음성 데이터는 이동통신 모듈(112)을 통해 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호가 입력되는 과정에서 발생하는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.

영상 분석 모듈(123)은 인터페이스를 통해 전송된 영상을 분석하여 사용자의 시선이 향하는 방향을 결정한다. 구체적으로, 외부 기기로부터 전송된 영상에서 사용자의 얼굴이 향하는 방향을 인식하거나 그리고/또는 사용자의 양안의 위치를 인식하여 눈동자가 향하는 방향의 변화를 감지할 수 있다. 이와 같은 분석 결과는 제어부(180)에 전달되고, 그에 따라 사용자의 시선이 향하는 방향에 대응되는 기능을 실행하기 위한 제어명령을 생성할 수 있다. 한편, 외부 기기로부터 전송된 영상의 분석은 제어부(180)에 의하여 이루어질 수도 있다.

상기 사용자 입력부(130)는 운전자가 이동 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 상기 디스플레이부(151)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.

상기 센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 운전자 접촉 유무, 이동 단말기(100)의 방위, 이동 단말기(100)의 가속/감속 등과 같이 이동 단말기(100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들면, 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 상기 센싱부(140)는 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당할 수 있다.

상기 센싱부(140)는 근접센서(141), 압력센서(143) 및 모션 센서(145) 등을 포함할 수 있다.

상기 근접센서(141)는 이동 단말기(100)로 접근하는 물체나, 이동 단말기(100)의 근방에 존재하는 물체의 유무 등을 기계적 접촉이 없이 검출할 수 있도록 한다. 상기 근접센서(141)는, 교류자계의 변화나 정자계의 변화를 이용하거나, 혹은 정전용량의 변화율 등을 이용하여 근접물체를 검출할 수 있다. 상기 근접센서(141)는 구성 태양에 따라 2개 이상이 구비될 수 있다.

상기 압력센서(143)는 이동 단말기(100)에 압력이 가해지는지 여부와, 그 압력의 크기 등을 검출할 수 있다. 상기 압력센서(143)는 사용환경에 따라 이동 단말기(100)에서 압력의 검출이 필요한 부위에 설치될 수 있다. 만일, 압력센서(143)가 디스플레이부(151)에 설치되는 경우, 상기 압력센서(143)에서 출력되는 신호에 따라, 상기 디스플레이부(151)를 통한 터치 입력과, 터치 입력보다 더 큰 압력이 가해지는 압력터치 입력을 식별할 수 있다. 또한, 상기 압력센서(143)에서 출력되는 신호에 따라, 압력터치 입력시 상기 디스플레이부(151)에 가해지는 압력의 크기도 알 수 있다.

상기 모션 센서(145)는 가속도 센서, 자이로 센서 등을 이용하여 이동 단말기(100)의 위치나 움직임 등을 감지한다. 상기 모션 센서(145)에 사용될 수 있는 가속도 센서는 어느 한 방향의 가속도 변화에 대해서 이를 전기 신호로 바꾸어 주는 소자로서, MEMS(micro-electromechanical systems) 기술의 발달과 더불어 널리 사용되고 있다.

여기에서, 가속도 센서에는, 자동차의 에어백 시스템에 내장되어 충돌을 감지하는데 사용하는 큰 값의 가속도를 측정하는 것부터, 사람 손의 미세한 동작을 인식하여 게임 등의 입력 수단으로 사용하는 미세한 값의 가속도를 측정하는 것까지 다양한 종류가 있다. 가속도 센서는 보통 2축이나 3축을 하나의 패키지에 실장하여 구성되며, 사용 환경에 따라서는 Z축 한 축만 필요한 경우도 있다. 따라서, 어떤 이유로 Z축 방향 대신 X축 또는 Y축 방향의 가속도 센서를 써야 할 경우에는 별도의 조각 기판을 사용하여 가속도 센서를 주 기판에 세워서 실장할 수도 있다. 또한, 자이로 센서는 각속도를 측정하는 센서로서, 기준 방향에 대해 돌아간 방향을 감지할 수 있다.

상기 출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로서, 상기 출력부(150)에는 디스플레이부(151)과 음향 출력 모듈(152), 알람부(153), 햅틱모듈(154) 등이 포함될 수 있다.

상기 디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시하여 출력한다. 예를 들면, 이동 단말기(100)가 통화 모드인 경우 통화와 관련된 UI(User Interface; UI) 또는 GUI(Graphical User Interface; GUI)를 표시한다. 그리고 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.

상기 디스플레이부(151)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고 이동 단말기(100)의 구현 형태에 따라 디스플레이부(151)가 2개 이상 존재할 수도 있다. 예를 들면, 이동 단말기(100)에 외부 디스플레이부(도시하지 않음)와 내부 디스플레이부(도시하지 않음)가 동시에 구비될 수 있다.

상기 디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 상기 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.

또한, 상기 터치 센서는, 상기 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 상기 터치 센서는, 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 상기 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(도시하지 않음)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)에 전송한다. 이로써, 상기 제어부(180)는, 상기 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.

상기 터치 스크린에 의해 감싸지는 이동 단말기(100)의 내부 영역 또는 상기 터치 스크린의 근처에 상기 근접 센서(141)가 배치될 수 있다. 상기 근접 센서(141)는, 소정의 검출 면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 상기 근접 센서(141)는, 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.

상기 근접 센서(141)의 예로는, 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치 스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.

이하에서는 설명의 편의를 위해, 상기 터치 스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(Proximity Touch)"라고 칭하고, 상기 터치 스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(Contact Touch)"라고 칭한다. 상기 터치 스크린 상에서 포인터로 근접 터치가 되는 위치는, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치 스크린에 대해 수직으로 대응되는 위치를 의미한다.

또한, 상기 근접 센서(141)는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 상기 터치 스크린 상에 출력될 수 있다.

상기 음향 출력 모듈(152)은 호 신호 수신, 통화 모드 또는 녹음 모드, 음성 인식 모드, 방송 수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들면, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.

상기 알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 상기 알람부(153)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신될 때, 이를 알리기 위해 알람부(153)는 진동 수단을 통해 이동 단말기를 진동시킬 수 있다. 또는, 상기 알람부(153)는, 키 신호가 입력된 경우, 그 키 신호 입력에 대한 피드백으로 진동 수단을 통해 이동 단말기(100)를 진동시킬 수 있다. 상기와 같은 진동을 통해 운전자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는 디스플레이부(151)이나 음성 출력 모듈(152)을 통해서도 출력될 수 있다.

햅틱 모듈(haptic module)(154)은 운전자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.

상기 햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.

상기 햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 운전자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 영상표시장치의 구성 태양에 따라 2개 이상이 구비될 수 있다. 햅틱 모듈(154)은 차량에서 운전자와의 접촉이 빈번한 곳에 구비될 수 있다. 예를 들어, 조향 휠, 변속 기어 레버, 좌석 시트 등에 구비될 수 있다.

상기 메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 지도 데이터, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다.

상기 메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 이동 단말기(100)는 인터넷(internet)상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.

상기 인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset Port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(Memory Card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; UIM), 가입자 인증 모듈(Subscriber Identify Module; SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; USIM) 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치'라 한다)는, 스마트 카드(Smart Card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.

상기 인터페이스부(170)는 이동 단말기(100)가 외부 크래들(Cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 운전자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기(100)로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기(100)가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.

상기 제어부(180)는 통상적으로 이동 단말기(100)의 전반적인 동작을 제어한다. 예를 들면, 상기 제어부(180)는 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 상기 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 상기 멀티미디어 모듈(181)은 상기 제어부(180) 내에 구현될 수도 있고, 상기 제어부(180)와 별도로 구현될 수도 있다.

상기 제어부(180)는 터치 스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.

상기 전원 공급부(190)는 상기 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 수신하여 각 구성요소들의 동작에 필요한 전원을 공급한다.

상기 이동 단말기(100)에 적용된 구성 요소의 기능은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수도 있다. 하드웨어적인 구현에 의하면, ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다. 소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수도 있다.

상기 음성 인식 모듈(182)은 사용자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다.

상기 이동 단말기(100)에 적용된 네비게이션 세션(session, 또는 검색부)(300)은 지도 데이터 상에 주행 경로를 표시한다.

한편, 본 발명의 실시 예에 따른 이동 단말기(100)는, 예를 들어 멀티미디어모듈(181)을 이용하여 차량의 목적지 또는 경유지를 검색할 수 있고, 무선 통신부(110)를 통해 이하에 설명되는 차량내 영상표시장치(200)와 통신하여 상기 검색된 목적지 또는 경유지를 전송해줄 수 있다. 이때, 이동 단말기(100)에 표시된 지도정보와 차량내 영상표시장치(200)에 표시된 지도정보가 상이한 경우에는 POI검색을 통해 목적지 또는 경유지를 매핑하여 표시할 수 있다.

또한, 상기 이동 단말기(100)는 상기 무선 통신부(110)를 통해 이하에 설명되는 차량내 영상표시장치(200)로부터 제공되는 차량과 관련된 정보를 수신할 수 있다. 예컨대, 차량내 영상표시장치(200)는 차량의 주행경로, 차량의 속도 및 기어 상태 등 차량에 대한 정보를 수신하거나, 차량의 비상등을 온(On)/오프(Off) 상태, 전조등(headlight)의 온/오프 상태, 차량 내 좌석에 설치된 감지 센서를 통해 동승자가 착석했는지 여부, 경적의 온/오프를 상태 등의 정보를 수신할 수 있다.

또한, 상기 이동 단말기(100)는 검색된 목적지 또는 경유지와 함께 이의 운행경로를 상기 차량내 영상표시장치(200)에 전송해줄 수 있다. 그러면, 상기 차량내 영상표시장치는 상기 운행경로를 차량의 계기판(dashboard)에 표시하거나, 차량 헤드 유닛(HUD, Head-Up Display)에 표시하거나 또는 프로젝터를 이용하여 차량의 앞유리에 표시할 수 있다. 여기서, 차량 헤드 유닛(HUD, Head-Up Display)은 차량의 대쉬보드(Dashboard)에 장착될 수 있으며, 상기 차량 헤드 유닛 및 상기 프로젝터는 일반적으로 알려진 방식이 사용될 수 있으므로 이에 대한 구체적인 설명은 생략한다.

도 4는 본 발명의 일 실시 예에 따른 이동 단말기(100)와 접속하는 차량내 영상표시장치(200)의 예시 구성을 보인 도면이다.

본 발명의 실시예에 따른 차량내 영상표시장치(200)는 복수 개의 디스플레이를 포함하여 이루어질 수 있다. 이러한 복수 개의 디스플레이는 상기 차량내 영상표시장치(200), 예를 들어 차량 헤드 유닛(HUD) 본체와 이격되어서 배치될 수 있다. 예를 들어, 차량내 영상표시장치의 본체는 차량 헤드 유닛(HUD)이고, 이에 포함되는 복수 개의 디스플레이에는, 차량의 앞유리, 차량의 계기판, 차량의 사이드 미러 및 리어 뷰 미러 등이 있을 수 있다. 또한, 이와 같은 복수 개의 디스플레이에 소정 영상을 표시하기 위해, 상기 차량 헤드 유닛(HUD)은 프로젝터를 구비할 수 있다. 즉, 상술한 차량 헤드 유닛(HUD)은 구비된 프로젝터를 사용하여 메모리에 기저장된 영상이나 접속된 이동 단말기(100)로부터 수신된 영상을 상기한 복수 개의 디스플레이들 중 적어도 하나에 표시되도록 할 수 있다.

도 4에 도시한 바와 같이, 상기 영상표시장치(200)는 영상표시장치(200)를 전체적으로 제어하는 제어부(예를 들면, 중앙 처리 장치, CPU)(212)와, 각종 정보를 저장하는 메모리(213)와, 각종 키 신호를 제어하는 키 제어부(211)와, LCD(liquid crystal display)를 제어하는 LCD 제어부(214)를 내장한 메인 보드(210)로 구성된다.

상기 메모리(213)는 길 안내 정보를 디지털 지도상에 표시하기 위한 지도 데이터(지도 데이터)를 저장한다. 또한, 상기 메모리(213)는 차량이 현재 주행하는 도로 상황에 따른 교통 정보를 입력할 수 있도록 하는 교통 정보 수집 제어 알고리즘 및 상기 알고리즘의 제어를 위한 정보를 저장한다.

상기 메인 보드(210)는 영상표시장치(200)와 외부 이동 단말기(100)와의 무선 통신 또는 영상표시장치(200)와 그 영상표시장치(200)가 위치한 네트워크 간의 무선 통신을 수행하게 하는 무선 통신 모듈(206)과, 차량의 위치 안내, 출발지부터 목적지까지의 주행 경로 추적 등을 위한 GPS 신호를 수신하거나 운전자에 의해서 수집된 교통정보를 GPS(Global Positioning System) 신호로 송신하는 위치 정보 모듈(207)과, CD(compact disk)에 기록된 신호를 재생하기 위한 CD 데크(CD deck)(208)와, 자이로 센서(gyro sensor)(209) 등을 포함한다. 상기 무선 통신 모듈(206) 및 위치 정보 모듈(207)은 각 모듈들을 위한 안테나(204, 205)를 통하여 신호를 송신/수신한다.

상기 무선 통신 모듈(206)은 고유의 기기번호가 부여된 이동 이동 단말기로서 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신하기 위한 이동 통신 모듈(206a)과, WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband; Wibro), 와이맥스(World Interoperability for Microwave Access; Wimax), HSDPA(High Speed Downlink Packet Access) 등과 같은 방식으로 무선 인터넷을 접속할 수 있는 무선 인터넷 모듈(206b)과, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee, Wireless LAN (Bluetooth, 802.11n 등등 프로토콜)등과 같은 방식으로 통신을 수행하는 근거리 통신 모듈(206c) 등을 포함할 수 있다.

또한, 방송 수신 모듈(222)은 상기 메인 보드(210)에 연결되고, 안테나(223)를 통해서 방송 신호를 수신한다. 상기 메인보드(210)에는 인터페이스 보드(203)를 통해서 상기 LCD 제어부(214)의 제어를 받는 표시부(LCD)(201)와, 키 제어부(211)의 제어를 받는 프론트 보드(202)와 차량의 내부 및/또는 외부를 촬영하는 카메라(227)가 연결된다. 상기 표시부(201)는, 각종 비디오 신호, 문자 신호를 표시하고, 상기 프론트 보드(202)는 각종 키 신호 입력을 위한 버튼을 구비하고, 운전자 선택이 이루어진 버튼에 해당하는 키 신호를 메인 보드(210)에 제공한다. 또한, 상기 표시부(201)는 도 3의 근접 센서 및 터치 센서(터치 스크린)을 포함할 수 있다.

상기 프론트 보드(202)는 교통정보를 직접 입력하기 위한 메뉴 키를 구비하며, 상기 메뉴 키는 키 제어부(211)의 제어를 받도록 구성될 수 있다. 또한, 상기 프론트 보드(202)는 화면의 표시를 제어하기 위한 메뉴 키를 구비할 수 있다.

상기 오디오 보드(217)는 상기 메인 보드(210)와 연결되고, 각종 오디오 신호를 처리한다. 상기 오디오 보드(217)는 오디오 보드(217)의 제어를 위한 마이크로컴퓨터(219), 라디오 신호를 수신하는 튜너(218), 상기 마이크로컴퓨터(219)에 전원을 공급하는 전원부(216), 각종 음성 신호를 처리하는 신호 처리부(215)를 포함하여 이루어진다.

또한, 상기 오디오 보드(217)는 라디오 신호를 수신하기 위한 라디오 안테나(220)와, 오디오 테이프를 재생하기 위한 테이프 데크(221)를 포함한다. 상기 오디오 보드(217)는 상기 오디오 보드(217)에서 신호 처리된 음성 신호를 출력하기 위한 음성 출력부(예를 들면, 앰프)(226)를 더 포함할 수 있다.

상기 음성 출력부(앰프)(226)는 차량 인터페이스(224)에 연결된다. 즉, 상기 오디오 보드(217)와 메인 보드(210)는 상기 차량 인터페이스(224)에 연결된다. 상기 차량 인터페이스(224)는 음성 신호를 입력하는 핸즈프리(225a), 탑승자 안전을 위한 에어백(225b), 차량의 속도를 검출하기 위한 속도 센서(225c) 등이 연결될 수도 있다. 상기 속도 센서(225c)는 차량 속도를 산출하고, 그 산출된 차량 속도 정보를 상기 제어부(212)에 제공한다.

상기 영상표시장치(200)에 적용된 네비게이션 세션(또는 검색부, 300)은, 지도 데이터와 차량의 현재 위치 정보를 근거로 길 안내 정보를 발생하고, 그 발생된 길 안내 정보를 운전자에게 통지한다.

상기 표시부(201)는 근접 센서를 통해 표시창 내에서 근접 터치를 감지한다. 예를 들면, 상기 표시부(201)는 포인터(예를 들면, 손가락 또는 스타일러스 팬(stylus pen))가 근접 터치될 때 그 근접 터치의 위치를 검출하고, 그 검출된 위치에 대응하는 위치 정보를 상기 제어부(212)에 출력한다.

또한, 상기 표시부(201)는 상기에서 설명한 바와 같이, 복수 개의 디스플레이로 이루어질 수 있고, 각각의 디스플레이에는 차량의 운전시야각에 대응되는 서로 다른 영상, 차량의 운행에 따라 길 안내를 수행하기 위한 지도 데이터가 표시될 수 있다. 또한, 상기 표시부(201)는 적어도 하나의 카메라(227)와 연결될 수 있고, 상기 카메라(227)는 상기 표시부(201)를 기준으로 소정범위내에 있는 사용자의 이미지를 촬영하여 접속된 외부 기기나 메인 보드(210)로 전달할 수 있다.

상기 카메라(227)는 일반적으로 차량의 전방에 내장되거나 또는 착탈가능하게 장착되어 차량의 주행에 따른 외부 영상을 촬영한다. 또한, 상기 카메라(227)는 차량내 블랙박스에 내장된 것으로 대체될 수 있다. 또한, 이와 같은 카메라(227)는 복수 개가 (예를 들어, 사이드 미러(side mirror)나 리어 뷰 미러(rear view mirror)가 배치된 위치에) 설치되어 각각 대응되는 차량의 외부 영상을 촬영할 수 있다. 또는 하나의 카메라가 사방으로 회전하면서 차량의 주행에 따른 다양한 운전시야각에 대응되는 외부 영상을 촬영할 수 있다.

한편, 운행경로를 검색하기 위한 지도 데이터는 메모리(213)에 저장되거나, 무선 통신부(110)를 통해 외부 네트워크로부터 수신될 수 있다. 또한 메모리(213)에 기저장된 지도 데이터는 상기 무선 통신부(110)를 통해 수신된 업데이트 정보에 기초하여 업데이트될 수 있다.

상기 음성 인식 모듈(301)는 운전자 또는 차량의 동승자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다. 예를 들어, 운전자 또는 동승자가 '검색'을 외치면, 해당 음성명령을 인식하여 제어부(212)에 전달한다. 그러면, 상기 제어부(212)는 기 선택된 텍스트와 관련된 정보를 수집하기 위한 검색 기능을 수행한다.

상기 영상표시장치(200)에 적용된 내비게이션 세션(session)(300)은, 지도 데이터 상에 주행 경로를 표시하고, 이동 단말기(100)의 위치가 상기 주행 경로에 포함된 사각지대로부터 미리 설정된 거리 이내일 때 무선 통신(예를 들면,근거리 무선 통신망)을 통해 주변 차량에 장착된 단말기(예를 들면, 차량 내비게이션 장치) 및/또는 주변 보행자가 휴대하고 있는 이동 단말기와 자동으로 무선 네트워크를 형성함으로써 상기 주변 차량에 장착된 단말기로부터 그 주변 차량의 위치 정보를 수신하고, 주변 보행자가 휴대하고 있는 이동 단말기로부터 상기 주변 보행자의 위치 정보를 수신한다.

한편, 메인 보드(210)는 인터페이스부(미도시)에 연결될 수 있으며, 인터페이스부(미도시)는 외부장치 인터페이스부와 네트워크 인터페이스부를 포함할 수 있다. 외부장치 인터페이스부는 외부 장치와 영상표시장치(200)를 연결하는 역할을 한다. 이를 위해, 외부장치 인터페이스부는, A/V 입출력부(미도시) 또는 무선 통신부(미도시)를 포함할 수 있다. 외부장치 인터페이스부는, 예를 들어 DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치와 유/무선으로 연결될 수 있다. 또한, 네트워크 인터페이스부는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정의 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정의 웹 페이지에 접속하여, 해당 서버와 데이터를 주고 받을 수 있다.

본 발명에 따른 실시예에서, 상기 영상표시장치(200)는 HUD(Head-Up Display)이거나 또는 프로젝터(projector)를 통해 투사되는 영상이 디스플레이되는 차량의 앞유리 또는 계기판이거나 또는 차량의 후석에 위치한 디스플레이장치일 수도 있다. 이때, 상기 영상표시장치(200)가 차량의 후석에 위치한 디스플레이장치인 경우 무선 통신 모듈(206)을 통해 상기 차량의 전석에 위치한 HUD(Head-Up Display) 또는 프로젝터(projector)와 통신할 수 있다.

이상에서 설명한 것과 같은 구성을 적어도 하나 이상 포함하는 본 발명의 실시예에 따른 이동 단말기(100, 도 3)는 무선 통신부(110, 도 3)를 통하여 상술한 차량내 영상표시장치(200, 도 4)와 접속한다.

여기서, 이동 단말기(100)는 운전자가 소지한 휴대 단말을 의미하며, 차량내 영상표시장치(200)는 차량의 주행에 따라 전방시야에 대응되는 외부 영상을 출력하거나 길 안내를 수행하기 위한 지도 데이터를 출력한다.

또한, 여기서, 이동 단말기(100)와 차량내 영상표시장치(200)간의 접속이란, 카 커넥티비티 컨소시엄(The Car Connectivity Consortium, 약칭 CCC)에서 제정한 P2C(Phone to Car) 서비스 규격에 따라 모바일 기기와 차량의 인포테인먼트 시스템(상술한 HUD, 프로젝터, 차량의 계기판, 차량의 후석 디스플레이장치 등을 포함함, 이하에서는 '차량 헤드 유닛'으로 통칭될 수 있음을 미리 밝혀둔다)을 연결한 '커넥티드 카(connected car)'상태를 의미한다.

이와 같이 '커넥티드 카' 상태가 되면, 상기 이동 단말기(100)와 차량내 영상표시장치(200)는 무선 통신부(110)를 통해서 화면, 소리, 및 기타 데이터를 서로 주고받을 수 있다.

이와 같이 이동 단말기(100)와 차량내 영상표시장치(200)가 접속된 상태에서, 이동 단말기(100)의 사용자 추적부(120)는 접속된 차량내 영상표시장치(200), 예를 들어 차량 헤드 유닛와 본체의 디스플레이부(151)를 기준으로 소정 범위내에 있는 운전자의 시선이 향하는 방향을 감지할 수 있다.

예를 들어, 이동 단말기(100)의 제어부(180)는 차량내 구비된 전방카메라 또는 이동 단말기(100)나 영상표시장치(200)에 구비된 카메라를 통해서 획득된 운전자의 이미지를 분석하여, 운전자의 얼굴 방향이 차량내 영상표시장치(200)의 디스플레이를 향하였는지 또는 운전자의 눈동자가 차량의 앞유리, 즉 전방시야를 주시하고 있는지를 판단할 수 있다. 이를 위해, 차량내 영상표시장치(200)로부터 운전자의 이미지 또는 운전자의 시선이 영상표시장치(200)의 디스플레이에 고정되었는지 여부를 나타내는 신호를 수신할 수 있다.

이와 같이, 운전자의 시선변화를 감지하는 동안, 영상 공유 모드에 진입한 것으로 판단되면, 상기 제어부(180)는 차량내 영상표시장치(200)('제 1 영상표시장치')에 표시된 영상, 예를 들어 차량의 전방시야에 나타나는 외부 영상과 디스플레이부(151)에 표시된 영상, 예를 들어 웹페이지 화면 중에서 운전자의 시선이 향한 방향에 대응되는 영상을 접속된 다른 영상표시장치(200b 또는 200c)('제 2 영상표시장치'), 예를 들어 후석 디스플레이장치 또는 동승자가 소지한 단말기로 전송해준다.

이때, 운전자의 시선이 영상표시장치(200)의 다른 디스플레이나 또는 이동 단말의 디스플레이부(151)로 이동되면, 상기 제어부(180)는 접속된 다른 영상표시장치(200b 또는 200c) 즉 제 2 영상표시장치에 표시되는 화면을 운전자의 시선이 옮겨진 위치에 대응되는 영상으로 변경시켜 표시한다.

이와 같이, 제 2 영상표시장치에 상기 이동 단말기(100)로부터 운전자의 시선에 대응되는 영상이 전송되면, 제 2 영상표시장치의 사용자는 전송된 영상에 소정의 입력을 수행할 수 있다. 제 2 영상표시장치는 전송된 영상에 입력을 포함한 업데이트 영상을 이동 단말기(100)로 전송하면서, 이동 단말기(100)와 접속된 영상표시장치(200)에 영상 공유 요청을 전달할 수 있다. 그러면, 상기 이동 단말기(100)는 무선 통신부(110)를 통해서 상기 수신된 업데이트 영상을, 영상 공유를 수락한 제 1 영상표시장치로 전송한다.

한편, 제 2 영상표시장치는 이동 단말기(100)로부터 전송된 영상 공유 요청에 대해 공유 수락 또는 공유 거절의 표시를 표명할 수 있다. 공유 수락의 신호가 수신되면, 상기 제어부(180)는 운전자의 시선이 향하는 화면에 표시되는 영상을 제 2 영상표시장치에 전송해준다. 공유 거절의 신호가 수신되면, 상기 제어부(180)는 이동 단말기(100)의 디스플레이부(151) 또는 음향 출력 모듈(152)에 공유 거절 메시지를 출력하도록 제어한다. 그에 따라, 차량내 다른 영상표시장치(200)가 영상 공유 요청을 거절하더라도 그러한 의사표시가 운전자의 이동 단말기(100)에만 표시되어 운전자의 운행에는 직접적인 방해가 되지 않는다.

이상에서 설명한 바와 같이, 운전자가 보고 있는 영상을 차량내 다른 동승자가 실시간으로 공유할 수 있으므로 차량 운행 중에도 운전자의 주위 분산 행동이 최소화되어 안전 운행이 가능하고, 운전자는 별다른 조작없이 동승자와 영상을 공유하는 것이 가능하므로 운전자에게 편의를 제공한다.

이하에서는, 도 5 및 도 6a 및 도 6b를 참조하여, 본 발명의 실시예에 따른 이동 단말기의 제어방법을 보다 상세하게 설명하기로 한다.

이와 관련하여, 도 5는 본 발명의 실시예에 따른 이동 단말기의 제어방법을 설명하기 위한 흐름도이고, 도 6a 내지 도 6c는 도 5의 흐름도를 설명하기 위한 개념도들이다.

먼저, 도 5를 참조하면, 본 발명의 실시예에 따른 이동 단말기(100, 도 1)는 차량내 복수의 영상표시장치들(200a, 200b, 200c, 도 1(이하에서는 참조번호 '200'으로 통칭할 수 있음을 미리 밝혀둔다)), 즉 제 1 및 제 2 영상표시장치와 무선 접속한다(S501).

여기서, 상기 제 1 영상표시장치는 차량의 전석에 배치된 차량 헤드 유닛이거나 차량의 앞유리 등에 영상을 투사할 수 있는 프로젝터일 수 있다. 또한, 상기 제 2 영상표시장치는 차량의 후석에 배치된 디스플레이장치거나 또는 차량내의 동승자가 소지한 이동 단말기일 수 있다.

또한, 여기서, 이동 단말기(100)와 상기 영상표시장치들(200)간의 접속이란, 위에서 설명한 바와 같이 카 커넥티비티 컨소시엄(The Car Connectivity Consortium, 약칭 CCC)에서 제정한 P2C(Phone to Car) 서비스 규격에 따라 모바일 기기와 차량의 인포테인먼트 시스템(예, HUD(Head-Up Display), 프로젝터, 차량의 계기판, 차량의 후석 디스플레이장치 등을 포함함, 이하에서는 '차량 헤드 유닛'으로 명명될 수 있음)을 연결한 '커넥티드 카(connected car)'상태를 의미한다.

이와 같이 '커넥티드 카' 상태가 되면, 상기 이동 단말기(100)와 차량내 영상표시장치(200)는 무선 통신부(110)를 통해서 화면, 소리, 및 기타 데이터 등을 서로 주고받을 수 있다.

특히, 본 발명에 따른 실시예에서는 이동 단말기(100)와 차량내 영상표시장치(200)가 예를 들어, WiFi(Wireless Fidelity) 송수신기, 블루투스(bluetooth) 송수신기를 통해 '무선' 연결되는 것을 예시로 설명한다. 다만, 이와 같은 접속이 반드시 무선 연결에만 한정되는 것은 아니며, 이동 단말기(100)가 적어도 하나의 차량내 영상표시장치(200)와 유선으로 연결될 수 있음은 물론이다.

이와 같이 접속된 이동 단말기(100)와 영상표시장치(200)의 화면에는 각각 서로 다른 영상이 출력될 수 있다(S502).

예를 들어, 이동 단말기(100)의 디스플레이부(151)에는 사용자 조작에 따른 컨텐츠 화면, 예를 들어 애플리케이션의 실행화면이나 웹페이지 화면이 출력될 수 있다. 또한, 상기 영상표시장치(200)의 디스플레이(예, 차량의 앞유리, 헤드 유닛 디스플레이)에는 차량의 전방시야에 대응되는 외부 영상이나 길 안내를 수행하기 위한 지도 데이터가 출력될 수 있다.

또한 이와 같은 '커넥티드 카' 상태에서, 이동 단말기(100)의 사용자 추적부(120)는 상기 접속된 제 1 영상표시장치(예, 차량 헤드 유닛)와 이동 단말기 본체의 디스플레이부(151)를 기준으로 소정 범위내에 있는 운전자의 시선이 향하는 방향을 감지한다(S503).

구체적으로, 상기 이동 단말기(100)는 본체에 구비된 카메라(121)를 통해, 운전자가 제 1 영상표시장치의 디스플레이를 보고 있는지 또는 이동 단말기의 디스플레이부(151)를 보고 있는지를 지속적으로 감지한다.

또한, 이를 위해, 상기 이동 단말기(100)는 상기 영상표시장치(200)로부터 차량내 카메라('제 1 카메라')를 통해 획득된 제 1 촬영 이미지를 수신할 수 있다. 그러면, 이동 단말기(100)는 수신된 제 1 촬영 이미지와 본체의 카메라('제 2 카메라')를 통해 획득된 제 2 촬영 이미지를 분석하여 운전자의 시선이 향하는 방향을 실시간으로 감지할 수 있다. 이와 같은 영상 분석 과정은 사용자 추적부(120)의 영상 분석 모듈(123, 도 3)을 통해 수행될 수 있다. 또는, 제어부(180)가 제 1 및 제 2 촬영 이미지를 수신하여 운전자의 얼굴 방향 및/또는 운전자의 눈동자가 향하는 방향을 인식함으로써, 운전자의 시선이 향하는 방향과 운전자의 시선이 고정된 위치 등을 결정할 수 있다.

이와 같은 운전자의 시선변화의 감시가 지속적으로 이루어지는 동안, 상기 제어부(180)는 영상 공유 모드에의 진입 여부를 판단할 수 있다(S504). 즉, 상기 제어부(180)는 제 1 영상표시장치나 본체로부터 영상 공유 요청 신호가 있었는지를 판단할 수 있다. 다른 예에서는 이러한 영상 공유 요청 신호가 차량내 다른 영상표시장치(예, 제 2 영상표시장치)로부터 수신될 수도 있을 것이다.

여기서, 영상 공유 모드에의 진입이란, '커넥티드 카' 상태에 있는 차량내 기기들이 화면, 소리, 및 기타 데이터를 서로 공유할 수 있는 상태를 의미하는 것으로, 제 1 영상표시장치의 디스플레이에 표시되는 영상을 차량내 다른 기기와 공유하거나 또는 이동 단말기의 디스플레이부(151)에 표시되는 컨텐츠 화면을 접속된 차량내 다른 기기와 공유하는 경우를 모두 포함한다.

이와 같은 영상 공유 모드에의 진입은, 기설정된 음성명령, 제스처입력, 또는 키입력에 의하여 이루어질 수 있다. 이때, 영상 공유 모드에의 진입이 운전자에 의하여 이루어지는 경우이면 안전 운행을 위하여 음성명령(예, '영상 공유'의 외침)으로만 수행되도록 하거나 '커넥티드 카' 상태가 되면 영상 공유가 디폴트(default)로 수행되도록 설정할 수 있다. 즉, 접속과 동시에 영상 공유 기능이 가능한 상태로 구현될 수 있다.

또한, 상기 제어부(180)는 영상 공유 모드에 진입하였음을 나타내는 알림 메시지(예, 팝업창 또는 신호음)을 디스플레이부(151)나 음향 출력 모듈(152)을 통해 출력할 수 있다.

단계(S504)에서의 판단 결과, 영상 공유 모드에 진입한 경우, 상기 제어부(180)는 감지된 운전자의 시선에 대응되는 화면을 차량내 다른 기기, 즉 제 2 영상표시장치로 실시간 전송해준다(S505). 즉, 상기 제어부(180)는 제 1 영상표시장치에 표시되는 제 1 영상과 상기 디스플레이부(151)에 표시되는 제 2 영상 중에서 사용자 추적부(120)에 의하여 감지된 운전자의 시선이 향하는 방향에 대응되는 영상을 접속된 제 2 영상표시장치로 전송한다. 이에 의하여 차량의 동승자는 운전자가 보고 있는 영상을 실시간으로 공유할 수 있다. 이때, 상기 디스플레이부(151)에는 제 2 영상표시장치에 전송되는 영상과 동일한 영상이 출력될 수도 있고 원래 표시되고 있던 화면이 그대로 보여질 수도 있다.

예를 들어, 도 6a를 참조하면, 운전자(900)의 시선이 차량의 전방시야가 표시되는 디스플레이(예, 차량 헤드 유닛의 프로젝터를 통해 전방시야의 영상이 투사되는 차량의 앞유리)(200a)에 고정되고, 운전자가 '영상 공유'의 음성명령을 입력한 경우, 접속된 이동 단말기(100)는 차량의 전방시야의 영상(601)을 수신하여 차량의 후석 디스플레이장치(200b)에 실시간으로 전송해준다. 이에 의하여, 후석 디스플레이장치(200b)의 적어도 일 영역에는 차량의 전방시야의 영상(601")이 실시간으로 표시된다. 운전자의 음성명령은 메모리(160)에 기저장된 것과 동일한 음성인지를 매칭하여 제어명령으로 인식하도록 구현 가능하다.

또한, 도 6b를 참조하면, 운전자(900)의 시선이 이동 단말기(100)의 디스플레이부(151)에 고정되고, 영상 공유 요청 신호가 입력된 경우(예, 음성명령 또는 키입력의 신호), 이동 단말기(100)는 디스플레이부(151)에 출력되는 화면, 예를 들어 애플리케이션의 실행화면(602)을 차량의 후석 디스플레이장치(200b)에 실시간으로 전송해준다. 이에 의하여, 후석 디스플레이장치(200b)의 적어도 일 영역에는 애플리케이션의 실행화면(602")이 실시간으로 표시된다. 이때, 운전자가 운전 중에는 주행규제에 따라 이동 단말기(100)를 통해 일반 컨텐츠 화면을 시청하는 것이 제한되므로, 이 경우에는 영상 공유 요청 신호가 입력되더라도 차량 운행의 정지 신호(예, 브레이크 동작신호)가 입력된 경우에 한하여 상기한 영상 공유 과정이 수행되도록 할 수 있다.

이때, 운전자가 차량 운행을 위해 다시 전방을 주시하면, 도 6a에 도시된 바와 같이 차량의 후석 디스플레이장치(200b)에는 차량의 전방시야의 영상(601")이 표시된다. 그리고, 운전자의 시선이 이동되기전 후석 디스플레이장치(200b)에 표시되었던 영상(602")은 사라지거나 또는 축소 표시되거나 백그라운드(background)에서 실행될 수 있다.

또한, 상기 제어부(180)는 제 1 영상표시장치에 표시되는 영상(601)이나 디스플레이부(151)에 출력되는 영상(602)을 스케일링하여 후석 디스플레이장치(200b)에 표시할 수 있다. 이때, 영상의 화소는 더 낮은 화소를 갖는 장치를 기준으로 변경될 수 있다.

또한, 상기 제어부(180)는 운전자의 시선이 고정된 소정범위에 대응되는 부분영상만을 추출하여 후석 디스플레이장치(200b)로 전송해줄 수 있다. 또한, 상기 제어부(180)는 운전자의 시선에 대응되는 영상과 함께 운전자의 시선이 볼 수 없는 사각지대의 영상이 포함되도록 처리하여 후석 디스플레이장치(200b)로 전송해줄 수 있다.

한편, 상술한 제 2 영상표시장치(200b)에 표시되는 공유 영상은 사용자 조작에 따라(예, 사용자의 시선변화에 따라) 화면의 다른 영역으로 이동되거나, 수정내용이 입력되거나, 크기가 확대/축소되거나 또는 화면으로부터 사라질 수 있다.

이상에서 설명한 바와 같이, 본 발명의 실시예에 따라 차량내 영상표시장치와 접속된 이동 단말기에 의하면, 운전자가 현재 보고 있는 영상을 차량내 다른 동승자가 실시간으로 공유할 수 있고, 이러한 영상의 공유가 운전자의 음성명령과 아이 트래킹(eye-tracking)을 통해 수행되도록 함으로써, 차량 운행 중에도 운전자의 주위 분산 행동이 최소화되어 안전 운행이 가능한 환경을 제공한다.

이하에서는, 도 7 및 도 8a 내지 도 8e를 참조하여, 본 발명의 실시예에 따라 차량내 접속된 기기를 통해 운전자와 차량 동승자가 인터랙션하기 위한 이동 단말기의 제어방법을 보다 구체적으로 설명한다. 이와 관련하여, 도 7은 본 발명의 일 실시 예에 따른 이동 단말기의 제어방법을 설명하기 위한 흐름도이고, 도 8a 내지 8e는 도 7의 흐름도를 설명하기 위한 개념도들이다.

먼저, 도 7을 참조하면, 본 발명의 실시예에 따른 이동 단말기(100)는 소정 제어명령에 근거하여 기기 접속 모드로 진입할 수 있다(S701). 여기서, 상기 제어명령은 사용자의 특정 키 입력, 음성명령, 제스처 입력을 포함하며, 상기 제어명령에 따라 기기 접속 모드의 진입화면이 상기 디스플레이부(151)에 출력된다.

구체적으로, 상기 제어부(180)는, 사용자(또는 운전자)로부터 접속가능한 차량내 영상표시장치를 검색하기 위한 요청을 입력받는다. 이와 같은 요청은 기기 접속모드의 진입화면과 출력됨과 동시에 생성될 수 있다. 이와 같이 검색 요청이 입력되면, 상기 제어부(180)는 검색 결과, 접속가능한 복수의 영상표시장치를 디스플레이부(151)에 표시한다.

이때, 상기 제어부(180)는 본체와 접속가능한 차량내 영상표시장치를 대응되는 식별 이미지로 표시하여서, 상기 디스플레이부(151)에 표시하도록 제어할 수 있다. 여기서, 상기 식별 이미지는, 이동 단말기(100)의 메모리(160)에 기저장된 것이거나 해당 장치의 디폴트 이미지, 캡쳐 이미지, 및 썸네일 이미지 중 어느 하나이고, 해당 장치와 관련된 이미지와 함께 해당 장치의 사용자 이미지가 더 표시될 수 있다. 이를 위해, 제어부(180)는 이동 단말기(100)의 주소록 또는 전화번호부에 저장된 사용자 이미지를 불러올 수 있다.

이와 같이 접속가능한 차량내 영상표시장치가 상기 디스플레이부(151)에 소정의 식별 이미지로 표시되면, 상기 제어부(180)는 사용자 입력에 의하여 선택된 식별 이미지에 대응되는 영상표시장치와 이동 단말기 본체를 접속시킨다(S702).

여기서, 사용자 입력에 의한 '선택'은 식별 이미지에 대한 사용자 입력, 예를 들어 터치입력에 의하여 이루어지거나 음성명령 또는 특정 식별 이미지에 대한 눈깜빡임 등과 같은 제스처에 의하여 수행될 수 있다.

예를 들어, 도 8a를 참조하면, 기기 접속 모드에 진입시, 차량내 접속가능한 기기들의 식별 이미지들(81, 82, 83)이 디스플레이부(151)에 표시된다. 이때, 식별 이미지들은, 도시된 바와 같이, 해당 기기의 썸네일 이미지(81a, 82a, 83a)와 함께 사용자 이미지(81b, 82b, 83b)를 포함할 수 있다. 이와 같이, 접속가능한 영상표시장치의 식별 이미지가 표시된 상태에서, 사용자(또는 운전자)가 접속을 원하는 영상표시장치(200)의 식별 이미지를 터치하면, 체크 박스에 'v'표시가 표시되고, 상기 제어부(180)는 해당 기기를 본체와 접속시킨다.

한편, 상기 제어부(180)는 사용자 선택을 돕기 위해, 접속가능한 차량내 영상표시장치의 상대적 위치를 고려하여 식별 이미지를 표시할 수 있다. 그리고, 상술한 바와 같이 사용자 입력에 의해 선택된 식별 이미지에는 체크 표시가 표시될 수 있다.

이때, 접속가능한 차량내 영상표시장치의 상대적 위치는 예를 들어, 차량내 구비된 무선 공유기(예, AP)를 이용한 신호의 세기에 근거하여 추정될 수 있다. 예를 들어, 도 8a를 참조하면, 접속가능한 영상표시장치가 차량의 전석에 위치한 경우 디스플레이부(151)의 상부영역에 표시되고, 접속가능한 영상표시장치가 차량의 후석에 위치한 경우에는 디스플레이부(1510의 하부영역에 표시될 수 있다. 또한, 비록 도시되지는 않았지만, 상기 디스플레이부(151)에 차량의 이미지를 표시하고 그 위에 접속가능한 영상표시장치의 이미지를 차량내에서의 위치를 고려하여 표시할 수도 있다.

또한, 차량내 접속가능한 기기의 표시 및 선택은 차량내 제 1 영상표시장치(예, 차량 헤드 유닛)에 의해 수행되거나, 차량내 제 2 영상표시장치(예, 후석 디스플레이장치 또는 동승자의 이동 단말기)에 의해 수행될 수도 있다.

이와 같이 이동 단말기(100)와 차량내 영상표시장치(200)가 접속되고, 접속된 제 1 영상표시장치(200a)에 제 1 영상(예, 차량의 전방시야의 영상)이 출력되고 이동 단말기(100)의 디스플레이부(151)에 제 2 영상(예, 웹페이지 화면)이 출력되는 동안(S703), 상기 제어부(180)는 차량내 그리고/또는 본체에 구비된 카메라를 통해 운전자의 시선변화를 감지할 수 있다(S704).

보다 구체적으로, 이동 단말기(100)의 사용자 추적부(120)는, 제 1 카메라를 통해 상기 제 1 영상표시장치의 디스플레이를 기준으로 촬영된 운전자의 이미지와 제 2 카메라를 통해 상기 본체의 디스플레이부(151)를 기준으로 촬영된 운전자의 이미지를 분석하여 운전자의 시선이 고정된 위치를 감지할 수 있다.

이와 같이 운전자의 시선이 특정 화면에 고정된 상태에서 기설정된 음성명령(예, '공유')이 입력되면 상기 제어부(180)는 영상 공유 모드로 진입할 수 있다(S705). 이와 같은 영상 공유 모드에의 진입은, 기설정된 음성명령, 제스처입력, 또는 키입력에 의하여 이루어질 수 있다.

이와 같이 영상 공유 모드에 진입하면, 상기 제어부(180)는 감지된 운전자의 시선에 대응되는 화면을 접속된 다른 장치, 즉 제 2 영상표시장치로 실시간 전송해준다(S706).

이때, 상기 제어부(180)는 감지된 운전자의 시선에 대응되는 화면이 상기 제 2 영상표시장치에 표시되기 전에 영상 공유의 수락 여부를 묻는 메시지를 상기 제 2 영상표시장치로 전송할 수 있다. 그러면, 상기 제 2 영상표시장치의 디스플레이에는 도 8b에 도시된 바와 같이, 영상 공유의 수락 여부를 묻는 메시지가 팝업된다. 그러면, 제 2 영상표시장치의 사용자는 팝업창에 표시된 '수락'아이콘 또는 '거절' 아이콘 중 어느 하나에 터치입력을 수행하고, 제 2 영상표시장치는 터치입력에 대응되는 신호를 이동 단말기(100)에 송신해준다.

제 2 영상표시자치로부터 공유 수락 신호(또는 응답 신호)가 수신되면, 상기 제어부(180)는, 운전자의 시선이 고정된 위치에 대응되는 화면정보를, 기기 접속 모드 화면에서 선택된 식별 이미지에 대응되는 영상표시장치로 전송해준다. 이때, 선택된 식별 이미지들이 복수이면 대응되는 복수의 영상표시장치에 상기 화면정보를 동시에 전송해준다.

예를 들어, 도 8c에 도시된 바와 같이, 운전자(900)가 차량 운행 중 차량 아유리(200a)를 통해 전방을 주시하는 경우, 영상 공유 모드로 진입하면, 접속된 이동 단말기(100)를 통해 후석의 디스플레이(200b)에도 동일한 전방시야의 영상(801")이 실시간으로 출력된다. 이때, 비록 도시되지는 않았지만, 이동 단말기(100)의 디스플레이부(151)에는 운전자가 바라보는 전방시야의 영상(801)이 수신되어 접속된 다른 기기(200b)로 전송되고 있음을 나타내는 '표시자'(예, '전송중'임을 나타내는 텍스트 또는 대응되는 이미지)가 표시될 수 있다.

한편, 선택된 식별 이미지에 대응되는 영상표시장치에 기설정된 시간 동안(예, 5초 이상) 사용자의 시선이 감지되지 않으면, 상기 제어부(180)는 해당 영상표시장치에 상기 화면정보가 더 이상 전송되지 않도록 함으로써, 네트워크의 과부하를 방지하고 다른 영상표시장치에 대한 전송속도를 빠르게 할 수 있다.

이와 같이, 제 1 영상표시장치에 표시되는 영상이 이동 단말기(100)를 통해 제 2 영상표시장치에 실시간으로 공유되는 상태에서, 제어부(180)는 제 2 영상표시장치로부터 소정의 입력이 포함된 업데이트 영상을 수신할 수 있다(S707).

이와 같이 업데이트 영상이 수신되면, 상기 제어부(180)는 처음에 영상 공유를 요청한 기기, 즉 제 1 영상표시장치로 영상 공유의 수락 여부를 묻는 메시지를 전송한다(S708). 제 1 영상표시장치로부터 응답 신호(또는 공유 수락 신호)가 수신되면, 상기 제어부(180)는 제 2 영상표시장치로부터 수신된 업데이트 영상을 제 1 영상표시장치로 전송해준다(S709).

이때, 제 1 영상표시장치가 운전자석에 배치된 차량 헤드 유닛인 경우, 운전자의 운전을 방해하지 않기 위해, 영상 공유의 수락 여부를 묻는 메시지가 안내 음성으로 출력되거나 또는 출력되지 않을 수 있다. 또한, 운전자로부터 공유 수락 신호가 입력되지 않으면 영상 공유를 거절한 것으로 보고 업데이트 영상을 표시하지 않도록 할 수 있다.

한편, 이와 같은 일련의 과정은 제 2 영상표시장치가 공유 영상에 소정의 입력을 수행함과 동시에 수행될 수도 있다. 여기서, 소정의 입력이란, 제 1 영상표시장치로부터 이동 단말기(100)를 통해 전송된 공유 영상의 적어도 일 영역에 또는 특정 오브젝트에 라인, 텍스트, 또는 이미지를 직접 그리거나 첨부시키는 것을 의미한다.

예를 들어, 도 8d를 참조하면, 운전자가 바라보는 차량 앞유리(200a)에 표시되는 전방시야의 영상이 후석 디스플레이장치(200b)에 실시간으로 공유되는 상태에서, 후석에 탑승한 동승자가 공유 영상에 포함된 특정 오브젝트(예, 길을 지나가는 강아지)에 라인(840)을 그린 경우, 이러한 업데이트 영상(803)이 이동 단말기(100)를 통해 차량 앞유리(200a)에도 동일한 라인(840")이 실시간으로 표시된다(803").

한편 다른 예에서는, 제 2 영상표시장치에 수정내용이 입력되고, 입력 완료 신호에 의하여 업데이트 영상이 생성된 후에 이동 단말기(100)를 통해 제 1 영상표시장치로 전송될 수 있다. 이에 의하여, 운전자가 라인이 그려진 오브젝트가 바라보도록 유도할 수 있다.

또한, 제 1 영상표시장치에 업데이트 영상이 표시되더라도, 운전자는 운전의 방해가 되는 경우로 판단되면, 소정 제어명령을 통해 이전 영상으로 복귀시킬 수 있다. 예를 들어, 제 1 영상표시장치의 디스플레이(예, 차량의 앞유리)에 업데이트 영상이 표시된 상태에서, 운전자가 '지워'라는 기설정된 음성명령을 외치면, 이동 단말기(100)는 업데이트 영상을 전송을 중단하고, 이전 영상 즉 차량의 전방시야의 영상을 표시하도록 제어할 수 있다.

한편, 단계(S708)에서 업데이트 영상의 공유 요청에 대하여, 제 1 영상표시장치로부터 영상 공유 거절 신호가 수신되면, 도 8e에 도시된 바와 같이 '(제 1 영상표시장치로부터) 공유 거절되었습니다'라는 메시지 팝업창(803)이 후석 디스플레이장치(200b)에 표시될 수 있다(S710). 이때, 공유 요청을 수락한 다른 영상표시장치에는 이동 단말기(100)를 통해 수신된 업데이트 영상이 출력될 수 있다.

이하에서는, 도 9 내지 도 11b를 참조하여, '커넥티드 카' 상태에서 차량의 동승자가 바라보는 영상을 공유하기 위한 이동 단말기의 제어방법을 살펴본다.

이와 관련하여, 도 9는 본 발명의 일 실시 예에 따라, 동승자가 제공하는 영상을 공유하기 위한 이동 단말기의 제어방법을 설명하기 위한 흐름도이고, 도 10a 내지 10c는 도 9의 흐름도를 설명하기 위한 개념도들이다. 그리고, 도 11a 및 도 11b는 본 발명의 일 실시 예에 따라, 복수의 영상표시장치로부터 영상 공유 요청이 있는 경우 화면표시와 관련된 이동 단말기의 제어방법을 설명하기 위한 개념도들이다.

먼저, 본 발명의 실시예에 따른 이동 단말기(100, 도 1)는 차량내 복수의 영상표시장치들(200), 즉 제 1 및 제 2 영상표시장치와 접속할 수 있다(S901).

예를 들어, 이동 단말기(100)와 차량내 영상표시장치(200)는 WiFi(Wireless Fidelity) 송수신기, 블루투스(bluetooth) 송수신기를 통해 '무선' 연결된다(다만, 이에 한정되지 않고 환경에 따라 '유선' 연결을 포함할 수 있음).

여기서, 상기 제 1 영상표시장치는 차량의 전석에 배치된 차량 헤드 유닛이거나 차량의 앞유리('제 1 영사표시장치의 디스플레이') 등에 영상을 투사할 수 있는 프로젝터일 수 있다. 또한, 상기 제 2 영상표시장치는 차량의 후석에 배치된 디스플레이장치거나 또는 차량내의 동승자가 소지한 이동 단말기일 수 있다.

또한, 이동 단말기(100)와 상기 영상표시장치들(200)간의 접속이란, 위에서 설명한 바와 같이 카 커넥티비티 컨소시엄(The Car Connectivity Consortium, 약칭 CCC)에서 제정한 P2C(Phone to Car) 서비스 규격에 따라 모바일 기기와 차량의 인포테인먼트 시스템을 연결한 '커넥티드 카(connected car)'상태를 의미한다. 이와 같이 '커넥티드 카' 상태가 되면, 상기 이동 단말기(100)와 차량내 영상표시장치(200)는 무선 통신부(110)를 통해서 화면, 소리, 및 기타 데이터 등을 서로 주고받을 수 있다.

한편, 제 2 영상표시장치의 디스플레이에는 동승자의 조작에 대응되는 컨텐츠 영상이 출력된다(S902). 상기 컨텐츠 영상이란, 사용자의 키조작 이나 실행명령에 대응되는 영상으로서, 예를 들어 애플리케이션의 실행 화면, 동영상, 이미지 등일 수 있다. 여기서는, 예를 들어 동승자가 제 2 영상표시장치를 조작하여 지도 애플리케이션을 실행하여서(또는 웹 서버를 검색하여서) 차량의 목적지 또는 운행 경로의 검색 결과를 표시한 지도 데이터가 상술한 컨텐츠 영상이 될 수 있다.

이와 같이 제 2 영상표시장치에 소정의 컨텐츠 영상이 출력되고, 영상 공유 모드에 진입하면(S903), 제어부(180)는 제 2 영상표시장치로부터 해당 컨텐츠 영상(예, 지도 데이터)을 수신한다(S904). 수신된 컨텐츠 영상은 디스플레이부(151)에 표시되거나 또는 표시되지 않을 수 있다.

이와 같이 제 2 영상표시장치로부터 공유 요청이 있으면, 상기 제어부(180)는 무선 통신부(110)를 통해 영상 공유의 수락 여부를 묻는 메시지를 제 1 영상표시장치에 전송한다.

제 1 영상표시장치로부터 응답 신호, 즉 공유 수락 신호가 수신되면(S905), 상기 제어부(180)는 제 1 영상표시장치의 디스플레이에 상기 수신된 컨텐츠 영상에 대응되는 이미지 객체를 표시하게 할 수 있다(S906).

도 10a에는, 컨텐츠 영상에 대응되는 이미지 객체가 차량 헤드 유닛 디스플레이의 하단 영역에 표시된 예를 보였지만, 다른 실시예에서는 상기 이미지 객체가 운전자의 시선이 고정된 위치에 표시되도록 구현될 수 있다. 또한, 다른 실시예에서는 컨텐츠 영상에 대응되는 이미지 객체가 차량의 전방시야를 가리지 않는 영역에 표시되도록 할 수 있다.

여기서, 컨텐츠 영상에 대응되는 이미지 객체란, 해당 컨텐츠 영상을 나타내는 대표 이미지나 상기 제 2 영상표시장치의 사용자 이미지 중 어느 하나이거나 둘 다를 포함할 수 있다. 또한, 대표 이미지란, 해당 컨텐츠 영상의 썸네일 이미지 또는 애플리케이션의 아이콘, 또는 프리뷰 화면 중 어느 하나일 수 있다.

한편, 단계(S905)에서 제 1 영상표시장치로부터 컨텐츠 영상의 공유 거절 신호가 수신되면, 상기 제어부(180)는 제 2 영상표시장치에 공유 거절 메시지를 전송한다(S910). 그에 따라 제 2 영상표시장치의 디스플레에는 그러한 메시지 팝업창이 표시된다. 이때, 상기 메시지 팝업창에는 공유를 거절한 기기의 정보가 포함될 수 있다. 또한, 이와 같은 공유 거절 신호는, 현재 차량 운행 중이면(즉, 차량 운행 중단 신호가 입력되지 않은 경우이면) 안전 운전을 위해 자동으로 생성될 수 있다.

이와 같이, 제 1 영상표시장치(예, 차량 헤드 유닛)에 컨텐츠 영상이 공유되면, 운전자는 아이 트래킹(eye-tracking)을 통해 해당 컨텐츠 영상을 확인 및 제어할 수 있다.

구체적으로, 상기 이동 단말기(100)는 카메라를 통해 획득된 영상을 분석하여, 제 1 영상표시장치의 디스플레이에서 운전자의 시선이 고정된 지점이나 영역을 판단할 수 있다(S907).

판단 결과, 운전자의 시선이 상기 컨텐츠 영상에 대응되는 이미지 객체에 기설정된 시간 동안(예, 2초 이상) 고정된 경우, 상기 제어부(180)는 표시된 이미지 객체를 대응되는 컨텐츠 영상(예, 차량의 후석 디스플레이장치로부터 전송된 지도 데이터)으로 변경하여 표시할 수 있다(S908).

예를 들어, 도 10a를 참조하면, 동승자가 차량의 후석 디스플레이장치(200b)를 통해 목적지의 운행 경로를 검색하고, 소정의 키(미도시) 또는 소정의 사용자 입력(기설정된 음성명령, 제스처입력을 포함함)을 통해 공유 요청한 경우, 해당 영상(901)은 먼저 이동 단말기(100)에 수신된다. 운전자가 공유 요청에 수락하면, 해당 영상(901)에 대응되는 이미지 객체(901"), 즉 썸네일 이미지가 차량 헤드 유닛(200a)의 디스플레이에 표시된다. 운전자가 디스플레이에 표시된 이미지 객체(901")를 소정 시간 응시하면, 이동 단말기(100)는 해당 썸네일 이미지를 확대시킨 컨텐츠 영상(901"")을 디스플레이에 표시한다. 즉, 운전자는 공유된 컨텐츠 영상을 아이 트래킹(eye-tracking)을 통해 확인할 수 있다.

또한, 상기 제어부(180)는 제 1 영상표시장치의 디스플레이에 표시되는 컨텐츠 영상을 운전자의 시선에 근거하여 제어할 수 있다. 즉, 표시된 컨텐츠 영상의 확대/축소, 이동, 사라지기, 재전송 등의 제어 기능을 운전자의 아이 트래킹(eye-tracking)을 통해 제어가능하다.

예를 들어, 도 10b의 (a)를 참조하면, 후석 디스플레이장치(200b)로부터 전송된 지도 데이터가 차량 헤드 유닛(200a) 디스플레이의 제1영역에 표시된 상태에서, 운전자가 제1영역과 구별되는 제2영역을 일정 시간 응시한 경우, 도 10c에 도시된 바와 같이 후석 디스플레이장치(200b)와 공유하는 컨텐츠 영상이 사라질 수 있다. 한편, 다른 실시예에서는, 도 10b의 (b)에 도시된 바와 같이 터치입력에 의하여 해당 컨텐츠 영상이 디스플레이로부터 사라지게 할 수 있다. 이에 의하여, 차량 헤드 유닛(200a)의 디스플레이에는 기존의 길 안내 영상(903)만이 표시된다. 또한, 다른 실시예에서는 해당 컨텐츠 영상에 기설정된 터치를 입력하여 해당 영상이 줌-인, 줌-아웃, 또는 확대/축소되어 표시되도록 할 수 있다.

한편, 단계(S907)에서의 판단 결과 운전자의 시선이 기설정된 시간 동안 상기 컨텐츠 영상에 대응되는 이미지 객체를 벗어난 경우, 상기 제어부(180)는 해당 이미지 객체가 더 이상 디스플레이에 표시되지 않도록 할 수 있다(S909).

본 발명의 일 실시예에 따르면, 영상 공유 요청은 복수의 영상표시장치로부터 동시에 또는 소정 시간 간격을 두고 이루어질 수 있다.

이러한 경우, 영상 공유를 수락한 제 1 영상표시장치(예, 차량 헤드 유닛)(200a)의 디스플레이에는 도 11a에 도시된 바와 같이 제 2 영상표시장치(예, 차량의 후석 디스플레이장치 또는 동승자의 이동 단말기)(200b)로부터 수신된 영상(예, '제 1 지도 데이터')에 대응되는 제 1 이미지 객체(1010)와 제 3 영상표시장치(예, 차량의 다른 후석 디스플레이장치 또는 동승자의 이동 단말기)(200b)로부터 수신된 영상(예, '제 2 지도 데이터')에 대응되는 제 2 이미지 객체(1020)가 표시된다.

여기서, 제 1 영상표시장치에 표시되는 제 1 이미지 객체와 제 2 이미지 객체는 각 영상표시장치의 식별 정보, 사용자 정보, 및/또는 차량내의 위치 정보를 포함할 수 있다. 도 11a에는 제 1 및 제 2 이미지 객체들(1010, 1020)이 사용자 정보를 포함한 예시를 보여주고 있다.

이와 같이 제 1 및 제 2 이미지 객체가 표시된 상태에서, 운전자의 시선이 표시된 특정 이미지 객체, 예를 들어 도 11b에서 제 1 이미지 객체(1010)에 기설정된 시간 동안 고정되면, 제어부(180)는 제 1 이미지 객체에 대응되는 컨텐츠 영상, 즉 제 1 지도 데이터(1101")를 차량 헤드 유닛(200a)의 디스플레이에 표시한다. 이때, 제 2 이미지 객체는 도시된 바와 같이, 제 1 지도 데이터(1101")의 경계에 인접하도록 이동되어 표시될 수 있다. 또한, 다른 예에서는 제 2 이미지 객체 및/또는 제 2 이미지 객체에 대응되는 컨텐츠 영상이 차량 헤드 유닛(200a)의 디스플레이로부터 사라지게 할 수 있다.

한편, 운전자가 제 1 및 제 2 이미지 객체에 대응되는 컨텐츠 영상을 모두 보고 싶은 경우, 복수의 화면이 각각 구별된 영역에 표시될 수 있다. 이를 위해, 제 1 영상표시장치, 즉 차량 헤드 유닛(HUD)에는 복수의 애플리케이션의 실행 결과를 동시에 디스플레이하기 위한 J2ME 플랫폼(Java 2 Micro-Edition Platform)이 탑재될 수 있다. J2ME 플랫폼은 MVM(Multiple Virtual Machine)기능과 복수의 애플리케이션의 실행 결과를 하나의 화면에 동시에 디스플레이하는 기능을 갖는다. 구체적으로, 제1애플리케이션의 실행결과, 즉 제 3 영상과 제2애플리케이션의 실행결과, 즉 제 4 영상이 차량 헤드 유닛 디스플레이의 전체 화면에서 필요한 영역에만 디스플레이될 수 있도록 각 실제 프레임 버퍼와 가상 프레임 버퍼의 크기를 다르게 조절하고, 가상 프레임 버퍼에서 디스플레이될 영상의 크기가 조절되면 각 가상 프레임 버퍼들을 하나의 가상 프레임 버퍼로 통합한다. 그리고 통합된 하나의 가상 프레임 버퍼를 실제 프레임 버퍼로 복사하여 하나의 화면에 동시에 디스플레이할 수 있다.

이와 같이, 제 1 영상표시장치, 즉 차량 헤드 유닛에 복수의 컨텐츠 영상, 즉 제 3 및 제 4 영상이 동시에 표시되는 상태에서, 제 1 및 제 2 이미지 객체 중 적어도 하나에 제 1 입력이 감지되면, 상기 제어부(180)는 해당 이미지 객체에 대응되는 컨텐츠 영상을 확대시켜서 표시할 수 있다.

예를 들어, 차량 헤드 유닛(200a)의 디스플레이에서 제1영역에는 제 2 영상표시장치로부터 수신된 '제 1 지도 데이터'가 표시되고 제2영역에는 제 3 영상표시장치로부터 수신된 '제 2 지도 데이터'가 표시되고, 각각의 영역에는 해당 장치와 관련된 이미지 객체가 포함된 경우, 예를 들어 운전자가 제1영역에 기설정된 시간동안 시선을 고정한 경우, 차량 헤드 유닛(200a)의 디스플레이의 전영역에 '제 1 지도 데이터'가 표시될 수 있다. 이때, 다른 영상들은 백그라운드(background)로 실행되거나 디스플레이로부터 사라질 수 있다.

또한, 이와 같이, 제 1 영상표시장치, 즉 차량 헤드 유닛에 복수의 컨텐츠 영상, 즉 제 3 및 제 4 영상이 동시에 표시되는 상태에서, 각 이미지 객체에 대응되는 제 3 및 제 4 영상 중 적어도 하나에 제 2 입력이 감지되면, 상기 제어부(180)는 해당 영상이 상기 디스플레이에서 사라지게 할 수 있다.

또한, 상기 제어부(180)는, 제 1 영상표시장치의 디스플레이에 상기 제 3 영상에 대응되는 이미지 객체가 표시된 상태에서 잠금 기능이 활성화되면, 운전자의 시선이 고정되지 않더라도 상기 제 3 영상이 상기 디스플레이에 지속적으로 표시되도록 할 수 있다. 여기서, 잠금 기능은 예를 들어 음성 안내 정보에 따른 운전자의기설정된 음성명령(예, '계속 표시해줘'의 외침)이 있는 경우에 설정될 수 있다. 다만, 이에 한정되지 않으며, 운전자의 키조작, 제스처 입력에 의하여 실행되도록 설정할 수 있다.

한편, 도 12a 내지 12c는 본 발명의 일 실시 예에 따라, 동일한 영상표시장치로부터 새로운 영상의 공유 요청이 있는 경우에 이를 차량내 영상표시장치에 표시하기 위한 이동 단말기의 제어방법을 설명하기 위한 개념도들이다.

먼저, 도 12a를 참조하면, 차량 동승자가 차량의 후석 디스플레이장치(200b)를 통해 목적지의 운행 경로를 검색하고, 소정의 키(미도시) 또는 소정의 사용자 입력(기설정된 음성명령, 제스처입력을 포함함)을 통해 운전자에게 공유 요청한 경우, 해당 영상(1101)은 먼저 이동 단말기(100)에 수신된다. 이때, 이동 단말기의 디스플레이부(151)에는 도시된 바와 같이 '기기(후석 디스플레이장치)로부터 지도 1 영상이 수신되었습니다'와 같은 메시지가 출력될 수 있다. 운전자가 공유 요청에 수락하면, 해당 영상(1101)에 대응되는 이미지 객체(1110), 즉 사용자 이미지가 차량 헤드 유닛(200a)의 디스플레이의 일 영역에 표시된다.

그리고, 운전자가 디스플레이에 표시된 이미지 객체(1110)를 소정 시간 응시하면, 해당 이미지 객체에 대응되는 컨텐츠 영상, 제 1 지도 데이터가 표시된다. 이때, 기존에 표시되는 길 안내 영상(1003)은 축소되어 제 1 지도 데이터와 구별된 영역에 계속 표시되거나 또는 백그라운드에서 실행될 수 있다.

이러한 상태에서, 동일한 영상표시장치, 즉 차량의 후석 디스플레이장치(200b)로부터 다른 컨텐츠 영상의 공유 요청이 수신되면, 상기 제어부(180)는 상기 새로운 영상의 공유 요청에 대응되는 알림 메시지를 차량 헤드 유닛(200a) 디스플레이의 일 영역에 팝업시킬 수 있다. 또는 도 12b에 도시된 바와 같이 이동 단말기의 디스플레이부(151)에 '기기(후석 디스플레이장치)로부터 지도 2 영상이 수신되었습니다'와 같은 메시지가 출력되고, 차량 헤드 유닛(200a) 디스플레이에 해당 디스플레이장치에 대응되는 이미지 객체(1110b)가 표시되도록 할 수 있다.

이와 같이, 동일 디스플레이장치로부터 일정 시간 간격을 두고 업데이트 영상이나 다른 영상(이하, '새로운 영상')의 공유 요청이 수신되고, 그에 대한 공유 수락 신호가 수신되면, 상기 제어부(180)는 도 12c의 (a)에 도시된 바와 같이 새로운 영상(1102")을 기존 영상(1101")위에 오버레이시켜서 출력하거나 또는 도 12c의 (b)에 도시된 바와 같이 새로운 영상(1102")과 기존 영상(1101")을 구별된 영역에 각각 표시되도록 할 수 있다.

한편, 새로운 영상의 공유 요청에 대해, 공유 거절 신호가 수신되면, 상기 제어부(180)는 공유 요청이 거절되었음을 알리는 메시지를 출력할 수 있다.

또한, 이상의 실시예들은 차량의 목적지 또는 경유지와 관련된 지도 데이터를 컨텐츠 영상의 예로 설명하였으나, 이에 한정되지 않으며, 차량내 영상표시장치가 소정의 서버(미도시)로부터 수신한 정보, 예를 들어 교통 정보를 다른 영상표시장치와 공유하는 경우에도 적용가능하다.

이상에서 살펴본 바와 같이, 본 발명의 실시예에 따른 이동 단말기 및 이동 단말기의 제어방법에 의하면, 운전자가 보고 있는 영상을 차량내 다른 동승자가 실시간으로 공유할 수 있고, 또한 동승자가 검색한 운행 경로와 관련된 정보를 운전자가 아이 트래킹(eye-tracking)을 통해 확인할 수 있도록 구현함으로써, 차량 운행 중에도 운전자의 주위 분산 행동이 최소화되어 안전 운행이 가능하고 별다른 조작없이 화면 제어가 가능하여 운전자에게 편의를 제공한다. 또한, 운전자와 동승자가 영상 공유를 통하여 인터랙션(interaction)을 수행함으로써, 운전자가 맞춤형 정보를 제공받을 수 있다.

또한, 본 명세서에 개시된 일 실시 예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.

상기와 같이 설명된 이동 단말기 및 이동 단말기의 동작방법은 상기 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims

단말기 본체;
차량내 제 1 및 제 2 영상표시장치와 접속하는 무선 통신부;
상기 접속된 제 1 영상표시장치와 상기 본체의 디스플레이부를 기준으로 소정 범위내에 있는 운전자의 시선이 향하는 방향을 감지하는 사용자 추적부; 및
영상 공유 모드 진입시, 상기 제 1 영상표시장치의 디스플레이에 표시되는 제 1 영상과 상기 디스플레이부에 표시되는 제 2 영상 중 상기 감지된 운전자의 시선이 향하는 방향에 대응되는 영상을 상기 접속된 제 2 영상표시장치로 전송하도록 상기 무선 통신부를 제어하는 제어부를 포함하는 것을 특징으로 하는 이동 단말기.
제1항에 있어서,
상기 제어부는,
기기 접속 모드 진입시, 상기 본체와 접속가능한 차량내 영상표시장치를 나타내는 식별 이미지를 상기 디스플레이부에 표시하고, 사용자 입력에 의하여 선택된 식별 이미지에 대응되는 영상표시장치가 상기 본체와 접속되도록 제어하는 것을 특징으로 하는 이동 단말기.
제2항에 있어서,
상기 제어부는,
차량내 영상표시장치의 상대적 위치를 고려하여 상기 식별 이미지를 표시하고, 상기 선택된 식별 이미지에 대한 체크 표시가 나타나도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 이동 단말기.
제2항 또는 제3항에 있어서,
상기 제어부는,
상기 감지된 운전자의 시선이 고정된 위치의 화면정보를 상기 선택된 식별 이미지에 대응되는 영상표시장치로 실시간 전송하고,
상기 선택된 식별 이미지에 대응되는 영상표시장치에 기설정된 시간 동안 사용자의 시선이 감지되지 않으면, 상기 화면정보가 더 이상 전송되지 않도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제1항에 있어서,
상기 사용자 추적부는,
제 1 카메라를 통해 상기 제 1 영상표시장치의 디스플레이를 기준으로 촬영된 운전자의 이미지와 제 2 카메라를 통해 상기 본체의 디스플레이부를 기준으로 촬영된 운전자의 이미지를 분석하여 운전자의 시선이 고정된 위치를 감지하고,
상기 제어부는,
기설정된 음성명령이 입력되면 상기 영상 공유 모드로 진입하여, 상기 운전자의 시선이 고정된 위치에 표시되는 영상을 상기 제 2 영상표시장치로 전송하도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제1항에 있어서,
상기 감지된 운전자의 시선이 상기 제 2 영상에 고정된 경우,
상기 제어부는,
상기 제 2 영상표시장치에 상기 제 2 영상의 표시 여부를 묻는 메시지를 전송하고, 상기 전송된 메시지에 대한 응답 신호가 수신되면, 상기 제 2 영상을 상기 제 2 영상표시장치에 실시간으로 전송하도록 제어하는 것을 특징으로 하는 이동 단말기.
제 1 항에 있어서,
상기 제 1 영상표시장치는 차량 헤드 유닛이고,
상기 제 1 영상은 차량의 전방시야 대응되는 외부 영상이거나 상기 차량의 운행 경로를 안내하는 영상이고, 상기 제 2 영상은 사용자 조작에 대응되는 컨텐츠와 관련된 영상인 것을 특징으로 하는 이동 단말기.
제1항에 있어서,
상기 제어부는,
상기 제 2 영상표시장치로부터 상기 전송된 영상에 소정의 입력이 포함된 업데이트 영상을 수신하고, 수신된 업데이트 영상을, 영상 공유를 수락한 상기 제 1 영상표시장치에 전송하도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제1항에 있어서,
상기 제어부는,
상기 영상 공유 모드 진입시, 상기 제 2 영상표시장치로부터 전송되는 컨텐츠 영상을 수신하고,
상기 제 1 영상표시장치로부터 영상 공유 수락이 수신되면, 상기 제 1 영상표시장치의 디스플레이에 상기 컨텐츠 영상에 대응되는 이미지 객체가 표시되도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 제어부는,
상기 제 1 영상표시장치로부터 영상 공유 수락시, 상기 디스플레이에서 운전자의 시선이 고정된 위치에 상기 컨텐츠 영상에 대응되는 이미지 객체가 표시되도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 컨텐츠 영상에 대응되는 이미지 객체는 상기 컨텐츠 영상의 대표 이미지 및 상기 제 2 영상표시장치의 사용자 이미지 중 적어도 하나를 포함하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 제어부는,
상기 제 1 영상표시장치의 디스플레이에 상기 컨텐츠 영상에 대응되는 이미지 객체가 표시된 상태에서 기설정된 시간 동안 운전자의 시선이 상기 이미지 객체에 고정되면,
상기 이미지 객체를 상기 컨텐츠 영상으로 변경하여 표시하도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 제어부는,
상기 제 1 영상표시장치의 디스플레이에, 상기 컨텐츠 영상에 대응되는 제 1 이미지 객체와 제 3 영상표시장치로부터 수신된 영상에 대응되는 제 2 이미지 객체가 표시된 상태에서,
상기 감지된 운전자의 시선이 상기 제 1 이미지 객체에 기설정된 시간 동안 고정되면, 상기 컨텐츠 영상을 상기 디스플레이에 확대하여 표시하고 상기 제 2 이미지 객체가 상기 디스플레이로부터 사라지도록 제어하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 제어부는,
상기 제 1 영상표시장치의 디스플레이에, 상기 컨텐츠 영상에 대응되는 제 1 이미지 객체와 제 3 영상표시장치로부터 수신된 영상에 대응되는 제 2 이미지 객체가 표시된 상태에서,
상기 제 1 및 제 2 이미지 객체 중 적어도 하나에 제 1 입력이 감지되면 해당 이미지 객체에 대응되는 영상을 확대시켜서 표시하도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 제어부는,
상기 제 1 영상표시장치의 디스플레이에, 상기 컨텐츠 영상과 제 3 영상표시장치로부터 수신된 영상이 표시된 상태에서,
상기 컨텐츠 영상과 상기 제 3 영상표시장치로부터 수신된 영상 중에서 적어도 하나에 제 2 입력이 감지되면 해당 영상이 상기 디스플레이에서 사라지도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 제어부는,
상기 제 1 영상표시장치의 디스플레이에, 상기 컨텐츠 영상에 대응되는 제 1 이미지 객체가 표시된 상태에서 잠금 기능이 활성화되면,
상기 컨텐츠 영상이 상기 디스플레이에 계속 표시되도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제9항에 있어서,
상기 제어부는,
상기 제 1 영상표시장치의 디스플레이에, 상기 컨텐츠 영상에 대응되는 제1 이미지 객체가 표시된 상태에서 상기 제 2 영상표시장치로부터 새로운 영상의 공유 요청이 수신되면,
상기 새로운 영상의 공유 요청에 대응되는 알림 메시지를 상기 디스플레이의 일 영역에 출력하도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
제17항에 있어서,
상기 제어부는,
상기 새로운 영상의 공유 요청에 대해 상기 제 1 영상표시장치로부터 수락 신호가 수신되면, 상기 새로운 영상을 기존 영상위에 오버레이시켜서 출력하고,
상기 새로운 영상의 공유 요청에 대해 상기 제 1 영상표시장치로부터 거절 신호가 수신되면, 상기 제 2 영상표시장치의 디스플레이에 공유 요청이 거절되었음을 알리는 메시지를 출력하도록 상기 무선 통신부를 제어하는 것을 특징으로 하는 이동 단말기.
차량내 제 1 및 제 2 영상표시장치와 접속하는 단계;
상기 접속된 제 1 영상표시장치와 단말기 본체의 디스플레이부를 기준으로 소정 범위내에 있는 운전자의 시선이 향하는 방향을 감지하는 단계;
영상 공유 모드에의 진입 여부를 판단하는 단계; 및
영상 공유 모드 진입시, 상기 접속된 제 1 영상표시장치에 표시되는 제 1 영상과 상기 디스플레이부에 표시되는 제 2 영상 중 상기 감지된 운전자의 시선이 향하는 방향에 대응되는 영상을 상기 접속된 제 2 영상표시장치로 전송하는 단계를 포함하는 것을 특징으로 하는 이동 단말기의 제어방법.
제19항에 있어서,
상기 제 2 영상표시장치로부터 상기 전송된 영상에 소정의 입력이 포함된 업데이트 영상을 수신하는 단계; 및
상기 업데이트 영상을, 영상 공유를 수락한 상기 제 1 영상표시장치에 전송하는 단계를 더 포함하는 것을 특징으로 하는 이동 단말기의 제어방법.