KR20130017269A

KR20130017269A - 스마트폰의 화면과 영상 및 오디오를 미러링 및 원격 제어하는 기능을 갖는 터미널 디스플레이 장치

Info

Publication number: KR20130017269A
Application number: KR1020110079607A
Authority: KR
Inventors: 박성일
Original assignee: 박성일
Priority date: 2011-08-10
Filing date: 2011-08-10
Publication date: 2013-02-20

Abstract

본 발명은 스마트폰의 성능과 편의성이 높아짐에 따라 사용자 응용 프로그램이 다양하게 많아지게 되고 사용자는 응용 프로그램의 동작을 다양한 환경에서 동작하기를 원하게 된다. 하지만 차량에서 GPS 장비인 내비게이션과 같은 장비의 경우 제품을 구입 후 제품 내에 포함된 응용 프로그램만을 사용할 수 있으며 추가적인 소프트웨어를 사용하려면 개발사에서 이를 지원해 주어야한다. 만약 사용자가 새로운 소프트웨어를 추가하거나 업그레이드를 하기를 원하더라도 대부분 자유롭게 할 수 없다. 이와는 달리 스마트폰은 성능이 우수하며 다양한 응용 프로그램을 사용자가 직접 설치하고 사용할 수 있으므로 편의성이 높다. 따라서 이러한 기기의 환경을 그대로 차량에서 사용한다면 다양한 사용자의 욕구를 충족하고 저렴한 비용으로 스마트폰의 환경을 사용할 수 있다. 본 발명에서는 이러한 부분을 해결할 수 있는 터미널 디스플레이 장치의 개발에 관한 것이다.

Description

스마트폰의 화면과 영상 및 오디오를 미러링 및 원격 제어하는 기능을 갖는 터미널 디스플레이 장치{ The terminal display devices mirroring and remote control with smartphone's screen, video and audio }

본 발명은 스마트폰의 화면과 영상 및 오디오의 출력과 원격제어 기능을 터미널 디스플레이 장치에서 동일하게 사용하기 위한 장치에 관한 것이다.

본 발명의 터미널 디스플레이 장치는 스마트폰의 성능과 편의성이 높아짐에 따라 사용자 응용 프로그램이 다양하게 많아지게 되고 사용자는 응용 프로그램의 동작을 다양한 환경에서 동작하기를 원하는 요구가 많아지고 있음에 착안하여 개발하게 되었다. 예를 들어 차량에서 GPS 장비인 내비게이션과 같은 장비는 제품을 구입 후 제품 내에 포함된 응용 프로그램만을 사용할 수 있으며 추가적인 소프트웨어를 사용하려면 개발사에서 이를 지원해 주어야한다. 만약 사용자가 새로운 소프트웨어를 추가하거나 업그레이드를 하기를 원하더라도 대부분 자유롭게 할 수 없다. 이와는 달리 스마트폰은 성능이 우수하며 다양한 응용 프로그램을 사용자가 직접 설치하고 사용할 수 있으므로 편의성이 높다. 따라서 이러한 기기의 환경을 그대로 차량에서 사용한다면 다양한 사용자의 용구를 충족하고 저렴한 비용으로 스마트폰의 환경을 사용할 수 있다.

본 발명은 기존에 사용하던 차량용 내비게이션 시스템과 같이 사용자가 자주 사용하는 기기에서 스마트폰의 기능을 동일하게 사용하기 위한 것으로 본 발명의 터미널 디스플레이 장치는 스마트폰의 영상과 오디오를 장치에 전송받아 출력하며 터미널 장치에서 스마트폰의 조작을 위해 장치에서 화면의 원격제어 정보를 스마트폰에 전송해야 한다.

본 발명은 이러한 데이터의 전송 문제를 해결하는데 여러 방식의 전송 프로토콜을 사용하여 사용자의 편의성을 높이고자 한다.

본 발명에서 스마트폰에서 영상과 오디오 출력이 내장된 전용의 출력단자를 통해 HDMI 전송 방식으로 출력되므로 이를 입력으로 받아 디스플레이 장치와 스피커에 연결하고 터미널 디스플레이 장치에 입력된 화면 조작 정보를 스마트폰에 무선으로 전송하도록 하여 사용자가 디스플레이 장치를 스마트폰처럼 사용할 수 있게 된다.

본 발명을 통해 얻는 효과는 스마트폰의 응용 소프트웨어를 개발하는 개발 수요가 높아지고 내비게이션 개발업체에서 스마트폰에서 높은 성능과 기능을 보장하여 단말기를 개발하는 비용을 줄일 수 있다. 또한 사용자는 스마트폰에서 지원하는 모든 응용 소프트웨어를 사용할 수 있으므로 기존의 내비게이션의 한계를 극복하고 편의성이 높아진다. 사용자 입장에서 적은 비용으로 스마트폰과 동일하게 사용이 가능해진다.

도 1 은 본 발명에 따라 스마트폰의 터미널 디스플레이 장치와 연결시 데이터 전송 형태를 나타낸 구성도이다.
도 2 는 본 발명에 따라 터미널 디스플레이 장치를 하드웨어 회로로 설계시 각 회로의 구성과 반도체들의 연결 형태를 나타낸 구성도이다.
도 3은 본 발명에 따라 터미널 디스플레이 장치에서 화면 조작시 입력된 입력 좌표를 전송하는 순서도이다.

이하 첨부된 도면을 참조하면서 본 발명에 따른 스마트폰의 연결 및 사용에 대해 상세하게 설명한다.

도 1 을 참조하면 터미널 디스플레이 장치(1-4)는 스마트폰(1-1)과 데이터를 주고 받는 구조를 가지며 스마트폰(1-1)은 영상과 오디오를 출력하는 HDMI 출력 (1-3)를 통해 HDMI 입력 단자(1-6)으로 입력받아 터미널 디스플레이 장치(1-4)에 출력한다.

터미널 디스플레이 장치(1-4)에 사용자가 디스플레이 화면상에 나타나는 부분에 터치 값을 입력하면 무선 방식으로 터치 좌표 무선 송출(1-5) 장치를 통해 터치좌표 무선 수신(1-2) 장치로 데이터를 전송하게 된다. 무선으로 터치 좌표를 송출하는 방식은 무선랜 방식 또는 블루투스 방식으로 터치 좌표를 전송할 수 있다.

도 2 를 참조하면 터미널 디스플레이 장치의 하드웨어 회로도의 블록에서 마이크로 컨트롤러(2-1)은 각 회로의 직접 반도체들의 설정과 화면 터치 감지기(2-7)에서 입력 받은 데이터를 무선으로 블루투스 통신 모듈(2-9) 또는 무선 통신 통신 모듈(2-10)으로 스마트폰에 데이터를 전달하는 역할을 한다. 또한 마이크로 컨트롤러(2-1)을 동작하기 위해 필요한 하드웨어인 메모리로 동적 메모리(2-12), 정적 메모리(2-11)을 사용하게 된다.

HDMI 선택기(2-2)는 외부에서 들어오는 유선 HDMI 입력단자(2-4)의 신호와 무선 수신기(2-14)와 무선 HDMI 변환기(2-13)를 통해 들어오는 신호 그리고 마이크로 컨트롤러에서 전송하는 HDMI 신호중 하나를 선택하여 HDMI 출력 단자(2-3), HDMI DVI 변환기(2-17), HDMI 오디오 변환기(2-18)로 내보내게 된다. 이때 HDMI 출력 단자(2-3)과 DVI 출력 단자(2-16)은 LCD 디스플레이(2-21)과 연결하여 화면 출력을 하게 된다.

마이크로 컨트롤러(2-1)에서 외부의 오디오이나 오디오 정보를 받아 들이기 위해서 마이크(2-21)와 오디오코덱(2-20)을 사용하여 다양한 포멧으로 오디오 데이터를 받을 수 있다.

본 발명의 터미널 디스플레이 장치는 외부의 HDMI 신호가 없을 경우 SD/MMC 카드 단자(2-15)에서 음악 파일과 사진, 동영상 파일을 재생할 수 있으며, 경우에 따라 USB 호스트 단자(2-6)에 연결된 메모리 스틱를 통해서 데이터를 읽고 쓸 수 있다. USB 디바이스단자(2-5)은 USB 호스트 장치와의 통신을 위해 사용된다.

도 3 은 터미널 디스플레이 장치에 사용자가 화면을 터치하여 그 값을 처리하는 순서를 나타내었다. 먼저 시스템의 초기화가 모두 끝난 상태에서 화면 입력을 시작(3-1)과 3-2에서 계속 기다린다. 만약 화면에 입력이 있으면 좌표계산(3-3)단계로 넘어간다. 좌표계산(3-3)은 스마트폰의 화면 크기와 HDMI 출력을 통해 LCD 디스플레이에 출력된 화면의 크기가 다르기 때문에 이를 보정해주는 계산이 수행된다. 이렇게 계산된 값을 무선전송(3-4) 단계에서 무선랜이나 블루투스를 통해서 무선으로 스마트폰에 전달되게 된다. 이 과정을 끝마치면 다시 화면입력(3-2)단계로 되돌아 가게 된다.

1-1 : 스마트폰
1-2 : 무선 수신 장치
1-3 : HDMI 출력 단자
1-4 : 터미널 디스플레이 장치
1-5 : 무선 송출 장치
1-6 : HDMI 입력 단자
2-1 : 터미널 디스플레이 장치 컨트롤용 마이크로 컨트롤러
2-2 : HDMI 입력을 선택하여 HDMI의 출력을 결정하는 HMDI 선택기
2-3 : HDMI 출력 단자
2-4 : HDMI 입력 단자
2-5 : USB 디바이스 단자
2-6 : USB 호스트 단자
2-7 : 화면 터치 감지기
2-8 : 화면 터치 신호 입력 단자
2-9 : 블루투스 통신 모듈
2-10 : 무선 통신 모듈
2-11 : 정적 메모리
2-12 : 동적 메모리
2-13 : 무선 HDMI를 위한 무선 HDMI 변환기
2-14 : 무선 HDMI 수신기
2-15 : SD/MMC 카드 단자
2-16 : DVI 출력 단자
2-17 : HDMI 신호의 DVI 변환기
2-18 : HDMI 신호의 오디오 신호 변환기
2-19 : 오디오 신호 출력을 위한 스피커
2-20 : 외부 오디오 신호를 입력받아 사운드 포멧을 생성하는 오디오 코덱
2-21 : 외부 오디오 신호 입력을 위한 마이크
2-22 : 화면 출력을 위한 LCD 디스플레이

Claims

터미널 디스플레이 장치에 있어서, 스마트폰의 화면, 영상, 사운드에 대한 HDMI 출력을 LCD 디스플레이장치 또는 LED 디스플레이 장치에 전송하는 수단과, 스마트폰의 HDMI 출력을 HDMI 오디오 변환기를 통하여 스피커로 전송하는 수단과, LCD 디스플레이 장치 또는 LED 디스플레이 장치에 장착된 화면 터치 감지기로부터의 터치 감지 정보를 받아 좌표값을 계산하는 방식과, 계산된 터치 감지 정보를 무선통신 모듈 또는 블루투스 통신 모듈로 전송하는 것과, 스마트폰의 응용 프로그램에서 터치 감지 및 원격제어 정보를 인식하여 스마트폰의 터치 정보로 활용하도록 하는 수단으로 구성됨을 특징으로 하는 터미널 디스플레이 장치.
제 1 항에서 스마트폰의 화면, 영상, 사운드에 대한 HDMI 출력을 LCD 디스플레이 장치 또는 LED 디스플레이 장치에 전송하는 수단에 대해 스마트 폰의 HDMI 출력을 본 발명의 터미널 디스플레이 장치에 전송하는 방법으로 유선 HDMI 통신과 USB 통신 및 무선 HDMI 통신, 무선랜 방식을 통하여 전송받을 수 있는 것을 특징으로 하는 터미널 디스플레이 장치
제 1 항에서 LCD 디스플레이 장치 또는 LED 디스플레이 장치에 장착된 화면 터치 감지기로부터의 터치 감지 정보를 받아 좌표값을 계산하는 방식에서 스마트폰의 화면 크기와 터미널 디스플레이 장치의 화면 크기가 서로 다르므로 화면 비율에 맞추어 터치 감지 정보를 계산하고 스마트폰으로 터치 좌표의 정보를 전송하는 것을 특징으로 하는 터미널 디스플레이 장치
제 1 항에서 계산된 터치 감지 정보를 무선통신 모듈 또는 블루투스 통신 모듈로 전송하는 방식에서 터미널 디스플레이에서 계산된 터치 감지 정보를 스마트폰으로 전송하는 경우 전송 방식에 있어서 무선랜 프로토콜과 블루투스 프로토콜을 사용하는 무선통신 모듈을 사용하여 터치 좌표의 정보를 전송하는 것을 특징으로 하는 터미널 디스플레이 장치.
제 1 항에서 스마트폰의 응용 프로그램에서 터치 감지 및 원격제어 정보를 인식하여 스마트폰의 터치 정보로 활용하도록 하는 수단에서 스마트폰의 응용 프로그램은 스마트폰의 운영 체제상에서 백그라운드로 서비스되며 실시간으로 터미널 디스플레이로부터 받은 좌표 정보를 스마트폰의 화면에서 입력받는 터치 정보로 대체하여 사용되도록 하는 방식을 특징으로 하는 터미널 디스플레이 장치.