KR20160089588A - Interface apparatus of HMD using a smartphone and the method thereof - Google Patents

Interface apparatus of HMD using a smartphone and the method thereof Download PDF

Info

Publication number
KR20160089588A
KR20160089588A KR1020150008818A KR20150008818A KR20160089588A KR 20160089588 A KR20160089588 A KR 20160089588A KR 1020150008818 A KR1020150008818 A KR 1020150008818A KR 20150008818 A KR20150008818 A KR 20150008818A KR 20160089588 A KR20160089588 A KR 20160089588A
Authority
KR
South Korea
Prior art keywords
smartphone
control signal
external input
control information
control
Prior art date
Application number
KR1020150008818A
Other languages
Korean (ko)
Other versions
KR101693689B1 (en
Inventor
서용호
김영준
이현태
Original Assignee
목원대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 목원대학교 산학협력단 filed Critical 목원대학교 산학협력단
Priority to KR1020150008818A priority Critical patent/KR101693689B1/en
Publication of KR20160089588A publication Critical patent/KR20160089588A/en
Application granted granted Critical
Publication of KR101693689B1 publication Critical patent/KR101693689B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q9/00Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephone Function (AREA)

Abstract

The present invention relates to an external input device for HMD using a remote control in HMD using a smartphone and a method using the same. The external input device for HMD includes an input means such as a remote control arranged in a smartphone installed in HMD and transmits control information to the smartphone by using an external input connection means to control the smartphone or smartphone content. The external input device for HMD includes the input means and the external input connection means.

Description

스마트폰을 이용한 HMD의 외부 입력장치 및 이를 이용한 방법{Interface apparatus of HMD using a smartphone and the method thereof}[0001] The present invention relates to an external input device of an HMD using a smart phone and a method of using the same,

본 발명은 스마트폰을 이용한 HMD(head mounted display)에서 스마트폰에 유선 또는 무선으로 제어 신호를 전달하는 HMD용 외부 입력장치 및 이를 이용한 방법의 제공에 관한 것이다. The present invention relates to an external input device for an HMD for transferring a control signal from a head mounted display (HMD) using a smart phone to a smartphone in a wired or wireless manner, and a method using the same.

최근 HMD 형태의 가상현실 시스템들은 여러 가지 형태로 개발되고 있으며 다양한 응용성에 대해 주목받고 있으나 고가로 제조되어 활용이 제한적이다. 이에 대한 해결책으로, 스마트폰을 이용하여 HMD 형태로 가상현실 시스템들을 제조하여 가격도 낮추고 스마트폰의 다양한 콘텐츠를 이용하는 방향이 제시되고 있다. 스마트폰을 이용한 HMD는 헤어밴드를 이용해 머리에 착용하는 방식으로서, 외부로의 시야를 차단하여 콘텐츠에 몰입감을 제공하는 것이 특징이다.Recently, HMD-type virtual reality systems have been developed in various forms and have been attracting attention for various applications, but they are manufactured at a high price and their utilization is limited. As a solution to this problem, it is proposed to manufacture virtual reality systems in the form of an HMD using a smart phone, lower the price, and use various contents of the smart phone. The smartphone-based HMD is a method of wearing on the head using a hair band, which is characterized by providing a feeling of immersion by blocking the view to the outside.

스마트폰을 이용하는 HMD 방식은 스마트폰의 화면을 디스플레이로 이용하는 것으로서, 안경, 헤어밴드 또는 헬멧의 고글 앞쪽 트레이에 스마트폰을 장착하거나 삽입하여, 스마트폰 화면을 렌즈로 초점을 맞추어 대화면으로 볼 수 있도록 하는 것이다. The HMD method using a smartphone uses a screen of a smartphone as a display, and a smartphone is inserted or inserted in the front tray of a goggle of a spectacle, a hair band or a helmet so that a smartphone screen can be focused on a lens .

스마트폰의 제어 입력은 터치스크린의 터치 동작에 의하여 입력되기 때문에 HMD로 이용하여 착용할 경우 제어 명령의 입력이 어려워진다. 이에 대한 해결방법으로 무선 방식을 이용한 입력 장치를 사용할 수 있으나 이를 위한 추가적인 무선 입력수단의 개발이 필요하다.Since the control input of the smartphone is inputted by the touch operation of the touch screen, it is difficult to input the control command when it is used as the HMD. As a solution to this problem, it is possible to use an input device using a wireless system, but it is necessary to develop an additional wireless input means.

스마트폰의 오디오 출력단자는 이어폰과 연결되어 통화 및 음악을 들을 수 있는 기본적인 장치 중 하나이다. 오디오 출력단자는 쌍방향 신호를 송수신할 수 있어 스마트폰을 이용해 외부에 연결하여 정보를 전송하여 주변기기를 제어하고, 반대로 외부의 입력신호를 스마트폰에 전달할 수 있는 인터페이스가 가능하다. The audio output terminal of the smartphone is connected to the earphone and is one of the basic devices that can listen to the call and music. The audio output terminal can send and receive bi-directional signals, and it is possible to connect external devices using a smart phone to transmit information to control peripheral devices, and conversely, an external input signal can be transmitted to a smartphone.

특허문헌 1은 스마트폰에 리모컨 기능을 부가한 시스템에 관한 것으로 리모컨으로 스마트폰을 제어하고 콘텐츠를 구동하는 기능은 구비되지 않았다.Patent Document 1 relates to a system in which a remote control function is added to a smartphone, and a function of controlling a smart phone and driving content is not provided with a remote control.

1. 한국 공개특허 제10-2010-0026941호(2010. 03. 10.).1. Korean Patent Publication No. 10-2010-0026941 (2010. 03. 10.).

상기와 같은 문제점을 해결하고자 본 발명은 스마트폰을 이용한 HMD에서 스마트폰을 제어하기 위한 저가의 외부 입력장치를 제공하고자 한다.In order to solve the above problems, the present invention provides a low-cost external input device for controlling a smartphone in an HMD using a smart phone.

상기의 해결하려는 과제를 위한 본 발명에 따른 스마트폰을 이용한 HMD의 외부 입력장치는, 스마트폰을 제어하기 위한 입력수단 및 상기 입력수단으로부터 제어 정보를 수신하여 제어 신호로 변환하고 변조하여, 스마트폰의 오디오 출력단자로 송신하는 외부입력 접속수단을 포함하여, 스마트폰의 오디오 출력단자에서 수신된 변조 신호에서 제어 신호를 분리하여 스마트폰을 제어하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided an external input device for an HMD using a smartphone, comprising: input means for controlling a smartphone; control information received from the input means; And an external input connection means for transmitting the control signal to the audio output terminal of the smartphone, wherein the control signal is separated from the modulated signal received at the audio output terminal of the smartphone to control the smartphone.

스마트폰을 이용한 HMD의 외부 입력장치는, 스마트폰을 제어하기 위한 입력수단 및 상기 입력수단으로부터 제어 정보를 수신하여 제어 신호로 변환하고 변조하여, 스마트폰의 무선모듈로 송신하는 외부입력 접속수단을 포함하여, 스마트폰의 무선모듈에서 수신된 변조 신호에서 제어 신호를 분리하여 스마트폰을 제어하는 것을 특징으로 한다.An external input device of an HMD using a smart phone includes an input means for controlling a smartphone and an external input connection means for receiving control information from the input means and converting the received control information into a control signal and modulating the control signal, And the smart phone is controlled by separating the control signal from the modulated signal received by the wireless module of the smartphone.

상기 입력수단은 적외선으로 송신하는 리모컨인 것을 특징으로 한다.And the input means is a remote controller for transmitting infrared rays.

상기 입력수단은 조이스틱인 것을 특징으로 한다.The input means is a joystick.

상기 외부입력 접속수단은 마이크로 처리유닛 포함하고, 상기 마이크로 처리유닛에서 구동되는 소프트 모뎀에서 제어 신호를 변조하여 전송하고, 상기 스마트폰은 상기 제어 신호를 소프트 모뎀으로 복조하여 제어 정보로 분리하는 것을 특징으로 한다.The external input connection means includes a micro processing unit and modulates and transmits a control signal in a soft modem driven by the micro processing unit. The smart phone demodulates the control signal into a soft modem and separates the control signal into control information .

제어 정보의 제어 신호 전환은 외부입력 접속수단에서 지정된 시간 내에 동일키(key)가 입력되었을 경우 해당키(key)에 매핑된 다른 알파벳 식별 정보로 전환하는 것을 특징으로 한다.The control signal switching of the control information is switched to another alphabet identification information mapped to the corresponding key when the same key is input within a time designated by the external input connection means.

상기 HMD용 외부입력 접속수단은 동글 형태로 HMD에 부착하여 사용하는 것을 특징으로 한다.And the external input connection means for the HMD is attached to the HMD in the form of a dongle.

스마트폰을 이용한 HMD의 제어 방법은, 스마트폰이 유선 또는 무선으로 외부입력 접속수단과 통신하여 제어 정보를 받기 위한 준비 단계, 리모컨 또는 조이스틱에서 제어 정보를 입력하여 유선 또는 무선 외부입력 접속수단에 송신하는 단계, 상기 유선 또는 무선 외부입력 접속수단에서 제어 정보를 제어 신호로 전환하는 단계, 유선 또는 무선 외부입력 접속수단에서 제어 신호를 변조하는 단계, 변조된 제어 신호를 스마트폰에 전송하는 단계, 스마트폰에서 제어 신호를 수신하는 단계, 수신된 제어 신호에서 제어 정보를 식별하여 분리하는 단계 및 상기 제어 정보로 콘텐츠를 제어하는 단계를 포함하는 것을 특징으로 한다.A method of controlling an HMD using a smart phone includes a preparation step for receiving control information by a smart phone communicating with an external input connection means in a wired or wireless manner, inputting control information in a remote control or a joystick and transmitting the control information to a wired or wireless external input connection means Converting the control information into a control signal at the wired or wireless external input connection means, modulating a control signal at the wired or wireless external input connection means, transmitting the modulated control signal to the smart phone, Receiving the control signal from the phone, identifying and separating the control information from the received control signal, and controlling the content with the control information.

본 발명은 스마트폰을 이용한 HMD에서 리모컨 또는 조이스틱을 이용해 제어 정보를 입력하고 오디오 신호에 제어 신호를 합성하고 오디오 잭을 이용해 전송하여 스마트폰의 콘텐츠를 제어할 수 있는 수 있는 장점이 있다.The present invention has an advantage of being able to control contents of a smart phone by inputting control information using a remote controller or a joystick in a HMD using a smart phone, synthesizing a control signal to an audio signal, and transmitting the control signal using an audio jack.

본 발명은 스마트폰을 이용한 HMD에서 리모컨 또는 조이스틱을 이용해 제어 정보를 입력하고 블루투스 통신으로 무선으로 제어 신호를 전송하여 스마트폰의 콘텐츠를 제어할 수 있는 수 있는 장점이 있다. The present invention has an advantage of being able to control contents of a smart phone by inputting control information using a remote controller or a joystick in a HMD using a smart phone and wirelessly transmitting a control signal through Bluetooth communication.

본 발명은 마이크로 처리유닛에 구동되는 소프트 모뎀을 이용하기 때문에 비교적 저가로 외부에서 스마트폰을 제어할 수 있는 장점이 있다.Since the present invention uses a soft modem driven by a micro processing unit, it has an advantage of being able to control a smart phone from the outside at a relatively low cost.

도 1은 스마트폰을 이용한 HMD의 개략도.
도 2는 유선 연결 HMD용 외부 입력장치의 구성도.
도 3은 리모컨 입력수단의 키 패널.
도 4는 HMD용 외부 입력장치의 동작 플로 차트.
도 5는 무선 연결 HMD용 외부 입력장치의 개략도.
도 6은 무선 연결 HMD용 외부입력 접속수단의 구성도.
1 is a schematic view of an HMD using a smartphone;
2 is a block diagram of an external input device for a wired connection HMD;
3 is a key panel of the remote control input means;
4 is an operational flow chart of an external input device for an HMD.
5 is a schematic diagram of an external input device for a wireless connection HMD;
6 is a configuration diagram of an external input connection means for a wireless connection HMD;

이하 본 발명의 실시를 위한 구체적인 실시예를 도면을 참고하여 설명한다. 예시된 도면은 발명의 명확성을 위하여 핵심적인 내용만 확대 도시하고 부수적인 것은 생략하였으므로 도면에 한정하여 해석하여서는 아니 된다.Hereinafter, embodiments of the present invention will be described with reference to the drawings. The drawings illustrate only the essential features for the sake of clarity of the invention and are not to be construed as limiting the drawings.

도 1은 본 발명에 따른 스마트폰을 이용한 HMD의 개략도로서, 스마트폰의 오디오 출력단자와 연결 또는 무선 연결 외부입력 접속수단(20, 50), 상기 외부입력 접속수단에 제어 신호를 보내는 입력수단(10) 및 스마트폰(30)으로 구성된다. FIG. 1 is a schematic diagram of an HMD using a smartphone according to the present invention. The HMD is connected to an audio output terminal of a smart phone or to an external input connection means 20 or 50 for wireless connection, an input means for sending a control signal to the external input connection means 10) and a smartphone 30.

스마트폰은 HMD의 디스플레이 역할을 하는 것으로서, 간편하고 저가의 HMD 구현을 위해 안경의 렌즈 앞에 설치할 수 있지만 스마트폰의 무게로 불편함을 느낄 수 있으므로 헤어밴드형 또는 헬멧형의 안경(고글) 앞쪽에 장착하는 것이 사용자에게 편리하다. 스마트폰은 헤어밴드형 또는 헬멧형의 안경(고글) 앞쪽에 설치된 트레이에 스마트폰을 장착하거나 삽입할 수 있다. 이때 눈과 가까운 스마트폰의 화면을 보기 위하여 렌즈를 사용하여 초점을 맞추면 대화면으로 선명하게 스마트폰 화면을 감상할 수 있다. 스마트폰에 디스플레이 되는 콘텐츠가 좌우를 구분하여 디스플레이 된다면 3D로도 감상할 수 있게 된다. The smartphone acts as the display of the HMD. It can be installed in front of the lens of the eyeglasses for simple and inexpensive HMD implementation. However, since the weight of the smart phone may feel uncomfortable, It is convenient for the user to install. Smartphones can be equipped with smartphones or inserted into trays installed in front of hairband or helmet type goggles. At this time, if you focus using the lens to see the screen of the smartphone close to the eyes, you can enjoy the smart phone screen clearly by the big screen. If the contents displayed on the smartphone are displayed separately from the left and right, they can be viewed in 3D.

스마트폰의 제어 입력은 터치스크린의 터치 동작에 의하여 입력되기 때문에 HMD로 이용하여 착용할 경우 제어 명령의 입력이 어려워진다. 이에 대한 해결방법으로 스마트폰에 기본적으로 내장된 WiFi나 블루투스 무선 방식을 이용한 입력 장치를 사용할 수 있으나 이를 위한 추가적인 무선 입력수단의 개발이 필요하다.Since the control input of the smartphone is inputted by the touch operation of the touch screen, it is difficult to input the control command when it is used as the HMD. As a solution to this problem, it is possible to use an input device using a built-in WiFi or Bluetooth wireless system in a smart phone, but it is necessary to develop an additional wireless input means.

도 2는 발명에 따른 스마트폰을 이용한 유선 연결 HMD용 외부 입력장치의 구성도를 나타내며, 본 발명에서는 스마트폰의 오디오 출력단자와 흔하게 사용되는 TV 리모콘과 같은 입력수단을 이용할 수 있도록 저가의 별도 외부입력 접속수단을 제공하고자 한다.2 is a block diagram illustrating an external input device for a wired connection HMD using a smartphone according to the present invention. In the present invention, a low-cost external device such as a TV remote control, Input connection means.

외부입력 접속수단(20)은 적외선 수신모듈(21), 마이크로 처리유닛(22)(MPU), 오디오 출력단자, 임베디드 모듈 및 전원공급 모듈 등과 마이크로 처리유닛에서 구동되는 소프트 모뎀 등으로 구성된다. 외부입력 접속수단은 오디오 잭으로 스마트폰에 연결되어 입력수단의 제어 정보를 스마트폰에 전송한다. 상기 소프트 모뎀은 스마트폰과 외부입력 접속수단에서 구동된다. The external input connecting means 20 is constituted by an infrared receiving module 21, a micro processing unit 22 (MPU), an audio output terminal, an embedded module and a power supply module, and a soft modem driven by a micro processing unit. The external input connection means is connected to the smartphone through an audio jack and transmits control information of the input means to the smartphone. The soft modem is driven by a smart phone and an external input connection means.

외부입력 접속수단(20)은 스마트폰과 오디오 잭으로 연결되어 있으며 적외선으로 수신된 제어 정보를 소프트 모뎀에서 생성되는 오디오 신호에 제어 신호를 합성하여 전송한다. 상기 외부입력 접속수단은 동글 형태로 HMD에 부착되어 사용할 수 있다.The external input connection means 20 is connected to the smartphone and the audio jack, and combines the control information received via the infrared with the control signal to the audio signal generated by the soft modem. The external input connection means may be attached to the HMD in the form of a dongle.

상기 입력수단(10)은 전자제품에 제어용으로 일반적으로 사용되는 리모콘과 조이스틱 등 손쉽게 구할 수 있는 모든 수단을 통칭한다. 리모콘은 TV, VCR, PC, 에어콘 등의 적외선으로 송신하는 리모콘이 될 수 있다.The input means 10 collectively refers to any means readily obtainable, such as a remote control and a joystick, which are generally used for control of electronic products. The remote controller may be a remote controller for transmitting infrared rays such as TV, VCR, PC, and air conditioner.

HMD용의 스마트폰 콘텐츠는 프로그램의 시작/종료, 되돌리기, 고속전진, 메뉴 리스트에서 찾기 등 on/off 버튼, 입력버튼, 방향키 등을 활용하면 충분히 제어할 수 있기 때문에 일반적인 TV 리모콘이나 조이스틱 등으로 충분히 제어 가능하다.Smartphone contents for HMD can be controlled sufficiently by using on / off button, input button, directional key such as program start / end, reverting, fast forward, menu list search, etc. Therefore, it is enough for general TV remote control or joystick Controllable.

검색 등과 같이 문자를 입력할 경우에는 도 3과 같이 리모컨에 있는 문자 또는 문자열을 입력하거나 단축키를 통해 입력한다. 주 문자열 명령어는 영어를 우선적으로 사용하고, 다음은 영어와 숫자의 조합, 한글 순으로 명령어를 규칙에 따라 사용한다. 영문 및 한글의 조합법은 스마트폰의 조합 방법을 따른다.When entering a character such as a search, input characters or a string on the remote controller as shown in FIG. 3 or input it through a shortcut key. The main string command uses English first, followed by a combination of English and numbers, followed by Hangul, followed by the command. The combination of English and Korean follows the combination of smartphones.

리모컨 명령어 입력은 단축키를 사용하여 입력 효율성을 높일 수 있다. 단축키의 예는 실행, 멈춤, 좌로 이동, 우로 이동 등과 같은 문자열을 1, 2, 3 또는 4 등으로 미리 입력된 명령어와 매칭하여 사용한다. Remote control command input can increase the input efficiency by using the shortcut key. An example of a shortcut key is to match a string such as run, pause, left shift, right shift with 1, 2, 3 or 4 pre-entered commands.

리모콘이나 조이스틱의 제어신호는 외부입력 접속수단에서 수신하여 오디오 신호와 같이 변조하고 오디오 출력단자를 통하여 스마트폰에 입력된다. 변조 신호는 신시사이저와 같은 프로그램을 사용할 수 있고 변조 신호는 오디오 신호와 구분하기 위하여 20kHz 이상의 주파수를 사용할 수 있다. The control signal of the remote controller or joystick is received by the external input connection means, modulated like an audio signal, and input to the smartphone through the audio output terminal. Modulation signals can use programs such as synthesizers, and modulated signals can use frequencies above 20 kHz to distinguish them from audio signals.

문자열 조합 프로그램은 알파벳 또는 한글을 처리하는 프로그램으로, 스마트폰이 내장된 HMD의 콘텐츠 제어를 위해 리모컨을 활용하는 데 있어서, 알파벳과 같은 문자 정보를 스마트폰 또는 휴대기기에 전달하는 것으로, 특히 알파벳은 한 번에 입력되는 것이 아니라, 리모컨의 숫자 버튼에 2~3개의 문자가 매핑 되어있어, 리모컨을 반복적으로 눌러 입력해 주어야 한다. 이 프로그램은 버튼 신호를 알파벳 신호로 매핑시키는 로직을 포함하고 제어 정보를 제어 신호로 변환한다.The string combination program is a program for processing alphabets or Korean characters. In order to utilize the remote control for controlling the contents of the HMD with the built-in smartphone, the character information such as alphabet is transmitted to a smart phone or a portable device. Instead of being input at once, two or three characters are mapped to the number buttons on the remote control, and you have to press the remote control repeatedly to input. The program includes logic to map the button signal to an alphabetic signal and converts the control information into a control signal.

변조된 제어 신호는 오디오 신호에 합성하여 스마트폰에 송신되고, 스마트폰의 소프트 모뎀에서 오디오 신호와 제어 신호를 분리하여 스마트폰 또는 스마트폰의 콘텐츠를 제어하는데 사용된다. The modulated control signal is synthesized with the audio signal and transmitted to the smartphone, and is used to control the content of the smartphone or smartphone by separating the audio signal and the control signal from the soft modem of the smartphone.

도 4는 본 발명의 플로 차트를 나타내며, 스마트폰을 이용한 HMD의 제어 방법은, 스마트폰이 외부입력 접속수단과 통신하여 제어 정보를 받기 위한 준비 단계, 리모컨 또는 조이스틱에서 제어 정보를 입력하여 외부입력 접속수단에 송신하는 단계, 상기 외부입력 접속수단에서 제어 정보를 제어 신호로 전환하는 단계, 유선 또는 무선 외부입력 접속수단에서 제어 신호를 변조하는 단계, 변조된 제어 신호를 스마트폰에 전송하는 단계, 스마트폰에서 제어 신호를 수신하는 단계, 수신된 제어 신호에서 제어 정보를 식별하여 분리하는 단계 및 상기 제어 정보로 콘텐츠를 제어하는 단계를 포함하여 실행한다. FIG. 4 shows a flowchart of the present invention. A method of controlling an HMD using a smartphone includes steps of preparing a smart phone for receiving control information by communicating with external input connection means, inputting control information in a remote control or a joystick, Transmitting the control signal to the connection means, switching the control information to the control signal in the external input connection means, modulating the control signal in the wired or wireless external input connection means, transmitting the modulated control signal to the smartphone, Receiving the control signal from the smart phone, identifying and separating the control information from the received control signal, and controlling the content with the control information.

도 5는 본 발명의 다른 실시예로서 블루투스를 이용한 HMD용 외부 입력장치를 나타내며, 무선 외부입력 접속수단(50), 리모컨(10) 또는 조이스틱(60)과 같은 입력수단, 스마트폰(30)으로 구성된다. FIG. 5 shows an external input device for an HMD using Bluetooth as another embodiment of the present invention, and includes input means such as a wireless external input connection means 50, a remote control 10 or a joystick 60, .

무선 외부입력 접속수단(50)은 스마트폰과 블루투스로 페어링하여 수신된 제어 정보를 스마트폰에 송신한다. 제어 정보의 입력, 변환과정은 유선일 경우의 외부입력 접속수단(20)과 동일하나, 제어 신호의 무선 송신과정에서 블루투스 통신의 주파수에 맞추어 변조/복조 과정을 수행한다. The wireless external input connection means 50 transmits the received control information to the smartphone by pairing with the smartphone and Bluetooth. The process of inputting and converting the control information is the same as that of the external input connection means 20 in the case of wire, but performs the modulation / demodulation process according to the frequency of the Bluetooth communication in the wireless transmission process of the control signal.

도 6은 무선 외부입력 접속수단(50)의 구성도를 나타내며, 무선 외부입력 접속수단은 마이크로 처리유닛, 리모컨(10), 리모컨의 탈부착 도크, 리모컨의 적외선 신호를 수신하는 적외선 모듈, 블루투스 통신을 지원하는 임베디드 모듈, 블루투스 모듈(31), 조이스틱 센서(60)를 연결하는 외부 센서 모듈 및 소프트 모뎀을 포함하여 구성된다.6 shows a configuration diagram of the wireless external input connection means 50. The wireless external input connection means includes a microprocessing unit, a remote control 10, a detachable dock for the remote control, an infrared module for receiving an infrared signal of the remote control, An embedded module to be supported, a Bluetooth module 31, an external sensor module for connecting the joystick sensor 60, and a soft modem.

리모컨의 탈부착 도크는 블루투스 통신을 이용할 때는 리모컨을 부착하여 사용하나 사용하지 않을 때는 탈착하여 리모컨으로 사용한다.The detachable dock of the remote control uses the remote control when using Bluetooth communication, but removes it when not in use and uses it as a remote control.

적외선 모듈은 리모컨으로부터 제어 신호를 수신하는 기능을 한다.The infrared module receives the control signal from the remote control.

임베디드 모듈은 블루투스 통신을 지원하여 무선으로 스마트폰에 제어 신호를 송신한다.The embedded module supports Bluetooth communication and sends control signals to the smartphone wirelessly.

외부 센서 모듈은 조이스틱을 연결하여 커서를 이용해 제어 신호를 스마트폰으로 전송하여 컨텐츠를 제어한다.The external sensor module connects the joystick and transmits the control signal to the smartphone using the cursor to control the contents.

마이크로 처리유닛은 컴퓨터의 중앙처리장치(CPU)를 집적화한 것으로 레지스터, 연산회로, 제어회로를 포함하고 명령을 해독하여 연산, 제어 동작을 실행하는 연산장치이다. 마이크로 처리장치는 일반적으로 한 개의 집적회로로 집적돼 있지만 몇 개의 집적회로에 분할되는 경우도 있으며 8비트 MPU 또는 32비트 MPU하는 식으로 비트 수와 함께 부르는 것이 보통이다. 마이크로 처리장치에는 종래 소프트웨어로 실행하고 있던 기능과 명령을 하드웨어로 실행하기 위한 복잡한 명령 세트를 갖는 CISC(Complex Instruction Set Computer), 가급적 간단한 명령 세트만을 사용해 하드웨어를 단순화한 RISC(Reduced Instruction Set Computer), 4비트 또는 2비트의 마이크로 처리장치를 몇 개씩 접속해 비트 수를 사용자의 희망에 맞춘 비트슬라이스 마이크로 처리장치 등이 있다. The microprocessing unit is an integrated circuit of a central processing unit (CPU) of a computer and includes a register, an arithmetic circuit, and a control circuit, and decodes the instruction to execute arithmetic operation and control operation. A microprocessor is generally integrated into one integrated circuit, but may be divided into several integrated circuits, and it is common to call it with the number of bits, such as an 8-bit MPU or a 32-bit MPU. The micro processing apparatus includes a CISC (Complex Instruction Set Computer) having a complex instruction set for executing functions and commands executed by hardware in conventional software, a RISC (Reduced Instruction Set Computer) for simplifying hardware using only a simple instruction set, There are a bit slice microprocessor in which several 4-bit or 2-bit microprocessors are connected and the number of bits is matched to the user's desire.

전원 입력단자는 HMD의 전원입력단자로부터 전원을 입력받는다.The power input terminal receives power from the power input terminal of the HMD.

오디오 입력단자는 표준 디지털 입력단자, 오디오 출력단자는 표준 디지털 출력단자를 사용한다.The audio input terminal is a standard digital input terminal and the audio output terminal is a standard digital output terminal.

상기 오디오 잭은 양단이 표준 입력 및 출력단인 것이 특징이고 통상 입력단과 출력단은 같은 형태이다. The audio jack is characterized in that both ends are standard input and output terminals, and the input and output terminals are usually the same type.

스마트폰은 태블릿, 태블릿 컴퓨터, PDA 등으로 대체하여 사용할 수 있다. Smartphones can be used in place of tablets, tablet computers, and PDAs.

오디오 잭은 오디오 선의 일 부분에 신호강도 조절 장치가 설치하여 신호를 조절할 수 있다.An audio jack can be used to adjust the signal by installing a signal strength adjuster in a portion of the audio line.

10 : 리모컨 11 : 리모컨 숫자
12 : 리모컨 영문 13 : 리모컨 한글
20 : 외부입력 접속수단 21 : 적외선 수신모듈
22 : 마이크로 처리유닛(MPU) 23 : 오디오 잭
30 : 스마트폰 31 : 블루투스 모듈
40 : HMD 50 : 무선 외부입력 접속수단
60 : 조이스틱 센서
10: Remote control 11: Remote control number
12: Remote control English 13: Remote control
20: external input connecting means 21: infrared receiving module
22: Micro processing unit (MPU) 23: Audio jack
30: Smartphone 31: Bluetooth module
40: HMD 50: wireless external input connection means
60: Joystick sensor

Claims (8)

스마트폰을 이용한 HMD의 외부 입력장치에 있어서,
스마트폰을 제어하기 위한 입력수단 및
상기 입력수단으로부터 제어 정보를 수신하여 제어 신호로 변환하고 변조하여, 스마트폰의 오디오 출력단자로 송신하는 외부입력 접속수단을 포함하여,
스마트폰의 오디오 출력단자에서 수신된 변조 신호에서 제어 신호를 분리하여 스마트폰을 제어하는 것을 특징으로 하는 HMD용 외부 입력장치.
An external input device of an HMD using a smartphone,
Input means for controlling the smartphone and
And external input connection means for receiving control information from the input means, converting the control information into a control signal, modulating the control signal, and transmitting the control signal to an audio output terminal of the smartphone,
Wherein the controller controls the smartphone by separating the control signal from the modulation signal received at the audio output terminal of the smartphone.
스마트폰을 이용한 HMD의 외부 입력장치에 있어서,
스마트폰을 제어하기 위한 입력수단 및
상기 입력수단으로부터 제어 정보를 수신하여 제어 신호로 변환하고 변조하여, 스마트폰의 무선모듈로 송신하는 외부입력 접속수단을 포함하여,
스마트폰의 무선모듈에서 수신된 변조 신호에서 제어 신호를 분리하여 스마트폰을 제어하는 것을 특징으로 하는 HMD용 외부 입력장치.
An external input device of an HMD using a smartphone,
Input means for controlling the smartphone and
And external input connection means for receiving control information from the input means, converting the control information into a control signal, modulating the control signal, and transmitting the modulated control signal to the wireless module of the smartphone,
Wherein the controller controls the smartphone by separating the control signal from the modulated signal received by the wireless module of the smartphone.
제1항 또는 제2항에 있어서,
상기 입력수단은 적외선으로 송신하는 리모컨인 것을 특징으로 하는 HMD용 외부 입력장치.
3. The method according to claim 1 or 2,
Wherein said input means is a remote controller for transmitting by infrared rays.
제1항 또는 제2항에 있어서,
상기 입력수단은 조이스틱인 것을 특징으로 하는 HMD용 외부 입력장치.
3. The method according to claim 1 or 2,
Wherein the input means is a joystick.
제1항 또는 제2항에 있어서,
상기 외부입력 접속수단은 마이크로 처리유닛 포함하고, 상기 마이크로 처리유닛에서 구동되는 소프트 모뎀에서 제어 신호를 변조하여 전송하고,
상기 스마트폰은 상기 제어 신호를 소프트 모뎀으로 복조하여 제어 정보로 분리하는 것을 특징으로 하는 HMD용 외부 입력장치.
3. The method according to claim 1 or 2,
Wherein the external input connection means includes a micro processing unit, modulates and transmits a control signal from a soft modem driven by the micro processing unit,
Wherein the smartphone demodulates the control signal into a soft modem and separates the control signal into control information.
제1항에 있어서,
제어 정보의 제어 신호 전환은 외부입력 접속수단에서 지정된 시간 내에 동일키(key)가 입력되었을 경우 해당키(key)에 매핑된 다른 알파벳 식별 정보로 전환하는 것을 특징으로 하는 HMD용 외부 입력장치.
The method according to claim 1,
Wherein when the same key is input within a designated time by the external input connection means, the control signal switching of the control information is switched to another alphabet identification information mapped to the key.
제1항에 있어서,
상기 외부입력 접속수단은 동글 형태로 사용하는 것을 특징으로 하는 HMD용 외부 입력장치.
The method according to claim 1,
Wherein the external input connecting means is used in the form of a dongle.
스마트폰을 이용한 HMD의 외부 제어방법에 있어서,
스마트폰이 유선 또는 무선으로 외부입력 접속수단과 통신하여 제어 정보를 받기 위한 준비 단계;
리모컨 또는 조이스틱에서 제어 정보를 입력하여 유선 또는 무선 외부입력 접속수단에 송신하는 단계;
상기 유선 또는 무선 외부입력 접속수단에서 제어 정보를 제어 신호로 전환하는 단계;
유선 또는 무선 외부입력 접속수단에서 제어 신호를 변조하는 단계;
변조된 제어 신호를 스마트폰에 전송하는 단계;
스마트폰에서 제어 신호를 수신하는 단계;
수신된 제어 신호에서 제어 정보를 식별하여 분리하는 단계; 및
상기 제어 정보로 콘텐츠를 제어하는 단계를 포함하는 것을 특징으로 하는 스마트폰을 이용한 HMD의 외부 제어방법.


A method of controlling an HMD using a smartphone,
A preparation step of a smart phone communicating with an external input connection means by wire or wireless to receive control information;
Inputting control information from a remote control or a joystick and transmitting the control information to a wired or wireless external input connection means;
Switching the control information from the wired or wireless external input connection means to a control signal;
Modulating a control signal at a wired or wireless external input connection means;
Transmitting a modulated control signal to a smartphone;
Receiving a control signal from a smartphone;
Identifying and separating control information from the received control signal; And
And controlling the contents using the control information.


KR1020150008818A 2015-01-19 2015-01-19 Interface apparatus of HMD using a smartphone and the method thereof KR101693689B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150008818A KR101693689B1 (en) 2015-01-19 2015-01-19 Interface apparatus of HMD using a smartphone and the method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150008818A KR101693689B1 (en) 2015-01-19 2015-01-19 Interface apparatus of HMD using a smartphone and the method thereof

Publications (2)

Publication Number Publication Date
KR20160089588A true KR20160089588A (en) 2016-07-28
KR101693689B1 KR101693689B1 (en) 2017-01-18

Family

ID=56681553

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150008818A KR101693689B1 (en) 2015-01-19 2015-01-19 Interface apparatus of HMD using a smartphone and the method thereof

Country Status (1)

Country Link
KR (1) KR101693689B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107172670A (en) * 2017-06-29 2017-09-15 北京奇艺世纪科技有限公司 A kind of method of data transfer, device and equipment

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040093201A (en) * 2003-04-22 2004-11-05 오진아 Character input method and input device
KR20100026941A (en) 2008-08-29 2010-03-10 주식회사 유시스 System for providing function of remote controller with cell phone and method therefor
US20100079356A1 (en) * 2008-09-30 2010-04-01 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
KR20120069262A (en) * 2010-12-20 2012-06-28 삼성전자주식회사 Dongle device for operating external input device and external input system including the same, and operating method for external input device
KR20130035035A (en) * 2011-09-29 2013-04-08 (주)아이디어윕 Robot control system using a smart mobile phone

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040093201A (en) * 2003-04-22 2004-11-05 오진아 Character input method and input device
KR20100026941A (en) 2008-08-29 2010-03-10 주식회사 유시스 System for providing function of remote controller with cell phone and method therefor
US20100079356A1 (en) * 2008-09-30 2010-04-01 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
KR20120069262A (en) * 2010-12-20 2012-06-28 삼성전자주식회사 Dongle device for operating external input device and external input system including the same, and operating method for external input device
KR20130035035A (en) * 2011-09-29 2013-04-08 (주)아이디어윕 Robot control system using a smart mobile phone

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107172670A (en) * 2017-06-29 2017-09-15 北京奇艺世纪科技有限公司 A kind of method of data transfer, device and equipment

Also Published As

Publication number Publication date
KR101693689B1 (en) 2017-01-18

Similar Documents

Publication Publication Date Title
US9874942B2 (en) Control system for augmenting a portable touch screen device
CN104281255B (en) Wearable device and its control method
US20120062370A1 (en) Control System for Augmenting a Portable Touch Screen Device
EP3570527A1 (en) Synchronization of configuration setting values between two electronic devices
KR20170081391A (en) Mobile terminal and method for controlling the same
US20130088649A1 (en) Remote control apparatus, remote control method and display apparatus
US20130093683A1 (en) External control system for touch device and method using the same
US10067656B2 (en) Method and apparatus for context based application grouping in virtual reality
US11190923B2 (en) Method for transmitting data based on multiple communication schemes and electronic device supporting same
KR101743638B1 (en) Separation control type video system and method thereof
KR101693689B1 (en) Interface apparatus of HMD using a smartphone and the method thereof
CN106325378B (en) Method and apparatus for context-based application grouping in virtual reality
KR20220086939A (en) Electronic device and operation method thereof
KR101612382B1 (en) Mobile terminal case apparatus having electrostatic touch pannel and bluetooth communication module, and method for controlling mobile terminal using the same
EP4195005A1 (en) Electronic device and operation method of electronic device
CN107301762A (en) 433M/315M/ZigBee wireless controllers based on Intelligent bracelet or intelligent watch
KR101689227B1 (en) Mobile terminal case, display terminal and high speed wireless data communication system and method using the same
KR20150126761A (en) Presentation control system using a mobile device
KR20130017478A (en) Input sharing device by using bluetooth
KR102175992B1 (en) docking pad apparatus for smart terminal
KR101964850B1 (en) System and Method for Human Machine Interface Providing Smart Phone and Head Unit Application
KR20200102043A (en) Integrated remote control unit for mobile devices
CN104851258A (en) Method for establishment of wireless connection and data exchange between display device and mobile device
CN103631735A (en) Computer device, wireless control system and wireless control method
CN102841769A (en) Display device with operation system and operation method of display device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191231

Year of fee payment: 4