KR20220026074A - Vehicle audio/video function explanation providing apparatus and method using augmented reality - Google Patents

Vehicle audio/video function explanation providing apparatus and method using augmented reality Download PDF

Info

Publication number
KR20220026074A
KR20220026074A KR1020200106677A KR20200106677A KR20220026074A KR 20220026074 A KR20220026074 A KR 20220026074A KR 1020200106677 A KR1020200106677 A KR 1020200106677A KR 20200106677 A KR20200106677 A KR 20200106677A KR 20220026074 A KR20220026074 A KR 20220026074A
Authority
KR
South Korea
Prior art keywords
function
vehicle
video
audio
description
Prior art date
Application number
KR1020200106677A
Other languages
Korean (ko)
Inventor
김지훈
Original Assignee
쌍용자동차 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 쌍용자동차 주식회사 filed Critical 쌍용자동차 주식회사
Priority to KR1020200106677A priority Critical patent/KR20220026074A/en
Publication of KR20220026074A publication Critical patent/KR20220026074A/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Arrangement of adaptations of instruments
    • B60K35/22—
    • B60K35/28—
    • B60K35/80—
    • B60K35/81—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0211—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for record carriers apparatus, e.g. video recorders, tape players or CD players
    • B60K2360/347—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2370/00—Details of arrangements or adaptations of instruments specially adapted for vehicles, not covered by groups B60K35/00, B60K37/00
    • B60K2370/15—Output devices or features thereof
    • B60K2370/152—Displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2370/00—Details of arrangements or adaptations of instruments specially adapted for vehicles, not covered by groups B60K35/00, B60K37/00
    • B60K2370/16—Type of information
    • B60K2370/177—Augmented reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2370/00—Details of arrangements or adaptations of instruments specially adapted for vehicles, not covered by groups B60K35/00, B60K37/00
    • B60K2370/20—Optical features of instruments
    • B60K2370/33—Illumination features
    • B60K2370/347—Optical elements for superposition of display information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2370/00—Details of arrangements or adaptations of instruments specially adapted for vehicles, not covered by groups B60K35/00, B60K37/00
    • B60K2370/50—Control arrangements; Data network features
    • B60K2370/52—Control of displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2370/00—Details of arrangements or adaptations of instruments specially adapted for vehicles, not covered by groups B60K35/00, B60K37/00
    • B60K2370/50—Control arrangements; Data network features
    • B60K2370/55—Remote controls
    • B60K2370/56—Remote controls using mobile devices
    • B60K2370/566—Mobile devices displaying vehicle information

Abstract

The present invention relates to an apparatus and a method for providing a vehicle audio/video function description using augmented reality, capable of providing a detailed description about a selected menu of an audio/video (A/V) system of a vehicle to a user through augmented reality by using a description application when the menu is photographed with a mobile device of the user. In a state in which vehicle audio/video equipment is being operated, a description application for providing a detailed description about audio/video functions of a vehicle is executed on a mobile device in accordance with a function choice of a user, and a function executed on the vehicle audio/video equipment is recognized, and then, description information for a detailed description of the function executed on the vehicle audio/video equipment is automatically created through augmented reality, and, when the description information created through augmented reality is selected, the detailed description of the executed function is displayed on a screen, and, thus, the user can conveniently check the detailed description of the menu of the vehicle audio/video equipment.

Description

증강현실을 이용한 차량 오디오/비디오 기능 설명제공장치 및 방법{Vehicle audio/video function explanation providing apparatus and method using augmented reality}Vehicle audio/video function explanation providing apparatus and method using augmented reality}

본 발명은 증간현실을 이용한 차량 오디오/비디오 기능 설명제공장치 및 방법에 관한 것으로, 특히 사용자의 모바일기기(스마트폰이나 태블릿 PC)로 차량의 오디오/비디오(A/V) 시스템의 메뉴를 촬영하면, 설명 애플리케이션을 이용하여 선택한 메뉴에 대해 상세설명을 증강현실을 통해 사용자에게 제공할 수 있도록 한 증강현실을 이용한 차량 오디오/비디오 기능 설명제공장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for providing explanations of vehicle audio/video functions using augmented reality, particularly when shooting a menu of an audio/video (A/V) system of a vehicle with a user's mobile device (smartphone or tablet PC) , It relates to a vehicle audio / video function description providing apparatus and method using augmented reality so that detailed descriptions for the menu selected using the description application can be provided to the user through augmented reality.

차량의 고급화 및 정보 통신 기술의 발달에 따라, 현재 출시되는 차량의 오디오/비디오 헤드 유닛은 단순한 FM/AM, CD 등의 오디오 제어 기능, 공조 제어 기능뿐만 아니라 다양한 기능을 수행할 수 있도록 구성되고 있다.With the advancement of vehicle luxury and information and communication technology, the currently released audio/video head unit is configured to perform various functions as well as simple FM/AM and CD audio control functions and air conditioning control functions. .

다양한 기능들의 예로 블루투스, 웹 브라우징, 채팅, TV 시청, 내비게이션, 게임, 카메라를 통해 사진이나 동영상을 촬영하는 기능, 음성 저장 기능, 이미지나 비디오의 디스플레이 기능 등이 있다.Examples of various functions include Bluetooth, web browsing, chatting, watching TV, navigation, games, a function to take a picture or video through a camera, a voice storage function, and a function to display an image or video.

이를 위해, 차량 제조 회사들은 보다 복잡하고 다양한 기능들을 제공하기 위해 하드웨어 및 소프트웨어 개발에 많은 노력을 기하고 있다.To this end, vehicle manufacturers are putting much effort into developing hardware and software to provide more complex and diverse functions.

하지만, 차량 헤드 유닛에서 제공하는 기능이 향상함에 따라 해당 기능의 제어를 위한 사용자 인터페이스가 복잡해지고 있다.However, as the functions provided by the vehicle head unit improve, the user interface for controlling the corresponding functions becomes more complex.

현재 차량 제조 회사들은 차량 헤드 유닛인 AVN(Audio Video Navigation) 시스템에 대한 웹 매뉴얼을 책자 형태로 고객에게 제공하거나, 전자 매뉴얼(예를 들면, PDF 파일 형태)로 제공하고 있다.Currently, vehicle manufacturers provide a web manual for an AVN (Audio Video Navigation) system, which is a vehicle head unit, to customers in the form of a booklet or an electronic manual (for example, in the form of a PDF file).

하지만, AVN 시스템에 대한 기존 매뉴얼들은 특정 기능을 참조할 때, 안내 책자에 복잡하게 설명된 기능 등을 찾아 보아야 하는 불편함이 있을 뿐만 아니라 사용자별 해당 매뉴얼에 대한 숙련도와 관계없이 단일 형태의 매뉴얼을 제공하므로 사용이 불편한 단점이 있었다.However, in the existing manuals for AVN system, when referring to specific functions, it is inconvenient to search for functions described in a complicated manner in the guidebook, and there is a single type of manual regardless of the user's proficiency in the corresponding manual. There was a disadvantage that it was inconvenient to use because it provided.

한편, 차량의 오디오/비디오 기능에 대한 메뉴 설명 정보를 제공해주기 위해서 종래에 제안된 다른 기술이 하기의 <특허문헌 1> 및 <특허문헌 2> 에 개시되어 있다.On the other hand, other techniques previously proposed in order to provide menu description information for an audio/video function of a vehicle are disclosed in <Patent Document 1> and <Patent Document 2>.

<특허문헌 1> 은 차량 내부 차량 텔레매틱스 멀티미디어 단말에 등록된 사용자 프로파일 또는 기능별 사용 통계 정보에 기초로 동적으로 숙련도를 판단하고, 판단 결과에 따라 동적으로 해당 웹 매뉴얼을 제공한다.<Patent Document 1> dynamically determines proficiency based on a user profile registered in an in-vehicle telematics multimedia terminal or usage statistics information for each function, and dynamically provides a corresponding web manual according to the determination result.

또한, <특허문헌 2> 는 사용자 단말 및 차량과의 통신을 수행하는 서버 통신부, 차량의 기능에 대한 매뉴얼 정보를 저장하는 저장부 및 차량으로부터 차량과 관련된 차량 정보를 수신하고, 수신된 차량 정보에 기초하여 복수의 활성화 기능 및 복수의 활성화 기능 사이의 우선순위를 결정하고, 결정된 우선순위에 기초하여 복수의 활성화 기능에 대응하는 매뉴얼 정보를 제공하기 위한 제어 명령을 사용자 단말에 전송하는 서버 제어부를 포함한다.In addition, <Patent Document 2> receives vehicle information related to a vehicle from a user terminal and a server communication unit that communicates with the vehicle, a storage unit that stores manual information about the function of the vehicle, and the vehicle, and adds the information to the received vehicle information. A server control unit for determining a priority between the plurality of activation functions and the plurality of activation functions based on the determined priority, and transmitting a control command for providing manual information corresponding to the plurality of activation functions to the user terminal based on the determined priority; do.

그러나 이러한 <특허문헌> 들은 사용자 단말을 통해 차량의 기능에 대한 매뉴얼 정보는 제공해주지만, 차량의 텔레매틱스 단말과 사용자 단말이 통신을 통해 특정 기능을 요청하고, 서버를 통해 특정 기능의 상세설명을 사용자 단말을 통해 사용자에게 제공해주는 방식으로서, 차량의 기능에 대해 상세설명을 제공해주는 방식이 복잡하다는 단점이 있다.However, these <patent documents> provide manual information on vehicle functions through the user terminal, but the telematics terminal of the vehicle and the user terminal request a specific function through communication, and provide detailed description of the specific function through the user terminal As a method of providing a detailed description of a vehicle function, there is a disadvantage in that it is complicated.

대한민국 공개특허 10-2019-0034896(2019.04.03. 공개)(사용자 기반 웹 매뉴얼 제공 방법 및 시스템)Republic of Korea Patent Publication No. 10-2019-0034896 (published on April 3, 2019) (method and system for providing user-based web manual) 대한민국 공개특허 0-2020-0067538(2020.06.12. 공개)(서버, 사용자 단말 및 이를 포함하는 통신 시스템)Republic of Korea Patent Publication 0-2020-0067538 (published on June 12, 2020) (Server, user terminal and communication system including the same)

따라서 본 발명은 상기와 같은 차량에서 일반적으로 매뉴얼 정보를 제공해주는 방식과 종래기술에서 발생하는 제반 문제점을 해결하기 위해서 제안된 것으로서, 사용자의 모바일기기(스마트폰이나 태블릿 PC)로 차량의 오디오/비디오(A/V) 시스템의 메뉴를 촬영하면, 설명 애플리케이션을 이용하여 선택한 메뉴에 대해 상세설명을 증강현실을 통해 사용자에게 제공할 수 있도록 한 증강현실을 이용한 차량 오디오/비디오 기능 설명제공장치 및 방법을 제공하는 데 그 목적이 있다.Therefore, the present invention has been proposed to solve the problems that occur in the conventional method and the method of providing manual information in the vehicle as described above, and the audio/video of the vehicle is transmitted to the user's mobile device (smartphone or tablet PC) (A/V) A vehicle audio/video function description providing apparatus and method using augmented reality that allows detailed descriptions of the menu selected using the description application to be provided to the user through augmented reality when the menu of the system is taken Its purpose is to provide

본 발명의 다른 목적은 사용자의 모바일기기를 이용하여 차량의 오디오/비디오 기기에서 실행되는 기능만을 촬영하면, 모바일기기에서 자동으로 증강현실을 통해 상세설명을 제공해줌으로써, 사용자의 편의성 증대를 도모하도록 한 차량 오디오/비디오 기능 설명제공장치 및 방법을 제공하는 것이다.Another object of the present invention is to increase user convenience by automatically providing detailed explanations through augmented reality in the mobile device when only functions executed in the audio/video device of the vehicle are photographed using the user's mobile device. It is to provide a vehicle audio / video function description providing apparatus and method.

상기한 바와 같은 목적을 달성하기 위하여, 본 발명에 따른 "차량 오디오/비디오 기능 설명제공장치"는,In order to achieve the above object, "vehicle audio / video function description providing apparatus" according to the present invention,

차량에 장착되어 오디오/비디오 기능을 실행하는 차량 오디오/비디오 기기; 및a vehicle audio/video device mounted on a vehicle to execute an audio/video function; and

차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션이 실행된 상태에서, 상기 차량 오디오/비디오 기기에서 실행되는 기능이 인식되면 자동으로 실행된 기능의 상세설명을 위한 설명 정보를 증강현실로 구현해주고, 상기 설명정보가 선택되면 실행된 기능의 상세설명을 디스플레이해주는 모바일기기를 포함하는 것을 특징으로 한다.When a function executed in the vehicle audio/video device is recognized while the description application providing detailed description of the audio/video function of the vehicle is running, the description information for the detailed description of the automatically executed function is converted into augmented reality. It is characterized in that it includes a mobile device that displays a detailed description of the executed function when the description information is selected.

상기에서 모바일기기는 상기 설명 정보를 말풍선으로 형상화하고, 형상화한 말풍선과 촬영 화면을 화면에 중첩시켜 증강현실로 표시해주는 것을 특징으로 한다.In the above, the mobile device is characterized in that the explanatory information is shaped into a speech bubble, and the shaped speech bubble and the shooting screen are superimposed on the screen to display in augmented reality.

상기에서 모바일기기는 상기 차량 오디오/비디오 기기에서 실행되는 기능을 촬영하고, 촬영된 영상을 인식하여 차량 오디오/비디오 기기에서 실행되는 기능을 인식하는 것을 특징으로 한다.In the above, the mobile device captures a function executed in the vehicle audio/video device, and recognizes a captured image to recognize a function executed in the vehicle audio/video device.

상기에서 모바일기기는,In the above mobile device,

차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 실행시키는 설명 애플리케이션 실행부;a description application execution unit that executes a description application that provides detailed descriptions for the audio/video function of the vehicle;

상기 차량 오디오/비디오 기기에서 실행되는 기능을 촬영하는 차량 A/V 기능 촬영부;a vehicle A/V function photographing unit for photographing a function executed in the vehicle audio/video device;

상기 설명 애플리케이션을 이용하여 상기 차량 A/V 기능 촬영부에서 촬영된 차량 A/V 기능의 상세설명을 위한 설명 정보를 말풍선으로 형상화하여 증강현실로 구현해주고, 상기 설명정보가 선택되면 실행된 기능의 상세설명 디스플레이를 제어하는 증강현실 구현부;By using the description application, the description information for the detailed description of the vehicle A/V function photographed by the vehicle A/V function photographing unit is shaped into a speech bubble and implemented in augmented reality, and when the description information is selected, the function executed Augmented reality realization unit to control the detailed description display;

상기 증강현실 구현부에서 출력되는 말풍선 형상의 설명 정보와 촬영 화면을 화면에 중첩시켜 증강현실로 표시해주고, 실행된 기능의 상세설명을 화면에 디스플레이해주는 표시부를 포함하는 것을 특징으로 한다.It is characterized in that it comprises a display unit for displaying the description information of the speech bubble shape output from the augmented reality implementation unit and the shooting screen overlaid on the screen in augmented reality, and displaying detailed description of the executed function on the screen.

또한, 본 발명에 따른 "차량 오디오/비디오 기능 설명제공방법"은,In addition, the "vehicle audio / video function description providing method" according to the present invention,

(a) 차량 오디오/비디오 기기가 동작하는 상태에서, 사용자의 기능 선택에 따라 모바일기기에서 차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 실행하는 단계;(a) in a state in which the vehicle audio/video device is operating, executing a description application that provides detailed descriptions for the audio/video function of the vehicle in the mobile device according to the user's function selection;

(b) 상기 모바일기기에서 상기 차량 오디오/비디오 기기에서 실행되는 기능을 인식하는 단계;(b) recognizing a function executed in the vehicle audio/video device in the mobile device;

(c) 상기 모바일기기에서 차량 오디오/비디오 기기에서 실행되는 기능 인식 후, 자동으로 실행된 기능의 상세설명을 위한 설명 정보를 증강현실로 구현해주는 단계; 및(c) realizing explanatory information for a detailed description of the automatically executed function in augmented reality after the mobile device recognizes the function executed in the vehicle audio/video device; and

(d) 상기 모바일기기에서 상기 증강현실로 구현한 설명 정보가 선택되면, 실행된 기능의 상세설명을 화면에 표시해주는 단계를 포함하는 것을 특징으로 한다.(d) when the description information implemented in the augmented reality in the mobile device is selected, displaying a detailed description of the executed function on the screen.

본 발명에 따르면 사용자의 모바일기기(스마트폰이나 태블릿 PC)로 차량의 오디오/비디오(A/V) 시스템의 메뉴를 촬영하면, 설명 애플리케이션을 이용하여 선택한 메뉴에 대해 상세설명을 증강현실을 통해 사용자에게 제공해줄 수 있는 효과가 있다.According to the present invention, when a menu of the vehicle audio/video (A/V) system is photographed with the user's mobile device (smartphone or tablet PC), a detailed description of the selected menu is provided to the user through augmented reality using the description application. There is an effect that can be provided to

또한, 본 발명에 따르면 사용자의 모바일기기를 이용하여 차량의 오디오/비디오 기기에서 실행되는 기능만을 촬영하면, 모바일기기에서 자동으로 증강현실을 통해 상세설명을 제공해줌으로써, 사용자의 편의성 증대를 도모해주는 효과도 있다.In addition, according to the present invention, by using the user's mobile device to shoot only the functions executed on the audio/video device of the vehicle, the mobile device automatically provides detailed explanations through augmented reality, thereby increasing the user's convenience. there is also

도 1은 본 발명에 따른 증강현실을 이용한 차량 오디오/비디오 기능 설명제공장치의 개략 구성도,
도 2는 도 1이 모바일기기의 실시 예 블록 구성도,
도 3은 본 발명에 따른 증강현실을 이용한 차량 오디오/비디오 기능 설명제공방법을 보인 흐름도이다.1 is a schematic configuration diagram of a vehicle audio / video function description providing apparatus using augmented reality according to the present invention;
Figure 2 is a block diagram of an embodiment of the mobile device in Figure 1;
3 is a flowchart illustrating a vehicle audio/video function description providing method using augmented reality according to the present invention.

이하 본 발명의 바람직한 실시 예에 따른 증강현실을 이용한 차량 오디오/비디오 기능 설명제공장치 및 방법을 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, a vehicle audio/video function description providing apparatus and method using augmented reality according to a preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings.

이하에서 설명되는 본 발명에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 안 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.The terms or words used in the present invention described below should not be construed as being limited to conventional or dictionary meanings, and the inventor may appropriately define the concept of terms to describe his invention in the best way. It should be interpreted as meaning and concept consistent with the technical idea of the present invention based on the principle that it can be.

따라서 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 바람직한 실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원 시점에서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.Accordingly, the embodiments described in this specification and the configurations shown in the drawings are only preferred embodiments of the present invention, and do not represent all of the technical spirit of the present invention, so various equivalents and It should be understood that there may be variations.

도 1은 본 발명의 바람직한 실시 예에 따른 증강현실을 이용한 차량 오디오/비디오 기능 설명제공장치의 개략 구성도로서, 차량 오디오/비디오 기기(100) 및 모바일기기(200)를 포함한다.1 is a schematic configuration diagram of a vehicle audio/video function description providing apparatus using augmented reality according to a preferred embodiment of the present invention, and includes a vehicle audio/video device 100 and a mobile device 200 .

차량 오디오/비디오 기기(100)는 차량에 장착되어 사용자의 메뉴 조작에 따라 오디오/비디오 기능을 실행해주는 역할을 한다.The vehicle audio/video device 100 is mounted on a vehicle and serves to execute an audio/video function according to a user's menu manipulation.

모바일기기(200)는 사용자가 휴대하는 스마트폰 또는 태블릿 PC와 같은 단말이다. 이러한 모바일기기(200)는 차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션이 저장되어 있다. 상기 설명 애플리케이션이 실행된 상태에서, 상기 차량 오디오/비디오 기기(100)에서 실행되는 기능이 인식되면 자동으로 실행된 기능의 상세설명을 위한 설명 정보를 증강현실로 구현해주는 역할을 한다. 아울러 증강현실로 설명 정보를 구현해준 상태에서 상기 설명정보가 선택되면 실행된 기능의 상세설명을 디스플레이해준다.The mobile device 200 is a terminal such as a smart phone or tablet PC carried by a user. The mobile device 200 stores a description application that provides a detailed description of the audio/video function of the vehicle. When the function executed in the vehicle audio/video device 100 is recognized in a state in which the description application is executed, description information for a detailed description of the automatically executed function is implemented in augmented reality. In addition, when the description information is selected in a state in which the description information is implemented in augmented reality, a detailed description of the executed function is displayed.

여기서 차량 오디오/비디오 기기(100)는 상기 차량 오디오/비디오 기기(100)에서 실행되는 오디오/비디오 기능(메뉴)을 카메라로 촬영하고, 촬영된 영상을 영상 인식방법으로 인식하여 차량 오디오/비디오 기기에서 실행되는 기능을 인식한다.Here, the vehicle audio/video device 100 captures an audio/video function (menu) executed in the vehicle audio/video device 100 with a camera, and recognizes the captured image using an image recognition method to recognize the vehicle audio/video device. Recognize the function executed in

이러한 모바일기기(200)는 상기 설명 정보를 말풍선으로 형상화하고, 형상화한 말풍선과 촬영 화면을 화면에 중첩시켜 증강현실로 표시해준다.The mobile device 200 forms the explanatory information into a speech bubble, and displays the shaped speech bubble and the shooting screen in augmented reality by superimposing it on the screen.

즉, 모바일기기(200)는 해당 기기의 정보 및 사용 매뉴얼을 얻고자 하는 구성품을 촬영하면 이미 형상화된 말풍선에 의해 해당 구성품의 매뉴얼 및 정보를 증강현실로 표시해준다.That is, the mobile device 200 displays the manual and information of the corresponding component in augmented reality by means of a speech bubble already shaped when a component for obtaining information and a user manual of the corresponding device is photographed.

여기서 말풍선은 해당 기기에 중첩 또는 외부 주변에 가깝게 위치 및 배치되어 말풍선으로 표현된다.Here, the speech bubble is expressed as a speech bubble by being superimposed on the device or positioned and arranged close to the outside periphery.

도 2는 상기 모바일기기(200)의 실시 예를 보인 블록 구성도로서, 설명 애플리케이션 실행부(210), 입력부(220), 차량 A/V 기능 촬영부(230), 증강현실 구현부(240), 메모리(250) 및 표시부(260)를 포함한다.FIG. 2 is a block diagram showing an embodiment of the mobile device 200, and is a description application execution unit 210, an input unit 220, a vehicle A/V function photographing unit 230, and an augmented reality implementation unit 240. , a memory 250 and a display unit 260 .

설명 애플리케이션 실행부(210)는 메모리(250)에 저장된 차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 실행하는 역할을 한다.The description application execution unit 210 serves to execute a description application that provides detailed descriptions for the audio/video function of the vehicle stored in the memory 250 .

입력부(220)는 상기 설명 애플리케이션을 실행하기 위한 증강현실 기능을 선택하는 부분으로서, 증강현실 기능 버튼을 포함할 수 있다.The input unit 220 is a part for selecting an augmented reality function for executing the description application, and may include an augmented reality function button.

차량 A/V 기능 촬영부(230)는 상기 차량 오디오/비디오 기기(100)에서 실행되는 기능(메뉴)을 촬영하여, 기능 영상을 생성하여 상기 증강현실 구현부(240)에 전달해주는 역할을 한다.The vehicle A/V function photographing unit 230 captures a function (menu) executed in the vehicle audio/video device 100 , generates a function image, and delivers it to the augmented reality implementation unit 240 . .

증강현실 구현부(240)는 상기 설명 애플리케이션을 이용하여 상기 차량 A/V 기능 촬영부(230)에서 촬영된 차량 A/V 기능의 상세설명을 위한 설명 정보를 말풍선으로 형상화하여 증강현실로 구현해주고, 상기 설명정보가 선택되면 실행된 기능의 상세설명 디스플레이를 제어하는 역할을 한다. 이를 위해 증강현실 구현부(240)는 영상 인식 모듈을 포함할 수 있다.Augmented reality implementation unit 240 is implemented in augmented reality by using the description application to shape the description information for detailed description of the vehicle A / V function photographed in the vehicle A / V function photographing unit 230 in a speech bubble , serves to control the display of the detailed description of the executed function when the description information is selected. To this end, the augmented reality implementation unit 240 may include an image recognition module.

표시부(260)는 상기 증강현실 구현부(240)에서 출력되는 말풍선 형상의 설명 정보와 촬영 화면을 화면에 중첩시켜 증강현실로 표시해주고, 실행된 기능의 상세설명을 화면에 디스플레이해주는 역할을 한다.The display unit 260 superimposes the description information of the speech bubble shape output from the augmented reality implementation unit 240 and the shooting screen on the screen to display it in augmented reality, and serves to display detailed descriptions of the executed functions on the screen.

이와 같이 구성된 본 발명의 바람직한 실시 예에 따른 증강현실을 이용한 차량 오디오/비디오 기능 설명제공장치의 동작을 구체적으로 설명하면 다음과 같다.The operation of the vehicle audio/video function description providing apparatus using augmented reality according to a preferred embodiment of the present invention configured as described above will be described in detail as follows.

먼저, 사용자가 차량에 장착된 차량 오디오/비디오 기기(100)를 조작하여 특정 메뉴(기능)를 선택한 상태에서, 선택한 메뉴의 상세설명(매뉴얼 정보)을 확인하고자 하면, 모바일기기(200)의 입력부(220)에 마련된 증강현실 기능 버튼을 온(on) 상태로 조작한다.First, when the user operates the vehicle audio/video device 100 mounted on the vehicle to select a specific menu (function) and wants to check the detailed description (manual information) of the selected menu, the input unit of the mobile device 200 The augmented reality function button provided in 220 is operated in an on state.

상기 증강현실 기능 버튼이 온 상태로 조작되면, 증강현실 구현부(240)는 설명 애플리케이션 실행부(210)를 동작상태로 제어한다.When the augmented reality function button is operated in an on state, the augmented reality implementation unit 240 controls the description application execution unit 210 to an operating state.

상기 설명 애플리케이션 실행부(210)는 동작 제어 명령이 전달되면, 메모리(250)에 저장된 차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 추출하여 실행시킨다.When the operation control command is transmitted, the description application execution unit 210 extracts and executes a description application that provides detailed descriptions for the audio/video function of the vehicle stored in the memory 250 .

상기 설명 애플리케이션이 실행된 상태에서, 사용자는 차량 A/V 기능 촬영부(230)를 이용하여 상기 차량 오디오/비디오 기기(100)에서 실행되는 오디오/비디오 기능(메뉴)을 촬영한다.In a state in which the description application is executed, the user uses the vehicle A/V function photographing unit 230 to photograph an audio/video function (menu) executed in the vehicle audio/video device 100 .

상기 차량 A/V 기능 촬영부(230)는 상기 차량 오디오/비디오 기기(100)에서 실행되는 오디오/비디오 메뉴(기능)를 촬영하여 메뉴 영상을 생성하고, 생성한 오디오/비디오 메뉴 영상을 상기 증강현실 구현부(240)에 전달한다.The vehicle A/V function photographing unit 230 captures an audio/video menu (function) executed in the vehicle audio/video device 100 to generate a menu image, and augments the generated audio/video menu image. It is transmitted to the reality implementation unit 240 .

상기 증강현실 구현부(240)는 상기 실행된 설명 애플리케이션을 이용하여 상기 차량 A/V 기능 촬영부(230)에서 촬영된 차량 A/V 메뉴 영상을 인식한다. 여기서 차량 A/V 메뉴 영상 인식은 통상의 영상 인식 모듈을 이용하여 인식한다. 그리고 영상 인식이 이루어지면 메모리(250)에 저장된 영상 인식에 따른 메뉴 정보를 추출한다.The augmented reality implementation unit 240 recognizes the vehicle A/V menu image captured by the vehicle A/V function photographing unit 230 using the executed description application. Here, vehicle A/V menu image recognition is recognized using a general image recognition module. And when image recognition is performed, menu information according to image recognition stored in the memory 250 is extracted.

이어 추출한 메뉴 정보의 상세설명(매뉴얼 정보)을 위한 설명 정보를 형상화한다. 여기서 설명 정보는 다양한 형상으로 형상화할 수 있으며, 본 발명에서는 실시 예로 말풍선으로 형상화하는 것으로 가정한다.Then, explanatory information for a detailed explanation (manual information) of the extracted menu information is shaped. Here, the explanatory information can be shaped into various shapes, and in the present invention, it is assumed that the description information is shaped as a speech bubble as an embodiment.

이어 형상화한 말풍선 이미지와 촬영된 차량 A/V 메뉴 영상을 중첩하여 증강현실로 선택 정보를 생성하고, 이를 표시부(260)를 통해 화면에 표시해준다.Then, by superimposing the shaped speech bubble image and the photographed vehicle A/V menu image, selection information is generated in augmented reality, and this is displayed on the screen through the display unit 260 .

사용자는 증강현실로 화면에 표시되는 차량 A/V 메뉴 영상과 설명 정보(말풍선 이미지)를 보고, 차량 A/V 메뉴에 대해 상세 설명을 보고자 하면 상기 설명 정보를 선택한다. 여기서 표시부(260)를 터치 패널로 구현된 것이라고 가정을 하면, 사용자는 표시부(260)에 표시된 말풍선 이미지만을 터치하면 설명 정보의 선택이 이루어진다.The user views the vehicle A/V menu image and description information (speech bubble image) displayed on the screen in augmented reality, and selects the description information to view a detailed description of the vehicle A/V menu. Here, assuming that the display unit 260 is implemented as a touch panel, when the user touches only the speech bubble image displayed on the display unit 260, the selection of explanatory information is made.

상기 설명 정보의 선택이 이루어지면 증강현실 구현부(240)는 메모리 또는 서버를 통해 차량 오디오/비디오 기기(100)에서 실행된 오디오/비디오 기능의 상세설명을 획득하고, 이를 표시부(260)를 통해 표시하도록 한다.When the selection of the description information is made, the augmented reality implementation unit 240 obtains a detailed description of the audio/video function executed in the vehicle audio/video device 100 through the memory or the server, and through the display unit 260 to display

표시부(260)는 상기 증강현실 구현부(240)에서 출력되는 차량 오디오/비디오 기기(100)에서 실행된 오디오/비디오 메뉴의 상세설명을 화면에 디스플레이해준다.The display unit 260 displays a detailed description of the audio/video menu executed in the vehicle audio/video device 100 output from the augmented reality implementation unit 240 on the screen.

이로써 사용자는 표시부(260)를 통해 차량 오디오/비디오 기기(100)에서 실행된 오디오/비디오 메뉴의 상세 설명을 모바일기기(200)를 통해 편리하게 확인할 수 있게 되는 것이다.Accordingly, the user can conveniently check the detailed description of the audio/video menu executed in the vehicle audio/video device 100 through the mobile device 200 through the display unit 260 .

도 3은 본 발명에 따른 "차량 오디오/비디오 기능 설명제공방법"을 보인 흐름도로서, (a) 차량 오디오/비디오 기기(100)가 동작하는 상태에서, 사용자의 기능 선택에 따라 모바일기기(200)에서 차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 실행하는 단계(S101 - S102), (b) 상기 모바일기기(200)에서 상기 차량 오디오/비디오 기기(100)에서 실행되는 기능을 인식하는 단계(S103), (c) 상기 모바일기기(200)에서 차량 오디오/비디오 기기(100)에서 실행되는 기능 인식 후, 자동으로 실행된 기능의 상세설명을 위한 설명 정보를 증강현실로 구현해주는 단계(S104 - S105), (d) 상기 모바일기기(200)에서 상기 증강현실로 구현한 설명 정보가 선택되면, 실행된 기능의 상세설명을 화면에 표시해주는 단계(S106 - S108)를 포함한다.3 is a flowchart showing a "vehicle audio/video function description providing method" according to the present invention. Steps (S101 - S102) of executing a description application that provides detailed descriptions for the audio/video function of the vehicle, (b) the function executed in the vehicle audio/video device 100 in the mobile device 200 Recognizing step (S103), (c) after recognizing the function executed in the vehicle audio/video device 100 in the mobile device 200, the description information for the detailed description of the automatically executed function is implemented in augmented reality Steps (S104 - S105), (d) when the description information implemented in the augmented reality is selected in the mobile device 200, displaying a detailed description of the executed function on the screen (S106 - S108).

이와 같이 구성된 본 발명의 바람직한 실시 예에 따른 증강현실을 이용한 차량 오디오/비디오 기능 설명제공방법을 구체적으로 설명하면 다음과 같다.A method of providing an explanation of a vehicle audio/video function using augmented reality according to a preferred embodiment of the present invention configured as described above will be described in detail as follows.

먼저, 단계 S101)에서 사용자가 차량에 장착된 차량 오디오/비디오 기기(100)를 조작하여 특정 메뉴(기능)를 선택한 상태에서, 선택한 메뉴의 상세설명(매뉴얼 정보)을 확인하고자 하면, 모바일기기(200)의 입력부(220)에 마련된 증강현실 기능 버튼을 온(on) 상태로 조작한다.First, in step S101), when the user operates the vehicle audio/video device 100 mounted on the vehicle to select a specific menu (function), and wants to check the detailed description (manual information) of the selected menu, the mobile device ( 200), the augmented reality function button provided on the input unit 220 is operated in an on state.

상기 증강현실 기능 버튼이 온 상태로 조작되면, 단계 S102에서 모바일기기(200)의 증강현실 구현부(240)는 설명 애플리케이션 실행부(210)를 동작상태로 제어한다.When the augmented reality function button is operated in the on state, in step S102, the augmented reality implementation unit 240 of the mobile device 200 controls the description application execution unit 210 to an operating state.

상기 설명 애플리케이션 실행부(210)는 동작 제어 명령이 전달되면, 메모리(250)에 저장된 차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 추출하여 실행시킨다. 상기 설명 애플리케이션이 실행된 상태에서, 사용자는 차량 A/V 기능 촬영부(230)를 이용하여 상기 차량 오디오/비디오 기기(100)에서 실행되는 오디오/비디오 기능(메뉴)을 촬영한다.When the operation control command is transmitted, the description application execution unit 210 extracts and executes a description application that provides detailed descriptions for the audio/video function of the vehicle stored in the memory 250 . In a state in which the description application is executed, the user uses the vehicle A/V function photographing unit 230 to photograph an audio/video function (menu) executed in the vehicle audio/video device 100 .

상기 차량 A/V 기능 촬영부(230)는 상기 차량 오디오/비디오 기기(100)에서 실행되는 오디오/비디오 메뉴(기능)를 촬영하여 메뉴 영상을 생성하고, 생성한 오디오/비디오 메뉴 영상을 상기 증강현실 구현부(240)에 전달한다.The vehicle A/V function photographing unit 230 captures an audio/video menu (function) executed in the vehicle audio/video device 100 to generate a menu image, and augments the generated audio/video menu image. It is transmitted to the reality implementation unit 240 .

상기 증강현실 구현부(240)는 단계 S103에서 상기 실행된 설명 애플리케이션을 이용하여 상기 차량 A/V 기능 촬영부(230)에서 촬영된 차량 A/V 메뉴 영상을 인식한다. 여기서 차량 A/V 메뉴 영상 인식은 통상의 영상 인식 모듈을 이용하여 인식한다. 그리고 영상 인식이 이루어지면 메모리(250)에 저장된 영상 인식에 따른 메뉴 정보를 추출한다.The augmented reality implementation unit 240 recognizes the vehicle A/V menu image captured by the vehicle A/V function photographing unit 230 using the description application executed in step S103 . Here, vehicle A/V menu image recognition is recognized using a general image recognition module. And when image recognition is performed, menu information according to image recognition stored in the memory 250 is extracted.

이어, 단계 S104 및 S105에서 추출한 메뉴 정보의 상세설명(매뉴얼 정보)을 위한 설명 정보를 형상화한다. 여기서 설명 정보는 다양한 형상으로 형상화할 수 있으며, 본 발명에서는 실시 예로 말풍선으로 형상화하는 것으로 가정한다.Next, the description information for the detailed description (manual information) of the menu information extracted in steps S104 and S105 is shaped. Here, explanatory information can be shaped into various shapes, and in the present invention, it is assumed to be shaped as a speech bubble as an embodiment.

이어 형상화한 말풍선 이미지와 촬영된 차량 A/V 메뉴 영상을 중첩하여 증강현실로 선택 정보를 생성하고, 이를 표시부(260)를 통해 화면에 표시해준다.Then, by superimposing the shaped speech bubble image and the photographed vehicle A/V menu image, selection information is generated in augmented reality, and this is displayed on the screen through the display unit 260 .

사용자는 단계 S106에서 증강현실로 화면에 표시되는 차량 A/V 메뉴 영상과 설명 정보(말풍선 이미지)를 보고, 차량 A/V 메뉴에 대해 상세 설명을 보고자 하면 설명 정보를 선택한다. 여기서 표시부(260)를 터치 패널로 구현된 것이라고 가정을 하면, 사용자는 표시부(260)에 표시된 말풍선 이미지만을 터치하면 설명 정보의 선택이 이루어진다.In step S106, the user views the vehicle A/V menu image and description information (speech bubble image) displayed on the screen in augmented reality, and selects the description information to view detailed descriptions of the vehicle A/V menu. Here, assuming that the display unit 260 is implemented as a touch panel, when the user touches only the speech bubble image displayed on the display unit 260, the selection of explanatory information is made.

상기 설명 정보의 선택이 이루어지면 증강현실 구현부(240)는 단계 S107에서 메모리 또는 서버를 통해 차량 오디오/비디오 기기(100)에서 실행된 오디오/비디오 기능의 상세설명을 획득하고, 이를 표시부(260)를 통해 표시하도록 한다.When the selection of the description information is made, the augmented reality implementation unit 240 obtains a detailed description of the audio/video function executed in the vehicle audio/video device 100 through the memory or the server in step S107, and displays it on the display unit 260 ) to indicate it.

표시부(260)는 상기 증강현실 구현부(240)에서 출력되는 차량 오디오/비디오 기기(100)에서 실행된 오디오/비디오 메뉴의 상세설명을 화면에 디스플레이해준다.The display unit 260 displays a detailed description of the audio/video menu executed in the vehicle audio/video device 100 output from the augmented reality implementation unit 240 on the screen.

이로써 사용자는 표시부(260)를 통해 차량 오디오/비디오 기기(100)에서 실행된 오디오/비디오 메뉴의 상세 설명을 모바일기기(200)를 통해 편리하게 확인할 수 있게 되는 것이다.Accordingly, the user can conveniently check the detailed description of the audio/video menu executed in the vehicle audio/video device 100 through the mobile device 200 through the display unit 260 .

만약, 단계 S106에서 사용자가 증강현실로 구현된 설명정보를 선택하지 않으면, 화면에는 촬영 영상과 말풍선 정보가 그대로 디스플레이된다.If the user does not select the explanatory information implemented in augmented reality in step S106, the captured image and speech bubble information are displayed on the screen as they are.

이상 상술한 바와 같이 본 발명은, 사용자의 모바일기기로 차량의 오디오/비디오(A/V) 시스템의 메뉴를 촬영하면, 설명 애플리케이션을 이용하여 선택한 메뉴에 대해 상세설명을 증강현실을 통해 사용자에게 제공할 수 있어, 사용자의 편의성 증대를 도모한다.As described above, the present invention provides a detailed description of the menu selected using the description application to the user through augmented reality when the user's mobile device captures the menu of the vehicle's audio/video (A/V) system. This can be done to increase user convenience.

이상 본 발명자에 의해서 이루어진 발명을 상기 실시 예에 따라 구체적으로 설명하였지만, 본 발명은 상기 실시 예에 한정되는 것은 아니고 그 요지를 이탈하지 않는 범위에서 여러 가지로 변경 가능한 것은 이 기술분야에서 통상의 지식을 가진 자에게 자명하다.Although the invention made by the present inventor has been described in detail according to the above embodiment, the present invention is not limited to the above embodiment and it is common knowledge in the art that various changes can be made without departing from the gist of the present invention. It is self-evident to those who have

100: 차량 오디오/비디오 기기 200: 모바일기기
210: 설명 애플리케이션 실행부 220: 입력부
230: 차량 오디오/비디오 기능 촬영부 240: 증강현실 구현부
250: 메모리 260: 표시부100: vehicle audio/video device 200: mobile device
210: description application execution unit 220: input unit
230: vehicle audio / video function recording unit 240: augmented reality implementation unit
250: memory 260: display unit

Claims (6)

차량의 오디오/비디오 기능의 상세설명을 모바일기기에서 제공해주기 위한 장치로서,
차량에 장착되어 오디오/비디오 기능을 실행하는 차량 오디오/비디오 기기; 및
차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션이 실행된 상태에서, 상기 차량 오디오/비디오 기기에서 실행되는 기능이 인식되면 자동으로 실행된 기능의 상세설명을 위한 설명 정보를 증강현실로 구현해주고, 상기 설명정보가 선택되면 실행된 기능의 상세설명을 디스플레이해주는 모바일기기를 포함하는 것을 특징으로 하는 차량 오디오/비디오 기능 설명제공장치.
A device for providing detailed descriptions of audio/video functions of a vehicle on a mobile device,
a vehicle audio/video device mounted on a vehicle to execute an audio/video function; and
When a function executed in the vehicle audio/video device is recognized while the description application that provides detailed description of the audio/video function of the vehicle is running, the description information for the detailed description of the automatically executed function is converted into augmented reality. A vehicle audio/video function description providing apparatus, comprising a mobile device that implements and displays a detailed description of an executed function when the description information is selected.
 청구항 1에서, 상기 모바일기기는 해당 기기의 정보 및 사용 매뉴얼을 얻고자 하는 구성품을 촬영하면 이미 형상화된 말풍선에 의해 해당 구성품의 매뉴얼 및 정보를 증강현실로 표시해주는 것을 특징으로 하는 차량 오디오/비디오 기능 설명제공장치.
The vehicle audio/video function of claim 1, wherein the mobile device displays the manual and information of the corresponding component in augmented reality by means of a speech bubble already shaped when a component for which information and a user manual of the corresponding device are to be obtained is photographed explanation device.
 청구항 1에서, 상기 모바일기기는 상기 차량 오디오/비디오 기기에서 실행되는 기능을 촬영하고, 촬영된 영상을 인식하여 차량 오디오/비디오 기기에서 실행되는 기능을 인식하는 것을 특징으로 하는 차량 오디오/비디오 기능 설명제공장치.
The vehicle audio/video function description of claim 1, wherein the mobile device captures a function executed in the vehicle audio/video device, and recognizes a function executed in the vehicle audio/video device by recognizing the captured image providing device.
 청구항 1에서, 상기 모바일기기는,
차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 실행시키는 설명 애플리케이션 실행부;
상기 차량 오디오/비디오 기기에서 실행되는 기능을 촬영하는 차량 A/V 기능 촬영부;
상기 설명 애플리케이션을 이용하여 상기 차량 A/V 기능 촬영부에서 촬영된 차량 A/V 기능의 상세설명을 위한 설명 정보를 말풍선으로 형상화하여 증강현실로 구현해주고, 상기 설명정보가 선택되면 실행된 기능의 상세설명 디스플레이를 제어하는 증강현실 구현부;
상기 증강현실 구현부에서 출력되는 말풍선 형상의 설명 정보와 촬영 화면을 화면에 중첩시켜 증강현실로 표시해주고, 실행된 기능의 상세설명을 화면에 디스플레이해주는 표시부를 포함하는 것을 특징으로 하는 차량 오디오/비디오 기능 설명제공장치.
The method according to claim 1, The mobile device,
a description application execution unit that executes a description application that provides detailed descriptions for the audio/video function of the vehicle;
a vehicle A/V function photographing unit for photographing a function executed in the vehicle audio/video device;
Using the description application, the description information for the detailed description of the vehicle A/V function photographed by the vehicle A/V function photographing unit is shaped into a speech bubble and implemented in augmented reality, and when the description information is selected, the function executed Augmented reality realization unit to control the detailed description display;
Vehicle audio/video, characterized in that it comprises a display unit for displaying the description information of the speech bubble shape output from the augmented reality implementing unit and the shooting screen overlaid on the screen in augmented reality, and displaying detailed descriptions of the executed function on the screen Functional description providing device.
 청구항 2에서, 상기 말풍선은 해당 기기에 중첩 또는 외부 주변에 가깝게 위치 및 배치되어 말풍선으로 표현되는 것을 특징으로 하는 차량 오디오/비디오 기능 설명제공방법.
The method according to claim 2, wherein the speech balloon is positioned and disposed close to the external periphery or overlapped with the device to be expressed as a speech balloon.
 청구항 1 내지 청구항 4중 어느 하나의 청구항에 기재된 차량 오디오/비디오 기능 설명제공장치를 이용하여 차량의 오디오/비디오 기능의 상세설명을 제공해주기 위한 방법으로서,
(a) 차량 오디오/비디오 기기가 동작하는 상태에서, 사용자의 기능 선택에 따라 모바일기기에서 차량의 오디오/비디오 기능에 대해 상세설명을 제공하는 설명 애플리케이션을 실행하는 단계;
(b) 상기 모바일기기에서 상기 차량 오디오/비디오 기기에서 실행되는 기능을 인식하는 단계;
(c) 상기 모바일기기에서 차량 오디오/비디오 기기에서 실행되는 기능 인식 후, 자동으로 실행된 기능의 상세설명을 위한 설명 정보를 증강현실로 구현해주는 단계; 및
(d) 상기 모바일기기에서 상기 증강현실로 구현한 설명 정보가 선택되면, 실행된 기능의 상세설명을 화면에 표시해주는 단계를 포함하는 것을 특징으로 하는 차량 오디오/비디오 기능 설명제공방법.A method for providing a detailed description of an audio/video function of a vehicle using the vehicle audio/video function description providing apparatus according to any one of claims 1 to 4, comprising:
(a) in a state in which the vehicle audio/video device is operating, executing a description application that provides a detailed description of the audio/video function of the vehicle in the mobile device according to the user's function selection;
(b) recognizing a function executed in the vehicle audio/video device in the mobile device;
(c) realizing explanatory information for detailed description of the automatically executed function in augmented reality after the mobile device recognizes the function executed in the vehicle audio/video device; and
(d) when the description information implemented in the augmented reality in the mobile device is selected, displaying a detailed description of the executed function on a screen.
KR1020200106677A 2020-08-25 2020-08-25 Vehicle audio/video function explanation providing apparatus and method using augmented reality KR20220026074A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200106677A KR20220026074A (en) 2020-08-25 2020-08-25 Vehicle audio/video function explanation providing apparatus and method using augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200106677A KR20220026074A (en) 2020-08-25 2020-08-25 Vehicle audio/video function explanation providing apparatus and method using augmented reality

Publications (1)

Publication Number Publication Date
KR20220026074A true KR20220026074A (en) 2022-03-04

Family

ID=80814136

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200106677A KR20220026074A (en) 2020-08-25 2020-08-25 Vehicle audio/video function explanation providing apparatus and method using augmented reality

Country Status (1)

Country Link
KR (1) KR20220026074A (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190034896A (en) 2017-09-25 2019-04-03 현대자동차주식회사 Method and system for providing Web manual based on user
KR20200067538A (en) 2018-12-04 2020-06-12 현대자동차주식회사 Server, user device and communication system comprising the same

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190034896A (en) 2017-09-25 2019-04-03 현대자동차주식회사 Method and system for providing Web manual based on user
KR20200067538A (en) 2018-12-04 2020-06-12 현대자동차주식회사 Server, user device and communication system comprising the same

Similar Documents

Publication Publication Date Title
US9733895B2 (en) Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
JP2021073567A (en) Voice control method, terminal device, cloud server, and system
EP2261785B1 (en) Mobile terminal and controlling method thereof
US9116565B2 (en) Mobile terminal and method of controlling the mobile terminal
CN107832036B (en) Voice control method, device and computer readable storage medium
US10678563B2 (en) Display apparatus and method for controlling display apparatus
US20130035942A1 (en) Electronic apparatus and method for providing user interface thereof
KR20180129432A (en) Mobile terminal and method for controlling the same
WO2022100712A1 (en) Method and system for displaying virtual prop in real environment image, and storage medium
CN111093023B (en) Video shooting method and electronic equipment
CN104317402B (en) Description information display method and device and electronic equipment
US9491401B2 (en) Video call method and electronic device supporting the method
US11417335B2 (en) Method and device for information processing, terminal, server and storage medium
JP2014123378A (en) Text-enlargement display method
WO2014196208A1 (en) Gesture input device for car navigation device
CN109656461B (en) Screen capturing method and terminal
JP2017525076A (en) Character identification method, apparatus, program, and recording medium
CN111752450A (en) Display method and device and electronic equipment
CN111010528A (en) Video call method, mobile terminal and computer readable storage medium
KR20210086103A (en) Display device, mobile device, video calling method performed by a display device thereof, video calling method performed by a mobile device thereof
KR20220026074A (en) Vehicle audio/video function explanation providing apparatus and method using augmented reality
US20110093793A1 (en) Method for attaching data and mobile terminal thereof
KR20150095290A (en) Linking system and method for mobile phone and vehicle display device
KR101671013B1 (en) Text editing method based on touch and terminal thereof
US20170220317A1 (en) Electronic apparatus and control program of electronic apparatus

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application