KR20210036880A - Equipment interaction method, device, equipment, system and medium - Google Patents

Equipment interaction method, device, equipment, system and medium Download PDF

Info

Publication number
KR20210036880A
KR20210036880A KR1020210034295A KR20210034295A KR20210036880A KR 20210036880 A KR20210036880 A KR 20210036880A KR 1020210034295 A KR1020210034295 A KR 1020210034295A KR 20210034295 A KR20210034295 A KR 20210034295A KR 20210036880 A KR20210036880 A KR 20210036880A
Authority
KR
South Korea
Prior art keywords
command
input
manipulation
auxiliary
touch
Prior art date
Application number
KR1020210034295A
Other languages
Korean (ko)
Other versions
KR102528104B1 (en
Inventor
제샹 왕
지안제 첸
Original Assignee
베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디. filed Critical 베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디.
Publication of KR20210036880A publication Critical patent/KR20210036880A/en
Application granted granted Critical
Publication of KR102528104B1 publication Critical patent/KR102528104B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373Voice control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/382Information transfer, e.g. on bus using universal interface adapter
    • G06F13/385Information transfer, e.g. on bus using universal interface adapter for adaptation of a particular data processing system to different peripheral devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Mechanical Engineering (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

An embodiment of the present invention discloses a method, an apparatus, a device, a system, and a medium interacting with another device, which relates to a field of controlling vehicle equipment. To this end, the method includes: receiving an operating command, which is transmitted from a master device, generated, by the master device, in response to a touch operation of a user to a touch assembly; inputting an input command corresponding to the operating command into a command space of an input device corresponding to the operating command; and accessing the input command and making a response to the input command in the command space by driving the input device such that an auxiliary device is controlled. According to an embodiment of the present invention, the master device further controls the auxiliary device through the touch operation, and distinguishes between input commands of different input devices in the command space of the input device corresponding to the operating command, thereby making a basis of a generalized input of the auxiliary device. The access and the response to the input command are made in the command space through the operation of the input device, thereby generally controlling the auxiliary device.

Description

기기 인터랙티브 방법, 장치, 기기, 시스템 및 매체{EQUIPMENT INTERACTION METHOD, DEVICE, EQUIPMENT, SYSTEM AND MEDIUM}Device interactive method, device, device, system and medium {EQUIPMENT INTERACTION METHOD, DEVICE, EQUIPMENT, SYSTEM AND MEDIUM}

본원 발명은 통신기술에 관한 것으로, 특히 차량용 기기의 제어분야에 관한 것이며, 구체적으로는 기기 인터랙티브 방법, 장치, 기기, 시스템 및 매체에 관한 것이다.TECHNICAL FIELD The present invention relates to communication technology, in particular, to the field of controlling a vehicle device, and in particular to a device interactive method, an apparatus, a device, a system, and a medium.

지능화 수요의 끊임없는 향상과 더불어 통상적으로 하나의 기기에 보조 기기를 고정 설치하여 기기 기능을 다채롭게 해야 한다. 통상적인 상황에서, 스크린이 없거나 스크린이 작은 관계로 사용자가 보조 기기를 조작하기 불편하였다.In addition to the continuous improvement of the demand for intelligence, it is necessary to provide a variety of device functions by fixing auxiliary devices to one device in general. In a normal situation, it is inconvenient for the user to operate the auxiliary device because there is no screen or the screen is small.

선행기술에서는, 통상적으로 조작이 편리한 마스터 기기에 음성 또는 제스처를 입력하여 조작 명령어를 생성하고, 마스터 기기에서 보조 기기에 발송하여 보조 기기로 하여금 상기 조작 명령어에 응답하여 상응한 조작을 수행하도록 한다.In the prior art, an operation command is generated by inputting a voice or a gesture to a master device that is convenient to operate in general, and the master device sends it to an auxiliary device to cause the auxiliary device to perform a corresponding operation in response to the manipulation command.

그러나 상기 방식은 조작 가능 영역이 유일한 상황에만 적용되는 바, 보조 기기에 다수의 조작 가능 영역이 포함될 경우 현재 조작이 필요한 영역을 결정할 수 없어 조작이 실패하는 상황을 초래하게 된다.However, since the above method is applied only to a situation in which the operable area is unique, when a plurality of operable areas are included in the auxiliary device, a situation in which the manipulation fails because it is not possible to determine the area in which the current manipulation is required.

본원 발명의 실시예는 마스터 기기와 보조 기기가 인터랙티브하는 과정에서 보조 기기에 대한 일반화 동작을 실현하도록 기기 인터랙티브 방법, 장치, 기기, 시스템 및 매체를 제공한다.An embodiment of the present invention provides a device interactive method, an apparatus, a device, a system, and a medium so as to realize a generalized operation for an auxiliary device in a process in which a master device and an auxiliary device interact.

제1 양태에서, 본원 발명의 실시예는 보조 기기에 의해 수행되는 기기 인터랙티브 방법을 제공하는데, 상기 방법은,In a first aspect, an embodiment of the present invention provides a device interactive method performed by an auxiliary device, the method comprising:

마스터 기기가 발송한, 상기 마스터 기기에서 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성된 조작 명령어를 수신하는 단계; Receiving a manipulation command generated in response to a user's touch manipulation on the touch assembly from the master device sent by the master device;

상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하는 단계; Writing an input command corresponding to the manipulation command in a command space of an input device corresponding to the manipulation command;

상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 단계; 를 포함한다.Accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device; Includes.

본원 발명의 실시예는 보조 기기를 통해 마스터 기기가 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성한 조작 명령어를 수신하고; 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입하며; 보조 기기를 제어하도록 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 응답한다. 상기 기술적 해결수단은 보조 기기를 통해 마스터 기기가 발송한 조작 명령어를 수신하고 응답하여 마스터 기기와 보조 기기가 인터랙티브하는 과정에서 마스터 기기에서의 터치 조작을 통해 보조 기기의 조작을 제어하며; 이와 동시에, 보조 기기는 조작 명령어에 응답하는 과정에서 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입함으로써 상이한 입력 기기와 입력 명령어를 구별하여 보조 기기의 일반화한 입력에 기초를 마련하며; 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어의 액세스와 응답을 진행하여 보조 기기에 대한 일반화 제어를 실현한다. According to an embodiment of the present invention, a master device receives a manipulation command generated in response to a user's touch manipulation of a touch assembly through an auxiliary device; Writing an input command corresponding to the manipulation command in a command space of the input device corresponding to the manipulation command; It accesses and responds to input commands in the command space through the drive of the input device to control the auxiliary device. The technical solution includes receiving and responding to an operation command sent by the master device through the auxiliary device, and controlling the operation of the auxiliary device through a touch manipulation in the master device in the process of interacting with the master device and the auxiliary device; At the same time, the auxiliary device distinguishes between different input devices and input commands by writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command in the process of responding to the manipulation command. To lay the foundation; Through the drive of the input device, the access and response of the input command is performed in the command space to realize generalized control for the auxiliary device.

선택적으로, 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 단계는,Optionally, the step of accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device,

상기 입력 기기의 구동을 통해 상기 명령어 공간에서 입력 명령어를 액세스하고 해석하는 단계; 및 Accessing and interpreting an input command in the command space through driving of the input device; And

보조 애플리케이션을 제어하도록 상기 입력 기기의 구동을 통해 상기 입력 명령어의 해석 결과를 상기 보조 기기의 운영체제에 의해 대응되는 보조 애플리케이션에 송신하여 응답하는 단계; 를 포함한다.Responding by transmitting an analysis result of the input command to a corresponding auxiliary application by an operating system of the auxiliary device through driving of the input device to control an auxiliary application; Includes.

상기 출원에서의 한가지 선택적인 실시형태에서, 입력 명령어의 액세스 응답 조작을 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 해석하는 것으로 세부화하고 운영체제를 통해 해석 결과를 대응되는 보조 애플리케이션에 송신하여 대응되도록 함으로써 보조 애플리케이션에 대한 제어를 실현하고 입력 명령어의 액세스 응답 메커니즘을 완전해지게 한다.In one optional embodiment in the above application, the access response operation of the input command is detailed as accessing and interpreting the input command in the command space through driving of the input device, and sending the analysis result to the corresponding auxiliary application through the operating system. By making it correspond, it realizes control over the auxiliary application and completes the access response mechanism of the input command.

선택적으로, 상기 터치 어셈블리는 하드웨어 터치 어셈블리 및 소프트웨어 터치 어셈블리 중 적어도 하나를 포함한다. Optionally, the touch assembly includes at least one of a hardware touch assembly and a software touch assembly.

상기 조작 명령어는 조작 이벤트 및 입력 텍스트 중 적어도 하나를 포함한다. The manipulation command includes at least one of a manipulation event and input text.

입력 기기의 구동은 하드웨어 터치 어셈블리 구동 및 텍스트 입력 구동 중 적어도 하나를 포함한다.Driving the input device includes at least one of driving a hardware touch assembly and driving a text input.

상기 출원에서의 한가지 선택적인 실시형태에서, 터치 어셈블리, 조작 명령어 및 입력 기기의 구동을 세부화함으로써 하드웨어 터치 어셈블리 및/또는 소프트웨어 터치 어셈블리를 통해 보조 기기에 대해 이벤트 조작 제어 및/또는 텍스트 입력 제어를 진행하는 것을 실현하는 동시에 마스터 기기와 보조 지기 사이의 인터랙티브 방식과 인터랙티브 콘텐츠를 풍부하게 한다.In one optional embodiment in the above application, event manipulation control and/or text input control are performed on an auxiliary device through a hardware touch assembly and/or a software touch assembly by detailing the touch assembly, the manipulation instruction, and the driving of the input device. At the same time, it enriches the interactive method and interactive content between the master device and the auxiliary device.

선택적으로, 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 단계는,Optionally, the step of accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device,

상기 하드웨어 터치 어셈블리 구동을 통해 상기 명령어 공간에서 상기 조작 이벤트의 제어 문자 명령어를 획득하고 상기 제어 문자 명령어에 근거하여 보조 애플리케이션 디스플레이 인터페이스에서의 현재 초점을 업데이트하는 단계; 및 Acquiring a control text command of the manipulation event in the command space by driving the hardware touch assembly and updating a current focus in an auxiliary application display interface based on the control text command; And

상기 텍스트 입력 구동을 통해 상기 명령어 공간에서 상기 입력 텍스트의 텍스트 문자 명령어를 획득하고 상기 텍스트 문자 명령어에 근거하여 보조 애플리케이션이 현재 초점으로부터 상기 입력 텍스트를 디스플레이하는 단계; 중 적어도 하나를 포함한다.Acquiring a text text command of the input text in the command space through the text input driving, and displaying the input text from a current focus by an auxiliary application based on the text text command; It includes at least one of.

상기 출원에서의 하나의 선택적인 실시방법에서, 입력 명령어에 대한 액세스 응답 조작을 하드웨어 터치 어셈블리 구동을 통해 보조 애플리케이션 디스플레이 인터페이스에서의 초점 위치를 업데이트하는 것으로 세부화하거나, 및/또는, 텍스트 입력 구동을 통해 보조 애플리케이션에서의 텍스트 입력 제어를 실현함으로써 마스터 기기가 보조 기기에 대해 제어할 때의 제어 메커니즘을 완전하게 한다.In one alternative implementation method in the above application, the manipulation of the access response to the input command is subdivided into updating the focus position in the auxiliary application display interface through the driving of the hardware touch assembly, and/or through the driving of the text input. By realizing the text input control in the auxiliary application, the control mechanism when the master device controls the auxiliary device is completed.

선택적으로, 마스터 기기가 발송한 조작 명령어를 수신하는 단계는,Optionally, the step of receiving the operation command sent by the master device,

수신 애플리케이션을 통해 상기 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신하는 단계를 포함한다.And receiving an operation command sent by a transmission application of the master device through a receiving application.

상기 출원에서의 한가지 선택적인 실시형태에서, 보조 기기에서의 수신 애플리케이션이 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신함으로써 마스터 기기와 보조 기기 사이의 데이터 인터랙티브 방식을 완전해지게 한다.In one alternative embodiment in the above application, the receiving application at the auxiliary device completes the data interactive manner between the master device and the auxiliary device by receiving the operation instruction sent by the transmission application of the master device.

선택적으로, 수신 애플리케이션을 통해 상기 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신하는 단계 후에, 그리고 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하는 단계 전에, 상기 방법은,Optionally, after receiving the operation command sent by the transmission application of the master device through the receiving application, and before writing the input command corresponding to the operation command in the command space of the input device corresponding to the operation command , The method,

안드로이드 개방형 액세서리(AOA) 프로토콜에 기반하여 상기 조작 명령어를 해석하는 단계를 더 포함한다.It further comprises interpreting the operation command based on the Android Open Accessory (AOA) protocol.

상기 출원에서의 한가지 선택적인 실시형태에서, AOA프로토콜 조작 명령어를 해석하고 해석 결과에 근거하여 대응되는 입력 기기를 결정함으로써 마스터 기기와 보조 기기 사이의 통신 메커니즘을 완전해지게 한다.In one alternative embodiment in the above application, the communication mechanism between the master device and the auxiliary device is perfected by interpreting the AOA protocol operation command and determining the corresponding input device based on the analysis result.

선택적으로, 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하는 단계는,Optionally, the step of writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command,

상기 조작 명령어에 근거하여 대응되는 입력 기기를 결정하는 단계;Determining a corresponding input device based on the manipulation command;

상기 조작 명령어에 근거하여 입력 명령어를 구축하는 단계; 및Constructing an input command based on the manipulation command; And

상기 입력 기기의 명령어 공간에 상기 입력 명령어를 기입하는 단계; 를 포함한다.Writing the input command in a command space of the input device; Includes.

상기 출원에서의 한가지 선택적인 실시형태에서, 입력 명령어가 명령어 공간에서의 기입 조작을 조작 명령어에 근거하여 대응되는 입력 기기를 결정하고 입력 명령어를 구축하는 것으로 세부화하며; 입력 기기의 명령어 공간에 입력 명령어를 기입함으로써 입력 기기의 결정 메커니즘과 입력 명령어의 기입 메커니즘을 완전해지게 하여 상이한 입력 기기의 상이한 입력 명령어의 구별을 보장한다.In one alternative embodiment in the above application, the input instruction details the writing operation in the instruction space as determining a corresponding input device based on the operation instruction and constructing the input instruction; By writing the input command in the command space of the input device, the determination mechanism of the input device and the writing mechanism of the input command are complete, thereby ensuring the distinction of different input commands of different input devices.

선택적으로, 상기 마스터 기기는 자동차이고; 상기 보조 기기는 차량용 기기이다.Optionally, the master device is an automobile; The auxiliary device is a vehicle device.

상기 출원에서의 한가지 선택적인 실시형태에서, 마스터 기기를 자동차로 세부화하고, 보조 기기를 차량용 기기로 세부화함으로써 자동차에 의해 차량용 기기에 대한 일반화 제어를 실현하고 사용자가 차량용 기기에 대한 제어에 편리를 제공하는 동시에 사용자가 자동차에서의 터치 어셈블리를 조작함으로써 차량용 기기의 일반화 제어를 실현하여 사용자의 조작감을 향상시킬 수 있다.In one optional embodiment in the above application, by subdividing the master device into a vehicle and subdividing the auxiliary device into a vehicle device, it realizes generalized control of the vehicle device by the vehicle and provides convenience for the user to control the vehicle device. At the same time, the user manipulates the touch assembly in the vehicle, thereby realizing generalized control of the vehicle device, thereby improving the user's operation feeling.

제2 양태에서, 본원 발명의 실시예는 마스터 기기에 의해 수행되는 기기 인터랙티브 방법을 더 제공하는데, 상기 방법은, In a second aspect, an embodiment of the present invention further provides a device interactive method performed by a master device, the method comprising:

터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하는 단계; 및 Generating a manipulation instruction in response to a user's touch manipulation on the touch assembly; And

보조 기기가 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하여 상기 보조 기기를 제어하도록 상기 조작 명령어를 상기 보조 기기에 발송하는 단계; 를 포함한다.The auxiliary device writes the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and controls the auxiliary device by accessing and responding to the input command in the command space through driving of the input device. Sending the operation command to the auxiliary device; Includes.

제3 양태에서, 본원 발명의 실시예는 보조 기기에 배치되는 기기 인터랙티브 장치를 더 제공하는데, 상기 장치는,In a third aspect, an embodiment of the present invention further provides a device interactive device disposed in an auxiliary device, the device comprising:

마스터 기기가 발송한, 상기 마스터 기기에서 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성된 조작 명령어를 수신하기 위한 조작 명령어 수신 모듈; An operation instruction receiving module for receiving an operation instruction generated in response to a user's touch operation on the touch assembly from the master device sent by the master device;

상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하기 위한 입력 명령어 기입 모듈; 및 An input command writing module for writing an input command corresponding to the manipulation command in a command space of an input device corresponding to the manipulation command; And

상기 보조 기기를 제어하도록 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하기 위한 입력 명령어 응답 모듈; 을 포함한다.An input command response module for accessing and responding to the input command in the command space to control the auxiliary device; Includes.

제4 양태에서, 본원 발명의 실시예는 마스터 기기에 배치되는 기기 인터랙티브 장치를 더 제공하는데, 상기 장치는,In a fourth aspect, an embodiment of the present invention further provides a device interactive device disposed on a master device, the device comprising:

터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하기 위한 조작 명령어 생성 모듈; 및 A manipulation instruction generation module for generating a manipulation command in response to a user's touch manipulation on the touch assembly; And

상기 보조 기기가 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하여 상기 보조 기기를 제어하도록 상기 조작 명령어를 보조 기기에 발송하기 위한 조작 명령어 발송 모듈; 을 포함한다.The auxiliary device controls the auxiliary device by writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, accessing the input command from the command space through driving of the input device, and responding An operation command sending module for sending the operation command to an auxiliary device so as to be performed; Includes.

제5 양태에서, 본원 발명의 실시예는 보조 기기를 더 제공하는데, In a fifth aspect, an embodiment of the present invention further provides an auxiliary device,

적어도 하나의 프로세서; 및 At least one processor; And

상기 적어도 하나의 프로세서와 통신 연결하는 메모리; 를 포함하고, A memory communicating with the at least one processor; Including,

상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행 가능한 명령어가 저장되며, 상기 명령어가 상기 적어도 하나의 프로세서에 의해 실행될 경우, 상기 적어도 하나의 프로세서가 제1 양태의 실시예에서 제공하는 기기 인터랙티브 방법을 수행한다.The memory stores instructions executable by the at least one processor, and when the instructions are executed by the at least one processor, the at least one processor performs the device interactive method provided in the embodiment of the first aspect. do.

제6 양태에서, 본원 발명의 실시예는 마스터 기기를 더 제공하는데,In a sixth aspect, an embodiment of the present invention further provides a master device,

적어도 하나의 프로세서; 및 At least one processor; And

상기 적어도 하나의 프로세서와 통신 연결하는 메모리; 를 포함하고, A memory communicating with the at least one processor; Including,

상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행 가능한 명령어가 저장되며, 상기 명령어가 상기 적어도 하나의 프로세서에 의해 실행될 경우, 상기 적어도 하나의 프로세서가 제2 양태의 실시예에서 제공하는 기기 인터랙티브 방법을 수행한다.The memory stores instructions executable by the at least one processor, and when the instructions are executed by the at least one processor, the at least one processor performs the device interactive method provided in the embodiment of the second aspect. do.

제7 양태에서, 본원 발명의 실시예는 인터랙티브 시스템을 더 제공하는데, 이는,In a seventh aspect, an embodiment of the present invention further provides an interactive system, which,

마스터 기기와 보조 기기를 포함하며; It includes a master device and an auxiliary device;

상기 마스터 기기는 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하고, 상기 조작 명령어를 상기 보조 기기에 발송하며; The master device generates a manipulation command in response to a user's touch manipulation on the touch assembly, and sends the manipulation command to the auxiliary device;

상기 보조 기기는 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고, 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답한다.The auxiliary device writes an input command corresponding to the manipulation command in a command space of an input device corresponding to the manipulation command, and accesses the input command from the command space through driving of the input device to control the auxiliary device. And respond.

제8양태에서, 본원 발명의 실시예는 컴퓨터 프로그램이 저장되어 있는 비일시적 컴퓨터 판독가능 저장 매체를 더 제공하는데, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 경우, 제1 양태의 실시예 또는 제2 양태의 실시예에서 제공하는 기기 인터랙티브 방법이 수행된다.In the eighth aspect, the embodiment of the present invention further provides a non-transitory computer-readable storage medium in which a computer program is stored, wherein when the computer program is executed by a processor, the embodiment of the first aspect or the second aspect The device interactive method provided in the embodiment is performed.

제9양태에서, 본원 발명의 실시예는 컴퓨터 판독 가능 매체에 저장되어 있는 컴퓨터 프로그램을 더 제공하는바, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 경우, 제1 양태의 실시예 또는 제2 양태의 실시예에서 제공하는 기기 인터랙티브 방법이 수행된다.In the ninth aspect, the embodiment of the present invention further provides a computer program stored in a computer-readable medium, wherein when the computer program is executed by a processor, the embodiment of the first aspect or the embodiment of the second aspect The device interactive method provided by is performed.

상기 선택 가능한 방식이 가지는 다른 효과에 대해서는 아래, 구체적인 실시예를 결부하여 설명하고자 한다.Other effects of the selectable method will be described below in conjunction with specific embodiments.

첨부 도면은 본 방안을 더 잘 이해하기 위한 것으로, 본원 발명을 한정하지 않는다. 여기서,
도 1은 본원 발명의 실시예1에서의 기기 인터랙티브 방법의 흐름도이다.
도 2는 본원 발명의 실시예2에서의 기기 인터랙티브 방법의 흐름도이다.
도 3은 본원 발명의 실시예3에서의 기기 인터랙티브 방법의 흐름도이다.
도 4는 본원 발명의 실시예4에서의 기기 인터랙티브 방법의 흐름도이다.
도 5a는 본원 발명의 실시예5에서의 기기 인터랙티브 방법의 흐름도이다.
도 5b는 본원 발명의 실시예5에서의 자동차와 차량용 기기가 조작 인터랙티브하는 모식도이다.
도 6은 본원 발명의 실시예6에서의 기기 인터랙티브 장치의 구조도이다.
도 7은 본원 발명의 실시예7에서의 기기 인터랙티브 장치의 구조도이다.
도 8은 본원 발명의 실시예에 따른 기기 인터랙티브 방법을 실현하기 위한 전자 기기의 블록도이다.
도 9는 본원 발명의 실시예9에서의 기기 인터랙티브 시스템의 구조 모식도이다.
The accompanying drawings are for better understanding of the present scheme, and do not limit the present invention. here,
1 is a flowchart of a device interactive method in Embodiment 1 of the present invention.
2 is a flowchart of a device interactive method according to Embodiment 2 of the present invention.
3 is a flowchart of a device interactive method according to Embodiment 3 of the present invention.
4 is a flowchart of a device interactive method in Embodiment 4 of the present invention.
5A is a flowchart of a device interactive method according to Embodiment 5 of the present invention.
Fig. 5B is a schematic diagram in which a vehicle and a vehicle device operate interactively in the fifth embodiment of the present invention.
6 is a structural diagram of a device interactive device in Embodiment 6 of the present invention.
7 is a structural diagram of a device interactive device in Embodiment 7 of the present invention.
8 is a block diagram of an electronic device for realizing a device interactive method according to an embodiment of the present invention.
9 is a schematic diagram of the structure of the device interactive system according to the ninth embodiment of the present invention.

이하, 첨부 도면을 결부하여 본원 발명의 예시적인 실시예들을 설명하고자 하며, 이해를 돕기 위해 본원 발명의 실시예들의 다양한 세부 사항들이 포함되는데, 이들은 단지 예시적인 것으로 간주되여야 한다. 따라서, 본원 발명의 기술 분야의 통상의 지식을 가진 자라면 본원 발명의 범위 및 사상을 벗어나지 않으면서 본 명세서에 설명된 실시예들에 대해 다양한 변경 및 수정이 이루어질 수 있음을 알아야 한다. 또한, 명확성 및 간결성을 위해, 공지된 기능 및 구조에 대한 설명은 아래 설명에서 생략된다.Hereinafter, exemplary embodiments of the present invention will be described in conjunction with the accompanying drawings, and various details of the embodiments of the present invention are included to aid understanding, which should be regarded as merely exemplary. Therefore, those of ordinary skill in the art of the present invention should be aware that various changes and modifications can be made to the embodiments described herein without departing from the scope and spirit of the present invention. In addition, for clarity and conciseness, descriptions of well-known functions and structures are omitted from the description below.

실시예1Example 1

도 1은 본원 발명의 실시예1에서의 기기 인터랙티브 방법의 흐름도이다. 본원 발명의 실시예는 마스터 기기와 보조 기기의 인터랙티브 과정에서 마스터 기기를 통해 보조 기기를 제어하는 상황에 적용되는데, 상기 방법은 기기 인터랙티브 장치에 의해 수행되고, 상기 장치는 소프트웨어 및/또는 하드웨어에 의해 실현되며 구체적으로는 보조 기기에 배치된다.1 is a flowchart of a device interactive method in Embodiment 1 of the present invention. The embodiment of the present invention is applied to a situation in which an auxiliary device is controlled through a master device in an interactive process of a master device and an auxiliary device. The method is performed by a device interactive device, and the device is software and/or hardware. It is realized and is specifically arranged in an auxiliary device.

도 1에 도시된 기기 인터랙티브 방법은 단계S101 내지 단계S103을 포함한다.The device interactive method shown in FIG. 1 includes steps S101 to S103.

단계S101, 마스터 기기가 발송한, 마스터 기기에서 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성된 조작 명령어를 수신한다.In step S101, the master device receives an operation command sent from the master device in response to a user's touch manipulation on the touch assembly.

여기서, 터치 어셈블리는 마스터 기기에서의 입력 기기, 예를 들어 버튼, 노브, 조작 레버 등 하드웨어 터치 어셈블리 또는 소프트 키보드, 터치 스크린에서의 가상 버튼 등 소프트웨어 터치 어셈블리라고 이해할 수 있다.Here, the touch assembly may be understood as an input device in the master device, for example, a hardware touch assembly such as buttons, knobs, and operation levers, or a software touch assembly such as a soft keyboard and virtual buttons on a touch screen.

선택적으로, 조작 명령어는 보조 기기를 제어하는 조작 이벤트를 포함한다. 선택적으로, 조작 명령어는 보조 기기에서의 보조 애플리케이션에서 텍스트 입력을 진행하는 입력 텍스트를 포함한다.Optionally, the manipulation instruction includes a manipulation event for controlling the auxiliary device. Optionally, the manipulation instruction includes input text for performing text input in an auxiliary application in the auxiliary device.

예시적으로, 사용자가 마스터 기기의 입력 기기에서 터치 어셈블리에 대해 터치 조작을 진행할 경우, 마스터 기기는 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하고 조작 명령어를 보조 기기에 발송한다. 보조 기기는 상기 조작 명령어를 수신한다.For example, when the user performs a touch manipulation on the touch assembly in the input device of the master device, the master device generates a manipulation command in response to the user's touch manipulation on the touch assembly and sends the manipulation command to the auxiliary device. The auxiliary device receives the operation command.

선택적으로, 보조 기기의 운영체제가 직접 마스터 기기에서 발송한 조작 명령어를 수신할 수 있다. 선택적으로, 사용자가 직접 보조 기기를 터치하여 발생한 조작 명령어와 마스터 기기가 발송한 조작 명령어를 구별하여 기존의 보조 기기의 직접적인 재사용을 실현하기 위하여, 보조 기기에 수신 애플리케이션을 더 설치하고 수신 애플리케이션을 통해 마스터 기기에서 발송한 조작 명령어를 수신할 수도 있다.Optionally, the operating command of the auxiliary device may directly receive an operation command sent from the master device. Optionally, in order to realize direct reuse of the existing auxiliary device by discriminating the manipulation command generated by the user directly touching the auxiliary device from the manipulation command sent by the master device, a receiving application is further installed on the auxiliary device through the receiving application. It can also receive operation commands sent from the master device.

단계S102, 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입한다.In step S102, an input command corresponding to the manipulation command is written in a command space of an input device corresponding to the manipulation command.

예시적으로, 조작 명령어에 근거하여 대응되는 입력 기기를 결정하고; 조작 명령어에 근거하여 입력 명령어를 구축하며; 입력 기기의 명령어 공간에 입력 명령어를 기입할 수 있다.Exemplarily, determining a corresponding input device based on the operation command; Constructing an input instruction based on the operation instruction; Input commands can be entered in the command space of the input device.

구체적으로, 조작 명령어에 근거하여 상기 조작 명령어를 수행할 수 있는 입력 기기를 결정하고; 조작 명령어에 근거하여 결정된 입력 기기가 인식할 수 있는 입력 명령어를 구축하며; 결정된 명령어 공간에 구축된 입력 명령어를 기입하여 상이한 입력 기기가 처리할 수 있는 입력 명령어를 구별함으로써 입력 명령어의 순차적인 저장을 실현하여 마스터 기기가 보조 기기에 대한 일반화 제어의 기초를 마련한다. Specifically, determining an input device capable of performing the manipulation command based on the manipulation command; Constructing an input command that can be recognized by the input device determined based on the manipulation command; By writing the built-in input command in the determined command space to distinguish input commands that can be processed by different input devices, sequential storage of the input commands is realized, and the master device provides a basis for generalized control of the auxiliary devices.

여기서, 조작 명령어와 대응되는 입력 기기는 보조 기기에서의 버튼, 노브 및 조작 레버 등 하드웨어 입력 기기, 또는 터치 스크린의 가상 버튼, 소프트 키보드 등 소프트웨어 입력 기기로 이해될 수 있다.Here, the input device corresponding to the manipulation command may be understood as a hardware input device such as a button, a knob, and an operation lever in an auxiliary device, or a software input device such as a virtual button or a soft keyboard on a touch screen.

이해할 수 있는 것은, 마스터 기기의 입력 버튼과 연관된 조작 명령어를 보조 기기에 발송하고, 보조 기기가 조작 명령어가 대응되는 보조 기기의 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입함으로써 마스터 기기의 입력 기기의 입력 동작을 보조 기기의 입력 기기에 매핑하여 마스터 기기의 입력 기기가 보조 기기의 입력 기기를 등가적으로 대체하는 효과에 도달한다.It can be understood that the master device by sending the operation command associated with the input button of the master device to the auxiliary device, and the auxiliary device writing the input command corresponding to the manipulation command in the command space of the input device of the auxiliary device corresponding to the manipulation command. The input operation of the input device of is mapped to the input device of the auxiliary device, so that the input device of the master device equivalently replaces the input device of the auxiliary device.

단계S103, 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답한다.Step S103, accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device.

예시적으로, 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 해석하고; 보조 애플리케이션을 제어하도록 입력 기기의 구동을 통해 입력 명령어의 해석 결과를 보조 기기의 운영체제에 의해 대응되는 보조 애플리케이션에 송신하여 응답할 수 있다.Exemplarily, accessing and interpreting an input instruction in the instruction space through driving of the input device; Through the driving of the input device to control the auxiliary application, an analysis result of the input command may be transmitted by the operating system of the auxiliary device to a corresponding auxiliary application to respond.

구체적으로, 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 상기 입력 명령어가 얻은 상응한 명령어와 콘텐츠를 해석하며; 해석하여 얻은 명령어와 내용을 보조 기기의 운영체제에 전달하고 보조 기기의 운영체제를 통해 해석하여 얻은 명령어와 콘텐츠를 보조 애플리케이션에 송신하며; 보조 애플리케이션은 운영체제가 발송한 명령어와 콘텐츠를 수신하여 응답한다.Specifically, accessing an input instruction in the instruction space through driving of the input device and interpreting the corresponding instruction and contents obtained by the input instruction; Transmits the interpreted command and content to the operating system of the auxiliary device, and transmits the interpreted command and content to the auxiliary application through the operating system of the auxiliary device; The auxiliary application responds by receiving commands and contents sent by the operating system.

선택적으로, 입력 기기의 구동은 하드웨어 터치 어셈블리와 대응되는 하드웨어 터치 어셈블리 구동일 수 있고; 선택적으로, 입력 기기의 구동은 소프트웨어 터치 어셈블리와 대응되는 텍스트 입력 구동 등을 포함할 수도 있다.Optionally, driving of the input device may be driving of a hardware touch assembly corresponding to the hardware touch assembly; Optionally, driving the input device may include driving a text input corresponding to the software touch assembly.

본원 발명의 실시예의 한가지 선택적인 실시형태에서, 입력 기기의 구동이 하드웨어 터치 어셈블리 구동을 포함하면 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 것은, 하드웨어 터치 어셈블리 구동을 통해 명령어 공간에서 조작 이벤트의 제어 문자 명령어를 획득하고 제어 문자 명령어에 근거하여 보조 애플리케이션 디스플레이 인터페이스에서의 현재 초점을 업데이트하는 것일 수 있다. 상기 방식을 사용하면, 상이한 초점에서 보조 기기를 조작 제어하도록 마스터 기기에서 버튼, 노브 또는 조작 레버 등 하드웨어 입력 기기에서 수행하는 터치 조작을 통해 보조 기기에서의 보조 애플리케이션 디스플레이 인터페이스의 현재 초점을 업데이트할 수 있다.In one alternative embodiment of an embodiment of the present invention, accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device when driving of the input device includes driving a hardware touch assembly , Acquiring a control text command of a manipulation event in a command space by driving a hardware touch assembly, and updating a current focus in the auxiliary application display interface based on the control text command. Using the above method, it is possible to update the current focus of the auxiliary application display interface in the auxiliary device through a touch operation performed by a hardware input device such as buttons, knobs, or operation levers on the master device to operate and control the auxiliary device at a different focus. have.

본원 발명의 실시예의 다른 한 선택적인 실시형태에서, 입력 기기의 구동이 텍스트 입력 구동을 포함하면 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 것은, 텍스트 입력 구동을 통해 명령어 공간에서 입력 텍스트의 텍스트 문자 명령어를 획득하고 텍스트 문자 명령어에 근거하여 보조 애플리케이션으로 하여금 현재 초점으로부터 입력 텍스트를 디스플레이하기 시작하도록 제어하는 것일 수 있다. 여기서, 현재 초점은 보조 애플리케이션 디스플레이 인터페이스에서 현재 시각과 대응되는 초점일 수 있다. 상기 초점은 미리 디폴드한 초점, 사용자가 보조 기기에서의 터치 조작에 의해 업데이트한 초점일 수 있고, 사용자가 마스터 기기에서 터치 어셈블리의 터치 조작에 의해 업데이트한 초점일 수도 있다.In another alternative embodiment of an embodiment of the present invention, accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device if the driving of the input device includes a text input driving , Acquiring a text text command of the input text in the command space through text input driving, and controlling the auxiliary application to start displaying the input text from the current focus based on the text text command. Here, the current focus may be a focus corresponding to the current time in the auxiliary application display interface. The focus may be a focus that is pre-defolded, a focus updated by a user by a touch manipulation on an auxiliary device, or a focus updated by a user by a touch manipulation of the touch assembly on the master device.

본원 발명의 실시예는 보조 기기를 통해 마스터 기기가 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성한 조작 명령어를 수신하고; 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입하며; 보조 기기를 제어하도록 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 응답한다. 상기 기술적 해결수단은 보조 기기를 통해 마스터 기기가 발송한 조작 명령어를 수신하고 응답하여 마스터 기기와 보조 기기가 인터랙티브하는 과정에서 마스터 기기에서의 터치 조작을 통해 보조 기기의 조작을 제어하며; 이와 동시에, 보조 기기는 조작 명령어에 응답하는 과정에서 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입함으로써 상이한 입력 기기와 입력 명령어를 구별하여 보조 기기의 일반화한 입력에 기초를 마련하며; 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어의 액세스와 응답을 진행하여 보조 기기에 대한 일반화 제어를 실현한다. According to an embodiment of the present invention, a master device receives a manipulation command generated in response to a user's touch manipulation of a touch assembly through an auxiliary device; Writing an input command corresponding to the manipulation command in a command space of the input device corresponding to the manipulation command; It accesses and responds to input commands in the command space through the drive of the input device to control the auxiliary device. The technical solution includes receiving and responding to an operation command sent by the master device through the auxiliary device, and controlling the operation of the auxiliary device through a touch manipulation in the master device in the process of interacting with the master device and the auxiliary device; At the same time, the auxiliary device distinguishes between different input devices and input commands by writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command in the process of responding to the manipulation command. To lay the foundation; Through the drive of the input device, the access and response of the input command is performed in the command space to realize generalized control for the auxiliary device.

상기 각 실시예의 기술적 해결수단의 기초상에, 마스터 기기는 자동차이고 보조 기기는 차량용 기기로서, 자동차와 차량용 기기 사이의 인터랙티브 조작을 실현하여 자동차에서의 터치 어셈블리에 대한 터치 조작을 통해 차량용 기기의 일반화 제어를 실현하고, 사용자가 차량용 기기를 제어하기 편리하도록 하는 동시에 사용자가 자동차의 터치 어셈블리를 조작하여 차량용 기기의 일반화 제어를 실현하도록 하며 사용자의 조작감을 향상시킬 수 있다.On the basis of the technical solution of each of the above embodiments, the master device is a vehicle and the auxiliary device is a vehicle device, and by realizing interactive operation between the vehicle and the vehicle device, generalization of the vehicle device through touch manipulation on the touch assembly in the vehicle. It is possible to realize control, make it convenient for the user to control the vehicle equipment, and at the same time allow the user to manipulate the touch assembly of the vehicle to realize generalized control of the vehicle equipment, and improve the user's operation feeling.

실시예2Example 2

도 2는 본원 발명의 실시예2에서의 기기 인터랙티브 방법의 흐름도이고, 본원 발명의 실시예는 상기 각 실시예의 기술적 해결수단의 기초상에 최적화 개선을 진행하였다.2 is a flowchart of a device interactive method according to the second embodiment of the present invention, and the embodiments of the present invention are optimized and improved on the basis of the technical solutions of the respective embodiments.

더 나아가, "마스터 기기가 발송한 조작 명령어를 수신한다"라는 동작을 "수신 애플리케이션을 통해 상기 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신한다"로 세부화하여 마스터 기기와 보조 기기 사이의 데이터 인터랙티브 방식을 완전해지게 한다. Furthermore, the operation of "receiving the operation command sent by the master device" is subdivided into "receiving the operation command sent by the transmission application of the master device through the receiving application", so that the data is interactive between the master device and the auxiliary device. Make the way perfect.

도 2에 도시된 바와 같은 기기 인터랙티브 방법은 단계S201 내지 단계S203을 포함한다.The device interactive method as shown in FIG. 2 includes steps S201 to S203.

단계S201, 수신 애플리케이션을 통해 상기 마스터 기기의 전송 애플리케이션이 발송한, 마스터 기기에서 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성된 조작 명령어를 수신한다.In step S201, a manipulation command generated in response to a user's touch manipulation on the touch assembly from the master device sent by the transmission application of the master device through the receiving application is received.

예시적으로, 사용자가 마스터 기기의 입력 기기에서 터치 어셈블리에 대해 터치 조작을 진행할 경우, 마스터 기기는 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하고; 마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송하며; 상기 전송 애플리케이션을 통해 상기 조작 명령어를 보조 기기에 발송한다.For example, when the user performs a touch manipulation on the touch assembly in the input device of the master device, the master device generates a manipulation command in response to the user's touch manipulation on the touch assembly; Sending the operation command to a corresponding transmission application through driving of the master device; The operation command is sent to the auxiliary device through the transmission application.

사용자가 직접 보조 기기를 터치하여 발생한 조작 명령어와 마스터 기기가 발송한 조작 명령어를 구별하여 기존의 보조 기기의 직접적인 재사용을 실현하기 위하여 보조 기기에 수신 애플리케이션을 설치하고 수신 애플리케이션을 통해 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신할 수도 있다.In order to realize direct reuse of the existing auxiliary device by distinguishing the operation command generated by the user directly touching the auxiliary device from the operation command sent by the master device, the receiving application is installed on the auxiliary device and the transmission application of the master device through the receiving application It is also possible to receive this sent operation instruction.

선택적으로, USB(Universal Serial Bus, 유니버설 시리얼 버스) 또는 근거리 통신망의 방식을 통해 마스터 기기와 보조 기기 사이에서 데이터를 전송할 수 있다.Optionally, data can be transmitted between the master device and the auxiliary device through a method of USB (Universal Serial Bus) or a local area network.

예시적으로, 마스터 기기와 보조 기기가 AOA(Android Open Accessory Protocol, 안드로이드 개방형 액세서리) 프로토콜에 기반하여 통신할 경우, 마스터 기기가 보조 기기에 조작 명령어를 발송하면 마스터 기기의 구동을 통해 조작 명령어를 상응한 전송 애플리케이션에 발송하고; 전송 애플리케이션을 통해 마스터 기기의 운영체제에서 조작 명령어를 획득하며; AOA프로토콜에 기반하여 조작 명령어를 패키징하고 데이터 전송 채널을 통해 보조 기기에 패키징 결과를 전송한다. 보조 기기는 수신 애플리케이션을 통해 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신하고 AOA프로토콜에 기반하여 상기 조작 명령어를 해석한다.For example, when the master device and the auxiliary device communicate based on the AOA (Android Open Accessory Protocol, Android Open Accessory Protocol) protocol, when the master device sends an operation command to the auxiliary device, the master device is driven to correspond to the operation command. Send to one sending application; Obtaining an operation command from the operating system of the master device through the transmission application; The operation command is packaged based on the AOA protocol and the packaging result is transmitted to the auxiliary device through the data transmission channel. The auxiliary device receives the operation command sent by the transmission application of the master device through the receiving application and interprets the operation command based on the AOA protocol.

설명해야 할 것은, 마스터 기기와 보조 기기가 AOA프로토콜에 기반하여 통신할 경우 부품 모드에 진입하게 되는데, 여기서 마스터 기기는 USB 슬레이브가 되고, 보조 기기는 USB 본체가 되어 버스에 전력을 제공한다. 이때, 보조 기기는 안드로이드 부품이다.It should be explained that when the master device and the auxiliary device communicate based on the AOA protocol, they enter the part mode, where the master device becomes a USB slave, and the auxiliary device becomes a USB body to provide power to the bus. At this time, the auxiliary device is an Android part.

단계S202, 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입한다.In step S202, an input command corresponding to the manipulation command is written in a command space of an input device corresponding to the manipulation command.

예시적으로, 조작 명령어의 해석 결과에 근거하여 대응되는 입력 기기를 결정하고; 조작 명령어의 해석 결과에 근거하여 입력 기기가 인식할 수 있는 입력 명령어를 구축하며; 입력 기기의 명령어 공간에 입력 명령어를 기입한다.Exemplarily, determining a corresponding input device based on the analysis result of the operation command; Constructing an input command that can be recognized by the input device based on the analysis result of the manipulation command; Enter the input command in the command space of the input device.

단계S203, 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답한다.In step S203, the input command is accessed and responded to in the command space by driving the input device to control the auxiliary device.

본원 발명의 실시예는 마스터 기기가 발송한 조작 명령어를 수신하는 것을 수신 애플리케이션이 마스터 기기의 전송 애플리케이션에서 발송한 조작 명령어를 수신하는 것으로 세부화하는 것을 통해 조작 명령어의 수신방식을 완전해지게 하고, 이와 동시에 수신 애플리케이션이 마스터 기기에서 발송한 조작 명령어를 수신하도록 설치함으로써 보조 기기 자체에서 발생한 조작 명령어와 마스터 기기에서 발생한 조작 명령어를 구별하여 보조 기기의 멀티플럭싱(multiplexing)을 실현한다.The embodiment of the present invention completes the reception method of the operation command by subdividing the reception of the operation command sent by the master device into receiving the operation command sent from the transmission application of the master device by the receiving application. At the same time, by installing the receiving application to receive the operation instruction sent from the master device, the operation command generated by the auxiliary device itself and the operation command generated by the master device are distinguished from each other to realize multiplexing of the auxiliary device.

실시예3Example 3

도 3은 본원 발명의 실시예3에서의 기기 인터랙티브 방법의 흐름도이고, 본원 발명의 실시예는 마스터 기기와 보조 기기의 인터랙티브 과정에서 마스터 기기를 통해 보조 기기를 제어하는 상황에 적용되는데, 상기 방법은 기기 인터랙티브 장치에 의해 수행되고, 상기 장치는 소프트웨어 및/또는 하드웨어에 의해 실현되며 구체적으로는 마스터 기기에 배치된다.3 is a flowchart of a device interactive method in Embodiment 3 of the present invention, and an embodiment of the present invention is applied to a situation in which an auxiliary device is controlled through a master device in an interactive process between a master device and an auxiliary device. It is carried out by a device interactive device, which device is realized by software and/or hardware and is specifically arranged in a master device.

도 3에 도시된 바와 같은 기기 인터랙티브 방법은 단계S301 내지 단계S302를 포함한다.The device interactive method as shown in FIG. 3 includes steps S301 to S302.

단계S301, 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성한다.In step S301, a manipulation instruction is generated in response to a user's touch manipulation on the touch assembly.

여기서, 터치 어셈블리는 마스터 기기에서의 입력 기기, 예를 들어 버튼, 노브, 조작 레버 등 하드웨어 터치 어셈블리 또는 소프트 키보드, 터치 스크린에서의 가상 버튼 등 소프트웨어 터치 어셈블리라고 이해할 수 있다.Here, the touch assembly may be understood as an input device in the master device, for example, a hardware touch assembly such as buttons, knobs, and operation levers, or a software touch assembly such as a soft keyboard and virtual buttons on a touch screen.

선택적으로, 조작 명령어는 보조 기기를 제어하는 조작 이벤트를 포함한다. 선택적으로, 조작 명령어는 보조 기기에서의 보조 애플리케이션에서 텍스트 입력을 진행하는 입력 텍스트를 포함한다.Optionally, the manipulation instruction includes a manipulation event for controlling the auxiliary device. Optionally, the manipulation instruction includes input text for performing text input in an auxiliary application in the auxiliary device.

예시적으로, 터치 어셈블리가 하드웨어 터치 어셈블리를 포함하면 하드웨어 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하는 것은, 하드웨어 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 제어 전기 신호를 생성하고 상기 제어 전기 신호를 터치 디지털 신호로 전환하며; 기설정 프로토콜에 기반하여 상기 터치 디지털 신호를 조작 이벤트로 전환시키고 상기 조작 이벤트를 포함하는 조작 명령어를 생성하는 것일 수 있다.For example, if the touch assembly includes a hardware touch assembly, generating a manipulation instruction in response to a user's touch manipulation on the hardware touch assembly generates a control electrical signal in response to a user's touch manipulation on the hardware touch assembly, and Converting the control electrical signal into a touch digital signal; It may be to convert the touch digital signal into a manipulation event based on a preset protocol and generate a manipulation command including the manipulation event.

구체적으로, 하드웨어 터치 어셈블리에 대해 사용자의 터치 조작이 진행된 후, CAN(Controller Area Network, 컨트롤러 영역 네트워크) 버스 프로토콜을 통해 터치 조작의 메시지를 마스터 기기에 전송하는데; 여기서, CAN 버스 프로토콜에서는 전송 메시지를 데이터 프레임, 원격 프레임, 오류 프레임 및 과부하 프레임 등으로 분류한다. 각 프레임에서는 프레임 아이디에 따라 각 유형의 이벤트를 구별한다. 예를 들어, 차량에서 CAN 버스를 통해 자동차 내의 엔진 제어 시스템, 잠김 방비 시스템 및 시트 조절 시스템 등과 같은 전자 제어 유닛을 연결할 경우, 프레임 아이디를 통해 조명 신호, 노브 신호 등을 구별할 수 있다. 여기서, 조명 신호의 프레임 아이디는 0X555이고 노브 신호의 프레임 아이디는 0X566이다.Specifically, after the user's touch operation is performed on the hardware touch assembly, a message of the touch operation is transmitted to the master device through a controller area network (CAN) bus protocol; Here, in the CAN bus protocol, transmission messages are classified into data frames, remote frames, error frames, and overload frames. In each frame, each type of event is distinguished according to the frame ID. For example, when an electronic control unit such as an engine control system, an anti-lock system, and a seat control system in a vehicle is connected through a CAN bus in a vehicle, a lighting signal and a knob signal can be distinguished through the frame ID. Here, the frame ID of the illumination signal is 0X555 and the frame ID of the knob signal is 0X566.

마스터 기기가 CAN 버스의 전기 신호를 수신한 후, 제어 전기 신호를 터치 디지털 신호로 전환시키고; 기설정 프로토콜에 근거하여 디지털 신호를 제어 시스템의 시뮬레이션 이벤트를 전환시키며, 조작 이벤트를 포함하는 조작 명령어를 생성한다. 여기서, 시뮬레이션 이벤트는 조작 이벤트로서, 노브 이벤트 및 버튼 이벤트 등에서의 적어도 하나이다.After the master device receives the electrical signal of the CAN bus, converts the control electrical signal into a touch digital signal; Based on a preset protocol, a digital signal is converted into a simulation event of the control system, and an operation command including the operation event is generated. Here, the simulation event is an operation event and is at least one of a knob event and a button event.

예시적으로, 상기 터치 어셈블리가 소프트웨어 터치 어셈블리를 포함하면 소프트웨어 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하는 것은, 소프트웨어 터치 어셈블리에 대한 사용자의 입력 동작에 응답하여 입력 텍스트를 포함하는 조작 명령어를 생성하는 것일 수 있다.Exemplarily, when the touch assembly includes a software touch assembly, generating an operation instruction in response to a user's touch manipulation on the software touch assembly includes input text in response to a user's input operation on the software touch assembly. It may be to generate an operation command.

단계S302, 상기 보조 기기가 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하여 상기 보조 기기를 제어하도록 상기 조작 명령어를 보조 기기에 발송한다.In step S302, the auxiliary device writes an input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and accesses the input command in the command space through driving of the input device and responds to the auxiliary device. The operation command is sent to the auxiliary device to control the device.

선택적으로, 마스터 기기는 자체의 운영체제를 통해 조작 명령어를 보조 기기에 발송할 수 있다.Optionally, the master device may send an operation command to the auxiliary device through its own operating system.

선택적으로, 마스터 기기의 상이한 기능에 대한 구별을 실현하기 위하여 마스터 기기에 전송 애플리케이션을 설치하여 사용자가 마스터 기기에 대한 조작에 따라 마스터 기기의 운영체제에 데이터를 전송하거나, 또는 마스터 기기와 보조 기기 사이에서 데이터를 전송할 수도 있다. 마스터 기기는 전송 애플리케이션을 통해 조작 명령어를 보조 기기에 발송한다.Optionally, in order to realize the distinction between the different functions of the master device, a transmission application is installed on the master device to transmit data to the operating system of the master device according to the user's operation on the master device, or between the master device and the auxiliary device. You can also transmit data. The master device sends an operation command to the auxiliary device through the transmission application.

본원 발명의 실시예는 마스터 기기는 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하고; 조작 명령어를 보조 기기에 발송하여 보조 기기가 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입하며 보조 기기를 제어하도록 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 응답한다. 상기 기술적 해결수단에서, 사용자가 마스터 기기에서의 터치 어셈블리에 대한 터치 조작을 통해 조작 명령어를 생성하여 상기 조작 명령어에 기반하여 보조 기기를 더 제어함으로써 마스터 기기와 보조 기기가 인터랙티브하는 과정에서 마스터 기기에서의 터치 조작에 의해 보조 기기의 조작을 제어하며; 이와 동시에, 보조 기기는 조작 명령어에 응답하는 과정에서 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입함으로써 상이한 입력 기기와 입력 명령어를 구별하여 보조 기기의 일반화한 입력에 기초를 마련하고; 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어의 액세스와 응답을 진행하여 보조 기기에 대한 일반화 제어를 실현한다. In an embodiment of the present invention, the master device generates a manipulation instruction in response to a user's touch manipulation of the touch assembly; By sending a manipulation command to an auxiliary device, the auxiliary device writes the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and accesses the input command from the command space by driving the input device to control the auxiliary device. And respond. In the technical solution, the user generates a manipulation command through a touch manipulation on the touch assembly in the master device, and further controls the auxiliary device based on the manipulation command, so that the master device and the auxiliary device interact with each other in the master device. Controlling the operation of the auxiliary device by the touch operation At the same time, the auxiliary device distinguishes between different input devices and input commands by writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command in the process of responding to the manipulation command. Lay the foundation; Through the drive of the input device, the access and response of the input command is performed in the command space, thereby realizing generalized control of the auxiliary device.

상기 각 실시예의 기술적 해결수단의 기초상에, 마스터 기기는 자동차이고 보조 기기는 차량용 기기로서, 자동차와 차량용 기기 사이의 인터랙티브 조작을 실현하여 자동차에서의 터치 어셈블리에 대한 터치 조작을 통해 차량용 기기의 일반화 제어를 실현하고, 사용자가 차량용 기기를 제어하기 편리하도록 하는 동시에 사용자가 자동차의 터치 어셈블리를 조작하여 차량용 기기의 일반화 제어를 실현하도록 하며 사용자의 조작감을 향상시킬 수 있다.On the basis of the technical solution of each of the above embodiments, the master device is a vehicle and the auxiliary device is a vehicle device, and by realizing interactive operation between the vehicle and the vehicle device, generalization of the vehicle device through touch manipulation on the touch assembly in the vehicle. It is possible to realize control, make it convenient for the user to control the vehicle equipment, and at the same time allow the user to manipulate the touch assembly of the vehicle to realize generalized control of the vehicle equipment, and improve the user's operation feeling.

실시예4Example 4

도 4는 본원 발명의 실시예4에서의 기기 인터랙티브 방법의 흐름도이고, 본원 발명의 실시예는 상기 각 실시예의 기술적 해결수단의 기초상에 최적화 개선을 진행하였다.4 is a flow chart of a device interactive method according to the fourth embodiment of the present invention, and the embodiments of the present invention are optimized and improved on the basis of the technical solutions of the respective embodiments.

더 나아가, "상기 조작 명령어를 보조 기기에 발송한다"라는 동작을 "마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송하고; 상기 전송 애플리케이션을 통해 상기 조작 명령어를 보조 기기에 발송한다"로 세부화하여 마스터 기기와 보조 기기 사이의 데이터 인터랙티브 방식을 완전해지게 한다.Furthermore, the operation of "sending the operation command to the auxiliary device" is transmitted to the corresponding transmission application through the drive of the master device; the manipulation command is sent to the auxiliary device through the transmission application. It is subdivided into "to complete the data interactive method between the master device and the auxiliary device.

도 4에 도시된 기기 인터랙티브 방법은 단계S401 내지 단계S403을 포함한다.The device interactive method illustrated in FIG. 4 includes steps S401 to S403.

단계S401, 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성한다.In step S401, a manipulation instruction is generated in response to a user's touch manipulation on the touch assembly.

단계S402, 마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송한다.Step S402, the operation command is sent to the corresponding transmission application through the driving of the master device.

단계S403, 상기 보조 기기가 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하여 상기 보조 기기를 제어하도록 상기 전송 애플리케이션을 통해 상기 조작 명령어를 보조 기기에 발송한다.In step S403, the auxiliary device writes an input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and accesses the input command in the command space through driving of the input device and responds to the auxiliary device. Send the operation command to the auxiliary device through the transmission application to control the device.

선택적으로, 전송 애플리케이션은 마스터 기기와 보조 기기 사이의 데이터 전송을 위해 별도로 장착한 애플리케이션 프로그램 일 수 있다.Optionally, the transmission application may be an application program separately installed for data transmission between the master device and the auxiliary device.

기존의 마스터 기기에서, 사용자가 마스터 기기의 입력 기기를 통해 마스터 기기를 조작 제어할 경우, 통상적으로 자체에 설치된 애플리케이션 프로그램에 따라 사용자의 입력 동작에 응답하여 마스터 기기의 운영체제에 데이터를 전송함으로써 차량에서 노브 동작을 통해 조명 등을 제어하는 것과 같은 마스터 기기의 입력 기기의 고유적인 기능을 실현한다. 전송 애플리케이션은 자체에 설치된 애플리케이션 프로그램의 재사용을 통해 마스터 기기와 보조 기기 사이의 데이터 전송을 실현함으로써 보조 기기의 조작을 제어할 수도 있다.In the existing master device, when a user operates and controls the master device through the input device of the master device, the vehicle transmits data to the operating system of the master device in response to the user's input operation according to an application program installed therein. It realizes the unique function of the input device of the master device, such as controlling the lighting, etc. through the operation of the knob. The transfer application can also control the operation of the auxiliary device by realizing data transfer between the master device and the auxiliary device through reuse of an application program installed therein.

전송 애플리케이션을 재사용할 경우, 마스터 기기 자체에 대한 조작 제어와 보조 기기에 대한 조작 제어가 헛갈리는 것을 방지하기 위하여 전송 애플리케이션의 운행 모드를 통해 둘을 구별할 수 있다.When the transmission application is reused, the two can be distinguished through the operation mode of the transmission application in order to prevent the operation control of the master device itself and the operation control of the auxiliary device from being confused.

예시적으로, 만약 전송 애플리케이션이 전경 운행 모드에 있으면 마스터 기기의 구동을 통해 조작 명령어를 상응한 전송 애플리케이션에 발송함으로써 전송 애플리케이션을 통해 조작 명령어를 보조 기기에 발송한다. 만약 전송 애플리케이션이 백그라운드 운행 모드에 있으면 전송 애플리케이션은 데이터가 마스터 기기와 보조 기기 사이에서 전송되는 것을 실현하는 것이 아니라 자체의 고유적인 기능을 실현한다.For example, if the transmission application is in the foreground driving mode, the operation command is sent to the corresponding transmission application through the driving of the master device, thereby sending the operation command to the auxiliary device through the transmission application. If the transmitting application is in the background running mode, the transmitting application does not realize that data is transferred between the master device and the auxiliary device, but realizes its own unique function.

선택적으로, 전송 애플리케이션을 통해 조작 명령어를 보조 기기에 발송하는 것은 USB 또는 근거리 통신망 전송 방식을 통해 실현될 수 있다.Optionally, sending the operation command to the auxiliary device through the transmission application may be realized through a USB or local area network transmission method.

예시적으로, USB 방식을 통해 데이터를 전송하는 것은 전송 애플리케이션을 통해 마스터 기기의 운영체제에서 조작 명령어를 획득하고; AOA프로토콜에 기반하여 조작 명령어를 패키징하며; 데이터 전송 채널을 통해 보조 기기에 패키징 결과를 전송하는 것일 수 있다. 보조 기기는 수신 애플리케이션을 통해 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신하고, AOA 프로토콜에 기반하여 상기 조작 명령어를 해석할 수 있다. 여기서 데이터 전송 채널은 AOA 연결 통로 일 수 있고, 마스터 기기와 보조 기기가 USB를 통해 통신 연결한 후, 마스터 기기와 보조 기기 사이에 셋업하여 얻은 것일 수 있다.Exemplarily, transmitting data through the USB method includes obtaining an operation command from the operating system of the master device through the transfer application; Package the operation instruction based on the AOA protocol; The packaging result may be transmitted to an auxiliary device through a data transmission channel. The auxiliary device may receive the manipulation command sent by the transmission application of the master device through the receiving application, and interpret the manipulation command based on the AOA protocol. Here, the data transmission channel may be an AOA connection path, and may be obtained by establishing a communication connection between the master device and the auxiliary device through USB, and then setting up between the master device and the auxiliary device.

설명해야 할 것은, 마스터 기기와 보조 기기가 AOA프로토콜에 기반하여 통신할 경우 부품 모드에 진입하게 되는데, 여기서 마스터 기기는 USB 슬레이브가 되고, 보조 기기는 USB 본체가 되어 버스에 전력을 제공한다. 이때, 보조 기기는 안드로이드 부품이다.It should be explained that when the master device and the auxiliary device communicate based on the AOA protocol, they enter the part mode, where the master device becomes a USB slave, and the auxiliary device becomes a USB body to provide power to the bus. At this time, the auxiliary device is an Android part.

본원 발명의 실시예는 조작 명령어를 발송하는 과정을 마스터 기기의 구동을 통해 조작 명령어를 상응한 전송 애플리케이션에 발송하는 것으로 세부화하고; 전송 애플리케이션을 통해 조작 명령어를 보조 기기에 발송함으로써 마스터 기기와 보조 기기 사이의 데이터 전송 방식을 완전하게 하여 마스터 기기 자체를 조작 제어하는 것과 보조 기기를 조작 제어하는 것을 구별함으로써 제어 혼란 현상이 발생하는 것을 방지한다.In the embodiment of the present invention, the process of sending an operation command is subdivided into sending an operation command to a corresponding transmission application through driving of a master device; By sending an operation command to the auxiliary device through the transmission application, the data transmission method between the master device and the auxiliary device is perfected, thereby preventing the occurrence of control confusion by distinguishing between operating and controlling the master device itself and operating and controlling the auxiliary device. prevent.

실시예5Example 5

도 5a는 본원 발명의 실시예5에서의 기기 인터랙티브 방법의 흐름도이고, 본원 발명의 실시예는 상기 각 실시예의 기술적 해결수단의 기초상에 바람직한 실시형태를 제공하여 자동차가 차량용 기기에 대한 제어를 실현한다. 도 5b에 도시된 자동차와 차량용 기기의 조작 인터랙티브 모식도와 결부하여 예시적으로 설명한다.5A is a flow chart of a device interactive method in Embodiment 5 of the present invention, and an embodiment of the present invention provides a preferred embodiment on the basis of the technical solution of each of the above embodiments, so that the vehicle realizes control of the vehicle device. do. An exemplary description will be given in connection with an interactive schematic diagram of an operation of a vehicle and a vehicle device shown in FIG. 5B.

도 5a에 도시된 바와 같은 기기 인터랙티브 방법은 단계S501 내지 단계S517를 포함한다.The device interactive method as shown in FIG. 5A includes steps S501 to S517.

단계S501, 사용자가 차량에서의 노브 동작에 응답하여 동작 신호를 생성한다. Step S501, the user generates an operation signal in response to the operation of the knob in the vehicle.

여기서, 자동차의 노브는 자동차의 터치 어셈블리로서, 자동차의 입력 기기 역할을 한다.Here, the knob of the vehicle is a touch assembly of the vehicle and serves as an input device of the vehicle.

단계S502, 노브는 전기 신호의 형식으로 CAN 버스를 통해 자동차에 전송되도록 시스템을 제어하여 동작 신호를 노브 신호 프레임으로 전환시킨다.Step S502, the knob controls the system to be transmitted to the vehicle through the CAN bus in the form of an electrical signal, and converts the operation signal into a knob signal frame.

여기서, 전기 신호는 시간에 따라 변환되는 전압 또는 전류를 가리키고, 노브 동작이 발생한 동작 신호는 비 전기 신호이며, 이러한 신호는 센서를 통해 전기 신호로 전환되고, 시간과 높고 낮은 전기 레벨의 배합에 의해 전기 신호를 형성함으로써 비 전기적 물리량을 전달할 수 있다.Here, the electrical signal refers to a voltage or current that is converted over time, and the operation signal in which the knob operation has occurred is a non-electric signal, and these signals are converted into electrical signals through a sensor, and by a combination of time and high and low electrical levels. By forming an electrical signal, it is possible to convey a non-electrical physical quantity.

여기서, CAN 버스는 ISO 국제 표준 직렬 통신 프로토콜로서, 차량 내의 각 전기 제어 유닛(예를 들어 엔진 제어 시스템, 잠김 방지 시스템 및 시트 조절 시스템 등)을 연결한다. CAN 버스 프로토콜에서는 전송 메시지를 데이터 프레임, 원격 프레임, 오류 프레임 및 과부하 프레임 등으로 분류한다. 각 프레임에서는 프레임 아이디(ID)에 따라 각 유형의 이벤트를 구별하는데, 예를 들어, 조명 신호의 프레임 ID는 0X555이고 노브 신호의 프레임 ID는 0X566 등이다.Here, the CAN bus is an ISO international standard serial communication protocol, and connects each electric control unit (eg, an engine control system, an anti-lock system, and a seat adjustment system, etc.) in a vehicle. In the CAN bus protocol, transmission messages are classified into data frames, remote frames, error frames, and overload frames. In each frame, each type of event is distinguished according to the frame ID (ID). For example, the frame ID of the lighting signal is 0X555, the frame ID of the knob signal is 0X566, and so on.

단계S503, 자동차는 CAN 버스의 전기 신호를 수신한 후, 전기 신호를 디지털 신호로 전환한다.Step S503, the vehicle receives the electrical signal of the CAN bus, and then converts the electrical signal into a digital signal.

단계S504, 자동차 프로토콜에 근거하여 디지털 신호를 자동차 시스템의 시뮬레이션 이벤트로 전환한다.Step S504, based on the vehicle protocol, the digital signal is converted into a simulation event of the vehicle system.

여기서, 시뮬레이션 이벤트는 상하좌우의 명령어로 귀납되어 노브 이벤트, 버튼 이벤트와 같은 상이한 조작 이벤트를 표징할 수 있다.In this case, the simulation event may be inductive as a command of up, down, left, and right to represent different manipulation events such as a knob event and a button event.

단계S505, 키보드 입력 동작에 응답하여 입력 텍스트를 생성한다.In step S505, the input text is generated in response to the keyboard input operation.

단계S506, 자동차는 자동차 키보드를 통한 입력 텍스트를 수신한다.Step S506, the vehicle receives the input text through the vehicle keyboard.

여기서, 자동차 키보드는 차량의 터치 어셈블리로서 자동차의 입력 기기 역할을 한다. 여기서, 전송 애플리케이션은 전경 운행 모드에 놓인다.Here, the automotive keyboard serves as a vehicle input device as a vehicle touch assembly. Here, the sending application is placed in the foreground driving mode.

여기서, 자동차 키보드는 하드 키보드 또는 소프트 키보드 일 수 있다.Here, the car keyboard may be a hard keyboard or a soft keyboard.

여기서, 단계S505-단계S506는 단계S501-단계S505 전에 수행할 수도 있고 단계S501-단계S505 다음에 수행할 수도 있으며 하나를 선택하여 수행할 수도 있다.Here, steps S505-S506 may be performed before steps S501-S505, after steps S501-S505, or one may be selected and performed.

단계S507, 구동을 통해 자동차 운영체제와 전달한 후, 시뮬레이션 이벤트 및 입력 텍스트 중 적어도 하나를 포함하는 조작 명령어를 구체적인 전송 애플리케이션에 송신한다.In step S507, the operation command including at least one of a simulation event and an input text is transmitted to a specific transmission application after transmission to the vehicle operating system through driving.

단계S508, 자동차의 전송 애플리케이션이 자동차와 차량용 기기에서 AOA연결 통로를 셋업한다.Step S508, the vehicle transmission application sets up the AOA connection passage between the vehicle and the vehicle device.

여기서, 차량용 기기는 스마트 스피커와 스마트 백미러 등 기기 일 수 있다.Here, the vehicle device may be a device such as a smart speaker and a smart rearview mirror.

여기서, 단계S508은 자동차와 차량용 기기가 USB를 통해 연결될 때 AOA 연결 통로를 구축하는데, 상기 조작은 AOA 연결 통로에 기반하여 데이터를 전송하기 전의 임의의 시각에 수행될 수 있다.Here, in step S508, an AOA connection path is established when the vehicle and the vehicle device are connected via USB, and the operation may be performed at any time before data is transmitted based on the AOA connection path.

단계S509, 전송 애플리케이션이 운영체제에서 조작 명령어를 획득하여 AOA프로토콜 데이터를 패키징한다.Step S509, the sending application obtains an operation instruction from the operating system and packages the AOA protocol data.

단계S510, 패키징된 조작 명령어를 AOA연결 통로를 통해 차량용 기기에 전송한다.Step S510, the packaged operation command is transmitted to the vehicle device through the AOA connection passage.

단계S511, 차량용 기기의 수신 애플리케이션은 AOA프로토콜에 근거하여 조작 명령어를 해석한다.Step S511, the receiving application of the vehicle device interprets the operation command based on the AOA protocol.

단계S512, 해석 결과에 근거하여 차량용 기기에서의 문자 기기 노드를 결정한다.In step S512, a text device node in the vehicle device is determined based on the analysis result.

여기서, 문자 기기 노드는 하드웨어 터치 어셈블리 구동과 텍스트 입력 구동을 포함한다. 예를 들어, 노브 동작을 통해 노브 이벤트를 포함하는 조작 명령어를 생성하고; 문자 기기 노드는 노브 구동 "/dev/input/event1"이다.Here, the text device node includes driving a hardware touch assembly and driving a text input. Generate an operation instruction including a knob event, for example, through a knob operation; The character device node is a knob driven "/dev/input/event1".

단계S513, 해석 결과에 근거하여 문자 기기 노드가 인식할 수 있는 문자 명령어를 구축한다.Step S513, based on the analysis result, a text command recognizable by the text device node is constructed.

예를 들어 노브 이벤트의 조작 명령어가 대응하는 문자 명령어가 “1 330 1”이다.For example, the character command corresponding to the operation command of the knob event is “1 330 1”.

단계S514, 문자 기기 노드의 명령어 공간에 문자 명령어를 기입한다.In step S514, a text command is written in the command space of the text device node.

예를 들어 노브 구동 “/dev/input/event1”에 문자 명령어“1 330 1”을 기입하여 “/dev/input/event1 1 330 1”을 얻는다.For example, by entering the character command “1 330 1” in the knob drive “/dev/input/event1”, we get “/dev/input/event1 1 330 1”.

단계S515, 문자 기기는 문자 명령어에서의 명령어와 콘텐츠를 구동 해석한다.In step S515, the text device drives and analyzes the command and contents in the text command.

여기서, 해석 결과는 노브 동작과 대응되는 초점 업데이트 명령어 및 텍스트 입력 동작과 대응되는 입력 텍스트를 포함한다.Here, the analysis result includes a focus update command corresponding to the knob operation and input text corresponding to the text input operation.

단계S516, 해석 결과를 차량용 기기의 운영체제에 의해 차량용 애플리케이션에 송신한다.In step S516, the analysis result is transmitted to the vehicle application by the operating system of the vehicle device.

단계S517, 차량용 애플리케이션은 수신한 초점 업데이트 명령어에 근거하여 차량 애플리케이션의 디스플레이 인터페이스의 현재 초점을 변화하거나; 및/또는 수신한 입력 텍스트에 근거하여 현재 초점에서 텍스트 콘텐츠를 디스플레이하기 시작한다.In step S517, the vehicle application changes the current focus of the display interface of the vehicle application based on the received focus update command; And/or start to display the text content at the current focus based on the received input text.

실시예6Example 6

도 6은 본원 발명의 실시예6에서의 기기 인터랙티브 장치의 구조도이다. 본원 발명의 실시예는 마스터 기기와 보조 기기의 인터랙티브 과정에서 마스터 기기를 통해 보조 기기를 제어하는 상황에 적용되는데, 상기 장치는 소프트웨어 및/또는 하드웨어에 의해 실현되고 구체적으로는 보조 기기에 배치된다.6 is a structural diagram of a device interactive device according to a sixth embodiment of the present invention. The embodiment of the present invention is applied to a situation in which an auxiliary device is controlled through a master device in an interactive process of a master device and an auxiliary device, the device being realized by software and/or hardware, and specifically disposed in the auxiliary device.

도 6에 도시된 바와 같은 기기 인터랙티브 장치(600)는 조작 명령어 수신 모듈(601), 입력 명령어 기입 모듈(602) 및 입력 명령어 응답 모듈(603)을 포함한다. 여기서, The device interactive device 600 as shown in FIG. 6 includes an operation command receiving module 601, an input command writing module 602, and an input command response module 603. here,

조작 명령어 수신 모듈(601)은 마스터 기기가 발송한, 마스터 기기가 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성된 것인 조작 명령어를 수신한다. The manipulation command receiving module 601 receives an manipulation command sent by the master device, generated by the master device in response to a user's touch manipulation of the touch assembly.

입력 명령어 기입 모듈(602)은 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입한다. The input command writing module 602 writes an input command corresponding to the manipulation command in a command space of an input device corresponding to the manipulation command.

입력 명령어 응답 모듈(603)은 상기 보조 기기를 제어하도록 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답한다.The input command response module 603 accesses and responds to the input command in the command space to control the auxiliary device.

본원 발명의 실시예는 조작 명령어 수신 모듈을 통해 마스터 기기가 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성한 조작 명령어를 수신하고; 입력 명령어 기입 모듈을 통해 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입하며; 입력 명령어 응답 모듈을 통해 명령어 공간에서 입력 명령어를 액세스하고 응답하여 보조 기기를 제어한다. 상기 기술적 해결수단은 보조 기기를 통해 마스터 기기가 발송한 조작 명령어를 수신하고 응답하여 마스터 기기와 보조 기기가 인터랙티브하는 과정에서 마스터 기기에서의 터치 조작을 통해 보조 기기의 조작을 제어하며; 이와 동시에, 보조 기기는 조작 명령어에 응답하는 과정에서 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입함으로써 상이한 입력 기기와 입력 명령어를 구별하여 보조 기기의 일반화한 입력에 기초를 마련하며; 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어의 액세스와 응답을 진행하여 보조 기기에 대한 일반화 제어를 실현한다. According to an embodiment of the present invention, the master device receives a manipulation command generated in response to a user's touch manipulation of a touch assembly through a manipulation command receiving module; Writing an input command corresponding to the manipulation command in a command space of the input device corresponding to the manipulation command through the input command writing module; Through the input command response module, the auxiliary device is controlled by accessing and responding to input commands in the command space. The technical solution includes receiving and responding to an operation command sent by the master device through the auxiliary device, and controlling the operation of the auxiliary device through a touch manipulation in the master device in the process of interacting with the master device and the auxiliary device; At the same time, the auxiliary device distinguishes between different input devices and input commands by writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command in the process of responding to the manipulation command. To lay the foundation; Through the drive of the input device, the access and response of the input command is performed in the command space to realize generalized control for the auxiliary device.

더 나아가, 입력 명령어 응답 모듈(603)은, Further, the input command response module 603,

상기 명령어 공간에서 입력 명령어를 액세스하고 해석하며; Access and interpret input instructions in the instruction space;

상기 보조 애플리케이션을 제어하도록 상기 입력 명령어의 해석 결과를 상기 보조 기기의 운영체제에 의해 대응되는 보조 애플리케이션에 송신하여 응답한다.In order to control the auxiliary application, an analysis result of the input command is transmitted to a corresponding auxiliary application by the operating system of the auxiliary device and responds.

더 나아가, 상기 터치 어셈블리는 하드웨어 터치 어셈블리 및/또는 소프트웨어 터치 어셈블리를 포함한다. Furthermore, the touch assembly includes a hardware touch assembly and/or a software touch assembly.

상기 조작 명령어는 조작 이벤트 및 입력 텍스트 중 적어도 하나를 포함한다. The manipulation command includes at least one of a manipulation event and input text.

입력 명령어 응답 모듈(603)은 하드웨어 터치 어셈블리 구동, 및 텍스트 입력 구동 중 적어도 하나를 포함한다.The input command response module 603 includes at least one of driving a hardware touch assembly and driving a text input.

더 나아가, 입력 명령어 응답 모듈(603)은,Further, the input command response module 603,

상기 명령어 공간에서 상기 조작 이벤트의 제어 문자 명령어를 획득하고 상기 제어 문자 명령어에 근거하여 상기 보조 애플리케이션 디스플레이 인터페이스에서의 현재 초점을 업데이트하거나; 및/또는, Acquiring a control text command of the manipulation event in the command space and updating a current focus in the auxiliary application display interface based on the control text command; And/or,

상기 명령어 공간에서 상기 입력 텍스트의 텍스트 문자 명령어를 획득하고 상기 텍스트 문자 명령어에 근거하여 상기 보조 애플리케이션이 현재 초점으로부터 상기 입력 텍스트를 디스플레이 하도록 제어한다.Acquires a text text command of the input text in the command space, and controls the auxiliary application to display the input text from the current focus based on the text text command.

더 나아가, 조작 명령어 수신 모듈(601)은,Further, the operation command receiving module 601,

상기 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신한다.Receives an operation command sent by the transmission application of the master device.

더 나아가, 상기 장치는 조작 명령어 해석 모듈을 더 포함하고, 조작 명령어 해석 모듈은, Furthermore, the device further includes an operation command analysis module, the operation command analysis module,

조작 명령어 수신 모듈(601)이 상기 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신한 다음, 그리고 입력 명령어 기입 모듈(602)이 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하기 전에, 안드로이드 개방형 액세서리(AOA) 프로토콜에 기반하여 상기 조작 명령어를 해석한다.After the manipulation command receiving module 601 receives the manipulation command sent by the transmission application of the master device, and the input command writing module 602 corresponds to the manipulation command in the command space of the input device corresponding to the manipulation command Before writing the input command to be used, the manipulation command is interpreted based on the Android Open Accessory (AOA) protocol.

더 나아가, 입력 명령어 기입 모듈(602)은,Furthermore, the input instruction writing module 602,

상기 조작 명령어에 근거하여 대응되는 입력 기기를 결정하고; Determining a corresponding input device based on the manipulation command;

상기 조작 명령어에 근거하여 입력 명령어를 구축하며; Constructing an input command based on the manipulation command;

상기 입력 기기의 명령어 공간에 상기 입력 명령어를 기입한다.The input command is written in the command space of the input device.

더 나아가, 상기 마스터 기기는 자동차이고; 상기 보조 기기는 차량용 기기이다.Furthermore, the master device is an automobile; The auxiliary device is a vehicle device.

상기 기기 인터랙티브 장치는 본원 발명의 임의의 실시예에서 제공하는 기기 인터랙티브 방법을 수행할 수 있고, 기기 인터랙티브 방법을 수행하는 상응한 기능 모듈과 유리한 효과를 구비한다.The device interactive device can perform the device interactive method provided in any embodiment of the present invention, and has a corresponding function module and advantageous effects for performing the device interactive method.

실시예7Example 7

도 7은 본원 발명의 실시예7에서의 기기 인터랙티브 장치의 구조도이다. 본원 발명의 실시예는 마스터 기기와 보조 기기의 인터랙티브 과정에서 마스터 기기를 통해 보조 기기를 제어하는 상황에 적용되는데, 상기 장치는 소프트웨어 및/또는 하드웨어에 의해 실현되고 구체적으로는 마스터 기기에 배치된다.7 is a structural diagram of a device interactive device in Embodiment 7 of the present invention. The embodiment of the present invention is applied to a situation in which an auxiliary device is controlled through a master device in an interactive process of a master device and an auxiliary device, the device being realized by software and/or hardware, and specifically disposed in the master device.

도 7에 도시된 바와 같은 기기 인터랙티브 장치(700)는 조작 명령어 생성 모듈(701)과 조작 명령어 발송 모듈(702)을 포함한다. 여기서, The device interactive device 700 as shown in FIG. 7 includes an operation command generation module 701 and an operation command sending module 702. here,

조작 명령어 생성 모듈(701)은 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성한다. The manipulation command generation module 701 generates a manipulation command in response to a user's touch manipulation of the touch assembly.

조작 명령어 발송 모듈(702)은 상기 보조 기기가 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하여 상기 보조 기기를 제어하도록 상기 조작 명령어를 보조 기기에 발송한다.The operation command sending module 702 allows the auxiliary device to write an input command corresponding to the operation command in the command space of the input device corresponding to the operation command, and access the input command from the command space through driving of the input device. In response, the operation command is sent to the auxiliary device to control the auxiliary device.

본원 발명의 실시예는 조작 명령어 생성 모듈을 통해 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하고; 조작 명령어 발송 모듈을 통해 조작 명령어를 보조 기기에 발송하여 보조 기기가 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입하며 보조 기기를 제어하도록 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 응답한다. 상기 기술적 해결수단에서, 사용자가 마스터 기기에서의 터치 어셈블리에 대한 터치 조작을 통해 조작 명령어를 생성하여 상기 조작 명령어에 기반하여 보조 기기를 더 제어함으로써 마스터 기기와 보조 기기가 인터랙티브하는 과정에서 마스터 기기에서의 터치 조작에 의해 보조 기기의 조작을 제어하며; 이와 동시에, 보조 기기는 조작 명령어에 응답하는 과정에서 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입함으로써 상이한 입력 기기와 입력 명령어를 구별하여 보조 기기의 일반화한 입력에 기초를 마련하며; 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어의 액세스와 응답을 진행하여 보조 기기에 대한 일반화 제어를 실현한다. An embodiment of the present invention generates an operation instruction in response to a user's touch operation on a touch assembly through an operation instruction generation module; By sending a manipulation command to an auxiliary device through a manipulation command sending module, the auxiliary device writes the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and the command is driven by driving the input device to control the auxiliary device. Access and respond to input commands in space. In the technical solution, the user generates a manipulation command through a touch manipulation on the touch assembly in the master device, and further controls the auxiliary device based on the manipulation command, so that the master device and the auxiliary device interact with each other in the master device. Controlling the operation of the auxiliary device by the touch operation At the same time, the auxiliary device distinguishes between different input devices and input commands by writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command in the process of responding to the manipulation command. To lay the foundation; Through the drive of the input device, the access and response of the input command is performed in the command space to realize generalized control for the auxiliary device.

더 나아가, 조작 명령어 발송 모듈(702)은,Further, the operation command sending module 702,

마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송하고; Sending the operation command to a corresponding transmission application through driving of the master device;

상기 전송 애플리케이션을 통해 상기 조작 명령어를 보조 기기에 발송한다.The operation command is sent to the auxiliary device through the transmission application.

더 나아가, 상기 전송 애플리케이션을 통해 상기 조작 명령어를 보조 기기에 발송하는 단계를 수행할 때, 조작 명령어 발송 모듈(702)은, Further, when performing the step of sending the operation command to the auxiliary device through the transmission application, the operation command sending module 702,

상기 전송 애플리케이션을 통해 상기 보조 기기의 운영체제에서 상기 조작 명령어를 획득하고; Acquiring the operation command from the operating system of the auxiliary device through the transmission application;

안드로이드 개방형 액세서리(AOA) 프로토콜에 기반하여 상기 조작 명령어를 패키징하며; Package the operation instruction based on the Android Open Accessory (AOA) protocol;

데이터 전송 채널을 통해 상기 보조 기기에 패키징 결과를 전송한다.The packaging result is transmitted to the auxiliary device through a data transmission channel.

더 나아가, 상기 장치는 데이터 전송 채널 셋업 모듈을 더 포함하고, 데이터 전송 채널 셋업 모듈은, Furthermore, the device further comprises a data transmission channel setup module, the data transmission channel setup module,

데이터 전송 채널을 통해 상기 보조 기기에 패키징 결과를 전송하기 전에 상기 마스터 기기와 상기 보조 기기의 데이터 전송 채널을 셋업한다.Before transmitting the packaging result to the auxiliary device through a data transmission channel, a data transmission channel of the master device and the auxiliary device is set up.

더 나아가, 마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송하는 단계를 수행할 때, 조작 명령어 발송 모듈(702)은, Further, when performing the step of sending the operation command to the corresponding transmission application through the drive of the master device, the operation command sending module 702,

상기 전송 애플리케이션이 전경 운행 모드에 있으면 마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송한다.When the transmission application is in the foreground driving mode, the operation command is transmitted to the corresponding transmission application through driving of the master device.

더 나아가, 상기 터치 어셈블리는 하드웨어 터치 어셈블리 및 소프트웨어 터치 어셈블리 중 적어도 하나를 포함한다.Furthermore, the touch assembly includes at least one of a hardware touch assembly and a software touch assembly.

더 나아가, 상기 터치 어셈블리가 하드웨어 터치 어셈블리를 포함하면 조작 명령어 생성 모듈(701)은,Furthermore, if the touch assembly includes a hardware touch assembly, the manipulation instruction generation module 701,

하드웨어 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 제어 전기 신호를 생성하고 상기 제어 전기 신호를 터치 디지털 신호로 전환하고; Generating a control electrical signal in response to a user's touch manipulation on the hardware touch assembly and converting the control electrical signal into a touch digital signal;

기설정 프로토콜에 기반하여 상기 터치 디지털 신호를 조작 이벤트로 전환시키며 상기 조작 이벤트를 포함하는 조작 명령어를 생성한다.The touch digital signal is converted into a manipulation event based on a preset protocol, and a manipulation command including the manipulation event is generated.

더 나아가, 상기 조작 이벤트는 노브 이벤트 및 버튼 이벤트 중 적어도 하나를 포함한다.Furthermore, the manipulation event includes at least one of a knob event and a button event.

더 나아가, 상기 터치 어셈블리가 소프트웨어 터치 어셈블리를 포함하면 조작 명령어 생성 모듈(701)은,Furthermore, if the touch assembly includes a software touch assembly, the manipulation instruction generation module 701,

소프트웨어 터치 어셈블리에 대한 사용자의 입력 동작에 응답하여 입력 텍스트를 포함하는 조작 명령어를 생성한다. In response to a user's input operation to the software touch assembly, a manipulation instruction including the input text is generated.

더 나아가, 상기 마스터 기기는 자동차이고; 상기 보조 기기는 차량용 기기이다.Furthermore, the master device is an automobile; The auxiliary device is a vehicle device.

상기 기기 인터랙티브 장치는 본원 발명의 임의의 실시예에서 제공하는 기기 인터랙티브 방법을 수행할 수 있고, 기기 인터랙티브 방법을 수행하는 상응한 기능 모듈과 유리한 효과를 구비한다.The device interactive device can perform the device interactive method provided in any embodiment of the present invention, and has a corresponding function module and advantageous effects for performing the device interactive method.

실시예8Example 8

본원 발명의 실시예에 따르면, 본원 발명은 전자 기기 및 판독 가능 저장 매체를 더 제공한다. 여기서 상기 전자 기기는 마스터 기기 일 수도 있고 보조 기기 일 수도 있다.According to an embodiment of the present invention, the present invention further provides an electronic device and a readable storage medium. Here, the electronic device may be a master device or an auxiliary device.

도 8에 도시된 바와 같이, 이는 본원 발명의 실시예에 따른 기기 인터랙티브 방법을 실현하는 전지기기의 블록도이다. 전자 기기는 랩톱 컴퓨터, 데스크톱 컴퓨터, 워크 벤치, 개인용 정보 단말기, 서버, 블레이드 서버, 메인 프레임 컴퓨터 및 다른 적합한 컴퓨터 등의 다양한 형태의 디지털 컴퓨터를 가리킨다. 전자 기기는 또한 개인용 정보 단말기, 셀룰러 폰, 스마트 폰, 웨어러블 장치 및 다른 유사한 컴퓨팅 장치와 같은 다양한 형태의 모바일 장치를 나타낼 수 있다. 본 명세서에 도시된 구성 요소, 그들의 연결 및 관계 및 그 기능은 단지 예시에 불과하며, 본 명세서에 기술되거나 청구된 구현을 한정하지 않는다.As shown in Figure 8, this is a block diagram of a battery device realizing the device interactive method according to an embodiment of the present invention. Electronic devices refer to various types of digital computers, such as laptop computers, desktop computers, workbenches, personal digital assistants, servers, blade servers, main frame computers and other suitable computers. Electronic devices may also represent various types of mobile devices, such as personal digital assistants, cellular phones, smart phones, wearable devices, and other similar computing devices. The components shown in this specification, their connections and relationships, and their functions are for illustrative purposes only, and do not limit the implementations described or claimed herein.

도 8에 도시된 바와 같이, 상기 전자 기기는 하나 이상의 프로세서(801), 메모리(802) 및 고속 인터페이스 및 저속 인터페이스를 포함하는 다양한 구성 요소를 연결하기 위한 인터페이스를 포함한다. 다양한 구성 요소는 서로 다른 버스를 사용하여 서로 연결되며 마더 보드에 설치되거나 필요에 따라 다른 방식으로 설치될 수 있다. 프로세서는 외부 입력/출력 장치(예를 들어, 인터페이스에 연결된 디스플레이 장치)에 GUI의 그래픽 정보를 표시하기 위해 메모리에 저장된 명령어를 포함하여 전자 기기 내에서 실행되는 명령어를 처리할 수 있다. 다른 실시 방식에서, 필요한 경우, 다수의 프로세서 및/또는 다수의 버스를 다수의 메모리와 함께 사용할 수 있다. 마찬가지로, 여러 전자 기기를 연결할 수 있고, 각 장치는 단지 몇 가지 필요한 기능(예를 들어, 서버 배열, 블레이드 서버 그룹 또는 다중 프로세서 시스템)을 제공할 수 있다. 도 8은 프로세서(801)가 하나인 경우를 예를 들어 설명한다. As shown in FIG. 8, the electronic device includes one or more processors 801, a memory 802, and an interface for connecting various components including a high-speed interface and a low-speed interface. The various components are connected to each other using different buses and can be installed on the motherboard or in different ways as needed. The processor may process commands executed in the electronic device, including commands stored in a memory, to display graphic information of a GUI on an external input/output device (eg, a display device connected to an interface). In other implementations, multiple processors and/or multiple buses can be used with multiple memories, if desired. Likewise, it is possible to connect multiple electronic devices, and each device may provide only a few necessary functions (e.g., a server arrangement, a group of blade servers, or a multiprocessor system). 8 illustrates a case where there is only one processor 801 as an example.

메모리(802)는 본원 발명에 의해 제공된 비 일시적 컴퓨터 판독 가능 저장 매체이다. 여기서, 적어도 하나의 프로세서에 의해 본원 발명의 기기 인터랙티브 방법을 수행하도록, 상기 메모리에는 적어도 하나의 프로세서에 의해 실행 가능한 명령어가 저장된다. 본원 발명의 비 일시적 컴퓨터 판독 가능 저장 매체에는 컴퓨터로 하여금 본원 발명의 기기 인터랙티브 방법을 실행하게 하는 컴퓨터 명령어가 저장되어 있다. Memory 802 is a non-transitory computer-readable storage medium provided by the present invention. Here, in order to perform the device interactive method of the present invention by at least one processor, instructions executable by at least one processor are stored in the memory. In the non-transitory computer-readable storage medium of the present invention, computer instructions for causing a computer to execute the device interactive method of the present invention are stored.

메모리(802)는 비 일시적 컴퓨터 판독 가능 저장 매체로서, 비 일시적 소프트웨어 프로그램, 비 일시적 컴퓨터 실행 가능 프로그램, 본원 발명의 실시예의 기기 인터랙티브 방법에 대응하는 프로그램 명령어/모듈과 같은 모듈(예를 들어, 도 6에 도시된 조작 명령어 수신 모듈(601), 입력 명령어 기입 모듈(602) 및 입력 명령어 응답 모듈(603), 또는 도 7에 도시된 조작 명령어 생성 모듈(701)과 조작 명령어 발송 모듈(702))을 저장하기 위해 사용될 수 있다. 프로세서(801)는 메모리(802)에 저장된 비 일시적 소프트웨어 프로그램, 명령어 및 모듈을 실행하여 서버의 다양한 기능적 애플리케이션 및 데이터 처리를 실행한다. 다시 말하면, 상기 방법 실시예의 기기 인터랙티브 방법을 구현한다.The memory 802 is a non-transitory computer-readable storage medium, such as a non-transitory software program, a non-transitory computer executable program, a program instruction/module corresponding to the device interactive method of the embodiment of the present invention (for example, FIG. An operation command receiving module 601, an input command writing module 602 and an input command response module 603 shown in FIG. 6, or an operation command generation module 701 and an operation command sending module 702 shown in FIG. 7) Can be used to store The processor 801 executes non-transitory software programs, instructions, and modules stored in the memory 802 to execute various functional applications and data processing of the server. In other words, the device interactive method of the method embodiment is implemented.

메모리(802)는 프로그램을 저장하기 위한 영역 및 데이터를 저장하기 위한 영역을 포함할 수 있고, 여기서 프로그램을 저장하기 위한 영역은 운영 체제 및 적어도 하나의 기능에 필요한 응용 프로그램이 저장될 수 있고; 데이터를 저장하기 위한 영역에는 기기 인터랙티브 방법의 전자 기기를 사용하여 생성된 데이터가 저장될 수 있다. 또한, 메모리(802)는 고속 랜덤 액세스 메모리를 포함할 수 있고, 또한 자기 디스크 저장 장치, 플래시 메모리 장치 또는 다른 비 일시적 솔리드 스테이트 저장 장치와 같은 적어도 하나의 비 일시적 메모리를 포함할 수 있다. 일부 실시예에서, 메모리(802)는 프로세서(801)에 대해 원격으로 설정된 메모리를 선택적으로 포함할 수 있고, 이러한 원격 메모리는 네트워크를 통해 기기 인터랙티브 방법의 전자 기기에 연결될 수 있다. 상기 네트워크의 사례는 인터넷, 인트라넷, 근거리 네트워크, 이동 통신 네트워크 및 이들의 조합을 포함하지만 이에 한정되지는 않는다.The memory 802 may include an area for storing a program and an area for storing data, wherein the area for storing a program may store an operating system and an application program required for at least one function; In an area for storing data, data generated using an electronic device using a device interactive method may be stored. Further, the memory 802 may include a high-speed random access memory, and may also include at least one non-transitory memory such as a magnetic disk storage device, a flash memory device, or other non-transitory solid state storage device. In some embodiments, the memory 802 may selectively include a memory set remotely for the processor 801, and such a remote memory may be connected to an electronic device of the device interactive method through a network. Examples of the network include, but are not limited to, the Internet, an intranet, a local area network, a mobile communication network, and combinations thereof.

기기 인터랙티브 방법을 수행하는 전자 기기는 입력 장치(803) 및 출력 장치(804)를 더 포함할 수 있다. 프로세서(801), 메모리(802), 입력 장치(803) 및 출력 장치(804)는 버스를 통해 연결되거나 또는 다른 방식으로 연결될 수 있으며, 도 7은 버스를 통한 연결을 예시한 것이다.The electronic device performing the device interactive method may further include an input device 803 and an output device 804. The processor 801, the memory 802, the input device 803, and the output device 804 may be connected through a bus or may be connected in other ways, and FIG. 7 illustrates a connection through a bus.

입력 장치(803)는 입력된 숫자 또는 문자 정보를 수신할 수 있고, 기기 인터랙티브 방법을 실현하는 전자 기기의 사용자 설정 및 기능 제어와 관련된 키 신호 입력을 생성할 수 있으며, 터치 스크린, 키 패드, 마우스, 트랙 패드, 터치 패드, 포인팅 스틱, 하나 이상의 마우스 버튼, 트랙 볼, 조이스틱 및 기타 입력 장치일 수 있다. 출력 장치(804)는 디스플레이 장치, 보조 조명 장치(예를 들어, LED), 촉각 피드백 장치(예를 들어, 진동 모터) 등을 포함할 수 있다. 상기 디스플레이 장치는 액정 디스플레이(LCD), 발광 다이오드(LED) 디스플레이 및 플라즈마 디스플레이를 포함할 수 있지만, 이에 한정되지는 않는다. 일부 실시 방식에서, 디스플레이 장치는 터치 스크린일 수 있다.The input device 803 may receive input number or character information, may generate a key signal input related to user setting and function control of an electronic device realizing a device interactive method, and may generate a touch screen, a keypad, and a mouse. , A track pad, a touch pad, a pointing stick, one or more mouse buttons, a track ball, a joystick, and other input devices. The output device 804 may include a display device, an auxiliary lighting device (eg, LED), a tactile feedback device (eg, a vibration motor), and the like. The display device may include, but is not limited to, a liquid crystal display (LCD), a light emitting diode (LED) display, and a plasma display. In some implementations, the display device may be a touch screen.

본 출원의 실시예에 따르면, 컴퓨터 판독 가능 매체에 저장되어 있는 컴퓨터 프로그램을 더 제공한다. 당해 컴퓨터 프로그램의 명령이 실행될 경우, 본 출원 실시예의 기기 인터랙티브 방법이 실행된다.According to an embodiment of the present application, a computer program stored in a computer-readable medium is further provided. When the instruction of the computer program is executed, the device interactive method of the embodiment of the present application is executed.

본 명세서에 설명된 시스템 및 기술의 다양한 실시 방식은 디지털 전자 회로, 집적 회로 시스템, 전용 ASIC(애플리케이션 특정 집적 회로), 컴퓨터 하드웨어, 펌웨어, 소프트웨어 및/또는 이들의 조합에 의해 구현될 수 있다. 이러한 다양한 실시 방식은 하나 이상의 컴퓨터 프로그램에 의해 실시될 수 있고, 상기 하나 이상의 컴퓨터 프로그램은 적어도 하나의 프로그램 가능 시스템에 의해 실행 및/또는 해석될 수 있으며, 상기 프로그램 가능 프로세서는 전용 또는 범용 프로그램 가능 프로세서일 수 있고, 저장 시스템, 적어도 하나의 입력 장치 및 적어도 하나의 출력 장치로부터 데이터 및 명령어를 수신하며, 데이터 및 명령어를 저장 시스템, 적어도 하나의 입력 장치 및 적어도 하나의 출력 장치에 전송할 수 있다.Various implementations of the systems and techniques described herein may be implemented by digital electronic circuits, integrated circuit systems, dedicated application specific integrated circuits (ASICs), computer hardware, firmware, software, and/or combinations thereof. These various implementation methods may be implemented by one or more computer programs, the one or more computer programs may be executed and/or interpreted by at least one programmable system, and the programmable processor may be a dedicated or general purpose programmable processor. The data and command may be received from the storage system, at least one input device, and at least one output device, and the data and command may be transmitted to the storage system, at least one input device, and at least one output device.

이러한 컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 응용 프로그램 또는 코드라고도 함)에는 프로그램 가능 프로세서의 기계 명령어가 포함되고, 고급 프로세스 및/또는 객체 지향 프로그래밍 언어 및/또는 어셈블리 언어/기계어를 사용하여 이러한 컴퓨터 프로그램을 구현할 수 있다. 본 명세서에서 사용되는 용어 "기계 판독 가능 매체” 및 "컴퓨터 판독 가능 매체”는 프로그램 가능 프로세서에 기계 명령어 및/또는 데이터를 제공하기 위해 사용되는 임의의 컴퓨터 프로그램 제품, 장비 및/또는 장치(예를 들어, 자기 디스크, 광 디스크, 메모리, 프로그램 가능 논리 장치(PLD))를 가리키며, 기계 판독 가능 신호로서 기계 명령어를 수신하는 기계 판독 가능 매체를 포함한다. 용어 "기계 판독 가능 신호”는 기계 명령어 및/또는 데이터를 프로그램 가능 프로세서에 제공하기 위한 임의의 신호를 지칭한다.Such computer programs (also referred to as programs, software, software applications, or code) contain machine instructions of a programmable processor, and use high-level process and/or object-oriented programming languages and/or assembly language/machine language to execute such computer programs. Can be implemented. As used herein, the terms “machine-readable medium” and “computer-readable medium” refer to any computer program product, equipment, and/or device (for example, used to provide machine instructions and/or data to a programmable processor). For example, it refers to a magnetic disk, an optical disk, a memory, a programmable logic device (PLD)), and includes a machine-readable medium that receives machine instructions as a machine-readable signal. The term “machine-readable signal” refers to any signal for providing machine instructions and/or data to a programmable processor.

사용자와의 인터랙티브를 제공하기 위해, 컴퓨터에서 여기에 설명된 시스템 및 기술을 구현할 수 있다. 컴퓨터는 사용자에게 정보를 표시하기 위한 디스플레이 장치(예를 들어, CRT(cathode ray tube) 또는 LCD(liquid crystal display) 모니터)와 키보드 및 포인팅 장치(예를 들어, 마우스 또는 트랙 볼)를 포함하고, 사용자는 상기 키보드 및 상기 포인팅 장치를 통해 정보를 입력하여 컴퓨터에 제공할 수 있다. 다른 종류의 장치를 사용하여 사용자와의 상호 작용을 제공할 수도 있다. 예를 들어, 사용자에게 제공되는 피드백은 임의의 형태의 감각 피드백(예를 들어, 시각적 피드백, 청각 피드백 또는 촉각 피드백) 일 수 있고, 임의의 형태(음성 입력, 스피치 입력 또는 촉각 입력 포함)로 사용자에 의해 발송된 정보를 수신할 수 있다.In order to provide interaction with the user, a computer can implement the systems and techniques described herein. The computer includes a display device (for example, a cathode ray tube (CRT) or a liquid crystal display (LCD) monitor) for displaying information to a user) and a keyboard and pointing device (for example, a mouse or track ball), A user may input information through the keyboard and the pointing device and provide the information to the computer. Other types of devices can also be used to provide user interaction. For example, the feedback provided to the user can be any form of sensory feedback (e.g., visual feedback, auditory feedback, or tactile feedback), and in any form (including voice input, speech input, or tactile input). The information sent by can be received.

본 명세서에 설명된 시스템 및 기술은 백 엔드 구성 요소(예를 들어, 데이터 서버)를 포함하는 컴퓨팅 시스템 또는 미들웨어 구성 요소(예를 들어, 애플리케이션 서버)를 포함하는 컴퓨팅 시스템 또는 프론트 엔드 구성 요소(예를 들어, 예를 들어, 그래픽 사용자 인터페이스 또는 웹 브라우저를 가진 사용자 컴퓨터일 수 있으며, 사용자는 그래픽 사용자 인터페이스 또는 웹 브라우저를 통해 여기에 설명된 시스템 및 기술의 구현과 상호 작용할 수 있음)를 포함하는 컴퓨팅 시스템 또는 이러한 백 엔드 구성 요소, 미들웨어 구성 요소 또는 프론트 엔드 구성 요소의 임의의 조합을 포함하는 컴퓨팅 시스템에 의해 구현될 수 있다. 시스템의 구성 요소는 임의의 형태 또는 매체의 디지털 데이터 통신(예를 들어, 통신 네트워크)에 의해 상호 연결될 수 있다. 통신 네트워크의 예로는 근거리 통신망(LAN), 광역 통신망(WAN) 및 인터넷 및 블록체인 네트워크가 포함될 수 있다.The systems and technologies described herein include computing systems including back-end components (e.g., data servers) or computing systems or front-end components (e.g., application servers) including middleware components (e.g., application servers). For example, it may be a user computer with a graphical user interface or a web browser, and the user may interact with implementations of the systems and technologies described herein through a graphical user interface or web browser). It may be implemented by a system or a computing system including any combination of such back-end components, middleware components, or front-end components. The components of the system may be interconnected by any form or medium of digital data communication (eg, a communication network). Examples of communication networks may include a local area network (LAN), a wide area network (WAN), and the Internet and blockchain networks.

컴퓨터 시스템은 클라이언트 및 서버를 포함할 수 있다. 클라이언트와 서버는 일반적으로 서로 멀리 떨어져 있으며, 일반적으로 통신 네트워크를 통해 상호 작용한다. 클라이언트와 서버 간의 관계는 해당 컴퓨터에서 실행되고 서로 클라이언트-서버 관계가 있는 컴퓨터 프로그램에 의해 발생된다.Computer systems can include clients and servers. Clients and servers are generally far apart from each other and usually interact through a communication network. The relationship between the client and the server is created by computer programs that run on that computer and have a client-server relationship with each other.

본원 발명의 실시예는 보조 기기를 통해 마스터 기기가 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성한 조작 명령어를 수신하고; 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입하며; 보조 기기를 제어하도록 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어를 액세스하고 응답한다. 상기 기술적 해결수단은 보조 기기를 통해 마스터 기기가 발송한 조작 명령어를 수신하고 응답하여 마스터 기기와 보조 기기가 인터랙티브하는 과정에서 마스터 기기에서의 터치 조작을 통해 보조 기기의 조작을 제어하며; 이와 동시에, 보조 기기는 조작 명령어에 응답하는 과정에서 조작 명령어와 대응되는 입력 기기의 명령어 공간에 조작 명령어와 대응되는 입력 명령어를 기입함으로써 상이한 입력 기기와 입력 명령어를 구별하여 보조 기기의 일반화한 입력에 기초를 마련하며; 입력 기기의 구동을 통해 명령어 공간에서 입력 명령어의 액세스와 응답을 진행하여 보조 기기에 대한 일반화 제어를 실현한다. According to an embodiment of the present invention, a master device receives a manipulation command generated in response to a user's touch manipulation of a touch assembly through an auxiliary device; Writing an input command corresponding to the manipulation command in a command space of the input device corresponding to the manipulation command; It accesses and responds to input commands in the command space through the drive of the input device to control the auxiliary device. The technical solution includes receiving and responding to an operation command sent by the master device through the auxiliary device, and controlling the operation of the auxiliary device through a touch manipulation in the master device in the process of interacting with the master device and the auxiliary device; At the same time, the auxiliary device distinguishes between different input devices and input commands by writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command in the process of responding to the manipulation command. To lay the foundation; Through the drive of the input device, the access and response of the input command is performed in the command space to realize generalized control for the auxiliary device.

실시예9Example 9

도 9는 본원 발명의 실시예9에서의 인터랙티브 시스템의 구조 모식도로서, 상기 시스템은 마스터 기기(901)와 보조 기기(902)를 포함한다. 9 is a schematic structural diagram of an interactive system in Embodiment 9 of the present invention, wherein the system includes a master device 901 and an auxiliary device 902.

상기 마스터 기기(901)는 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하고 상기 조작 명령어를 보조 기기(902)에 발송한다. The master device 901 generates a manipulation command in response to a user's touch manipulation on the touch assembly and transmits the manipulation command to the auxiliary device 902.

상기 보조 기기(902)는 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고, 상기 보조 기기(902)를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답한다.The auxiliary device 902 writes the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and controls the auxiliary device 902 by driving the input device to control the command space. Accesses and responds to the input command at.

더 나아가, 마스터 기기(901)는 본원발명의 실시예에서 제공하는 기기 인터랙티브 방법을 수행할 수 있고; 보조 기기(902)는 본원 발명의 실시예에서 제공하는 다른 한 기기 인터랙티브 방법을 수행할 수 있다.Furthermore, the master device 901 may perform the device interactive method provided in the embodiment of the present invention; The auxiliary device 902 may perform another device interactive method provided in the embodiment of the present invention.

상기에 도시된 다양한 형태의 과정을 통해 단계를 재정렬, 추가 또는 삭제할 수 있다는 것을 이해해야 한다. 예를 들어, 본원 발명에 설명된 각 단계들은 병렬, 순차적 또는 상이한 순서로 수행될 수 있으며, 본원 발명에 개시된 기술적 해결책이 원하는 결과를 달성할 수만 있으면, 별도로 한정되지 않는다.It should be understood that steps can be rearranged, added, or deleted through the various types of processes shown above. For example, each of the steps described in the present invention may be performed in parallel, sequentially or in a different order, and as long as the technical solution disclosed in the present invention can achieve a desired result, it is not limited separately.

상기 구체적인 실시 방식은 본원 발명의 보호 범위에 대한 제한을 구성하지 않는다. 당업자는 설계 요건 및 다른 요인에 따라 다양한 변형, 조합, 하위 조합 및 대체가 이루어질 수 있다는 것을 이해해야 한다. 본원 발명의 원리와 원칙 내에서 이루어진 모든 수정, 동등한 대체 및 개선은 모두 본원 발명의 보호 범위에 포함된다.The above specific implementation manner does not constitute a limitation on the scope of protection of the present invention. Those skilled in the art should understand that various modifications, combinations, sub-combinations and substitutions may be made depending on design requirements and other factors. All modifications, equivalent substitutions and improvements made within the principles and principles of the present invention are included in the protection scope of the present invention.

Claims (25)

보조 기기에 의해 수행되는 기기 인터랙티브 방법에 있어서,
마스터 기기가 발송한, 상기 마스터 기기에서 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성된 조작 명령어를 수신하는 단계;
상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하는 단계; 및
상기 보조 기기를 제어하도록, 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 단계; 를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
In the device interactive method performed by the auxiliary device,
Receiving a manipulation command generated in response to a user's touch manipulation of the touch assembly from the master device sent by the master device;
Writing an input command corresponding to the manipulation command in a command space of an input device corresponding to the manipulation command; And
Accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device; Containing,
Device interactive method, characterized in that.
제1항에 있어서,
상기 보조 기기를 제어하도록, 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 단계는,
상기 입력 기기의 구동을 통해 상기 명령어 공간에서 입력 명령어를 액세스하고 해석하는 단계; 및
보조 애플리케이션을 제어하도록, 상기 입력 기기의 구동을 통해 상기 입력 명령어의 해석 결과를 상기 보조 기기의 운영체제에 의해 대응되는 보조 애플리케이션에 송신하여 응답하는 단계를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 1,
Accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device,
Accessing and interpreting an input command in the command space through driving of the input device; And
To control an auxiliary application, including the step of responding by transmitting an analysis result of the input command to a corresponding auxiliary application by an operating system of the auxiliary device through driving of the input device,
Device interactive method, characterized in that.
제1항에 있어서,
상기 터치 어셈블리는 하드웨어 터치 어셈블리 및 소프트웨어 터치 어셈블리 중 적어도 하나를 포함하고;
상기 조작 명령어는 조작 이벤트 및 입력 텍스트 중 적어도 하나를 포함하며;
상기 입력 기기의 구동은 하드웨어 터치 어셈블리 구동 및 텍스트 입력 구동 중 적어도 하나를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 1,
The touch assembly includes at least one of a hardware touch assembly and a software touch assembly;
The manipulation instruction includes at least one of a manipulation event and input text;
Driving the input device includes at least one of driving a hardware touch assembly and driving a text input,
Device interactive method, characterized in that.
제3항에 있어서,
상기 보조 기기를 제어하도록, 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는 단계는,
상기 하드웨어 터치 어셈블리 구동을 통해 상기 명령어 공간에서 상기 조작 이벤트의 제어 문자 명령어를 획득하고, 상기 제어 문자 명령어에 근거하여 보조 애플리케이션 디스플레이 인터페이스에서의 현재 초점을 업데이트하는 단계; 및
상기 텍스트 입력 구동을 통해 상기 명령어 공간에서 상기 입력 텍스트의 텍스트 문자 명령어를 획득하고 상기 텍스트 문자 명령어에 근거하여 보조 애플리케이션이 현재 초점으로부터 상기 입력 텍스트를 디스플레이 하는 단계; 중 적어도 하나를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 3,
Accessing and responding to the input command in the command space through driving of the input device to control the auxiliary device,
Acquiring a control text command of the manipulation event in the command space through driving the hardware touch assembly, and updating a current focus in an auxiliary application display interface based on the control text command; And
Acquiring a text text command of the input text in the command space through the text input driving, and displaying the input text from a current focus by an auxiliary application based on the text text command; Containing at least one of,
Device interactive method, characterized in that.
제1항에 있어서,
상기 마스터 기기가 발송한 조작 명령어를 수신하는 단계는,
수신 애플리케이션을 통해 상기 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신하는 단계를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 1,
Receiving the operation command sent by the master device,
Receiving the operation command sent by the transmission application of the master device through a receiving application,
Device interactive method, characterized in that.
제5항에 있어서,
상기 수신 애플리케이션을 통해 상기 마스터 기기의 전송 애플리케이션이 발송한 조작 명령어를 수신하는 단계 후에, 그리고 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하는 단계 전에,
안드로이드 개방형 액세서리(AOA) 프로토콜에 기반하여 상기 조작 명령어를 해석하는 단계를 더 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 5,
After receiving the operation command sent by the transmission application of the master device through the receiving application, and before writing the input command corresponding to the operation command in the command space of the input device corresponding to the operation command,
Further comprising the step of interpreting the operation command based on the Android Open Accessory (AOA) protocol,
Device interactive method, characterized in that.
제1항에 있어서,
상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하는 단계는,
상기 조작 명령어에 근거하여 대응되는 입력 기기를 결정하는 단계;
상기 조작 명령어에 근거하여 입력 명령어를 구축하는 단계; 및
상기 입력 기기의 명령어 공간에 상기 입력 명령어를 기입하는 단계; 를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 1,
The step of writing the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command,
Determining a corresponding input device based on the manipulation command;
Constructing an input command based on the manipulation command; And
Writing the input command in a command space of the input device; Containing,
Device interactive method, characterized in that.
제1항에 있어서,
상기 마스터 기기는 자동차이고; 상기 보조 기기는 차량용 기기인,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 1,
The master device is an automobile; The auxiliary device is a vehicle device,
Device interactive method, characterized in that.
마스터 기기에 의해 수행되는 기기 인터랙티브 방법에 있어서,
터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하는 단계; 및
보조 기기가 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하여 상기 보조 기기를 제어하도록 상기 조작 명령어를 상기 보조 기기에 발송하는 단계; 를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
In the device interactive method performed by the master device,
Generating a manipulation instruction in response to a user's touch manipulation on the touch assembly; And
The auxiliary device writes the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and controls the auxiliary device by accessing and responding to the input command in the command space through driving of the input device. Sending the operation command to the auxiliary device; Containing,
Device interactive method, characterized in that.
제9항에 있어서,
상기 조작 명령어를 보조 기기에 발송하는 단계는,
마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송하는 단계; 및
상기 전송 애플리케이션을 통해 상기 조작 명령어를 보조 기기에 발송하는 단계; 를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 9,
Sending the operation command to the auxiliary device,
Sending the operation command to a corresponding transmission application through driving of a master device; And
Sending the operation command to an auxiliary device through the transmission application; Containing,
Device interactive method, characterized in that.
제10항에 있어서,
상기 전송 애플리케이션을 통해 상기 조작 명령어를 보조 기기에 발송하는 단계는,
상기 전송 애플리케이션을 통해 상기 마스터 기기의 운영체제에서 상기 조작 명령어를 획득하는 단계;
안드로이드 개방형 액세서리(AOA) 프로토콜에 기반하여 상기 조작 명령어를 패키징하는 단계; 및
데이터 전송 채널을 통해 상기 보조 기기에 패키징 결과를 전송하는 단계; 를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 10,
Sending the operation command to the auxiliary device through the transmission application,
Acquiring the operation command from the operating system of the master device through the transmission application;
Packaging the operation command based on an Android Open Accessory (AOA) protocol; And
Transmitting a packaging result to the auxiliary device through a data transmission channel; Containing,
Device interactive method, characterized in that.
제11항에 있어서,
상기 데이터 전송 채널을 통해 상기 보조 기기에 패키징 결과를 전송하는 단계 전에,
상기 마스터 기기와 상기 보조 기기의 데이터 전송 채널을 셋업하는 단계를 더 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 11,
Before transmitting the packaging result to the auxiliary device through the data transmission channel,
Further comprising the step of setting up a data transmission channel of the master device and the auxiliary device,
Device interactive method, characterized in that.
제10항에 있어서,
상기 마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송하는 단계는,
상기 전송 애플리케이션이 전경 운행 모드에 있으면 마스터 기기의 구동을 통해 상기 조작 명령어를 상응한 전송 애플리케이션에 발송하는 단계를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 10,
Sending the operation command to a corresponding transmission application through driving of the master device,
If the transmission application is in the foreground driving mode, including the step of sending the operation command to the corresponding transmission application through driving of the master device,
Device interactive method, characterized in that.
제9항에 있어서,
상기 터치 어셈블리는 하드웨어 터치 어셈블리 및 소프트웨어 터치 어셈블리 중 적어도 하나를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 9,
The touch assembly includes at least one of a hardware touch assembly and a software touch assembly,
Device interactive method, characterized in that.
제14항에 있어서,
상기 터치 어셈블리가 하드웨어 터치 어셈블리를 포함하면 하드웨어 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하는 단계는,
상기 하드웨어 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 제어 전기 신호를 생성하고 상기 제어 전기 신호를 터치 디지털 신호로 전환하는 단계; 및
기설정 프로토콜에 기반하여 상기 터치 디지털 신호를 조작 이벤트로 전환시키고 상기 조작 이벤트를 포함하는 조작 명령어를 생성하는 단계; 를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 14,
When the touch assembly includes a hardware touch assembly, generating a manipulation instruction in response to a user's touch manipulation on the hardware touch assembly,
Generating a control electrical signal and converting the control electrical signal into a touch digital signal in response to a user's touch manipulation on the hardware touch assembly; And
Converting the touch digital signal into a manipulation event based on a preset protocol and generating a manipulation command including the manipulation event; Containing,
Device interactive method, characterized in that.
제15항에 있어서,
상기 조작 이벤트는 노브 이벤트 및 버튼 이벤트 중 적어도 하나를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 15,
The manipulation event includes at least one of a knob event and a button event,
Device interactive method, characterized in that.
제14항에 있어서,
상기 터치 어셈블리가 상기 소프트웨어 터치 어셈블리를 포함하면 상기 소프트웨어 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하는 단계는,
상기 소프트웨어 터치 어셈블리에 대한 사용자의 입력 동작에 응답하여 입력 텍스트를 포함하는 조작 명령어를 생성하는 단계를 포함하는,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 14,
When the touch assembly includes the software touch assembly, generating a manipulation instruction in response to a user's touch manipulation on the software touch assembly,
Generating a manipulation instruction including input text in response to a user's input operation on the software touch assembly,
Device interactive method, characterized in that.
제9항에 있어서,
상기 마스터 기기는 자동차이고; 상기 보조 기기는 차량용 기기인,
것을 특징으로 하는 기기 인터랙티브 방법.
The method of claim 9,
The master device is an automobile; The auxiliary device is a vehicle device,
Device interactive method, characterized in that.
보조 기기에 배치되는 기기 인터랙티브 장치에 있어서,
마스터 기기가 발송한, 상기 마스터 기기에서 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 생성된 조작 명령어를 수신하기 위한 조작 명령어 수신 모듈;
상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하기 위한 입력 명령어 기입 모듈; 및
상기 보조 기기를 제어하도록, 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하기 위한 입력 명령어 응답 모듈; 을 포함하는,
것을 특징으로 하는 기기 인터랙티브 장치.
In the device interactive device disposed in the auxiliary device,
An operation instruction receiving module for receiving an operation instruction generated in response to a user's touch operation on the touch assembly from the master device sent by the master device;
An input command writing module for writing an input command corresponding to the manipulation command in a command space of an input device corresponding to the manipulation command; And
An input command response module for accessing and responding to the input command in the command space to control the auxiliary device; Containing,
Device interactive device, characterized in that.
마스터 기기에 배치되는 기기 인터랙티브 장치에 있어서,
터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하기 위한 조작 명령어 생성 모듈; 및
보조 기기가 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하여 상기 보조 기기를 제어하도록 상기 조작 명령어를 상기 보조 기기에 발송하기 위한 조작 명령어 발송 모듈; 을 포함하는,
것을 특징으로 하는 기기 인터랙티브 장치.
In the device interactive device disposed in the master device,
A manipulation instruction generation module for generating a manipulation command in response to a user's touch manipulation on the touch assembly; And
The auxiliary device writes the input command corresponding to the manipulation command in the command space of the input device corresponding to the manipulation command, and controls the auxiliary device by accessing and responding to the input command in the command space through driving of the input device. An operation command sending module for sending the operation command to the auxiliary device; Containing,
Device interactive device, characterized in that.
적어도 하나의 프로세서; 및
상기 적어도 하나의 프로세서와 통신 연결하는 메모리; 를 포함하고,
상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행 가능한 명령어가 저장되어 있고, 상기 명령어가 상기 적어도 하나의 프로세서에 의해 실행될 경우, 상기 적어도 하나의 프로세서가 제1항 내지 제8항 중 어느 한 항의 기기 인터랙티브 방법을 수행하는,
것을 특징으로 하는 보조 기기.
At least one processor; And
A memory communicating with the at least one processor; Including,
An instruction executable by the at least one processor is stored in the memory, and when the instruction is executed by the at least one processor, the at least one processor is the device interactive of any one of claims 1 to 8 How to do it,
An auxiliary device, characterized in that.
적어도 하나의 프로세서; 및
상기 적어도 하나의 프로세서와 통신 연결하는 메모리를 포함하고,
상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행 가능한 명령어가 저장되어 있고, 상기 명령어가 상기 적어도 하나의 프로세서에 의해 실행될 경우, 상기 적어도 하나의 프로세서가 제9항 내지 제18항 중 어느 한 항의 기기 인터랙티브 방법을 수행하는,
것을 특징으로 하는 마스터 기기.
At least one processor; And
Includes a memory for communication connection with the at least one processor,
An instruction executable by the at least one processor is stored in the memory, and when the instruction is executed by the at least one processor, the at least one processor is the device interactive of any one of claims 9 to 18. How to do it,
Master device, characterized in that.
마스터 기기와 보조 기기를 포함하고;
상기 마스터 기기는 터치 어셈블리에 대한 사용자의 터치 조작에 응답하여 조작 명령어를 생성하고 상기 조작 명령어를 상기 보조 기기에 발송하며;
상기 보조 기기는 상기 조작 명령어와 대응되는 입력 기기의 명령어 공간에 상기 조작 명령어와 대응되는 입력 명령어를 기입하고, 상기 보조 기기를 제어하도록 상기 입력 기기의 구동을 통해 상기 명령어 공간에서 상기 입력 명령어를 액세스하고 응답하는,
것을 특징으로 하는 인터랙티브 시스템.
Including a master device and an auxiliary device;
The master device generates a manipulation command in response to a user's touch manipulation on the touch assembly and sends the manipulation command to the auxiliary device;
The auxiliary device writes an input command corresponding to the manipulation command in a command space of an input device corresponding to the manipulation command, and accesses the input command from the command space through driving of the input device to control the auxiliary device. And responding,
Interactive system, characterized in that.
컴퓨터 프로그램이 저장되어 있는 비일시적 컴퓨터 판독가능 저장 매체에 있어서,
상기 컴퓨터 프로그램이 프로세서에 의해 실행될 경우, 제1항 내지 제8항 중 어느 한 항에 따른 기기 인터랙티브 방법 또는 제9항 내지 제18항 중 어느 한 항에 따른 기기 인터랙티브 방법이 수행되는,
것을 특징으로 하는 컴퓨터 프로그램이 저장되어 있는 비일시적 컴퓨터 판독가능 저장 매체.
In the non-transitory computer-readable storage medium storing a computer program,
When the computer program is executed by a processor, the device interactive method according to any one of claims 1 to 8 or the device interactive method according to any one of claims 9 to 18 is performed,
A non-transitory computer-readable storage medium having a computer program stored thereon.
컴퓨터 판독 가능 매체에 저장되어 있는 컴퓨터 프로그램에 있어서,
상기 컴퓨터 프로그램의 명령이 실행될 경우, 제1항 내지 제8항 중 어느 한 항에 따른 기기 인터랙티브 방법 또는 제9항 내지 제18항 중 어느 한 항에 따른 기기 인터랙티브 방법이 수행되는,
것을 특징으로 하는 컴퓨터 판독 가능 매체에 저장되어 있는 컴퓨터 프로그램.
In a computer program stored in a computer-readable medium,
When the command of the computer program is executed, the device interactive method according to any one of claims 1 to 8 or the device interactive method according to any one of claims 9 to 18 is performed,
A computer program stored in a computer-readable medium, characterized in that.
KR1020210034295A 2020-03-17 2021-03-16 Equipment interaction method, device, equipment, system and medium KR102528104B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010188711.1 2020-03-17
CN202010188711.1A CN111367452B (en) 2020-03-17 2020-03-17 Equipment interaction method, device, equipment, system and medium

Publications (2)

Publication Number Publication Date
KR20210036880A true KR20210036880A (en) 2021-04-05
KR102528104B1 KR102528104B1 (en) 2023-05-02

Family

ID=71204448

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210034295A KR102528104B1 (en) 2020-03-17 2021-03-16 Equipment interaction method, device, equipment, system and medium

Country Status (3)

Country Link
JP (1) JP7262498B2 (en)
KR (1) KR102528104B1 (en)
CN (1) CN111367452B (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112572418A (en) * 2020-12-15 2021-03-30 北京百度网讯科技有限公司 Control method and device for unmanned vehicle and electronic equipment
CN114691553B (en) * 2020-12-29 2023-05-16 成都鼎桥通信技术有限公司 Method and device for accessing accessory device
CN113553198A (en) * 2021-06-01 2021-10-26 刘启成 Data processing method and device
CN115257580B (en) * 2022-07-22 2024-05-14 智己汽车科技有限公司 Peripheral control method and control system of intelligent vehicle
CN115542809B (en) * 2022-09-30 2024-02-20 佛山食神网络智能科技有限公司 Universal controller
CN115390980B (en) * 2022-10-27 2023-04-07 深圳开鸿数字产业发展有限公司 Processing method of distributed interaction, computer equipment and readable storage medium
CN117687526A (en) * 2023-11-16 2024-03-12 安徽曦合微电子有限公司 Touch detection method, system, computer equipment and storage medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010130369A (en) * 2008-11-27 2010-06-10 Fujitsu Ten Ltd On-board device and remote control system
JP2010126092A (en) * 2008-11-28 2010-06-10 Fujitsu Ten Ltd On-vehicle device and on-vehicle display system
KR20180029066A (en) * 2015-07-17 2018-03-19 크라운 이큅먼트 코포레이션 Processor with graphical user interface for industrial vehicles
KR20190042853A (en) * 2017-10-17 2019-04-25 현대자동차주식회사 Apparatus and method for controlling mobile device communicated with in-vehicle terminal

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8433828B2 (en) * 2010-02-26 2013-04-30 Apple Inc. Accessory protocol for touch screen device accessibility
CN103677768A (en) * 2012-09-05 2014-03-26 优三第科技开发(深圳)有限公司 Electronic device and control method and device thereof
CN103309308B (en) * 2013-05-17 2016-08-10 华为技术有限公司 A kind of device intelligence control method and device, system, PnP device
CN104424036A (en) * 2013-08-28 2015-03-18 中兴通讯股份有限公司 Synchronous operation method and device of smart terminal
CN105282258B (en) * 2015-11-10 2019-03-19 福建星网视易信息系统有限公司 Control the method and system of remote desktop
US11054894B2 (en) * 2017-05-05 2021-07-06 Microsoft Technology Licensing, Llc Integrated mixed-input system
CN108108105B (en) * 2017-12-18 2021-09-14 联想(北京)有限公司 Information processing equipment and information processing method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010130369A (en) * 2008-11-27 2010-06-10 Fujitsu Ten Ltd On-board device and remote control system
JP2010126092A (en) * 2008-11-28 2010-06-10 Fujitsu Ten Ltd On-vehicle device and on-vehicle display system
KR20180029066A (en) * 2015-07-17 2018-03-19 크라운 이큅먼트 코포레이션 Processor with graphical user interface for industrial vehicles
KR20190042853A (en) * 2017-10-17 2019-04-25 현대자동차주식회사 Apparatus and method for controlling mobile device communicated with in-vehicle terminal

Also Published As

Publication number Publication date
KR102528104B1 (en) 2023-05-02
CN111367452B (en) 2021-08-03
JP2021101356A (en) 2021-07-08
JP7262498B2 (en) 2023-04-21
CN111367452A (en) 2020-07-03

Similar Documents

Publication Publication Date Title
KR102528104B1 (en) Equipment interaction method, device, equipment, system and medium
JP7266635B2 (en) Screen switching display method, device, smart rearview mirror and readable storage medium
US10284705B2 (en) Method and apparatus for controlling smart device, and computer storage medium
JP7230093B2 (en) Method, device, electronic device and storage medium for controlling smart rearview mirror
JP2022126793A (en) Method and device for controlling terminal, electronic apparatus, storage medium, and computer program
KR20220004807A (en) Annotation tool generation method, annotation method, device, and apparatus and storage medium and computer program
KR20210038862A (en) Method, device, equipment and storage medium for obtaining mini program data
JP2021197153A (en) Method and apparatus for recognizing word slot, electronic apparatus, storage medium and computer program
KR20210042283A (en) Data processing method, device, equipment and medium for applet
KR20210038861A (en) Method and device for mini program data processing
KR20210110779A (en) Method and apparatus for providing applet service capability, electronic device, and storage medium
JP2021117972A (en) Device interactive method, authority management method, interactive device and client
CN114489350B (en) Input method calling method and related equipment
JP2012194815A (en) Air conditioner control interface device, air conditioner, and air conditioner control system
CN109144008A (en) A kind of industrial control system
KR102555258B1 (en) Method and apparatus for identifying user, storage medium, and electronic device
CN112329907A (en) Dialogue processing method and device, electronic equipment and storage medium
CN113407044A (en) Method, device, equipment and storage medium for simulating terminal handle input
CN112131160A (en) Working mode switching circuit, working mode switching method and robot
CN112578713B (en) Vehicle information processing method, device, equipment and storage medium
KR20200122726A (en) VR Device representing real time Public Transportation Information
CN112017528B (en) Vehicle-mounted machine map configuration method and device and electronic equipment
CN115904514B (en) Method for realizing cloud rendering pixel flow based on three-dimensional scene and terminal equipment
CN110531952B (en) Voice skill processing method, device and equipment
CN103975379A (en) Display system

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant