KR101835842B1

KR101835842B1 - Apparatus and method for transforming data

Info

Publication number: KR101835842B1
Application number: KR1020160054638A
Authority: KR
Inventors: 김주윤; 김지호; 박현철
Original assignee: 주식회사 닷
Priority date: 2016-05-03
Filing date: 2016-05-03
Publication date: 2018-04-19
Also published as: KR20170124793A

Abstract

본 발명의 실시예는 하나 이상의 사용자의 입력에 따라 생성되는 영상 신호 및 하나 이상의 센서를 통해 감지된 하나 이상의 센싱 값을 분석하여, 상기 영상 신호에 포함된 액션을 추출하고, 상기 액션을 각 사용자에게 전달하는 출력 데이터를 데이터 변환 장치 및 방법을 개시한다. An embodiment of the present invention analyzes an image signal generated according to an input of one or more users and one or more sensed values sensed through one or more sensors, extracts an action included in the image signal, A data conversion apparatus and method for outputting output data are disclosed.

Description

[0001] APPARATUS AND METHOD FOR TRANSFORMING DATA [0002]

본 발명은 데이터 변환 장치 및 방법에 관한 것으로, 사용자에 대한 액션을 사용자에게 전달될 수 있는 출력 데이터로 변환하고, 하나 이상의 돌기로 이루어진 출력 장치를 통해, 상기 출력 데이터와 대응되는 자극 또는 타격을 전달하도록 제어하는 데이터 변환 장치 및 방법에 관한 것이다. The present invention relates to a data conversion apparatus and method, which converts an action for a user into output data that can be transmitted to a user, and transmits a stimulus or hit corresponding to the output data through an output device composed of one or more projections To a data conversion apparatus and a data conversion method.

전자 통신 기술이 발전함에 따라, 사용자는 휴대 단말로 다양한 기능을 이용할 수 있게 되었다. 휴대 단말은 다양한 어플리케이션을 사용자가 원하는 대로 설치 및 삭제할 수 있고, 무선 인터넷을 이용하여 인터넷 망에 직접 접속할 수 있어서 활용도가 높다. 휴대 단말은 가속도 센서, 근접 센서, 온도 센서 등의 센서를 구비하고, 사용자의 주변 환경을 감지하는 기능을 수행할 수 있고, 감지된 환경과 관련된 정보를 사용자에게 제공할 수도 있다. With the development of electronic communication technology, a user can use various functions as a portable terminal. The mobile terminal can install and delete various applications as desired by the user, and can directly access the Internet using the wireless Internet, which is highly utilized. The portable terminal may include a sensor such as an acceleration sensor, a proximity sensor, and a temperature sensor, and may perform a function of detecting a user's surrounding environment, and may provide information related to the sensed environment to a user.

국내 공개특허공보 제2005-0056307호Korean Patent Publication No. 2005-0056307

본 발명은 사용자와 관련된 액션이 수신되면, 상기 액션과 대응되는 출력 데이터를 생성하고, 하나 이상의 돌기로 이루어진 출력 장치를 통해, 상기 출력 데이터와 대응되는 자극 또는 타격을 전달하도록 제어하는 데이터 변환 장치 및 방법을 제공할 수 있다. The present invention relates to a data conversion apparatus that generates output data corresponding to an action when a user-related action is received, and controls the output device to output a stimulus or strike corresponding to the output data through an output device including at least one projection, Method can be provided.

또한, 본 발명은 하나 이상의 사용자의 입력에 따라 생성되는 영상 신호를 분석하여, 상기 영상 신호에 포함된 액션을 추출하고, 상기 액션을 각 사용자에게 전달하는 출력 데이터를 생성하는 데이터 변환 장치 및 방법을 제공할 수 있다. The present invention also provides a data conversion apparatus and method for analyzing a video signal generated according to an input of one or more users, extracting an action included in the video signal, and generating output data for transmitting the action to each user .

또한, 본 발명은 하나 이상의 센서를 통해 감지된 하나 이상의 센싱 값을 분석하여, 감지된 액션을 추출하고, 상기 액션을 사용자에게 전달하는 출력 데이터를 생성하는 데이터 변환 장치 및 방법을 제공할 수 있다. The present invention also provides a data conversion apparatus and method for analyzing one or more sensed values sensed through one or more sensors, extracting a sensed action, and generating output data for conveying the action to a user.

본 발명의 실시예들에 따른 데이터 변환 장치는 제1 장치 및 제2 장치와 전기적으로 연결되어 구동되고, 제1 장치로부터 사용자와 관련된 데이터를 수신하는 데이터 수신부; 상기 제1 장치로부터 수신한 데이터에 포함된 하나 이상의 소스 신호를 추출하는 추출부; 상기 하나 이상의 소스 신호를 분석하여, 상기 하나 이상의 소스 신호에 포함된 제1 액션을 검출하는 액션 검출부; 상기 제1 액션과 대응되는 출력 데이터를 생성하는 출력 데이터 생성부; 및 상기 출력 데이터를, 상기 제2 장치에 포함되고 일정한 간격으로 배치되어 상기 사용자에게 데이터를 전달하는 하나 이상의 정보 출력부를 구동시키는 출력 제어 신호로 변환하는 변환부;를 포함할 수 있다. A data conversion apparatus according to embodiments of the present invention includes a data receiving unit that is electrically connected to a first device and a second device and is driven and receives data associated with a user from the first device; An extracting unit for extracting one or more source signals included in data received from the first apparatus; An action detection unit for analyzing the one or more source signals to detect a first action included in the one or more source signals; An output data generation unit for generating output data corresponding to the first action; And a conversion unit that converts the output data into an output control signal that is included in the second device and is arranged at regular intervals to drive at least one information output unit that delivers data to the user.

본 실시예에 따르면, 상기 하나 이상의 소스 신호가 영상 신호를 포함하는 경우, 상기 액션 검출부는 상기 영상 신호로부터 사용자와 대응되는 대상체를 추출하고, 상기 대상체의 상태값을 변화시키는 제1 액션을 검출하고, 상기 출력 데이터 생성부는 상기 제1 액션의 종류 및 변화량을 고려하여, 출력 데이터를 생성할 수 있다. According to the present embodiment, when the one or more source signals include an image signal, the action detection unit extracts a target object corresponding to the user from the image signal, detects a first action for changing the state value of the target object , The output data generation unit may generate output data in consideration of the type and the amount of change of the first action.

본 실시예에 따르면, 상기 하나 이상의 소스 신호가 영상 신호를 포함하는 경우, 상기 액션 검출부는 상기 영상 신호로부터 사용자와 대응되는 제1 대상체 및 상기 제1 대상체와 다른 제2 대상체를 추출하고, 상기 제2 대상체에 의한 상기 제1 대상체의 상태를 변화시키는 제1 액션을 검출하고, 상기 출력 데이터 생성부는 상기 제1 액션의 위치 및 강도를 고려하여, 출력 데이터를 생성할 수 있다. According to the present embodiment, when the one or more source signals include an image signal, the action detection unit extracts a first object corresponding to a user and a second object different from the first object from the image signal, A first action for changing the state of the first object by the second object is detected and the output data generation unit may generate the output data in consideration of the position and the strength of the first action.

본 실시예에 따르면, 상기 하나 이상의 소스 신호가 영상 신호를 포함하는 경우, 상기 액션 검출부는 상기 영상 신호로부터 사용자와 대응되는 대상체의 주변 환경의 변화와 대응되는 제1 액션을 검출하고, 상기 출력 데이터 생성부는 상기 제1 액션과 대응되는 출력 데이터를 생성할 수 있다. According to the present embodiment, when the one or more source signals include a video signal, the action detecting unit detects a first action corresponding to a change in a surrounding environment of a target object corresponding to the user from the video signal, The generating unit may generate output data corresponding to the first action.

상기 출력 데이터 생성부는 상기 제1 액션에 의해 변화되는 상태값의 종류와 대응되는 지점에 상기 제1 액션에 의해 변화되는 상태값의 변화량과 대응되는 크기의 자극을 생성하는 출력 데이터를 생성할 수 있다. The output data generating unit may generate output data for generating a stimulus having a size corresponding to a change amount of the state value changed by the first action at a position corresponding to the type of the state value changed by the first action .

상기 출력 데이터 생성부는 상기 제1 액션이 발생한 위치와 대응되는 지점에 상기 제1 액션의 강도와 대응되는 크기의 자극을 생성하는 출력 데이터를 생성할 수 있다. The output data generating unit may generate output data for generating a stimulus having a magnitude corresponding to the intensity of the first action at a position corresponding to a position at which the first action occurs.

상기 액션 검출부는 상기 하나 이상의 소스 신호로부터 접근하는 대상체의 움직임과 대응되는 제1 액션을 검출하고, 상기 출력 데이터 생성부는 상기 대상체의 움직임과 대응되는 지점에 대한 자극을 생성하는 출력 데이터를 생성하는, 데이터 변환 장치. Wherein the action detection unit detects a first action corresponding to a movement of an object to be accessed from the one or more source signals and the output data generation unit generates output data for generating a stimulus for a point corresponding to the motion of the object, Data conversion device.

상기 액션 검출부는 상기 하나 이상의 소스 신호로부터 미리 설정된 임계 속도 이상으로 이동하는 대상체의 움직임과 대응되는 제1 액션을 검출하고, 상기 출력 데이터 생성부는 상기 대상체의 위치와 대응되는 지점에 상기 대상체의 이동 속도와 대응되는 크기의 자극을 생성하는 출력 데이터를 생성할 수 있다. Wherein the action detection unit detects a first action corresponding to a movement of a target moving at least a predetermined threshold speed from the one or more source signals, and the output data generation unit detects a movement speed of the target object at a position corresponding to the position of the target object And generate output data that generates a stimulus of a size corresponding to the output data.

상기 액션 검출부는 상기 하나 이상의 소스 신호와 소정의 시간 이전에 획득된 하나 이상의 소스 신호를 각각 비교함으로써, 제1 액션을 검출하고, 상기 출력 데이터 생성부는 상기 제1 액션과 대응되는 출력 데이터를 생성할 수 있다. Wherein the action detection unit detects a first action by comparing each of the one or more source signals with one or more source signals obtained before a predetermined time to generate an output data corresponding to the first action .

상기 출력 데이터 생성부는 상기 제1 액션과 대응되어 저장된 후속 액션과 대응되는 출력 데이터를 더 생성할 수 있다. The output data generation unit may further generate output data corresponding to a subsequent action stored in association with the first action.

상기 제1 장치는 상기 사용자와 대응되는 대상체를 포함하고, 상기 사용자로부터 입력에 따라 시청각 데이터를 발생시키는 장치일 수 있다. The first device may include an object corresponding to the user, and may be an apparatus for generating audiovisual data according to an input from the user.

상기 제1 장치는 온도 센서, 압력 센서, 광센서, 초음파 센서, 근접 센서, 가속도 센서, 이미지 센서 중 적어도 하나를 포함하고, 상기 하나 이상의 센서로부터 센싱값을 획득하는 장치일 수 있다. The first device may include at least one of a temperature sensor, a pressure sensor, an optical sensor, an ultrasonic sensor, a proximity sensor, an acceleration sensor, and an image sensor, and may be a device for obtaining a sensing value from the at least one sensor.

상기 제2 장치는 상기 사용자의 피부와 인접하고, 상기 사용자의 신경, 혈관 중 적어도 하나와 대응되는 위치에 배치되는 복수의 정보 출력부를 포함하고, 상기 출력 제어 신호에 따라 상기 복수의 정보 출력부를 구동시켜 사용자에게 자극을 전달할 수 있다. Wherein the second device includes a plurality of information output units adjacent to the skin of the user and disposed at positions corresponding to at least one of the nerves and blood vessels of the user and configured to drive the plurality of information output units So that the stimulus can be transmitted to the user.

본 발명의 실시예들에 따른 데이터 변환 방법은 데이터 변환 장치가 제1 장치로부터 사용자와 관련된 데이터를 수신하는 단계; 상기 데이터 변환 장치가 상기 제1 장치로부터 수신한 데이터에 포함된 하나 이상의 소스 신호를 추출하는 단계; 상기 데이터 변환 장치가 상기 하나 이상의 소스 신호를 분석하여, 상기 하나 이상의 소스 신호에 포함된 제1 액션을 검출하는 단계; 상기 데이터 변환 장치가 상기 제1 액션과 대응되는 출력 데이터를 생성하는 단계; 및 상기 데이터 변환 장치가 상기 출력 데이터를, 상기 제2 장치에 포함되고 일정한 간격으로 배치되어 상기 사용자에게 데이터를 전달하는 하나 이상의 정보 출력부를 구동시키는 출력 제어 신호로 변환하는 단계;를 포함할 수 있다. A data conversion method according to embodiments of the present invention includes the steps of: a data conversion device receiving data associated with a user from a first device; Extracting one or more source signals included in data received from the first device by the data conversion device; The data conversion apparatus analyzing the one or more source signals to detect a first action included in the one or more source signals; The data conversion device generating output data corresponding to the first action; And converting the output data into an output control signal for driving at least one information output unit included in the second apparatus and arranged at regular intervals to transmit data to the user .

상기 제2 장치는 하나 이상의 돌기로 이루어지고, 상기 출력 제어 신호에 따라 상기 하나 이상의 돌기 중 전부 또는 일부가 상기 사용자의 피부를 타격하도록 구동되는 정보 출력부;를 포함할 수 있다. The second device may include at least one protrusion, and the information output unit may be driven so that all or a part of the at least one protrusion may strike the skin of the user according to the output control signal.

본 발명의 실시예에 따른 컴퓨터 프로그램은 컴퓨터를 이용하여 본 발명의 실시예에 따른 데이터 변환 방법 중 어느 하나의 방법을 실행시키기 위하여 매체에 저장될 수 있다. A computer program according to an embodiment of the present invention may be stored in a medium using a computer to execute any one of the data conversion methods according to an embodiment of the present invention.

이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체가 더 제공된다. In addition to this, another method for implementing the present invention, another system, and a computer-readable recording medium for recording a computer program for executing the method are further provided.

전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해 질 것이다.Other aspects, features, and advantages other than those described above will become apparent from the following drawings, claims, and the detailed description of the invention.

본 발명의 실시예들에 따르면, 사용자와 관련된 액션이 수신되면, 상기 액션과 대응되는 출력 데이터를 생성하고, 하나 이상의 돌기로 이루어진 출력 장치를 통해, 상기 출력 데이터와 대응되는 자극 또는 타격을 전달하도록 제어할 수 있다. According to embodiments of the present invention, when an action related to a user is received, output data corresponding to the action is generated, and through the output device composed of one or more protrusions, a stimulus or hit corresponding to the output data is transmitted Can be controlled.

또한, 본 발명의 실시예들에 따르면, 하나 이상의 사용자의 입력에 따라 생성되는 영상 신호를 분석하여, 상기 영상 신호에 포함된 액션을 추출하고, 상기 액션을 각 사용자에게 전달하는 출력 데이터를 생성할 수 있다. According to embodiments of the present invention, an image signal generated according to an input of one or more users is analyzed, an action included in the image signal is extracted, and output data for transmitting the action to each user is generated .

또한, 본 발명의 실시예들에 따르면, 하나 이상의 센서를 통해 감지된 하나 이상의 센싱 값을 분석하여, 감지된 액션을 추출하고, 상기 액션을 사용자에게 전달하는 출력 데이터를 생성할 수 있다. Also, according to embodiments of the present invention, one or more sensed values sensed through one or more sensors may be analyzed to extract sensed actions and generate output data that conveys the actions to a user.

도 1은 본 발명의 실시예에 따른 데이터 출력 시스템을 나타내는 도면이다.
도 2는 본 발명의 실시예들에 따른 데이터 변환 장치의 구조를 나타내는 블록도이다.
도 3 내지 도 6은 본 발명의 실시예들에 따른 데이터 변환 방법의 흐름도 들이다.
도 7은 정보 출력 장치의 일 예를 나타내는 도면이다.
도 8 내지 도 9는 데이터 획득 장치에 의해 획득된 영상 신호의 일 예들이다.
도 10은 정보 출력 장치의 또 다른 예를 나타내는 도면이다.
도 11은 정보 출력 장치의 다양한 실시예를 설명하기 위한 도면들이다. 1 is a diagram illustrating a data output system according to an embodiment of the present invention.
2 is a block diagram showing the structure of a data conversion apparatus according to embodiments of the present invention.
3 to 6 are flowcharts of a data conversion method according to embodiments of the present invention.
7 is a diagram showing an example of an information output apparatus.
8 to 9 are examples of image signals obtained by the data acquisition apparatus.
10 is a diagram showing another example of the information output apparatus.
11 is a view for explaining various embodiments of the information output apparatus.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다. BRIEF DESCRIPTION OF THE DRAWINGS The present invention is capable of various modifications and various embodiments, and specific embodiments are illustrated in the drawings and described in detail in the detailed description. The effects and features of the present invention and methods of achieving them will be apparent with reference to the embodiments described in detail below with reference to the drawings. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein.

이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals refer to like or corresponding components throughout the drawings, and a duplicate description thereof will be omitted .

이하의 실시예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다. In the following embodiments, the terms first, second, and the like are used for the purpose of distinguishing one element from another element, not the limitative meaning.

이하의 실시예에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는한, 복수의 표현을 포함한다. In the following examples, the singular forms "a", "an" and "the" include plural referents unless the context clearly dictates otherwise.

이하의 실시예에서, 포함하다 또는 가지다 등의 용어는 명세서 상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징을 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다. In the following embodiments, terms such as inclusive or possessed mean that a feature or element described in the specification is present, and does not exclude the possibility that one or more other features or components are added in advance.

어떤 실시예가 달리 구현 가능한 경우에 특정한 공정 순서는 설명되는 순서와 다르게 수행될 수도 있다. 예를 들어, 연속하여 설명되는 두 공정이 실질적으로 동시에 수행될 수도 있고, 설명되는 순서와 반대의 순서로 진행될 수 있다. If certain embodiments are otherwise feasible, the particular process sequence may be performed differently from the sequence described. For example, two processes that are described in succession may be performed substantially concurrently, and may be performed in the reverse order of the order described.

이하의 실시예에서, "회로"는, 예를 들어, 프로그램가능한 회로에 의해 실행되는 인스트럭션을 저장하는 하드와이어드 회로, 프로그램가능한 회로, 상태 머신 회로, 및/또는 펌웨어를 단독으로 또는 임의의 조합으로 포함할 수 있다. 애플리케이션은 호스트 프로세서 또는 다른 프로그램가능한 회로와 같은 프로그램가능한 회로 상에서 실행될 수 있는 코드 또는 인스트럭션으로서 구현될 수 있다. 본원의 임의의 실시예에서 사용되는 바와 같은, 모듈은,회로로서 구현될 수 있다. 회로는 집적 회로 칩과 같은 집적 회로로서 구현될 수 있다.In the following embodiments, the term "circuit" refers to any circuitry, circuitry, and / or circuitry, including, for example, hardwired circuitry, programmable circuitry, state machine circuitry, and / or firmware that stores instructions executed by a programmable circuit, either alone or in any combination . The application may be implemented as code or instructions that may be executed on a programmable circuit, such as a host processor or other programmable circuit. A module, as used in any of the embodiments herein, may be implemented as a circuit. The circuitry may be implemented as an integrated circuit, such as an integrated circuit chip.

이하의 실시예에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.In the following embodiments, when a component is referred to as "comprising ", it means that it can include other components as well, without excluding other components unless specifically stated otherwise. Also, the terms " part, "" module," and " module ", etc. in the specification mean a unit for processing at least one function or operation and may be implemented by hardware or software or a combination of hardware and software have.

도 1은 본 발명의 실시예에 따른 데이터 출력 시스템(10)을 나타내는 도면이다. 1 is a diagram showing a data output system 10 according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 실시예에 따른 데이터 출력 시스템(10)은 데이터 변환 장치(100), 데이터 획득 장치(200), 정보 출력 장치(300)를 포함할 수 있다. Referring to FIG. 1, a data output system 10 according to an embodiment of the present invention may include a data conversion apparatus 100, a data acquisition apparatus 200, and an information output apparatus 300.

데이터 변환 장치(100)는 데이터 획득 장치(200)로부터 수신 또는 획득한 데이터로부터 미리 설정된 소정의 조건, 규칙 등을 만족하는 액션을 추출하고, 상기 액션과 대응되는 출력 데이터를 생성하는 기능을 수행한다. 여기서, 소정의 조건 또는 규칙은 사용자 및/또는 사용자와 대응되는 대상체와 연관되어 설정될 수 있다. 예를 들어, 액션을 추출하는 조건 또는 규칙은 사용자 또는 사용자와 대응되는 대상체에게 전달되거나 관련될 수 있는 상태, 위치, 환경 변화와 관련될 수 있으며, 사용자에게 전달될 수 없거나 사용자와 대응되는 대상체에게 전달될 수 없거나 관련될 수 없는 상태, 위치, 환경 변화와는 관련될 수 없다. 데이터 변환 장치(100)는 사용자가 인지하지 못하지만 사용자와 관련된 액션을 추출하고, 상기 액션을 사용자가 인지할 수 있는 자극, 또는 신호로 변환할 수 있다. 또한, 데이터 변환 장치(100)는 게임, 시뮬레이션 장치 등을 통해 생성된 가상 현실에서 사용자와 대응되는 대상체와 관련된 액션을 추출하고, 상기 액션을 사용자가 인지할 수 있는 자극 또는 신호로 변환할 수 있다. 또한, 데이터 변환 장치(100)는 사용자에게 자극, 또는 신호를 전달할 수 있는 정보 출력 장치(300)와 전기적으로 연결되고, 상기 정보 출력 장치(300)의 구동 원리에 따라 자극 또는 신호가 전달될 수 있도록 출력 제어 신호를 생성할 수 있다. The data conversion apparatus 100 performs a function of extracting an action satisfying predetermined condition, rule, and the like from data received or obtained from the data acquisition apparatus 200 and generating output data corresponding to the action . Here, the predetermined condition or rule may be set in association with the user and / or the object corresponding to the user. For example, a condition or rule for extracting an action may be associated with a change in state, location, or environment that may be conveyed or related to a user or an object corresponding to the user, and may be associated with a user Location, or environment that can not be communicated or related. The data conversion apparatus 100 extracts an action that is not recognized by the user but is related to the user, and can convert the action into a stimulus or a signal that can be perceived by the user. In addition, the data conversion apparatus 100 may extract an action related to an object corresponding to a user in a virtual reality generated through a game, a simulation device, or the like, and convert the action into a stimulus or a signal that can be perceived by the user . In addition, the data conversion apparatus 100 is electrically connected to an information output apparatus 300 capable of transmitting a stimulus or a signal to a user, and a stimulus or signal can be transmitted according to a driving principle of the information output apparatus 300 The output control signal can be generated.

데이터 획득 장치(200)는 하나 이상의 사용자와 대응되는 대상체를 포함하는 영상을 제공하는 전자 장치를 포함할 수 있다. 데이터 획득 장치(200)는 하나 이상의 사용자에 의해 입력된 이벤트, 및/또는 입력에 따라 상기 하나 이상의 사용자와 대응되는 대상체의 행동, 상태, 위치, 레벨, 및/또는 보유 포인트 등이 변경되도록 제어 될 수 있다. 좀더 구체적으로는 데이터 획득 장치(200)는 사용자와 대응되는 제1 대상체 및 상기 사용자가 아닌 하나 이상의 제2 대상체를 포함하는 영상 신호를 생성하고, 상기 사용자에 의해 생성된 이벤트에 따라 상기 제1 대상체 또는 상기 하나 이상의 제2 대상체의 행동, 상태, 환경 등을 변화시키며, 이에 따른 영상 신호를 생성하는 기능을 수행할 수 있다. 사용자로부터 입력되는 입력은 키보드, 센서, 웨어러블 장치, 마이크 등의 전자 장치를 통해 입력될 수 있으며, 미리 설정된 규칙에 의해 데이터 변환 장치(100)가 해석할 수 있는 전자 장치로 변환될 수 있다. The data acquisition device 200 may include an electronic device that provides an image comprising one or more users and a corresponding object. The data acquisition device 200 is controlled to change the behavior, state, position, level, and / or retention point of an object corresponding to the one or more users according to an event input by one or more users, and / . More specifically, the data acquisition apparatus 200 generates a video signal including a first object corresponding to a user and one or more second objects that are not the user, Or changing the behavior, state, environment, etc. of the one or more second objects, and generating a video signal according to the changed behavior. The input from the user can be input through an electronic device such as a keyboard, a sensor, a wearable device, a microphone, or the like, and can be converted into an electronic device that can be interpreted by the data conversion device 100 according to a predetermined rule.

또한, 데이터 획득 장치(200)는 주변의 환경 변화(온도, 습도, 가스, 소리 등)를 감지하는 하나 이상의 센서를 포함하고, 상기 하나 이상의 센서를 통해 획득된 센싱값을 획득하는 기능을 수행할 수 있다. 여기서, 하나 이상의 센서는 사용자의 신체(접촉 및/또는 비 접촉), 사용자의 주변에 위치할 수 있으며, 주변의 환경 변화를 감지하게 된다. 데이터 획득 장치(200)는 온도 센서, 압력 센서, 광센서, 초음파 센서, 근접 센서, 가속도 센서, 이미지 센서 중 적어도 하나를 포함하고, 상기 하나 이상의 센서로부터 센싱값을 획득하는 기능을 수행할 수 있다. In addition, the data acquisition device 200 may include at least one sensor that senses a change in environment (temperature, humidity, gas, sound, etc.) of the environment, and may acquire a sensing value obtained through the at least one sensor . Here, the one or more sensors may be located at the user's body (contact and / or non-contact), the user's surroundings, and may sense ambient environmental changes. The data acquisition device 200 may include at least one of a temperature sensor, a pressure sensor, an optical sensor, an ultrasonic sensor, a proximity sensor, an acceleration sensor, and an image sensor, and may acquire a sensing value from the one or more sensors .

정보 출력 장치(300)는 하나 이상의 정보 출력부를 포함하고, 상기 정보 출력부를 구동시키는 구동부를 더 포함할 수 있다. 상기 하나 이상의 정보 출력부는 사용자에게 데이터를 전달하기 위한 구성으로서, 사용자와 직접 접촉되거나 비접촉의 방식으로 사용자에게 데이터를 전달할 수 있다. 상기 하나 이상의 정보 출력부는 하나 이상의 돌기를 통해, 사용자에게 데이터를 전달할 수 있다. 각각의 돌기는 미리 정해진 위치에 위치하도록 사용자의 신체 부위에 부착 가능한 장치와 결합될 수 있다. 즉, 각각의 돌기는 도 7과 같이 사용자가 입을 수 있는 장치에 부착될 수 있다. 도 7에서는 하나 이상의 돌기와 결합된 장치는 인체의 상반신과 같은 형태로 도시되어 있으나, 이에 한정되지 않고, 장갑과 같은 형태, 양말과 같은 형태, 하의와 같은 형태로 구현될 수 있다. 각각의 돌기는 상하 방향으로 직선운동함으로써, 사용자에게 1차원인 점과 같은 형태의 자극을 주거나, 좌우 방향으로 직선운동함으로써, 사용자에게 2차원인 선과 같은 형태의 자극을 줄 수 있다. 또한, 복수의 돌기들은 동시에 사용자를 타격하거나 순차적으로 타격함으로써, 현실 세계에서의 액션 및 가상 세계에서의 액션과 대응되는 자극을 생성할 수 있다. 출력 제어 신호는 돌기의 운동을 제어하기 위한 하나 이상의 돌기가 움직이는 방향, 움직이는 시점, 지속 시간 등을 포함할 수 있다. The information output apparatus 300 may further include at least one information output unit and a driving unit for driving the information output unit. The one or more information output units are configured to transmit data to a user, and can transmit data to the user in a direct contact with the user or in a non-contact manner. The one or more information output units may transmit data to the user through one or more protrusions. Each protrusion may be associated with a device attachable to the body part of the user to be located at a predetermined position. That is, each projection may be attached to a user wearable device as shown in FIG. In FIG. 7, the device coupled with one or more protrusions is shown in the same shape as the upper half of the human body, but the present invention is not limited thereto, and may be implemented in the form of a glove, a sock, or the like. Each of the projections linearly moves in the up-and-down direction, thereby giving a stimulus to the user in the form of a one-dimensional point or a straight line motion in the left-right direction, thereby giving the user the same stimulus as a two-dimensional line. In addition, the plurality of protrusions can strike the user at the same time or sequentially hit them, thereby generating a stimulus corresponding to an action in the real world and an action in the virtual world. The output control signal may include a direction in which at least one protrusion for controlling the motion of the protrusion moves, a moving time, a duration, and the like.

이때, 상기 하나 이상의 정보 출력부는 사용자의 신경, 세포 또는 혈관과 대응되는 위치에 배치되어 사용자의 신경, 세포 또는 혈관을 통해 데이터를 전달할 수 있으며, 상기 하나 이상의 정보 출력부는 사용자가 신경을 통해 느낄 수 있는 자극, 및/또는 신호를 생성할 수 있다. 또한 상기 하나 이상의 정보 출력부는 사용자의 뇌에 연결되어 사용자의 뇌를 통해 이해될 수 있는 데이터를 전달할 수 있다. The at least one information output unit may be disposed at a position corresponding to a nerve, a cell, or a blood vessel of a user, and may transmit data through a user's nerves, a cell, or a blood vessel. Lt; / RTI > and / or signal. The at least one information output unit may be connected to a user's brain and may transmit data that can be understood through the user's brain.

여기서, 데이터 변환 장치(100)는 데이터 획득 장치(200) 및/또는 정보 출력 장치(300)를 포함하거나, 데이터 획득 장치(200), 정보 출력 장치(300)와 직접 또는 네트워크 망을 통해 연결될 수도 있다. Here, the data conversion apparatus 100 may include the data acquisition apparatus 200 and / or the information output apparatus 300, or may be connected to the data acquisition apparatus 200, the information output apparatus 300, have.

여기서, 데이터 변환 장치(100), 데이터 획득 장치(200), 및/또는 정보 출력 장치(300)는 유무선 통신 환경에서 웹 서비스를 이용할 수 있는 통신 단말기를 의미할 수도 있다. 여기서, 데이터 변환 장치(100), 데이터 획득 장치(200), 및/또는 정보 출력 장치(300)는 사용자의 퍼스널 컴퓨터일 수도 있고, 또는 사용자의 휴대용 단말일 수도 있다. 이를 더욱 상세히 설명하면, 데이터 변환 장치(100), 데이터 획득 장치(200), 및/또는 정보 출력 장치(300)는 컴퓨터(예를 들면, 데스크톱, 랩톱, 태블릿 등), 미디어 컴퓨팅 플랫폼(예를 들면, 케이블, 위성 셋톱박스, 디지털 비디오 레코더), 핸드헬드 컴퓨팅 디바이스(예를 들면, PDA, 이메일 클라이언트 등), 핸드폰의 임의의 형태, 또는 다른 종류의 컴퓨팅 또는 커뮤니케이션 플랫폼의 임의의 형태를 포함할 수 있으나, 본 발명이 이에 한정되는 것은 아니다. Here, the data conversion apparatus 100, the data acquisition apparatus 200, and / or the information output apparatus 300 may refer to a communication terminal that can use a web service in a wired / wireless communication environment. Here, the data conversion apparatus 100, the data acquisition apparatus 200, and / or the information output apparatus 300 may be a user's personal computer or a user's portable terminal. The data acquisition device 200 and / or the information output device 300 may be a computer (e.g., a desktop, a laptop, a tablet, etc.), a media computing platform (Eg, a cable, a satellite set-top box, a digital video recorder), a handheld computing device (eg, a PDA, an email client, etc.), any form of cellular phone, or any other type of computing or communication platform However, the present invention is not limited thereto.

도 2는 본 발명의 실시예들에 따른 데이터 변환 장치(100)의 구조를 나타내는 블록도이다. 2 is a block diagram showing the structure of a data conversion apparatus 100 according to embodiments of the present invention.

도 2를 참조하면, 데이터 변환 장치(100)는 데이터 수신부(110), 추출부(120), 액션 검출부(130), 출력 데이터 생성부(140), 변환부(150)를 포함할 수 있다. Referring to FIG. 2, the data conversion apparatus 100 may include a data receiving unit 110, an extracting unit 120, an action detecting unit 130, an output data generating unit 140, and a converting unit 150.

데이터 수신부(110)는 데이터 획득 장치(200)로부터 사용자와 관련된 데이터를 수신할 수 있다. 여기서, 사용자와 관련된 데이터는 상기 사용자와 대응되는 대상체와 관련된 데이터 이거나, 상기 사용자의 주변과 관련된 데이터(위치, 행동, 상태 변화 등) 일 수 있다. 예를 들어, 데이터 수신부(100)는 하나 이상의 사용자가 참여하는 게임 장치, 시뮬레이터 장치 등의 데이터 획득 장치(200)로부터 사용자와 대응되는 대상체를 포함하는 영상 신호를 수신할 수 있다. 이때, 게임 장치, 시뮬레이터 장치는 하나 이상의 사용자로부터 소정의 입력을 획득함으로써, 상기 소정의 입력에 따른 영상 신호를 생성할 수 있다. 좀더 구체적으로는 데이터 수신부(100)는 게임 장치, 시뮬레이터 장치에 참여한 제1 사용자 및 제2 사용자 사이의 소정의 행위가 입력되면, 상기 행위에 따라 제1 사용자와 대응되는 제1 대상체 및 제2 사용자와 대응되는 대상체의 상태가 변경된 영상 신호를 수신하게 된다. 또한, 데이터 수신부(100)는 사용자의 입력에 의해 사용자의 레벨, 보유 포인트 등이 증가하거나 감소하는 변화가 감지되면, 데이터 획득 장치(200)로부터 상기 변화와 대응되는 데이터를 수신할 수 있다. The data receiving unit 110 may receive data related to the user from the data obtaining apparatus 200. [ Here, the data related to the user may be data related to the user and the corresponding object, or data (position, behavior, state change, etc.) related to the user's surroundings. For example, the data receiving unit 100 may receive a video signal including a target object corresponding to a user from a data acquisition device 200, such as a game device or a simulator device, to which one or more users participate. At this time, the game device and the simulator device can generate a video signal according to the predetermined input by obtaining a predetermined input from one or more users. More specifically, when a predetermined behavior is input between a first user and a second user participating in a game device, a simulator device, and the like, the data receiving unit 100 receives a first object corresponding to a first user and a second user And receives a video signal in which the state of the corresponding object is changed. The data receiving unit 100 may receive data corresponding to the change from the data obtaining apparatus 200 when a change in the level or hold point of the user is detected by the user's input.

또한, 데이터 수신부(100)는 사용자 단말에 구비된 하나 이상의 센서를 통해 감지된 센싱 값을 수신할 수 있다. 사용자 단말에 구비된 근접 센서를 통해 소정의 사물의 접근이 감지되면, 데이터 수신부(100)는 상기 사물의 접근에 대한 데이터를 수신할 수 있다. 또한, 사용자 단말에 구비된 가스 센서를 통해 소정의 기체의 농도가 현저히 증가하는 변화가 감지되면, 데이터 수신부(100)는 상기 기체의 농도가 현저히 증가하는 변화와 대응되는 데이터를 수신할 수 있다. 또한, 사용자 단말에 구비된 소리 입력 센서를 통해, 미리 설정된 임계 크기 이상의 크기 또는 속도를 가지는 소리, 움직임, 객체가 감지되면, 데이터 수신부(100)는 상기 소리, 움직임, 객체와 대응되는 데이터를 수신할 수 있다. In addition, the data receiving unit 100 may receive the sensing value sensed by one or more sensors provided in the user terminal. If a predetermined object is accessed through a proximity sensor provided in the user terminal, the data receiving unit 100 may receive data on access to the object. In addition, if a change in the concentration of the predetermined gas is detected through the gas sensor provided in the user terminal, the data receiving unit 100 can receive the data corresponding to the change of the concentration of the gas significantly. When a sound, a motion, or an object having a magnitude or speed greater than a preset threshold value is detected through a sound input sensor provided in the user terminal, the data receiving unit 100 receives data corresponding to the sound, can do.

추출부(120)는 상기 제1 장치로부터 수신한 데이터에 포함된 하나 이상의 소스 신호를 추출할 수 있다. 여기서, 소스 신호는 데이터 획득 장치(200)에 의해 생성된 데이터에 포함된 다른 형식의 신호를 말한다. 데이터 획득 장치(200)에 의해 생성된 데이터에 따라 소스 신호는 영상 신호, 온도 센싱 값, 습도 센싱 값, 가속도 값, 위치 값, 가스 농도 값 등에 해당하는 신호 일 수 있다. The extracting unit 120 may extract one or more source signals included in the data received from the first apparatus. Here, the source signal refers to another type of signal included in the data generated by the data acquisition apparatus 200. Depending on the data generated by the data acquisition device 200, the source signal may be a signal corresponding to a video signal, a temperature sensing value, a humidity sensing value, an acceleration value, a position value, a gas concentration value, or the like.

액션 검출부(130)는 상기 하나 이상의 소스 신호를 분석하여, 상기 하나 이상의 소스 신호에 포함된 제1 액션을 검출할 수 있다. 액션 검출부(130)는 상기 하나 이상의 소스 신호를 각 소스 신호의 타입 별로 분류하고, 소스 신호의 타입을 고려하여 상기 소스 신호를 분석하는 방법을 선택할 수 있다. The action detection unit 130 may analyze the one or more source signals to detect a first action included in the one or more source signals. The action detection unit 130 may classify the one or more source signals according to the type of each source signal and select a method of analyzing the source signal in consideration of the type of the source signal.

액션 검출부(130)는 상기 하나 이상의 소스 신호에 포함된 영상 신호로부터 사용자와 대응되는 대상체를 추출하고, 상기 대상체와 관련된 상태값이 변하는 제1 액션을 검출할 수 있다. 이때, 액션 검출부(130)는 사용자와 대응되는 대상체를 포함하는 영상 신호에서 사용자의 상태, 예를 들어, 레벨, 보유 포인트 등의 정보를 표시하는 영역을 추출하고, 상기 정보를 표시하는 영역에 포함된 텍스트를 추출하고, 상기 텍스트를 해석함으로써, 대상체와 관련된 상태값이 변하는 제1 액션을 검출할 수 있다. 여기서, 대상체와 관련된 상태값은 사용자와 대응되는 대상체의 레벨, 대상체가 보유한 포인트 등을 포함할 수 있다. The action detecting unit 130 may extract a target object corresponding to the user from the video signal included in the at least one source signal and detect a first action in which a status value associated with the target object changes. At this time, the action detection unit 130 extracts an area for displaying information such as a user's state, for example, a level, a holding point, and the like in the video signal including the object corresponding to the user, Extracting the extracted text, and interpreting the text, the first action in which the state value associated with the object is changed can be detected. Here, the status value associated with the object may include a level of the object corresponding to the user, a point held by the object, and the like.

액션 검출부(130)는 상기 하나 이상의 소스 신호에 포함된 영상 신호로부터 사용자와 대응되는 제1 대상체 및 상기 제1 대상체가 아닌 제2 대상체를 추출하고, 상기 제1 대상체 및 상기 제2 대상체 사이에서 발생한 제1 액션을 검출할 수 있다. 예를 들어, 액션 검출부(130)는 상기 하나 이상의 소스 신호에 포함된 영상 신호로부터 제2 대상체에 의해 제1 대상체가 파괴되거나, 훼손되거나, 부상 당하거나, 죽음 등의 변화를 포함하는 경우인지를 판단하고, 판단 결과를 이용하여 상기 제1 대상체에 대한 제1 액션을 검출할 수 있다. 이를 통해, 액션 검출부(130)는 가상 현실에서 발생하였지만 사용자와 대응되는 대상체와 관련된 액션을 추출할 수 있다. The action detection unit 130 extracts a first object corresponding to a user and a second object that is not the first object from the video signal included in the one or more source signals, The first action can be detected. For example, the action detection unit 130 may detect whether the first object is destroyed, damaged, injured, or killed by the second object from the video signal included in the one or more source signals And the first action for the first object can be detected using the determination result. Accordingly, the action detection unit 130 can extract an action related to the object that has occurred in the virtual reality but is associated with the user.

액션 검출부(130)는 상기 하나 이상의 소스 신호에 포함된 영상 신호로부터 사용자와 대응되는 대상체의 주변 환경의 변화와 대응되는 제1 액션을 검출할 수 있다. 액션 검출부(130)는 영상 신호를 전체적으로 분석하여, 영상 신호에서의 날씨 변화, 온도 변화, 주변 환경의 변화 등과 같은 액션을 검출할 수 있다. 예를 들어, 액션 검출부(130)는 영상 신호로부터 눈 또는 비가 내리거나, 바람이 불거나, 한파, 폭설, 폭우, 태풍, 풍랑 주의보 등의 날씨의 변화를 액션으로 검출할 수도 있다. The action detection unit 130 can detect a first action corresponding to a change in the surrounding environment of the object corresponding to the user from the video signal included in the one or more source signals. The action detection unit 130 may analyze the video signal as a whole to detect an action such as a weather change, a temperature change, and a change in the surrounding environment in the video signal. For example, the action detection unit 130 may detect a change in weather such as snow, rain, wind, cold waves, heavy snow, heavy rain, typhoon, and wind storm warning from an image signal as an action.

액션 검출부(130)는 상기 하나 이상의 소스 신호로부터 사용자로 접근하는 대상체를 감지하고, 상기 대상체의 움직임과 대응되는 제1 액션을 검출할 수 있다. 액션 검출부(130)는 상기 하나 이상의 소스 신호에 포함된 영상 신호를 이미지 분석 알고리즘을 통해 분석함으로써, 상기 영상 신호에 포함된 대상체를 추출하고, 접근하는 대상체의 움직임을 제1 액션으로 검출할 수 있다. 액션 검출부(130)는 근접 센서로부터 획득된 센싱 값을 수신함으로써, 접근하는 대상체와 대응되는 제1 액션을 검출할 수 있다. 예를 들어, 액션 검출부(130)는 다가오는 자동차, 사람, 사물 등과 같은 움직임을 제1 액션으로 검출할 수 있다. 이를 통해, 액션 검출부(130)는 사용자가 미처 인지하지 못하였지만 사용자에게 위험이 될 수 있는 이벤트를 액션으로 검출할 수 있다. The action detection unit 130 detects a target object approaching the user from the one or more source signals and can detect a first action corresponding to the movement of the target object. The action detection unit 130 extracts a target object included in the video signal by analyzing the video signal included in the one or more source signals through an image analysis algorithm and detects a motion of the target object as a first action . The action detection unit 130 can detect the first action corresponding to the object to be accessed by receiving the sensing value obtained from the proximity sensor. For example, the action detection unit 130 may detect a motion such as an approaching automobile, a person, an object, etc. as a first action. Accordingly, the action detection unit 130 can detect an event that the user is unsure of but can be a danger to the user as an action.

액션 검출부(130)는 상기 하나 이상의 소스 신호로부터 미리 설정된 임계 속도 이상의 속도로 이동하는 대상체를 검출하고, 임계 속도 이상의 속도로 이동하는 대상체의 움직임을 제1 액션으로 검출할 수 있다. The action detection unit 130 detects a target moving at a speed equal to or higher than a predetermined threshold speed from the at least one source signal and can detect the movement of the target moving at a speed equal to or higher than the critical speed as a first action.

액션 검출부(130)는 상기 하나 이상의 소스 신호에 포함된 타입 별 센싱 값을 추출하고, 타입 별 센싱값이 이전에 획득된 하나 이상의 소스 신호에 포함된 타입 별 센싱 값으로부터 현저하게, 즉 미리 설정된 임계 크기 이상으로 변화된 경우, 상기 센싱 값의 변화를 제1 액션으로 검출할 수 있다. 예를 들어, 액션 검출부(130)는 온도, 습도, 가스 등과 대응되는 센싱 값이 크게 변화하는 제1 액션을 검출할 수 있다. 온도, 습도, 가스 등과 대응되는 센싱 값이 현저하게 변하는 것은 주변의 환경이 크게 변하는 것을 의미할 수 있으며, 이는 사용자에게는 소정의 위험(화재, 화산 폭발, 폭우, 천재지변 등)이 될 수 있다. The action detection unit 130 extracts the type-specific sensing values included in the one or more source signals, and detects the type-specific sensing values from the type-specific sensing values included in the previously acquired one or more source signals, The change of the sensing value can be detected as the first action. For example, the action detection unit 130 can detect a first action in which a sensing value corresponding to temperature, humidity, gas, etc. changes greatly. Significant changes in the sensing value corresponding to temperature, humidity, gas, and the like may mean that the environment around the user greatly changes, which may be a predetermined risk (fire, volcano explosion, heavy rain, natural disasters, etc.) to the user.

출력 데이터 생성부(140)는 검출된 제1 액션과 대응되는 출력 데이터를 생성할 수 있다. 여기서, 출력 데이터는 하나 이상의 정보 출력부를 통해 출력되는 것으로, 액션의 종류 및 크기에 따라 다르게 출력되도록 생성될 수 있다. The output data generation unit 140 may generate the output data corresponding to the detected first action. Here, the output data is output through one or more information output units and may be generated to be output differently depending on the type and size of the action.

출력 데이터 생성부(140)는 상기 사용자와 대응되는 대상체와 관련된 상태값이 변하는 제1 액션과 대응하여, 상기 상태값의 종류 및 변화량을 고려하여, 출력 데이터를 생성할 수 있다. 즉, 출력 데이터 생성부(140)는 상기 상태값의 종류와 대응되는 지점에 상기 상태값의 변화량 만큼의 자극, 신호가 출력될 수 있도록 출력 데이터를 생성할 수 있다. 이때, 출력 데이터는 상기 상태값의 종류와 대응되는 지점에 위치한 정보 출력부가, 상기 상태값의 변화량 과 비례하는 지속 시간 동안 또는 세기로 움직이도록 생성될 수 있다.The output data generation unit 140 may generate the output data in consideration of the type and the amount of change of the state value in correspondence with the first action in which the state value associated with the user corresponds to the first action. That is, the output data generation unit 140 may generate output data so that stimulus and signals corresponding to the amount of change of the state value may be output to a point corresponding to the type of the state value. At this time, the output data may be generated so that the information output unit located at a position corresponding to the type of the status value moves for a duration or intensity proportional to the amount of change of the status value.

출력 데이터 생성부(140)는 사용자와 대응되는 제1 대상체에 대한 상기 제1 대상체 이외의 제2 대상체에 의한 액션과 대응하여, 상기 액션에 의해 훼손된 위치 및 훼손 정도를 고려하여 출력 데이터를 생성할 수 있다. 예를 들어, 제2 대상체에 의해 제1 대상체의 가슴에 총상이 발생하는 액션과 대응하여, 출력 데이터 생성부(140)는 상기 총상의 발생 위치와 대응되는 지점에 상기 총상을 통해 유발될 수 있는 고통의 크기 만큼의 자극, 신호가 출력될 수 있도록 출력 데이터를 생성할 수 있다. 이때, 출력 데이터는 상기 총상의 발생 위치와 대응되는 지점에 위치한 정보 출력부가, 상기 총상을 통해 유발될 수 있는 고통의 크기와 비례하는 지속 시간 동안 또는 세기로 움직이도록 생성될 수 있다. 또한, 출력 데이터 생성부(140)는 사용자와 대응되는 제1 대상체에 대한 상기 제2 대상체에 의한 어깨 동무, 간지럼 등과 같은 액션과 대응하여, 상기 액션의 발생 위치 및 상기 액션에 의해 발생할 수 있는 촉각 만큼의 자극, 신호가 출력될 수 있도록 출력 데이터를 생성할 수 있다. The output data generation unit 140 generates output data in consideration of the position damaged by the action and the degree of damage in correspondence with the action of the second object other than the first object with respect to the first object corresponding to the user . For example, in response to an action in which a gun is generated on the chest of the first object by the second object, the output data generator 140 may generate the output image on the basis of the gunshot The output data can be generated so that a stimulus as much as the amount of pain, and a signal can be output. At this time, the output data may be generated so that the information output unit located at a position corresponding to the generation position of the gunshot moves for a duration or intensity proportional to the amount of pain that can be caused through the gunshot. In addition, the output data generation unit 140 generates output data corresponding to a user's first object corresponding to an action such as shoulder comrades, tickling, etc. by the second object, The output data can be generated so that the stimulus and the signal can be output.

출력 데이터 생성부(140)는 사용자와 대응되는 대상체에 대한 변화는 아니지만 주변 환경, 날씨 변화, 온도 변화 등과 같은 액션과 대응하여, 액션의 종류 및 변화량을 고려하여 출력 데이터를 생성할 수 있다. The output data generation unit 140 may generate output data in consideration of the type of action and the amount of change in correspondence with an action such as a surrounding environment, a weather change, a temperature change, etc.,

출력 데이터 생성부(140)는 접근하는 대상체의 움직임과 대응하는 액션과 대응하여, 상기 대상체가 접근하는 방향 및 접근하는 속도를 고려하여 출력 데이터를 생성할 수 있다. 출력 데이터 생성부(140)는 대상체의 접근 방향과 대응되는 지점에 상기 대상체의 접근 속도와 대응되는 크기 만큼의 자극, 신호를 출력하는 출력 데이터를 생성할 수 있다. 예를 들어, 사용자의 등으로 접근하는 대상체와 대응하여, 출력 데이터 생성부(140)는 사용자의 등과 대응되는 지점에 자극, 신호를 출력하도록 하는 출력 데이터를 생성할 수 있다. 이때, 출력 데이터는 대상체의 접근 방향과 대응되는 지점에 위치한 정보 출력부가, 상기 대상체의 접근 속도와 비례하는 지속 시간 동안 또는 세기로 움직이도록 생성될 수 있다.The output data generation unit 140 may generate output data in consideration of the direction in which the object approaches and the approaching speed in correspondence with the action corresponding to the motion of the object to be accessed. The output data generation unit 140 may generate output data for outputting a stimulus signal corresponding to the access speed of the object at a position corresponding to the approach direction of the object. For example, in correspondence with an object to be accessed by the user, etc., the output data generation unit 140 may generate output data for outputting a stimulus signal at a point corresponding to the user's back. At this time, the output data may be generated so that the information output unit located at a position corresponding to the approach direction of the object moves for a duration or intensity proportional to the approach speed of the object.

출력 데이터 생성부(140)는 미리 설정된 임계 속도 이상으로 이동하는 대상체의 움직임과 대응되는 액션과 대응하여, 상기 대상체의 이동 방향 및 이동 속도를 고려하여 출력 데이터를 생성할 수 있다. 출력 데이터 생성부(140)는 제1 지점에서 제2 지점으로 임계 속도인 시속 50Km 이상으로 이동하는 대상체와 대응하여, 상기 제1 지점과 대응되는 지점에서 상기 제2 지점으로 이동하는 방향으로 자극, 신호를 출력하도록 하는 출력 데이터를 생성할 수 있다. The output data generation unit 140 may generate output data in consideration of the moving direction and the moving speed of the object in correspondence with the action corresponding to the motion of the object moving at a predetermined threshold speed or more. The output data generation unit 140 generates a stimulus for moving from the first point to the second point in a direction corresponding to the object moving from the first point to the second point at a speed of 50 km / It is possible to generate output data for outputting a signal.

출력 데이터 생성부(140)는 감지된 센싱 값의 종류 및 변화량을 고려하여, 종류와 대응되는 지점에 변화량과 대응되는 크기 만큼의 자극, 신호를 출력하도록 하는 출력 데이터를 생성할 수 있다. 이때, 출력 데이터는 상기 종류와 대응되는 지점에 위치한 정보 출력부가, 변화량과 비례하는 지속 시간동안 또는 세기로 움직이도록 생성될 수 있다.The output data generation unit 140 may generate output data for outputting a stimulus and a signal corresponding to the magnitude corresponding to the amount of change at the point corresponding to the type in consideration of the type and amount of change in the sensed sensed value. At this time, the output data may be generated so that the information output unit located at a position corresponding to the type moves for a duration or intensity proportional to the amount of change.

변환부(150)는 출력 데이터가 정보 출력 장치(300)가 해석할 수 있는 출력 제어 신호로 변환할 수 있다. 정보 출력 장치(300)가 진동을 통해 정보를 출력하는 경우, 변환부(150)는 출력 데이터와 대응되는 진동이 생성될 수 있도록 출력 제어 신호를 생성할 수 있다. 정보 출력 장치(300)가 신경 또는 세포를 통해 정보를 출력하는 경우, 변환부(150)는 출력 데이터와 대응되는 자극, 감각 등이 생성될 수 있도록 출력 제어 신호를 생성할 수 있다. 변환부(150)는 사용자의 뇌 신경, 뇌 세포로 바로 전달할 수 있는 출력 제어 신호를 생성할 수도 있으며, 다른 감각을 감지할 수 있는 신경 또는 세포로 바로 전달할 수 있는 출력 제어 신호를 생성할 수도 있다. 변환부(150)에 의해 생성되는 출력 제어 신호의 형식, 형태, 포맷은 전달되는 방식, 방법, 알고리즘에 따라 달라지게 된다. The conversion unit 150 may convert the output data into an output control signal that can be interpreted by the information output apparatus 300. When the information output apparatus 300 outputs information through vibration, the conversion unit 150 can generate an output control signal so that the vibration corresponding to the output data can be generated. When the information output apparatus 300 outputs information through a nerve or a cell, the conversion unit 150 may generate an output control signal such that a stimulus, a sensation, etc. corresponding to the output data can be generated. The conversion unit 150 may generate an output control signal that can directly transmit to a user's brain or brain cells and may generate an output control signal that can directly transmit the signal to a nerve or cell capable of sensing another sensation . The format, format, and format of the output control signal generated by the conversion unit 150 depend on the manner, method, and algorithm of the transmission.

또한, 본 발명의 실시예에 따른 데이터 변환 장치(100)는 통신 인터페이스(160)를 더 포함할 수 있다. 통신 인터페이스(160)는 데이터 획득 장치(100) 및/또는 정보 출력 장치(300)와 유무선 연결을 통해 제어 신호 또는 데이터 신호와 같은 신호를 송수신하기 위해 필요한 하드웨어 및 소프트웨어를 포함하는 장치일 수 있다. In addition, the data conversion apparatus 100 according to the embodiment of the present invention may further include a communication interface 160. The communication interface 160 may be a device including hardware and software necessary for transmitting and receiving signals such as a control signal or a data signal through the wired / wireless connection with the data acquisition device 100 and / or the information output device 300.

본 발명의 실시예들에 따른 데이터 변환 장치(100)는 게임 장치, 시뮬레이션 장치를 이용하여 가상 현실을 통해 발생한 액션을 사용자에게 전달할 수 있다. 또한, 데이터 변환 장치(100)는 사용자가 감지하지 못하는 청각, 시각, 후각 등과 같은 감각 정보와 대응되는 액션을 사용자에게 전달할 수 있다. 또한, 본 발명의 실시예들에 따른 데이터 변환 장치(100)는 사용자가 미처 알지 못하는 위험 등을 감지하여 사용자에게 전달할 수도 있다. The data conversion apparatus 100 according to the embodiments of the present invention can transmit an action generated through a virtual reality to a user using a game device and a simulation device. Also, the data conversion apparatus 100 can transmit an action corresponding to sensory information such as auditory, visual, olfactory, etc., which the user can not detect, to the user. In addition, the data conversion apparatus 100 according to the embodiments of the present invention may detect a risk that the user is unknown and transmit the detected risk to the user.

도 3 내지 도 6은 본 발명의 실시예들에 따른 데이터 변환 방법의 흐름도이다. 3 to 6 are flowcharts of a data conversion method according to embodiments of the present invention.

도 3을 참조하면, 본 발명의 실시예들에 따른 데이터 변환 방법은 데이터 수신 단계(S110), 액션 검출 단계(S120), 출력 데이터 생성 단계(S130), 출력 제어 신호 생성 단계(S140)를 포함할 수 있다. Referring to FIG. 3, the data conversion method according to embodiments of the present invention includes a data receiving step S110, an action detecting step S120, an output data generating step S130, and an output control signal generating step S140 can do.

S110에서는 데이터 변환 장치(100)는 데이터 획득 장치(200)로부터 사용자와 대응되는 대상체를 포함하고, 사용자의 입력에 따라 변경되는 영상 신호를 포함하는 데이터를 수신한다. 데이터 획득 장치(200)는 사용자에 의해 입력된 설정 정보에 따라 사용자와 대응되는 대상체를 생성하고, 사용자에 의해 입력된 이벤트(행동, 지시 등)에 따라 상기 대상체의 상태, 행동 등을 제어하고, 상기 대상체를 포함하는 영상 신호를 생성할 수 있다. 데이터 변환 장치(100)는 데이터 획득 장치(200)에 의해 생성된 영상 신호를 수신하게 된다. In step S110, the data conversion apparatus 100 receives data including a video signal including a target object corresponding to a user from the data acquisition apparatus 200 and is changed according to a user's input. The data acquisition device 200 generates an object corresponding to the user according to the setting information input by the user and controls the state, action, and the like of the object according to the event (action, instruction, etc.) input by the user, Thereby generating a video signal including the object. The data conversion apparatus 100 receives the image signal generated by the data acquisition apparatus 200.

S120에서는 데이터 변환 장치(100)는 수신한 상기 데이터에 포함된 영상 신호를 분석하여 상기 대상체의 상태값(레벨, 보유 포인트 등)이 변경되는 제1 액션을 검출한다. 데이터 변환 장치(100)는 영상 신호에 포함된, 사용자와 대응되는 대상체와 관련된 정보를 추출하고, 대상체와 관련된 정보(레벨, 보유 포인트 등)가 현저하게 변경되는 제1 액션을 검출할 수 있다. 이때, 데이터 변환 장치(100)는 영상 신호를 분석하는 알고리즘을 이용하거나 사용자와 관련된 데이터를 이용하여 제1 액션을 검출할 수 있다. In step S120, the data conversion apparatus 100 analyzes a video signal included in the received data to detect a first action in which a status value (level, holding point, etc.) of the object is changed. The data conversion apparatus 100 can extract the information related to the object corresponding to the user included in the video signal and detect the first action in which the information (level, holding point, etc.) related to the object is significantly changed. At this time, the data conversion apparatus 100 may detect a first action using an algorithm for analyzing a video signal or using data related to a user.

S130에서는 데이터 변환 장치(100)는 상기 제1 액션의 종류, 변화량을 고려하여 출력 데이터를 생성한다. 출력 데이터는 제1 액션의 종류 및 변화량을 모두 표현할 수 있는 형태를 가질 수 있다. S140에서는 데이터 변환 장치(100)는 정보 출력 장치(300)가 사용자의 신경, 세포, 혈관 등과 대응되는 위치에 배치된 복수의 정보 출력부를 이용하여 출력 데이터가 전달될 수 있도록 출력 제어 신호를 생성할 수 있다. 데이터 변환 장치(100)는 상기 제1 액션의 종류와 대응되는 지점에 위치한 정보 출력부가 상기 제1 액션의 변화량과 대응되는 정도의 자극, 신호를 발생시킬 수 있도록 출력 제어 신호를 생성할 수 있다. In step S130, the data conversion apparatus 100 generates output data in consideration of the type and amount of change of the first action. The output data may have a form capable of expressing both the kind of the first action and the amount of change. In S140, the data conversion apparatus 100 generates an output control signal so that the output data can be transmitted using the plurality of information output units arranged at positions corresponding to the user's nerves, cells, blood vessels, etc. . The data conversion apparatus 100 may generate an output control signal so that an information output unit located at a position corresponding to the type of the first action can generate a stimulus signal having a degree corresponding to the amount of change of the first action.

이를 통해, 데이터 변환 장치(100)는 수신된 영상 신호에 포함된 사용자와 대응되는 대상체와 관련된 정보를 사용자에게 전달할 수 있으며, 특히 사용자와 대응되는 대상체와 관련된 정보를 사용자의 신경, 세포 등과 같은 촉각을 통해 전달할 수 있다. Accordingly, the data conversion apparatus 100 can transmit information related to the object corresponding to the user included in the received video signal to the user. In particular, the data conversion apparatus 100 can transmit information related to the object corresponding to the user to a tactile sense Lt; / RTI >

도 4를 참조하여, 본 발명의 실시예들에 따른 데이터 변환 장치를 이용하여, 게임, 시뮬레이션 장치를 이용하는 사용자가 상기 게임, 시뮬레이션 장치에 의해 발생된 가상의 액션을 느낄 수 있도록 출력 데이터를 생성하는 실시예를 설명하겠다. Referring to FIG. 4, a data conversion apparatus according to embodiments of the present invention is used to generate output data so that a user using a game or simulation apparatus can feel a virtual action generated by the game or simulation apparatus An embodiment will be described.

S210에서는 데이터 변환 장치(100)는 하나 이상의 사용자와 대응되는 하나 이상의 대상체를 포함하고, 상기 하나 이상의 사용자의 입력에 따라 유기적으로 변경되는 대상체를 포함하는 영상 신호를 포함하는 데이터를 수신할 수 있다. In S210, the data conversion apparatus 100 may include one or more objects corresponding to one or more users, and may receive data including an image signal including an object that is organically changed according to an input of the one or more users.

S220에서는 데이터 변환 장치(100)는 상기 영상 신호를 분석하여 상기 대상체의 상태가 변경되는 제2 액션을 검출할 수 있다. 데이터 변환 장치(100)는 상기 영상 신호에 포함된 제1 대상체 및 상기 제1 대상체 이외의 다른 제2 대상체 사이의 행동, 행위 등을 제2 액션으로 검출할 수 있다. 특히, 데이터 변환 장치(100)는 사용자와 대응되는 제1 대상체가 훼손, 부상, 죽음 등과 같은 변화를 추출하고, 상기 추출한 변화를 제2 액션으로 검출할 수 있다. In S220, the data conversion apparatus 100 may detect a second action in which the state of the object is changed by analyzing the video signal. The data conversion apparatus 100 can detect a behavior, an action, and the like between the first object included in the video signal and the second object other than the first object as a second action. In particular, the data conversion apparatus 100 can extract changes such as damage, injuries, death, etc. of the first object corresponding to the user and detect the extracted change as the second action.

S230에서는 데이터 변환 장치(100)는 상기 제2 액션의 발생 위치, 훼손 정도를 고려하여 출력 데이터를 생성할 수 있다. 데이터 변환 장치(100)는 상기 제2 액션의 실제 고통의 정도를 고려하여 출력 데이터를 생성할 수 있다. 예를 들어, 제2 대상체에 의해 제1 대상체의 배 부분에 칼에 의한 절상의 액션을 추출한 경우, 데이터 변환 장치(100)는 상기 절상의 발생 위치, 훼손 정도를 고려하여 상기 절상과 유사한 자극을 느낄 수 있는 출력 데이터를 생성할 수 있다. 또는 데이터 변환 장치(100)는 영상 신호에 포함된 대상체에 대한 훼손의 발생(위치, 발생 유무 등)을 알 수 있도록 하는 출력 데이터를 생성할 수 있다. 좀더 구체적으로는 데이터 변환 장치(100)는 상기 제2 액션의 발생 위치와 대응되는 지점에 상기 제2 액션의 훼손 정도 만큼의 자극, 신호를 전달하는 출력 데이터를 생성할 수 있다. In S230, the data conversion apparatus 100 may generate the output data in consideration of the generation position and the degree of damage of the second action. The data conversion apparatus 100 may generate output data in consideration of the degree of actual pain of the second action. For example, in the case where the second object performs a pull-over action by a knife in a double portion of the first object, the data conversion apparatus 100 calculates a stimulus similar to the pull-up in consideration of the occurrence position and the degree of damage It is possible to generate output data that can be sensed. Alternatively, the data conversion apparatus 100 may generate output data that allows the occurrence of damage (location, occurrence, etc.) of the object included in the image signal to be known. More specifically, the data conversion apparatus 100 may generate output data for transmitting a stimulus signal corresponding to a degree of damage of the second action at a position corresponding to the generation position of the second action.

S240에서는 데이터 변환 장치(100)는 상기 출력 데이터와 대응되는 출력 제어 신호를 생성할 수 있다. 데이터 변환 장치(100)는 상기 정보 출력 장치(300)를 구동할 수 있는 출력 제어 신호를 생성하며, 정보 출력 장치(300)에 포함된 하나 이상의 정보 출력부를 각각 구동할 수 있는 하나 이상의 출력 제어 신호를 각각 생성할 수도 있다. In S240, the data conversion apparatus 100 may generate an output control signal corresponding to the output data. The data conversion apparatus 100 generates an output control signal capable of driving the information output apparatus 300 and outputs one or more output control signals that can drive one or more information output units included in the information output apparatus 300, Respectively.

본 발명의 실시예들에 따른 데이터 변환 장치는 사용자의 주변 또는 소정의 장소를 감시하기 위해 배치된 하나 이상의 센싱부를 통해 획득된 액션을 사용자에게 전달하는 실시예를 도 5 내지 도 6를 이용하여 설명하겠다. The data conversion apparatus according to the embodiments of the present invention transmits an action obtained through at least one sensing unit arranged to monitor a user's surroundings or a predetermined place to a user using a description of Figs. 5 to 6 would.

도 5에 도시된 바와 같이, S310에서는 데이터 변환 장치(100)는 사용자의 주변 또는 소정의 장소에 위치한 하나 이상의 센서로부터 하나 이상의 소스 신호를 포함하는 데이터를 수신할 수 있다. 여기서, 소스 신호는 온도, 습도, 가스, 근접, 가속도 센서 등으로부터 획득된 센싱 값을 포함할 수 있다. As shown in FIG. 5, in S310, the data conversion apparatus 100 may receive data including one or more source signals from one or more sensors located at a user's surroundings or a predetermined place. Here, the source signal may include a sensing value obtained from temperature, humidity, gas, proximity, acceleration sensor and the like.

S320에서는 데이터 변환 장치(100)는 상기 데이터에 포함된 하나 이상의 소스 신호로부터 접근하는 대상체의 움직임을 제3 액션으로 검출할 수 있다. 데이터 변환 장치(100)는 근접 센서에 의해 획득된 소스 신호로부터 접근하는 대상체의 움직임을 추출하고, 상기 대상체의 움직임을 제3 액션으로 검출할 수 있다. 또한, 데이터 변환 장치(100)는 이미지 센서에 의해 획득된 소스 신호로부터 접근하는 대상체의 움직임을 추출하고, 상기 대상체의 움직임을 제3 액션으로 검출할 수 있다. In step S320, the data conversion apparatus 100 may detect, as a third action, a motion of an object to be accessed from one or more source signals included in the data. The data conversion apparatus 100 can extract the motion of the object to be accessed from the source signal acquired by the proximity sensor and detect the motion of the object as the third action. In addition, the data conversion apparatus 100 can extract the motion of the object to be accessed from the source signal acquired by the image sensor, and detect the motion of the object as the third action.

S330에서는 데이터 변환 장치(100)는 상기 제3 액션과 대응되는 출력 데이터를 생성할 수 있다. 데이터 변환 장치(100)는 상기 대상체의 위치 및 이동 속도를 고려하여 출력 데이터를 생성할 수 있다. 데이터 변환 장치(100)는 상기 대상체의 위치와 대응되는 지점에 상기 대상체의 이동 속도와 대응되는 크기의 자극, 신호를 전달하는 출력 데이터를 생성할 수 있다. 이때, 출력 데이터는 상기 대상체의 위치와 대응되는 지점에 위치한 정보 출력부가, 상기 대상체의 이동 속도와 비례하는 지속 시간동안 또는 세기로 움직이도록 생성될 수 있다. S340에서는 데이터 변환 장치(100)는 상기 출력 데이터와 대응되는 출력 제어 신호를 생성할 수 있다. In S330, the data conversion apparatus 100 may generate output data corresponding to the third action. The data conversion apparatus 100 may generate output data in consideration of the position and the moving speed of the object. The data conversion apparatus 100 may generate output data for transmitting a stimulus signal having a size corresponding to the moving speed of the object at a position corresponding to the position of the object. At this time, the output data may be generated so that the information output unit located at a position corresponding to the position of the object moves for a duration or intensity proportional to the moving speed of the object. In S340, the data conversion apparatus 100 may generate an output control signal corresponding to the output data.

도 6에 도시된 바와 같이 S410에서는 데이터 변환 장치(100)는 사용자의 주변 또는 소정의 장소에 위치한 하나 이상의 센서로부터 하나 이상의 소스 신호를 포함하는 데이터를 수신할 수 있다. S420에서는 데이터 변환 장치(100)는 상기 데이터에 포함된 하나 이상의 소스 신호로부터 소정의 임계 속도 이상의 속도로 이동하는 대상체를 제4 액션으로 추출할 수 있다. S430에서는 데이터 변환 장치(100)는 상기 대상체의 위치 및 이동 속도를 고려하여 출력 데이터를 생성할 수 있다. S440에서는 데이터 변환 장치(100)는 상기 대상체의 움직임을 전달하는 출력 데이터와 대응되는 출력 제어 신호를 생성할 수 있다. As shown in FIG. 6, at S410, the data conversion apparatus 100 may receive data including one or more source signals from one or more sensors located at a user's surroundings or at a predetermined location. In operation S420, the data conversion apparatus 100 may extract, from the one or more source signals included in the data, a target moving at a speed equal to or greater than a predetermined threshold speed as a fourth action. In S430, the data conversion apparatus 100 may generate output data in consideration of the position and the moving speed of the object. In operation S440, the data conversion apparatus 100 may generate an output control signal corresponding to the output data for transmitting the motion of the object.

도 7은 정보 출력 장치(300)의 일 예를 나타내는 도면이다. 7 is a diagram showing an example of the information output apparatus 300. FIG.

본 발명의 실시예들에 따른 정보 출력 장치(300)는 복수의 정보 출력부(301, 302, …)를 포함하고, 사용자가 입을 수 있는 형태를 가질 수 있다. The information output apparatus 300 according to the embodiments of the present invention includes a plurality of information output units 301, 302, ..., and may have a form that the user can wear.

정보 출력 장치(300)는, 표현 면이 사용자에게 대향되게 위치하도록 구비될 수 있다. 따라서, 표현 면에 현출되는 상기 정보 출력부(301, 302, …)의 선택적 출입에 의한 돌출 신호는 사용자에게 직접적이고 국부적인 타격으로 인식될 수 있고, 사용자는 정보 출력부(301, 302, …)에 의해 타격을 받은 위치에서의 직접적인 진동을 받을 수 있다. 이러한 직접적이고 국부적인 타격에 의해 형성된 돌출 신호는 휴대용 전자 기기의 일반적인 진동 신호와는 달리 타겟 주위에 잔진동이 발생되도록 하지 않기 때문에 사용자에게 정확한 신호를 전달할 수 있다. 따라서, 상기와 같은 돌출 신호에 의해 점자와 같이 촉각을 통해 취득되는 신호를 구현할 수 있다. 이외에도 군사 신호, 그립 신호, 부호 신호, 방향 신호 등 다양한 신호를 정확하게 구현할 수 있다. 여기서, 표현 면은 사용자와 대향되게 위치하는데 즉 도 7의 정보 출력 장치(300)에서는 외부가 아닌 내부에 존재할 수 있다. The information output apparatus 300 may be provided so that the expression surface is located opposite to the user. Therefore, the protruding signal generated by the selective access of the information output units 301, 302, ... emerging on the expression surface can be recognized as a direct and local hit to the user, and the user can easily recognize the information output units 301, 302, ... ) Can be subjected to direct vibration at the location of the blow. Unlike a general vibration signal of a portable electronic device, such a protruding signal formed by direct and local blowing can transmit an accurate signal to a user because it does not cause a residual vibration around the target. Therefore, a signal obtained through a tactile sense such as braille can be implemented by the above-mentioned protruding signal. In addition, various signals such as military signals, grip signals, sign signals, and direction signals can be accurately implemented. Here, the expression plane is located opposite to the user, that is, in the information output apparatus 300 of FIG. 7, it may exist inside rather than outside.

정보 출력 장치(300)에 포함된 복수의 정보 출력부(301, 302, …)는 일정한 간격으로 배치될 수 있으며, 사용자의 피부, 신체에 포함된 신경, 혈관, 세포 등과 대응되는 지점, 위치에 배치될 수도 있다. 복수의 정보 출력부(301, 302, …)는 진동, 상하 운동, 좌우 운동 등을 통해 소정의 자극을 사용자에게 전달할 수도 있고, 사용자의 신경, 세포를 통해 정보를 제공할 수 있는 화학 물질, 파동 등을 통해 사용자에게 정보를 전달할 수 있다. 복수의 정보 출력부(301, 302)는 자극하는 지점을 통해 데이터를 사용자에게 전달하거나, 자극하는 정도(움직이는 방향, 움직이는 시점, 지속 시간 등)를 통해 데이터를 사용자에게 전달할 수 있다. 출력 제어 신호는 각 정보 출력부(301, 302, …)를 구동하기 위해 생성되기도 하며, 복수의 정보 출력부들(301, 302)을 모두 구동하기 위해 생성되기도 한다. The plurality of information output units 301, 302, ... included in the information output apparatus 300 may be disposed at regular intervals and may be disposed at positions corresponding to the nerves, blood vessels, cells, etc. included in the user's skin, . The plurality of information output units 301, 302, ... can transmit a predetermined stimulus to a user through vibration, up / down motion, left / right motion, etc., and can transmit information through a user's nerves, And the like. The plurality of information output units 301 and 302 can transmit data to a user through a stimulating point or transmit data to a user through a degree of stimulation (moving direction, moving time, duration, etc.). The output control signal may be generated to drive each of the information output units 301, 302, ..., and may be generated to drive all of the plurality of information output units 301 and 302.

도 8 내지 도 9는 데이터 획득 장치(200)에 의해 생성된 영상 신호의 일 예이다. 8 to 9 show an example of a video signal generated by the data acquiring apparatus 200. FIG.

도 8에 도시된 바와 같이, 영상 신호(D1)에 포함된 제1 사용자와 대응되는 제1 대상체(object 1) 및 제2 사용자와 대응되는 제2 대상체(object 2) 사이의 제1 액션(A1)과 대응하여, 데이터 변환 장치(100)는 상기 제1 액션(A1)의 발생 위치 및 훼손 정도를 고려한 출력 데이터를 생성할 수 있다. 제1 액션(A1)의 시작 위치(X1), 종료 위치(X2)를 연결하는 궤적과 대응하여 상기 제1 액션(A1)과 대응되는 출력 데이터가 생성된다. 즉, 제1 액션(A1)과 대응되는 출력 데이터는 사용자의 신체 부위 중 시작 위치(X1), 종료 위치(X2)와 대응되는 지점 사이에 상기 제1 액션(A1)을 통해 발생될 수 있는 고통과 비례하는 정도의 자극, 신호가 전달될 수 있다. 또한, 이때, 출력 데이터는 상기 제1 액션(A1)의 훼손 정도 만큼의 자극, 신호 등이 전달될 수 있도록 생성된다. 8, a first action (A1) between a first object (object 1) corresponding to a first user included in the video signal D1 and a second object (object 2) corresponding to a second user, , The data conversion apparatus 100 can generate output data in consideration of the generation position and the degree of damage of the first action A1. The output data corresponding to the first action A1 is generated corresponding to the locus connecting the start position X1 and end position X2 of the first action A1. In other words, the output data corresponding to the first action A1 is a pain that can be generated through the first action A1 between the start position X1 and the end position X2 of the user ' A signal proportional to the stimulus signal can be transmitted. At this time, the output data is generated so that a stimulus, a signal, and the like corresponding to the degree of damage of the first action A1 can be transmitted.

도 9에 도시된 바와 같이 데이터 변환 장치(100)는 영상 신호(D2)에 포함된 제3 사용자와 대응되는 제3 대상체(object 3)에 의한 제2 액션(A2)를 추출하고, 상기 제2 액션과 대응되는 출력 데이터를 생성할 수 있다. 제2 액션(A2)과 대응되는 출력 데이터는 상기 제2 액션(A2)의 발생 위치 및 상기 제2 액션에 의해 발생되는 자극, 고통의 정도를 고려하여 생성될 수 있다. As shown in FIG. 9, the data conversion apparatus 100 extracts a second action A2 by a third object (object 3) corresponding to a third user included in the video signal D2, The output data corresponding to the action can be generated. The output data corresponding to the second action A2 can be generated in consideration of the generation position of the second action A2 and the degree of the stimulus and pain generated by the second action.

본 발명의 실시예들에 따른 데이터 변환 장치(100)는 사용자와 대응되는 대상체가 게임, 시뮬레이션 장치에 의해 생성된 가상 현실에서 경험하는 자극을 상기 사용자에게 직접 전달될 수 있도록 한다. 이를 통해, 본 발명의 실시예들에 따른 데이터 변환 장치(100)는 가상 현실에서의 경험을 시청각 데이터 이외의 출력 데이터로 사용자에게 전달할 수 있다. The data conversion apparatus 100 according to the embodiments of the present invention allows the user to directly receive stimulus experienced by a user in a virtual reality generated by a game or simulation apparatus. Accordingly, the data conversion apparatus 100 according to the embodiments of the present invention can transmit the experience in the virtual reality to the user as output data other than audiovisual data.

도 10은 정보 출력 장치(300)의 외관을 개략적으로 설명하기 위하여 도시한 도면이다.10 is a view for schematically explaining the appearance of the information output apparatus 300. As shown in FIG.

정보 출력 장치(300)는 표현 면에 사용자에 대향되게 위치하도록 구비되는 돌기들(30n)를 포함할 수 있다. 따라서, 표현 면에 현출되는 상기 돌기들(30n)의 선택적 출입에 의한 돌출 신호는 사용자에게 직접적이고 국부적인 타격으로 인식될 수 있고, 사용자는 돌기들(30n)에 의해 타격을 받은 위치에서의 직접적인 진동을 받을 수 있다. 이러한 직접적이고 국부적인 타격에 의해 형성된 돌출 신호는 휴대용 전자 기기의 일반적인 진동 신호와는 달리 타겟 주위에 잔진동이 발생되도록 하지 않기 때문에 사용자에게 정확한 신호를 전달할 수 있다. 따라서, 상기와 같은 돌출 신호에 의해 점자와 같이 촉각을 통해 취득되는 신호를 구현할 수 있고, 그 외에도 군사 신호, 그림 신호, 부호 신호, 방향 신호 등 다양한 신호를 정확하게 구현할 수 있다. 즉, 도 10에 도시된 정보 출력 장치(300)의 표현 면은 사용자의 피부와 접촉할 수 있도록 위치한다. The information output apparatus 300 may include protrusions 30n provided to face the user on the expression surface. Therefore, the protruding signal generated by the selective access of the protrusions 30n to the expression surface can be recognized as a direct and local hit to the user, and the user can directly recognize the position of the protrusion 30n at the position hit by the protrusions 30n Vibration can be received. Unlike a general vibration signal of a portable electronic device, such a protruding signal formed by direct and local blowing can transmit an accurate signal to a user because it does not cause a residual vibration around the target. Accordingly, signals obtained through the tactile sense, such as braille, can be implemented by the protruding signals as described above, and various signals such as military signals, picture signals, sign signals, and direction signals can be accurately implemented. That is, the expression surface of the information output apparatus 300 shown in FIG. 10 is positioned so as to be in contact with the user's skin.

도 10a를 참조하면, 돌기들(30n)를 포함하는 독립적인 정보 출력 장치(300)의 외관을 도시하고 있으며, 시계줄을 포함하는 스마트 시계 형식으로 구현되어 있다. 스마트 시계로 구현된 정보 출력 장치(300) 내부에는 출력 제어부가 더 구비되어 있다. 이러한 정보 출력 장치(300)는 돌기(301)의 직선운동에 의해 출력 데이터를 표시하는 브레일 디스플레이 기기 일 수 있다. 도 10a에 도시된 쇼핑 정보 출력 장치(300)는 사용자가 손으로 직접 돌기(30n)를 접촉하여 객체 정보와 대응되는 출력 데이터를 인식할 수 있다. 추가적으로, 정보 출력 장치(300)는 진동모터를 포함할 수 있다. Referring to FIG. 10A, the appearance of the independent information output apparatus 300 including the protrusions 30n is shown and implemented in a smart clock format including a wrist strap. The information output apparatus 300 implemented as a smart clock further includes an output control unit. The information output device 300 may be a blind display device that displays output data by linear movement of the projection 301. [ The shopping information output apparatus 300 shown in FIG. 10A can recognize the output data corresponding to the object information by touching the protrusion 30n directly by the user. In addition, the information output apparatus 300 may include a vibration motor.

도 10b를 참조하면, 스마트 폰과 연동되는 스마트 시계로써의 사용자 단말기(T1)와 돌기들(30n)을 포함하는 정보 출력 장치(300)가 결합된 외관을 도시하고 있다. 도 10b의 경우 스마트 시계의 상부는 유기 발광 디스플레이 유닛, 무기 발광 디스플레이 유닛 또는 액정 디스플레이 유닛 중 하나로 구현되어 있고, 스마트 시계의 하부는 정보 출력 장치(300)의 돌기(30n)가 구현될 수 있음을 도시하고 있다. 도 10b에 도시된 정보 출력 장치(300)와 결합된 스마트 시계로써의 사용자 단말기(T1)의 경우 사용자가 스마트 시계를 착용한 신체의 일부분이 돌기(30n)의 직선운동을 감지하여 검출된 액션과 대응되는 출력 데이터를 인식할 수 있다. 추가적으로, 정보 출력 장치(300)는 진동모터를 포함할 수 있다.Referring to FIG. 10B, there is shown an external view of a smart watch interlocked with a smart phone, in which a user terminal T1 and an information output device 300 including protrusions 30n are combined. 10B, the upper part of the smart watch is implemented as one of the organic light emitting display unit, the inorganic light emitting display unit or the liquid crystal display unit, and the lower part of the smart clock can be implemented as the projection 30n of the information output apparatus 300 Respectively. In the case of the user terminal T1 as the smart watch combined with the information output apparatus 300 shown in FIG. 10B, a part of the user wearing the smart watch senses the linear motion of the projection 30n, The corresponding output data can be recognized. In addition, the information output apparatus 300 may include a vibration motor.

도 10c를 참조하면, 스마트 폰과 연동되는 스마트 시계로써의 사용자 단말기(T1)와 돌기들(151)을 포함하는 정보 출력 장치(300)가 결합된 외관을 도시하고 있다. 도 10c의 경우 스마트 시계의 상부에 디스플레이 유닛과 정보 출력 장치(300)의 돌기(30n)가 구현될 수 있음을 도시하고 있다. 도 4c에 도시된 정보 출력 장치(300)와 결합된 스마트 시계로써의 사용자 단말기(T1)의 경우 사용자가 손으로 직접 돌기(301)를 접촉하여 검출된 액션과 대응되는 출력 데이터를 인식할 수 있다. 추가적으로, 정보 출력 장치(300)는 진동모터를 포함할 수 있다.Referring to FIG. 10C, the user terminal T1 as a smart watch interlocked with a smartphone and the information output apparatus 300 including the protrusions 151 are shown. In Fig. 10C, the display unit and the projection 30n of the information output apparatus 300 can be implemented on the upper part of the smart clock. In the case of the user terminal T1 as the smart watch combined with the information output apparatus 300 shown in FIG. 4C, the user can touch the protrusion 301 by hand and recognize the output data corresponding to the detected action . In addition, the information output apparatus 300 may include a vibration motor.

도 10d를 참조하면, 스마트 폰으로써의 사용자 단말기(T1)와 돌기들(30n)을 포함하는 정보 출력 장치(300)가 결합된 외관을 도시하고 있다. 추가적으로, 정보 출력 장치(300)는 진동모터를 포함할 수 있다.Referring to FIG. 10D, there is shown an external view of a user terminal T1 as a smartphone and an information output apparatus 300 including the protrusions 30n. In addition, the information output apparatus 300 may include a vibration motor.

도 11은 정보 출력 장치(300)의 상세 구성을 개략적으로 설명하기 위하여 도시한 도면이다. 11 is a schematic diagram for explaining the detailed configuration of the information output apparatus 300. As shown in FIG.

도 11a를 참조하면, 정보 출력 장치(300)는 다른 장치로부터 신호, 데이터 등을 수신하는 입력부(310) 및 입력된 신호에 기초하여, 진동부 또는 돌기를 통해 데이터를 출력하는 출력부(320)를 포함할 수 있다. 11A, the information output apparatus 300 includes an input unit 310 for receiving signals, data, and the like from another apparatus, an output unit 320 for outputting data through a vibration unit or a projection based on the input signal, . &Lt; / RTI >

도 11b를 참조하면, 출력부(320)는 복수개의 돌기(321), 복수개의 구동부(322) 및 돌기 제어부(323)을 포함할 수 있다. 여기서 복수개의 돌기(321)는 예를 들어, 가로 8열 세로 3행의 총 24개를 포함할 수 있고, 복수개의 구동부(322)는 24개의 돌기(321) 각각에 연결된 총 24개를 포함할 수 있다. 복수개의 돌기(321) 각각은 복수개의 구동부(322) 각각과 전기적으로 연결되어 있고, 복수개의 구동부(322) 각각은 돌기 제어부(323)로부터 구동 제어신호를 수신 받아 선택된 하나 이상의 돌기(321)를 직선 운동시킬 수 있다. 여기선 선택된 돌기는 선택되지 않은 돌기 보다 더 상승되는 위치로 직선 이동될 수 있다. 돌기 제어부(323)는 입력부(310)로부터 수신한 신호, 데이터 등에 대응하는 구동 제어신호 즉, 사전에 약속된 돌기 선택신호, 돌기 돌출 시간, 돌기 돌출 주기 중 하나 이상을 생성하여 구동부(322)로 출력하고 구동 제어 신호를 수신한 하나 이상의 구동부(322)는 해당 돌기(321)를 직선운동 시킬 수 있다. 이로부터 정보 출력 장치(300)를 구비한 사용자는 돌기(321)의 직선운동으로 객체가 설명하고자 하는 제1 인식정보를 인식할 수 있게 된다.Referring to FIG. 11B, the output unit 320 may include a plurality of protrusions 321, a plurality of driving units 322, and a protrusion control unit 323. Here, the plurality of projections 321 may include, for example, a total of 24 columns of 8 rows and 3 columns, and the plurality of the drive units 322 may include 24 columns connected to each of the 24 projections 321 . Each of the plurality of projections 321 is electrically connected to each of the plurality of the driving units 322. Each of the plurality of the driving units 322 receives the driving control signal from the projection control unit 323, It is possible to perform linear motion. Here, the selected protrusion can be moved linearly to a position that is higher than the unselected protrusion. The protrusion control unit 323 generates at least one of a drive control signal corresponding to the signal, data, and the like received from the input unit 310, that is, a previously selected protrusion selection signal, protrusion protrusion time and protrusion protrusion cycle, And the at least one driving unit 322 receiving the driving control signal can linearly move the corresponding protrusion 321. The user having the information output apparatus 300 can recognize the first recognition information to be described by the object by the linear movement of the protrusion 321. [

도 11c를 참조하면, 출력부(320)에 포함되는 복수개의 돌기(321) 각각이 하나의 구동부(322)와 전기적으로 연결되어 있고, 구동부(322)는 돌기 제어부(323)로부터 구동 제어신호를 수신 받아 선택된 하나 이상의 돌기(321)를 직선 운동시킬 수 있다. 11C, each of the plurality of projections 321 included in the output unit 320 is electrically connected to one driving unit 322, and the driving unit 322 receives a driving control signal from the projection control unit 323 The at least one protrusion 321 received and selected may be linearly moved.

도 11d를 참조하면, 출력부(320)에 포함되는 복수개의 돌기(321) 중 일부의 돌기(321) 각각이 복수개의 구동부(322) 중 어느 한 구동부(322)에 전기적으로 연결되어 있고, 각 구동부(322)는 돌기 제어부(323)로부터 구동 제어신호를 수신 받아 선택된 하나 이상의 돌기(321)를 직선 운동시킬 수 있다.Referring to FIG. 11D, the protrusions 321 of a plurality of protrusions 321 included in the output unit 320 are electrically connected to any one of the plurality of the drivers 322, The driving unit 322 receives the driving control signal from the protrusion control unit 323 and can linearly move the selected one or more protrusions 321.

이상 설명된 본 발명에 따른 실시예는 컴퓨터 상에서 다양한 구성요소를 통하여 실행될 수 있는 컴퓨터 프로그램의 형태로 구현될 수 있으며, 이와 같은 컴퓨터 프로그램은 컴퓨터로 판독 가능한 매체에 기록될 수 있다. 이때, 매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치를 포함할 수 있다. The embodiments of the present invention described above can be embodied in the form of a computer program that can be executed on various components on a computer, and the computer program can be recorded on a computer-readable medium. At this time, the medium may be a magnetic medium such as a hard disk, a floppy disk and a magnetic tape, an optical recording medium such as CD-ROM and DVD, a magneto-optical medium such as a floptical disk, , A RAM, a flash memory, and the like, which are specifically configured to store and execute program instructions.

한편, 상기 컴퓨터 프로그램은 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 프로그램의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함될 수 있다.Meanwhile, the computer program may be designed and configured specifically for the present invention or may be known and used by those skilled in the computer software field. Examples of computer programs may include machine language code such as those produced by a compiler, as well as high-level language code that may be executed by a computer using an interpreter or the like.

본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.The specific acts described in the present invention are, by way of example, not intended to limit the scope of the invention in any way. For brevity of description, descriptions of conventional electronic configurations, control systems, software, and other functional aspects of such systems may be omitted. Also, the connections or connecting members of the lines between the components shown in the figures are illustrative of functional connections and / or physical or circuit connections, which may be replaced or additionally provided by a variety of functional connections, physical Connection, or circuit connections. Also, unless explicitly mentioned, such as " essential ", " importantly ", etc., it may not be a necessary component for application of the present invention.

본 발명의 명세서(특히 특허청구범위에서)에서 “상기”의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.The use of the terms " above " and similar indication words in the specification of the present invention (particularly in the claims) may refer to both singular and plural. In addition, in the present invention, when a range is described, it includes the invention to which the individual values belonging to the above range are applied (unless there is contradiction thereto), and each individual value constituting the above range is described in the detailed description of the invention The same. Finally, the steps may be performed in any suitable order, unless explicitly stated or contrary to the description of the steps constituting the method according to the invention. The present invention is not necessarily limited to the order of description of the above steps. The use of all examples or exemplary language (e.g., etc.) in this invention is for the purpose of describing the invention in detail and is not to be construed as a limitation on the scope of the invention, It is not. It will also be appreciated by those skilled in the art that various modifications, combinations, and alterations may be made depending on design criteria and factors within the scope of the appended claims or equivalents thereof.

100: 데이터 변환 장치
200: 데이터 획득 장치
300: 정보 출력 장치100: Data conversion device
200: data acquisition device
300: Information output device

Claims

And is electrically connected to and driven by the first device,
A data receiving unit for receiving data related to a user from the first apparatus;
An extracting unit for extracting one or more source signals included in data received from the first apparatus;
An action detection unit for analyzing the one or more source signals to detect a first action included in the one or more source signals;
An output data generation unit for generating output data corresponding to the first action; And
And a conversion unit that converts the output data into an output control signal that is included in the second apparatus and is arranged at regular intervals to drive at least one information output unit that delivers data to the user,
The output data generation unit
Generating output data for generating a stimulus for a point corresponding to a motion of the object when a first action corresponding to a motion of the object to be accessed from the at least one source signal is detected by the action detection unit,
When the first action corresponding to the movement of the object moving from the one or more source signals at a predetermined threshold speed or more is detected by the action detection unit, a position corresponding to the position of the target object, And generates output data for generating a stimulus of a magnitude of < RTI ID = 0.0 >
And at least one projection adjacent to the skin of the user and disposed at a position corresponding to at least one of the nerves and blood vessels of the user,
Receiving an output control signal from the data conversion device,
One or more protrusions located at a selected position corresponding to a position of the object are linearly moved to a position higher than the remaining protrusions among the at least one protrusions corresponding to the output control signal, 1 < / RTI > action and a corresponding stimulus is delivered.

The method according to claim 1,
If the one or more source signals comprise video signals,
The action detection unit
Extracting a target object corresponding to a user from the video signal, detecting a first action for changing a state value of the target object,
The output data generation unit
And generates output data in consideration of the type and the amount of change of the first action.

The method according to claim 1,
If the one or more source signals comprise video signals,
The action detection unit
Extracting a first object corresponding to a user and a second object different from the first object from the video signal and detecting a first action for changing a state of the first object by the second object,
The output data generation unit
And generates output data in consideration of the position and the strength of the first action.

The method according to claim 1,
If the one or more source signals comprise video signals,
The action detection unit
Detecting a first action corresponding to a change in a surrounding environment of a target object corresponding to a user from the video signal,
The output data generation unit
And generates output data corresponding to the first action.

3. The method of claim 2,
The output data generation unit
And generates output data for generating a stimulus of a size corresponding to a change amount of a state value changed by the first action at a position corresponding to a type of the state value changed by the first action.

The method of claim 3,
The output data generation unit
And generates output data for generating a stimulus having a magnitude corresponding to the magnitude of the first action at a position corresponding to a position at which the first action occurs.

delete

The method according to claim 1,
The action detection unit
Detecting a first action by comparing each of the one or more source signals with one or more source signals obtained before a predetermined time,
The output data generation unit
And generates output data corresponding to the first action.

10. The method of claim 9,
The output data generation unit
And further generates output data corresponding to a subsequent action stored in correspondence with the first action.

delete