KR20180125637A - Device or system for deciding modality or output of content on basis of posture of user or change in posture, method for deciding modality or output of content provided by user device, and computer-readable recording medium for recording computer program for executing the method - Google Patents
Device or system for deciding modality or output of content on basis of posture of user or change in posture, method for deciding modality or output of content provided by user device, and computer-readable recording medium for recording computer program for executing the method Download PDFInfo
- Publication number
- KR20180125637A KR20180125637A KR1020187033357A KR20187033357A KR20180125637A KR 20180125637 A KR20180125637 A KR 20180125637A KR 1020187033357 A KR1020187033357 A KR 1020187033357A KR 20187033357 A KR20187033357 A KR 20187033357A KR 20180125637 A KR20180125637 A KR 20180125637A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- user device
- content
- information
- attitude
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
본 발명은 사용자의 자세나 자세의 변화에 기초하여 컨텐츠의 모덜리티(modality)나 출력을 결정하기 위한 장치 내지 시스템, 사용자 장치에 의하여 제공되는 컨텐츠의 모덜리티나 출력을 결정하는 방법, 그리고 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체에 관한 것이다.
본 발명의 일 태양에 따르면, 사용자 장치의 움직임 데이터에 기초하여 그 사용자의 자세나 자세 변화에 관한 정보를 도출하는 단계 - 상기 움직임 데이터는 상기 사용자 장치에 포함되는 센서에 의하여 시간의 흐름에 따라 기록되는 것임 - , 및 상기 도출된 정보에 기초하여, 상기 사용자 장치에 의하여 제공되는 컨텐츠의 모덜리티나 출력을 결정하는 단계를 포함하는 방법이 제공된다.The present invention relates to an apparatus or system for determining a modality or an output of a content based on a change in posture or posture of a user, a method for determining a modality or an output of content provided by a user apparatus, The present invention relates to a computer-readable recording medium storing a computer program for executing a computer program for executing a program.
According to one aspect of the present invention, there is provided a method for recording information on a user, comprising: deriving information about a user's attitude or attitude change based on motion data of a user device, the motion data being recorded And determining, based on the derived information, a modality or output of the content provided by the user device.
Description
본 발명은 사용자의 자세나 자세의 변화에 기초하여 컨텐츠의 모덜리티(modality)나 출력을 결정하기 위한 장치 내지 시스템, 사용자 장치에 의하여 제공되는 컨텐츠의 모덜리티나 출력을 결정하는 방법, 그리고 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체에 관한 것이다.The present invention relates to an apparatus or system for determining a modality or an output of a content based on a change in posture or posture of a user, a method for determining a modality or an output of content provided by a user apparatus, The present invention relates to a computer-readable recording medium storing a computer program for executing a computer program for executing a program.
근래에 들어, 사용자가 착용하거나 신체 가까운 곳에 붙여 두고 사용할 수 있는 웨어러블 장치가 광범위하게 보급되고 있다. 이러한 웨어러블 장치는 그 사용자나 주변 사람에게 직접적으로 컨텐츠를 제공하거나, 다른 연관 장치로부터 컨텐츠를 전달 받아서 제공한다.2. Description of the Related Art In recent years, a wearable device that can be worn by a user or attached to a nearby body has been widely used. Such a wearable device provides contents directly to the user or a nearby person, or receives contents from other related devices and provides the contents.
웨어러블 장치가 기존의 1세대 스마트 장치와 대비하여 볼 때에 차별화되는 점은 바로, 그 사용자의 동작이나 자세와 밀접하게 연관된 물리 값을 가질 수 있다는 것이다. 따라서, 웨어러블 장치가 컨텐츠를 제공할 때에 위와 같은 물리 값에 따라 컨텐츠의 모덜리티나 출력을 적응적으로 결정하는 것이 가능할 수 있고, 또한 이것은 유용할 수 있다.What distinguishes a wearable device from an existing first-generation smart device is that it can have physical values closely related to its behavior and attitude. Therefore, when the wearable device provides the content, it may be possible to adaptively determine the modality or output of the content according to the physical value as described above, and this may also be useful.
본 발명자는 이에 착안하여 사용자의 자세나 자세의 변화에 기초하여 컨텐츠의 모덜리티나 출력을 결정하기 위한 장치 내지는 이와 연관된 기술을 제안하는 바이다.The inventor of the present invention has proposed an apparatus or a related art for determining a modality or an output of a content on the basis of a change in posture or posture of a user.
본 발명은 전술한 종래 기술의 문제점을 모두 해결하는 것을 그 목적으로 한다.SUMMARY OF THE INVENTION The present invention has been made to solve all the problems of the prior art described above.
본 발명은 사용자의 자세나 자세의 변화에 기초하여 컨텐츠의 모덜리티나 출력이 적응적으로 결정되도록 하는 것을 다른 목적으로 한다.Another object of the present invention is to adaptively determine the modality or the output of the content based on a change in the attitude or attitude of the user.
본 발명은 상기와 같은 결정에 있어서 컨텐츠의 특성이 더 고려되도록 하는 것을 또 다른 목적으로 한다.Another object of the present invention is to further consider the characteristics of the content in the above-mentioned determination.
본 발명은 상기와 같은 결정에 있어서 사용자가 사용자 장치를 착용한 위치가 더 고려되도록 하는 것을 또 다른 목적으로 한다.Another object of the present invention is to further consider the position in which the user wears the user equipment in such a determination.
본 발명은 상기와 같은 결정에 있어서 사용자 장치의 장소적인 맥락이나 배터리 잔량이 더 고려되도록 하는 것을 또 다른 목적으로 한다.It is another object of the present invention to further consider the context of the user equipment and the battery remaining amount in such a determination.
상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.In order to accomplish the above object, a representative structure of the present invention is as follows.
본 발명의 일 태양에 따르면, 사용자 장치의 움직임 데이터에 기초하여 그 사용자의 자세나 자세 변화에 관한 정보를 도출하는 단계 - 상기 움직임 데이터는 상기 사용자 장치에 포함되는 센서에 의하여 시간의 흐름에 따라 기록되는 것임 - , 및 상기 도출된 정보에 기초하여, 상기 사용자 장치에 의하여 제공되는 컨텐츠의 모덜리티나 출력을 결정하는 단계를 포함하는 방법이 제공된다.According to one aspect of the present invention, there is provided a method for recording information on a user, comprising: deriving information about a user's attitude or attitude change based on motion data of a user device, the motion data being recorded And determining, based on the derived information, a modality or output of the content provided by the user device.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 장치 내지 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체가 더 제공된다.In addition to the above, there is further provided a computer readable recording medium for recording a computer program for executing another method, another apparatus or system for implementing the present invention and the above method.
본 발명에 의하면, 사용자의 자세나 자세의 변화에 기초하여 컨텐츠의 모덜리티나 출력이 적응적으로 결정될 수 있다.According to the present invention, the modality and the output of the content can be adaptively determined based on the change of the attitude or attitude of the user.
본 발명에 의하면, 상기와 같은 결정에 있어서 컨텐츠의 특성이 더 고려되도록 할 수 있다.According to the present invention, it is possible to further consider the characteristics of the content in the above-described determination.
본 발명에 의하면, 상기와 같은 결정에 있어서 사용자가 사용자 장치를 착용한 위치가 더 고려되도록 할 수 있다.According to the present invention, it is possible to consider the position where the user wears the user apparatus in the above-described determination.
본 발명에 의하면, 상기와 같은 결정에 있어서 사용자 장치의 장소적인 맥락이나 배터리 잔량이 더 고려되도록 할 수 있다.According to the present invention, it is possible to further consider the context of the user device and the battery remaining amount in such a determination.
도 1은 본 발명의 일 실시예에 따라 사용자의 자세나 자세의 변화에 기초하여 컨텐츠의 모덜리티나 출력을 결정하기 위한 전체 시스템의 개략적인 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 컨텐츠 제공 지원 시스템(200)의 내부 구성을 상세하게 도시하는 도면이다.
도 3은 본 발명의 일 실시예에 따른 사용자 장치(300)의 내부 구성을 상세하게 도시하는 도면이다.
도 4는 본 발명의 일 실시예에 따라 사용자가 취할 수 있는 여러 가지 자세에 관하여 나타내는 도면이다.
도 5는 본 발명의 일 실시예에 따라 사용자가 하나의 사용자 장치를 손목에 착용한 채로 취할 수 있는 여러 가지 자세에 관하여 나타내는 도면이다.
도 6은 본 발명의 일 실시예에 따라 사용자가 하나의 사용자 장치를 손목에 착용한 채로 취할 수 있는 다른 자세들에 관하여 나타내는 도면이다.
도 7은 본 발명의 일 실시예에 따라 사용자가 두 개의 사용자 장치를 사용하여 취할 수 있는 두 가지 자세에 관하여 나타내는 도면이다.
도 8은 본 발명의 일 실시예에 따라 사용자가 두 개의 사용자 장치를 사용하여 취할 수 있는 다른 자세에 관하여 나타내는 도면이다.1 is a diagram showing a schematic configuration of an overall system for determining a modality or an output of contents based on a change in a posture or attitude of a user according to an embodiment of the present invention.
FIG. 2 is a detailed diagram illustrating an internal configuration of a content providing
3 is a detailed diagram illustrating an internal configuration of a
4 is a diagram showing various postures the user can take according to an embodiment of the present invention.
5 is a diagram illustrating various postures that a user may take with one user device worn on his / her wrist according to an embodiment of the present invention.
6 is a diagram illustrating other poses that a user may take with one user device worn on the wrist, in accordance with one embodiment of the present invention.
7 is a diagram illustrating two poses that a user may take using two user devices in accordance with one embodiment of the present invention.
8 is a diagram illustrating a different attitude that a user may take using two user devices in accordance with one embodiment of the present invention.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.The following detailed description of the invention refers to the accompanying drawings, which illustrate, by way of illustration, specific embodiments in which the invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, the specific shapes, structures, and characteristics described herein may be implemented by changing from one embodiment to another without departing from the spirit and scope of the invention. It should also be understood that the location or arrangement of individual components within each embodiment may be varied without departing from the spirit and scope of the present invention. Therefore, the following detailed description is not to be taken in a limiting sense, and the scope of the present invention should be construed as encompassing the scope of the appended claims and all equivalents thereof. In the drawings, like reference numbers designate the same or similar components throughout the several views.
이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 여러 바람직한 실시예에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, various embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention.
[본 발명의 바람직한 실시예][Preferred Embodiment of the Present Invention]
본 명세서에서, 컨텐츠(contents) 또는 컨텐트란, 통신망을 통하여 접근 가능한, 문자, 부호, 음성, 음향, 이미지, 동영상 등으로 이루어지는 디지털 정보 또는 개별 정보 요소를 총칭하는 개념이다. 이러한 컨텐츠는, 예를 들면, 텍스트, 이미지, 동영상, 오디오, 링크(예를 들면, 웹 링크) 등의 데이터 또는 이러한 데이터 중 적어도 두 가지의 조합을 포함하여 구성될 수 있다.In the present specification, contents or contents are collectively referred to as digital information or individual information elements, which are accessible through a communication network, such as characters, codes, sounds, sounds, images, and moving pictures. Such content may comprise, for example, data such as text, images, moving pictures, audio, links (e.g., web links), or a combination of at least two of these data.
전체 시스템의 구성Configuration of the entire system
도 1은 본 발명의 일 실시예에 따라 사용자의 자세나 자세의 변화에 기초하여 컨텐츠의 모덜리티나 출력을 결정하기 위한 전체 시스템의 개략적인 구성을 나타내는 도면이다.1 is a diagram showing a schematic configuration of an overall system for determining a modality or an output of contents based on a change in a posture or attitude of a user according to an embodiment of the present invention.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 전체 시스템은 통신망(100), 컨텐츠 제공 지원 시스템(200) 및 사용자 장치(300)를 포함하여 구성될 수 있다.1, an overall system according to an exemplary embodiment of the present invention may include a
먼저, 본 발명의 일 실시예에 따른 통신망(100)은 유선 통신이나 무선 통신과 같은 통신 양태를 가리지 않고 구성될 수 있으며, 근거리 통신망(LAN; Local Area Network), 도시권 통신망(MAN; Metropolitan Area Network), 광역 통신망(WAN; Wide Area Network) 등 다양한 통신망으로 구성될 수 있다. 바람직하게는, 본 명세서에서 말하는 통신망(100)은 공지의 인터넷 또는 월드와이드웹(WWW; World Wide Web)일 수 있다. 그러나, 통신망(100)은, 굳이 이에 국한될 필요 없이, 공지의 유무선 데이터 통신망, 공지의 전화망 또는 공지의 유무선 텔레비전 통신망을 그 적어도 일부에 있어서 포함할 수도 있다. 예를 들어, 통신망(100)은 무선 데이터 통신망으로서, WiFi 통신, LTE 통신, 블루투스 통신, 적외선 통신, 초음파 통신 등과 같은 종래의 통신 방법을 적어도 그 일부분에 있어서 구현하는 것일 수 있다.First, the
다음으로, 본 발명의 일 실시예에 따른 컨텐츠 제공 지원 시스템(200)은 사용자 장치(300)가 제공하는 컨텐츠의 모덜리티나 출력이 사용자의 자세나 자세의 변화에 기초하여 결정되도록 지원할 수 있다. 이를 위하여, 컨텐츠 제공 지원 시스템(200)은 사용자 장치(300)와 협업하여 사용자의 자세나 자세의 변화에 관한 정보를 도출할 수 있다.Next, the content providing
본 발명에 따른 컨텐츠 제공 지원 시스템(200)의 구성과 기능에 관하여는 아래에서 더 자세하게 알아보기로 한다.The configuration and functions of the content providing
마지막으로, 본 발명의 일 실시예에 따른 사용자 장치(300)는 필요에 따라 컨텐츠 제공 지원 시스템(200)에 접속한 후 통신할 수 있는 기능을 갖는 디지털 기기로서, 스마트 워치, 스마트 밴드, 스마트 링, 스마트 폰, 기타 이동 전화기, PDA 등과 같이 사용자가 착용하거나 신체 가까운 곳에 붙여 두고 사용할 수 있고 메모리 수단을 구비하며 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기라면 얼마든지 본 발명에 따른 사용자 장치(300)로서 채택될 수 있다. 특히, 사용자 장치(300)는 컨텐츠의 제공을 위한 공지의 구성요소, 예를 들면, 동영상이나 이미지의 제공을 위한 디스플레이 패널, 음향의 제공을 위한 스피커, 진동의 제공을 위한 진동기, 기타 촉각적 자극을 제공하기 위한 돌출 요소 및 액추에이터 등을 포함할 수 있다. 이러한 사용자 장치(300)는 사용자의 자세나 자세의 변화에 관한 정보를 자체적으로 도출하거나, 이러한 정보를 컨텐츠 제공 지원 시스템(200)으로부터 전송 받은 후에, 이에 기초하여 그것이 제공하는 컨텐츠의 모덜리티나 출력이 조절되도록 할 수 있다.Finally, the
본 발명에 따른 사용자 장치(300)의 구성과 기능에 관하여는 아래에서 더 자세하게 알아보기로 한다.The configuration and functions of the
컨텐츠 제공 지원 시스템의 구성Configuration of content provision support system
이하에서는, 본 발명에 따른 컨텐츠 제공 지원 시스템(200)의 내부 구성과 각 구성요소의 기능에 대하여 살펴보기로 한다.Hereinafter, an internal configuration of the content providing
도 2는 본 발명의 일 실시예에 따른 컨텐츠 제공 지원 시스템(200)의 내부 구성을 상세하게 도시하는 도면이다.FIG. 2 is a detailed diagram illustrating an internal configuration of a content providing
본 발명의 일 실시예에 따른 컨텐츠 제공 지원 시스템(200)은 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기일 수 있다. 이러한 컨텐츠 제공 지원 시스템(200)은 서버 시스템일 수 있다. 도 2에 도시된 바와 같이, 컨텐츠 제공 지원 시스템(200)은 자세 정보 도출부(210), 결정부(220), 데이터베이스(230), 통신부(240) 및 제어부(250)를 포함하여 구성될 수 있다. 본 발명의 일 실시예에 따르면, 자세 정보 도출부(210), 결정부(220), 데이터베이스(230), 통신부(240) 및 제어부(250)는 그 중 적어도 일부가 사용자 장치(300)와 통신하는 프로그램 모듈일 수 있다. 이러한 프로그램 모듈은 운영 시스템, 응용 프로그램 모듈 또는 기타 프로그램 모듈의 형태로 컨텐츠 제공 지원 시스템(200)에 포함될 수 있고, 물리적으로는 여러 가지 공지의 기억 장치에 저장될 수 있다. 또한, 이러한 프로그램 모듈은 컨텐츠 제공 지원 시스템(200)과 통신 가능한 원격 기억 장치에 저장될 수도 있다. 한편, 이러한 프로그램 모듈은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.The content providing
먼저, 본 발명의 일 실시예에 따른 자세 정보 도출부(210)는 사용자 장치(300)로부터 사용자 장치(300)의 움직임에 관한 데이터(이에 관하여는 후술하기로 함)를 수신하고, 이에 기초하여 사용자 장치(300)를 사용하는 사용자의 자세나 자세의 변화에 관한 정보를 도출하는 기능을 수행할 수 있다. 상세하게 설명하면, 자세 정보 도출부(210)는, 사용자 장치(300)의 움직임 데이터에 기초하여, 사용자 장치(300)가 사용자에 의하여 착용된 상황에서 나타내는 궤적에 관한 정보(사용자 장치(300)의 시간의 흐름에 따른 절대적인 위치에 관한 정보, 소정의 가상의 기준점이나 사용자 장치(300)와는 다른 장치에 대한 시간의 흐름에 따른 상대적인 위치에 관한 정보, 또는 사용자 장치(300)의 속도, 가속도, 3축 회전 등에 관한 정보(즉, 시간의 흐름에 따른 정보)를 포함할 수 있음)를 결정하여 사용자의 자세나 자세의 변화에 관한 정보를 도출할 수 있다.First, the attitude
이를 위하여, 자세 정보 도출부(210)는 정보 수집과 수집된 정보의 누적을 다수의 사용자 장치(300)에 관하여 수행함으로써, 소정의 범위 내의 특성을 갖는 움직임 궤적을 기존에 알려진 소정의 자세나 자세의 변화와 매칭시키거나, 소정의 범위 내의 특성을 갖는 움직임 궤적에 기초하여 새로운 자세나 자세의 변화를 특정해낼 수 있다. 또한, 자세 정보 도출부(210)는, 다수의 사용자 장치(300)가 공통적으로 나타내는 움직임의 궤적이 있다면, 그 특성을 분석하여 상기 움직임을 특정 종류의 움직임(즉, 특정 자세 변화)으로 결정할 수 있다. 또한, 이렇듯 결정된 종류의 움직임의 궤적 특성에 대응되는 궤적 특성의 움직임이 별개의 사용자 장치(300)에 관하여 감지되면, 이러한 사용자 장치(300)의 움직임으로부터 특정 자세나 자세의 변화를 추고할 수도 있다. 또한, 사용자 장치(300)가 사용자의 신체의 어느 부위에 착용되었는지도 추고될 수 있다. 예를 들면, 사용자 장치(300)가 사용자의 손가락, 손목 및 상완 중 어느 부위(위치)에 착용되었는지가 추고될 수 있다.For this purpose, the attitude
한편, 위와 같이 도출된 자세 정보(필요에 따라 사용자 장치(300)가 사용자의 신체에 착용된 위치에 관한 정보를 포함함)와 그에 관한 움직임 궤적의 특성은 서로 연관되어 후술하는 데이터베이스(230)에 저장될 수 있다.On the other hand, the attitude information derived above (including information on the position where the
다만, 전술한 바와 같은 자세 정보 도출부(210)는 필수적인 것은 아니고, 후술하는 바와 같이 사용자 장치(300)에 포함될 수 있는 자세 정보 도출부(320)에 의하여 그 기능의 전부나 일부가 대체될 수 있다.However, the attitude
다음으로, 본 발명의 일 실시예에 따른 결정부(220)는, 사용자 장치(300)의 사용자의 요청이나 미리 정해진 규칙에 기초하여, 도출된 자세 정보의 해당 자세나 자세 변화에 적합한, 사용자 장치(300)의 컨텐츠 제공에 관한 모덜리티나 출력을 결정하고, 이러한 결정에 관한 정보를 사용자 장치(300)로 전송할 수 있다. 또한, 경우에 따라, 모덜리티나 출력의 결정에 관한 사용자 요청이나 규칙 자체를 사용자 장치(300)로 전송할 수도 있다. 다만, 본 구성요소는 필수적인 것은 아니고, 후술하는 바와 같이 사용자 장치(300)에 포함될 수 있는 결정부(330)에 의하여 그 기능의 전부나 일부가 대체될 수 있다. 내려질 수 있는 결정의 여러 가지 예에 관하여는 후술하기로 한다.Next, the
다음으로, 본 발명의 일 실시예에 따른 데이터베이스(230)에는, 사용자 장치(300)의 움직임 데이터, 이러한 데이터에 따라 도출된 자세 정보 그리고/또는 자세 정보의 해당 자세나 자세 변화에 따라 컨텐츠의 모덜리티나 출력을 결정하는 것에 관한 규칙이 저장될 수 있다. 비록 도 2에서 데이터베이스(230)가 컨텐츠 제공 지원 시스템(200)에 포함되어 구성되는 것으로 도시되어 있지만, 본 발명을 구현하는 당업자의 필요에 따라, 데이터베이스(230)는 컨텐츠 제공 지원 시스템(200)과 별개로 구성될 수도 있다. 한편, 본 발명에서의 데이터베이스(230)는, 컴퓨터 판독 가능한 기록 매체를 포함하는 개념으로서, 협의의 데이터베이스뿐만 아니라 파일 시스템에 기반을 둔 데이터 기록 등을 포함하는 광의의 데이터베이스일 수도 있으며, 단순한 로그의 집합이라도 이를 검색하여 데이터를 추출할 수 있다면 본 발명에서의 데이터베이스(230)가 될 수 있다.Next, in the
다음으로, 본 발명의 일 실시예에 따른 통신부(240)는 자세 정보 도출부(210), 결정부(220) 및 데이터베이스(230)로부터의/로의 데이터 송수신이 가능하도록 하는 기능을 수행할 수 있다.Next, the
마지막으로, 본 발명의 일 실시예에 따른 제어부(250)는 자세 정보 도출부(210), 결정부(220), 데이터베이스(230) 및 통신부(240) 간의 데이터의 흐름을 제어하는 기능을 수행할 수 있다. 즉, 본 발명에 따른 제어부(250)는 컨텐츠 제공 지원 시스템(200)의 외부로부터의/로의 데이터 흐름 또는 컨텐츠 제공 지원 시스템(200)의 각 구성요소 간의 데이터 흐름을 제어함으로써, 자세 정보 도출부(210), 결정부(220), 데이터베이스(230) 및 통신부(240)에서 각각 고유 기능을 수행하도록 제어할 수 있다.The
사용자 장치의 구성Configuration of user device
이하에서는, 본 발명에 따른 사용자 장치(300)의 내부 구성과 각 구성요소의 기능에 대하여 살펴보기로 한다.Hereinafter, the internal configuration of the
도 3은 본 발명의 일 실시예에 따른 사용자 장치(300)의 내부 구성을 상세하게 도시하는 도면이다. 도 3에 도시된 바와 같이, 사용자 장치(300)는 센서부(310), 자세 정보 도출부(320), 결정부(330), 저장부(335), 통신부(340) 및 제어부(350)를 포함하여 구성될 수 있다. 본 발명의 일 실시예에 따르면, 센서부(310), 자세 정보 도출부(320), 결정부(330), 저장부(335), 통신부(340) 및 제어부(350)는 그 중 적어도 일부가 컨텐츠 제공 지원 시스템(200)과 통신하는 프로그램 모듈일 수 있다. 이러한 프로그램 모듈은 운영 시스템, 응용 프로그램 모듈 또는 기타 프로그램 모듈의 형태로 사용자 장치(300)에 포함될 수 있고, 물리적으로는 여러 가지 공지의 기억 장치에 저장될 수 있다. 또한, 이러한 프로그램 모듈은 사용자 장치(300)와 통신 가능한 원격 기억 장치에 저장될 수도 있다. 한편, 이러한 프로그램 모듈은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.3 is a detailed diagram illustrating an internal configuration of a
먼저, 본 발명의 일 실시예에 따른 센서부(310)는 사용자나 사용자의 신체 부위의 움직임에 따라 작동하는, 움직임 센서, 가속도 센서, 자이로 센서, 3축 회전 센서 등의 센서를 포함할 수 있다. 센서부(310)는 이러한 공지의 센서 중 적어도 하나로 구성될 수 있다. 센서부(310)는 사용자 장치(300)의 움직임을 감지하고, 이에 관한 시간의 흐름에 따른 데이터를 출력(기록)할 수 있다. 이러한 움직임 데이터는 사용자 장치(300)의 속도, 가속도, 3축 회전 등에 관한 물리 값일 수 있다. 움직임 데이터는 후술하는 바와 같은 저장부(335)에 저장될 수 있다.First, the
다음으로, 본 발명의 일 실시예에 따른 자세 정보 도출부(320)는, 센서부(310)의 시간의 흐름에 따른 출력 값(즉, 사용자 장치(300)의 움직임 데이터)에 기초하여, 센서부(310)를 포함하는 사용자 장치(300)의 움직임의 궤적, 나아가 이러한 궤적으로부터 추정되는, 사용자가 장치(300)를 착용하고 취한 자세, 또는 이러한 자세의 변화에 관한 정보를 도출할 수 있다. 필요에 따라, 위와 같은 자세 정보는 사용자 장치(300)가 사용자의 신체에 착용된 위치에 관한 정보를 포함할 수도 있다. 다만, 본 구성요소는 필수적인 것은 아니고, 컨텐츠 제공 지원 시스템(200)에 포함될 수 있는 자세 정보 도출부(210)에 의하여 그 기능의 전부나 일부가 대체될 수 있다.Next, the attitude
다음으로, 본 발명의 일 실시예에 따른 결정부(330)는 사용자의 자세나 자세의 변화에 관한 도출된 정보에 따라 사용자 장치(300)가 제공하는 컨텐츠의 모덜리티나 출력을 결정할 수 있다. 다만, 본 구성요소는 필수적인 것은 아니고, 컨텐츠 제공 지원 시스템(200)에 포함될 수 있는 결정부(220)에 의하여 그 기능의 전부나 일부가 대체될 수 있다.Next, the
자세 정보 도출부(320)나 결정부(330)의 구성 원리는 전술한 바와 같은 자세 정보 도출부(210)나 결정부(220)의 그것과 매우 유사할 수 있다.The configuration principles of the posture
다음으로, 본 발명의 일 실시예에 따른 저장부(335)에는, 사용자 장치(300)의 움직임 데이터, 이러한 데이터에 따라 도출된 자세 정보 그리고/또는 자세 정보의 해당 자세나 자세 변화에 따라 컨텐츠의 모덜리티나 출력을 결정하는 것에 관한 규칙이 저장될 수 있다. 이러한 저장부(335)는 플래시 메모리, 하드 디스크 등과 같은 공지의 기억 장치일 수 있다.Next, in the
다음으로, 본 발명의 일 실시예에 따른 통신부(340)는 센서부(310), 자세 정보 도출부(320), 결정부(330) 및 저장부(335)로부터의/로의 데이터 송수신이 가능하도록 하는 기능을 수행할 수 있다.The
마지막으로, 본 발명의 일 실시예에 따른 제어부(350)는 센서부(310), 자세 정보 도출부(320), 결정부(330), 저장부(335) 및 통신부(340) 간의 데이터의 흐름을 제어하는 기능을 수행할 수 있다. 즉, 본 발명에 따른 제어부(350)는 사용자 장치(300)의 외부로부터의/로의 데이터 흐름 또는 사용자 장치(300)의 각 구성요소 간의 데이터 흐름을 제어함으로써, 센서부(310), 자세 정보 도출부(320), 결정부(330), 저장부(335) 및 통신부(340)에서 각각 고유 기능을 수행하도록 제어할 수 있다.The
자세 정보의 도출Derivation of attitude information
아래에서는 본 발명에 따라 컨텐츠 제공 지원 시스템(200)이나 사용자 장치(300)가 사용자의 자세나 자세의 변화에 관한 정보를 도출하는 것에 관하여 알아보기로 한다.Hereinafter, the content providing
도 4는 본 발명의 일 실시예에 따라 사용자가 취할 수 있는 여러 가지 자세에 관하여 나타내는 도면이다.4 is a diagram showing various postures the user can take according to an embodiment of the present invention.
도 4의 좌도에서 볼 수 있듯이, 사용자는 왼쪽 손목에 착용한 사용자 장치(300)(전형적으로는, 스마트 워치)가 출력하는 음향을 들으려는 자세를 취할 수 있다. 이 경우, 사용자는 왼쪽 손목을 다른 위치로부터 귀 근처로 끌어 당기는 행위를 할 수 있는데, 이러한 행위는, 인간의 팔 모양이나 팔의 움직임의 궤적 등이 다소의 전형성을 띄고 있다는 점에서, 사용자 장치(300)의 센서부(310)의 움직임 데이터 역시 일정한 범위 내에서 일정한 패턴(즉, 움직임의 궤적 특성)을 갖고 생성되도록 하는 요인이 될 수 있다. 예를 들면, 이러한 패턴은 사용자가 왼팔을 허리 근처로부터 귀 근처로 들어올릴 때에 왼쪽 손목이 전형적으로 그리는 궤적에 따라 나타나게 되는 것일 수 있다. 역으로, 이와 유사한 패턴의 움직임 데이터는 대단히 높은 확률로 사용자가 왼쪽 손목에 착용한 사용자 장치(300)를 도 4의 좌도에서 도시된 바와 같이 움직였음을 드러내는 것일 수 있다.As can be seen in the left view of FIG. 4, the user can take an attitude to listen to the sound output by the user device 300 (typically a smart watch) worn on the left wrist. In this case, the user may act to pull the left wrist from the other position to near the ear, such that the user's device, such as the arm or the trajectory of the movement of the arm, The motion data of the
도 4의 중도에서 볼 수 있듯이, 사용자는 왼쪽 손목에 착용한 사용자 장치(300)를 본인 얼굴을 향하도록 살짝 뒤집어서 시각이나 메시지를 볼 수 있다. 이와 같은 경우에도 센서부(310)의 움직임 데이터는 소정의 특징적인 패턴을 갖게 될 수 있다.As shown in FIG. 4, the user can turn the
도 4의 우도에서 볼 수 있듯이, 사용자는 왼쪽 손목에 사용자 장치(300)를 착용한 채로 서 있거나 걸을 수 있다. 이와 같은 경우에도 센서부(310)의 움직임 데이터는 소정의 특징적인 패턴을 갖게 될 수 있다.4, the user can stand or walk while wearing the
위에서 설명한 경우들에 있어서, 센서부(310)의 움직임 데이터는 자세 정보 도출부(320)에 의하여 소정의 정해진 시간 동안 분석되는 것일 수 있다. 이러한 시간의 길이는 당업자의 소정의 실험에 의하여 결정되는 것일 수 있다. 이와 같은 시간의 길이는 당업자의 판단에 따라 일률적으로 결정될 수도 있지만, 움직임 데이터의 종류나 그것이 나타내는 움직임의 궤적 특성에 따라 적응적으로 결정될 수도 있다. 자세 정보 도출부(320)는 기 저장된 움직임 데이터의 특징적인 패턴과 새로이 감지된 움직임의 데이터의 특징적인 패턴을 비교하여 소정의 자세 정보를 파악할 수 있다. 이것은 사용자나 사용자의 사용자 장치(300)를 착용한 부위가 나타내는 자세나 그러한 자세의 변화에 관한 것일 수 있다.In the above-described cases, the motion data of the
이상에서 사용자 장치(300)의 자세 정보 도출부(320)가 자세 정보를 도출하는 것에 관하여 설명하였지만, 컨텐츠 제공 지원 시스템(200)의 자세 정보 도출부(210)가 이러한 기능의 적어도 일부를 담당할 수 있다. 이 경우, 센서부(310)의 움직임 데이터는 컨텐츠 제공 지원 시스템(200)으로 전송될 수 있다.Although the attitude
컨텐츠의 모덜리티나 출력에 관한 결정Determining the content's modality or output
아래에서는 컨텐츠의 모덜리티를 결정하거나 컨텐츠의 출력을 결정하고 이에 따른 조절이나 제어를 수행하는 것에 관한 본 발명의 여러 실시예에 관하여 도면을 참조하여 살펴보기로 한다.Hereinafter, various embodiments of the present invention will be described in detail with reference to the drawings. In the following, embodiments of the present invention relating to determining the modality of the content, determining the output of the content, and controlling or controlling the content are described below.
1. 컨텐츠를 제공하는 사용자 장치(300)가 하나인 경우1. When there is one
도 5는 본 발명의 일 실시예에 따라 사용자가 하나의 사용자 장치를 손목에 착용한 채로 취할 수 있는 여러 가지 자세에 관하여 나타내는 도면이다. 도시된 바와 같이, 사용자는 사용자 장치(300)(예를 들면, 스마트 워치)를 손목에 착용한 채로 손을 올렸다 내렸다 할 수 있는데, 이 경우, 사용자 장치(300)는, 그 움직임의 궤적에 기초하여, 장치(300)의 위치가 사용자의 귀에 가까운 것으로 판단되는 경우에는 음향이 포함된 컨텐츠의 음향 출력 레벨을 낮춰 주고, 먼 것으로 판단되는 경우에는 음향 출력 레벨을 높여 줄 수 있다. 이러한 출력 레벨의 조절은 추정되는 귀까지의 거리에 따라 연속적으로 수행될 수 있다. 즉, 출력 레벨은 추정되는 귀까지의 거리와 양의 상관 관계를 갖도록 조절될 수 있다. 한편, 위의 경우에서, 사용자가 사용자 장치(300)를 착용한 손을 올린 채로 소정 시간 동안 그대로 있으면, 낮춰진 음향 출력 레벨은 그대로 유지되도록 하는 것이 바람직할 수 있다.5 is a diagram illustrating various postures that a user may take with one user device worn on his / her wrist according to an embodiment of the present invention. As shown, a user may raise and lower hands with the user device 300 (e.g., a smart watch) worn on the wrist. In this case, the
또한, 비슷한 예로서, 사용자 장치(300)의 위치가 사용자의 눈과 가까운 것으로 판단되는 경우나 사용자 장치(300)의 디스플레이의 전면이 사용자의 시야에 들어온다고 판단되는 경우에는, 사용자 장치(300)가 동영상과 음향이 모두 포함된 컨텐츠를 그대로 제공할 수 있다. 한편, 그렇지 않은 경우에는 상기 컨텐츠의 음향만이 제공되도록 하여 줄 수 있다. 이때, 컨텐츠의 동영상의 디스플레이는 억제될 수 있다.When it is determined that the position of the
그리고, 사용자 장치(300)는 음향의 출력 레벨이 아닌 음향의 주파수 특성을 조절할 수도 있다. 사용자 장치(300)가 사용자의 귀를 향하여 가까워지는 경우나 멀어지는 경우에 도플러 효과가 발생할 수 있는데, 사용자 장치(300)는 이 경우에 제공하는 컨텐츠의 음향의 주파수 특성을 조절하여 사용자가 지속적으로 균질한 수준의 주파수의 음향을 들을 수 있도록 할 수도 있다. 즉, 사용자 장치(300)는 공지의 적응형 이퀄라이저를 포함하여 사용자 장치(300)의 움직임에 따라 컨텐츠의 음향의 주파수를 높이거나 낮출 수 있다. 예를 들면, 사용자 장치(300)가 사용자의 귀를 향하여 가까워지고 있는 경우에는 음향의 주파수를 낮추기 위한 주파수 조절을 수행할 수 있다. 자명하게도, 반대의 경우, 음향의 주파수를 높이기 위한 주파수 조절을 수행할 수 있다. 이러한 주파수 조절은 사용자 장치(300)가 움직이는 속도의 값에 기초하여 행하여질 수 있다.The
도 6은 본 발명의 일 실시예에 따라 사용자가 하나의 사용자 장치를 손목에 착용한 채로 취할 수 있는 다른 자세들에 관하여 나타내는 도면이다. 도시된 바와 같이, 사용자는 사용자 장치(300)(전형적으로는, 스마트 워치)를 손목에 착용한 채로 몸에서 멀게 하거나 가깝게 할 수 있는데(예컨대, 도시에서 사용자 장치(300)와 몸 사이의 거리가 L1에서 L3으로 증가하거나 그 반대일 수 있음), 사용자 장치(300)는 그 움직임의 궤적에 기초하여 장치(300)의 위치가 사용자의 몸에서 가까운 것으로 판단되는 경우에는 시각적인 컨텐츠의 디스플레이 출력 레벨(밝기)을 낮춰 주고, 먼 것으로 판단되는 경우에는 디스플레이 출력 레벨을 높여 줄 수 있다. 이러한 출력 레벨의 조절은 추정되는 몸까지의 거리에 따라 연속적으로 수행될 수 있다(여기서, 몸까지의 거리 역시 사용자 장치(300)의 움직임 궤적의 특성에 따라 추정될 수 있다). 즉, 출력 레벨은 추정되는 몸까지의 거리와 양의 상관 관계를 갖도록 조절될 수 있다. 한편, 조절의 대상은 디스플레이 출력 레벨이 아닌 디스플레이 해상도, 디스플레이되는 글자나 이미지의 크기 등이 될 수도 있다.6 is a diagram illustrating other poses that a user may take with one user device worn on the wrist, in accordance with one embodiment of the present invention. As shown, a user may place the user device 300 (typically a smart watch) away from or close to the body while wearing it on the wrist (e.g., the distance between the
본 발명의 일 실시예에 따르면, 사용자 장치(300)가 제공하는 컨텐츠의 모덜리티나 출력은 보안성을 고려하여 결정될 수도 있다. 사용자 장치(300)가 스마트 워치이고, 사용자가 그것을 손목에 착용한 채로 손목의 등 부분을 몸 바깥으로 돌리는 움직임을 하거나 사용자가 그것의 디스플레이 패널을 몸 바깥으로 드러내면서 걸으면, 사용자 장치(300)는 컨텐츠의 디스플레이를 억제하거나 디스플레이의 출력 레벨, 해상도, 객체의 크기 등을 낮추거나 줄일 수 있다. 이에 따르면, 사용자 장치(300)에 설치된 메신저 프로그램에 의하여 수신된 사적인 메시지 등이 외부의 타인에게 누설되는 것을 막을 수 있다. 이러한 누설 방지는 사용자 장치(300)에 의하여 제공되고 있는 컨텐츠가 메시지 등과 같이 개인적인 컨텐츠로 분류되는 것인 경우에만 행하여질 수도 있다.According to an embodiment of the present invention, the modality or the output of the content provided by the
도 4를 다시 참조하여 살펴본다. 본 발명의 일 실시예에 따르면, 사용자는 사용자 장치(300)를 왼쪽 손목에 착용한 채로 그것이 제공하는 컨텐츠에 관한 음향만을 듣거나(좌도의 경우), 음향을 들으면서 이미지도 보거나(중도의 경우), 듣거나 보지 않으면서 제공되는 컨텐츠에 속하는 촉각적인 자극만을 느낄 수 있다(우도의 경우). 즉, 사용자가 사용자 장치(300)를 착용한 채로 취하는 자세에 따라, 컨텐츠의 모덜리티가 적응적으로 변경될 수 있다.Referring again to FIG. In accordance with an embodiment of the present invention, a user may wear a
2. 컨텐츠를 제공하는 사용자 장치(300)가 복수 개인 경우2. When there are a plurality of
컨텐츠를 제공하는 사용자 장치(300)가 복수 개인 경우, 해당 사용자 장치들(300) 중 하나 이상의 움직임에 따라 장치들(300) 중 하나 이상에 의하여 제공되는 컨텐츠의 모덜리티나 출력이 적응적으로 결정되고 조절되고 제어되도록 할 수 있다. 여기서, 참조되는 움직임 데이터는 두 사용자 장치(300) 사이의 상대적인 움직임에 관한 데이터(예를 들면, 상대 속도, 상대 가속도, 상대 속도나 상대 가속도에 의하여 추정될 수 있는 상호 간의 거리 등)일 수도 있다.When there are a plurality of
도 7은 본 발명의 일 실시예에 따라 사용자가 두 개의 사용자 장치를 사용하여 취할 수 있는 두 가지 자세에 관하여 나타내는 도면이다. 도시된 바와 같이, 사용자는 왼쪽 손목에는 스마트 워치 등과 같은 사용자 장치(300a)를 착용한 채로 오른손으로는 스마트 패드 등과 같은 사용자 장치(300b)를 들고 사용할 수 있다. 먼저, 좌도와 같은 경우, 사용자 장치(300b)는 컨텐츠를 제공할 때에 그 동영상/이미지와 음향을 모두 제공할 수 있다. 그런데, 우도에 도시된 바와 같이 사용자가 사용자 장치(300a)를 본인의 귀 옆으로 가져다 대는 동작을 하면, 사용자 장치(300a)는 이를 감지하고 나서, 필요에 따라 사용자 장치(300b)와 통신하여, 사용자 장치(300b)에 의하여 제공되던 컨텐츠의 음향만을 가져 와서 따로 제공할 수 있다(소위, 스플릿아웃(split-out)). 물론, 반대의 경우, 즉, 사용자 장치(300a)가 사용자의 허리 부근으로 내려가는 움직임을 하게 되는 경우, 사용자 장치(300a)는 상기 컨텐츠의 제공에서 배제되고, 사용자 장치(300b)는 다시 컨텐츠의 동영상/이미지와 음향을 모두 제공하게 될 수 있다(소위, 섬업(sum-up)).7 is a diagram illustrating two poses that a user may take using two user devices in accordance with one embodiment of the present invention. As shown in the figure, the user can wear a
한편, 사용자 장치(300b)에 의하여 제공되던 음향 컨텐츠가 L 성분 음향과 R 성분 음향으로 구성되어 있는 경우, 두 가지의 음향 중에서 L 성분의 음향만 사용자 장치(300a)를 통하여 제공되도록 하는 식의 스플릿아웃 역시 실현될 수 있다. 이때, 사용자 장치(300a)는 물론 사용자의 귀 옆으로 옮겨져 있을 수 있다. 반대의 경우, 즉, 사용자 장치(300a)가 사용자의 허리 부근으로 도로 내려가는 움직임을 하게 되는 경우, 사용자 장치(300a)는 상기 컨텐츠의 제공에서 배제되고, 사용자 장치(300b)는 다시 음향 컨텐츠의 L 성분과 R 성분을 모두 제공하게 될 수 있다. 이러한 경우는 섬업으로 볼 수 있다.On the other hand, when the sound content provided by the
위에서 설명한 스플릿아웃이나 섬업을 위하여, 사용자 장치(300a)와 사용자 장치(300b)는 블루투스 통신이나 WiFi 통신의 방법으로써 상호 연결될 수 있다. 또는, 사용자 장치(300a)와 사용자 장치(300b)는, 컨텐츠 제공 지원 시스템(200)과의 통신에 의하여 어느 장치가 동영상/이미지(즉, 비디오) 및/또는 음향(즉, 오디오)으로 구성되는 컨텐츠를 어떻게 제공할 것인지가 결정되면, 이러한 결정에 따라 스플릿아웃이나 섬업을 수행하면서 컨텐츠를 제공할 수 있다.The
스플릿아웃이 유용한 예로서 아래의 것들을 들 수 있다.A useful example of a split-out is:
(1) 사용자가 스마트 폰을 통하여 비디오 및 오디오가 포함된 컨텐츠를 제공 받다가 블루투스 이어폰을 귀에 꽂는 경우에, 비디오는 여전히 스마트 폰을 통하여, 오디오는 블루투스 이어폰을 통하여 제공될 수 있다.(1) When a user receives content containing video and audio through a smart phone and then inserts the Bluetooth earphone into the ear, the video may still be provided through the smartphone and audio may be provided through the Bluetooth earphone.
(2) 사용자가 스마트 폰을 통하여 비디오, 오디오 및 택타일(tactile)이 포함된 컨텐츠를 제공 받다가 HMD 장치를 착용하고 나서 VR 장갑을 손에 착용하는 경우에, 비디오는 HMD 장치를 통하여, 오디오는 스마트 폰을 통하여 그리고 택타일은 VR 장갑을 통하여 제공될 수 있다.(2) When the user wears the HMD device after wearing the video, audio and tactile contents through the smartphone and wears the VR glove in his / her hand, the video is transmitted through the HMD device, Via the smart phone and tactile can be provided through VR gloves.
(3) 사용자가 한쪽 손목에 착용한 스마트 워치를 통하여 컨텐츠의 오디오의 L 성분과 R 성분을 모두 제공 받다가, 다른 손으로 또는 같은 손으로 스마트 폰을 잡아서 스마트 워치와 가깝게 하면, 즉, 본 발명의 일 실시예에 따라 사용자가 두 개의 사용자 장치를 사용하여 취할 수 있는 다른 자세에 관하여 나타내는 도면인 도 8에서 도시된 경우와 같이 가깝게 하면, 도시된 바와 같이, 컨텐츠의 오디오의 L 성분은 스마트 폰에서 그리고 R 성분은 스마트 워치에서 제공될 수 있다.(3) If the user is provided with both the L component and the R component of the audio of the content through the smart watch worn by the user on one wrist, and the smartphone is brought close to the smart watch with the other hand or the same hand, As shown in FIG. 8, which is a diagram illustrating a different attitude that a user may take with two user devices, according to one embodiment, as shown, the L component of the audio of the content And the R component can be provided by SmartWatch.
섬업이 유용한 예로서 아래의 것들을 들 수 있다.A useful example of a goodwill is:
(1) 사용자가 스마트 폰을 통하여 컨텐츠의 비디오를 그리고 헤드셋을 통하여 컨텐츠의 오디오를 제공 받다가 헤드셋을 벗는 경우에, 컨텐츠의 비디오와 오디오가 스마트 폰만을 통하여 제공될 수 있다.(1) When a user receives video of contents through a smart phone and audio of contents through a headset and then takes off the headset, video and audio of the contents can be provided only through the smart phone.
(2) 사용자가 스마트 글래스를 통하여 컨텐츠의 비디오를 그리고 스마트 폰을 통하여 컨텐츠의 오디오를 제공 받다가 스마트 글래스를 벗는 경우에, 컨텐츠의 비디오와 오디오가 스마트 폰을 통하여 제공될 수 있다.(2) When a user takes a video of the content through the smart glass and receives the audio of the content through the smartphone and takes off the smart glass, the video and audio of the content can be provided through the smart phone.
3. 컨텐츠가 방향성을 갖는 것인 경우3. If the content is directional
하나 이상의 사용자 장치(300)가 고지향성 스피커(미도시됨)를 포함하거나 서로 지향하는 방향이 다른 복수의 디스플레이 패널을 포함하는 경우, 본 발명의 자세 정보에 따라 하나 이상의 사용자 장치(300)는 음향 컨텐츠가 한 방향으로만 집중되어 제공되도록 하거나, 시각적인 컨텐츠가 위와 같은 복수의 디스플레이 패널 중 일부에 의하여만 제공되도록 결정할 수도 있다.If one or more of the
4. 사용자 장치(300)의 장소적인 맥락이나 배터리 잔량이 더 고려되는 경우4. Where the context of the
본 발명의 여러 실시예에도 불구하고, 사용자 장치(300)가 컨텐츠를 제공하는 것에 관한 장소적인 맥락이나 사용자 장치(300)의 배터리 잔량에 더 기초하여, 컨텐츠 제공에 관한 모덜리티나 출력이 결정될 수도 있다. 예를 들면, 전술한 실시예에서, 사용자가 나타내는 자세에 따라 컨텐츠가 시각적으로 그리고 청각적으로 제공되도록 결정되는 경우에도, 사용자 장치(300)가 위치한 것으로 추정되는 장소가 실외이거나 공공장소인 경우, 청각적인 컨텐츠의 제공이 제한될 수 있다. 다른 예를 들면, 사용자가 나타내는 자세에 따라 컨텐츠가 시각적으로 그리고 청각적으로 제공되도록 결정되는 경우에도, 사용자 장치(300)의 배터리의 잔량이 일정 수준 이하인 경우, 사용자 장치(300)가 컨텐츠를 제공함에 있어서 채택하는 모덜리티의 일부가 제한될 수 있다.Notwithstanding the various embodiments of the present invention, the modality or output regarding content provision may be determined, based further on the locale context of the
이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.The embodiments of the present invention described above can be implemented in the form of program instructions that can be executed through various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program commands, data files, data structures, and the like, alone or in combination. The program instructions recorded on the computer-readable recording medium may be those specifically designed and configured for the present invention or may be those known and used by those skilled in the computer software arts. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROM and DVD, magneto-optical media such as floptical disks, medium, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code, such as those generated by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be modified into one or more software modules for performing the processing according to the present invention, and vice versa.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항과 한정된 실시예 및 도면에 의하여 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위하여 제공된 것일 뿐, 본 발명이 상기 실시예에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정과 변경을 꾀할 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, Those skilled in the art will appreciate that various modifications and changes may be made thereto without departing from the scope of the present invention.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.Accordingly, the spirit of the present invention should not be construed as being limited to the above-described embodiments, and all ranges that are equivalent to or equivalent to the claims of the present invention as well as the claims .
310: 센서부
320: 자세 정보 도출부
330: 결정부
335: 저장부
340: 통신부
350: 제어부310:
320: attitude information deriving unit
330:
335:
340:
350:
Claims (16)
상기 도출된 정보에 기초하여, 상기 사용자 장치에 의하여 제공되는 컨텐츠의 모덜리티(modality)나 출력을 결정하는 단계
를 포함하고,
상기 사용자의 자세나 자세 변화에 관한 정보는, 상기 사용자 장치가 상기 사용자에게 착용된 부위에 관한 정보 및 상기 부위가 나타내는 자세나 자세 변화에 관한 정보를 포함하는 방법.Deriving information on the attitude or attitude change of the user based on the motion data of the user device, the motion data being recorded by the sensor included in the user device over time, and
Determining a modality or output of the content provided by the user device based on the derived information,
Lt; / RTI >
Wherein the information on the posture or attitude change of the user includes information on the part worn by the user by the user apparatus and information on attitude or attitude change indicated by the part.
상기 정보 도출 단계는, 다수의 다른 사용자 장치에 관하여 수집되어 누적된 움직임 궤적 정보에 기초하여 수행되는 방법.The method according to claim 1,
Wherein the step of deriving information is performed based on accumulated motion trajectory information collected and accumulated for a plurality of different user devices.
상기 결정 단계는, 상기 사용자 장치가 상기 사용자의 신체의 특정 부위에 대하여 나타내는 추정되는 거리, 상기 사용자 장치의 속도, 상기 사용자 장치의 뒤집힘 또는 회전, 상기 사용자 장치의 다른 사용자 장치에 대한 거리, 상기 사용자 장치와 다른 사용자 장치의 상대적인 속도 및 상기 사용자 장치와 다른 사용자 장치의 상대적인 가속도 중 적어도 하나에 기초하여, 상기 컨텐츠의 상기 모덜리티를 결정하는 단계를 포함하는 방법.The method according to claim 1,
Wherein the determining comprises determining a distance between the user device and the user device based on at least one of: an estimated distance that the user device represents for a particular part of the user's body; a speed of the user device; an inversion or rotation of the user device; Determining the modality of the content based on at least one of a relative speed of the device and another user device and a relative acceleration of the user device and another user device.
상기 결정 단계는, 상기 사용자 장치가 상기 사용자의 신체의 특정 부위에 대하여 나타내는 추정되는 거리, 상기 사용자 장치의 속도, 상기 사용자 장치의 뒤집힘 또는 회전, 상기 사용자 장치의 다른 사용자 장치에 대한 거리, 상기 사용자 장치와 다른 사용자 장치의 상대적인 속도 및 상기 사용자 장치와 다른 사용자 장치의 상대적인 가속도 중 적어도 하나에 기초하여, 상기 컨텐츠의 상기 출력의 레벨을 결정하는 단계를 포함하는 방법.The method according to claim 1,
Wherein the determining comprises determining a distance between the user device and the user device based on at least one of: an estimated distance that the user device represents for a particular part of the user's body; a speed of the user device; an inversion or rotation of the user device; Determining a level of the output of the content based on at least one of a relative speed of the device and another user device and a relative acceleration of the user device and another user device.
상기 결정 단계는, 상기 사용자 장치가 상기 사용자의 신체의 특정 부위에 대하여 나타내는 추정되는 거리, 상기 사용자 장치의 속도, 상기 사용자 장치의 뒤집힘 또는 회전, 상기 사용자 장치의 다른 사용자 장치에 대한 거리, 상기 사용자 장치와 다른 사용자 장치의 상대적인 속도 및 상기 사용자 장치와 다른 사용자 장치의 상대적인 가속도 중 적어도 하나에 기초하여, 상기 컨텐츠의 상기 출력의 주파수를 결정하는 단계를 포함하는 방법.The method according to claim 1,
Wherein the determining comprises determining a distance between the user device and the user device based on at least one of: an estimated distance that the user device represents for a particular part of the user's body; a speed of the user device; an inversion or rotation of the user device; Determining a frequency of the output of the content based on at least one of a relative speed of the device and another user device and a relative acceleration of the user device and another user device.
상기 컨텐츠는 다른 사용자 장치에 의하여 제공되던 컨텐츠의 일부인 방법.The method according to claim 1,
Wherein the content is part of content served by another user device.
상기 컨텐츠는 다른 사용자 장치에 의하여 제공되던 컨텐츠의 일부 모덜리티에 해당하는 컨텐츠인 방법.The method according to claim 1,
Wherein the content is content corresponding to some modality of content provided by another user device.
상기 도출된 정보에 기초하여, 상기 사용자 장치에 의하여 제공되는 컨텐츠의 모덜리티나 출력을 결정하는 결정부
를 포함하고,
상기 사용자의 자세나 자세 변화에 관한 정보는, 상기 사용자 장치가 상기 사용자에게 착용된 부위에 관한 정보 및 상기 부위가 나타내는 자세나 자세 변화에 관한 정보를 포함하는 시스템.An attitude information deriving unit for deriving information on the attitude or attitude change of the user based on the motion data of the user device, the motion data being recorded by the sensor included in the user device over time, and
Determining a modality or an output of the content provided by the user apparatus based on the derived information,
Lt; / RTI >
Wherein the information on the posture or attitude change of the user includes information on the part worn by the user by the user apparatus and information on attitude or posture change indicated by the part.
상기 자세 정보 도출부는, 다수의 다른 사용자 장치에 관하여 수집되어 누적된 움직임 궤적 정보에 기초하여 상기 정보 도출을 수행하는 시스템.10. The method of claim 9,
Wherein the attitude information deriving unit performs the information deriving based on the accumulated motion trajectory information collected and accumulated with respect to a plurality of other user devices.
센서,
상기 센서에 의하여 시간의 흐름에 따라 기록되는 움직임 데이터에 기초하여 사용자의 자세나 자세 변화에 관한 정보를 도출하는 자세 정보 도출부, 및
상기 도출된 정보에 기초하여, 제공되는 컨텐츠의 모덜리티나 출력을 결정하는 결정부
를 포함하고,
상기 사용자의 자세나 자세 변화에 관한 정보는, 상기 사용자 장치가 상기 사용자에게 착용된 부위에 관한 정보 및 상기 부위가 나타내는 자세나 자세 변화에 관한 정보를 포함하는 사용자 장치.As a user device,
sensor,
An attitude information deriving unit for deriving information about a user's attitude or attitude change based on the motion data recorded in accordance with the passage of time by the sensor,
Based on the derived information, a determination unit that determines the modality or output of the provided content,
Lt; / RTI >
Wherein the information on the posture or the attitude change of the user includes information on the part worn by the user by the user apparatus and information on attitude or attitude change indicated by the part.
상기 결정부는, 상기 사용자 장치가 상기 사용자의 신체의 특정 부위에 대하여 나타내는 추정되는 거리, 상기 사용자 장치의 속도, 상기 사용자 장치의 뒤집힘 또는 회전, 상기 사용자 장치의 다른 사용자 장치에 대한 거리, 상기 사용자 장치와 다른 사용자 장치의 상대적인 속도 및 상기 사용자 장치와 다른 사용자 장치의 상대적인 가속도 중 적어도 하나에 기초하여, 상기 컨텐츠의 상기 모덜리티를 결정하는 사용자 장치.12. The method of claim 11,
The determining unit may determine whether or not the user equipment determines an estimated distance, a speed of the user equipment, an inversion or rotation of the user equipment, a distance to another user equipment of the user equipment, Determines the modality of the content based on at least one of a relative speed of the other user device and a relative acceleration of the user device and another user device.
상기 결정부는, 상기 사용자 장치가 상기 사용자의 신체의 특정 부위에 대하여 나타내는 추정되는 거리, 상기 사용자 장치의 속도, 상기 사용자 장치의 뒤집힘 또는 회전, 상기 사용자 장치의 다른 사용자 장치에 대한 거리, 상기 사용자 장치와 다른 사용자 장치의 상대적인 속도 및 상기 사용자 장치와 다른 사용자 장치의 상대적인 가속도 중 적어도 하나에 기초하여, 상기 컨텐츠의 상기 출력의 레벨을 결정하는 사용자 장치.12. The method of claim 11,
The determining unit may determine whether or not the user equipment determines an estimated distance, a speed of the user equipment, an inversion or rotation of the user equipment, a distance to another user equipment of the user equipment, Determines a level of the output of the content based on at least one of a relative speed of the user device and a relative acceleration of the user device and another user device.
상기 결정부는, 상기 사용자 장치가 상기 사용자의 신체의 특정 부위에 대하여 나타내는 추정되는 거리, 상기 사용자 장치의 속도, 상기 사용자 장치의 뒤집힘 또는 회전, 상기 사용자 장치의 다른 사용자 장치에 대한 거리, 상기 사용자 장치와 다른 사용자 장치의 상대적인 속도 및 상기 사용자 장치와 다른 사용자 장치의 상대적인 가속도 중 적어도 하나에 기초하여, 상기 컨텐츠의 상기 출력의 주파수를 결정하는 사용자 장치.12. The method of claim 11,
The determining unit may determine whether or not the user equipment determines an estimated distance, a speed of the user equipment, an inversion or rotation of the user equipment, a distance to another user equipment of the user equipment, Determine a frequency of the output of the content based on at least one of a relative speed of the user device and a relative acceleration of the user device and another user device.
상기 컨텐츠는 다른 사용자 장치에 의하여 제공되던 컨텐츠의 일부인 사용자 장치.12. The method of claim 11,
Wherein the content is part of content served by another user device.
상기 컨텐츠는 다른 사용자 장치에 의하여 제공되던 컨텐츠의 일부 모덜리티에 해당하는 컨텐츠인 사용자 장치.12. The method of claim 11,
Wherein the content is content corresponding to some modality of content provided by another user device.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20150023714 | 2015-02-16 | ||
KR1020150023714 | 2015-02-16 | ||
PCT/KR2015/013491 WO2016133276A1 (en) | 2015-02-16 | 2015-12-10 | Device or system for deciding modality or output of content on basis of posture of user or change in posture, method for deciding modality or output of content provided by user device, and computer-readable recording medium for recording computer program for executing the method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020177013546A Division KR20170065664A (en) | 2015-02-16 | 2015-12-10 | A device or system for determining a modality or output of content based on a change in a user's posture or attitude, a method for determining a modality or output of content provided by a user device, and a computer program for executing the method A computer-readable recording medium |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20180125637A true KR20180125637A (en) | 2018-11-23 |
Family
ID=56692548
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020187033357A KR20180125637A (en) | 2015-02-16 | 2015-12-10 | Device or system for deciding modality or output of content on basis of posture of user or change in posture, method for deciding modality or output of content provided by user device, and computer-readable recording medium for recording computer program for executing the method |
KR1020177013546A KR20170065664A (en) | 2015-02-16 | 2015-12-10 | A device or system for determining a modality or output of content based on a change in a user's posture or attitude, a method for determining a modality or output of content provided by a user device, and a computer program for executing the method A computer-readable recording medium |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020177013546A KR20170065664A (en) | 2015-02-16 | 2015-12-10 | A device or system for determining a modality or output of content based on a change in a user's posture or attitude, a method for determining a modality or output of content provided by a user device, and a computer program for executing the method A computer-readable recording medium |
Country Status (2)
Country | Link |
---|---|
KR (2) | KR20180125637A (en) |
WO (1) | WO2016133276A1 (en) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011106797A1 (en) * | 2010-02-28 | 2011-09-01 | Osterhout Group, Inc. | Projection triggering through an external marker in an augmented reality eyepiece |
CA2796451A1 (en) * | 2010-04-16 | 2011-10-20 | Nicholas J. Mastandrea | Wearable motion sensing computing interface |
ES2705526T3 (en) * | 2012-09-11 | 2019-03-25 | Life Corp Sa | Wearable communication platform |
KR102043200B1 (en) * | 2013-05-07 | 2019-11-11 | 엘지전자 주식회사 | Smart watch and method for controlling thereof |
US20150046828A1 (en) * | 2013-08-08 | 2015-02-12 | Samsung Electronics Co., Ltd. | Contextualizing sensor, service and device data with mobile devices |
-
2015
- 2015-12-10 KR KR1020187033357A patent/KR20180125637A/en not_active Application Discontinuation
- 2015-12-10 KR KR1020177013546A patent/KR20170065664A/en not_active Application Discontinuation
- 2015-12-10 WO PCT/KR2015/013491 patent/WO2016133276A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
KR20170065664A (en) | 2017-06-13 |
WO2016133276A1 (en) | 2016-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10311640B2 (en) | Method and apparatus for providing virtual space, and non-transitory computer readable data storage medium storing program causing computer to perform method | |
JP6844542B2 (en) | Information processing equipment, information processing methods and programs | |
CN104380237B (en) | Reactive user interface for head-mounted display | |
JP6402718B2 (en) | Information processing apparatus, control method, and program | |
US11609428B2 (en) | Information processing apparatus and information processing method | |
CN109743504A (en) | A kind of auxiliary photo-taking method, mobile terminal and storage medium | |
US10471305B2 (en) | Modification of an exercise plan | |
CN109547635A (en) | Screen anti-fluttering method, device, mobile terminal and readable storage medium storing program for executing | |
CN115335796A (en) | Determining geographic location based on human gestures | |
CN109391853A (en) | Barrage display methods, device, mobile terminal and readable storage medium storing program for executing | |
CN107249436A (en) | Fans drive power equipment | |
KR102018416B1 (en) | Device and system for monitoring micturition or ejaculation based on user's posture or change in posture, method of monitoring micturition or ejaculation, and computer-readable recording medium for implementing same method | |
CN109710050A (en) | A kind of display control method, wearable device and computer readable storage medium | |
US11943576B2 (en) | Contextual audio system | |
WO2023192254A1 (en) | Attention-based content visualization for an extended reality environment | |
KR20180125637A (en) | Device or system for deciding modality or output of content on basis of posture of user or change in posture, method for deciding modality or output of content provided by user device, and computer-readable recording medium for recording computer program for executing the method | |
CN109618042A (en) | Display distance control method, collapsible terminal and computer readable storage medium | |
US11641551B2 (en) | Bone conduction speaker and compound vibration device thereof | |
CN109799937A (en) | A kind of input control method, equipment and computer readable storage medium | |
CN108322592A (en) | Flexible screen terminal control method, flexible screen terminal and computer readable storage medium | |
US20210358470A1 (en) | Activity-based smart transparency | |
CN109656499A (en) | Flexible screen display control method, terminal and computer readable storage medium | |
CN109451177A (en) | A kind of display control method, equipment and computer readable storage medium | |
KR20180125638A (en) | Control device for dynamically providing control interface on basis of change in position of user, method for dynamically providing control interface in control device, and computer readable recording medium with computer program for executing method recorded thereon | |
CN110049248A (en) | A kind of reference object regulation method, equipment and computer readable storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |