KR101979868B1 - Method and system for controlling user device - Google Patents

Method and system for controlling user device Download PDF

Info

Publication number
KR101979868B1
KR101979868B1 KR1020170109488A KR20170109488A KR101979868B1 KR 101979868 B1 KR101979868 B1 KR 101979868B1 KR 1020170109488 A KR1020170109488 A KR 1020170109488A KR 20170109488 A KR20170109488 A KR 20170109488A KR 101979868 B1 KR101979868 B1 KR 101979868B1
Authority
KR
South Korea
Prior art keywords
user
state
user terminal
display
terminal
Prior art date
Application number
KR1020170109488A
Other languages
Korean (ko)
Other versions
KR20190023559A (en
Inventor
최철영
Original Assignee
(의)삼성의료재단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (의)삼성의료재단 filed Critical (의)삼성의료재단
Priority to KR1020170109488A priority Critical patent/KR101979868B1/en
Priority to PCT/KR2018/009794 priority patent/WO2019045372A1/en
Publication of KR20190023559A publication Critical patent/KR20190023559A/en
Application granted granted Critical
Publication of KR101979868B1 publication Critical patent/KR101979868B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H04M1/72569—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06K9/00597—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34—Microprocessors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38—Displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Abstract

본 발명의 일 실시예에 따르면 사용자 단말의 센서를 이용하여 사용자의 움직임을 판단하는 움직임 판단부; 상기 사용자 단말의 디스플레이 상태를 판단하는 디스플레이 판단부; 상기 사용자의 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 판단하는 시선 판단부; 및 상기 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 상기 단말 주시 상태에 기초하여 상기 사용자 단말의 구동 상태를 변경할지 여부를 결정하는 구동 상태 변경부; 를 포함하는 단말 제어 시스템이 제공된다.According to an embodiment of the present invention, there is provided a mobile terminal comprising: a motion determiner for determining a motion of a user using a sensor of a user terminal; A display determination unit for determining a display state of the user terminal; A sight line determining unit for determining a state of watching the user's terminal based on the sight line information of the user; And a driving state changing unit for determining whether to change a driving state of the user terminal based on the movement of the user, the display state of the user terminal, and the terminal watching state; The terminal control system comprising:

Description

사용자 단말 제어 시스템 및 방법{METHOD AND SYSTEM FOR CONTROLLING USER DEVICE}[0001] METHOD AND SYSTEM FOR CONTROLLING USER DEVICE [0002]

본 발명은 사용자 단말 제어 시스템 및 방법에 관한 것으로, 보다 상세하게는 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 사용자의 단말 주시 상태에 기초하여 사용자의 단말 제어를 제한할 수 있는 단말 제어 시스템 및 방법에 관한 것이다.The present invention relates to a user terminal control system and method, and more particularly, to a terminal control system and method capable of restricting user terminal control based on a user's movement, a display state of a user terminal, .

휴대용 사용자 단말, 특히 스마트폰의 사용이 대중화됨에 따라 이로 인한 문제점들이 대두되고 있다. 그 중 하나로 스마트폰을 들여다보며 길을 걷는 사람들로 인해 발생하는 보행 중 사고에 대한 문제점이 존재하며, 스마트폰을 들여다보며 걷는 사람들을 일컫는 말로 스마트폰(smart phone)과 좀비(zombie)의 합성어인 스몸비(somibie) 족이라는 신조어가 탄생할 정도이다. 스몸비 족들은 스마트폰 사용에 몰입해 주변 환경을 인지하지 못하고 걷기에 사고 위험도가 높다.As the use of portable user terminals, especially smart phones, becomes popular, problems arise. One of them is that there is a problem in the walking accident caused by the people walking on the road looking into the smartphone and it is a compound word of a smart phone and a zombie, There is a new word called somibie. The Szombie tribes are immersed in the use of smart phones and are not aware of their surroundings, so walking is dangerous.

일 조사기관은 최근 발생한 보행자 사고의 약 10%가 주위를 살피지 않고 스마트폰을 보며 걷다 일어나고, 그 중 매년 6명이 사망한다고 추정했다. 스몸비 족으로 인한 사고를 방지하기 위해 횡단보도 근처에 표지판을 설치하거나 사람이 접근하면 경고음을 발생시키는 등의 방법이 사용되고 있지만, 이는 사용자의 스마트폰 사용을 강제적으로 금지하는 효과는 없어 사고 발생에 대한 적극적인 해법이 되지 못하고 있다.A research institute estimated that about 10% of recent pedestrian accidents occurred while walking around looking at a smartphone without looking around, and six of them died each year. In order to prevent accidents caused by sommernies, signs are installed near pedestrian crossings, or when a person approached, a warning sound is generated. However, this does not have the effect of forcibly prohibiting the use of the user's smartphone. It is not an active solution to the problem.

본 발명은 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 사용자의 단말 주시 상태에 기초하여 사용자의 단말 제어를 제한함으로써 보행 중 단말 사용으로 인한 사고를 방지하는 것을 일 목적으로 한다.An object of the present invention is to prevent an accident caused by the use of a terminal while walking by restricting the user's terminal control based on the movement of the user, the display state of the user terminal and the state of watching the terminal of the user.

본 발명의 일 실시예에 따르면 사용자 단말의 센서를 이용하여 사용자의 움직임을 판단하는 움직임 판단부; 상기 사용자 단말의 디스플레이 상태를 판단하는 디스플레이 판단부; 상기 사용자의 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 판단하는 시선 판단부; 및 상기 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 상기 단말 주시 상태에 기초하여 상기 사용자 단말의 구동 상태를 변경할지 여부를 결정하는 구동 상태 변경부; 를 포함하는 단말 제어 시스템이 제공된다.According to an embodiment of the present invention, there is provided a mobile terminal comprising: a motion determiner for determining a motion of a user using a sensor of a user terminal; A display determination unit for determining a display state of the user terminal; A sight line determining unit for determining a state of watching the user's terminal based on the sight line information of the user; And a driving state changing unit for determining whether to change a driving state of the user terminal based on the movement of the user, the display state of the user terminal, and the terminal watching state; The terminal control system comprising:

본 발명에 있어서, 상기 구동 상태 변경부는, 상기 사용자의 움직임이 보행 중이고, 상기 사용자 단말의 현재 디스플레이 상태가 활성 상태이며, 상기 사용자의 현재 상기 단말 주시 상태가 양안 혹은 일안 주시 상태인 경우 상기 사용자 단말의 구동 상태를 변경할 수 있다.In the present invention, the driving state change unit may change the driving state of the user terminal when the user's motion is walking, the current display state of the user terminal is active, and the current terminal watching state of the user is a binocular or monaural watching state, Can be changed.

본 발명에 있어서, 상기 구동 상태 변경부는, 상기 사용자 단말의 구동 상태를 디스플레이 오프(off), 출력 장치 오프, 입출력 장치 오프 중 어느 하나로 변경할 수 있다.In the present invention, the driving state change unit may change the driving state of the user terminal to any one of a display off state, an output state state, and an input / output state state.

본 발명에 있어서, 상기 사용자 단말의 주변 환경 정보를 획득하는 환경 정보 획득부; 를 추가적으로 포함하고, 상기 구동 상태 변경부는 상기 사용자 단말의 주변 환경 정보를 참조하여 상기 구동 상태를 변경할지 여부를 결정할 수 있다. In an exemplary embodiment of the present invention, an environment information acquisition unit acquires environment information of the user terminal; And the driving state change unit may determine whether to change the driving state by referring to the surrounding environment information of the user terminal.

본 발명에 있어서, 상기 구동 상태 변경부는, 상기 사용자 단말의 주변 환경 정보에 기초하여 상기 사용자 단말의 위치가 실내라고 판단하는 경우, 상기 구동 상태를 변경하지 않는 것으로 결정할 수 있다.In the present invention, the driving state change unit may determine that the driving state is not changed when determining that the position of the user terminal is indoor based on the surrounding environment information of the user terminal.

본 발명에 있어서, 상기 움직임 판단부는, 상기 사용자 단말의 사용자가 기설정된 시간 내에 기설정된 값 이상의 연속된 걸음을 걸었다고 판단할 때 상기 사용자가 보행 중에 있다고 판단할 수 있다.In the present invention, the motion determining unit may determine that the user is walking when the user of the user terminal determines that the user has performed a continuous step of a preset value or more within a preset time.

본 발명에 있어서, 상기 디스플레이 판단부는, 상기 사용자 단말의 디스플레이 밝기 값이 기설정된 값 이상인 경우 상기 디스플레이 상태가 활성 상태라고 판단할 수 있다.In the present invention, the display determination unit may determine that the display state is active when the display brightness value of the user terminal is equal to or greater than a predetermined value.

본 발명에 있어서, 상기 디스플레이 판단부는, 상기 디스플레이 밝기 값이 기설정된 값 이상이더라도 디스플레이에 잠금 화면이 표시된 경우 상기 디스플레이 상태가 비활성 상태라고 판단할 수 있다.In the present invention, the display determining unit may determine that the display state is in an inactive state when a lock screen is displayed on the display even if the display brightness value is equal to or greater than a predetermined value.

본 발명에 있어서, 상기 시선 판단부는, 상기 사용자 단말의 홍채 인식 센서를 이용하거나 혹은 상기 사용자 단말의 촬상 장치로부터 얻은 이미지로부터 홍채를 인식하여 시선 정보를 획득할 수 있다.In the present invention, the eye gaze determination unit may acquire gaze information by using the iris recognition sensor of the user terminal or by recognizing the iris from the image obtained from the image pickup apparatus of the user terminal.

본 발명에 있어서, 상기 시선 판단부는, 상기 사용자의 홍채를 인식하여 시선 정보를 획득하고, 상기 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 양안 주시 상태, 일안 주시 상태, 미주시 상태 중 하나인 것으로 판단할 수 있다.In the present invention, the eye-gaze determining unit may recognize the iris of the user to obtain eye-gaze information, and determine whether the user's eye-watching state of the user is one of a binocular watching state, .

본 발명의 다른 실시예에 따르면, 사용자 단말의 센서를 이용하여 사용자의 움직임을 판단하는 움직임 판단 단계; 상기 사용자 단말의 디스플레이 상태를 판단하는 디스플레이 판단 단계; 상기 사용자의 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 판단하는 시선 판단 단계; 및 상기 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 상기 단말 주시 상태에 기초하여 상기 사용자 단말의 구동 상태를 변경할지 여부를 결정하는 구동 상태 변경 단계; 를 포함하는 단말 제어 방법이 제공된다.According to another embodiment of the present invention, there is provided a method for detecting a motion of a user using a sensor of a user terminal, A display determining step of determining a display state of the user terminal; A sight line determining step of determining a state of watching the user's terminal based on the sight line information of the user; And a driving state changing step of determining whether to change the driving state of the user terminal based on the movement of the user, the display state of the user terminal, and the terminal watching state; A terminal control method is provided.

본 발명에 있어서, 상기 구동 상태 변경 단계는, 상기 사용자의 움직임이 보행 중이고, 상기 사용자 단말의 현재 디스플레이 상태가 활성 상태이며, 상기 사용자의 현재 상기 단말 주시 상태가 양안 혹은 일안 주시 상태인 경우 상기 사용자 단말의 구동 상태를 변경할 수 있다.In the present invention, the driving state changing step may include a step of changing the driving state of the user when the user's motion is walking, the current display state of the user terminal is active, and the current terminal watching state of the user is binocular or monaural, The driving state of the terminal can be changed.

본 발명에 있어서, 상기 구동 상태 변경 단계는, 상기 사용자 단말의 구동 상태를 디스플레이 오프(off), 출력 장치 오프, 입출력 장치 오프 중 어느 하나로 변경할 수 있다.In the present invention, the driving state changing step may change the driving state of the user terminal to any one of display off, output device off, and input / output device off.

본 발명에 있어서, 상기 사용자 단말의 주변 환경 정보를 획득하는 환경 정보 획득 단계; 를 추가적으로 포함하고, 상기 구동 상태 변경 단계는 상기 사용자 단말의 주변 환경 정보를 참조하여 상기 구동 상태를 변경할지 여부를 결정할 수 있다. In the present invention, an environment information obtaining step of obtaining environmental information of the user terminal; And the driving state changing step may determine whether to change the driving state by referring to the surrounding environment information of the user terminal.

본 발명에 있어서, 상기 구동 상태 변경 단계는, 상기 사용자 단말의 주변 환경 정보에 기초하여 상기 사용자 단말의 위치가 실내라고 판단하는 경우, 상기 구동 상태를 변경하지 않는 것으로 결정할 수 있다.In the present invention, the driving state changing step may determine that the driving state is not changed when the position of the user terminal is determined to be the room based on the surrounding environment information of the user terminal.

본 발명에 있어서, 상기 움직임 판단 단계는, 상기 사용자 단말의 사용자가 기설정된 시간 내에 기설정된 값 이상의 연속된 걸음을 걸었다고 판단할 때 상기 사용자가 보행 중에 있다고 판단할 수 있다.In the present invention, the motion determining step may determine that the user is walking when the user of the user terminal determines that the user has performed a continuous step of a preset value or more within a preset time.

본 발명에 있어서, 상기 디스플레이 판단 단계는, 상기 사용자 단말의 디스플레이 밝기 값이 기설정된 값 이상인 경우 상기 디스플레이 상태가 활성 상태라고 판단할 수 있다.In the present invention, the display determining step may determine that the display state is active when the display brightness value of the user terminal is equal to or greater than a predetermined value.

본 발명에 있어서, 상기 디스플레이 판단 단계는, 상기 디스플레이 밝기 값이 기설정된 값 이상이더라도 디스플레이에 잠금 화면이 표시된 경우 상기 디스플레이 상태가 비활성 상태라고 판단할 수 있다.In the present invention, the display determination step may determine that the display state is in an inactive state when a lock screen is displayed on the display even if the display brightness value is equal to or greater than a predetermined value.

본 발명에 있어서, 상기 시선 판단 단계는, 상기 사용자 단말의 홍채 인식 센서를 이용하거나 혹은 상기 사용자 단말의 촬상 장치로부터 얻은 이미지로부터 홍채를 인식하여 시선 정보를 획득할 수 있다.In the present invention, the eye-gaze determination step may acquire gaze information by using the iris recognition sensor of the user terminal or by recognizing the iris from the image obtained from the image pickup apparatus of the user terminal.

본 발명에 있어서, 상기 시선 판단 단계는, 상기 사용자의 홍채를 인식하여 시선 정보를 획득하고, 상기 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 양안 주시 상태, 일안 주시 상태, 미주시 상태 중 하나인 것으로 판단할 수 있다.In the present invention, the eye-gaze determination step may include: acquiring gaze information by recognizing the iris of the user, and determining the gazing state of the user on the basis of the gaze information as one of a binocular viewing state, . ≪ / RTI >

추가적으로, 본 발명의 어느 한 항에 따른 방법을 실행하기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램이 제공된다.Additionally, a computer program stored on a computer-readable medium for performing the method according to any one of the present invention is provided.

본 발명에 의하면, 조건을 만족할 때 사용자의 단말 제어를 제한함으로써 보행 중 단말 사용으로 인한 사고를 방지할 수 있다.According to the present invention, it is possible to prevent an accident caused by the use of the terminal while walking by restricting the user's terminal control when the condition is satisfied.

도 1은 본 발명의 일 실시예에 따른 단말 제어 시스템의 네트워크 환경의 예를 도시한 도면이다.
도 2 는 본 발명의 일 실시예에 있어서, 사용자 단말 및 서버의 내부 구성을 설명하기 위한 블록도이다.
도 3 은 본 발명의 일 실시예에 따른 프로세서의 내부 구성을 나타낸 것이다.
도 4 는 본 발명의 일 실시예에 따른 단말 제어 방법을 시계열적으로 나타낸 순서도이다.1 is a diagram illustrating an example of a network environment of a terminal control system according to an embodiment of the present invention.
2 is a block diagram illustrating an internal configuration of a user terminal and a server according to an exemplary embodiment of the present invention.
3 illustrates an internal structure of a processor according to an embodiment of the present invention.
4 is a time-sequentially flowchart illustrating a terminal control method according to an exemplary embodiment of the present invention.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.The following detailed description of the invention refers to the accompanying drawings, which illustrate, by way of illustration, specific embodiments in which the invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, the specific shapes, structures, and characteristics described herein may be implemented by changing from one embodiment to another without departing from the spirit and scope of the invention. It should also be understood that the location or arrangement of individual components within each embodiment may be varied without departing from the spirit and scope of the present invention. Therefore, the following detailed description is not to be taken in a limiting sense, and the scope of the present invention should be construed as encompassing the scope of the appended claims and all equivalents thereof. In the drawings, like reference numbers designate the same or similar components throughout the several views.

이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 여러 실시예에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings in order to facilitate a person skilled in the art to which the present invention pertains.

도 1은 본 발명의 일 실시예에 따른 단말 제어 시스템의 네트워크 환경의 예를 도시한 도면이다.1 is a diagram illustrating an example of a network environment of a terminal control system according to an embodiment of the present invention.

도 1의 단말 제어 시스템은 복수의 사용자 단말들(110, 120, 130, 140), 서버(150) 및 네트워크(170)를 포함하는 예를 나타내고 있다. 이러한 도 1은 발명의 설명을 위한 일례로 사용자 단말의 수나 서버의 수가 도 1과 같이 한정되는 것은 아니다. 1 shows an example in which the terminal control system includes a plurality of user terminals 110, 120, 130 and 140, a server 150 and a network 170. [ FIG. 1 is a diagram for explaining the invention. The number of user terminals and the number of servers are not limited to those shown in FIG.

복수의 사용자 단말들(110, 120, 130, 140)은 컴퓨터 장치로 구현되는 고정형 단말이거나 이동형 단말일 수 있다. 복수의 사용자 단말들(110, 120, 130, 140)의 예를 들면, 스마트폰(smart phone), 휴대폰, 네비게이션, 컴퓨터, 노트북, 디지털방송용 단말, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 태블릿 PC 등이 있다. 일례로 사용자 단말 1(110)은 무선 또는 유선 통신 방식을 이용하여 네트워크(170)를 통해 다른 사용자 단말들(120, 130, 140) 및/또는 서버(150)와 통신할 수 있다.The plurality of user terminals 110, 120, 130, 140 may be a fixed terminal implemented as a computer device or a mobile terminal. A plurality of user terminals 110, 120, 130 and 140 may be a smart phone, a mobile phone, a navigation device, a computer, a notebook, a digital broadcasting terminal, a PDA (personal digital assistant), a portable multimedia player ), And tablet PCs. For example, user terminal 1 110 may communicate with other user terminals 120, 130, 140 and / or server 150 via network 170 using a wireless or wired communication scheme.

통신 방식은 제한되지 않으며, 네트워크(170)가 포함할 수 있는 통신망(일례로, 이동통신망, 유선 인터넷, 무선 인터넷, 방송망)을 활용하는 통신 방식뿐만 아니라 기기들간의 근거리 무선 통신 역시 포함될 수 있다. 예를 들어, 네트워크(170)는, PAN(personal area network), LAN(local area network), CAN(campus area network), MAN(metropolitan area network), WAN(wide area network), BBN(broadband network), 인터넷 등의 네트워크 중 하나 이상의 임의의 네트워크를 포함할 수 있다. 또한, 네트워크(170)는 버스 네트워크, 스타 네트워크, 링 네트워크, 메쉬 네트워크, 스타-버스 네트워크, 트리 또는 계층적(hierarchical) 네트워크 등을 포함하는 네트워크 토폴로지 중 임의의 하나 이상을 포함할 수 있으나, 이에 제한되지 않는다.The communication method is not limited, and may include a communication method using a communication network (for example, a mobile communication network, a wired Internet, a wireless Internet, a broadcasting network) that the network 170 may include, as well as a short-range wireless communication between the devices. For example, the network 170 may be a personal area network (LAN), a local area network (LAN), a campus area network (CAN), a metropolitan area network (MAN), a wide area network (WAN) , A network such as the Internet, and the like. The network 170 may also include any one or more of a network topology including a bus network, a star network, a ring network, a mesh network, a star-bus network, a tree or a hierarchical network, It is not limited.

서버(150)는 복수의 사용자 단말들(110, 120, 130, 140)과 네트워크(170)를 통해 통신하여 명령, 코드, 파일, 컨텐츠, 서비스 등을 제공하는 컴퓨터 장치 또는 복수의 컴퓨터 장치들로 구현될 수 있다.The server 150 is a computer device or a plurality of computer devices that communicate with a plurality of user terminals 110, 120, 130 and 140 via a network 170 to provide commands, codes, files, Can be implemented.

일례로, 서버(150)는 네트워크(170)를 통해 접속한 사용자 단말 1(110)로 어플리케이션의 설치를 위한 파일을 제공할 수 있다. 이 경우 사용자 단말 1(110)은 서버(150)로부터 제공된 파일을 이용하여 본 발명의 일 실시예에 따른 단말 제어 어플리케이션을 설치할 수 있다. 또한 사용자 단말 1(110)이 포함하는 운영체제(Operating System, OS) 및 적어도 하나의 프로그램(일례로 브라우저나 설치된 어플리케이션)의 제어에 따라 서버(150)에 접속하여 서버(150)가 제공하는 서비스나 컨텐츠를 제공받을 수 있다. 예를 들어, 사용자 단말1(110)이 어플리케이션의 제어에 따라 네트워크(170)를 통해 단말 제어 정보를 서버(150)로 전송하면, 서버(150)는 단말 제어 정보에 대응하는 코드를 사용자 단말 1(110)로 전송할 수 있고, 사용자 단말 1(110)은 어플리케이션의 제어에 따라 단말 기능을 제한할 수 있다. 다른 예로, 서버(150)는 데이터 송수신을 위한 통신 세션을 설정하고, 설정된 통신 세션을 통해 복수의 사용자 단말들(110, 120, 130, 140)간의 데이터 송수신을 라우팅할 수도 있다. 이하의 명세서에서는, 본 발명의 일 실시예에 따른 단말 제어 방법들이 사용자 단말 및 서버에 의해 모두 수행될 수 있다고 가정하기로 한다.For example, the server 150 may provide a file for installation of an application to the user terminal 1 (110) connected through the network 170. In this case, the user terminal 1 (110) may install a terminal control application according to an embodiment of the present invention using a file provided from the server (150). The server 150 may be connected to the server 150 according to the control of an operating system (OS) included in the user terminal 1 110 and at least one program (for example, a browser or an installed application) Contents can be provided. For example, when the user terminal 1 110 transmits the terminal control information to the server 150 via the network 170 under the control of the application, the server 150 transmits a code corresponding to the terminal control information to the user terminal 1 (110), and the user terminal (110) can restrict the terminal function according to the control of the application. As another example, the server 150 may establish a communication session for data transmission and reception, and may route data transmission / reception between the plurality of user terminals 110, 120, 130, 140 through a set communication session. In the following description, it is assumed that terminal control methods according to an embodiment of the present invention can be performed by both a user terminal and a server.

도 2 는 본 발명의 일 실시예에 있어서, 사용자 단말 및 서버의 내부 구성을 설명하기 위한 블록도이다.2 is a block diagram illustrating an internal configuration of a user terminal and a server according to an exemplary embodiment of the present invention.

도 2에서는 하나의 사용자 단말에 대한 예로서 사용자 단말 1(110), 그리고 하나의 서버에 대한 예로서 서버(150)의 내부 구성을 설명한다. 다른 사용자 단말들(120, 130, 140)들 역시 동일한 또는 유사한 내부 구성을 가질 수 있다.In FIG. 2, the internal configuration of the user terminal 1 110 as an example for one user terminal and the server 150 as an example for one server will be described. Other user terminals 120,130, 140 may also have the same or similar internal configuration.

사용자 단말 1(110)과 서버(150)는 메모리(211, 221), 프로세서(212, 222), 통신 모듈(213, 223) 그리고 입출력 인터페이스(214, 224)를 포함할 수 있다. 메모리(211, 221)는 컴퓨터에서 판독 가능한 기록 매체로서, RAM(random access memory), ROM(read only memory) 및 디스크 드라이브와 같은 비소멸성 대용량 기록장치(permanent mass storage device)를 포함할 수 있다. 또한, 메모리(211, 221)에는 운영체제와 적어도 하나의 프로그램 코드(일례로 사용자 단말 1(110)에 설치되어 구동되는 브라우저나 상술한 어플리케이션 등을 위한 코드)가 저장될 수 있다. 이러한 소프트웨어 구성요소들은 드라이브 메커니즘(drive mechanism)을 이용하여 메모리(211, 221)와는 별도의 컴퓨터에서 판독 가능한 기록 매체로부터 로딩될 수 있다. 이러한 별도의 컴퓨터에서 판독 가능한 기록 매체는 플로피 드라이브, 디스크, 테이프, DVD/CD-ROM 드라이브, 메모리 카드 등의 컴퓨터에서 판독 가능한 기록 매체를 포함할 수 있다. 다른 실시예에서 소프트웨어 구성요소들은 컴퓨터에서 판독 가능한 기록 매체가 아닌 통신 모듈(213, 223)을 통해 메모리(211, 221)에 로딩될 수도 있다. 예를 들어, 적어도 하나의 프로그램은 개발자들 또는 어플리케이션의 설치 파일을 배포하는 파일 배포 시스템(일례로 상술한 서버(150))이 네트워크(170)를 통해 제공하는 파일들에 의해 설치되는 프로그램(일례로 상술한 어플리케이션)에 기반하여 메모리(211, 221)에 로딩될 수 있다.The user terminal 1 110 and the server 150 may include memories 211 and 221, processors 212 and 222, communication modules 213 and 223 and input / output interfaces 214 and 224. The memories 211 and 221 may be a computer-readable recording medium and may include a permanent mass storage device such as a random access memory (RAM), a read only memory (ROM), and a disk drive. In addition, the operating system and at least one program code (for example, a code for a browser installed in the user terminal 1 (110) or the above-described application) may be stored in the memories 211 and 221. [ These software components may be loaded from a computer readable recording medium separate from the memories 211 and 221 using a drive mechanism. Such a computer-readable recording medium may include a computer-readable recording medium such as a floppy drive, a disk, a tape, a DVD / CD-ROM drive, and a memory card. In other embodiments, the software components may be loaded into memory 211, 221 via communication modules 213, 223 rather than a computer readable recording medium. For example, at least one program may be a program installed by a file distribution system (for example, the server 150 described above) that distributes installation files of developers or applications, May be loaded into the memory 211, 221 based on the application described above.

프로세서(212, 222)는 기본적인 산술, 로직 및 입출력 연산을 수행함으로써, 컴퓨터 프로그램의 명령을 처리하도록 구성될 수 있다. 명령은 메모리(211, 221) 또는 통신 모듈(213, 223)에 의해 프로세서(212, 222)로 제공될 수 있다. 예를 들어 프로세서(212, 222)는 메모리(211, 221)와 같은 기록 장치에 저장된 프로그램 코드에 따라 수신되는 명령을 실행하도록 구성될 수 있다.Processors 212 and 222 may be configured to process instructions of a computer program by performing basic arithmetic, logic, and input / output operations. The instructions may be provided to the processors 212 and 222 by the memories 211 and 221 or the communication modules 213 and 223. For example, the processor 212, 222 may be configured to execute a command received in accordance with a program code stored in a recording device, such as the memory 211, 221.

통신 모듈(213, 223)은 네트워크(170)를 통해 사용자 단말 1(110)과 서버(150)가 서로 통신하기 위한 기능을 제공할 수 있으며, 다른 사용자 단말(일례로 사용자 단말 2(120)) 또는 다른 서버(일례로 서버(150))와 통신하기 위한 기능을 제공할 수 있다. 일례로, 사용자 단말 1(110)의 프로세서(212)가 메모리(211)와 같은 기록 장치에 저장된 프로그램 코드에 따라 생성한 요청(일례로 컨텐츠에 대한 스트리밍 서비스 요청)이 통신 모듈(213)의 제어에 따라 네트워크(170)를 통해 서버(150)로 전달될 수 있다. 역으로, 서버(150)의 프로세서(222)의 제어에 따라 제공되는 제어 신호나 명령, 컨텐츠, 파일 등이 통신 모듈(223)과 네트워크(170)를 거쳐 사용자 단말 1(110)의 통신 모듈(213)을 통해 사용자 단말 1(110)로 수신될 수 있다. 예를 들어 통신 모듈(213)을 통해 수신된 서버(150)의 제어 신호나 명령 등은 프로세서(212)나 메모리(211)로 전달될 수 있고, 컨텐츠나 파일 등은 사용자 단말 1(110)이 더 포함할 수 있는 저장 매체로 저장될 수 있다.The communication modules 213 and 223 may provide a function for the user terminal 110 and the server 150 to communicate with each other through the network 170 and may communicate with other user terminals Or to communicate with another server (e.g., server 150). For example, when the processor 212 of the user terminal 1 110 receives a request (e.g., a streaming service request for content) generated in accordance with a program code stored in a recording device such as the memory 211, To the server 150 via the network 170 in accordance with the < / RTI > Conversely, control signals, commands, contents, files, and the like provided under the control of the processor 222 of the server 150 are transmitted to the communication module 223 of the user terminal 110 via the communication module 223 and the network 170 213 to the user terminal 1 (110). For example, the control signals and commands of the server 150 received through the communication module 213 may be transmitted to the processor 212 or the memory 211, and the contents or files may be transmitted to the user terminal 110 May be stored as a storage medium that may further include a < RTI ID = 0.0 >

입출력 인터페이스(214, 224)는 입출력 장치(215)와의 인터페이스를 위한 수단일 수 있다. 예를 들어, 입력 장치는 키보드 또는 마우스 등의 장치를, 그리고 출력 장치는 어플리케이션의 통신 세션을 표시하기 위한 디스플레이와 같은 장치를 포함할 수 있다. 다른 예로 입출력 인터페이스(214)는 터치스크린과 같이 입력과 출력을 위한 기능이 하나로 통합된 장치와의 인터페이스를 위한 수단일 수도 있다. 보다 구체적인 예로, 사용자 단말 1(110)의 프로세서(212)는 메모리(211)에 로딩된 컴퓨터 프로그램의 명령을 처리함에 있어서 서버(150)나 사용자 단말 2(120)가 제공하는 데이터를 이용하여 구성되는 서비스 화면이나 컨텐츠가 입출력 인터페이스(214)를 통해 디스플레이에 표시될 수 있다.The input / output interfaces 214 and 224 may be means for interfacing with the input / output device 215. For example, the input device may include a device such as a keyboard or a mouse, and the output device may include a device such as a display for displaying a communication session of the application. As another example, the input / output interface 214 may be a means for interfacing with a device having integrated functions for input and output, such as a touch screen. The processor 212 of the user terminal 1 110 uses the data provided by the server 150 or the user terminal 2 120 in processing a command of the computer program loaded in the memory 211, A service screen or contents can be displayed on the display through the input / output interface 214. [

또한, 다른 실시예들에서 사용자 단말 1(110) 및 서버(150)는 도 2의 구성요소들보다 더 많은 구성요소들을 포함할 수도 있다. 그러나, 대부분의 종래기술적 구성요소들을 명확하게 도시할 필요성은 없다. 예를 들어, 사용자 단말 1(110)은 상술한 입출력 장치(215) 중 적어도 일부를 포함하도록 구현되거나 또는 트랜시버(transceiver), GPS(Global Positioning System) 모듈, 카메라, 각종 센서, 데이터베이스 등과 같은 다른 구성요소들을 더 포함할 수도 있다.Also, in other embodiments, user terminal 1 110 and server 150 may include more components than the components of FIG. However, there is no need to clearly illustrate most prior art components. For example, the user terminal 1 110 may be implemented to include at least some of the input / output devices 215 described above, or may include other components such as a transceiver, Global Positioning System (GPS) module, camera, Elements.

도 3 은 본 발명의 일 실시예에 따른 프로세서의 내부 구성을 나타낸 것이다.3 illustrates an internal structure of a processor according to an embodiment of the present invention.

프로세서(212)는 사용자 단말을 제어하기 위한 명령을 포함할 수 있다. 프로세서(212) 내에서 본 발명의 일 실시예에 따른 단말 제어 기능을 수행하는 구성은 도 3 에 도시된 바와 같이 움직임 판단부(310), 디스플레이 판단부(320), 시선 판단부(330), 환경 정보 획득부(340) 및 구동 상태 변경부(350)에 의해 수행될 수 있다.The processor 212 may include instructions for controlling the user terminal. 3, a configuration for performing a terminal control function according to an embodiment of the present invention in the processor 212 includes a motion determiner 310, a display determiner 320, a gaze determiner 330, The environment information obtaining unit 340 and the drive state changing unit 350. [

먼저, 움직임 판단부(310)는 사용자 단말의 센서를 이용하여 사용자의 움직임을 판단한다. 이때, 사용자 단말의 센서는 사용자가 GPS 센서, 가속도 센서 혹은 자이로스코프 센서로서, 현재 사용자 단말의 위치 변화를 감지하는 것일 수 있다. 특히, 움직임 판단부(310)는 사용자 단말의 센서의 센싱값을 이용하여 사용자의 움직임을 판단할 수 있다. 예를 들어, 움직임 판단부(310)는 현재 사용자의 움직임을, 보행 중, 정지 중 혹은 교통수단을 이용하여 이동 중 등으로 판단할 수 있다. 일 예로, 사용자 단말의 이동 속도가 0 인 경우 정지 중인 것으로, 기설정된 기준치 이하인 경우 보행 중인 것으로, 초과하는 경우 교통 수단을 이용하여 이동 중인 것으로 판단할 수 있다.First, the motion determiner 310 determines the movement of the user using the sensor of the user terminal. At this time, the sensor of the user terminal may be a GPS sensor, an acceleration sensor, or a gyroscope sensor in which the user senses a change in the position of the current user terminal. In particular, the motion determiner 310 may determine a motion of the user using the sensing value of the sensor of the user terminal. For example, the motion determining unit 310 can determine the current user's motion as being in the middle of walking, stopping, or moving using the transportation means. For example, when the moving speed of the user terminal is 0, it is determined that the mobile terminal is stationary.

본 발명의 일 실시예에 따르면, 사용자 단말의 이동 속도에 의한 판단 외에도, 움직임 판단부(310)는 사용자가 기설정된 값 이상의 연속된 걸음을 걸었다고 감지할 때 상기 사용자가 보행 중에 있다고 판단할 수 있다. 즉, 사용자 단말의 센서를 이용하여 사용자의 걸음을 감지하고, 감지된 연속된 걸음 수가 일정 값 이상일 때 보행중이라 판단할 수 있다. 예를 들어, 연속된 3 걸음 이상 감지된 경우 보행 중이라 판단할 수 있다. 이 밖에도, 움직임 판단부(310)는 현재 사용자 단말이 정지 중인 경우에도, 기설정된 시간 내에 연속된 걸음을 걸었다고 감지할 경우 사용자가 보행 중에 있다고 판단할 수 있다. 예를 들어, 사용자가 연속된 걸음을 걷다가 신호등을 기다리며 잠시 정지하는 경우에도 사고를 예방하기 위해 사용자 단말의 제어를 제한할 필요가 있으므로, 현재로부터 1 분전까지 연속된 걸음을 5 걸음 이상 걸은 경우에도 보행 중이라 판단할 수 있다.According to an embodiment of the present invention, in addition to the determination based on the moving speed of the user terminal, the motion determination unit 310 may determine that the user is walking when it detects that the user has performed a continuous step equal to or greater than a preset value have. That is, it is possible to detect the user's step by using the sensor of the user terminal, and to determine that the user is walking when the number of consecutive steps detected is equal to or greater than a predetermined value. For example, it can be judged that a person is walking when a three or more consecutive steps are detected. In addition, the motion determiner 310 can determine that the user is walking when the user terminal detects that the current user's step is paused in a predetermined period of time. For example, even if the user pauses for a short time while walking along a series of steps, it is necessary to restrict the control of the user terminal in order to prevent an accident. Therefore, It can be judged that the person is walking.

다음으로, 디스플레이 판단부(320)는 사용자 단말의 디스플레이 상태를 판단한다. 이때, 디스플레이 상태란 사용자 단말의 시각적 출력 장치로서의 디스플레이의 상태를 나타내는 것으로, 본 발명의 일 실시예에 따르면 디스플레이 상태는 활성 상태와 비활성 상태 중 하나일 수 있다. 본 발명의 일 실시예에 따른 디스플레이의 활성 상태란, 사용자 단말의 디스플레이의 밝기값이 기설정된 밝기 이상인 상태를 의미할 수 있다. 즉, 본 발명의 일 실시예에 따른 단말 제어 방법은 보행 중 사용자가 디스플레이 화면에 주의를 빼앗기는 것을 방지하기 위해, 현재의 디스플레이의 밝기값이 사용자가 인지할 수 있는 수준의 밝기값을 가지는지 여부를 판단할 수 있다. 디스플레이 판단부(320)는 디스플레이의 밝기값이 기준치 미만인 경우 디스플레이 상태가 비활성 상태라고 판단할 수 있다.Next, the display determination unit 320 determines the display state of the user terminal. At this time, the display state indicates the state of the display as a visual output device of the user terminal, and according to an embodiment of the present invention, the display state can be one of an active state and an inactive state. The active state of the display according to an exemplary embodiment of the present invention may mean that the brightness of the display of the user terminal is equal to or greater than a predetermined brightness. That is, in order to prevent the user from being caught on the display screen while the user is walking, the terminal control method according to an exemplary embodiment of the present invention determines whether the brightness value of the current display has a brightness value that the user can perceive Can be determined. The display determination unit 320 may determine that the display state is in an inactive state when the brightness value of the display is less than the reference value.

선택적 실시예에서, 비록 디스플레이의 밝기값이 기준치 이상인 경우에도, 현재 디스플레이에 잠금 화면이 표시되는 경우, 디스플레이 판단부(320)는 디스플레이가 비활성 상태에 있다고 판단할 수 있다. 잠금화면이 디스플레이에 표시되는 것은 시간만을 확인 하는 등 사용자의 주의를 분산시키지 않는 일시적인 행위를 하기 위한 것으로 보행 중 스마트폰 사용으로 인한 사고 위험이 적기 때문이다.In an alternative embodiment, the display determination unit 320 may determine that the display is in an inactive state, even if the brightness value of the display is greater than or equal to the reference value, if a lock screen is currently displayed on the display. The lock screen is displayed on the display because it is a temporary action that does not disperse the user's attention such as checking only the time, and the risk of accident caused by the use of the smartphone while walking is small.

다음으로, 시선 판단부(330)는 사용자의 시선 정보에 기초하여 사용자의 단말 주시 상태를 판단할 수 있다. 보다 상세히, 시선 판단부(330)는 사용자의 홍채를 인식하여 획득한 사용자의 시선 정보로부터, 시선 방향의 연장선이 단말의 디스플레이를 영역 내에 존재하는지 여부를 판단할 수 있다. 이때, 시선 판단부(330)는 사용자의 시선 방향의 연장선이 단말의 디스플레이 내부로 향하는지 여부에 따라 사용자의 단말 주시 상태를 판단할 수 있다. 또한, 시선 판단부(330)는 사용자의 2 개의 홍채 각각에 대해 시선 정보를 획득하여, 단말 주시 상태를 판단할 수 있다.Next, the gaze determining unit 330 can determine the user's watching state of the user based on the gaze information of the user. In more detail, from the visual information of the user obtained by recognizing the iris of the user, the visual determination unit 330 can determine whether an extension of the visual direction exists in the display area of the terminal. At this time, the gaze determining unit 330 may determine whether the user is watching the terminal according to whether the extension of the user's gaze direction is toward the inside of the display of the terminal. In addition, the eye-gaze determining unit 330 can obtain eye-gaze information for each of the two irises of the user to determine the eye-watching state.

본 발명의 일 실시예에 따르면, 시선 판단부(330)는 홍채 인식 센서 혹은 사용자 단말의 촬상 장치로 획득한 이미지로부터 홍채를 인식할 수 있다. 즉, 시선 판단부(330)는 사용자 단말에 구비된 홍채 인식 센서를 이용하여 시선 방향을 결정할 수 있지만, 사용자 단말에 홍채 인식 센서가 구비되지 않은 경우에도 내장된 촬상 장치로 이미지를 획득한 후 사용자의 홍채를 인식하여 시선 방향을 결정할 수 있다.According to an embodiment of the present invention, the eye-gaze determining unit 330 can recognize the iris from the image acquired by the iris recognition sensor or the imaging device of the user terminal. That is, the gaze direction determining unit 330 can determine the gaze direction using the iris recognition sensor provided in the user terminal. However, even when the iris recognition sensor is not provided in the user terminal, The direction of the eye can be determined.

본 발명의 일 실시예에 따른 시선 판단부(330)는 사용자의 시선 정보에 기초하여 현재 사용자의 단말 주시 상태를 구분할 수 있다. 일 예에서, 시선 판단부(330)는 사용자의 양안의 시선 방향이 모두 단말의 디스플레이를 향할 때 제1 주시 상태, 일안의 시선 방향만 단말의 디스플레이를 향할 때 제2 주시 상태, 양안의 시선 방향이 모두 단말의 디스플레이를 벗어날 때 미주시 상태로 판단할 수 있다.The gaze determining unit 330 according to an embodiment of the present invention can distinguish the current user's watching state of the user based on the gaze information of the user. In one example, the eye-gaze determining unit 330 determines whether the eye gazing direction of the user's eyes is toward the display of the terminal, the second gazing state when only the gaze direction of the eye gazes toward the display of the terminal, All of them can be judged to be in an unscheduled state when they are out of the display of the terminal.

다음으로, 환경 정보 획득부(340)는 단말의 주변 환경 정보를 획득한다. 단말의 주변 환경이란, 단말의 위치, 주변 조도, 현재 시각 등의 주변 환경에 관한 모든 정보일 수 있다. 본 발명의 일 실시예에 따르면 사용자의 단말 사용을 제한하되, 주변 환경 정보를 고려하여 사용을 제한할 수 있다. 예를 들어, 환경 정보 획득부(340)는 현재 단말의 위치가 실내인지 실외인지에 대한 정보를 획득할 수 있다.Next, the environment information acquisition unit 340 acquires the environment information of the terminal. The surrounding environment of the terminal may be all information related to the surrounding environment such as the location of the terminal, the surrounding illuminance, and the current time. According to an embodiment of the present invention, the use of the terminal of the user is restricted while the use of the terminal is restricted by considering the surrounding environment information. For example, the environment information obtaining unit 340 may obtain information on whether the current location of the terminal is indoors or outdoors.

다음으로, 구동 상태 변경부(350)는 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 단말 주시 상태에 기초하여 사용자 단말의 구동 상태를 변경할지 여부를 결정한다. 이때, 사용자의 움직임은 움직임 판단부(310)로부터 획득하고, 사용자 단말의 디스플레이 상태는 디스플레이 판단부(320)로부터 획득하며, 사용자의 단말 주시 상태는 시선 판단부(330)로부터 획득할 수 있다.Next, the driving state changing unit 350 determines whether to change the driving state of the user terminal based on the user's motion, the display state of the user terminal, and the terminal watching state. At this time, the user's motion is obtained from the motion determining unit 310, the display state of the user terminal is obtained from the display determining unit 320, and the user's terminal watching state can be obtained from the gaze determining unit 330.

보다 상세히, 구동 상태 변경부(350)는 사용자의 움직임, 사용자 단말의 디스플레이 상태, 단말 주시 상태가 기설정된 조건을 모두 만족할 사용자 단말의 구동 상태를 변경하여 사용자의 단말 제어를 제한할 수 있다. 이때, 구동 상태 변경부(350)는 단말 제어의 제한 정도가 상(上), 중(中), 하(下) 정도가 되도록 구동 상태를 변경할 수 있다. 즉, 일괄적으로 구동 상태를 변경하는 것이 아니라, 구동 상태 변경의 충분 조건인 사용자의 움직임, 현재 사용자 단말의 디스플레이 상태 및 단말 주시 상태를 만족하는 정도에 따라 구동 상태 변경 시 단말 제어의 제한 정도는 달라질 수 있다. 예를 들어, 단말 제어의 제한 정도가 상 정도인 경우는 단말의 제한 정도가 하 정도인 경우보다 단말 제어에 대한 엄격한 제한이 걸릴 수 있다.In more detail, the driving state changing unit 350 may restrict the user's terminal control by changing the driving state of the user terminal that satisfies all conditions of the user's motion, the display state of the user terminal, and the terminal watching state. At this time, the driving state changing unit 350 can change the driving state such that the degree of restriction of the terminal control is about the upper, middle, lower (lower). That is, the degree of restriction of the terminal control at the time of the drive state change depends on the degree of satisfaction of the motion of the user, which is a sufficient condition for the drive state change, the display state of the current user terminal and the terminal watching state, It can be different. For example, when the degree of restriction of the terminal control is an upper limit, a strict restriction on the terminal control may be applied rather than a case where the limit of the terminal is low.

본 발명의 일 실시예에 따르면, 단말 제어의 제한 정도가 하, 중 상인 것에 각각 대응하도록 구동 상태 변경부(350)는 사용자 단말의 구동 상태를 디스플레이 오프(off) 상태, 출력 장치 오프 상태, 입출력 장치 오프 상태 중 하나의 상태로 변경할 수 있다. 이때, 디스플레이 오프 상태란 디스플레이의 조도를 기설정된 값 이하로 설정하여 실질적으로 디스플레이 기능을 정지시키는 상태이고, 출력 장치 오프 상태란 디스플레이, 오디오, 햅틱 등 사용자 단말에 존재하는 모든 출력 장치의 기능을 정지키는 상태이며, 입출력 장치 오프 상태는 출력 장치뿐만 아니라 전원 버튼, 볼륨 버튼, 블루투스 키보드 등 사용자 단말의 입력 장치의 기능을 정지시켜 사용자가 입력 장치를 이용하여 사용자 단말을 제어할 수 없도록 만드는 상태이다. 즉, 디스플레이 오프 상태, 출력 장치 오프 상태 및 입출력 장치 오프 상태의 순으로 단말 장치 제어의 제한 정도가 높다. 일반적으로 터치스크린 디스플레이의 경우 디스플레이 오프 시 디스플레이를 통한 입력이 제한되므로, 디스플레이 오프 상태에서 디스플레이 입력 기능이 제한될 수 있다.According to an embodiment of the present invention, the driving state changing unit 350 may change the driving state of the user terminal to a display off state, an output apparatus off state, an input / output state, The device can be switched to one of the OFF states. At this time, the display off state is a state in which the display function is substantially stopped by setting the illuminance of the display below a predetermined value, and the output device off state is a state in which all the output devices existing in the user terminal such as display, audio, And the input / output device off state is a state in which the user can not control the user terminal using the input device by stopping the function of the input device of the user terminal such as the power button, the volume button, and the Bluetooth keyboard as well as the output device. That is, the degree of restriction of the control of the terminal device is high in the order of the display off state, the output device off state, and the input / output device off state. Generally, in the case of a touch screen display, since the input through the display is limited when the display is off, the display input function may be restricted in the display off state.

예를 들어, 구동 상태 변경부(350)는 사용자의 움직임이 연속된 1걸음 이상이 감지된 상태이고, 디스플레이 상태가 활성 상태이며, 단말 주시 상태가 제2 주시 상태인 경우 사용자 단말의 구동 상태를 디스플레이 오프 상태로 설정할 수 있다. 이때, 스피커 출력을 통한 음악 혹은 음성안내(예를 들어, 네비게이션 기능)는 정상적으로 동작할 수 있다. 한편, 다른 실시예에서, 사용자의 움직임이 연속된 3 걸음 이상이 감지된 상태이고, 디스플레이 상태가 활성 상태이며, 단말 주시 상태가 제1 주시 상태인 경우 사용자 단말의 구동 상태를 출력 장치 오프 상태로 설정하여 디스플레이뿐만 아니라 모든 출력 장치의 기능을 정지시킬 수 있다. 즉, 사용자의 움직임이 빠를수록, 디스플레이 상태가 활성 상태일수록(혹은 디스플레이의 밝기 정도가 클 수록), 단말 주시 상태가 높을수록 높은 정도의 단말 제어의 제한 정도를 높일 수 있다 For example, the driving state changing unit 350 may be configured to change the driving state of the user terminal when the user's movement is consecutive one step or more, the display state is active, and the terminal watching state is the second viewing state Display-off state. At this time, the music or voice guidance through the speaker output (for example, the navigation function) can be normally operated. Meanwhile, in another embodiment, when the user's motion is detected in more than three consecutive steps, the display state is in the active state, and the terminal watch state is in the first watch state, the driving state of the user terminal is switched to the output device off state It is possible to stop the functions of all the output devices as well as the display by setting them. That is, as the user moves faster, the display state becomes active (or the brightness of the display becomes higher), the higher the terminal watching state, the higher the degree of restriction of the terminal control

또한, 구동 상태 변경부(350)는 환경 정보 획득부(340)가 획득한 단말의 위치, 주변 조도, 현재 시각 등의 주변 환경를 참조하여 단말의 구동 상태를 변경할 수 있다. 예를 들어, 구동 상태 변경부(350)는 현재 단말의 위치가 실내인 경우, 사용자가 단말을 사용한다 하여도 그 위험성이 적기 때문에 구동 상태를 변경할 조건을 만족하는 경우에도 구동 상태를 변경하지 않을 수 있다. 더불어, 동일한 실내의 경우라도 가정집인지 혹은 작업장인지 여부에 따라 구동 상태 변경 여부를 결정할 수 있다. 즉, 실내의 경우라도 작업장의 경우에는 단말 제어를 제한할 필요가 있으므로, 사용자 혹은 시스템 설정에 의해 작업장으로 등록된 위치에서는 실외와 동일한 기준으로 단말의 구동 상태를 변경할 수 있다.The driving state changing unit 350 may change the driving state of the terminal by referring to the surrounding environment such as the position of the terminal, the ambient illuminance, and the current time acquired by the environment information obtaining unit 340. For example, when the current position of the terminal is indoor, the driving state changing unit 350 may not change the driving state even when the user changes the driving state because the risk is low even if the user uses the terminal. . In addition, it is possible to decide whether or not to change the driving state depending on whether it is a home or workplace even in the same room. That is, even in the case of a room, it is necessary to restrict the terminal control in the case of the workplace, so that the driving state of the terminal can be changed based on the same criterion as the outdoors at the position registered by the user or the system setting in the workplace.

또한, 본 발명의 일 실시예에 따른 구동 상태 변경부(350)는 주변 환경 정보에 따라 단말의 구동 상태를 변경하는 조건을 변경할 수 있다. 다른 예시에서, 구동 상태 변경부(350)는 단말의 주변 조도가 낮은 경우, 디스플레이 상태를 활성 상태로 판단하는 기준 밝기값을 낮춤으로써 낮은 밝기에도 디스플레이를 활성 상태로 판단할 수 있다.  In addition, the driving state changing unit 350 according to the embodiment of the present invention can change a condition for changing the driving state of the terminal according to the surrounding environment information. In another example, the driving state changing unit 350 may determine that the display is active even at low brightness by lowering the reference brightness value for determining the display state to be active when the peripheral illuminance of the terminal is low.

또한, 본 발명의 일 실시예에 따르면 구동 상태 변경부(350)는 타 사용자에게 발생하는 사고 상황 정보를 참조하여, 단말의 구동 상태를 변경할 수 있다. 즉, 구동 상태 변경부(350)는 타 사용자의 제어 제한 조건에 기초하여 단말 사용자의 제어 제한 조건(사용자의 움직임, 단말의 디스플레이 상태, 단말 주시 상태의 조합 조건) 및 그에 대응하는 구동 상태 변경 여부를 설정할 수 있다. 이때, 구동 상태 변경부(350)는 단말 사용자의 사고 상황 정보에 기초하여 제어 제한 조건 및 그에 대응하는 구동 상태 변경 여부를 설정할 수 있으며, 설정된 제어 제한 조건 및 구동 상태 변경 여부를 타 사용자들과 공유할 수 있다. 이때, 제어 제한 조건 및 그에 대응하는 구동 상태 변경 여부를 공유하는 타 사용자들은 해당 단말기 사용자들과 유사한 행동 양상을 갖는 사용자 그룹의 타 사용자들일 수 있다. 동일한 사용자 그룹의 제어 제한 정도 및 그에 대응하는 구동 상태 변경 여부는 사고 상황 정보가 누적됨에 따라 갱신될 수 있다. 예를 들어, 사용자와 유사한 행동 양상을 갖는 사용자 그룹의 타 사용자가, 구동 상태가 디스플레이 오프 상태에서 오디오로 음악을 듣다가 자동차의 경적소리를 듣지 못하여 사고가 발생한 경우, 동일한 제어 제한 조건 하에서도 구동 상태를 디스플레이 오프 상태보다 높은 제한 조건인 출력 장치 오프 상태로 변경할 수 있다.In addition, according to an embodiment of the present invention, the driving state change unit 350 may change the driving state of the terminal by referring to the accident state information generated by the other user. That is, the driving state changing unit 350 determines whether or not the control restriction condition (user's motion, display state of the terminal, combination condition of the terminal watching state) of the terminal user and the driving state change corresponding thereto Can be set. At this time, the driving state change unit 350 can set the control restriction condition and the corresponding driving state change state based on the accident situation information of the terminal user, and can share the control restriction condition and the driving state change with other users can do. At this time, the other users sharing the control restriction condition and the corresponding driving status change may be other users of the user group having similar behavior patterns to the corresponding terminal users. The degree of control of the same user group and whether or not the corresponding driving state is changed can be updated as the accident situation information accumulates. For example, when another user of a user group having a similar behavior pattern to the user experiences an accident due to the user not being able to hear the sound of the car while listening to the music while the driving state is in the display off state, State to an output device off state which is a restriction condition higher than the display-off state.

한편, 구동 상태 변경부(350)는 구동 상태를 변경하기 전 알림 메시지를 출력할 수 있다. 예를 들어, 구동 상태 변경부(350)는 단말의 구동 상태를 변경할 것을 판단한 경우, '보행 중이므로 디스플레이가 꺼집니다' 라는 알림 메시지를 출력할 수 있다.On the other hand, the driving state changing unit 350 may output a notification message before changing the driving state. For example, when the driving state changing unit 350 determines to change the driving state of the terminal, the driving state changing unit 350 may output a notification message " the display is turned off because it is walking. &Quot;

혹은, 구동 상태 변경부(350)는 사용자의 움직임, 사용자 단말의 디스플레이 상태, 단말 주시 상태 중 하나라도 기설정된 조건을 만족하지 않을 경우 현재 사용자 단말의 구동 상태를 유지할 수 있다. 예를 들어, 사용자의 움직임이 보행 중이고 디스플레이 상태가 활성 상태인 경우에도, 단말 주시 상태가 미주시 상태인 경우 사용자 단말의 구동 상태를 변경하지 않고 현재 구동 상태를 유지할 수 있다. 사용자가 단말을 이용함으로 인해 발생하는 위험이 적기 때문이다.Alternatively, the driving state changing unit 350 may maintain the driving state of the current user terminal if one of the motion of the user, the display state of the user terminal, and the terminal watching state is not satisfied. For example, even when the user's motion is walking and the display state is active, the current driving state can be maintained without changing the driving state of the user terminal when the terminal watching state is in an unexpected state. This is because the risk caused by the user using the terminal is small.

도 4 는 본 발명의 일 실시예에 따른 단말 제어 방법을 시계열적으로 나타낸 순서도이다.4 is a time-sequentially flowchart illustrating a terminal control method according to an exemplary embodiment of the present invention.

도 4 의 단말 제어 방법의 각 단계는 본 발명의 일 실시예에 따르면 단말 제어 시스템의 프로세서에 의해 수행될 수 있다.Each step of the terminal control method of FIG. 4 may be performed by a processor of the terminal control system according to an embodiment of the present invention.

도 4 를 참조하면, 먼저 본 발명의 일 실시예에 따른 단말 제어 방법은 사용자 단말의 센서를 이용하여 사용자의 움직임을 판단한다(S41).Referring to FIG. 4, a terminal control method according to an embodiment of the present invention determines a user's movement using a sensor of a user terminal (S41).

다음으로, 사용자 단말의 디스플레이 상태를 판단한다(S42).Next, the display state of the user terminal is determined (S42).

다음으로, 사용자의 시선 정보에 기초하여 사용자의 단말 주시 상태를 판단(S43).Next, the user's terminal watching state is determined based on the user's sight line information (S43).

다음으로, 사용자 단말의 주변 환경 정보를 획득한다(S44).Next, the surrounding environment information of the user terminal is obtained (S44).

다음으로, 사용자의 움직임, 현재 사용자 단말의 디스플레이 상태 및 단말 주시 상태에 기초하여 사용자 단말의 구동 상태를 변경할지 여부를 결정한다(S45).Next, it is determined whether to change the driving state of the user terminal based on the movement of the user, the display state of the current user terminal, and the terminal watching state (S45).

본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.The specific acts described in the present invention are, by way of example, not intended to limit the scope of the invention in any way. For brevity of description, descriptions of conventional electronic configurations, control systems, software, and other functional aspects of such systems may be omitted. Also, the connections or connecting members of the lines between the components shown in the figures are illustrative of functional connections and / or physical or circuit connections, which may be replaced or additionally provided by a variety of functional connections, physical Connection, or circuit connections. Also, unless explicitly mentioned, such as " essential ", " importantly ", etc., it may not be a necessary component for application of the present invention.

본 발명의 명세서(특히 특허청구범위에서)에서 “상기”의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.The use of the terms " above " and similar indication words in the specification of the present invention (particularly in the claims) may refer to both singular and plural. In addition, in the present invention, when a range is described, it includes the invention to which the individual values belonging to the above range are applied (unless there is contradiction thereto), and each individual value constituting the above range is described in the detailed description of the invention The same. Finally, the steps may be performed in any suitable order, unless explicitly stated or contrary to the description of the steps constituting the method according to the invention. The present invention is not necessarily limited to the order of description of the above steps. The use of all examples or exemplary language (e.g., etc.) in this invention is for the purpose of describing the present invention only in detail and is not to be limited by the scope of the claims, It is not. It will also be appreciated by those skilled in the art that various modifications, combinations, and alterations may be made depending on design criteria and factors within the scope of the appended claims or equivalents thereof.

이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.The embodiments of the present invention described above can be implemented in the form of program instructions that can be executed through various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program commands, data files, data structures, and the like, alone or in combination. The program instructions recorded on the computer-readable recording medium may be those specifically designed and configured for the present invention or may be those known and used by those skilled in the computer software arts. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROM and DVD, magneto-optical media such as floptical disks, medium, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code, such as those generated by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be modified into one or more software modules for performing the processing according to the present invention, and vice versa.

이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항과 한정된 실시예 및 도면에 의하여 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위하여 제공된 것일 뿐, 본 발명이 상기 실시예에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정과 변경을 꾀할 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, Those skilled in the art will appreciate that various modifications and changes may be made thereto without departing from the scope of the present invention.

따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.Accordingly, the spirit of the present invention should not be construed as being limited to the above-described embodiments, and all ranges that are equivalent to or equivalent to the claims of the present invention as well as the claims .

Claims (21)

사용자 단말의 센서를 이용하여 사용자의 움직임을 판단하는 움직임 판단부;
상기 사용자 단말의 디스플레이 상태를 판단하는 디스플레이 판단부;
상기 사용자의 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 판단하는 시선 판단부; 및
상기 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 상기 단말 주시 상태에 기초하여 상기 사용자 단말의 구동 상태를 변경할지 여부를 결정하는 구동 상태 변경부;를 포함하고,
상기 구동 상태 변경부는
상기 사용자의 사고 상황 정보에 기초하여 제어 제한 조건 및 그에 대응하는 구동 상태 변경 여부를 설정하고 상기 제어 제한 조건 및 구동 상태 변경 여부를 타 사용자들과 공유하며 타 사용자의 제어 제한 조건에 기초하여 상기 사용자의 제어 제한 조건 및 상기 사용자의 제어 제한 조건에 대응하는 구동 상태 변경 여부를 설정하는 점을 특징으로 하는, 단말 제어 시스템.A motion determiner for determining a motion of a user using a sensor of a user terminal;
A display determination unit for determining a display state of the user terminal;
A sight line determining unit for determining a state of watching the user's terminal based on the sight line information of the user; And
And a driving state changing unit for determining whether to change a driving state of the user terminal based on the movement of the user, the display state of the user terminal, and the terminal watching state,
The driving state changing unit
Setting a control restriction condition and a corresponding drive state change on the basis of the accident state information of the user, sharing the control restriction condition and the drive state change with other users, and based on the control restriction condition of another user, And sets whether to change the driving state corresponding to the control restriction condition of the user. 제 1 항에 있어서,
상기 구동 상태 변경부는, 상기 사용자의 움직임이 보행 중이고, 상기 사용자 단말의 현재 디스플레이 상태가 활성 상태이며, 상기 사용자의 현재 상기 단말 주시 상태가 양안 혹은 일안 주시 상태인 경우 상기 사용자 단말의 구동 상태를 변경하는, 단말 제어 시스템.The method according to claim 1,
The driving state changing unit may change the driving state of the user terminal when the user's motion is walking, the current display state of the user terminal is active, and the current terminal watching state of the user is binocular or mono viewing Terminal control system. 제 1 항에 있어서,
상기 구동 상태 변경부는,
상기 사용자 단말의 구동 상태를 디스플레이 오프(off), 출력 장치 오프, 입출력 장치 오프 중 어느 하나로 변경하는, 단말 제어 시스템.The method according to claim 1,
Wherein the driving state changing unit comprises:
And changes the driving state of the user terminal to any one of display off, output device off, and input / output device off. 제 1 항에 있어서,
상기 사용자 단말의 주변 환경 정보를 획득하는 환경 정보 획득부; 를 추가적으로 포함하고,
상기 구동 상태 변경부는 상기 사용자 단말의 주변 환경 정보를 참조하여 상기 구동 상태를 변경할지 여부를 결정하는, 단말 제어 시스템.The method according to claim 1,
An environment information acquiring unit acquiring environment information of the user terminal; , ≪ / RTI >
Wherein the driving state changing unit determines whether to change the driving state by referring to the surrounding environment information of the user terminal. 제 4 항에 있어서,
상기 구동 상태 변경부는,
상기 사용자 단말의 주변 환경 정보에 기초하여 상기 사용자 단말의 위치가 실내라고 판단하는 경우, 상기 구동 상태를 변경하지 않는 것으로 결정하는, 단말 제어 시스템.5. The method of claim 4,
Wherein the driving state changing unit comprises:
And determines that the driving state is not changed when it determines that the location of the user terminal is indoor based on the environment information of the user terminal. 제 1 항에 있어서,
상기 움직임 판단부는,
상기 사용자 단말의 사용자가 기설정된 시간 내에 기설정된 값 이상의 연속된 걸음을 걸었다고 판단할 때 상기 사용자가 보행 중에 있다고 판단하는, 단말 제어 시스템.The method according to claim 1,
Wherein the motion determiner comprises:
And determines that the user is walking when it is determined that the user of the user terminal has made a continuous step of a predetermined value or more within a predetermined time. 제 1 항에 있어서,
상기 디스플레이 판단부는,
상기 사용자 단말의 디스플레이 밝기 값이 기설정된 값 이상인 경우 상기 디스플레이 상태가 활성 상태라고 판단하는, 단말 제어 시스템.The method according to claim 1,
The display determination unit may determine,
And determines that the display state is active when the display brightness value of the user terminal is equal to or greater than a predetermined value. 제 7 항에 있어서,
상기 디스플레이 판단부는,
상기 디스플레이 밝기 값이 기설정된 값 이상이더라도 디스플레이에 잠금 화면이 표시된 경우 상기 디스플레이 상태가 비활성 상태라고 판단하는, 단말 제어 시스템.8. The method of claim 7,
The display determination unit may determine,
Wherein the display control unit determines that the display state is in an inactive state when a lock screen is displayed on the display even if the display brightness value is equal to or greater than a predetermined value. 제 1 항에 있어서,
상기 시선 판단부는,
상기 사용자 단말의 홍채 인식 센서를 이용하거나 혹은 상기 사용자 단말의 촬상 장치로부터 얻은 이미지로부터 홍채를 인식하여 시선 정보를 획득하는, 단말 제어 시스템.The method according to claim 1,
The eye-
And acquires gaze information by using an iris recognition sensor of the user terminal or by recognizing an iris from an image obtained from an image capturing apparatus of the user terminal. 제 1 항에 있어서,
상기 시선 판단부는,
상기 사용자의 홍채를 인식하여 시선 정보를 획득하고, 상기 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 양안 주시 상태, 일안 주시 상태, 미주시 상태 중 하나인 것으로 판단하는, 단말 제어 시스템.The method according to claim 1,
The eye-
Acquires gaze information by recognizing the iris of the user, and determines that the user's gazing state of the user is one of a binocular gaze state, a monocular gaze state, and an unexpected state based on the gaze information. 사용자 단말의 센서를 이용하여 사용자의 움직임을 판단하는 움직임 판단 단계;
상기 사용자 단말의 디스플레이 상태를 판단하는 디스플레이 판단 단계;
상기 사용자의 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 판단하는 시선 판단 단계; 및
상기 사용자의 움직임, 사용자 단말의 디스플레이 상태 및 상기 단말 주시 상태에 기초하여 상기 사용자 단말의 구동 상태를 변경할지 여부를 결정하는 구동 상태 변경 단계;를 포함하고,
상기 구동 상태 변경 단계는
상기 사용자의 사고 상황 정보에 기초하여 제어 제한 조건 및 그에 대응하는 구동 상태 변경 여부를 설정하고 상기 제어 제한 조건 및 구동 상태 변경 여부를 타 사용자들과 공유하며 타 사용자의 제어 제한 조건에 기초하여 상기 사용자의 제어 제한 조건 및 상기 사용자의 제어 제한 조건에 대응하는 구동 상태 변경 여부를 설정하는, 단말 제어 방법.A motion determination step of determining a motion of a user using a sensor of a user terminal;
A display determining step of determining a display state of the user terminal;
A sight line determining step of determining a state of watching the user's terminal based on the sight line information of the user; And
And a driving state changing step of determining whether to change the driving state of the user terminal based on the movement of the user, the display state of the user terminal, and the terminal watching state,
The driving state changing step
Setting a control restriction condition and a corresponding drive state change on the basis of the accident state information of the user, sharing the control restriction condition and the drive state change with other users, and based on the control restriction condition of another user, And a driving state change corresponding to the control constraint condition of the user. 제 11 항에 있어서,
상기 구동 상태 변경 단계는,
상기 사용자의 움직임이 보행 중이고, 상기 사용자 단말의 현재 디스플레이 상태가 활성 상태이며, 상기 사용자의 현재 상기 단말 주시 상태가 양안 혹은 일안 주시 상태인 경우 상기 사용자 단말의 구동 상태를 변경하는, 단말 제어 방법.12. The method of claim 11,
Wherein the driving state changing step includes:
Wherein the driving state of the user terminal is changed when the motion of the user is walking, the current display state of the user terminal is active, and the current terminal watching state of the user is binocular or monaural. 제 11 항에 있어서,
상기 구동 상태 변경 단계는,
상기 사용자 단말의 구동 상태를 디스플레이 오프(off), 출력 장치 오프, 입출력 장치 오프 중 어느 하나로 변경하는, 단말 제어 방법.12. The method of claim 11,
Wherein the driving state changing step includes:
And changing the driving state of the user terminal to any one of display off, output device off, and input / output device off. 제 11 항에 있어서,
상기 사용자 단말의 주변 환경 정보를 획득하는 환경 정보 획득 단계; 를 추가적으로 포함하고,
상기 구동 상태 변경 단계는 상기 사용자 단말의 주변 환경 정보를 참조하여 상기 구동 상태를 변경할지 여부를 결정하는, 단말 제어 방법.12. The method of claim 11,
Acquiring environment information of the user terminal; , ≪ / RTI >
Wherein the driving state changing step determines whether to change the driving state by referring to the surrounding environment information of the user terminal. 제 14 항에 있어서,
상기 구동 상태 변경 단계는,
상기 사용자 단말의 주변 환경 정보에 기초하여 상기 사용자 단말의 위치가 실내라고 판단하는 경우, 상기 구동 상태를 변경하지 않는 것으로 결정하는, 단말 제어 방법.15. The method of claim 14,
Wherein the driving state changing step includes:
And determines that the driving state is not changed when it determines that the location of the user terminal is indoor based on the environment information of the user terminal. 제 11 항에 있어서,
상기 움직임 판단 단계는,
상기 사용자 단말의 사용자가 기설정된 시간 내에 기설정된 값 이상의 연속된 걸음을 걸었다고 판단할 때 상기 사용자가 보행 중에 있다고 판단하는, 단말 제어 방법.12. The method of claim 11,
Wherein,
When the user of the user terminal judges that the user has performed a continuous step of a preset value or more within a predetermined time, the user terminal is judging that the user is walking. 제 11 항에 있어서,
상기 디스플레이 판단 단계는,
상기 사용자 단말의 디스플레이 밝기 값이 기설정된 값 이상인 경우 상기 디스플레이 상태가 활성 상태라고 판단하는, 단말 제어 방법.12. The method of claim 11,
The display determination step may include:
And determines that the display state is active when the display brightness value of the user terminal is equal to or greater than a preset value. 제 17 항에 있어서,
상기 디스플레이 판단 단계는,
상기 디스플레이 밝기 값이 기설정된 값 이상이더라도 디스플레이에 잠금 화면이 표시된 경우 상기 디스플레이 상태가 비활성 상태라고 판단하는, 단말 제어 방법.18. The method of claim 17,
The display determination step may include:
And determines that the display state is in an inactive state when a lock screen is displayed on the display even if the display brightness value is equal to or greater than a predetermined value. 제 11 항에 있어서,
상기 시선 판단 단계는,
상기 사용자 단말의 홍채 인식 센서를 이용하거나 혹은 상기 사용자 단말의 촬상 장치로부터 얻은 이미지로부터 홍채를 인식하여 시선 정보를 획득하는, 단말 제어 방법.12. The method of claim 11,
The eye-
And acquiring gaze information by using an iris recognition sensor of the user terminal or by recognizing an iris from an image obtained from an image capturing apparatus of the user terminal. 제 11 항에 있어서,
상기 시선 판단 단계는,
상기 사용자의 홍채를 인식하여 시선 정보를 획득하고, 상기 시선 정보에 기초하여 상기 사용자의 단말 주시 상태를 양안 주시 상태, 일안 주시 상태, 미주시 상태 중 하나인 것으로 판단하는, 단말 제어 방법.12. The method of claim 11,
The eye-
Acquiring gaze information by recognizing the iris of the user, and determining that the user's watching state of the user is one of a binocular viewing state, a monocular viewing state, and an unexpected state based on the gaze information. 제 11 항 내지 제 20 항 중 어느 한 항에 따른 방법을 실행하기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램.20. A computer program stored on a computer-readable medium for carrying out the method according to any one of claims 11 to 20.
KR1020170109488A 2017-08-29 2017-08-29 Method and system for controlling user device KR101979868B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020170109488A KR101979868B1 (en) 2017-08-29 2017-08-29 Method and system for controlling user device
PCT/KR2018/009794 WO2019045372A1 (en) 2017-08-29 2018-08-24 User terminal control system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170109488A KR101979868B1 (en) 2017-08-29 2017-08-29 Method and system for controlling user device

Publications (2)

Publication Number Publication Date
KR20190023559A KR20190023559A (en) 2019-03-08
KR101979868B1 true KR101979868B1 (en) 2019-05-17

Family

ID=65527857

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170109488A KR101979868B1 (en) 2017-08-29 2017-08-29 Method and system for controlling user device

Country Status (2)

Country Link
KR (1) KR101979868B1 (en)
WO (1) WO2019045372A1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014232411A (en) * 2013-05-29 2014-12-11 富士通テン株式会社 Portable terminal, and danger notification system
JP2015099493A (en) * 2013-11-19 2015-05-28 日本電気通信システム株式会社 Portable terminal, control method and control program
KR101534093B1 (en) 2014-03-14 2015-07-06 플러스기술주식회사 Device and method for providing restriction of using device while walking

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101726849B1 (en) * 2010-08-06 2017-04-13 삼성전자주식회사 Mobile terminal, Apparatus and Method for detection of danger
KR20140108994A (en) * 2013-03-04 2014-09-15 주식회사 엘지유플러스 Terminal and method for controlling display based on movement

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014232411A (en) * 2013-05-29 2014-12-11 富士通テン株式会社 Portable terminal, and danger notification system
JP2015099493A (en) * 2013-11-19 2015-05-28 日本電気通信システム株式会社 Portable terminal, control method and control program
KR101534093B1 (en) 2014-03-14 2015-07-06 플러스기술주식회사 Device and method for providing restriction of using device while walking

Also Published As

Publication number Publication date
KR20190023559A (en) 2019-03-08
WO2019045372A1 (en) 2019-03-07

Similar Documents

Publication Publication Date Title
US10909759B2 (en) Information processing to notify potential source of interest to user
JP6585300B2 (en) Generate notifications by electronic devices based on contextual data in response to voice phrases from users
KR102058891B1 (en) Reactive user interface for head-mounted display
US9363361B2 (en) Conduct and context relationships in mobile devices
KR101826189B1 (en) Always-on camera sampling strategies
KR102264600B1 (en) Systems and methods for adaptive notification networks
KR20140113465A (en) Computing system with content-based alert mechanism and method of operation thereof
US20120194554A1 (en) Information processing device, alarm method, and program
US8823507B1 (en) Variable notification alerts
US20140007010A1 (en) Method and apparatus for determining sensory data associated with a user
CN107409131B (en) Techniques for seamless data streaming experience
US11683366B2 (en) Systems, methods, and media for causing an action to be performed on a user device
EP2807534B1 (en) Methods and devices to determine a preferred electronic device
KR102404118B1 (en) Postponing the state change of an information affecting the graphical user interface until during the conditon of inattentiveness
KR20180083185A (en) Apparatus and method for providing adaptive user interface
CN106462251B (en) Display control apparatus, display control method, and program
KR101979868B1 (en) Method and system for controlling user device
WO2020135106A1 (en) Method and apparatus for tracking target object, monitoring device, and storage medium
KR101623365B1 (en) Method and apparatus for controlling mobile device in lock status
US11074034B2 (en) Information processing apparatus, information processing method, and program
US9160923B1 (en) Method and system for dynamic information display using optical data
RU2614930C2 (en) System and method for execution control of augmented reality applications installed on user's device, depending on environment state
JP2021182174A (en) Information processing apparatus, information processing method, and program
JP2018160002A (en) Collision prevention device, communication system, collision prevention method, and computer program
US10204506B2 (en) SOS signal transmitting method, and electronic device using same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant