KR101529241B1 - 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법 - Google Patents

전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법 Download PDF

Info

Publication number
KR101529241B1
KR101529241B1 KR1020130119223A KR20130119223A KR101529241B1 KR 101529241 B1 KR101529241 B1 KR 101529241B1 KR 1020130119223 A KR1020130119223 A KR 1020130119223A KR 20130119223 A KR20130119223 A KR 20130119223A KR 101529241 B1 KR101529241 B1 KR 101529241B1
Authority
KR
South Korea
Prior art keywords
content
information
user
sound
electronic device
Prior art date
Application number
KR1020130119223A
Other languages
English (en)
Other versions
KR20150040560A (ko
Inventor
황성재
Original Assignee
황성재
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 황성재 filed Critical 황성재
Priority to KR1020130119223A priority Critical patent/KR101529241B1/ko
Publication of KR20150040560A publication Critical patent/KR20150040560A/ko
Application granted granted Critical
Publication of KR101529241B1 publication Critical patent/KR101529241B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

전자기기의 컨텐츠 기반 전자 기기 제어 시스템으로서, 상기 전자기기를 사용하는 사용자의 시선을 추적하는 시선추적부; 상기 시선추적부로부터 추척된 사용자의 시선에 대응되는 전자기기의 관찰지점을 판단하는 관찰지점 판단부; 및 상기 관찰지점 판단부가 판단한 관찰지점에 표시되는 컨텐츠에 따라 소리, 시각 정보 또는 촉각 정보 중 적어도 어느 하나를 제어하는 정보 제어부를 포함하는 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템이 제공된다.
본 발명에 따르면, 전자기기를 사용하는 사용하는 사용자 시선으로부터 사용자가 보고 있는 컨텐츠를 판단하고, 이에 따라 사용자가 보고 있는 것으로 판단하는 컨텐츠에 따라 시각, 소리, 촉각 정보 등을 다양한 방식으로 표시한다. 이에 따라 별도의 조작 또는 제어 제스쳐 없이도, 컨텐츠에 대응하는 다양한 정보가 사용자에게 전달되며, 이에 따라 컨텐츠에 대한 사용자 흥미와 몰입도가 크게 증가할 수 있다.

Description

전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법{System and method for controlling an electronic device based upon contents displayed on the electronic device}
본 발명은 사용자 시선 추적을 이용한 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법에 관한 것으로, 보다 상세하게는 사용자 시선 추적을 통하여, 컨텐츠 변수를 제어하며, 이로써 사용자로 하여금 컨텐츠에 대한 몰입도와 편의성을 증가시킬 수 있는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법에 관한 것이다.
전자 기기의 종류가 다양해지면서, 전자 기기를 소형화하면서 표시 화면을 대형화할 수 있는 다양한 기술이 제안되고 있다. 전자 기기의 소형화에 따라 접촉 입력 장치를 통해 사용자의 입력을 인식하는 전자 기기가 늘어나고 있으며, 특히 표시 화면에 입력 기능을 탑재한 터치스크린 패널은 휴대용 전자 기기를 포함한 다양한 장치에 적용되고 있다.
이러한 전자기기 중 문서나 그림에 기반한 컨텐츠를 종이책의 대체 수단으로 보여주는 전자책(이북)이 사용된다. 이러한 전자책은 문서, 그림 등의 정보를 포함하는 컨텐츠를 표시할 수 있는 기능을 구현할 수 있으나, 제한된 공간으로 인하여, 사용자로 하여금 컨텐츠에 대한 몰입도가 낮다는 문제가 있다.
대한민국 특허출원 10-2012-0033826호는 드래깅 제스쳐 등에 의하여 컨텐츠를 제어하는 기술을 개시하나, 실제로 사용자가 컨텐츠를 보는 점을 간과하고, 사용자 제스쳐로만 컨텐츠를 제어한다는 문제가 있다. 따라서, 좁은 디스플레이 영역을 가지고, 아울러 다수의 제어 센서를 구비한 전자책과 같은 전자기기를 효과적으로 활용하여, 컨첸츠를 제어하는 기술은 아직까지 미흡한 상황이다.
따라서, 본 발명이 해결하고자 하는 과제는 전자책과 같이 컨텐츠가 표시되는 전자기기에서 사용자가 별도의 제스쳐를 취하지 않고서도 컨텐츠를 제어할 수 있는 방법과 시스템을 제공하는 것이다.
상기 과제를 해결하기 위하여, 본 발명은 전자기기의 컨텐츠 기반 전자 기기 제어 시스템으로서, 상기 전자기기를 사용하는 사용자의 시선을 추적하는 시선추적부; 상기 시선추적부로부터 추척된 사용자의 시선에 대응되는 전자기기의 관찰지점을 판단하는 관찰지점 판단부; 상기 관찰지점 판단부가 판단한 관찰지점에 표시되는 컨텐츠에 따라 소리, 시각 정보 또는 촉각 정보 중 적어도 어느 하나를 제어하는 정보 제어부를 포함하는 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템을 제공한다.
본 발명의 일 실시예에서, 상기 컨텐츠는 문자 또는 그림을 포함하는 시각 컨텐츠로서, 사용자가 읽게 되는 스토리 컨텐츠이다.
본 발명의 일 실시예에서, 상기 정보 제어부는, 상기 관찰지점의 이동에 대응하여 변화되는 상기 컨텐츠에 따라 상이한 소리 정보 또는 시각 정보를 표시하며, 상기 시각 정보는 배경색 또는 글자색 또는 글자크기 중 적어도 어느 하나이다.
본 발명의 일 실시예에서, 상기 소리 정보는 상기 컨텐츠를 읽는 소리, 상기 컨텐츠에 대응하는 배경 음악 또는 배경 소리 중 적어도 어느 하나이다.
상기 정보 제어부는, 상기 관찰지점 판단부가 판단한 관찰지점의 유지 시간에 따라 상기 컨텐츠의 글자색 또는 배경색을 달리 구성한다.
본 발명은 또한 상술한 전자기기의 컨텐츠 기반 전자 기기 제어 시스템을 포함하는 전자기기를 제공한다.
본 발명은 또한 전자기기의 컨텐츠 기반 전자 기기 제어 방법으로, 상기 전자기기를 사용하는 사용자의 시선을 추적하는 단계; 상기 추적된 사용자의 시선에 대응하는 전자기기의 컨텐츠를 판단하는 단계; 상기 판단된 컨텐츠에 따라 소리, 시각, 또는 촉각 정보 중 적어도 어느 하나를 제어하는 단계를 포함하는 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 방법을 제공한다.
본 발명의 일 실시예에 따르면, 상기 소리 정보는 상기 판단된 컨텐츠에 대응되는 배경 음악 또는 소리이며, 상기 시각 정보는 상기 판단된 컨텐츠에 대응하는 배경색 또는 글자색이다.
본 발명의 일 실시예에 따르면, 상기 컨텐츠에는, 상기 컨텐츠에 대응하는 소리, 시각, 또는 촉각 정보가 미리 저장되며, 상기 추적된 사용자의 시선에 대응하는 컨텐츠에 따라 상기 미리 저장된 소리, 시각, 또는 촉강 정보가 표시되며, 상기 소리, 시각, 또는 촉각 정보는 적어도 1인 이상의 사용자에 의하여 미리 저장되거나, 변경될 수 있다.
또한, 상기 미리 저장된 소리, 시각, 또는 촉각 정보는, 복수 사용자에 의한 통계적 시선 추적 결과에 기반한다.
본 발명에 따르면, 전자기기를 사용하는 사용하는 사용자 시선으로부터 사용자가 보고 있는 컨텐츠를 판단하고, 이에 따라 사용자가 보고 있는 것으로 판단하는 컨텐츠에 따라 시각, 소리, 촉각 정보 등을 다양한 방식으로 표시한다. 이에 따라 별도의 조작 또는 제어 제스쳐 없이도, 컨텐츠에 대응하는 다양한 정보가 사용자에게 전달되며, 이에 따라 컨텐츠에 대한 사용자 흥미와 몰입도가 크게 증가할 수 있다.
도 1은 본 발명의 일 실시예에 따른 전자기기 컨텐츠 제어 시스템의 블록도이다.
도 2 내지 4는 본 발명의 일 실시예에 따라 사용자 시선에 기반한 전자기기의 제어방법을 설명하는 도면이다.
도 4는 전자책 컨텐츠를 소비하는 사용자의 시각 움직임에 따라 상기 정보 전달(피드백)의 속도를 결정하는 방식을 설명하는 도면이다.
도 5는 본 발명의 일 실시예에 따른 컨텐츠의 시각정보가, 사용자 시선의 유지 시간 등에 따라 달라지는 실시예를 설명한다.
도 6은 문자와 그림이 결합된 컨텐츠에서의 정보 전달 방법의 일 실시예를 설명하는 도면이다.
도 7은 본 발명의 일 실시예에 따른 전자기기의 컨텐츠 기반 전자 기기 제어 방법의 단계도이다.
이하, 본 발명을 도면을 참조하여 상세하게 설명하고자 한다. 다음에 소개되는 실시예들은 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 예로서 제공되는 것이다. 따라서 본 발명은 이하 설명된 실시예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 그리고 도면들에 있어서, 구성요소의 폭, 길이, 두께 등은 편의를 위하여 과장되어 표현될 수도 있다. 명세서 전체에 걸쳐서 동일한 참조번호들은 동일한 구성요소들을 나타낸다.
본 발명은 상술한 종래 기술의 문제를 해결하기 위하여, 사용자 시선에 대응되는 컨텐츠를 판단하고, 상기 판단된 컨텐츠에 미리 저장된 다양한 사용자 전달 정보(시간, 촉각, 소리)를 사용자에 표시(발생)시키는 방식의 컨텐츠 제어 방법을 제공한다. 이에 따라 별도의 조작 또는 제어 제스쳐 없이도, 컨텐츠에 대응하는 다양한 정보가 사용자에게 전달되며, 이에 따라 컨텐츠에 대한 사용자 흥미와 몰입도가 크게 증가할 수 있다.
도 1은 본 발명의 일 실시예에 따른 전자기기 컨텐츠 제어 시스템의 블록도이다. 본 명세서에서 전자기기는 전기적 방식에 구동되며, 사용자에게 문서, 그림 등의 컨텐츠를 표시할 수 있는 디스플레이를 구비한 기기를 의미한다. 또한 본 발명의 일 실시예에서 컨텐츠는 사용자가 시간을 가지고 시선을 이동시키는 시각 컨텐츠, 즉, 시간 흐름에 따른 스토리가 있는 컨텐츠로서, 본 발명에서는 사용자 시선과, 이에 대응되는 컨텐츠 부분을 판단하고, 상기 컨텐츠 부분에 대하여 별도의 정보 발생 이벤트 없이도 시선만으로도 원하는 컨텐츠 기반 정보가 발생, 전달되는 기술 구성을 제공한다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 전자기기의 컨텐츠 기반 전자 기기 제어 시스템은, 상기 전자기기를 사용하는 사용자의 시선을 추적하는 시선추적부(110); 상기 시선추적부로부터 추척된 사용자의 시선에 대응되는 전자기기의 관찰지점을 판단하는 관찰지점 판단부(120); 및 상기 관찰지점 판단부가 판단한 관찰지점에 표시되는 컨텐츠에 따라 소리, 시각 정보 또는 촉각 정보 중 적어도 어느 하나를 제어하는 정보 제어부(130)를 포함한다.
본 발명의 일 실시에에서 상기 시선추적부(110)는 상기 전자기기에 구비된 카메라 등을 이용하여 사용자의 머리, 눈동자 등의 움직임에 따라 시선을 추적하는 것으로, 이에 따라 상기 추척된 시선의 궤적에 따라 상기 관찰지점 판단부(120)는 현재 사용자가 보고 있는(즉, 관찰하고 있는) 컨체츠를 판단하고, 상기 제어부(130)는 해당 컨텐츠에 미리 저장된 방식에 따라 시각 또는 촉각 또는 소리 정보를 결정하여, 이를 표시한다.
본 발명의 일 실시예에 따르면, 상기 정보 제어부(130)는, 상기 관찰지점의 이동에 대응하여 변화되는 상기 컨텐츠에 따라 상이한 소리 정보 또는 시각 정보를 표시하며, 예를 들어, 상기 시각 정보는 배경색 또는 글자색 또는 글자크기 중 적어도 어느 하나일 수 있다.
도 2 내지 4는 본 발명의 일 실시예에 따라 사용자 시선에 기반한 전자기기의 제어방법을 설명하는 도면이다.
도 2를 참조하면, 전자 책의 텍스트 기반 컨텐츠가 표시되며, 적색 원은 추적된 사용자 시선에 따라 판단된 관찰 컨텐츠 영역을 나타낸다.
도 2에서, 일 시점에서는 "내 말"이 관찰 컨텐츠가 되며, 그 다음 시간에서는 "박차고", 그 다음 시간에서는 "끼이익 쿵" 부분이 사용자가 보고 있다고 판단되는 관찰 컨텐츠 영역이 된다. 상기 관찰 컨텐츠 영역은, 상술한 바와 같이, 상기 추적된 사용자 시점으로부터 연장된 궤적을 통하여 연산되어, 판단된다.
도 2에서 특히 상기 관찰 컨텐츠 지점의 컨텐츠에는 미리 다양한 시각, 청각 또는 촉각 정보가 미리 저장될 수 있는데, 예를 들어, "박차고"에서는 상기 컨텐츠가 표시되는 전자기기에 진동이 발생할 수 있다. 또한 "끼이익 쿵"에서는 상기 의성어에 해당되는 음향 정보(배경 소리)가 미리 저장되어 있으며, 해당 컨텐츠를 사용자가 보고 있다고 판단하는 경우, 이에 해당하는 소리가 발생할 수 있다.
도 3에서는, 사용자의 관찰 컨텐츠가 "내리쳐졌다"에 해당하며, 이 경우, 내리쳐졌다는 부분으로 관찰 컨텐츠가 이동함에 따라 상기 해당 부분에 기 설정된 진동 피드백을 제공하며, 이로써 실제 손이 내 머리위로 내리쳐 진 것처럼 촉각 정보를 디자인 할 수 있다. 상기 기 설정된 다양한 소리, 촉각 및 시각 정보는 미리 사용자에 의하여 설정될 수 있으며, 더 나아가 변경도 가능하다.
더 나아가 이러한 정보는 로컬 사용자 뿐 아니라 동일 컨텐츠를 소비하는 다수의 유저를 통해 결정될 수 있다. 이러한 경우, 사람들이 직접 다양한 정보들을 공유할 수 있다는 장점이 있다. 또한, 사용자들의 시점행위를 통해 정보를 모으고, 이를통해 컨텐츠를 좀더 효과적으로 표시할 수 있다. 예를 들어, 사람들이 오랫동안 본 컨텐츠를 더 진하고 크게 설정하여 좀 더 읽기 쉬운 형태로 변경할 수 있다. 이에 따라 타 사용자가 어려워하였던 부분이나, 관심 있어한 부분을 직관적인 정보 전달을 통하여 용이하게 파악할 수 있다는 장점이 있다.
도 4에서는 공포스러운 내용의 컨텐츠가 표시된다. 이 경우, 해당 영역으로 관찰 시점이 이동한 후, 다른 영역으로 이동되기 전, 공포스러운 분위기의 배경 음악이 상기 전자기기의 스피커를 통하여 흘러나오게 할 수 있다. 또는 컨텐츠 기설정 정보에 따라 배경색을 변경할 수 있다. 예를 들어, 상기 소설의 일부분에서 표현한 스산한 분위기인 경우 이에 맞도록 배경색을 어둡게 처리할 수 있다. 이때, 글의 가독성 확보를 통해 배경색에 따라 글자색도 함께 바뀌어 짐이 바람직하다.
도 4는 전자책 컨텐츠를 소비하는 사용자의 시각 움직임에 따라 상기 정보 전달(피드백)의 속도를 결정하는 방식을 설명하는 도면이다.
도 4를 참조하면, 도 2의 컨텐츠에서 "끼이익 쿵"이라는 문소리 부분에 대한 사용자 추적 시점의 유지 시간(즉, 읽기 시간)이 나타나며, 도 4에서는 문소리를 시각 움직임에 따라 다른 속도로 소리 정보가 제공하는 예를 시각화 한 것이다. 즉, 도 4에서는 시선 이동 속도의 변화 (A:가장빠름->C:가장느림)에 따라 자연스럽게 소리가 발생하는 속도가 변경되는 것을 알 수 있다.
본 발명의 일 실시예에서 상기 컨텐츠 기반 전달(피드백) 정보는 소리, 촉각 뿐만 아니라 시각 정보일 수 있으며, 상기 시각 정보는 컨텐츠 글자 또는 그림의 색이나, 크기, 투명도, 움직임이 될 수 있으며, 이와 달리 해당 컨텐츠에 링크된 별도의 동영상 정보일 수 있다.
도 5는 본 발명의 일 실시예에 따른 컨텐츠의 시각정보가, 사용자 시선의 유지 시간 등에 따라 달라지는 실시예를 설명한다.
도 5를 참조하면, 특정 시간 동안 컨텐츠를 보게되면 해당 컨텐츠의 글자색을 점점 더 옅게 하여 사용자가 어디까지, 어떤 형태로 글을 읽었는지 직관적으로 알 수 있게 할 수 있다.
이러한 속성은 반대로 적용되어, 자주 본 곳을 점점 더 진하게 표현할 수 있는데, 이러한 경우 이해가 되지 않는 부분이나, 자주 접하여 중요하다고 생각되는 곳이 점점 강조되는 효과를 가지고 올 수 있다. 따라서 컨텐츠 학습 및 읽기행위에 적용하여 좀 더 효율적인 독서를 도모할 수 있다. 이 경우, 해당 컨텐츠에 대한 사용자 시선의 유지 시간 등이 기록되어, 기설정된 기준에 따라 시각 정보가 변경되게 할 수 있으며, 특히 2인 이상의 복수 사용자에 의한 통계적 시선 유지 시간에 기반하여, 상기 컨텐츠 각 부분에 대한 특징이 결정되고 이에 따라 시각적 정보가 변경되어, 표시될 수 있다. 예를 들어 사용자가 보다 재미있어 하거나 어려워 하는 부분(예를 들어 페이지)에는 사용자가 자주 보게 되며, 이에 따라 시선 유지 시간은 길어지게 된다. 복수 사용자에 의한 통계적 시선 유지 시간이 특정 컨텐츠에서 길어지는 경우, 이 부분에 대한 글자 색이나, 배경 색을 달리하여, 타 사용자로 하여금 해당 컨텐츠에 대한 관심을 증가시킬 수 있다.
본 발명의 또 다른 또 다른 일실시 예에서 시점에 따라 영상을 재생하거나, 재생 속도를 바꾸거나, 삭제할 수 있다. 또한 사용자가 컨텐츠를 어디까지 소비했는지, 어디를 읽었는지에 따라 내용를 바꾸거나, 글자 크기를 조절하거나, 색을 바꾸거나, 글자를 움직이게 하거나, 영상을 보여주는 등의 다양한 피드백을 전달 할 수 있다.
도 6은 문자와 그림이 결합된 컨텐츠에서의 정보 전달 방법의 일 실시예를 설명하는 도면이다.
도 6을 참조하면, 바람소리가 나는 그림에 시점이 있다면 소리 피드백을 반복적으로 전달할 수 있고, 이를 벗어나는 순간 해당 청각 피드백을 중지할 수 있다. 이 경우, 시점 추적이 정확하지 않더라도 비교적 효과적으로 피드백이 가능하다는 장점이 있다.
본 발명에 따른 상기 사용자 시점의 컨텐츠 기반 정보 전달 방법은, 별도의 시선추적 장치 없이, 화면의 중앙을 사용자 시점 중심으로 설정할 수 있다. 이 경우, 컨텐츠 이동시 중심 영역을 중심으로 미리 설정된 다양한 정보가 사용자에게 피드백을 줄 수 있으며, 상기 정보는 시각, 촉각, 촉각 이외에 후각 정보일 수 있으며, 상기 정보의 범위는 매우 넓어질 수 있다.
도 7은 본 발명의 일 실시예에 따른 전자기기의 컨텐츠 기반 전자 기기 제어 방법의 단계도이다.
도 8을 참조하면, 본 발명의 일 실시예에 따른 제어방법은, 상기 전자기기를 사용하는 사용자의 시선을 추적하는 단계(S110); 상기 추적된 사용자의 시선에 대응하는 전자기기의 컨텐츠를 판단하는 단계(S120); 상기 판단된 컨텐츠에 따라 소리, 시각, 또는 촉각 정보 또는 후각 정보 중 적어도 어느 하나를 제어하는 단계(S130)를 포함한다.
본 발명의 일 실시예에 따르면, 상기 소리 정보는 상기 판단된 컨텐츠에 대응되는 배경 음악 또는 소리일 수 있으며, 상기 시각 정보는 상기 판단된 컨텐츠에 대응하는 배경색 또는 글자색 등이 될 수 있다. 특히 본 발명은 사용자가 보고 있다고 판단되는 컨텐츠에, 미리 대응되는 정보를 매칭시켜, 저장시킨 후, 카메라 등에 의하여 추적된 사용자의 시선이 컨텐츠에 대응함에 따라 상기 미리 저장된 소리, 시각, 또는 촉각 정보를 발생시켜, 사용자에게 전달한다. 또한, 상기 컨텐츠에 대응하는 정보는 사용자에 의하여 미리 저장되거나, 변경될 수 있으며, 이로부터 전자책과 같은 전자기기 컨텐츠로부터 사용자에게 보다 다양한 정보들 전달하고, 사용자로 하여금 컨텐츠에 대한 몰입도와 흥미를 증가시킬 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들을 한정적인 관점이 아니라 설명적인 관점에서 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.

Claims (12)

  1. 전자기기의 컨텐츠 기반 전자 기기 제어 시스템으로서,
    상기 전자기기를 사용하는 사용자의 시선을 추적하는 시선추적부;
    상기 시선추적부로부터 추척된 사용자의 시선에 대응되는 전자기기의 관찰지점을 판단하는 관찰지점 판단부;
    상기 관찰지점 판단부가 판단한 관찰지점에 표시되는 컨텐츠에 따라 소리, 시각 정보 또는 촉각 정보 중 적어도 어느 하나를 제어하는 정보 제어부를 포함하고,
    상기 컨텐츠에는, 상기 컨텐츠에 대응하는 소리, 시각, 또는 촉각 정보가 미리 저장되며, 상기 추적된 사용자의 시선에 대응하는 컨텐츠에 따라 상기 미리 저장된 소리, 시각, 또는 촉각 정보가 표시되며,
    상기 미리 저장된 소리, 시각, 또는 촉각 정보는, 복수 사용자에 의한 통계적 시선 추적 결과에 기반한 것임을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템.
  2. 제 1항에 있어서,
    상기 컨텐츠는 문자 또는 그림을 포함하는 시각 컨텐츠로서, 사용자가 읽게 되는 스토리 컨텐츠인 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템.
  3. 제 2항에 있어서,
    상기 정보 제어부는, 상기 관찰지점의 이동에 대응하여 변화되는 상기 컨텐츠에 따라 상이한 소리 정보 또는 시각 정보를 표시하는 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템.
  4. 제 2항에 있어서,
    상기 시각 정보는 배경색 또는 글자색 또는 글자크기 중 적어도 어느 하나인 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템.
  5. 제 2항에 있어서,
    상기 소리 정보는 상기 컨텐츠를 읽는 소리, 상기 컨텐츠에 대응하는 배경 음악 또는 배경 소리 중 적어도 어느 하나인 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템.
  6. 제 1항에 있어서, 상기 정보 제어부는,
    상기 관찰지점 판단부가 판단한 관찰지점의 유지 시간에 따라 상기 컨텐츠의 글자색 또는 배경색을 달리 구성하는 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 시스템.
  7. 제 1항 내지 제 6항 중 어느 한 항에 따른 전자기기의 컨텐츠 기반 전자 기기 제어 시스템을 포함하는 전자기기.
  8. 전자기기의 컨텐츠 기반 전자 기기 제어 방법으로,
    상기 전자기기를 사용하는 사용자의 시선을 추적하는 단계;
    상기 추적된 사용자의 시선에 대응하는 전자기기의 컨텐츠를 판단하는 단계;
    상기 판단된 컨텐츠에 따라 소리, 시각, 또는 촉각 정보 중 적어도 어느 하나를 제어하는 단계를 포함하고,
    상기 컨텐츠에는, 상기 컨텐츠에 대응하는 소리, 시각, 또는 촉각 정보가 미리 저장되며, 상기 추적된 사용자의 시선에 대응하는 컨텐츠에 따라 상기 미리 저장된 소리, 시각, 또는 촉각 정보가 표시되며,
    상기 미리 저장된 소리, 시각, 또는 촉각 정보는, 복수 사용자에 의한 통계적 시선 추적 결과에 기반한 것임을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 방법.
  9. 제 8항에 있어서,
    상기 소리 정보는 상기 판단된 컨텐츠에 대응되는 배경 음악 또는 소리이며, 상기 시각 정보는 상기 판단된 컨텐츠에 대응하는 배경색 또는 글자색인 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 방법.
  10. 삭제
  11. 제 9항에 있어서,
    상기 소리, 시각, 또는 촉각 정보는 적어도 1인 이상의 사용자에 의하여 미리 저장되거나, 변경될 수 있는 것을 특징으로 하는 전자기기의 컨텐츠 기반 전자 기기 제어 방법.
  12. 삭제
KR1020130119223A 2013-10-07 2013-10-07 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법 KR101529241B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130119223A KR101529241B1 (ko) 2013-10-07 2013-10-07 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130119223A KR101529241B1 (ko) 2013-10-07 2013-10-07 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20150040560A KR20150040560A (ko) 2015-04-15
KR101529241B1 true KR101529241B1 (ko) 2015-06-17

Family

ID=53031873

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130119223A KR101529241B1 (ko) 2013-10-07 2013-10-07 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101529241B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100976357B1 (ko) * 2001-12-12 2010-08-18 아이툴스 안구 추적 데이터의 사용을 용이하게 하는 기술
KR20120058947A (ko) * 2010-11-30 2012-06-08 삼성전자주식회사 눈동자 추적을 이용한 컨텐츠 출력 방법 및 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100976357B1 (ko) * 2001-12-12 2010-08-18 아이툴스 안구 추적 데이터의 사용을 용이하게 하는 기술
KR20120058947A (ko) * 2010-11-30 2012-06-08 삼성전자주식회사 눈동자 추적을 이용한 컨텐츠 출력 방법 및 장치

Also Published As

Publication number Publication date
KR20150040560A (ko) 2015-04-15

Similar Documents

Publication Publication Date Title
US11113983B1 (en) Video presentation, digital compositing, and streaming techniques implemented via a computer network
US10134358B2 (en) Head mounted display device and method for controlling the same
KR20160080083A (ko) 아이-트래킹을 기반으로 햅틱 효과를 생성하기 위한 시스템 및 방법
CN106156066B (zh) 一种页面切换方法、装置及客户端
US9715482B1 (en) Representing consumption of digital content
US10860182B2 (en) Information processing apparatus and information processing method to superimpose data on reference content
TWI703493B (zh) 介面展示方法及裝置
KR20130024280A (ko) 광학식 문자 판독기를 이용한 스케줄 관리 방법 및 장치
CN102867470A (zh) 显示控制设备、显示控制方法和计算机程序
US20140229834A1 (en) Method of video interaction using poster view
US10580188B2 (en) Method of creating animated image based on key input, and user terminal for performing the method
Thomsen Signaletic, haptic and real-time material
CN112437353A (zh) 视频处理方法、视频处理装置、电子设备和可读存储介质
US20230244363A1 (en) Screen capture method and apparatus, and electronic device
US20140229823A1 (en) Display apparatus and control method thereof
KR20140072482A (ko) 스마트 tv 의 원격 제어 장치 및 원격 제어 방법.
US20080282140A1 (en) Embedded website banner system and method
US20170017632A1 (en) Methods and Systems of Annotating Local and Remote Display Screens
KR101529241B1 (ko) 전자기기의 컨텐츠 기반 전자 기기 제어 시스템 및 방법
US11775060B2 (en) Systems and methods for hands-free scrolling
KR20140089069A (ko) 재생 가능 객체를 생성하는 사용자 단말 장치 및 그 인터렉션 방법
JP2014081834A (ja) 表示装置、表示制御方法及び表示制御プログラム
US20170220317A1 (en) Electronic apparatus and control program of electronic apparatus
KR20150008620A (ko) 전자 문서 제공 방법 및 장치
KR101355652B1 (ko) 인터렉티브 방명록 제공방법 및 제공시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee