KR20220091028A - 감상 경로 생성 장치 및 그 동작방법 - Google Patents

감상 경로 생성 장치 및 그 동작방법 Download PDF

Info

Publication number
KR20220091028A
KR20220091028A KR1020200182128A KR20200182128A KR20220091028A KR 20220091028 A KR20220091028 A KR 20220091028A KR 1020200182128 A KR1020200182128 A KR 1020200182128A KR 20200182128 A KR20200182128 A KR 20200182128A KR 20220091028 A KR20220091028 A KR 20220091028A
Authority
KR
South Korea
Prior art keywords
objects
work
path
appreciation
specific work
Prior art date
Application number
KR1020200182128A
Other languages
English (en)
Other versions
KR102459530B1 (ko
Inventor
조준동
이도원
Original Assignee
성균관대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 성균관대학교산학협력단 filed Critical 성균관대학교산학협력단
Priority to KR1020200182128A priority Critical patent/KR102459530B1/ko
Publication of KR20220091028A publication Critical patent/KR20220091028A/ko
Application granted granted Critical
Publication of KR102459530B1 publication Critical patent/KR102459530B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • G06Q10/047—Optimisation of routes or paths, e.g. travelling salesman problem
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
    • G06Q10/1091—Recording time for administrative or management purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Educational Administration (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Human Computer Interaction (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은, 특정 작품에 대한 특정 작품 정보가 입력되는 입력부, 상기 특정 작품 상에 감상 경로를 출력하는 출력부 및 상기 특정 작품 정보 입력 시, 수집한 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보에서 확인한 작품별 감상 오브젝트 및 상기 특정 작품 정보를 기반으로 상기 특정 작품 내에서 추천 오브젝트들을 추출하고, 상기 특정 작품에 대한 감상을 위해 상기 추천 오브젝트들을 가이드하는 상기 감상 경로를 생성하여 출력하는 제어부는 포함하는 감상 경로 생성 장치를 제공한다.

Description

감상 경로 생성 장치 및 그 동작방법{Apparatus for generating art navigation path and operation method thereof}
본 발명은 감상 경로 생성 장치 및 그 동작방법에 관한 것으로써, 더욱 상세하게는 시각 장애인들의 작품 감상을 위한 감상 경로를 생성하는 감상 경로 생성 장치 및 그 동작방법에 관한 것이다.
최근 시각 이외의 감각을 활용한 멀티모달 전시가 활발해지면서 시각장애인이 전시에 참여할 다양한 기회가 생겼다.
시각장애인의 전시품 감상을 위한 서비스 관점에서 일반적인 경우 명화 음성 해설 또는 3D 작품과 같은 시도들이 있었다. 하지만 실제로 이러한 서비스만으로는 높은 작품 감상 만족도를 얻기 어렵다.
전시되는 작품들은 대부분 단순히 입체 모형을 제공하는 형태 또는 시각 장애인을 대상으로 한 서비스가 아닌 정상인을 대상으로 한 서비스이다.
또한 다양한 미술관 등에서 제공하는 오디오 해설의 경우,‘이것,‘저것’ 등의 지시대명사의 잦은 사용, 칼라 및 모양에 대한 시각 정보 부족 등으로 시각장애인의 작품 감상을 제대로 돕지 못한다.
최근들어, 시작장애인의 작품을 감상하도록 하기 위한 방법을 연구하고 있다.
본 발명의 목적은, 시각 장애인들의 작품 감상을 위한 감상 경로를 생성하는 감상 경로 생성 장치 및 그 동작방법을 제공함에 있다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
본 발명에 따른 감상 경로 생성 장치의 동작방법은, 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 수집하는 단계, 상기 시선 추적 정보 및 상기 접촉 추적 정보를 기반으로 작품별 감상 오브젝트(object)들을 확인하는 단계 및 특정 작품 정보 입력 시, 상기 특정 작품 정보 및 상기 작품별 감상 오브젝트들을 기반으로 특정 작품 내에서 추천 오브젝트(object)들을 추출하고, 상기 특정 작품에 대한 감상를 위해 상기 추천 오브젝트들을 가이드하는 감상 경로를 생성하는 단계를 포함할 수 있다.
상기 시선 추적 정보는, 상기 작품별 오브젝트들 각각을 감상하는 시선 대기 시간을 포함하고, 상기 접촉 추적 정보는, 상기 작품별 오브젝트들 각각을 접촉 감상하는 접촉 대기 시간을 포함할 수 있다.
상기 작품별 감상 오브젝트들을 확인하는 단계는, 상기 시선 대기 시간 및 상기 접촉 대기 시간에 대한 평균 대기 시간을 연산하고, 상기 평균 대기 시간이 높은 순서로 상기 작품별 감상 오브젝트들을 확인할 수 있다.
상기 특정 작품 정보에는, 상기 특정 작품의 영상 및 상기 특정 작품에 대한 설명 시간을 포함할 수 있다.
상기 감상 경로를 생성하는 단계는, 상기 특정 작품의 영상에서 오브젝트들을 인식하는 단계, 상기 설명 시간을 기반으로 추천 오브젝트의 개수를 결정하는 단계, 상기 추천 오브젝트의 개수에 대응하게 상기 오브젝트들 중 상기 작품별 감상 오브젝트들과 매칭되는 상기 추천 오브젝트들을 추출하는 단계 및 상기 추천 오브젝트들을 가이드하기 위해, 설정된 TSP 알고리즘(Travelling Salesman Problem algorithm)에 따라 상기 감상 경로를 확인생성하는 단계를 포함할 수 있다.
상기 추천 오브젝트의 개수를 결정하는 단계는, 상기 설명 시간에 비례하여 상기 추천 오브젝트의 개수가 증가할 수 있다.
상기 감상 경로를 확인생성하는 단계는, 상기 추천 오브젝트들 각각의 인식 배치를 기준으로 상기 감상 경로를 확인 생성할 수 있다.
상기 감상 경로는, 상기 추천 오브젝트들 중 좌상단에 위치한 추천 오브젝트를 시작 및 종료 지점으로 선회하는 경로일 수 있다.
본 발명에 따른 감상 경로 생성 방법은, 상기 감상 경로에 따라 상기 추전 오브젝트들 중 상기 감상 경로에서 시작 및 종류 지점에 위치한 추천 오브젝트를 나타내는 제1 형상 및 나머지 추천 오브젝트들을 나타내며 상기 제1 형상과 다른 제2 형상을 결정하고, 상기 제1, 2 형상 사이를 가이드하는 가이드 선을 출력하는 단계를 더 포함할 수 있다.
본 발명에 따른 감상 경로 생성 장치는, 특정 작품에 대한 특정 작품 정보가 입력되는 입력부, 상기 특정 작품 상에 감상 경로를 출력하는 출력부 및 상기 특정 작품 정보 입력 시, 수집한 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보에서 확인한 작품별 감상 오브젝트 및 상기 특정 작품 정보를 기반으로 상기 특정 작품 내에서 추천 오브젝트들을 추출하고, 상기 특정 작품에 대한 감상을 위해 상기 추천 오브젝트들을 가이드하는 상기 감상 경로를 생성하여 출력하는 제어부는 포함할 수 있다.
상기 시선 추적 정보는, 상기 작품별 오브젝트들 각각을 감상하는 시선 대기 시간을 포함하고, 상기 접촉 추적 정보는, 상기 작품별 오브젝트들 각각을 접촉 감상하는 접촉 대기 시간을 포함하며, 상기 특정 작품 정보는, 상기 특정 작품의 영상 및 상기 특정 작품에 대한 설명 시간을 포함 할 수 있다.
상기 제어부는, 상기 시선 대기 시간 및 상기 접촉 대기 시간에 대한 평균 대기 시간을 연산하고, 상기 평균 대기 시간이 높은 순서로 상기 작품별 감상 오브젝트들을 할 수 있다.
상기 제어부는, 상기 특정 작품의 영상에서 오브젝트들을 인식하고, 상기 설명 시간을 기반으로 추천 오브젝트의 개수를 결정하며, 상기 추전 오브젝트의 개수에 대응되게 상기 오브젝트들 중 상기 작품별 감상 오브젝트들과 매칭되는 상기 추천 오브젝트들을 추출하고, 상기 추천 오브젝들을 가이드하기 위해 설정된 TSP 알고리즘(Travelling Salesman Problem algorithm)에 따라 상기 감상 경로를 생성할 수 있다.
상기 제어부는, 상기 추천 오브젝트들 각각의 인식 배치를 기준으로 좌상단에 위치한 추천 오브젝트를 시작 및 종료시적으로 선회하는 상기 감상 경로를 생성할 수 있다.
본 발명에 따른 감상 경로 생성 장치 및 그 동작방법은, 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 기반으로 감상할 특정 작품에 대한 특정 작품 정보에 포함된 추천 오브젝트들을 추출하고, 추출 오브젝트들을 가이드하는 감상 경로를 생성하여 출력함으로써, 시작장애인이 특정 작품을 감상하기 용이하게 할 수 있는 이점이 있다.
한편, 본 발명의 효과는 이상에서 언급한 효과들로 제한되지 않으며, 이하에서 설명할 내용으로부터 통상의 기술자에게 자명한 범위 내에서 다양한 효과들이 포함될 수 있다.
도 1은 본 발명에 따른 감상 경로 생성 장치의 제어구성을 나타낸 제어 블록도이다.
도 2 및 도 3은 본 발명에 따른 감상 경로 생성 장치가 수집한 시선 추적 정보 및 접촉 추적 정보를 설명하기 위한 예시도이다.
도 4는 본 발명에 따른 감상 경로 생성 장치의 동작방법을 나타낸 순서도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수개의 관련된 기재된 항목들의 조합 또는 복수개의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수개의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명에 따른 감상 경로 생성 장치의 제어구성을 나타낸 제어 블록도이고, 도 2 및 도 3은 본 발명에 따른 감상 경로 생성 장치가 수집한 시선 추적 정보 및 접촉 추적 정보를 설명하기 위한 예시도이다.
도 1 내지 도 3을 참조하면, 감상 경로 생성 장치(100)는 입력부(110), 출력부(120) 및 제어부(130)를 포함할 수 있다.
입력부(110)는 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 수집 및 입력받을 수 있다.
또한, 입력부(110)는 특정 작품 정보(pf)를 입력받을 수 있다.
여기서, 특정 작품 정보(pf)는 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 수집한 작품들과 다른 작품일 수 있으며, 이에 한정을 두지 않는다.
특정 작품 정보(pf)는 특정 작품의 영상 및 특정 작품에 대한 설명 시간을 포함할 수 있으며, 이에 한정을 두지 않는다.
출력부(120)는 제어부(130)에 의해 생성된 특정 작품을 감상하기 위한 감상 경로(NaviArt)를 출력할 수 있다.
이때, 출력부(120)는 특정 작품의 영상에 감상 경로(NaviArt)를 오버랩시켜 출력하는 디스플레이 모듈일 수 있으며, 이에 한정을 두지 않는다.
제어부(130)는 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 기반으로 작품별 감상 오브젝트(object)들을 확인할 수 있다.
여기서, 도 2는 작품별 시선 추적(eye tracking) 정보를 나타내며, 도 3은 작품별 접촉 추적(touch tracking) 정보를 나타낸다.
먼저, 도 2(a)는 정상인을 대상으로 작품별 시선 추적을 실시간 결과이며, 작품별 오브젝트들을 감상하는 시선 대기 시간을 나타내며, 도 2(b)는 작품별 오브젝트들 중 대기 시간이 높은 작품별 감상 오브젝트들을 나타낸다.
도 3(a)는 시각장애인을 대상으로 작품별 접촉 추적을 실시간 결과이며, 작품별 오브젝트들을 접촉 감상하는 접촉 대기 시간을 나타내며, 도 3(b)는 작품별 오브젝트들 중 대기 시간이 높은 작품별 감상 오브젝트들을 나타낸다.
제어부(130)는 도 2 및 도 3에 나타낸 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 기반으로 특정 작품 내에서 추천 오브젝트를 추출할 수 있다.
먼저, 제어부(130)는 도 2(a) 및 도 3(a)에 나타낸 작품별 오브젝트들 각각에 대한 시선 대기 시간 및 접촉 대기 시간의 평균 대기 시간을 연산하고, 상기 평균 대기 시간이 높은 순서로 도 2(b) 및 도 3(b)와 같이 작품별 감상 오브젝트들을 확인할 수 있다.
이후, 제어부(130)는 특정 작품의 영상에서 오브젝트들을 인식하고, 특정 작품에 대한 설명 시간을 기반으로 추천 오브젝트의 개수를 결정할 수 있다.
예를 들어, 제어부(130)는 설명 시간이 설정된 기준 시간보다 긴 경우 기준 개수보다 많은 개수의 추천 오브젝트를 결정할 수 있다.
상기 추천 오브젝트의 개수가 결정된 경우, 제어부(130)는 오브젝트들 중 작품별 감상 오브젝트들과 매칭되는 추천 오브젝트들을 추출할 수 있다.
이후, 제어부(130)는 추천 오브젝트들 각각의 인식 배치를 기분으로 설정된 TSP 알고리즘(Travelling Salesman Problem algorithm)에 따라 감상 경로를 확인할 수 있다.
상기 감상 경로는 추천 오브젝트들 중 좌상단에 위치한 추천 오브젝트를 시작 및 종료 지점으로 선회하는 경로일 수 있으며, 이에 한정을 두지 않는다.
제어부(130)는 감상 경로에 따라 추전 오브젝트들 중 감상 경로에서 시작 및 종류 지점에 위치한 추천 오브젝트를 나타내는 제1 형상 및 나머지 추천 오브젝트들을 나타내며 제1 형상과 다른 제2 형상을 결정하고, 제1, 2 형상 사이를 가이드하는 가이드 선을 출력할 수 있다.
예를들어, 감상 경로는 점선으로 이루어진 가이드 선을 통해 경로를 제공하고 제1 형상의 큰원 및 제2 형상의 작은원으로 추천 오브젝트들을 표시하여 중요도를 나타낼 수 있다.
이때, 시각장애인은 감상 경로를 손으로 따라가며 감상할 수 있고 중간 중간 추천 오브젝트들을 주의 깊게 관찰 할 수 있다.
또한, 오디오 해설은 감상 경로에 맞게 제작하여 함께 감상할 수 있으며, 시각장애인은 주어진 감상 경로에 따라가며 감상을 하고 추천 오브젝트들에 대한 자세한 설명을 자연스럽게 순서에 맞게 감상할 수 있다.
도 4는 본 발명에 따른 감상 경로 생성 장치의 동작방법을 나타낸 순서도이다.
도 4를 참조하면, 감상 경로 생성 장치(100)는 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 수집 및 입력받을 수 있다(S110).
감상 경로 생성 장치(100)는 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 기반으로 작품별 감상 오브젝트(object)들을 확인할 수 있다(S120).
감상 경로 생성 장치(100)는 특정 작품 정보(pf)가 입력되면(S130), 특정 작품 정보(pf)에 포함된 특정 작품의 영상에서 오브젝트들을 인식할 수 있다(S140).
이후, 감상 경로 생성 장치(100)는 특정 작품 정보(pf)에 포함된 특정 작품에 대한 설명 시간을 기반으로 추천 오브젝트의 개수를 결정할 수 있다(S150).
상기 추천 오브젝트의 개수가 결정된 경우, 감상 경로 생성 장치(100)는 상기 오브젝트들 중 상기 작품별 감상 오브젝트들과 매칭되는 추천 오브젝트들을 추출할 수 있다(S160).
감상 경로 생성 장치(100)는 상기 추천 오브젝트들을 가이드하기 위해, 설정된 TSP 알고리즘(Travelling Salesman Problem algorithm)에 따라 감상 경로를 확인생성할 수 있다(S170).
감상 경로 생성 장치(100)는 상기 감상 경로에 따라 상기 추전 오브젝트들 중 시작 및 종류 지점에 위치한 추천 오브젝트를 나타내는 제1 형상 및 나머지 추천 오브젝트들을 나타내며 상기 제1 형상과 다른 제2 형상을 결정하고, 상기 제1, 2 형상 사이를 가이드하는 가이드 선을 출력할 수 있다(S180).
이상에서 실시 예들에 설명된 특징, 구조, 효과 등은 본 발명의 적어도 하나의 실시 예에 포함되며, 반드시 하나의 실시 예에만 한정되는 것은 아니다. 나아가, 각 실시 예에서 예시된 특징, 구조, 효과 등은 실시 예들이 속하는 분야의 통상의 지식을 가지는 자에 의해 다른 실시 예들에 대해서도 조합 또는 변형되어 실시 가능하다. 따라서 이러한 조합과 변형에 관계된 내용들은 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.
또한, 이상에서 실시 예를 중심으로 설명하였으나 이는 단지 예시일 뿐 본 발명을 한정하는 것이 아니며, 본 발명이 속하는 분야의 통상의 지식을 가진 자라면 본 실시 예의 본질적인 특성을 벗어나지 않는 범위에서 이상에 예시되지 않은 여러가지의 변형과 응용이 가능함을 알 수 있을 것이다. 예를 들어, 실시 예에 구체적으로 나타난 각 구성 요소는 변형하여 실시할 수 있는 것이다. 그리고 이러한 변형과 응용에 관계된 차이점들은 첨부된 청구 범위에서 규정하는 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (14)

  1. 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보를 수집하는 단계;
    상기 시선 추적 정보 및 상기 접촉 추적 정보를 기반으로 작품별 감상 오브젝트(object)들을 확인하는 단계;
    특정 작품 정보 입력 시, 상기 특정 작품 정보 및 상기 작품별 감상 오브젝트들을 기반으로 특정 작품 내에서 추천 오브젝트(object)들을 추출하고, 상기 특정 작품에 대한 감상을 위해 상기 추천 오브젝트들을 가이드하는 감상 경로를 생성하는 단계를 포함하는,
    감상 경로 생성 장치의 동작방법.
  2. 제 1 항에 있어서,
    상기 시선 추적 정보는,
    상기 작품별 오브젝트들 각각을 감상하는 시선 대기 시간을 포함하고,
    상기 접촉 추적 정보는,
    상기 작품별 오브젝트들 각각을 접촉 감상하는 접촉 대기 시간을 포함하는,
    감상 경로 생성 장치의 동작방법.
  3. 제 2 항에 있어서,
    상기 작품별 감상 오브젝트들을 확인하는 단계는,
    상기 시선 대기 시간 및 상기 접촉 대기 시간에 대한 평균 대기 시간을 연산하고, 상기 평균 대기 시간이 높은 순서로 상기 작품별 감상 오브젝트들을 확인하는,
    감상 경로 생성 장치의 동작방법.
  4. 제 1 항에 있어서,
    상기 특정 작품 정보는,
    상기 특정 작품의 영상 및 상기 특정 작품에 대한 설명 시간을 포함하는,
    감상 경로 생성 장치의 동작방법.
  5. 제 4 항에 있어서,
    상기 감상 경로를 생성하는 단계는,
    상기 특정 작품의 영상에서 오브젝트들을 인식하는 단계;
    상기 설명 시간을 기반으로 추천 오브젝트의 개수를 결정하는 단계;
    상기 추천 오브젝트의 개수에 대응하게 상기 오브젝트들 중 상기 작품별 감상 오브젝트들과 매칭되는 상기 추천 오브젝트들을 추출하는 단계; 및
    상기 추천 오브젝트들을 가이드하기 위해, 설정된 TSP 알고리즘(Travelling Salesman Problem algorithm)에 따라 상기 감상 경로를 확인생성하는 단계를 포함하는,
    감상 경로 생성 장치의 동작방법.
  6. 제 5 항에 있어서,
    상기 추천 오브젝트의 개수를 결정하는 단계는,
    상기 설명 시간에 비례하여 상기 추천 오브젝트의 개수가 증가하는,
    감상 경로 생성 장치의 동작방법.
  7. 제 5 항에 있어서,
    상기 감상 경로를 확인생성하는 단계는,
    상기 추천 오브젝트들 각각의 인식 배치를 기준으로 상기 감상 경로를 확인 생성하는,
    감상 경로 생성 장치의 동작방법.
  8. 제 5 항에 있어서,
    상기 감상 경로는,
    상기 추천 오브젝트들 중 좌상단에 위치한 추천 오브젝트를 시작 및 종료 지점으로 선회하는 경로인,
    감상 경로 생성 장치의 동작방법.
  9. 제 1 항에 있어서,
    상기 감상 경로에 따라 상기 추전 오브젝트들 중 상기 감상 경로에서 시작 및 종류 지점에 위치한 추천 오브젝트를 나타내는 제1 형상 및 나머지 추천 오브젝트들을 나타내며 상기 제1 형상과 다른 제2 형상을 결정하고, 상기 제1, 2 형상 사이를 가이드하는 가이드 선을 출력하는 단계를 더 포함하는,
    감상 경로 생성 장치의 동작방법.
  10. 특정 작품에 대한 특정 작품 정보가 입력되는 입력부;
    상기 특정 작품 상에 감상 경로를 출력하는 출력부; 및
    상기 특정 작품 정보 입력 시, 수집한 작품별 시선 추적(eye tracking) 정보 및 접촉 추적(touch tracking) 정보에서 확인한 작품별 감상 오브젝트 및 상기 특정 작품 정보를 기반으로 상기 특정 작품 내에서 추천 오브젝트들을 추출하고, 상기 특정 작품에 대한 감상을 위해 상기 추천 오브젝트들을 가이드하는 상기 감상 경로를 생성하여 출력하는 제어부는 포함하는,
    감상 경로 생성 장치.
  11. 제 10 항에 있어서,
    상기 시선 추적 정보는,
    상기 작품별 오브젝트들 각각을 감상하는 시선 대기 시간을 포함하고,
    상기 접촉 추적 정보는,
    상기 작품별 오브젝트들 각각을 접촉 감상하는 접촉 대기 시간을 포함하며,
    상기 특정 작품 정보는,
    상기 특정 작품의 영상 및 상기 특정 작품에 대한 설명 시간을 포함하는,
    감상 경로 생성 장치.
  12. 제 11 항에 있어서,
    상기 제어부는,
    상기 시선 대기 시간 및 상기 접촉 대기 시간에 대한 평균 대기 시간을 연산하고, 상기 평균 대기 시간이 높은 순서로 상기 작품별 감상 오브젝트들을 확인하는,
    감상 경로 생성 장치.
  13. 제 12 항에 있어서,
    상기 제어부는,
    상기 특정 작품의 영상에서 오브젝트들을 인식하고, 상기 설명 시간을 기반으로 추천 오브젝트의 개수를 결정하며, 상기 추전 오브젝트의 개수에 대응되게 상기 오브젝트들 중 상기 작품별 감상 오브젝트들과 매칭되는 상기 추천 오브젝트들을 추출하고, 상기 추천 오브젝들을 가이드하기 위해 설정된 TSP 알고리즘(Travelling Salesman Problem algorithm)에 따라 상기 감상 경로를 생성하는,
    감상 경로 생성 장치.
  14. 제 12 항에 있어서,
    상기 제어부는,
    상기 추천 오브젝트들 각각의 인식 배치를 기준으로 좌상단에 위치한 추천 오브젝트를 시작 및 종료시적으로 선회하는 상기 감상 경로를 생성하는,
    감상 경로 생성 장치
KR1020200182128A 2020-12-23 2020-12-23 감상 경로 생성 장치 및 그 동작방법 KR102459530B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200182128A KR102459530B1 (ko) 2020-12-23 2020-12-23 감상 경로 생성 장치 및 그 동작방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200182128A KR102459530B1 (ko) 2020-12-23 2020-12-23 감상 경로 생성 장치 및 그 동작방법

Publications (2)

Publication Number Publication Date
KR20220091028A true KR20220091028A (ko) 2022-06-30
KR102459530B1 KR102459530B1 (ko) 2022-10-27

Family

ID=82215094

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200182128A KR102459530B1 (ko) 2020-12-23 2020-12-23 감상 경로 생성 장치 및 그 동작방법

Country Status (1)

Country Link
KR (1) KR102459530B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150005131A (ko) * 2013-07-04 2015-01-14 엘지전자 주식회사 영상표시장치 및 영상표시장치 동작방법
KR20200030252A (ko) * 2018-09-12 2020-03-20 (주)버즈아트 예술 작품 제공 장치 및 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150005131A (ko) * 2013-07-04 2015-01-14 엘지전자 주식회사 영상표시장치 및 영상표시장치 동작방법
KR20200030252A (ko) * 2018-09-12 2020-03-20 (주)버즈아트 예술 작품 제공 장치 및 방법

Also Published As

Publication number Publication date
KR102459530B1 (ko) 2022-10-27

Similar Documents

Publication Publication Date Title
US12055719B2 (en) Systems and methods for sign language recognition
JP7483798B2 (ja) ワードフロー注釈
EP3465597B1 (en) Augmented reality identity verification
Herskovitz et al. Making mobile augmented reality applications accessible
US10825217B2 (en) Image bounding shape using 3D environment representation
CN106200956A (zh) 一种虚拟现实领域多媒体呈现和交互的方法
Loizides et al. Presenting cypriot cultural heritage in virtual reality: A user evaluation
KR20140128306A (ko) 정보 처리 장치, 정보 처리 방법, 및 프로그램
JP2016512363A (ja) コンテンツ作成ツール
CN113359986B (zh) 增强现实数据展示方法、装置、电子设备及存储介质
JP2015125448A (ja) 立体面スクリーン及び立体面画像投影方法並びに立体面表示装置
US10255722B2 (en) Method for generating camerawork information, apparatus for generating camerawork information, and non-transitory computer readable medium
KR102459530B1 (ko) 감상 경로 생성 장치 및 그 동작방법
CN108989268B (zh) 会话展示方法、装置和计算机设备
US20150242457A1 (en) Flexible content display
Shumaker et al. Virtual, Augmented and Mixed Reality
JP2017134492A (ja) 画像生成装置、画像生成方法、及び画像生成プログラム
CN105975179A (zh) 一种3d空间用户界面的操作对象确定方法及其装置
Shumaker Virtual, Augmented and Mixed Reality: Designing and Developing Augmented and Virtual Environments: 5th International Conference, VAMR 2013, Held as Part of HCI International 2013, Las Vegas, NV, USA, July 21-26, 2013, Proceedings, Part I
JP7546522B2 (ja) 仮想空間内で実行されたミーティングのまとめ映像を作成するシステム及び方法
Hopf et al. Novel autostereoscopic single-user displays with user interaction
US20240353680A1 (en) Systems and methods for sign language recognition
NZ792193A (en) Sensory eyewear
JP2015141450A (ja) キャラクタ作成支援装置およびプログラム

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant