KR20180084465A - 영상 컨텐츠를 재사용하여 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어 제작 시스템 및 그 운용방법 - Google Patents

영상 컨텐츠를 재사용하여 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어 제작 시스템 및 그 운용방법 Download PDF

Info

Publication number
KR20180084465A
KR20180084465A KR1020170008102A KR20170008102A KR20180084465A KR 20180084465 A KR20180084465 A KR 20180084465A KR 1020170008102 A KR1020170008102 A KR 1020170008102A KR 20170008102 A KR20170008102 A KR 20170008102A KR 20180084465 A KR20180084465 A KR 20180084465A
Authority
KR
South Korea
Prior art keywords
image
natural language
image reconstruction
ontology
language processing
Prior art date
Application number
KR1020170008102A
Other languages
English (en)
Other versions
KR102202372B1 (ko
Inventor
한민호
김선중
박원주
박종현
손정우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020170008102A priority Critical patent/KR102202372B1/ko
Priority to US15/605,282 priority patent/US11017015B2/en
Publication of KR20180084465A publication Critical patent/KR20180084465A/ko
Application granted granted Critical
Publication of KR102202372B1 publication Critical patent/KR102202372B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F17/30823—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/268—Morphological analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21815—Source of audio or video content, e.g. local disk arrays comprising local storage units
    • H04N21/21825—Source of audio or video content, e.g. local disk arrays comprising local storage units involving removable storage units, e.g. tertiary storage such as magnetic tapes or optical disks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Library & Information Science (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 저장된 영상을 이용하여 누구나 쉽게 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어를 제작하는 기술을 제공한다. 본 발명에 따른 시스템은 영상 재구성 서버와 영상 온톨로지 및 영상 저장소로 구성되고, 영상 재구성 서버는 영상 재구성 콘트롤러, 자연어 처리 모듈, 및 영상 검색 모듈로 구성된다. 영상 재구성 서버의 상기 영상 재구성 컨트롤러는 사용자로부터 자연어 기반 시나리오를 입력 받고, 자연어 처리 모듈, 영상 검색 모듈 및 영상 저장소를 이용하여 사용자가 원하는 영상을 검색한다. 영상 재구성 서버의 상기 자연어 처리 모듈은 사용자가 입력한 시나리오에 대해 영상 온톨로지 검색을 위한 사전 단계로 형태소 및 구문 분석을 수행한다. 영상 재구성 서버의 상기 영상 검색 모듈은 자연어 처리 결과를 이용하여 SPAQAL과 같은 온톨로지 검색 질의문을 자동으로 생성하고, 생성된 질의문을 이용하여 영상 온톨로지를 검색한다.
KR1020170008102A 2017-01-17 2017-01-17 영상 컨텐츠를 재사용하여 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어 제작 시스템 및 그 운용방법 KR102202372B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020170008102A KR102202372B1 (ko) 2017-01-17 2017-01-17 영상 컨텐츠를 재사용하여 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어 제작 시스템 및 그 운용방법
US15/605,282 US11017015B2 (en) 2017-01-17 2017-05-25 System for creating interactive media and method of operating the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170008102A KR102202372B1 (ko) 2017-01-17 2017-01-17 영상 컨텐츠를 재사용하여 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어 제작 시스템 및 그 운용방법

Publications (2)

Publication Number Publication Date
KR20180084465A true KR20180084465A (ko) 2018-07-25
KR102202372B1 KR102202372B1 (ko) 2021-01-13

Family

ID=62841589

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170008102A KR102202372B1 (ko) 2017-01-17 2017-01-17 영상 컨텐츠를 재사용하여 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어 제작 시스템 및 그 운용방법

Country Status (2)

Country Link
US (1) US11017015B2 (ko)
KR (1) KR102202372B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230013805A (ko) * 2021-07-20 2023-01-27 임욱빈 인터랙티브 자연어 처리 기반의 동영상 생성 장치 및 방법

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110704681B (zh) * 2019-09-26 2023-03-24 三星电子（中国）研发中心 一种生成视频的方法及系统
US11228750B1 (en) * 2020-09-08 2022-01-18 Rovi Guides, Inc. Systems and methods for generating virtual reality scenes
US12008037B2 (en) 2020-11-03 2024-06-11 Samsung Electronics Co., Ltd. Method of video search in an electronic device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07219952A (ja) * 1994-02-01 1995-08-18 N T T Data Tsushin Kk 日本語文章処理装置
KR20090028123A (ko) * 2007-09-14 2009-03-18 세종대학교산학협력단 인터랙티브 콘텐츠 자동 저작 기술
KR20100052861A (ko) 2008-11-11 2010-05-20 삼성전자주식회사 사용자 정보 보호가 가능한 인터랙티브 컨텐츠 재생장치 및방법
KR101283520B1 (ko) 2008-04-24 2013-07-15 소니 컴퓨터 엔터테인먼트 아메리카 엘엘씨 시청자가 미디어 영상과 실시간으로 인터랙션하는 방법 및 장치
JP2014081957A (ja) * 2007-06-05 2014-05-08 Intellectual Ventures Fund 83 Llc 意味分類装置を利用した自動的なストーリー生成

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7973793B2 (en) * 2005-06-10 2011-07-05 Panasonic Corporation Scenario generation device, scenario generation method, and scenario generation program
EP2051533B1 (en) * 2007-10-19 2014-11-12 Canon Kabushiki Kaisha 3D image rendering apparatus and method
US8359191B2 (en) * 2008-08-01 2013-01-22 International Business Machines Corporation Deriving ontology based on linguistics and community tag clouds
KR101644789B1 (ko) * 2009-04-10 2016-08-04 삼성전자주식회사 방송 프로그램 연관 정보 제공 장치 및 방법
KR101118536B1 (ko) 2009-10-23 2012-03-12 세종대학교산학협력단 상호 작용이 가능한 콘텐츠 저작 수단을 제공하는 방법
US20110149042A1 (en) 2009-12-18 2011-06-23 Electronics And Telecommunications Research Institute Method and apparatus for generating a stereoscopic image
CN102694826B (zh) * 2011-03-22 2018-09-07 百度在线网络技术（北京）有限公司 一种用于获取与现实场景相关的共享对象的设备和方法
WO2013034801A2 (en) * 2011-09-09 2013-03-14 Nokia Corporation Method and apparatus for processing metadata in one or more media streams
US10372758B2 (en) * 2011-12-22 2019-08-06 Tivo Solutions Inc. User interface for viewing targeted segments of multimedia content based on time-based metadata search criteria
KR101713772B1 (ko) 2012-02-06 2017-03-09 한국전자통신연구원 사전 시각화 영상 생성 장치 및 방법
KR102161230B1 (ko) * 2013-05-28 2020-09-29 삼성전자주식회사 멀티미디어 콘텐츠 검색을 위한 사용자 인터페이스 방법 및 장치
US9518947B2 (en) * 2014-10-10 2016-12-13 Progress Rail Services Corporation System and method for detecting wheel bearing condition

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07219952A (ja) * 1994-02-01 1995-08-18 N T T Data Tsushin Kk 日本語文章処理装置
JP2014081957A (ja) * 2007-06-05 2014-05-08 Intellectual Ventures Fund 83 Llc 意味分類装置を利用した自動的なストーリー生成
KR20090028123A (ko) * 2007-09-14 2009-03-18 세종대학교산학협력단 인터랙티브 콘텐츠 자동 저작 기술
KR101283520B1 (ko) 2008-04-24 2013-07-15 소니 컴퓨터 엔터테인먼트 아메리카 엘엘씨 시청자가 미디어 영상과 실시간으로 인터랙션하는 방법 및 장치
KR20100052861A (ko) 2008-11-11 2010-05-20 삼성전자주식회사 사용자 정보 보호가 가능한 인터랙티브 컨텐츠 재생장치 및방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230013805A (ko) * 2021-07-20 2023-01-27 임욱빈 인터랙티브 자연어 처리 기반의 동영상 생성 장치 및 방법
WO2023003141A3 (ko) * 2021-07-20 2023-03-16 임욱빈 인터랙티브 자연어 처리 기반의 동영상 생성 장치 및 방법

Also Published As

Publication number Publication date
US11017015B2 (en) 2021-05-25
KR102202372B1 (ko) 2021-01-13
US20180203855A1 (en) 2018-07-19

Similar Documents

Publication Publication Date Title
JP6505903B2 (ja) 会話型相互作用システムの検索入力におけるユーザ意図を推定する方法およびそのためのシステム
US11636146B2 (en) Content analysis to enhance voice search
KR20180084465A (ko) 영상 컨텐츠를 재사용하여 사용자 인터랙션을 인지할 수 있는 인터랙티브 미디어 제작 시스템 및 그 운용방법
US10672391B2 (en) Improving automatic speech recognition of multilingual named entities
TWI493363B (zh) 資料流之即時自然語言處理
WO2018102980A1 (zh) 语音交互方法、装置及系统
EP4312147A3 (en) Scalable dynamic class language modeling
WO2012048306A3 (en) Structured searching of dynamic structured document corpuses
WO2018045646A1 (zh) 基于人工智能的人机交互方法和装置
GB2523496A (en) Systems and methods for computer assisted dispatch, incident report-based video search and tagging
BR112017019015A2 (pt) sistema que facilita o uso de palavras-chave inseridas pelo usuário para buscar conceitos clínicos relacionados, e método para facilitar o uso de palavras-chave inseridas pelo usuário para buscar conceitos clínicos relacionados
WO2010151788A3 (en) System and methods for units-based numeric information retrieval
WO2012066104A3 (en) Apparatus and method for managing user inputs in video games
EP4307295A3 (en) Server and method for controlling server
WO2012165929A3 (ko) 웹을 이용한 정보 검색 방법 및 이를 사용하는 음성 대화 방법
Wang et al. Automatic construction of discourse corpora for dialogue translation
JP7021368B2 (ja) ネットワークにおけるデジタルコンテンツの音声ベースの検索
JP2015523623A5 (ko)
US20150310107A1 (en) Video and audio content search engine
WO2017164510A3 (ko) 음성 데이터 기반 멀티미디어 콘텐츠 태깅 방법 및 이를 이용한 시스템
KR101709693B1 (ko) 크라우드 소싱을 이용한 웹툰 언어 자동 번역 방법
PH12020552089A1 (en) Search sentence generation system and search sentence generation method
RU2013132622A (ru) Система и метод семантического поиска
Medhat et al. Corpora preparation and stopword list generation for Arabic data in social network
Han et al. Interactive media creation by reusing video contents

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant