WO2021182827A1 - 컨텍스트 내 탐색적 언어 학습장치 및 방법 - Google Patents

컨텍스트 내 탐색적 언어 학습장치 및 방법 Download PDF

Info

Publication number
WO2021182827A1
WO2021182827A1 PCT/KR2021/002854 KR2021002854W WO2021182827A1 WO 2021182827 A1 WO2021182827 A1 WO 2021182827A1 KR 2021002854 W KR2021002854 W KR 2021002854W WO 2021182827 A1 WO2021182827 A1 WO 2021182827A1
Authority
WO
WIPO (PCT)
Prior art keywords
learning
language
user
context
service
Prior art date
Application number
PCT/KR2021/002854
Other languages
English (en)
French (fr)
Inventor
유환수
웨인라이트존
Original Assignee
주식회사 미리내
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020200137118A external-priority patent/KR20210113550A/ko
Application filed by 주식회사 미리내 filed Critical 주식회사 미리내
Publication of WO2021182827A1 publication Critical patent/WO2021182827A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/06—Foreign languages
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied

Definitions

  • the present invention relates to an in-context exploratory language learning apparatus and method, and more particularly, to an exploratory language learning in a context for new and more effective use of a specific computer-based, content-oriented language learning, search, and reference system by extension. It relates to an apparatus and method.
  • the present invention includes the contents of US Provisional Application No. 62986764 (March 08, 2020) (In-context exploratory language learning).
  • the present invention has been proposed in view of the above-described conventional situation, and an object of the present invention is to provide a screen through which the user can immediately recognize the structure of a corresponding language while watching a specific image, unlike the existing content-based language learning system.
  • An in-context exploratory language learning apparatus is a browser means for searching and playing an image according to a user's request, an adapter means for matching and applying an image searched and reproduced by the browser means with text, a language, a search , a function providing means for providing service-contents, a service API that provides a function for investigation, analysis, storage, and return according to a user's request, a service adapter means for providing a learning and reference service function, a learning and reference service It is characterized in that it provides a service function so that a user can learn a specific language when playing an image and learn a word during learning, including an external computer server that provides
  • a screen is displayed on which the user can immediately recognize the structure of the corresponding language while watching a specific image. It can be provided, and after that, it can be provided new and more effectively by expanding the computer-based, content-oriented language learning, search and reference system that allows you to specifically search and learn the corresponding language.
  • the present invention is an extension of the conventional structured top-down approach that is widely used today.
  • FIG. 1 is a schematic system configuration diagram of an in-context exploratory language learning apparatus according to the present invention.
  • FIG. 2 is a view showing a playback screen, a learning screen, and a function screen exemplarily showing the learning process of the in-context exploratory language learning apparatus according to the present invention.
  • FIG 3 is a view showing a playback screen and a learning screen exemplarily showing the learning process of the in-context exploratory language learning apparatus according to the present invention.
  • FIG. 4 is a block diagram for explaining a schematic configuration of an in-context exploratory language learning apparatus according to the present invention.
  • An in-context exploratory language learning apparatus is a browser means for searching and playing an image according to a user's request, an adapter means for matching and applying an image searched and reproduced by the browser means with text, a language, a search , a function providing means for providing service-contents, a service API that provides a function for investigation, analysis, storage, and return according to a user's request, a service adapter means for providing a learning and reference service function, a learning and reference service It is characterized in that it provides a service function so that a user can learn a specific language when playing an image and learn a word during learning, including an external computer server that provides
  • the first step of receiving a learning request signal for the Korean language that the user wants to better understand or explore the first step of receiving a learning request signal for the Korean language that the user wants to better understand or explore
  • an in-context exploratory language learning method through an in-context exploratory language learning apparatus including a fourth step of outputting a screen displaying an exemplary sentence pattern according to a user's request.
  • the fourth step may be performed automatically through a menu or other activation device provided by an extension program, or automatically when the user pauses video playback.
  • extension program is characterized in that it visually displays all candidate instances of the Korean language.
  • FIG. 1 is a schematic system configuration diagram of an in-context exploratory language learning apparatus according to the present invention
  • FIG. 2 is a playback screen, a learning screen and It is a view showing a functional screen
  • FIG. 3 is a view showing a reproduction screen and a learning screen exemplarily showing the learning process of the in-context exploratory language learning apparatus according to the present invention
  • FIG. It is a block diagram for explaining the schematic configuration of the language learning apparatus.
  • the present invention relates to a method and apparatus for finding an instance of a learning language (target language) in a currently played (experienced) media, and provides a search and learning opportunity in a connected system and provides reference or education UIX device to provide presentation of material, media context to integrate in-context language search system and extended content drive learning systems, along with plugin-based extensibility framework for adding new languages (media-context) and learning system and API (Application Program Interface) design.
  • a learning language target language
  • UIX device to provide presentation of material
  • media context to integrate in-context language search system and extended content drive learning systems
  • plugin-based extensibility framework for adding new languages (media-context) and learning system and API (Application Program Interface) design.
  • Embodiments of the present invention are as follows, and other embodiments are possible as described in the Embodiments section below, including those that do not have the same generalized and extensible architecture.
  • the above embodiment is a generalized design using several standardized APIs implemented by an adapter for a specific host medium 110, a learning service, and a set of components, and various types of APIs using these APIs to provide an in-context learning experience. It can be implemented as a plug-in for the target language, interaction mode and display style.
  • the main components are:
  • a host medium that plays any content, such as a web browser page, streaming video player, smart TV, mobile app, audio player, etc.
  • An optional media adapter that implements a standardized set of media-side APIs so that a variety of common plug-ins can be used without changing other media contexts.
  • adapters to the Chrome and Safari browser extension schemes allow a common set of plug-ins to be used by both browsers.
  • Media API services 130 proposed in this embodiment include:
  • ⁇ Discovery which provides a discovery service to find and label instances of the target language in the current media. It can only work when the media is placed in a certain state, such as a video that provides subtitles in a target language is switched to a paused state by the user.
  • the adapter may perform media conversions, such as optical character recognition of video frames or speech-to-text conversion of audio segments to bring the content into a format accepted by the learning service.
  • Interaction providing interactive services that allow users to select content items and navigate through references and learning materials sent or received for analysis.
  • ⁇ Display providing a service for displaying learning and reference materials received from the learning service.
  • the embodiment of the present invention does not include a media adapter that provides a plug-in specially designed for each host medium. However, it will differently provide the same in-context learning service as the adapter does.
  • the adapter is basically an optimized implementation.
  • An optional learning service adapter that implements a standard service-side API for common plug-ins to interact with other learning services or reference services.
  • the service bound API may provide content for querying, analysis or other processing, polling services for retrieving results, provisioning incrementally, displaying and retrieving results, storing content, or We provide services such as visiting the home site of the service.
  • the plug-in will be specialized to interact directly with the respective learning or reference service.
  • a set of plugins or components that implement a transformation of a service within a context along various dimensions For example:
  • the language components 142 implement processes related to different target languages, respectively.
  • Exploration components 144 implement different search modes that can provide a reference or learning service according to the content structure characteristics in the context. For example, a search mode that supports simple selection and search for a single word may be required to use the word definition service, so that the content is usually composed of large blocks with respect to the target language. Alternatively, a song lyrics translation service might be best supported in an in-context navigation mode that helps you find lyric stanzas or navigate common lyric display styles.
  • Service content components (service content components) 146 deals with various kinds of learning or reference service materials obtained by the search request.
  • a simple word definition or sentence translation service requires a simple display mode, whereas a search learning service provides layers for reference material that can be searched and moved (navigated) in situ.
  • Unexplained symbols indicate the service API 150 and the learning/referencing service adapter 160 . It may be connected through a wired/wireless communication network 170 for a link operation with a wired/wireless communication network or an external server (not shown) that provides a learning or reference service.
  • An essential function of the present invention is to provide an interactive, in-media opportunity to explore and study organically generated instances of a language to be learned.
  • the following description of an embodiment of the present invention takes this function as an example.
  • Other embodiments may work with alternate learning or reference services, operate in different media contexts, and support different languages, but perform the same type of in-context learning service differently.
  • FIG. 4 has a configuration similar to that of FIG. 1 , it will be mainly described with reference to parts different from those of FIG. 1 .
  • FIG. 4 it has a configuration similar to that of FIG. 1 , and includes a chrome browser 210 , a Mirinae API (discovery/interaction/display) 230, a Korean text page plug-in 241, and a Korean VIKI player plug-in 242. , including a text page plug-in 243, a non-key video player plug-in 244, and a Mirinae Explorer content handler (Handler) 245,
  • It includes a service API 240 and a Mirinae Explorer adapter 260, and a wired/wireless communication network or (Mirinae) Korean Explorer 270 for connection with an external server.
  • Another embodiment may bypass the need to use a browser extension mechanism and embed the following components directly into a website that wants to implement direct integration with the learning service.
  • Korean language components that can discover and display instances of Korean text in text-based web pages, such as those created on coursewear, culinary, cultural, and other sites.
  • the Korean component is specialized for the Viki drama streaming site. That is, video player control, playback status can be recognized, and Korean subtitles can be found and displayed.
  • the search component connected to the Korean content discovered and displayed by the component responds to the user's search request and transmits the text to be searched for to the Mirinae Explorer service according to the collection and format.
  • ⁇ Result search, display, and move (navigation) component processes learning content response in Mirinae Explorer service and provides an interactive display for the corresponding content, usually provided in the form of a temporary overlay on top of general page content. This component also supports storing the retrieved context in the Myrinae service for later learning. Also stores links to the respective service sites and other related referenced services.
  • ⁇ Mirinae service adapter provides general connection service to Mirinae API for other components.
  • a component may connect directly to a reference or learning service.
  • a user may come across a page containing instances of Korean text, the language to be learned. This may be an example sentence on a Korean language coursewear site, song lyrics on a K-Pop site, or a chat message on a language exchange site.
  • the user may be watching a Korean drama on a streaming site such as viki.com that provides Korean subtitles (see FIG. 2 or FIG. 3 ).
  • the user can pause the video for further learning.
  • the user requests to find a Korean instance in the current content through the learning extension program.
  • the extension program visually displays all candidate instances of Korean. See example below.
  • the image above shows how a browser extension can find and tag Korean instances that are navigable with a small Korean flag button.
  • the upper right image is an example of an extended pop-up menu that provides a button to show or hide navigation tags.
  • Korean subtitles are tagged similar to the navigator button, and the video image is displayed with the player in pause mode.
  • the browser-extended content script navigates the page DOM for a suitable instance for Korean text, and expands the DOM at that location with the navigator tag button HTML and event handler script.
  • the in-context exploratory language learning apparatus and method unlike the existing content-based language learning system, it is possible to provide a screen in which the user can immediately recognize the structure of a corresponding language while watching a specific image, After that, the computer-based, content-oriented language learning, search, and reference system that enables specific exploration and learning of the corresponding language can be expanded to provide a new and more effective service.
  • the present invention is an extension of the conventional structured top-down approach that is widely used today.

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

본 발명은 특정 컴퓨터 기반, 콘텐츠 중심의 언어 학습, 탐색 및 참조시스템을 확장하여 새롭고 보다 효과적으로 이용하기 위한 컨텍스트 내 탐색적 언어 학습장치 및 방법에 관한 것이다. 이는 컨텍스트(context) 내 학습 시스템으로 학습중인 언어에 대해 유기적으로 생성된 인스턴스(Instance)들을 현재 미디어 컨텍스트를 벗어나지 않고 그 자리에서(in situ) 탐색 및 학습이 가능하도록 한다. 이 시스템은 결국, 상향식 언어 학습에 대하여 유동적이고 저마찰(low friction) 기회를 제공하며, 현재 널리 사용되고 있는 종래의 구조화된 하향식 접근방식을 확장한 것이다.

Description

컨텍스트 내 탐색적 언어 학습장치 및 방법
본 발명은 컨텍스트 내 탐색적 언어 학습장치 및 방법에 관한 것으로, 더욱 상세하게는, 특정 컴퓨터 기반, 콘텐츠 중심의 언어 학습, 탐색 및 참조시스템을 확장하여 새롭고 보다 효과적으로 이용하기 위한 컨텍스트 내 탐색적 언어 학습장치 및 방법에 관한 것이다.
본 발명은 미국 가출원 제62986764호(2020년03월08일)(In-context exploratory language learning)의 내용을 포함하고 있는 것이다.
인터넷 서비스의 발달로 다른 나라의 동영상 컨텐츠를 개인 단말기기 혹은 전자장치를 이용하여 즐기는 인구가 늘고 있다.
특히 K-POP의 영향으로 영어권 국가에서 한국어 가요영상 뿐만 아니라고 영화등 다양한 영상컨텐츠를 시청하는 경우가 늘고 있다.
그런데, 예를 들어 영어를 사용하는 Viki등의 동영상 시청프로그램을 사용하여 한국어 영상을 시청하면서 자막을 통해 서비스되는 한국어를 학습하거나 해당 한국어의 영어를 찾아보고자 할 때 그에 대응하는 즉각적인 서비스가 되지 않고 있는 실정이다.
[선행기술문헌]
대한민국 특허 등록번호 제10-1578991호(2015년12월14일 등록)(발명의 명칭:
ＤＯＭ기반 동형을 이용하여 웹브라우징 연산을 메모라이징)
본 발명은 상술한 종래의 실정을 감안하여 제안된 것으로서, 본 발명의 목적은 기존의 콘텐츠 기반 언어학습 시스템과는 달리 사용자가 특정 영상을 시청하면서 해당언어의 구조를 즉각 인식할 수 있는 화면을 제공할 수 있고, 이후에도 해당 언어를 구체적으로 탐색하고 학습할 수 있도록 하는 컴퓨터 기반, 콘텐츠 중심의 언어 학습, 탐색 및 참조시스템을 확장하여 새롭고 보다 효과적으로 제공하기 위한 컨텍스트 내 탐색적 언어 학습장치 및 방법을 제공하는 것이다.
본 발명의 실시예에 따른 컨텍스트 내 탐색적 언어 학습장치는 사용자의 요청에 따라 영상을 검색하고 재생하는 브라우저수단, 브라우저수단에 의해 검색되고 재생된 영상을 텍스트와 매칭적용시키는 어댑터수단, 언어, 탐색, 서비스-콘텐츠를 제공하는 기능제공수단, 사용자의 요청에 따른 조사,분석,저장,복귀 기능을 제공하는 서비스 에이피아이(API), 학습 및 참조서비스 기능을 제공하는 서비스어댑터수단, 학습 및 참조서비스를 유선 또는 무선 통신망을 통해 제공하는 외부 컴퓨터 서버를 포함하여 사용자가 영상 재생시 특정 언어를 학습하고 학습중 단어학습을 할 수 있도록 서비스 기능을 제공하는 것을 특징으로 한다.
상술한 바와 같이, 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치 및 방법에 의하면, 기존의 콘텐츠 기반 언어학습 시스템과는 달리 사용자가 특정 영상을 시청하면서 해당언어의 구조를 즉각 인식할 수 있는 화면을 제공할 수 있고, 이후에도 해당 언어를 구체적으로 탐색하고 학습할 수 있도록 하는 컴퓨터 기반, 콘텐츠 중심의 언어 학습, 탐색 및 참조시스템을 확장하여 새롭고 보다 효과적으로 제공받을 수 있다.
이는 컨텍스트(context) 내 학습 시스템으로 학습중인 언어에 대해 유기적으로 생성된 인스턴스(Instance)들을 현재 미디어 컨텍스트를 벗어나지 않고 그 자리에서(in situ) 탐색 및 학습이 가능하도록 함으로써 결국, 상향식 언어 학습에 대하여 유동적이고 저마찰(low fricion) 기회를 제공할 수 있다.
본 발명은 현재 널리 사용되고 있는 종래의 구조화된 하향식 접근방식을 확장한 것이다.
도 1은 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 개략적인 시스템 구성도이다.
도 2는 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 학습과정을 예시적으로 보여주는 재생화면, 학습화면 및 기능화면을 나타낸 도면이다.
도 3은 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 학습과정을 예시적으로 보여주는 재생화면 및 학습화면을 나타내는 도면이다.
도 4는 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 개략적인 구성을 설명하기 위한 블럭구성도이다.
본 발명의 실시예에 따른 컨텍스트 내 탐색적 언어 학습장치는 사용자의 요청에 따라 영상을 검색하고 재생하는 브라우저수단, 브라우저수단에 의해 검색되고 재생된 영상을 텍스트와 매칭적용시키는 어댑터수단, 언어, 탐색, 서비스-콘텐츠를 제공하는 기능제공수단, 사용자의 요청에 따른 조사,분석,저장,복귀 기능을 제공하는 서비스 에이피아이(API), 학습 및 참조서비스 기능을 제공하는 서비스어댑터수단, 학습 및 참조서비스를 유선 또는 무선 통신망을 통해 제공하는 외부 컴퓨터 서버를 포함하여 사용자가 영상 재생시 특정 언어를 학습하고 학습중 단어학습을 할 수 있도록 서비스 기능을 제공하는 것을 특징으로 한다.
본 발명의 다른 측면에 따르면, 사용자가 한국어 자막을 제공하는 특정 스트리밍 사이트에서 한국 드라마 컨텐츠를 시청하는 동안, 사용자로부터 자신이 더 잘 이해하거나 탐색하고 싶은 한국어에 대한 학습 요청신호를 접수하는 제1 단계,
사용자의 요청에 따라 한국어 문장을 표시하여 각각 해당하는 형태에 따른 타언어를 표시하여 제시하는 제 2단계,
사용자로부터 학습 확장 프로그램을 통하여, 현재 콘텐츠에서 한국어 인스턴스 찾기 요청신호를 접수하는 제 3 단계,
사용자의 요청에 따라 예시적인 문장 패턴을 표시하는 화면을 출력하는 제 4 단계를 포함하는 컨텍스트 내 탐색적 언어 학습장치를 통한 컨텍스트 내 탐색적 언어 학습방법이 제공된다.
또한, 상기 제 4 단계는 메뉴 또는 확장 프로그램에서 제공하는 다른 활성화 장치를 통하거나, 사용자가 비디오 재생을 일시중지할 때 자동으로 수행될 수 있는 것을 특징으로 한다.
또한, 상기 확장 프로그램은 한국어의 모든 후보 인스턴스를 가시적으로 표시하는 것을 특징으로 한다.
이하, 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치 및 방법에 대하여 첨부도면을 참조로 상세히 설명한다.
도 1은 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 개략적인 시스템 구성도이고, 도 2는 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 학습과정을 예시적으로 보여주는 재생화면, 학습화면 및 기능화면을 나타낸 도면이고, 도 3은 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 학습과정을 예시적으로 보여주는 재생화면 및 학습화면을 나타내는 도면이고, 도 4는 본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치의 개략적인 구성을 설명하기 위한 블럭구성도이다.
도 1을 참조하면, 본 발명은 현재 재생(experienced)되고 있는 미디어 내에서 학습언어(타겟 언어)의 인스턴스를 찾기 위한 방법 및 장치에 관한 것이고, 연결된 시스템에서 탐색 및 학습 기회를 제공하며 참조 또는 교육 자료의 표시를 제공하기 위한 UIX 디바이스, 새로운 언어를 추가하기 위한 플러그인 기반의 확장성 프레임워크(framework)와 함께, 컨텍스트 내 언어탐색 시스템과 확장된 콘텐츠 구동(drive) 학습시스템들을 통합하기 위한 미디어 컨텍스트(media-context)와 학습시스템 및 API(Application Program Interface) 설계를 포함한다.
시스템 설계
본 발명의 실시 예는 아래와 같으며, 다른 실시 예는 동일한 그 외 일반화 및 확장 가능한 아키텍처를 갖지 않는 것들을 포함하여, 아래의 실시 예 섹션에서 설명한 바와 같이 가능하다.
위의 실시 예는 특정 호스트 매체(110), 학습 서비스 및 컴포넌트 세트에 대하여 어댑터(adapter)가 구현한 여러 표준화된 API를 사용한 일반화된 설계이며, 컨텍스트 내 학습경험을 제공하기 위해 이러한 API를 이용하는 다양한 타겟 언어, 상호작용 모드 및 디스플레이 스타일에 대하여 플러그인으로 구현될 수 있다.
특정 타겟 언어 및 탐색적 학습 서비스에 대한 본 발명의 특정 실시 예는 이 문서의 뒷부분에 도시될 것이다.
주요 구성 요소는 다음과 같다:
● 웹브라우저 페이지, 스트리밍 비디오 플레이어, 스마트 TV, 모바일앱, 오디오 플레이어 등과 같이 어떤 콘텐츠를 재생하는 호스트 매체(host medium).
● 다른 미디어 컨텍스트의 변경이 없이 다양한 공통 플러그인을 사용할 수 있도록 미디어측 API의 표준화된 세트를 구현하는 선택적 미디어 어댑터(media adapter). 예를 들어, Chrome 및 Safari 브라우저 확장 스키마에 대한 어댑터는 공통 플러그인 세트가 두 브라우저에서 사용될 수 있도록 한다.
이 실시 예에서 제안한 미디어 API 서비스(Media API services)(130)는 다음을 포함한다 :
○ 디스커버리(Discovery),현재 미디어에서 타겟 언어의 인스턴스를 찾고 레이블을 지정하는 디스커버리 서비스를 제공. 타겟 언어로 된 자막을 제공하는 비디오가 사용자에 의해 일시중지된 상태로 전환되는 것처럼, 상기 미디어가 특정 상태에 놓여 있을 때에만 작동할 수 있다. 어댑터는 경우에 따라, 학습 서비스에서 허용되는 형식으로 콘텐츠를 가져오기 위해 비디오 프레임의 광학 문자 인식 또는 오디오 세그먼트의 음성에서 텍스트로 변환하는 등 미디어 변환을 수행할 수 있다.
○ 상호 작용(Interaction) , 사용자가 콘텐츠 항목을 선택하고 분석을 위해 보내거나 수신된 참조 및 학습 자료를 탐색하도록 하는 대화형 서비스 제공.
○ 디스플레이(Display), 학습서비스로부터 수신된 학습 및 참조 자료를 표시하는 서비스를 제공.
본 발명의 실시 예에서는 각 호스트 매체를 위해 특별히 제작된 플러그인을 제공한 미디어 어댑터를 포함하지 않는다. 그러나 어댑터가 있는 것과 동일한 컨텍스트 내 학습 서비스를 달리 제공할 것이다. 상기 어댑터는 기본적으로 구현이 최적화된 것이다.
● 다른 학습서비스나 참조서비스와 상호작용하도록 공통 플러그인에 관한 표준 서비스측 API를 구현하는 선택적 학습 서비스 어댑터(learning service adapter).
이러한 서비스에는 단어정의 사전, 텍스트 번역 서비스, 발음 가이드, 관용구 라이브러리 및 탐색 언어 학습서비스가 포함된다. 상기 서비스 바운드(bound) API는 조회, 분석 또는 기타 처리를 위해 콘텐츠를 제출하고, 결과를 검색하기 위한 서비스를 폴링하고(polling), 점진적으로 공급될 수 있고, 결과 표시 및 검색, 콘텐츠를 저장하거나 서비스의 홈 사이트에 방문하는 등의 서비스를 제공한다.
미디어 측 어댑터와 마찬가지로, 상기 서비스 어댑터가 어떤 실시 예에서도 구현되지 않았다면, 상기 플러그인은 각 학습 또는 참조서비스와 직접 상호 작용하도록 특화될 것이다.
● 다양한 차원에 따른 컨텍스트 내 서비스의 변형을 구현하는 플러그인 또는 컴포넌트 세트(set of plugins or components). 예를 들면 :
○ 언어 컴포넌트(language components)(142)는 각각 다른 타겟언어와 관련된 프로세스를 구현한다. 디스커버리 API에서 오는 후보 텍스트를 타겟언어의 적합한(conformant) 인스턴스로 필터링하거나 서비스 가능한 청크(chunk)로 분할하는 등의 프로세스.
○ 탐색 컴포넌트(exploration components)(144) 는 컨텍스트 내 콘텐츠 구조 특성에 맞게, 참조 또는 학습서비스를 제공할 수 있는 각각 다른 탐색 모드를 구현한다. 예를 들어, 단어정의서비스를 이용하는 데에 단일단어에 대한 간편한 선택 및 탐색을 지원하는 탐색모드가 필요할 수 있어, 컨텐츠는타겟언어에 대하여 보통 큰 블록으로 구성된다. 또는 노래 가사 번역 서비스는 가사 스탠자(stanzas)를 찾거나 일반적인 가사 디스플레이 스타일을 탐색하는데 도움이 되는 컨텍스트 내 탐색 모드에서 가장 잘 지원 될 수 있다.
○ 서비스 콘텐츠 컴포넌트(service content components)(146)는 탐색 요청으로 얻은 다양한 종류의 학습 또는 참조서비스 자료를 다루고 있다. 간단한 단어정의 또는 문장번역 서비스에는 간단한 디스플레이 모드가 필요한 반면, 탐색 학습 서비스는 바로 그 위치에서(in situ)탐색 및 이동(네비게이션)할 수 있는 참조 자료에 대한 레이어들을 제공한다.
미설명부호는 서비스 API(150) 및 학습/참조 서비스 어댑터(160)를 나타낸다. 유무선 통신망 또는 학습 또는 참조 서비스를 제공하는 외부 서버(미도시)와의 연계동작을 위하여 유무선 통신망(170)을 통해 연결될 수 있다.
위에서 언급 한 바와 같이, 본 발명의 다른 실시 예는 그 구현에서 일부 또는 임의의 어댑터, 표준 API 또는 플러그인을 사용하지 않을 수 있지만, 여전히 아래의 작동 원리 부분에 요약된 바와 같이 컨텍스트 내 학습 또는 탐색의 동일한 목적을 달성 할 수 있다.
작동 원리
본 발명의 필수 기능은 학습할 언어에 대하여 유기적으로 생성된 인스턴스를 탐색하고 공부하기 위한 대화형, 미디어 내 기회를 제공하는 것이다. 본 발명의 일 실시 예에 대한 다음 설명은 이러한 기능을 예로 든다. 다른 실시 예는 대체(alternate) 학습 또는 참조 서비스와 함께 작동하고, 다른 미디어 컨텍스트에서 작동하고, 다른 언어를 지원하지만, 동일한 형태의 컨텍스트 내 학습 서비스를 다르게 수행할 수 있다.
텍스트 웹 페이지 및 비키(Viki) 드라마 스트리밍 사이트에서 브라우저 기반 한국어 탐색 학습
본 발명의 예시는 미리내(Mirinae) 한국어 탐색기와 같은 탐색 학습서비스를 통합한다. 그리고 다음 컴포넌트로 구성된다. 이후 도 4에서는 도 1과 유사한 구성이므로 도 1과 다른 부분을 중심으로 설명될 것이다.
도 4를 참조하면, 도 1과 유사한 구성이고, 크롬 브라우저(210), 미리내 API(디스커버리/인터랙션/디스플레이)(230), 한국어 텍스트 페이지 플러그인(241), 한국어 비키(VIKI) 플레이어 플러그인(242), 텍스트 페이지 플러그인(243), 비키 비디오 플레이어 플러그인(244), 미리내 익스플로러 컨텐츠 핸들러(Handler)(245)를 포함하고,
서비스 API(240) 및 미리내 익스플로러 어댑터(260), 및 외부 서버와의 연계를 위한 유무선 통신망 또는 (미리내) 한국어 익스플로러(270)를 포함한다.
● 여기에 나열된 다른 컴포넌트들이 사용자가 선택한 웹 사이트에서 브라우저 확장으로 설치 및 실행할 수 있도록 허용하고, DOM(Document Object Model) 디스커버리를 제공하며, 상호 작용 및 디스플레이 서비스를 제공하는 Chrome브라우저 확장 어댑터(220).
다른 실시 예는 브라우저 확장 메커니즘을 사용할 필요성을 우회하여, 학습 서비스와의 직접 통합을 구현하고자 하는 웹사이트에 하기 컴포넌트를 직접 내장(embed) 할 수 있다.
● 교육용프로그램(coursewear), 요리, 문화 및 기타 사이트에서 생성되는 것처럼, 텍스트기반 웹페이지에서 한국어 텍스트의 인스턴스를 발견하고 표시할 수있는 한국어 컴포넌트.
● 한국어 컴포넌트는 비키(Viki) 드라마 스트리밍 사이트에 특화된다. 즉 비디오 플레이어 제어, 재생 상태를 인식하고 한국어 자막을 찾아 표시할 수 있다.
● 상기 컴포넌트에 의해 발견 및 표시되는 한국어 콘텐츠에 연결된 탐색 컴포넌트는 사용자의 탐색 요청에 응답하고 탐색할 텍스트를 수집 및 서식에 맞게 미리내익스플로러 서비스로 전송한다.
● 결과 검색, 표시 및 이동(네이게이션) 컴포넌트는 미리내익스플로러 서비스에서 학습 콘텐츠 응답을 처리하고 해당 콘텐츠에 대하여 대화형 디스플레이를 제공하며, 보통 일반 페이지 콘텐츠 위에 임시 오버레이 형태로 제공된다. 이 컴포넌트는 또한 추후 이어서 학습하기 위해 탐색된 컨텍스트를 미리내 서비스에 저장하는 것을 지원한다. 해당 서비스 사이트 및 기타 관련 참조 서비스에 대한 링크도 저장.
● 미리내 서비스 어댑터는 다른 컴포넌트를 위해 미리내 API에 일반적인 연결 서비스를 제공한다. 일부 실시 예에서, 컴포넌트는 참조 또는 학습 서비스에 직접 연결할 수 있다.
일반적인 작동
다음은 관심 웹 사이트에 대해 학습 브라우저 확장이 설치되고 활성화되어 있다고 가정한다.
-사용자가 다양한 사이트를 탐색하다가, 학습할 언어인 한국어 텍스트의 인스턴스가 포함된 페이지를 접할 수 있다. 이는 한국어 교육용 프로그램(coursewear) 사이트의 예문, K-Pop 사이트의 노래 가사 또는 언어 교환 사이트의 채팅 메시지일 수 있다.
또는 사용자가 한국어 자막을 제공하는 viki.com과 같은 스트리밍 사이트에서 한국 드라마를 시청하고 있을 수 있다(도 2 또는 도 3 참조).
- 상기 콘텐츠를 보는 동안, 사용자는 자신이 더 잘 이해하거나 탐색하고 싶은 한국어를 접하게 된다(한국어 자막 C-10 영어자막 선택적으로 표시됨, 도 3에서의 M-10은 본 발명의 특징을 나타내는 동사, 형용사, 구, 문장, 주어, 서술어 형식으로 분류되어 처리된 학습 또는 참조용 자막을 나타냄).
동영상의 자막인 경우, 사용자는 추가 학습을 위해 동영상을 일시중지 할 수 있다.
- 사용자는 학습 확장 프로그램을 통하여, 현재 콘텐츠에서 한국어 인스턴스를 찾도록 요청한다.
이는 메뉴 또는 확장 프로그램에서 제공하는 다른 활성화 장치를 통하거나, 사용자가 비디오 재생을 일시중지할 때 자동으로 수행될 수 있다. 상기 확장 프로그램은 한국어의 모든 후보 인스턴스를 가시적으로 표시한다. 아래 예를 참조.
위 이미지는 브라우저 확장 프로그램이 작은 한국어 플래그 버튼으로 탐색이 가능한 한국어 인스턴스를 찾고 태그하는 방법을 보여주고 있다. 오른쪽 상단 이미지는 탐색 태그를 표시하거나 숨기는 버튼을 제공하는 확장 팝업 메뉴로서 하나의 가능한 실시 예이다.
한국어 자막이 탐색기 버튼과 유사하게 태그가 되며, 비디오 이미지는 플레이어가 일시중지 모드로 표시된다.
두 종류의 콘텐츠에서, 브라우저 확장 콘텐츠 스크립트는 한국어 텍스트에 대하여 적합한 인스턴스를 위해 페이지 DOM을 탐색하고 탐색기 태그 버튼 HTML 및 이벤트핸들러 스크립트로 해당 위치에서 DOM을 확장한다.
- 사용자가 태그 버튼을 클릭하여 탐색을 시작. 이미 로드된 일부 참조 콘텐츠를 결집시키거나(marshal)거나 관련 한국어 텍스트를 추출 및 준비하고, 미리내 탐색기 컨텍스트 내 서비스 API와 같은 학습 서비스에 대한 비동기 요청을 발동할 수 있는 탐색 컴포넌트를 호출(invoke)한다.
- 학습 자료 또는 참조 오버레이는, 서비스의 홈 사이트로 탐색을 이동할 수 있는 링크뿐만 아니라, 일반적으로 브라우저를 해당 홈 사이트로 이동(네비게이션)함으로써 추후에 검토할 수 있도록 현재 탐색 컨텍스트를 첨부된 학습 서비스에 저장할 수 있는 컨트롤을 포함할 수 있다(도 3 참조).
다른 컨트롤은 오버레이를 없애고 사용자가 브라우징이나 콘텐츠를 계속 볼 수 있도록 할 수 있다. 아래 다이어그램은 위 예제의 주요 컴포넌트를 보여주는 블록 다이어그램이다.
본 발명의 기술 사상은 상기 바람직한 실시 예에 따라 구체적으로 기술되었으나, 상기한 실시 예는 그 설명을 위한 것이며 그 제한을 위한 것이 아님을 주의하여야 한다. 또한, 본 발명의 기술 분야의 통상의 전문가라면 본 발명의 기술 사상의 범위 내에서 다양한 실시 예가 가능함을 이해할 수 있을 것이다.
본 발명에 따른 컨텍스트 내 탐색적 언어 학습장치 및 방법에 의하면, 기존의 콘텐츠 기반 언어학습 시스템과는 달리 사용자가 특정 영상을 시청하면서 해당언어의 구조를 즉각 인식할 수 있는 화면을 제공할 수 있고, 이후에도 해당 언어를 구체적으로 탐색하고 학습할 수 있도록 하는 컴퓨터 기반, 콘텐츠 중심의 언어 학습, 탐색 및 참조시스템을 확장하여 새롭고 보다 효과적으로 제공받을 수 있다.
이는 컨텍스트(context) 내 학습 시스템으로 학습중인 언어에 대해 유기적으로 생성된 인스턴스(Instance)들을 현재 미디어 컨텍스트를 벗어나지 않고 그 자리에서(in situ) 탐색 및 학습이 가능하도록 함으로써 결국, 상향식 언어 학습에 대하여 유동적이고 저마찰(low fricion) 기회를 제공할 수 있다.
본 발명은 현재 널리 사용되고 있는 종래의 구조화된 하향식 접근방식을 확장한 것이다.

Claims (4)

  1. 사용자의 요청에 따라 영상을 검색하고 재생하는 브라우저수단,
    브라우저수단에 의해 검색되고 재생된 영상을 텍스트와 매칭적용시키는 어댑터수단,
    언어, 탐색, 서비스-콘텐츠를 제공하는 기능제공수단,
    사용자의 요청에 따른 조사,분석,저장,복귀 기능을 제공하는 서비스 에이피아이(API),
    학습 및 참조서비스 기능을 제공하는 서비스어댑터수단,
    학습 및 참조서비스를 유선 또는 무선 통신망을 통해 제공하는 외부 컴퓨터 서버를 포함하여 사용자가 영상 재생시 특정 언어를 학습하고 학습중 단어학습을 할 수 있도록 서비스 기능을 제공하는 것을 특징으로 하는 컨텍스트 내 탐색적 언어 학습장치.
  2. 사용자가 한국어 자막을 제공하는 특정 스트리밍 사이트에서 한국 드라마 컨텐츠를 시청하는 동안, 사용자로부터 자신이 더 잘 이해하거나 탐색하고 싶은 한국어에 대한 학습 요청신호를 접수하는 제1 단계,
    사용자의 요청에 따라 한국어 문장을 표시하여 각각 해당하는 형태에 따른 타언어를 표시하여 제시하는 제 2단계,
    사용자로부터 학습 확장 프로그램을 통하여, 현재 콘텐츠에서 한국어 인스턴스 찾기 요청신호를 접수하는 제 3 단계,
    사용자의 요청에 따라 예시적인 문장 패턴을 표시하는 화면을 출력하는 제 4 단계를 포함하는 제 1 항의 컨텍스트 내 탐색적 언어 학습장치를 통한 컨텍스트 내 탐색적 언어 학습방법.
  3. 제 2항에 있어서,
    상기 제 4 단계는 메뉴 또는 확장 프로그램에서 제공하는 다른 활성화 장치를 통하거나, 사용자가 비디오 재생을 일시중지할 때 자동으로 수행될 수 있는 것을 특징으로 하는 컨텍스트 내 탐색적 언어 학습방법.
  4. 제 3항에 있어서, 상기 확장 프로그램은 한국어의 모든 후보 인스턴스를 가시적으로 표시하는 것을 특징으로 하는 컨텍스트 내 탐색적 언어 학습방법.
PCT/KR2021/002854 2020-03-08 2021-03-08 컨텍스트 내 탐색적 언어 학습장치 및 방법 WO2021182827A1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US202062986764P 2020-03-08 2020-03-08
US62/986,764 2020-03-08
KR10-2020-0137118 2020-10-21
KR1020200137118A KR20210113550A (ko) 2020-03-08 2020-10-21 컨텍스트 내 탐색적 언어 학습장치 및 방법

Publications (1)

Publication Number Publication Date
WO2021182827A1 true WO2021182827A1 (ko) 2021-09-16

Family

ID=77672072

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/002854 WO2021182827A1 (ko) 2020-03-08 2021-03-08 컨텍스트 내 탐색적 언어 학습장치 및 방법

Country Status (1)

Country Link
WO (1) WO2021182827A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050062898A (ko) * 2003-12-19 2005-06-28 주식회사 언어과학 어학 학습을 겸한 사전 검색 시스템 및 방법
KR20090112851A (ko) * 2008-04-25 2009-10-29 설융석 영상 재생에 의한 외국어 뉘앙스 학습 시스템
KR20090116546A (ko) * 2008-05-07 2009-11-11 주식회사 케이티 동영상 클립을 이용한 어학 학습 서비스 제공 방법 및시스템
KR20090116512A (ko) * 2008-05-07 2009-11-11 주식회사 케이티 동영상 객체정보 서비스 제공 방법 및 시스템
WO2012064997A2 (en) * 2010-11-10 2012-05-18 Daniel Roy Language training system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050062898A (ko) * 2003-12-19 2005-06-28 주식회사 언어과학 어학 학습을 겸한 사전 검색 시스템 및 방법
KR20090112851A (ko) * 2008-04-25 2009-10-29 설융석 영상 재생에 의한 외국어 뉘앙스 학습 시스템
KR20090116546A (ko) * 2008-05-07 2009-11-11 주식회사 케이티 동영상 클립을 이용한 어학 학습 서비스 제공 방법 및시스템
KR20090116512A (ko) * 2008-05-07 2009-11-11 주식회사 케이티 동영상 객체정보 서비스 제공 방법 및 시스템
WO2012064997A2 (en) * 2010-11-10 2012-05-18 Daniel Roy Language training system

Similar Documents

Publication Publication Date Title
US5815830A (en) Automatic generation of hypertext links to multimedia topic objects
WO2013081282A1 (en) System and method for recommending application by using keyword
WO2011053010A2 (en) Apparatus and method for synchronizing e-book content with video content and system thereof
WO2010117213A2 (en) Apparatus and method for providing information related to broadcasting programs
US7730390B2 (en) Displaying text of video in browsers on a frame by frame basis
JP2005115790A (ja) 情報検索方法、情報表示装置及びプログラム
KR20110014166A (ko) 스트리밍 미디어에 연관된 딥 태그 클라우드
WO2011084039A9 (ko) 미디어 컨텐츠 제공 방법, 그리고 그를 위한 장치
KR20040101235A (ko) 텔레비전 프로그램에 관한 정보를 검색하는 방법 및 시스템
EP3414758A1 (en) Method and electronic device for performing voice based actions
WO2011068284A1 (ko) 어학학습 전자기기 구동 방법, 시스템 및 이를 응용한 동시통역 학습기
EP2941896A1 (en) Electronic apparatus controlled by a user's voice and control method thereof
WO2012141433A2 (ko) 피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션
CN105489072A (zh) 用于确定电子设备中增补内容的方法
AU2001272793A1 (en) Divided multimedia page and method and system for learning language using the page
WO2012128419A1 (ko) 통합 멀티미디어 컨텐츠를 제공하는 검색 시스템 및 검색 방법
Christel et al. The effect of text in storyboards for video navigation
WO2021182827A1 (ko) 컨텍스트 내 탐색적 언어 학습장치 및 방법
KR100469392B1 (ko) 학습 시스템 및 방법과 그 학습 방법의 프로그램을컴퓨터가 읽을 수 있도록 저장한 기록매체
KR20210113550A (ko) 컨텍스트 내 탐색적 언어 학습장치 및 방법
WO2017007131A1 (ko) 광고가 표시되는 컨텐츠 제공 서버, 그 방법 및 컨텐츠 내 광고 표시 방법이 프로그램으로 기록된 전자 장치에서 판독 가능한 기록매체
WO2015147463A1 (ko) 어학 학습용 콘텐츠 재생 시스템 및 그 방법
CN112313726A (zh) 通过多媒体教学语言的方法和系统
WO2021182828A1 (ko) 기계학습, 자연어처리 및 패턴기반 참조 라이브러리 기반 탐색 언어학습 시스템 및 방법
JP2006195900A (ja) マルチメディアコンテンツ生成装置及び方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21768371

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21768371

Country of ref document: EP

Kind code of ref document: A1