WO2013085320A1 - 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법 - Google Patents
스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법 Download PDFInfo
- Publication number
- WO2013085320A1 WO2013085320A1 PCT/KR2012/010584 KR2012010584W WO2013085320A1 WO 2013085320 A1 WO2013085320 A1 WO 2013085320A1 KR 2012010584 W KR2012010584 W KR 2012010584W WO 2013085320 A1 WO2013085320 A1 WO 2013085320A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- foreign language
- information
- user
- user terminal
- smart device
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 230000003190 augmentative effect Effects 0.000 claims description 12
- 230000008451 emotion Effects 0.000 claims description 6
- 239000000284 extract Substances 0.000 abstract description 8
- 230000006870 function Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000002354 daily effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003203 everyday effect Effects 0.000 description 2
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
- G09B19/06—Foreign languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
Definitions
- the present invention relates to a foreign language acquisition and learning service providing method, and more particularly, to a method of providing context-based foreign language acquisition and learning service using a smart device.
- the service providing server receives the user information from the user terminal and extracts the foreign language learning content using the user's context information and the user information to the user
- the present invention by providing context-aware foreign language learning content suitable for the user's situation in the daily life of the user, the user can naturally encounter a foreign language in daily life, and the content appropriate to the situation in which the user is in real time You can maximize the learning and learning effects by learning, and improve the learning and learning effects by exposing users to various contents continuously and repeatedly depending on the situation, as well as augmented reality, virtual reality, and various multimedia of smart devices. It is another object of the present invention to provide a method for providing a foreign language learning and learning service based on context recognition using a smart device, which can induce a user's interest by outputting foreign language learning content by utilizing a function.
- a situation recognition-based foreign language acquisition and learning service providing method using a smart device for achieving the above object, the service providing server for providing foreign language acquisition and learning services,
- the user terminal may be a smart device having an application program for receiving and outputting the foreign language learning content.
- the user information Preferably, the user information
- the situation information Preferably, the situation information,
- Time information, season information, weather information, issue information, theme information, event information input from the user terminal, surrounding environment information, emotion information, or location information received from the user terminal may be included.
- step (1) further receives the setting information from the user terminal
- step (2) the foreign language learning content may be extracted by further using the setting information.
- the setting information More preferably, the setting information
- step (3) the time, frequency, difficulty, and amount, type, or content of foreign language learning content may be transmitted.
- step (3) the step (3)
- the foreign language learning content may be transmitted in a push form.
- step (3) the step (3)
- the foreign language learning content may be transmitted using augmented reality, virtual reality, or multimedia.
- the foreign language learning content may be extracted using the received event information as contextual information.
- the user's scheduler More preferably, the user's scheduler
- the scheduler may be linked according to a request of the user terminal.
- the service providing server receives user information from a user terminal and extracts foreign language learning content using the user's context information and user information. By transmitting the information to the user terminal, it is possible to provide the user with customized foreign language learning content suitable for the user's situation and the user's information.
- the user can naturally encounter a foreign language in everyday life, real-time content suitable for the situation in which the user is Learning and learning effects can be maximized, and the user can be exposed to various contents continuously and repeatedly according to the situation to improve the learning and learning effects, as well as augmented reality, virtual reality, and various kinds of smart devices.
- the foreign language learning content By outputting the foreign language learning content using the multimedia function, it can induce the interest of the user.
- FIG. 1 is a diagram illustrating a configuration of a system for implementing a method of providing context-based foreign language acquisition and learning service using a smart device according to an embodiment of the present invention.
- FIG. 2 is a flowchart illustrating a method of providing context-based foreign language acquisition and learning service using a smart device according to an embodiment of the present invention.
- FIG. 3 is a diagram illustrating a user terminal provided with foreign language learning content in a text form in a context-aware foreign language acquisition and learning service providing method using a smart device according to an embodiment of the present invention.
- FIG. 4 is a view illustrating a user terminal provided with foreign language learning content in the form of a video in a context-aware foreign language acquisition and learning service providing method using a smart device according to an embodiment of the present invention.
- FIG. 5 is a view illustrating a user terminal provided with foreign language learning content in the form of a video in a context-aware foreign language acquisition and learning service providing method using a smart device according to an embodiment of the present invention.
- FIG. 6 is a view illustrating an example of a user terminal provided with foreign language learning content using augmented reality function of a smart device in a method of providing context-based foreign language acquisition and learning service using a smart device according to an embodiment of the present invention
- FIG. 7 is a diagram illustrating a user terminal displaying a push message according to transmission of foreign language learning content in a context-aware foreign language acquisition and learning service providing method using a smart device according to an embodiment of the present invention.
- service providing server 110 database
- FIG. 1 is a diagram illustrating a configuration of a system for implementing a method for providing a foreign language acquisition and learning service based on context recognition using a smart device according to an embodiment of the present invention.
- a system for implementing a method of providing context-based foreign language acquisition and learning service using a smart device according to an embodiment of the present invention includes a service providing server 100 and a user terminal 200. It can be configured to include.
- the service providing server 100 receives the user information from the user terminal 200, extracts the foreign language learning content using the user's context information and the user information and transmits to the user terminal 200, It is possible to provide the user with a customized foreign language learning content that matches the user's situation and the user's information.
- TPO situation
- the service providing server 100 receives the user information from the user terminal 200, extracts the foreign language learning content using the user's context information and the user information and transmits to the user terminal 200, It is possible to provide the user with a customized foreign language learning content that matches the user's situation and the user's information.
- TPO situation
- occlusion in the daily life of the user
- the service providing server 100 is a server that provides foreign language acquisition and learning services.
- the service providing server 100 allows access of the user terminal 200 using a network including the Internet, an intranet, a wired / wireless communication network, a mobile communication network, etc., and stores foreign language learning content composed of various media in the database 110. Can be.
- the service providing server 100 may receive context information from the user terminal 200, collect context information by itself, or receive event information by using a scheduler of an associated user according to a user request.
- the service providing server 100 extracts the foreign language learning content from the database 110 using the contextual information, the event information, and the user information, and transmits the foreign language learning content to the user terminal 200, so that the foreign language learning content based on the situation recognition of the user Can be provided.
- the user terminal 200 is a terminal of a user who learns a foreign language using a context-aware foreign language acquisition and learning service providing method provided by the service providing server 100.
- the user may input user information to the service providing server 100 and receive the customized foreign language learning content suitable for the user information and the user's context information and perform the learning.
- the user terminal 200 may be a terminal capable of outputting text, voice, video, animation, multimedia, and the like, and using a GPS (Global Positioning System).
- the user terminal 200 of the present invention may be a smart device.
- the smart device refers to a product that is not limited in function and can change or expand a substantial part of the function through an application program.
- the user terminal 200 of the present invention is a smart device such as a smartphone or a tablet PC. Can be.
- the user terminal 200 of the present invention is not limited to the type of the terminal as listed, and if the foreign language learning content suitable for the user's situation can be provided by accessing the service providing server 100 through a network, Regardless of the form of the terminal, the user terminal 200 may play any role in the present invention.
- the user terminal 200 may be a smart device installed with an application program for receiving and outputting foreign language learning content provided by the service providing server 100.
- an application program for receiving and outputting foreign language learning content provided by the service providing server 100.
- a convenient interface can be provided for transmitting and receiving various data or signals to the service providing server 100, and further provides foreign language learning contents provided by the service providing server 100. You can easily receive and learn.
- FIG. 2 is a flowchart illustrating a method of providing a foreign language acquisition and learning service based on context recognition using a smart device according to an embodiment of the present invention.
- S100 user information from the user terminal 200
- S300 foreign language learning And extracting the content
- S400 transmitting the extracted foreign language learning content
- S400 receives event information from the scheduler of the user
- the service providing server 100 may receive user information from the user terminal 200.
- the user information may include a user's age, gender, occupation, foreign language level, hobby, interest field or personality.
- a user-customized foreign language learning content can be provided to the user. That is, by using the user information, different foreign language learning contents can be provided to the adult male and the teenage girl even in the same situation.
- setting information may be further input from the user terminal 200.
- the setting information may include a time, frequency, difficulty, amount, type, or content of the foreign language learning content in step S400 which will be described in detail later.
- the type of foreign language learning content may include various multimedia such as text, images, and videos, content using virtual reality, augmented reality, and the like.
- the service providing server 100 may receive event information from a scheduler of the user.
- the scheduler of the user may be a scheduler linked to the request of the user terminal 200.
- the scheduler of the user may be a scheduler stored in the user terminal 200 including a scheduler function.
- the service providing server 100 may receive event information from a user account of the online scheduler service.
- the service providing server 100 may extract foreign language learning content using the user's context information and the user information input in operation S100.
- the situation information includes time information, season information, weather information, issue information, theme information, event information input from the user terminal 200, surrounding environment information, emotion information, or location information received from the user terminal 200. can do.
- time information about a time or date may be collected by the service providing server 100 itself, and information about weather or traffic conditions may be provided by the service providing server 100 from an external server or by a service operator. have.
- issue information such as the K-POP craze and stock price slump
- theme information such as holiday season, entrance examination, graduation season, and Valentine's Day may be provided in real time from a service operator.
- the user's event, surrounding environment information, emotion, location, etc. correspond to a special situation of the user, it can be collected from the user terminal 200.
- the location information may be received using the GPS of the user terminal 200, and the surrounding environment information may be input through a camera or a sensor of the user terminal 200.
- foreign language learning content may be extracted using the received event information.
- step S300 it is possible to retrieve the foreign language learning content stored in the database 110 to retrieve the foreign language learning content suitable for the user's situation, the combination of the stored content to match the user's context information, user information, etc. You can also create
- foreign language learning content of a theme related to weather information or traffic information may be extracted at the time of work of a user who is an office worker. In the Christmas season, foreign language learning content related to Christmas may be extracted. If location information received from the user terminal 200 is near the department store, the conversation between the clerk and the customer, which may occur while shopping in the department store, may be extracted as the foreign language learning content. Can be. In addition, since the foreign language learning content may include content about a user's emotions or sensations, the foreign language learning content related to happy emotions may be extracted on a good weekend, and if the location information received from the user terminal 200 is near a restaurant, food may be used. The foreign language learning content about the expression about taste can be extracted. To this end, the service providing server 100 may configure foreign language learning content according to the classification of point of interest (POI) and store it in the database 110.
- POI point of interest
- step S300 foreign language learning content may be extracted using the setting information input in step S100. That is, in step S300, by extracting the foreign language learning content suitable for the time, frequency, intensity, amount, type, etc. of the user set, foreign language learning of an appropriate amount so that the user can be continuously exposed to the foreign language at a convenient time The content can be extracted. In this way, by extracting the foreign language learning content using the setting information, it is possible to improve the learning efficiency of the user.
- the foreign language learning content extracted by the service providing server 100 may be transmitted to the user terminal 200.
- the service providing server 100 may transmit foreign language learning content to the user terminal 200 through a network, and the foreign language learning content transmitted may be in various media such as text, image, sound, video, and multimedia.
- foreign language learning content may be transmitted using augmented reality, virtual reality, or multimedia. By utilizing augmented reality, virtual reality, and various multimedia that can be used in smart devices, it is possible to improve the concentration of the user and give the user fun to improve the learning effect.
- the total cumulative time of the foreign language learning content transmitted to the user terminal 200 may also be transmitted and displayed on the user terminal 200. Since language acquisition requires continuous exposure to a specific language for a predetermined time or more, the user may be informed of the total time exposed to a foreign language, thereby motivating the user to learn a foreign language.
- foreign language learning content may be transmitted in a push form.
- the user can immediately check, so that the user can naturally be exposed to foreign languages while doing other work.
- the fact that the foreign language learning content is transmitted may be transmitted in a push message.
- the push message may be transmitted together with the context information used in the transmitted foreign language learning content, so that the user can check at a glance what the content is related to.
- 3 to 7 illustrate, for example, the user terminal 200 displaying the received foreign language learning content in step S400 of the method for providing context-based foreign language acquisition and learning service using a smart device according to an embodiment of the present invention.
- the user terminal 200 which receives and displays foreign language learning content from the service providing server 100 will be described in detail with reference to FIGS. 3 to 7.
- FIG. 3 is a diagram illustrating an example of a user terminal 200 provided with foreign language learning content in a text form in a context-aware foreign language acquisition and learning service providing method using a smart device according to an embodiment of the present invention.
- the service providing server 100 extracts the foreign language learning content using the fact that the user is an office worker along with contextual information such as time information, season information, weather information, and the like. ) Can be sent.
- additional information may be provided to the user by displaying the context information such as 'weather commute weather -10 °C' this morning.
- the foreign language learning content may provide a word suitable for cold weather, and may further provide an idiom or dialogue using the same word.
- it is possible to listen to the pronunciation and the like by sound it is also possible to provide a recorded sound by recording the user's pronunciation using a microphone provided in the user terminal 200.
- the service providing server 100 may provide a word book or the like according to the user account, so that the user can conveniently produce the word book while learning the words included in the foreign language learning content.
- the foreign language learning content can be shared by transmitting to a social network service (SNS) of the user, and for this purpose, it can be linked with the user's social network service account.
- SNS social network service
- the service providing server 100 may transmit foreign language learning content in a video or multimedia form to the user terminal 200.
- the service providing server 100 uses the seasonal information or event information of Christmas and the situation information including location information received from the user terminal 200, and the user terminal 200 of the user near the department store in the Christmas season. Foreign language learning content related to Christmas shopping can be transmitted.
- the service providing server 100 may provide, for example, a text and a sound included in the video content together with foreign language learning content in the form of a video.
- the dialogue of the characters can be provided as text without having to play the video again ('dialogue' menu).
- foreign language learning content in the form of a video may be transmitted to a social network service of a user for sharing.
- FIG. 6 illustrates a user terminal 200 in which foreign language learning content is provided using augmented reality function of a smart device in a context-aware foreign language acquisition and learning service providing method using a smart device according to an embodiment of the present invention.
- the service providing server 100 may provide foreign language learning content using the augmented reality function of the smart device.
- Augmented reality (AR) is a technology that superimposes three-dimensional virtual objects in the real world, which can be implemented in most smart devices.
- the building illustrated in FIG. 6 corresponds to an image reflected by a camera provided in the user terminal 200 with the reality perceived by the naked eye of the user, and the conversation with the person is based on the foreign language learning content transmitted by the service providing server 100. Corresponding.
- step S300 when the location information received from the user terminal 200 by the service providing server 100 is near the department store, in step S300, a conversation that may occur between the clerk and the customer in the department store may be extracted as foreign language learning content.
- step S400 by outputting the foreign language learning content extracted by using the augmented reality function of the user terminal 100, the user can have fun and naturally encounter the foreign language in real life, and improve the user's concentration on the foreign language learning content. Can be.
- FIG. 7 is a diagram illustrating an example of a user terminal 200 displaying a push message according to transmission of foreign language learning content in a method of providing context-based foreign language acquisition and learning service using a smart device according to an embodiment of the present invention.
- the service providing server 100 may receive event information from a scheduler of a user, extract foreign language learning content related to the event information, and transmit the event information to the user terminal 200. That is, when receiving event information related to the opera viewing from the scheduler of the user, the service providing server 100, a conversation that can occur in the opera house, a conversation inviting a friend to go to see the opera together, opera content that the user watches, etc. Can be extracted and transmitted to the user terminal 200.
- the fact that the foreign language learning content is transmitted may be notified to the user by a push message, and event information ('operation view 11/26 (Sat. ) 17:00 ') can also be sent to schedule alarm function.
- event information 'operation view 11/26 (Sat. ) 17:00 '
- the transmitted foreign language learning content relates to the “Opera viewing.”
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Resources & Organizations (AREA)
- Entrepreneurship & Innovation (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Multimedia (AREA)
- Operations Research (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Engineering & Computer Science (AREA)
- Primary Health Care (AREA)
- Electrically Operated Instructional Devices (AREA)
- Information Transfer Between Computers (AREA)
Abstract
본 발명에서 제안하고 있는 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에 따르면, 서비스 제공 서버가 사용자 단말기로부터 사용자 정보를 입력받고 사용자의 상황 정보 및 사용자 정보를 이용하여 외국어 학습 콘텐츠를 추출하여 사용자 단말기에 전송함으로써, 사용자의 상황과 사용자의 정보에 맞는 사용자 맞춤형 외국어 학습 콘텐츠를 사용자에게 제공할 수 있다.
Description
본 발명은 외국어 습득 및 학습 서비스 제공 방법에 관한 것으로서, 보다 구체적으로는 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에 관한 것이다.
빠른 속도로 세계화가 이루어지면서 외국어 습득 및 학습의 중요성은 날로 커지고 있다. 특히, 세계적 의사소통 수단으로서 영어의 중요성이 증가함에 따라 영어 교육에서도 의사소통 중심 교육을 강조하게 되었으며, 기존의 문어 중심 교육에서 문어와 함께 구어를 중시하는 교육으로 전환되었다.
이는 실생활에서 활용할 수 있는 영어 교육의 필요성을 부각시켰고, 학생들의 실용영어능력을 좀 더 효과적으로 배양하기 위하여 원어민 교사가 초, 중등 영어교육 현장에 배치되었다. 많은 대학에서도 실용영어 중심 교육을 실시하여, 영어 원어민 교수를 수십 명씩 초빙하여 영어 교육을 실시하는 대학까지 생겨나는 등 외국어의 말하기 및 듣기 교육은 더욱 중요해지고 있다.
흔히 외국어를 배우려면 그 나라에 가서 생활하며 배우는 것이 가장 효과적이라고 한다. 외국어의 중요성이 날로 커짐에 따라, 최근 대학생들 사이에서는 어학연수가 필수적인 과정이 되어가고 있고, 그보다 어린 초등학생이나 중학생 등도 방학을 이용하여 어학연수를 가거나, 조기 유학을 떠나기도 한다. 또한, 어학원 중에는 외국어가 일상생활 속에서 사용되는 환경에서 외국어 공부를 하도록 하기 위하여, 어학원 내에서 외국어만을 사용하도록 규제하는 곳도 있다.
인터넷을 비롯한 정보통신기술의 발달로 원격 교육을 통한 외국어 교육이 이미 상당히 활발히 시행되고 있으며, 이는 갈수록 가속화될 것으로 전망된다. 또한, 스마트 기기의 급속한 보급에 따라 스마트 기기의 애플리케이션 형태로 제공되는 다양한 외국어 교육 서비스가 출시되었다. 그러나 아직까지 평범한 일상생활 속에서 마치 외국에서 생활하며 외국어를 습득하는 것과 같은 경험을 할 수 있도록, 스마트 기기를 이용하여 제공하는 서비스는 개발되지 못하고 있는 실정이다.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 서비스 제공 서버가 사용자 단말기로부터 사용자 정보를 입력받고 사용자의 상황 정보 및 사용자 정보를 이용하여 외국어 학습 콘텐츠를 추출하여 사용자 단말기에 전송함으로써, 사용자의 상황과 사용자의 정보에 맞는 사용자 맞춤형 외국어 학습 콘텐츠를 사용자에게 제공할 수 있는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법을 제공하는 것을 그 목적으로 한다.
또한, 본 발명은, 사용자의 일상생활 속에서 사용자의 상황에 맞는 상황 인식 기반 외국어 학습 콘텐츠를 제공함으로써, 사용자가 일상생활에서 자연스럽게 외국어를 접할 수 있고, 사용자가 처해 있는 상황에 적절한 콘텐츠를 실시간으로 학습하여 습득 및 학습 효과를 극대화시킬 수 있으며, 상황에 따라 지속적이고 반복적으로 다양한 콘텐츠에 사용자가 노출되도록 하여 습득 및 학습 효과를 향상시킬 수 있을 뿐 아니라, 스마트 기기의 증강 현실, 가상현실, 각종 멀티미디어 기능을 활용하여 외국어 학습 콘텐츠를 출력함으로써, 사용자의 흥미를 유발할 수 있는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법을 제공하는 것을 또 다른 목적으로 한다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법은, 외국어 습득 및 학습 서비스를 제공하는 서비스 제공 서버가,
(1) 사용자 단말기로부터 사용자 정보를 입력받는 단계;
(2) 사용자의 상황 정보 및 상기 입력받은 사용자 정보 중 적어도 어느 하나를 이용하여 외국어 학습 콘텐츠를 추출하는 단계; 및
(3) 상기 추출한 외국어 학습 콘텐츠를 상기 사용자 단말기에 전송하는 단계를 포함하며,
상기 사용자 단말기는, 상기 외국어 학습 콘텐츠를 전송받아 출력하기 위한 애플리케이션 프로그램을 설치한 스마트 기기인 것을 그 구성상의 특징으로 한다.
바람직하게는, 상기 사용자 정보는,
상기 사용자의 연령, 성별, 직업, 외국어 수준, 취미 또는 관심 분야를 포함할 수 있다.
바람직하게는, 상기 상황 정보는,
시간 정보, 계절 정보, 날씨 정보, 이슈 정보, 테마 정보, 상기 사용자 단말기로부터 입력받은 이벤트 정보, 주변 환경 정보, 감정 정보 또는 상기 사용자 단말기로부터 수신한 위치 정보를 포함할 수 있다.
바람직하게는,
상기 단계 (1)에서는, 상기 사용자 단말기로부터 설정 정보를 더 입력받으며,
상기 단계 (2)에서는, 상기 설정 정보를 더 이용하여 상기 외국어 학습 콘텐츠를 추출할 수 있다.
더욱 바람직하게는, 상기 설정 정보는,
상기 단계 (3)에서 외국어 학습 콘텐츠를 전송하는 시간, 빈도, 난이도, 외국어 학습 콘텐츠의 양, 종류 또는 내용을 포함할 수 있다.
바람직하게는, 상기 단계 (3)에서는,
상기 외국어 학습 콘텐츠를 푸시 형태로 전송할 수 있다.
바람직하게는, 상기 단계 (3)에서는,
증강 현실, 가상현실 또는 멀티미디어를 이용하여 상기 외국어 학습 콘텐츠를 전송할 수 있다.
바람직하게는, 상기 단계 (2) 이전에는,
상기 사용자의 스케줄러로부터 이벤트 정보를 수신하는 단계를 더 포함하며,
상기 단계 (2)에서는, 상기 수신한 이벤트 정보를 상황 정보로 이용하여 상기 외국어 학습 콘텐츠를 추출할 수 있다.
더욱 바람직하게는, 상기 사용자의 스케줄러는,
상기 사용자 단말기의 요청에 따라 연동된 스케줄러일 수 있다.
본 발명에서 제안하고 있는 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에 따르면, 서비스 제공 서버가 사용자 단말기로부터 사용자 정보를 입력받고 사용자의 상황 정보 및 사용자 정보를 이용하여 외국어 학습 콘텐츠를 추출하여 사용자 단말기에 전송함으로써, 사용자의 상황과 사용자의 정보에 맞는 사용자 맞춤형 외국어 학습 콘텐츠를 사용자에게 제공할 수 있다.
또한, 본 발명에 따르면, 사용자의 일상생활 속에서 사용자의 상황에 맞는 상황 인식 기반 외국어 학습 콘텐츠를 제공함으로써, 사용자가 일상생활에서 자연스럽게 외국어를 접할 수 있고, 사용자가 처해 있는 상황에 적절한 콘텐츠를 실시간으로 학습하여 습득 및 학습 효과를 극대화시킬 수 있으며, 상황에 따라 지속적이고 반복적으로 다양한 콘텐츠에 사용자가 노출되도록 하여 습득 및 학습 효과를 향상시킬 수 있을 뿐 아니라, 스마트 기기의 증강 현실, 가상현실, 각종 멀티미디어 기능을 활용하여 외국어 학습 콘텐츠를 출력함으로써, 사용자의 흥미를 유발할 수 있다.
도 1은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법을 구현하기 위한 시스템의 구성을 도시한 도면.
도 2는 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법의 흐름을 도시한 도면.
도 3은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 텍스트 형태의 외국어 학습 콘텐츠가 제공된 사용자 단말기를 예를 들어 도시한 도면.
도 4는 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 동영상 형태의 외국어 학습 콘텐츠가 제공된 사용자 단말기를 예를 들어 도시한 도면.
도 5는 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 동영상 형태의 외국어 학습 콘텐츠가 제공된 사용자 단말기를 예를 들어 도시한 도면.
도 6은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 스마트 기기의 증강 현실 기능을 이용하여 외국어 학습 콘텐츠가 제공된 사용자 단말기를 예를 들어 도시한 도면.
도 7은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 외국어 학습 콘텐츠 전송에 따른 푸시 메시지가 표시된 사용자 단말기를 예를 들어 도시한 도면.
<부호의 설명>
100: 서비스 제공 서버 110: 데이터베이스
200: 사용자 단말기
S100: 사용자 단말기로부터 사용자 정보를 입력받는 단계
S200: 사용자의 스케줄러로부터 이벤트 정보를 수신하는 단계
S300: 외국어 학습 콘텐츠를 추출하는 단계
S400: 추출한 외국어 학습 콘텐츠를 사용자 단말기에 전송하는 단계
이하, 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일한 부호를 사용한다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’ 되어 있다고 할 때, 이는 ‘직접적으로 연결’ 되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’ 되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’ 한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
도 1은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법을 구현하기 위한 시스템의 구성을 도시한 도면이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법을 구현하기 위한 시스템은, 서비스 제공 서버(100) 및 사용자 단말기(200)를 포함하여 구성될 수 있다.
즉, 본 발명은, 서비스 제공 서버(100)가 사용자 단말기(200)로부터 사용자 정보를 입력받고, 사용자의 상황 정보 및 사용자 정보를 이용하여 외국어 학습 콘텐츠를 추출하여 사용자 단말기(200)에 전송함으로써, 사용자의 상황과 사용자의 정보에 맞는 사용자 맞춤형 외국어 학습 콘텐츠를 사용자에게 제공할 수 있다. 이와 같이, 사용자의 일상생활 속에서 시간(Time), 장소(Place), 상황(Occasion) 등 상황(T. P. O.)에 맞는 상황 인식 기반 외국어 학습 콘텐츠를 제공함으로써, 사용자가 처해있는 상황에 적절한 콘텐츠를 통해 학습 효과를 극대화시킬 수 있다. 또한, 상황에 따라 지속적이고 반복적으로 다양한 콘텐츠를 전송함으로써, 습득 및 학습 효과를 향상시킬 수 있다. 이하에서는, 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법을 구현하기 위한 시스템의 각 구성요소에 대하여 상세히 설명하도록 한다.
서비스 제공 서버(100)는, 외국어 습득 및 학습 서비스를 제공하는 서버이다. 서비스 제공 서버(100)는, 인터넷, 인트라넷, 유무선 통신망, 이동통신망 등을 포함하는 네트워크를 이용하여 사용자 단말기(200)의 접속을 허용하며, 데이터베이스(110)에 다양한 매체로 구성된 외국어 학습 콘텐츠를 저장할 수 있다. 서비스 제공 서버(100)는 사용자 단말기(200)로부터 상황 정보를 전송받거나, 자체적으로 상황 정보를 수집할 수도 있고, 사용자 요청에 따라 연동된 사용자의 스케줄러 등을 이용하여 이벤트 정보를 수신할 수도 있다. 서비스 제공 서버(100)는 이러한 상황 정보나 이벤트 정보, 사용자 정보를 이용하여 데이터베이스(110)로부터 외국어 학습 콘텐츠를 추출하여 사용자 단말기(200)에 전송함으로써, 사용자의 상황 인식에 기반을 둔 외국어 학습 콘텐츠를 제공할 수 있다.
사용자 단말기(200)는, 서비스 제공 서버(100)가 제공하는 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법을 이용하여 외국어를 학습하는 사용자의 단말기이다. 사용자는 서비스 제공 서버(100)에 사용자 정보를 입력하고, 사용자 정보와 사용자의 상황 정보 등에 맞는 맞춤형 외국어 학습 콘텐츠를 전송받아 학습을 할 수 있다. 사용자 단말기(200)는 텍스트, 음성, 동영상, 애니메이션, 멀티미디어 등의 출력이 가능하고, GPS(Global Positioning System)의 이용이 가능한 단말기일 수 있다.
한편, 본 발명의 사용자 단말기(200)는 스마트 기기일 수 있다. 스마트 기기는 기능이 제한되어 있지 않고 애플리케이션 프로그램을 통해 상당 부분 기능을 변경하거나 확장할 수 있는 제품을 가리키는 것으로서, 본 발명의 사용자 단말기(200)는 스마트폰, 태블릿 PC 등 휴대가 용이한 스마트 기기일 수 있다. 다만, 본 발명의 사용자 단말기(200)가 나열한 바와 같은 단말기의 형태에 한정되는 것은 아니며, 네트워크를 통해 서비스 제공 서버(100)에 접속하여 사용자의 상황에 맞는 외국어 학습 콘텐츠를 제공받을 수만 있다면, 구체적인 단말기의 형태에 관계없이 본 발명의 사용자 단말기(200)의 역할을 얼마든지 할 수 있다.
또한, 사용자 단말기(200)는, 서비스 제공 서버(100)가 제공하는 외국어 학습 콘텐츠를 전송받아 출력하기 위한 애플리케이션 프로그램을 설치한 스마트 기기일 수 있다. 이와 같은 애플리케이션 프로그램을 설치하고 실행함으로써, 각종 데이터나 신호를 서비스 제공 서버(100)에 전송하고 수신하는 데에 편리한 인터페이스를 제공받을 수 있으며, 서비스 제공 서버(100)가 제공하는 외국어 학습 콘텐츠를 더욱 편리하게 전송받아 학습을 할 수 있다.
도 2는 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법의 흐름을 도시한 도면이다. 도 2에 도시된 바와 같이, 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법은, 사용자 단말기(200)로부터 사용자 정보를 입력받는 단계(S100), 외국어 학습 콘텐츠를 추출하는 단계(S300) 및 추출한 외국어 학습 콘텐츠를 사용자 단말기(200)에 전송하는 단계(S400)를 포함하여 구현될 수 있으며, 사용자의 스케줄러로부터 이벤트 정보를 수신하는 단계(S200)를 더 포함하여 구현될 수 있다.
단계 S100에서는, 서비스 제공 서버(100)가 사용자 단말기(200)로부터 사용자 정보를 입력받을 수 있다. 이때, 사용자 정보는, 사용자의 연령, 성별, 직업, 외국어 수준, 취미, 관심 분야 또는 성격을 포함할 수 있다. 이와 같은 사용자 정보를 이용하여 사용자 맞춤형 외국어 학습 콘텐츠를 사용자에게 제공할 수 있다. 즉, 사용자 정보를 이용함으로써, 성인 남성과 십대 소녀에게는 동일한 상황에서도 서로 다른 외국어 학습 콘텐츠를 제공할 수 있다.
한편, 단계 S100에서는, 사용자 단말기(200)로부터 설정 정보를 더 입력받을 수 있다. 이때, 설정 정보는, 추후 상세히 설명할 단계 S400에서 외국어 학습 콘텐츠를 전송하는 시간, 빈도, 난이도, 외국어 학습 콘텐츠의 양, 종류 또는 내용 등을 포함할 수 있다. 외국어 학습 콘텐츠의 종류에는, 텍스트, 이미지, 동영상 등 각종 멀티미디어와 가상현실, 증강 현실 등을 활용한 콘텐츠 등이 포함될 수 있다.
단계 S200에서는, 서비스 제공 서버(100)가 사용자의 스케줄러로부터 이벤트 정보를 수신할 수 있다. 이때, 사용자의 스케줄러는, 사용자 단말기(200)의 요청에 따라 연동된 스케줄러일 수 있다. 사용자의 스케줄러는, 스케줄러 기능을 포함하는 사용자 단말기(200)에 저장된 스케줄러일 수 있다. 또한, 온라인 스케줄러 서비스를 이용하는 사용자의 경우에는 온라인 스케줄러 서비스의 사용자 계정으로부터 서비스 제공 서버(100)가 이벤트 정보를 수신할 수도 있다.
단계 S300에서는, 서비스 제공 서버(100)가 사용자의 상황 정보 및 단계 S100에서 입력받은 사용자 정보를 이용하여 외국어 학습 콘텐츠를 추출할 수 있다. 상황 정보는, 시간 정보, 계절 정보, 날씨 정보, 이슈 정보, 테마 정보, 사용자 단말기(200)로부터 입력받은 이벤트 정보, 주변 환경 정보, 감정 정보 또는 사용자 단말기(200)로부터 수신한 위치 정보 등을 포함할 수 있다. 이때, 시간이나 날짜 등에 대한 시간 정보는 서비스 제공 서버(100) 자체에서 수집할 수 있고, 날씨나 교통 상황 등에 대한 정보는 서비스 제공 서버(100)가 외부의 서버로부터 제공받거나 서비스 운영자로부터 제공받을 수 있다. 또한, K-POP 열풍, 주가 폭락 등 이슈 정보나 휴가철, 입시철, 졸업 시즌, 발렌타인 데이 등 테마 정보 등은 서비스 운영자로부터 실시간으로 제공받을 수도 있다. 한편, 사용자의 이벤트, 주변 환경 정보, 감정, 위치 등은 사용자의 특수한 상황에 해당하므로, 사용자 단말기(200)로부터 수집할 수 있다. 특히, 위치 정보는 사용자 단말기(200)의 GPS를 이용하여 수신할 수 있고, 주변 환경 정보는 사용자 단말기(200)의 카메라나 센서 등을 통하여 입력받을 수도 있다. 다만, 단계 S200에서 사용자의 스케줄러로부터 이벤트 정보를 수신한 경우에는, 수신한 이벤트 정보를 이용하여 외국어 학습 콘텐츠를 추출할 수도 있다. 이때, 단계 S300에서는, 데이터베이스(110)로부터 저장된 외국어 학습 콘텐츠를 검색하여 사용자의 상황에 적합한 외국어 학습 콘텐츠를 추출할 수 있고, 저장되어 있는 콘텐츠들을 사용자의 상황 정보, 사용자 정보 등에 맞게 조합 등을 통해 생성할 수도 있다.
예를 들어, 직장인인 사용자의 출근 시간에는 날씨 정보나 교통 정보 등과 관련된 테마의 외국어 학습 콘텐츠를 추출할 수 있다. 크리스마스 시즌에는 크리스마스와 관련된 외국어 학습 콘텐츠를 추출할 수 있으며, 사용자 단말기(200)로부터 수신한 위치 정보가 백화점 부근이면 백화점에서 쇼핑을 하면서 발생할 수 있는 점원과 손님의 대화 등을 외국어 학습 콘텐츠로 추출할 수 있다. 또한, 외국어 학습 콘텐츠에는 사용자의 감정이나 감각에 대한 콘텐츠가 포함될 수 있으므로, 날씨가 좋은 주말에는 행복한 감정과 관련된 외국어 학습 콘텐츠를 추출하고, 사용자 단말기(200)로부터 수신한 위치 정보가 식당가 부근이면 음식 맛에 관한 표현에 대한 외국어 학습 콘텐츠를 추출할 수 있다. 이를 위하여, 서비스 제공 서버(100)는 POI(Point Of Interest)의 구분에 따라 외국어 학습 콘텐츠를 구성하여 데이터베이스(110)에 저장할 수 있다.
한편, 단계 S300에서는, 단계 S100에서 입력받은 설정 정보를 이용하여 외국어 학습 콘텐츠를 추출할 수도 있다. 즉, 단계 S300에서는, 사용자가 설정한 시간, 빈도, 강도, 외국어 학습 콘텐츠의 양, 종류 등에 맞는 외국어 학습 콘텐츠를 추출함으로써, 사용자가 편한 시간에 지속적으로 외국어에 노출될 수 있도록 적절한 양의 외국어 학습 콘텐츠를 추출할 수 있다. 이와 같이, 설정 정보를 이용하여 외국어 학습 콘텐츠를 추출함으로써, 사용자의 학습 효율성을 향상시킬 수 있다.
단계 S400에서는, 서비스 제공 서버(100)가 추출한 외국어 학습 콘텐츠를 사용자 단말기(200)에 전송할 수 있다. 서비스 제공 서버(100)는 네트워크를 통하여 사용자 단말기(200)에 외국어 학습 콘텐츠를 전송할 수 있으며, 이때 전송하는 외국어 학습 콘텐츠는 텍스트, 이미지, 음향, 동영상, 멀티미디어 등 다양한 매체로 된 것일 수 있다. 또한, 단계 S400에서는, 증강 현실, 가상현실 또는 멀티미디어를 이용하여 외국어 학습 콘텐츠를 전송할 수 있다. 스마트 기기에서 활용 가능한 증강 현실, 가상현실, 각종 멀티미디어 등을 활용함으로써, 사용자의 집중력을 향상시키고 사용자에게 재미를 부여하여 학습 효과를 향상시킬 수 있다.
실시예에 따라서는, 사용자 단말기(200)에 전송한 외국어 학습 콘텐츠의 총 누적 시간을 함께 전송하여 사용자 단말기(200)에 표시할 수 있다. 언어 습득에는 일정 시간 이상 특정 언어에 연속적으로 노출되어야 한다고 하므로, 사용자가 외국어에 노출된 총 시간을 알려줌으로써, 사용자에게 외국어 학습 동기를 부여할 수 있다.
한편, 단계 S400에서는, 외국어 학습 콘텐츠를 푸시 형태로 전송할 수 있다. 푸시 형태로 전송하면 사용자가 바로 확인할 수 있기 때문에, 사용자가 다른 일을 하고 있는 중에도 자연스럽게 외국어에 노출될 수 있다. 실시예에 따라서는, 외국어 학습 콘텐츠의 전송 사실을 푸시 메시지로 전송할 수도 있다. 이와 같이, 푸시 메시지를 이용함으로써, 사용자의 주위를 환기시켜 신속하게 외국어 학습 콘텐츠를 확인하도록 할 수 있다. 이때, 푸시 메시지에는 전송한 외국어 학습 콘텐츠에서 사용한 상황 정보 등을 함께 전송함으로써, 무엇에 관련된 콘텐츠인지를 사용자가 한눈에 확인하도록 할 수도 있다.
도 3 내지 도 7은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법의 단계 S400에서, 전송받은 외국어 학습 콘텐츠가 표시된 사용자 단말기(200)를 예를 들어 도시한 도면이다. 이하에서는, 도 3 내지 도 7을 참조하여 서비스 제공 서버(100)로부터 외국어 학습 콘텐츠를 제공받아 디스플레이 한 사용자 단말기(200)를 구체적으로 예를 들어 설명하도록 한다.
도 3은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 텍스트 형태의 외국어 학습 콘텐츠가 제공된 사용자 단말기(200)를 예를 들어 도시한 도면이다. 도 3에 도시된 바와 같이, 본 발명에서는 서비스 제공 서버(100)가, 시간 정보, 계절 정보, 날씨 정보 등의 상황 정보와 함께 사용자가 직장인이라는 것을 이용하여 외국어 학습 콘텐츠를 추출하여 사용자 단말기(200)에 전송할 수 있다. 이때, ‘오늘 아침 출근길 날씨 -10℃’ 등의 상황 정보를 함께 표시하여 사용자에게 추가적인 정보를 제공할 수 있다. 외국어 학습 콘텐츠로는 추운 날씨에 적합한 단어를 제공할 수 있고, 이와 같은 단어를 활용한 관용구 또는 대화(dialogue) 등을 더 제공할 수도 있다. 또한, 음향으로 발음 등을 청취하도록 할 수 있으며, 사용자 단말기(200)에 구비된 마이크를 이용하여 사용자의 발음을 녹음하여 녹음된 음향을 제공할 수도 있다.
한편, 서비스 제공 서버(100)는 사용자 계정에 따라 단어장 등을 제공하여 사용자가 외국어 학습 콘텐츠에 포함된 단어 들을 학습하면서 편리하게 단어장 등의 제작이 가능하도록 할 수 있다. 또한, 사용자의 소셜 네트워크 서비스(Social Network Service, SNS)로 전송할 수 있도록 하여 외국어 학습 콘텐츠를 공유할 수 있으며, 이를 위하여 사용자의 소셜 네트워크 서비스 계정과 연동할 수도 있다.
도 4 및 도 5는 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 동영상 형태의 외국어 학습 콘텐츠가 제공된 사용자 단말기(200)를 예를 들어 도시한 도면이다. 도 4 및 도 5에 도시된 바와 같이, 본 발명에서는 서비스 제공 서버(100)가 동영상 또는 멀티미디어 형태로 된 외국어 학습 콘텐츠를 사용자 단말기(200)에 전송할 수 있다. 이때, 서비스 제공 서버(100)는 크리스마스라는 계절 정보 또는 이벤트 정보와 사용자 단말기(200)로부터 수신한 위치 정보를 포함하는 상황 정보를 이용하여, 크리스마스 시즌에 백화점 부근에 있는 사용자의 사용자 단말기(200)에 크리스마스 쇼핑(Christmas shopping)과 관련된 외국어 학습 콘텐츠를 전송할 수 있다.
도 5에 도시된 바와 같이, 서비스 제공 서버(100)는 동영상 형태의 외국어 학습 콘텐츠와 함께 동영상 콘텐츠에 포함되어 있는 표현 등을 텍스트 및 음향으로 제공할 수 있다. 또한, 동영상의 다시 반복 재생할 필요 없이 등장인물의 대화를 텍스트로 제공할 수도 있다('dialogue' 메뉴). 한편, 동영상 형태의 외국어 학습 콘텐츠도 사용자의 소셜 네트워크 서비스로 전송하여 공유하도록 할 수 있다.
도 6은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 스마트 기기의 증강 현실 기능을 이용하여 외국어 학습 콘텐츠가 제공된 사용자 단말기(200)를 예를 들어 도시한 도면이다. 도 6에 도시된 바와 같이, 본 발명에서는 서비스 제공 서버(100)가 스마트 기기의 증강 현실 기능을 이용하여 외국어 학습 콘텐츠를 제공할 수 있다. 증강 현실(augmented reality, AR)은, 실세계에 3차원 가상 물체를 겹쳐 보여주는 기술로서, 대부분의 스마트 기기에서 구현이 가능하다. 도 6에 도시된 건물은 실제 사용자의 육안으로 인지되는 현실을 사용자 단말기(200)에 구비된 카메라로 비춘 영상에 해당하고, 인물과 대화 내용은 서비스 제공 서버(100)가 전송한 외국어 학습 콘텐츠에 해당한다. 즉, 서비스 제공 서버(100)가 사용자 단말기(200)로부터 수신한 위치 정보가 백화점 근처이면 단계 S300에서는, 백화점 등에서 점원과 손님 사이에 일어날 수 있는 대화를 외국어 학습 콘텐츠로 추출할 수 있다. 단계 S400에서는 사용자 단말기(100)의 증강 현실 기능을 이용하여 추출한 외국어 학습 콘텐츠를 출력함으로써, 사용자가 재미를 느끼고 실생활에서 외국어를 자연스럽게 접하도록 할 수 있으며, 외국어 학습 콘텐츠에 대한 사용자의 집중력을 향상시킬 수 있다.
도 7은 본 발명의 일실시예에 따른 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법에서, 외국어 학습 콘텐츠 전송에 따른 푸시 메시지가 표시된 사용자 단말기(200)를 예를 들어 도시한 도면이다. 도 7에 도시된 바와 같이, 본 발명에서는 서비스 제공 서버(100)가 사용자의 스케줄러로부터 이벤트 정보를 수신하여 이벤트 정보와 관련된 외국어 학습 콘텐츠를 추출하여 사용자 단말기(200)에 전송할 수 있다. 즉, 사용자의 스케줄러로부터 오페라 관람과 관련된 이벤트 정보를 수신하면, 서비스 제공 서버(100)는 오페라 하우스에서 일어날 수 있는 대화, 오페라를 관람하러 같이 가자고 친구에게 권유하는 대화, 사용자가 관람하는 오페라 내용 등의 외국어 학습 콘텐츠를 추출하여 사용자 단말기(200)에 전송할 수 있다.
이때, 도 7에 도시된 바와 같이, 외국어 학습 콘텐츠의 전송 사실을 푸시 메시지로 사용자에게 알려줄 수 있으며, 외국어 학습 콘텐츠를 추출하는 데에 사용된 상황 정보인 이벤트 정보(‘오페라 관람 11/26(토) 17:00’)를 함께 전송하여, 스케줄 알람 기능을 할 수도 있다. 또한, 도 7에 도시된 바와 같이, 전송된 외국어 학습 콘텐츠가 ‘오페라 관람’에 관한 것임을 알려줄 수도 있다.
이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.
Claims (7)
- 외국어 습득 및 학습 서비스를 제공하는 서비스 제공 서버가,(1) 사용자 단말기로부터 사용자 정보를 입력받는 단계;(2) 사용자의 상황 정보 및 상기 입력받은 사용자 정보 중 적어도 어느 하나를 이용하여 외국어 학습 콘텐츠를 추출하는 단계; 및(3) 상기 추출한 외국어 학습 콘텐츠를 상기 사용자 단말기에 전송하는 단계를 포함하며,상기 단계 (2) 이전에는,상기 사용자 단말기의 요청에 따라 연동된 상기 사용자의 스케줄러로부터 이벤트 정보를 수신하는 단계를 더 포함하되,상기 단계 (2)에서는, 상기 수신한 이벤트 정보를 상황 정보로 이용하여 상기 외국어 학습 콘텐츠를 추출하며,상기 사용자 단말기는, 상기 외국어 학습 콘텐츠를 전송받아 출력하기 위한 애플리케이션 프로그램을 설치한 스마트 기기인 것을 특징으로 하는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법.
- 제1항에 있어서, 상기 사용자 정보는,상기 사용자의 연령, 성별, 직업, 외국어 수준, 취미 또는 관심 분야를 포함하는 것을 특징으로 하는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법.
- 제1항에 있어서, 상기 상황 정보는,시간 정보, 계절 정보, 날씨 정보, 이슈 정보, 테마 정보, 상기 사용자 단말기로부터 입력받은 이벤트 정보, 주변 환경 정보, 감정 정보 또는 상기 사용자 단말기로부터 수신한 위치 정보를 포함하는 것을 특징으로 하는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법.
- 제1항에 있어서,상기 단계 (1)에서는, 상기 사용자 단말기로부터 설정 정보를 더 입력받으며,상기 단계 (2)에서는, 상기 설정 정보를 더 이용하여 상기 외국어 학습 콘텐츠를 추출하는 것을 특징으로 하는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법.
- 제4항에 있어서, 상기 설정 정보는,상기 단계 (3)에서 외국어 학습 콘텐츠를 전송하는 시간, 빈도, 난이도, 외국어 학습 콘텐츠의 양, 종류 또는 내용을 포함하는 것을 특징으로 하는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법.
- 제1항에 있어서, 상기 단계 (3)에서는,상기 외국어 학습 콘텐츠를 푸시 형태로 전송하는 것을 특징으로 하는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법.
- 제1항에 있어서, 상기 단계 (3)에서는,증강 현실, 가상현실 또는 멀티미디어를 이용하여 상기 외국어 학습 콘텐츠를 전송하는 것을 특징으로 하는, 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/362,718 US9653000B2 (en) | 2011-12-06 | 2012-12-06 | Method for providing foreign language acquisition and learning service based on context awareness using smart device |
CN201280068753.5A CN104115182A (zh) | 2011-12-06 | 2012-12-06 | 用智能装置提供依情境感知的外语习得及学习服务的方法 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110129821A KR101193668B1 (ko) | 2011-12-06 | 2011-12-06 | 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법 |
KR10-2011-0129821 | 2011-12-06 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2013085320A1 true WO2013085320A1 (ko) | 2013-06-13 |
Family
ID=47906637
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/KR2012/010584 WO2013085320A1 (ko) | 2011-12-06 | 2012-12-06 | 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9653000B2 (ko) |
KR (1) | KR101193668B1 (ko) |
CN (1) | CN104115182A (ko) |
WO (1) | WO2013085320A1 (ko) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103729476A (zh) * | 2014-01-26 | 2014-04-16 | 王玉娇 | 一种根据环境状态来关联内容的方法和系统 |
WO2016076622A1 (ko) * | 2014-11-11 | 2016-05-19 | 브로콜릭 주식회사 | 문서 선택에 따른 가이드라인 제공방법, 이를 수행하기 위한 프로그램이 기록된 컴퓨터 판독가능한 기록 매체 및 매체에 저장된 단말장치용 어플리케이션 |
CN106097793A (zh) * | 2016-07-21 | 2016-11-09 | 北京光年无限科技有限公司 | 一种面向智能机器人的儿童教学方法和装置 |
US10169921B2 (en) | 2016-08-03 | 2019-01-01 | Wipro Limited | Systems and methods for augmented reality aware contents |
Families Citing this family (195)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8645137B2 (en) | 2000-03-16 | 2014-02-04 | Apple Inc. | Fast, language-independent method for user authentication by voice |
US8677377B2 (en) | 2005-09-08 | 2014-03-18 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
US9318108B2 (en) | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
US8977255B2 (en) | 2007-04-03 | 2015-03-10 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
US10002189B2 (en) | 2007-12-20 | 2018-06-19 | Apple Inc. | Method and apparatus for searching using an active ontology |
US9330720B2 (en) | 2008-01-03 | 2016-05-03 | Apple Inc. | Methods and apparatus for altering audio output signals |
US8996376B2 (en) | 2008-04-05 | 2015-03-31 | Apple Inc. | Intelligent text-to-speech conversion |
US10496753B2 (en) | 2010-01-18 | 2019-12-03 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
US20100030549A1 (en) | 2008-07-31 | 2010-02-04 | Lee Michael M | Mobile device having human language translation capability with positional feedback |
US8676904B2 (en) | 2008-10-02 | 2014-03-18 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
US10241644B2 (en) | 2011-06-03 | 2019-03-26 | Apple Inc. | Actionable reminder entries |
US20120309363A1 (en) | 2011-06-03 | 2012-12-06 | Apple Inc. | Triggering notifications associated with tasks items that represent tasks to perform |
US10241752B2 (en) | 2011-09-30 | 2019-03-26 | Apple Inc. | Interface for a virtual digital assistant |
US9858925B2 (en) | 2009-06-05 | 2018-01-02 | Apple Inc. | Using context information to facilitate processing of commands in a virtual assistant |
US9431006B2 (en) | 2009-07-02 | 2016-08-30 | Apple Inc. | Methods and apparatuses for automatic speech recognition |
US10705794B2 (en) | 2010-01-18 | 2020-07-07 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
US10553209B2 (en) | 2010-01-18 | 2020-02-04 | Apple Inc. | Systems and methods for hands-free notification summaries |
US10679605B2 (en) | 2010-01-18 | 2020-06-09 | Apple Inc. | Hands-free list-reading by intelligent automated assistant |
US10276170B2 (en) | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
DE202011111062U1 (de) | 2010-01-25 | 2019-02-19 | Newvaluexchange Ltd. | Vorrichtung und System für eine Digitalkonversationsmanagementplattform |
US8682667B2 (en) | 2010-02-25 | 2014-03-25 | Apple Inc. | User profiling for selecting user specific voice input processing information |
US9262612B2 (en) | 2011-03-21 | 2016-02-16 | Apple Inc. | Device access using voice authentication |
US10057736B2 (en) | 2011-06-03 | 2018-08-21 | Apple Inc. | Active transport based notifications |
US8994660B2 (en) | 2011-08-29 | 2015-03-31 | Apple Inc. | Text correction processing |
US10134385B2 (en) | 2012-03-02 | 2018-11-20 | Apple Inc. | Systems and methods for name pronunciation |
US9483461B2 (en) | 2012-03-06 | 2016-11-01 | Apple Inc. | Handling speech synthesis of content for multiple languages |
US9280610B2 (en) | 2012-05-14 | 2016-03-08 | Apple Inc. | Crowd sourcing information to fulfill user requests |
US10417037B2 (en) | 2012-05-15 | 2019-09-17 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US9721563B2 (en) | 2012-06-08 | 2017-08-01 | Apple Inc. | Name recognition system |
US9495129B2 (en) | 2012-06-29 | 2016-11-15 | Apple Inc. | Device, method, and user interface for voice-activated navigation and browsing of a document |
US9547647B2 (en) | 2012-09-19 | 2017-01-17 | Apple Inc. | Voice-based media searching |
DE212014000045U1 (de) | 2013-02-07 | 2015-09-24 | Apple Inc. | Sprach-Trigger für einen digitalen Assistenten |
US10652394B2 (en) | 2013-03-14 | 2020-05-12 | Apple Inc. | System and method for processing voicemail |
US10748529B1 (en) | 2013-03-15 | 2020-08-18 | Apple Inc. | Voice activated device for use with a voice-based digital assistant |
AU2014227586C1 (en) | 2013-03-15 | 2020-01-30 | Apple Inc. | User training by intelligent digital assistant |
WO2014197336A1 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for detecting errors in interactions with a voice-based digital assistant |
US9582608B2 (en) | 2013-06-07 | 2017-02-28 | Apple Inc. | Unified ranking with entropy-weighted information for phrase-based semantic auto-completion |
WO2014197334A2 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for user-specified pronunciation of words for speech synthesis and recognition |
WO2014197335A1 (en) | 2013-06-08 | 2014-12-11 | Apple Inc. | Interpreting and acting upon commands that involve sharing information with remote devices |
US10176167B2 (en) | 2013-06-09 | 2019-01-08 | Apple Inc. | System and method for inferring user intent from speech inputs |
AU2014278592B2 (en) | 2013-06-09 | 2017-09-07 | Apple Inc. | Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant |
WO2015020942A1 (en) | 2013-08-06 | 2015-02-12 | Apple Inc. | Auto-activating smart responses based on activities from remote devices |
US10296160B2 (en) | 2013-12-06 | 2019-05-21 | Apple Inc. | Method for extracting salient dialog usage from live data |
US20150325136A1 (en) * | 2014-05-07 | 2015-11-12 | Jeffrey C. Sedayao | Context-aware assistant |
US9430463B2 (en) | 2014-05-30 | 2016-08-30 | Apple Inc. | Exemplar-based natural language processing |
US10078631B2 (en) | 2014-05-30 | 2018-09-18 | Apple Inc. | Entropy-guided text prediction using combined word and character n-gram language models |
US9633004B2 (en) | 2014-05-30 | 2017-04-25 | Apple Inc. | Better resolution when referencing to concepts |
US9760559B2 (en) | 2014-05-30 | 2017-09-12 | Apple Inc. | Predictive text input |
US9715875B2 (en) | 2014-05-30 | 2017-07-25 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
US10170123B2 (en) | 2014-05-30 | 2019-01-01 | Apple Inc. | Intelligent assistant for home automation |
US9842101B2 (en) | 2014-05-30 | 2017-12-12 | Apple Inc. | Predictive conversion of language input |
AU2015266863B2 (en) | 2014-05-30 | 2018-03-15 | Apple Inc. | Multi-command single utterance input method |
US9785630B2 (en) | 2014-05-30 | 2017-10-10 | Apple Inc. | Text prediction using combined word N-gram and unigram language models |
US9338493B2 (en) | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US10659851B2 (en) | 2014-06-30 | 2020-05-19 | Apple Inc. | Real-time digital assistant knowledge updates |
US10446141B2 (en) | 2014-08-28 | 2019-10-15 | Apple Inc. | Automatic speech recognition based on user feedback |
US9818400B2 (en) | 2014-09-11 | 2017-11-14 | Apple Inc. | Method and apparatus for discovering trending terms in speech requests |
US10789041B2 (en) | 2014-09-12 | 2020-09-29 | Apple Inc. | Dynamic thresholds for always listening speech trigger |
US10074360B2 (en) | 2014-09-30 | 2018-09-11 | Apple Inc. | Providing an indication of the suitability of speech recognition |
US10127911B2 (en) | 2014-09-30 | 2018-11-13 | Apple Inc. | Speaker identification and unsupervised speaker adaptation techniques |
US9886432B2 (en) | 2014-09-30 | 2018-02-06 | Apple Inc. | Parsimonious handling of word inflection via categorical stem + suffix N-gram language models |
US9646609B2 (en) | 2014-09-30 | 2017-05-09 | Apple Inc. | Caching apparatus for serving phonetic pronunciations |
US9668121B2 (en) | 2014-09-30 | 2017-05-30 | Apple Inc. | Social reminders |
US10552013B2 (en) | 2014-12-02 | 2020-02-04 | Apple Inc. | Data detection |
US9711141B2 (en) | 2014-12-09 | 2017-07-18 | Apple Inc. | Disambiguating heteronyms in speech synthesis |
US10152299B2 (en) | 2015-03-06 | 2018-12-11 | Apple Inc. | Reducing response latency of intelligent automated assistants |
US9865280B2 (en) | 2015-03-06 | 2018-01-09 | Apple Inc. | Structured dictation using intelligent automated assistants |
US10567477B2 (en) | 2015-03-08 | 2020-02-18 | Apple Inc. | Virtual assistant continuity |
US9721566B2 (en) | 2015-03-08 | 2017-08-01 | Apple Inc. | Competing devices responding to voice triggers |
US9886953B2 (en) | 2015-03-08 | 2018-02-06 | Apple Inc. | Virtual assistant activation |
US9899019B2 (en) | 2015-03-18 | 2018-02-20 | Apple Inc. | Systems and methods for structured stem and suffix language models |
US9842105B2 (en) | 2015-04-16 | 2017-12-12 | Apple Inc. | Parsimonious continuous-space phrase representations for natural language processing |
US10460227B2 (en) | 2015-05-15 | 2019-10-29 | Apple Inc. | Virtual assistant in a communication session |
US10083688B2 (en) | 2015-05-27 | 2018-09-25 | Apple Inc. | Device voice control for selecting a displayed affordance |
US10200824B2 (en) | 2015-05-27 | 2019-02-05 | Apple Inc. | Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device |
US10127220B2 (en) | 2015-06-04 | 2018-11-13 | Apple Inc. | Language identification from short strings |
US10101822B2 (en) | 2015-06-05 | 2018-10-16 | Apple Inc. | Language input correction |
US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
US10255907B2 (en) | 2015-06-07 | 2019-04-09 | Apple Inc. | Automatic accent detection using acoustic models |
US10186254B2 (en) | 2015-06-07 | 2019-01-22 | Apple Inc. | Context-based endpoint detection |
US11025565B2 (en) | 2015-06-07 | 2021-06-01 | Apple Inc. | Personalized prediction of responses for instant messaging |
US20160378747A1 (en) | 2015-06-29 | 2016-12-29 | Apple Inc. | Virtual assistant for media playback |
US10740384B2 (en) | 2015-09-08 | 2020-08-11 | Apple Inc. | Intelligent automated assistant for media search and playback |
US10747498B2 (en) | 2015-09-08 | 2020-08-18 | Apple Inc. | Zero latency digital assistant |
US10671428B2 (en) | 2015-09-08 | 2020-06-02 | Apple Inc. | Distributed personal assistant |
US10331312B2 (en) | 2015-09-08 | 2019-06-25 | Apple Inc. | Intelligent automated assistant in a media environment |
US9697820B2 (en) | 2015-09-24 | 2017-07-04 | Apple Inc. | Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks |
US10366158B2 (en) | 2015-09-29 | 2019-07-30 | Apple Inc. | Efficient word encoding for recurrent neural network language models |
US11010550B2 (en) | 2015-09-29 | 2021-05-18 | Apple Inc. | Unified language modeling framework for word prediction, auto-completion and auto-correction |
US11587559B2 (en) | 2015-09-30 | 2023-02-21 | Apple Inc. | Intelligent device identification |
US10691473B2 (en) | 2015-11-06 | 2020-06-23 | Apple Inc. | Intelligent automated assistant in a messaging environment |
US10956666B2 (en) | 2015-11-09 | 2021-03-23 | Apple Inc. | Unconventional virtual assistant interactions |
US10049668B2 (en) | 2015-12-02 | 2018-08-14 | Apple Inc. | Applying neural network language models to weighted finite state transducers for automatic speech recognition |
US10223066B2 (en) | 2015-12-23 | 2019-03-05 | Apple Inc. | Proactive assistance based on dialog communication between devices |
KR101809234B1 (ko) * | 2015-12-31 | 2017-12-14 | (주)잉글리시헌트 | 외국어 학습용 콘텐츠 제공 방법 및 서버 |
US10446143B2 (en) | 2016-03-14 | 2019-10-15 | Apple Inc. | Identification of voice inputs providing credentials |
US9934775B2 (en) | 2016-05-26 | 2018-04-03 | Apple Inc. | Unit-selection text-to-speech synthesis based on predicted concatenation parameters |
US9972304B2 (en) | 2016-06-03 | 2018-05-15 | Apple Inc. | Privacy preserving distributed evaluation framework for embedded personalized systems |
US10249300B2 (en) | 2016-06-06 | 2019-04-02 | Apple Inc. | Intelligent list reading |
US11227589B2 (en) | 2016-06-06 | 2022-01-18 | Apple Inc. | Intelligent list reading |
US10049663B2 (en) | 2016-06-08 | 2018-08-14 | Apple, Inc. | Intelligent automated assistant for media exploration |
DK179309B1 (en) | 2016-06-09 | 2018-04-23 | Apple Inc | Intelligent automated assistant in a home environment |
US10490187B2 (en) | 2016-06-10 | 2019-11-26 | Apple Inc. | Digital assistant providing automated status report |
US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US10192552B2 (en) | 2016-06-10 | 2019-01-29 | Apple Inc. | Digital assistant providing whispered speech |
US10067938B2 (en) | 2016-06-10 | 2018-09-04 | Apple Inc. | Multilingual word prediction |
US10509862B2 (en) | 2016-06-10 | 2019-12-17 | Apple Inc. | Dynamic phrase expansion of language input |
DK179415B1 (en) | 2016-06-11 | 2018-06-14 | Apple Inc | Intelligent device arbitration and control |
DK179343B1 (en) | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
DK179049B1 (en) | 2016-06-11 | 2017-09-18 | Apple Inc | Data driven natural language event detection and classification |
DK201670540A1 (en) | 2016-06-11 | 2018-01-08 | Apple Inc | Application integration with a digital assistant |
CN106056991B (zh) * | 2016-07-19 | 2019-01-29 | 北京乐学企鹅教育科技有限公司 | 一种基于汉字识别的儿童早教系统、方法 |
CN106251405A (zh) * | 2016-07-26 | 2016-12-21 | 北京奇虎科技有限公司 | 增强现实的方法和终端 |
US10474753B2 (en) | 2016-09-07 | 2019-11-12 | Apple Inc. | Language identification using recurrent neural networks |
CN106648048A (zh) * | 2016-09-18 | 2017-05-10 | 三峡大学 | 一种基于虚拟现实的外语学习方法与系统 |
US10043516B2 (en) | 2016-09-23 | 2018-08-07 | Apple Inc. | Intelligent automated assistant |
US10191903B2 (en) * | 2016-09-30 | 2019-01-29 | Microsoft Technology Licensing, Llc | Customized and contextual translated content for travelers |
US11281993B2 (en) | 2016-12-05 | 2022-03-22 | Apple Inc. | Model and ensemble compression for metric learning |
US10593346B2 (en) | 2016-12-22 | 2020-03-17 | Apple Inc. | Rank-reduced token representation for automatic speech recognition |
CN106530858A (zh) * | 2016-12-30 | 2017-03-22 | 武汉市马里欧网络有限公司 | 基于ar的儿童英语学习系统及方法 |
US11204787B2 (en) | 2017-01-09 | 2021-12-21 | Apple Inc. | Application integration with a digital assistant |
US10425498B2 (en) * | 2017-01-25 | 2019-09-24 | International Business Machines Corporation | Targeted profile picture selection |
DK201770383A1 (en) | 2017-05-09 | 2018-12-14 | Apple Inc. | USER INTERFACE FOR CORRECTING RECOGNITION ERRORS |
US10417266B2 (en) | 2017-05-09 | 2019-09-17 | Apple Inc. | Context-aware ranking of intelligent response suggestions |
US10395654B2 (en) | 2017-05-11 | 2019-08-27 | Apple Inc. | Text normalization based on a data-driven learning network |
US10726832B2 (en) | 2017-05-11 | 2020-07-28 | Apple Inc. | Maintaining privacy of personal information |
DK180048B1 (en) | 2017-05-11 | 2020-02-04 | Apple Inc. | MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION |
DK201770439A1 (en) | 2017-05-11 | 2018-12-13 | Apple Inc. | Offline personal assistant |
DK179496B1 (en) | 2017-05-12 | 2019-01-15 | Apple Inc. | USER-SPECIFIC Acoustic Models |
DK179745B1 (en) | 2017-05-12 | 2019-05-01 | Apple Inc. | SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT |
DK201770428A1 (en) | 2017-05-12 | 2019-02-18 | Apple Inc. | LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT |
US11301477B2 (en) | 2017-05-12 | 2022-04-12 | Apple Inc. | Feedback analysis of a digital assistant |
DK201770411A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | MULTI-MODAL INTERFACES |
DK201770431A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | Optimizing dialogue policy decisions for digital assistants using implicit feedback |
DK201770432A1 (en) | 2017-05-15 | 2018-12-21 | Apple Inc. | Hierarchical belief states for digital assistants |
US10303715B2 (en) | 2017-05-16 | 2019-05-28 | Apple Inc. | Intelligent automated assistant for media exploration |
US10311144B2 (en) | 2017-05-16 | 2019-06-04 | Apple Inc. | Emoji word sense disambiguation |
US10403278B2 (en) | 2017-05-16 | 2019-09-03 | Apple Inc. | Methods and systems for phonetic matching in digital assistant services |
DK179560B1 (en) | 2017-05-16 | 2019-02-18 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
US20180336892A1 (en) | 2017-05-16 | 2018-11-22 | Apple Inc. | Detecting a trigger of a digital assistant |
US10657328B2 (en) | 2017-06-02 | 2020-05-19 | Apple Inc. | Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling |
US10445429B2 (en) | 2017-09-21 | 2019-10-15 | Apple Inc. | Natural language understanding using vocabularies with compressed serialized tries |
US10755051B2 (en) | 2017-09-29 | 2020-08-25 | Apple Inc. | Rule-based natural language processing |
US11288976B2 (en) | 2017-10-05 | 2022-03-29 | Fluent Forever Inc. | Language fluency system |
US10636424B2 (en) | 2017-11-30 | 2020-04-28 | Apple Inc. | Multi-turn canned dialog |
US10733982B2 (en) | 2018-01-08 | 2020-08-04 | Apple Inc. | Multi-directional dialog |
CN110047341A (zh) | 2018-01-17 | 2019-07-23 | 希格纳姆国际股份有限公司 | 情景语言学习设备、系统和方法 |
US10733375B2 (en) | 2018-01-31 | 2020-08-04 | Apple Inc. | Knowledge-based framework for improving natural language understanding |
US10789959B2 (en) | 2018-03-02 | 2020-09-29 | Apple Inc. | Training speaker recognition models for digital assistants |
US10592604B2 (en) | 2018-03-12 | 2020-03-17 | Apple Inc. | Inverse text normalization for automatic speech recognition |
US10818288B2 (en) | 2018-03-26 | 2020-10-27 | Apple Inc. | Natural assistant interaction |
US10909331B2 (en) | 2018-03-30 | 2021-02-02 | Apple Inc. | Implicit identification of translation payload with neural machine translation |
KR102013909B1 (ko) * | 2018-04-02 | 2019-08-23 | 남서울대학교 산학협력단 | 라이프 로그 스마트 교육 시스템 및 이를 이용한 교육 방법 |
US11145294B2 (en) | 2018-05-07 | 2021-10-12 | Apple Inc. | Intelligent automated assistant for delivering content from user experiences |
US10928918B2 (en) | 2018-05-07 | 2021-02-23 | Apple Inc. | Raise to speak |
US10984780B2 (en) | 2018-05-21 | 2021-04-20 | Apple Inc. | Global semantic word embeddings using bi-directional recurrent neural networks |
DK201870355A1 (en) | 2018-06-01 | 2019-12-16 | Apple Inc. | VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS |
DK179822B1 (da) | 2018-06-01 | 2019-07-12 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
US10892996B2 (en) | 2018-06-01 | 2021-01-12 | Apple Inc. | Variable latency device coordination |
US11386266B2 (en) | 2018-06-01 | 2022-07-12 | Apple Inc. | Text correction |
DK180639B1 (en) | 2018-06-01 | 2021-11-04 | Apple Inc | DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT |
US10944859B2 (en) | 2018-06-03 | 2021-03-09 | Apple Inc. | Accelerated task performance |
US10346549B1 (en) * | 2018-08-28 | 2019-07-09 | Read TwoGether Ltd. | Single-line display of composite-text |
US10817677B2 (en) * | 2018-08-28 | 2020-10-27 | Read Twogether Ltd | Single-line display of composite-text |
US11010561B2 (en) | 2018-09-27 | 2021-05-18 | Apple Inc. | Sentiment prediction from textual data |
US10839159B2 (en) | 2018-09-28 | 2020-11-17 | Apple Inc. | Named entity normalization in a spoken dialog system |
US11462215B2 (en) | 2018-09-28 | 2022-10-04 | Apple Inc. | Multi-modal inputs for voice commands |
US11170166B2 (en) | 2018-09-28 | 2021-11-09 | Apple Inc. | Neural typographical error modeling via generative adversarial networks |
US11475898B2 (en) | 2018-10-26 | 2022-10-18 | Apple Inc. | Low-latency multi-speaker speech recognition |
US11769425B2 (en) * | 2018-11-02 | 2023-09-26 | International Business Machines Corporation | Enhancing video language learning by providing catered context sensitive expressions |
US10922496B2 (en) | 2018-11-07 | 2021-02-16 | International Business Machines Corporation | Modified graphical user interface-based language learning |
US11638059B2 (en) | 2019-01-04 | 2023-04-25 | Apple Inc. | Content playback on multiple devices |
US11348573B2 (en) | 2019-03-18 | 2022-05-31 | Apple Inc. | Multimodality in digital assistant systems |
US11423908B2 (en) | 2019-05-06 | 2022-08-23 | Apple Inc. | Interpreting spoken requests |
US11475884B2 (en) | 2019-05-06 | 2022-10-18 | Apple Inc. | Reducing digital assistant latency when a language is incorrectly determined |
US11307752B2 (en) | 2019-05-06 | 2022-04-19 | Apple Inc. | User configurable task triggers |
DK201970509A1 (en) | 2019-05-06 | 2021-01-15 | Apple Inc | Spoken notifications |
CN111915963A (zh) * | 2019-05-07 | 2020-11-10 | 黄心慧 | 移动式语言学习系统 |
US11140099B2 (en) | 2019-05-21 | 2021-10-05 | Apple Inc. | Providing message response suggestions |
DK180129B1 (en) | 2019-05-31 | 2020-06-02 | Apple Inc. | USER ACTIVITY SHORTCUT SUGGESTIONS |
US11289073B2 (en) | 2019-05-31 | 2022-03-29 | Apple Inc. | Device text to speech |
US11496600B2 (en) | 2019-05-31 | 2022-11-08 | Apple Inc. | Remote execution of machine-learned models |
DK201970510A1 (en) | 2019-05-31 | 2021-02-11 | Apple Inc | Voice identification in digital assistant systems |
US11360641B2 (en) | 2019-06-01 | 2022-06-14 | Apple Inc. | Increasing the relevance of new available information |
US11468890B2 (en) | 2019-06-01 | 2022-10-11 | Apple Inc. | Methods and user interfaces for voice-based control of electronic devices |
US11488406B2 (en) | 2019-09-25 | 2022-11-01 | Apple Inc. | Text detection using global geometry estimators |
TWI741590B (zh) * | 2020-05-08 | 2021-10-01 | 國立臺北科技大學 | 一種用於自閉症孩童提升社交訓練之裝置及其方法 |
US11061543B1 (en) | 2020-05-11 | 2021-07-13 | Apple Inc. | Providing relevant data items based on context |
US11038934B1 (en) | 2020-05-11 | 2021-06-15 | Apple Inc. | Digital assistant hardware abstraction |
US11755276B2 (en) | 2020-05-12 | 2023-09-12 | Apple Inc. | Reducing description length based on confidence |
CN111402649A (zh) * | 2020-05-18 | 2020-07-10 | 中国人民解放军空军勤务学院 | 一种无线外语学习装置 |
US11490204B2 (en) | 2020-07-20 | 2022-11-01 | Apple Inc. | Multi-device audio adjustment coordination |
US11438683B2 (en) | 2020-07-21 | 2022-09-06 | Apple Inc. | User identification using headphones |
CN113436489A (zh) * | 2021-06-09 | 2021-09-24 | 深圳大学 | 一种基于虚拟现实的留学体验系统及留学体验方法 |
KR102405520B1 (ko) * | 2021-12-20 | 2022-06-07 | 김상원 | 학습 내용의 장기 기억 지원 방법 및 이에 사용되는 서비스 제공 서버 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20060109567A (ko) * | 2005-04-16 | 2006-10-23 | 김영운 | 유비쿼터스 네트워크 환경의 맞춤형 외국어 학습서비스제공시스템 및 그 제공방법 |
KR20070058857A (ko) * | 2005-12-05 | 2007-06-11 | 성균관대학교산학협력단 | 유비쿼터스 컴퓨팅 미들웨어를 위한 상황 인식 프레임워크 |
KR20100045637A (ko) * | 2008-10-24 | 2010-05-04 | (주)한국 네트인 | 다국어 지원 어플리케이션 실행 장치 및 그 제어방법 |
KR20110065860A (ko) * | 2009-12-10 | 2011-06-16 | (주)더힘스 | 상황과 문맥 정보에 기반한 사용자 맞춤형 콘텐츠를 생성하는 방법 및 장치 |
Family Cites Families (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5540589A (en) * | 1994-04-11 | 1996-07-30 | Mitsubishi Electric Information Technology Center | Audio interactive tutor |
US6741833B2 (en) * | 2000-07-21 | 2004-05-25 | Englishtown, Inc. | Learning activity platform and method for teaching a foreign language over a network |
US7002551B2 (en) * | 2002-09-25 | 2006-02-21 | Hrl Laboratories, Llc | Optical see-through augmented reality modified-scale display |
US20070035562A1 (en) * | 2002-09-25 | 2007-02-15 | Azuma Ronald T | Method and apparatus for image enhancement |
US7524191B2 (en) * | 2003-09-02 | 2009-04-28 | Rosetta Stone Ltd. | System and method for language instruction |
US20050053900A1 (en) * | 2003-09-05 | 2005-03-10 | Steven Kaufmann | Method of teaching a foreign language to a student providing measurement in a context based learning system |
US20050089828A1 (en) * | 2003-10-02 | 2005-04-28 | Ahmad Ayaz | Language instruction methodologies |
US20050181347A1 (en) * | 2004-01-16 | 2005-08-18 | Barnes Phineas A. | Instructional gaming methods and apparatus |
US7711571B2 (en) * | 2004-03-15 | 2010-05-04 | Nokia Corporation | Dynamic context-sensitive translation dictionary for mobile phones |
US8477331B2 (en) * | 2004-05-27 | 2013-07-02 | Property Publications Pte Ltd. | Apparatus and method for creating an electronic version of printed matter |
US7643985B2 (en) * | 2005-06-27 | 2010-01-05 | Microsoft Corporation | Context-sensitive communication and translation methods for enhanced interactions and understanding among speakers of different languages |
US20090048821A1 (en) * | 2005-07-27 | 2009-02-19 | Yahoo! Inc. | Mobile language interpreter with text to speech |
US7620549B2 (en) * | 2005-08-10 | 2009-11-17 | Voicebox Technologies, Inc. | System and method of supporting adaptive misrecognition in conversational speech |
US7949529B2 (en) * | 2005-08-29 | 2011-05-24 | Voicebox Technologies, Inc. | Mobile systems and methods of supporting natural language human-machine interactions |
US20080131851A1 (en) * | 2006-12-04 | 2008-06-05 | Dimitri Kanevsky | Context-sensitive language learning |
US8825468B2 (en) * | 2007-07-31 | 2014-09-02 | Kopin Corporation | Mobile wireless display providing speech to speech translation and avatar simulating human attributes |
TWI375933B (en) * | 2007-08-07 | 2012-11-01 | Triforce Co Ltd | Language learning method and system thereof |
CN101626624A (zh) * | 2008-07-11 | 2010-01-13 | 水滴软件(苏州)有限公司 | 通过手机学习外语的方法 |
US20100030549A1 (en) * | 2008-07-31 | 2010-02-04 | Lee Michael M | Mobile device having human language translation capability with positional feedback |
US8600731B2 (en) * | 2009-02-04 | 2013-12-03 | Microsoft Corporation | Universal translator |
US20100223212A1 (en) * | 2009-02-27 | 2010-09-02 | Microsoft Corporation | Task-related electronic coaching |
US20100250231A1 (en) * | 2009-03-07 | 2010-09-30 | Voice Muffler Corporation | Mouthpiece with sound reducer to enhance language translation |
US8064896B2 (en) * | 2009-03-09 | 2011-11-22 | Apple Inc. | Push notification service |
US20100304343A1 (en) * | 2009-06-02 | 2010-12-02 | Bucalo Louis R | Method and Apparatus for Language Instruction |
US8321527B2 (en) * | 2009-09-10 | 2012-11-27 | Tribal Brands | System and method for tracking user location and associated activity and responsively providing mobile device updates |
US20110090253A1 (en) * | 2009-10-19 | 2011-04-21 | Quest Visual, Inc. | Augmented reality language translation system and method |
US20120015333A1 (en) * | 2010-07-13 | 2012-01-19 | Jonathan Randall Self | Method and System for Presenting Interactive, Three-Dimensional Learning Tools |
US8626236B2 (en) * | 2010-10-08 | 2014-01-07 | Blackberry Limited | System and method for displaying text in augmented reality |
EP2628144A4 (en) * | 2010-10-12 | 2016-08-03 | Wespeke Inc | LANGUAGE LEARNING EXCHANGE |
US20120092329A1 (en) * | 2010-10-13 | 2012-04-19 | Qualcomm Incorporated | Text-based 3d augmented reality |
US9424371B2 (en) * | 2010-11-05 | 2016-08-23 | Autodesk, Inc. | Click to accept as built modeling |
US9092674B2 (en) * | 2011-06-23 | 2015-07-28 | International Business Machines Corportion | Method for enhanced location based and context sensitive augmented reality translation |
US8842909B2 (en) * | 2011-06-30 | 2014-09-23 | Qualcomm Incorporated | Efficient blending methods for AR applications |
US9159322B2 (en) * | 2011-10-18 | 2015-10-13 | GM Global Technology Operations LLC | Services identification and initiation for a speech-based interface to a mobile device |
US9251144B2 (en) * | 2011-10-19 | 2016-02-02 | Microsoft Technology Licensing, Llc | Translating language characters in media content |
US20130262365A1 (en) * | 2012-03-31 | 2013-10-03 | Sharp Kabushiki Kaisha | Educational system, method and program to adapt learning content based on predicted user reaction |
AU2014227586C1 (en) * | 2013-03-15 | 2020-01-30 | Apple Inc. | User training by intelligent digital assistant |
-
2011
- 2011-12-06 KR KR1020110129821A patent/KR101193668B1/ko not_active IP Right Cessation
-
2012
- 2012-12-06 CN CN201280068753.5A patent/CN104115182A/zh active Pending
- 2012-12-06 WO PCT/KR2012/010584 patent/WO2013085320A1/ko active Application Filing
- 2012-12-06 US US14/362,718 patent/US9653000B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20060109567A (ko) * | 2005-04-16 | 2006-10-23 | 김영운 | 유비쿼터스 네트워크 환경의 맞춤형 외국어 학습서비스제공시스템 및 그 제공방법 |
KR20070058857A (ko) * | 2005-12-05 | 2007-06-11 | 성균관대학교산학협력단 | 유비쿼터스 컴퓨팅 미들웨어를 위한 상황 인식 프레임워크 |
KR20100045637A (ko) * | 2008-10-24 | 2010-05-04 | (주)한국 네트인 | 다국어 지원 어플리케이션 실행 장치 및 그 제어방법 |
KR20110065860A (ko) * | 2009-12-10 | 2011-06-16 | (주)더힘스 | 상황과 문맥 정보에 기반한 사용자 맞춤형 콘텐츠를 생성하는 방법 및 장치 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103729476A (zh) * | 2014-01-26 | 2014-04-16 | 王玉娇 | 一种根据环境状态来关联内容的方法和系统 |
WO2016076622A1 (ko) * | 2014-11-11 | 2016-05-19 | 브로콜릭 주식회사 | 문서 선택에 따른 가이드라인 제공방법, 이를 수행하기 위한 프로그램이 기록된 컴퓨터 판독가능한 기록 매체 및 매체에 저장된 단말장치용 어플리케이션 |
CN106097793A (zh) * | 2016-07-21 | 2016-11-09 | 北京光年无限科技有限公司 | 一种面向智能机器人的儿童教学方法和装置 |
CN106097793B (zh) * | 2016-07-21 | 2021-08-20 | 北京光年无限科技有限公司 | 一种面向智能机器人的儿童教学方法和装置 |
US10169921B2 (en) | 2016-08-03 | 2019-01-01 | Wipro Limited | Systems and methods for augmented reality aware contents |
Also Published As
Publication number | Publication date |
---|---|
KR101193668B1 (ko) | 2012-12-14 |
CN104115182A (zh) | 2014-10-22 |
US20150010889A1 (en) | 2015-01-08 |
US9653000B2 (en) | 2017-05-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2013085320A1 (ko) | 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법 | |
KR102341752B1 (ko) | 메타버스에서 아바타를 이용한 강의 보조 방법 및 그 장치 | |
Lamy | Oral conversations online: Redefining oral competence in synchronous environments | |
WO2019156332A1 (ko) | 증강현실용 인공지능 캐릭터의 제작 장치 및 이를 이용한 서비스 시스템 | |
Lee et al. | The emerging professional practice of remote sighted assistance for people with visual impairments | |
WO2021261887A1 (ko) | 영상 일기를 이용한 심리 상태 분석 장치 및 방법 | |
Matthews et al. | Scribe4Me: Evaluating a mobile sound transcription tool for the deaf | |
Hermawati et al. | Assistive technologies for severe and profound hearing loss: Beyond hearing aids and implants | |
WO2015133790A1 (ko) | 번역 채팅 서비스 제공 장치 및 방법 | |
KR102101817B1 (ko) | 인터넷 상에 공개된 동영상을 이용한 어학 학습 지원 장치 | |
Mina et al. | Leveraging education through artificial intelligence virtual assistance: a case study of visually impaired learners | |
WO2023224265A1 (ko) | 기준영역을 갖는 사이니지를 이용한 사진 공유 시스템 | |
WO2018182072A1 (ko) | 가상현실 및 증강현실 콘텐츠에서 학습 데이터를 추출하는 시스템 및 방법 | |
Baart et al. | Affordable voice services to bridge the digital divide: Presenting the Kasadaka platform | |
WO2023079370A1 (en) | System and method for enhancing quality of a teaching-learning experience | |
KR20220016009A (ko) | 인공지능과 빅데이터를 이용한 한자 학습용 이모티콘, 시스템 및 인스턴트 메시지 서비스 시스템과 방법 | |
Bhattacharya et al. | Digital reference services for people with special needs: what, why and how? | |
Kukulska-Hulme et al. | Theoretical perspectives on mobile language learning diaries and noticing for learners, teachers and researchers | |
Amarasekara et al. | Real-time interactive voice communication-For a mute person in Sinhala (RTIVC) | |
Meishar-Tal et al. | WhatsApp as a support tool for language learning among immigrants | |
Alghowinem et al. | AusTalk—The Australian speech database: design framework, recording experience and localisation | |
WO2022231087A1 (en) | English learning platform system and service providing method using smart pen and artificial intelligence speaker based on iot star network | |
WO2023163265A1 (ko) | Ai 기반의 질의 응답 챗봇을 이용한 언어 학습 시스템 | |
Bigham et al. | What the disability community can teach us about interactive crowdsourcing | |
Gregg et al. | Designing a curriculum on Internet health resources for deaf high school students |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 12855358 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
WWE | Wipo information: entry into national phase |
Ref document number: 14362718 Country of ref document: US |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 12855358 Country of ref document: EP Kind code of ref document: A1 |