KR102118788B1 - Augmented Reality Companion Content Service System and Method - Google Patents

Augmented Reality Companion Content Service System and Method Download PDF

Info

Publication number
KR102118788B1
KR102118788B1 KR1020180039569A KR20180039569A KR102118788B1 KR 102118788 B1 KR102118788 B1 KR 102118788B1 KR 1020180039569 A KR1020180039569 A KR 1020180039569A KR 20180039569 A KR20180039569 A KR 20180039569A KR 102118788 B1 KR102118788 B1 KR 102118788B1
Authority
KR
South Korea
Prior art keywords
user
virtual companion
companion
virtual
service system
Prior art date
Application number
KR1020180039569A
Other languages
Korean (ko)
Other versions
KR20190116654A (en
Inventor
최광순
염지운
김성동
박영충
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR1020180039569A priority Critical patent/KR102118788B1/en
Publication of KR20190116654A publication Critical patent/KR20190116654A/en
Application granted granted Critical
Publication of KR102118788B1 publication Critical patent/KR102118788B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Molecular Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

가상 동반자 서비스를 보다 현실감 있게 제공하기 위한 방안으로, 가상 동반자와 함께 있는 조건에서는 가상 동반자를 생성하여 표시하되, 가상 동반자와 떨어져 있는 조건에서는 가상 동반자의 연락 이벤트/전달하는 가상 동반자 서비스 방법 및 시스템이 제공된다. 본 발명의 실시예에 따른 가상 동반자 서비스 방법은 가상 동반자를 생성하는 단계; 생성된 동반자를 사용자의 제1 디바이스에 표시하는 단계; 사용자에 대한 가상 동반자의 연락 이벤트를 생성하는 단계; 생성된 연락 이벤트를 사용자의 제2 디바이스에 전달하는 단계;를 포함한다.
이에 의해, 1인 가구, 노령화 시대를 맞이하여, 가상 동반자 서비스를 보다 완전한 실감형으로 제공할 수 있게 되는데, 가상 동반자는 개인의 취향은 물론 성격에 맞는 주문형으로 제작 및 서비스 가능하다.As a way to provide virtual companion service more realistically, a virtual companion is created and displayed in a condition with a virtual companion, but in a condition apart from the virtual companion, a virtual companion service method and system for contact event/delivery of the virtual companion Is provided. A virtual companion service method according to an embodiment of the present invention includes: generating a virtual companion; Displaying the generated companion on the user's first device; Generating a virtual companion's contact event for the user; And delivering the generated contact event to the user's second device.
As a result, in the age of single-person households and the aging society, it is possible to provide a virtual companion service in a more complete sense, and the virtual companion can be produced and serviced on demand according to personal preferences and personalities.

Figure R1020180039569
Figure R1020180039569

Description

증강현실 동반자 콘텐츠 서비스 시스템 및 방법{Augmented Reality Companion Content Service System and Method}Augmented Reality Companion Content Service System and Method

본 발명은 실감형 콘텐츠 서비스 기술에 관한 것으로, 더욱 상세하게는 증강현실 콘텐츠를 이용하여 서비스를 제공하는 시스템 및 방법에 관한 것이다.The present invention relates to a tangible content service technology, and more particularly, to a system and method for providing a service using augmented reality content.

스스로 혼자서 식사를 하고, 커피를 마시며, 책을 보는 등 스스로 혼자서 즐길 수 있는 것을 좋아하는 사람들을 나홀로족이 지칭한다. 업무 이외의 일상 생활에서 홀로 시간을 보내는 젊은층, 사별한 고령자 등과 같이 홀로 하루하루 생활을 보내는 나홀로족이 증가하는 추세에 있다.The Naolo refer to those who like to eat by themselves, drink coffee, and read books by themselves. In the daily life other than work, there are increasing numbers of singles who spend their days alone, such as young people who spend time alone and elderly people who have died.

하지만, 나홀로족이 홀로된 생활에 항상 만족하는 것은 아니며, 이따금씩 동반자와 함께 하고 싶은 기분이 들 때도 있음은 물론이다. 이에, 이를 해소하기 위한 방안의 모색이 요청된다.However, the Naolo are not always satisfied with their lives alone, and of course there are times when they sometimes feel like they want to be with their companions. Accordingly, it is required to find a way to solve this.

특히, 근자에 이르러 괄목할만한 성장을 보인, 3D 콘텐츠 기술과 IT 기술을 접목하여 실감형의 서비스를 제공하기 위한 방안의 모색이 요청된다.In particular, it is required to find a way to provide a realistic service by grafting 3D content technology and IT technology, which has shown remarkable growth in recent years.

본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 가상 동반자 서비스를 보다 현실감 있게 제공하기 위한 방안으로, 가상 동반자와 함께 있는 조건에서는 가상 동반자를 생성하여 표시하되, 가상 동반자와 떨어져 있는 조건에서는 가상 동반자의 연락 이벤트/전달하는 가상 동반자 서비스 방법 및 시스템을 제공함에 있다.The present invention has been devised to solve the above problems, and the object of the present invention is to provide a virtual companion service in a more realistic manner. In a condition with a virtual companion, a virtual companion is generated and displayed. It is to provide a virtual companion service method and system for a virtual companion's contact event/delivery in a condition away from the companion.

상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 가상 동반자 서비스 방법은 가상 동반자를 생성하는 단계; 생성된 동반자를 사용자의 제1 디바이스에 표시하는 단계; 사용자에 대한 가상 동반자의 연락 이벤트를 생성하는 단계; 생성된 연락 이벤트를 사용자의 제2 디바이스에 전달하는 단계;를 포함한다. According to an embodiment of the present invention for achieving the above object, the virtual companion service method comprises: generating a virtual companion; Displaying the generated companion on the user's first device; Generating a virtual companion's contact event for the user; And delivering the generated contact event to the user's second device.

제1 디바이스는, 사용자가 댁내에서 사용하는 디바이스이고, 제2 디바이스는, 사용자가 댁내와 옥외 모두에서 사용하는 디바이스일 수 있다. The first device may be a device used by the user at home, and the second device may be a device used by the user both indoors and outdoors.

제1 디바이스는, 웨어러블 디바이스이고, 제2 디바이스는, 모바일 디바이스일 수 있다. The first device may be a wearable device, and the second device may be a mobile device.

연락 이벤트는, 전화 통화, 메시지, 이메일 중 적어도 하나를 포함할 수 있다. The contact event may include at least one of a phone call, a message, and an email.

표시단계는, 생성된 동반자를 증강현실로 표시하는 것일 수 있다. The displaying step may be to display the generated companion in augmented reality.

생성단계는, 사용자가 제공하는 이미지 파일과 음성 파일을 이용하여, 가상 동반자를 생성하는 것일 수 있다. The generating step may be to generate a virtual companion using an image file and a voice file provided by the user.

본 발명에 따른 가상 동반자 서비스 방법은 가상 동반자의 성격을 사용자의 사용자의 성격에 맞게 개인화 하는 단계;를 더 포함할 수 있다.The virtual companion service method according to the present invention may further include a step of personalizing the personality of the virtual companion according to the personality of the user of the user.

본 발명에 따른 가상 동반자 서비스 방법은 사용자의 컨텍스트 정보를 수집하는 단계; 수집된 컨텍스트 정보를 분석하여, 사용자의 성격을 파악하는 단계;를 더 포함할 수 있다.The virtual companion service method according to the present invention comprises: collecting context information of a user; Analyzing the collected context information, the step of grasping the personality of the user; may further include.

가상 동반자의 초기 성격은, 사용자에 의해 설정될 수 있다. The initial personality of the virtual companion can be set by the user.

한편, 본 발명의 다른 실시예에 따른, 가상 동반자 서비스 시스템은 가상 동반자를 생성하는 제1 플랫폼; 생성된 동반자를 표시하는 사용자의 제1 디바이스; 사용자에 대한 가상 동반자의 연락 이벤트를 생성하는 제2 플랫폼; 생성된 연락 이벤트를 전달 받는 사용자의 제2 디바이스;를 포함한다. Meanwhile, according to another embodiment of the present invention, the virtual companion service system includes a first platform for generating a virtual companion; A first device of the user displaying the created companion; A second platform for generating a virtual companion's contact event for the user; It includes; a second device of the user receiving the generated contact event.

한편, 본 발명의 또다른 실시예에 따른, 가상 동반자 서비스 방법은 가상 동반자를 생성하는 단계; 생성된 동반자를 사용자의 제1 디바이스에 제공하는 단계; 사용자에 대한 가상 동반자의 연락 이벤트를 생성하는 단계; 생성된 연락 이벤트를 사용자의 제2 디바이스에 전달하는 단계;를 포함한다. On the other hand, according to another embodiment of the present invention, the virtual companion service method includes: generating a virtual companion; Providing the generated companion to the user's first device; Generating a virtual companion's contact event for the user; And delivering the generated contact event to the user's second device.

한편, 본 발명의 또다른 실시예에 따른, 가상 동반자 서비스 제공 시스템은 가상 동반자를 생성하고, 생성된 동반자를 사용자의 제1 디바이스에 제공하는 제1 플랫폼; 사용자에 대한 가상 동반자의 연락 이벤트를 생성하고, 생성된 연락 이벤트를 사용자의 제2 디바이스에 전달하는 제2 플랫폼;을 포함한다. On the other hand, according to another embodiment of the present invention, a virtual companion service providing system includes a first platform for generating a virtual companion and providing the generated companion to a user's first device; And a second platform for generating a contact event of the virtual companion to the user and delivering the generated contact event to the user's second device.

이상 설명한 바와 같이, 본 발명의 실시예들에 따르면, 1인 가구, 노령화 시대를 맞이하여, 가상 동반자 서비스를 보다 완전한 실감형으로 제공할 수 있게 되는데, 가상 동반자는 개인의 취향은 물론 성격에 맞는 주문형으로 제작 및 서비스 가능하다.As described above, according to the embodiments of the present invention, in the age of single-person households and the aging society, it is possible to provide a virtual companion service in a more complete tangible manner. Production and service are available on demand.

또한, 본 발명의 실시예들에 따르면, 가상 동반자와 함께 있는 조건에서는 가상 동반자를 생성하여 표시하되, 가상 동반자와 떨어져 있는 조건에서는 가상 동반자의 연락 이벤트/전달하여, 가상 동반자 서비스에 대한 현실감을 보다 강화할 수 있게 된다.In addition, according to embodiments of the present invention, a virtual companion is generated and displayed in a condition with a virtual companion, but in a condition apart from the virtual companion, a virtual partner's contact event/delivery is provided to view a sense of reality for the virtual companion service. It can be strengthened.

뿐만 아니라, 본 발명의 실시예들에 따르면, 인공지능 플랫폼과의 연계를 통한 융합 서비스 제공할 수 있고, 증강현실 장치의 보급 확산에 기여할 수 있다.In addition, according to embodiments of the present invention, it is possible to provide a convergence service through linkage with an AI platform, and contribute to the spread of augmented reality devices.

도 1은 본 발명의 일 실시예에 따른 증강현실 동반자 콘텐츠 서비스 시스템의 개념도,
도 2는, 도 1에 도시된 VCS 제공자의 상세 블럭도,
도 3은 본 발명의 다른 실시예에 따른 증강현실 동반자 콘텐츠 서비스 방법의 개념도, 그리고,
도 4는, 도 1에 도시된 증강현실 장치들의 상세 블럭도이다.1 is a conceptual diagram of an augmented reality companion content service system according to an embodiment of the present invention;
FIG. 2 is a detailed block diagram of the VCS provider shown in FIG. 1,
3 is a conceptual diagram of augmented reality companion content service method according to another embodiment of the present invention, and
FIG. 4 is a detailed block diagram of the augmented reality devices shown in FIG. 1.

이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.Hereinafter, the present invention will be described in more detail with reference to the drawings.

도 1은 본 발명의 일 실시예에 따른 증강현실 동반자 콘텐츠 서비스 시스템의 개념도이다. 본 발명의 실시예에 따른 증강현실 동반자 콘텐츠 서비스 시스템은, 사용자가 귀가하여 증강현실 장치를 착용하면, 이를 통해 가상 동반자를 제공한다.1 is a conceptual diagram of an augmented reality companion content service system according to an embodiment of the present invention. The augmented reality companion content service system according to an embodiment of the present invention provides a virtual companion through a user when the user returns home and wears the augmented reality device.

가상 동반자는 사용자가 주문형 또는 맞춤형으로 주문한 것을 저작할 수 있으며, 사용자의 성격에 맞추어 개인화 된다.The virtual companion can author what the user has ordered on demand or customized, and is personalized according to the user's personality.

이와 같은 기능을 수행하는, 본 발명의 실시예에 따른 증강현실 동반자 콘텐츠 서비스 시스템은, VCS(Virtual Companion Service) 제공자(100)와 증강현실 장치들(200-1, 200-2, ... , 200-n)이 인터넷을 통해 상호 통신 가능하도록 연결되어 구축된다.The augmented reality companion content service system according to an embodiment of the present invention, which performs such a function, a Virtual Companion Service (VCS) provider 100 and augmented reality devices 200-1, 200-2, ..., 200-n) are connected and built to enable mutual communication via the Internet.

증강현실 장치들(200-1, 200-2, ... , 200-n)은, 나홀로족 사용자가 댁내에서 착용하는 스마트 글래스, HMD(Head Mounted Device) 등을 의미한다. 본 발명의 실시예에서는 증강현실 장치들(200-1, 200-2, ... , 200-n)이 댁내에서 사용되는 것을 상정하였는데, 옥외에서 사용할 수도 있고, 그러한 경우에도 본 발명의 기술적 사상이 적용될 수 있음은 물론이다.The augmented reality devices (200-1, 200-2, ..., 200-n) refer to smart glasses, head mounted devices (HMDs), etc. worn by a Nalo user at home. In the embodiment of the present invention, it is assumed that the augmented reality devices 200-1, 200-2, ..., 200-n are used indoors, and may be used outdoors, even in such a case. Of course this can be applied.

증강현실 장치들(200-1, 200-2, ... , 200-n)은 3D 디스플레이 기능으로 사용자의 가상 동반자를 표시하고, TTS(Text-To-Speech) 기능으로 가상 동반자의 발성을 구현한다.Augmented reality devices (200-1, 200-2, ..., 200-n) display the user's virtual companion with a 3D display function and implement the virtual companion's vocalization with the TTS (Text-To-Speech) function. do.

VCS 제공자(100)는 사용자의 가상 동반자에 대한 3D 이미지와 가상 동반자의 대화 내용을 텍스트로 생성하여 증강현실 장치들(200-1, 200-2, ... , 200-n)에 전달하는 서버 시스템이다.VCS provider 100 is a server that generates a 3D image of the user's virtual companion and the conversation contents of the virtual companion as text and delivers it to the augmented reality devices 200-1, 200-2, ..., 200-n System.

도 2는, 도 1에 도시된 VCS 제공자(100)의 상세 블럭도이다. VCS 제공자(100)는, 도 2에 도시된 바와 같이, VCS 플랫폼(110), 콘텐츠 저작 플랫폼(120), 콘텐츠 데이터 베이스(130) 및 인공지능 서비스 플랫폼(140)를 포함하여 구축된다.FIG. 2 is a detailed block diagram of the VCS provider 100 shown in FIG. 1. VCS provider 100, as shown in Figure 2, the VCS platform 110, the content authoring platform 120, the content database 130 and the artificial intelligence service platform 140 is built to include.

VCS 플랫폼(110)은 나홀로족 사용자에게 가상 동반자 콘텐츠를 제공하기 위한 서버 시스템이다. 서비스 제공에 부대하는 서비스 가입/신청, 인증, 주문, 과금, 해지/탈퇴에 관한 사항도 VCS 플랫폼(110)이 담당한다.The VCS platform 110 is a server system for providing virtual companion content to a Naolo user. VCS platform 110 is also responsible for service subscription/application, authentication, ordering, billing, and termination/withdrawal.

콘텐츠 저작 플랫폼(120)은 가상 동반자를 3D 콘텐츠 저작하기 위한 서버 시스템이다. 콘텐츠 저작 플랫폼(120)에 의해 생성되는 가상 동반자는 개인 주문형 또는 맞춤형으로 가상 동반자의 외모와 목소리를 저작할 수 있다.The content authoring platform 120 is a server system for authoring virtual companion 3D content. The virtual companion generated by the content authoring platform 120 can author the appearance and voice of the virtual companion on a personalized or customized basis.

개인 주문형 또는 맞춤형 저작을 위해, 콘텐츠 저작 플랫폼(120)은 나홀로족 사용자가 제공하는 이미지(사진, 동영상) 파일과 음성 파일을 이용할 수도 있고, 실제 사람들(유명인, 연계인, 일반인 등)을 모집하여 촬영함으로써 가상 동반자의 외모와 목소리를 저작할 수도 있다.For personalized or customized authoring, the content authoring platform 120 may use image (picture, video) files and voice files provided by a solo user, or recruit real people (celebrities, associates, general public, etc.) You can also author the appearance and voice of a virtual companion by shooting.

콘텐츠 데이터 베이스(130)는 콘텐츠 저작 플랫폼(120)에 의해 저작된 사용자의 가상 동반자 콘텐츠가 저장된다.The content database 130 stores virtual companion content of a user authored by the content authoring platform 120.

인공지능 서비스 플랫폼(140)은 콘텐츠 저작 플랫폼(120)에 의해 저작된 가상 동반자의 성격을 사용자의 성격에 맞게 개인화 한다. 이를 위해, 인공지능 서비스 플랫폼(140)은 사용자의 컨텍스트 정보(사용자의 대화, 반응, 움직임, 감정 등)를 수집&저장하고 분석하여 사용자의 성격을 파악한다.The AI service platform 140 personalizes the personality of the virtual companion authored by the content authoring platform 120 according to the personality of the user. To this end, the artificial intelligence service platform 140 collects, stores, and analyzes the user's context information (user's conversation, reaction, movement, emotion, etc.) to grasp the user's personality.

컨텍스트 정보는 인공지능(딥러닝 등)을 활용하여 분석하는데, 가상 동반자 서비스가 제공된 이후부터 주기적으로 수행하여, 가상 동반자의 성격을 사용자의 성격에 맞추어 간다. 초기 성격은 사용자의 주문에 의해 설정된다.The context information is analyzed using artificial intelligence (deep learning, etc.), and is performed periodically after the virtual companion service is provided, so that the personality of the virtual companion is matched to the personality of the user. The initial personality is set by the user's order.

도 3은 본 발명의 다른 실시예에 따른 증강현실 동반자 콘텐츠 서비스 방법의 개념도이다.3 is a conceptual diagram of augmented reality companion content service method according to another embodiment of the present invention.

도 3에 도시된 바와 같이, 증강현실 동반자 콘텐츠 서비스를 위해, VCS 제공자(100)의 VCS 플랫폼(110)와 증강현실 장치들(200-1, 200-2, ... , 200-n)이 연동하여, (1) 가입/서비스 신청, (2) 인증/계정 부여, (3) 가상 동반자 주문/선택 및 목소리/성격 설정 과정이 이루어진다.As shown in FIG. 3, for augmented reality companion content service, the VCS platform 110 of the VCS provider 100 and the augmented reality devices 200-1, 200-2, ..., 200-n are In conjunction, (1) subscription/service application, (2) authentication/account assignment, (3) virtual companion order/selection and voice/personality setting processes are performed.

이에, 콘텐츠 저작 플랫폼(120)이 사용자 설정에 따라 가상 동반자를 제작하여 콘텐츠 데이터 베이스(130)에 저장하고(4), VCS 플랫폼(110)은 증강현실 장치들(200-1, 200-2, ... , 200-n)에 앱을 제공하여 서비스를 개시한다(5).Accordingly, the content authoring platform 120 creates a virtual companion according to user settings and stores it in the content database 130 (4), and the VCS platform 110 includes augmented reality devices 200-1, 200-2, ..., 200-n) to start the service by providing the app (5).

이후, 증강현실 장치들(200-1, 200-2, ... , 200-n)은 사용자의 컨텍스트 정보(사용자의 대화, 반응, 움직임, 감정 등)를 수집하여 VCS 플랫폼(110)에 제공한다(6).Subsequently, the augmented reality devices 200-1, 200-2, ..., 200-n collect the user's context information (user's conversation, reaction, movement, emotion, etc.) and provide it to the VCS platform 110 (6).

그러면, 인공지능 서비스 플랫폼(140)은 수집된 사용자의 컨텍스트 정보를 분석하여 사용자의 성격을 파악하고, 파악된 성격에 맞게 가상 동반자의 성격을 개인화 한다(7).Then, the artificial intelligence service platform 140 analyzes the context information of the collected user to grasp the personality of the user, and personalizes the personality of the virtual companion according to the identified personality (7).

한편, 증강현실 장치들(200-1, 200-2, ... , 200-n)를 통해, 서비스 해지/탈퇴 요청이 있으면(8), 콘텐츠 저작 플랫폼(120)이 콘텐츠 데이터 베이스(130)에 해당 사용자의 가상 동반자 콘텐츠를 삭제한다(9).On the other hand, through the augmented reality devices (200-1, 200-2, ..., 200-n), if the service termination / withdrawal request (8), the content authoring platform 120, the content database 130 Then, the user's virtual companion content is deleted (9).

도 4는, 도 1에 도시된 증강현실 장치들(200-1, 200-2, ... , 200-n)의 상세 블럭도이다. 증강현실 장치들(200-1, 200-2, ... , 200-n)은 동일 구성으로 구현 가능하므로, 도 4에서는 이들을 "200"으로 대표하여 하나만 도시하였다.4 is a detailed block diagram of the augmented reality devices 200-1, 200-2, ..., 200-n shown in FIG. 1. Since the augmented reality devices 200-1, 200-2, ..., 200-n can be implemented in the same configuration, only one of them is represented in FIG. 4 as "200".

증강현실 장치(200)는, 도 4에 도시된 바와 같이, 통신부(210), 디스플레이(220), 프로세서(230), 스피커/마이크(240) 및 저장부(250)를 포함한다.The augmented reality device 200 includes a communication unit 210, a display 220, a processor 230, a speaker/microphone 240, and a storage unit 250, as shown in FIG. 4.

통신부(210)는 VCS 플랫폼(110)과 통신 연결하여, VCS 제공자(100)가 제공하는 VCS를 제공받는다. 구체적으로, 콘텐츠 저작 플랫폼(120)에 의해 제작된 가상 동반자의 콘텐츠와 대화 텍스트를 수신한다.The communication unit 210 communicates with the VCS platform 110 to receive the VCS provided by the VCS provider 100. Specifically, the content of the virtual companion and the conversation text produced by the content authoring platform 120 are received.

디스플레이(220)는 통신부(210)를 통해 수신한 가상 동반자를 표시하고, 프로세서(230)는 통신부(210)를 통해 수신한 대화 텍스트를 음성으로 변환하여 스피커(240)를 통해 출력하는 한편, 스피커(240)를 통해 입력되는 사용자 음성을 텍스트로 변환하여 통신부(210)를 통해 VCS 플랫폼(110)으로 전달한다.The display 220 displays the virtual companion received through the communication unit 210, and the processor 230 converts the conversation text received through the communication unit 210 into voice and outputs it through the speaker 240, while the speaker The user voice input through the 240 is converted to text and transmitted to the VCS platform 110 through the communication unit 210.

저장부(250)는 통신부(210)에서 수신된 정보/데이터가 저장되고, 프로세서(230)가 동작함에 있어 필요한 저장공간을 제공하는 저장매체이다.The storage unit 250 is a storage medium that stores information/data received from the communication unit 210 and provides a necessary storage space for the processor 230 to operate.

지금까지, 증강현실 동반자 콘텐츠 서비스 시스템 및 방법에 대해, 바람직한 실시예를 들어 상세히 설명하였다.So far, the augmented reality companion content service system and method has been described in detail with preferred embodiments.

위 실시예에서, 동반자 콘텐츠 서비스는 사용자가 증강현실 장치들(200-1, 200-2, ... , 200-n)을 착용하지 않은 상태에서도 제공될 수 있다. 이를 테면, 사용자가 댁내에 있지 않고 옥외에 있는 경우에, 가상 동반자가 사용자의 스마트폰에 연락 행위를 하도록 할 수 있다.In the above embodiment, the companion content service may be provided even when the user does not wear the augmented reality devices 200-1, 200-2, ..., 200-n. For example, if the user is not in the house and is outdoors, the virtual companion can make the user's smartphone contact the user.

이를 위해, VCS 플랫폼(110)은 사용자에 대한 가상 동반자의 연락 이벤트를 생성하고, 생성된 연락 이벤트를 사용자의 스마트폰으로 전달한다. 여기서, 연락 이벤트는, 전화 통화, SMS를 통한 메시지 전송, 메신저를 통한 메시지 전송, 이메일 등이 포함된다.To this end, the VCS platform 110 generates a contact event of the virtual companion to the user and delivers the generated contact event to the user's smartphone. Here, the contact event includes a phone call, a message transmission via SMS, a message transmission via a messenger, an email, and the like.

이는, 증강현실 장치들(200-1, 200-2, ... , 200-n)이 사용자가 댁내에서만 사용할 수 있는 디바이스, 이를 테면, HMD인 경우에 유용하다. 스마트폰은 사용자가 댁내와 옥외 모두에서 사용가능한 모바일 디바이스의 일종으로 언급한 것이다. 다른 종류의 모바일 디바이스로 대체될 수 있음은 물론이다.This is useful when the augmented reality devices 200-1, 200-2, ..., 200-n are devices that a user can use only at home, such as HMD. A smartphone is a type of mobile device that a user can use both indoors and outdoors. Of course, it can be replaced by other types of mobile devices.

한편, 증강현실 장치들(200-1, 200-2, ... , 200-n)이 옥외에서 사용할 수 있는 타입의 디바이스인 경우, 이를 테면, 스마트 글래스인 경우에는 가상 동반자와 함께 외출하는 서비스를 제공할 수도 있다.On the other hand, if the augmented reality devices (200-1, 200-2, ..., 200-n) are devices of a type that can be used outdoors, such as smart glasses, the service goes out with a virtual companion. It can also provide.

본 발명의 실시예에 따른 증강현실 동반자 콘텐츠 서비스 시스템 및 방법은, 사용자 주문형 증강현실 콘텐츠 서비스 방법으로, 가상 동반자 콘텐츠 개념을 도입하여 증강현실로 제공하는 서비스를 제시하였다.The augmented reality companion content service system and method according to an embodiment of the present invention is a user-augmented augmented reality content service method, and a virtual companion content concept is introduced to provide a service provided in augmented reality.

본 발명의 실시예에 따른 증강현실 동반자 콘텐츠 서비스 시스템 및 방법은, 1인 가구, 노령화 시대를 맞이하여 개인 주문형 증강현실 콘텐츠를 제작 및 서비스함으로써, 건강한 사회로의 발전에 기여할 수 있다.The augmented reality companion content service system and method according to an embodiment of the present invention can contribute to the development of a healthy society by producing and servicing personal on-demand augmented reality content to meet the age of single person household and aging.

나아가, 본 발명의 실시예에 따른 증강현실 동반자 콘텐츠 서비스 시스템 및 방법은, 인공지능 플랫폼과의 연계를 통한 융합 서비스 제공하고, 증강현실 장치의 보급 확산에 기여한다.Furthermore, the augmented reality companion content service system and method according to an embodiment of the present invention provides a convergence service through linkage with an AI platform, and contributes to the spread of augmented reality devices.

한편, 위 실시예에서, VCS 제공자(100)에 인공지능 서비스 플랫폼(140)가 구비되는 것을 상정하였다. 하지만, 이는 설명과 구현의 일 예에 해당하는 것으로, 인공지능 서비스 플랫폼(140)을 외부의 다른 서비스 제공자가 제공하는 것을 API로 이용하는 것도 가능하다.Meanwhile, in the above embodiment, it is assumed that the artificial intelligence service platform 140 is provided in the VCS provider 100. However, this corresponds to an example of description and implementation, and it is also possible to use the artificial intelligence service platform 140 as an API that is provided by other external service providers.

한편, 본 실시예에 따른 장치와 방법의 기능을 수행하게 하는 컴퓨터 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체에도 본 발명의 기술적 사상이 적용될 수 있음은 물론이다. 또한, 본 발명의 다양한 실시예에 따른 기술적 사상은 컴퓨터로 읽을 수 있는 기록매체에 기록된 컴퓨터로 읽을 수 있는 코드 형태로 구현될 수도 있다. 컴퓨터로 읽을 수 있는 기록매체는 컴퓨터에 의해 읽을 수 있고 데이터를 저장할 수 있는 어떤 데이터 저장 장치이더라도 가능하다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광디스크, 하드 디스크 드라이브, 등이 될 수 있음은 물론이다. 또한, 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터로 읽을 수 있는 코드 또는 프로그램은 컴퓨터간에 연결된 네트워크를 통해 전송될 수도 있다.On the other hand, the technical idea of the present invention can be applied to a computer-readable recording medium containing a computer program that performs functions of the apparatus and method according to the present embodiment. Further, the technical idea according to various embodiments of the present invention may be implemented in the form of computer-readable codes recorded on a computer-readable recording medium. The computer-readable recording medium can be any data storage device that can be read by a computer and stores data. Of course, the computer-readable recording medium can be a ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical disk, hard disk drive, and the like. In addition, computer-readable codes or programs stored on a computer-readable recording medium may be transmitted through a network connected between computers.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.In addition, although the preferred embodiments of the present invention have been illustrated and described above, the present invention is not limited to the specific embodiments described above, and the technical field to which the present invention pertains without departing from the gist of the present invention claimed in the claims. In addition, various modifications can be implemented by those skilled in the art, and these modifications should not be individually understood from the technical idea or prospect of the present invention.

100 : VCS(Virtual Companion Service) 제공자
110 : VCS 플랫폼
120 : 콘텐츠 저작 플랫폼
130 : 콘텐츠 데이터 베이스
140 : 인공지능 서비스 플랫폼
200-1, 200-2, ... , 200-n : 증강현실 장치100: VCS (Virtual Companion Service) provider
110: VCS platform
120: content authoring platform
130: content database
140: artificial intelligence service platform
200-1, 200-2, ..., 200-n: augmented reality device

Claims (12)

가상 동반자 서비스 시스템이, 가상 동반자를 생성하는 단계;
가상 동반자 서비스 시스템이, 생성된 동반자를 사용자의 제1 디바이스에 표시하는 단계;
가상 동반자 서비스 시스템이, 연락 이벤트를 생성하는 단계;
가상 동반자 서비스 시스템이, 생성된 연락 이벤트를 사용자의 제2 디바이스에 전달하는 단계;를 포함하고,
제1 디바이스는,
사용자가 댁내에서 사용하는 웨어러블 디바이스이고,
제2 디바이스는,
사용자가 댁내와 옥외 모두에서 사용하는 모바일 디바이스이며,
연락 이벤트는,
사용자가 댁내에 있지 않고 옥외에 있을 때, 가상 동반자가 사용자에게 연락하는 이벤트인 것을 특징으로 하는 가상 동반자 서비스 방법.
A virtual companion service system, generating a virtual companion;
Displaying, by the virtual companion service system, the generated companion on the user's first device;
A virtual companion service system, generating a contact event;
The virtual companion service system includes the step of delivering the generated contact event to the user's second device.
The first device,
It is a wearable device used by the user at home,
The second device,
It is a mobile device that users use both indoors and outdoors,
The contact event,
A virtual companion service method, wherein the virtual companion is an event in which the user contacts the user when the user is not in the house and is outdoors.
삭제delete 삭제delete 청구항 1에 있어서,
연락 이벤트는,
전화 통화, 메시지, 이메일 중 적어도 하나를 포함하는 것을 특징으로 하는 가상 동반자 서비스 방법.
The method according to claim 1,
The contact event,
A virtual companion service method comprising at least one of a phone call, a message, and an email.
청구항 1에 있어서,
표시단계는,
생성된 동반자를 증강현실로 표시하는 것을 특징으로 하는 가상 동반자 서비스 방법.
The method according to claim 1,
The display level is
Virtual companion service method, characterized in that to display the generated companion in augmented reality.
청구항 1에 있어서,
생성단계는,
사용자가 제공하는 이미지 파일과 음성 파일을 이용하여, 가상 동반자를 생성하는 것을 특징으로 하는 가상 동반자 서비스 방법.
The method according to claim 1,
The creation phase,
A virtual companion service method characterized in that a virtual companion is generated using an image file and a voice file provided by the user.
청구항 6에 있어서,
가상 동반자 서비스 시스템이, 가상 동반자의 성격을 사용자의 사용자의 성격에 맞게 개인화 하는 단계;를 더 포함하는 것을 특징으로 하는 가상 동반자 서비스 방법.
The method according to claim 6,
The virtual companion service system further comprises the step of personalizing the personality of the virtual companion according to the personality of the user of the user.
청구항 1에 있어서,
가상 동반자 서비스 시스템이, 사용자의 컨텍스트 정보를 수집하는 단계;
가상 동반자 서비스 시스템이, 수집된 컨텍스트 정보를 분석하여, 사용자의 성격을 파악하는 단계;를 더 포함하는 것을 특징으로 하는 가상 동반자 서비스 방법.
The method according to claim 1,
A virtual companion service system, collecting context information of a user;
Virtual companion service system, by analyzing the collected context information, the step of grasping the personality of the user; further comprising a virtual companion service method.
청구항 8에 있어서,
가상 동반자의 초기 성격은,
사용자에 의해 설정되는 것을 특징으로 하는 가상 동반자 서비스 방법.
The method according to claim 8,
The initial personality of the virtual companion,
Virtual companion service method characterized in that it is set by the user.
가상 동반자를 생성하는 제1 플랫폼;
생성된 동반자를 표시하는 사용자의 제1 디바이스;
연락 이벤트를 생성하는 제2 플랫폼;
생성된 연락 이벤트를 전달 받는 사용자의 제2 디바이스;를 포함하고,
제1 디바이스는,
사용자가 댁내에서 사용하는 웨어러블 디바이스이고,
제2 디바이스는,
사용자가 댁내와 옥외 모두에서 사용하는 모바일 디바이스이며,
연락 이벤트는,
사용자가 댁내에 있지 않고 옥외에 있을 때, 가상 동반자가 사용자에게 연락하는 이벤트인 것을 특징으로 하는 가상 동반자 서비스 시스템.
A first platform for creating a virtual companion;
A first device of the user displaying the created companion;
A second platform for generating contact events;
It includes; a second device of the user receiving the generated contact event;
The first device,
It is a wearable device used by the user at home,
The second device,
It is a mobile device that users use both indoors and outdoors,
The contact event,
A virtual companion service system, characterized in that when the user is not at home, but outdoors, the virtual companion is an event in which the user is contacted.
가상 동반자 서비스 시스템이, 가상 동반자를 생성하는 단계;
가상 동반자 서비스 시스템이, 생성된 동반자를 사용자의 제1 디바이스에 제공하는 단계;
가상 동반자 서비스 시스템이, 연락 이벤트를 생성하는 단계;
가상 동반자 서비스 시스템이, 생성된 연락 이벤트를 사용자의 제2 디바이스에 전달하는 단계;를 포함하고,
제1 디바이스는,
사용자가 댁내에서 사용하는 웨어러블 디바이스이고,
제2 디바이스는,
사용자가 댁내와 옥외 모두에서 사용하는 모바일 디바이스이며,
연락 이벤트는,
사용자가 댁내에 있지 않고 옥외에 있을 때, 가상 동반자가 사용자에게 연락하는 이벤트인 것을 특징으로 하는 가상 동반자 서비스 방법.
A virtual companion service system, generating a virtual companion;
Providing, by the virtual companion service system, the generated companion to the user's first device;
A virtual companion service system, generating a contact event;
The virtual companion service system includes the step of delivering the generated contact event to the user's second device.
The first device,
It is a wearable device used by the user at home,
The second device,
It is a mobile device that users use both indoors and outdoors,
The contact event,
A virtual companion service method, wherein the virtual companion is an event in which the user contacts the user when the user is not in the house and is outdoors.
가상 동반자를 생성하고, 생성된 동반자를 사용자의 제1 디바이스에 제공하는 제1 플랫폼;
연락 이벤트를 생성하고, 생성된 연락 이벤트를 사용자의 제2 디바이스에 전달하는 제2 플랫폼;을 포함하고,
제1 디바이스는,
사용자가 댁내에서 사용하는 웨어러블 디바이스이고,
제2 디바이스는,
사용자가 댁내와 옥외 모두에서 사용하는 모바일 디바이스이며,
연락 이벤트는,
사용자가 댁내에 있지 않고 옥외에 있을 때, 가상 동반자가 사용자에게 연락하는 이벤트인 것을 특징으로 하는 가상 동반자 서비스 제공 시스템.
A first platform for creating a virtual companion and providing the generated companion to the user's first device;
And a second platform for generating a contact event and delivering the generated contact event to the user's second device.
The first device,
It is a wearable device used by the user at home,
The second device,
It is a mobile device that users use both indoors and outdoors,
The contact event,
A virtual companion service providing system, wherein the virtual companion is an event in which the user contacts the user when the user is not in the house and is outdoors.
KR1020180039569A 2018-04-05 2018-04-05 Augmented Reality Companion Content Service System and Method KR102118788B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180039569A KR102118788B1 (en) 2018-04-05 2018-04-05 Augmented Reality Companion Content Service System and Method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180039569A KR102118788B1 (en) 2018-04-05 2018-04-05 Augmented Reality Companion Content Service System and Method

Publications (2)

Publication Number Publication Date
KR20190116654A KR20190116654A (en) 2019-10-15
KR102118788B1 true KR102118788B1 (en) 2020-06-03

Family

ID=68209252

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180039569A KR102118788B1 (en) 2018-04-05 2018-04-05 Augmented Reality Companion Content Service System and Method

Country Status (1)

Country Link
KR (1) KR102118788B1 (en)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180026919A (en) * 2016-09-05 2018-03-14 (주)알비케이이엠디 System for augmented reality or virtual reality

Also Published As

Publication number Publication date
KR20190116654A (en) 2019-10-15

Similar Documents

Publication Publication Date Title
CN101303622B (en) Method for chatting using chat interface with haptic feedback function
KR102173479B1 (en) Method, user terminal and server for information exchange communications
US8924880B2 (en) Methods and systems to facilitate real time communications in virtual reality
RU2527199C2 (en) Avatar integrated shared media selection
US20080262911A1 (en) Methods and Systems to Search in Virtual Reality for Real Time Communications
US20080263459A1 (en) Methods and Systems to Determine Availability for Real Time Communications via Virtual Reality
CN101809651B (en) Mobile wireless display providing speech to speech translation and avatar simulating human attributes
TW201511534A (en) System and method for networked communication of content and social media responses thereto by way of a display screen and a remote controller
US20240012839A1 (en) Apparatus, systems and methods for providing conversational assistance
CN107135387A (en) Online Customer Reception method and its system based on VR technologies
US20100082515A1 (en) Environmental factor based virtual communication systems and methods
CN106572131B (en) The method and system that media data is shared in Internet of Things
US20190260702A1 (en) Method and system for creating a mercemoji
US20150331849A1 (en) System and Method for Enhancing Personalized Conversation within the Social Network
CN112152901A (en) Virtual image control method and device and electronic equipment
KR101310274B1 (en) Method and server for providing message service
CN116600152A (en) Virtual anchor live broadcast method, device, equipment and storage medium
WO2009077901A1 (en) Method and system for enabling conversation
KR20140103881A (en) System and method for providing social network emoticon using 3d character
CN117632109A (en) Virtual digital assistant construction method, device, electronic equipment and storage medium
KR102118788B1 (en) Augmented Reality Companion Content Service System and Method
WO2008130842A9 (en) Methods and systems to connect people via virtual reality for real time communications
KR100963397B1 (en) System and method for producing template-based user created content, and apparatus to the same
US20100210241A1 (en) Method for enabling communications sessions and supporting anonymity
WO2007007020A1 (en) System of animated, dynamic, expresssive and synchronised non-voice mobile gesturing/messaging

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant