KR102552915B1 - Method and system for providing advertisement service using virtual model - Google Patents

Method and system for providing advertisement service using virtual model Download PDF

Info

Publication number
KR102552915B1
KR102552915B1 KR1020230009853A KR20230009853A KR102552915B1 KR 102552915 B1 KR102552915 B1 KR 102552915B1 KR 1020230009853 A KR1020230009853 A KR 1020230009853A KR 20230009853 A KR20230009853 A KR 20230009853A KR 102552915 B1 KR102552915 B1 KR 102552915B1
Authority
KR
South Korea
Prior art keywords
virtual model
client
advertisement
virtual
model
Prior art date
Application number
KR1020230009853A
Other languages
Korean (ko)
Inventor
동하연
Original Assignee
주식회사 메타뮤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 메타뮤 filed Critical 주식회사 메타뮤
Priority to KR1020230086185A priority Critical patent/KR20230110218A/en
Priority to KR1020230086186A priority patent/KR20230110219A/en
Application granted granted Critical
Publication of KR102552915B1 publication Critical patent/KR102552915B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0242Determining effectiveness of advertisements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0276Advertisement creation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0277Online advertisement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • G06Q50/30
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/50Business processes related to the communications industry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Tourism & Hospitality (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Operations Research (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

다양한 실시 예에 따르면, 가상 모델을 통해 마케팅하는 가상 모델 기반 광고 플랫폼 서버에 있어서, 클라이언트의 광고 의뢰를 수신하는 광고 의뢰 수신부;
광고에 활용되는 가상 모델들을 생성하는 가상 모델 생성부; 상기 가상 모델들 중 적어도 하나의 가상 모델을 상기 클라이언트와 매칭하고, 상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 가상 모델 기반 광고 수행부; 클라이언트 단말로부터 수신한 광고 내용에 기반하여 메타버스 공간을 생성하는 메타버스 서비스 제공부; 및 상기 클라이언트 단말에 채팅 서비스를 제공하는 웹페이지를 출력하는 채팅 서비스 제공부를 포함할 수 있다.
According to various embodiments of the present disclosure, in a virtual model-based advertising platform server for marketing through a virtual model, the advertisement request receiving unit receiving a client's advertisement request;
a virtual model generating unit generating virtual models used in advertisements; a virtual model-based advertisement performer matching at least one of the virtual models with the client and performing an advertisement through the at least one virtual model; A metaverse service provider for generating a metaverse space based on advertisement content received from a client terminal; And it may include a chat service providing unit for outputting a web page providing a chat service to the client terminal.

Description

가상 모델을 이용한 광고 서비스를 제공하는 방법 및 시스템{METHOD AND SYSTEM FOR PROVIDING ADVERTISEMENT SERVICE USING VIRTUAL MODEL}Method and system for providing advertising service using virtual model {METHOD AND SYSTEM FOR PROVIDING ADVERTISEMENT SERVICE USING VIRTUAL MODEL}

본 발명은 가상 모델을 이용한 광고 서비스를 제공하는 방법 및 시스템에 관한 것으로, 더욱 상세하게는 클라이언트 내지 광고 대상자들의 선호 취향에 따른 가상 모델을 이용하여 광고 서비스를 제공하는 방법 및 장치에 관한 것이다.The present invention relates to a method and system for providing an advertisement service using a virtual model, and more particularly, to a method and apparatus for providing an advertisement service using a virtual model according to the preferences of clients or advertisement targets.

인터넷 시대가 개막하면서, 텍스트 정보, 이미지 정보, 동영상 정보 및 멀티미디어 정보를 통하여 게시물을 형성하고 제공하는 기술이 급격하게 발전하고 있다. 최근에는 Youtube와 같은 동영상 플랫폼, Afreeca TV, Twitch TV, TV 다음팟 등과 같은 인터넷 방송 플랫폼, 네이버, 구글, 다음, 야후 등과 같은 포털 사이트 플랫폼, facebook, Instagram, twitter, cacao story 등과 같은 소셜 미디어 플랫폼, 다음 블로그, 네이버 블로그, 티스토리 블로그, 블로그 스팟 등과 같은 블로그 플랫폼 등을 통하여 다양한 정보를 확인하고 이용하는 사용자들이 폭발적으로 증가하고 있다.As the Internet era begins, technology for forming and providing posts through text information, image information, video information, and multimedia information is rapidly developing. Recently, video platforms such as Youtube, Internet broadcasting platforms such as Afreeca TV, Twitch TV, and TV Daumpot, portal site platforms such as Naver, Google, Daum, and Yahoo, social media platforms such as facebook, Instagram, twitter, and cacao story, The number of users who check and use various information through blog platforms such as Daum Blog, Naver Blog, Tistory Blog, and Blog Spot is explosively increasing.

위와 같이 미디어가 다변화되면서 마케팅 채널 역시 다양해졌다. 따라서 예전에는 매스미디어 몇 곳만 홍보를 진행하면 효과를 보았다면 이제는 검색채널, 블로그, 페이스북, 인스타그램 등의 소셜미디어 채널 등 다양한 홍보 채널이 존재하고 있다. 사용자 수의 폭발적 증가와 함께 다양한 플랫폼을 이용하는 사용자들 가운데에서 인플루언서(influencer)들이 등장하기 시작하였다. As the media diversified, marketing channels also diversified. Therefore, if in the past, publicity was effective only in a few mass media, now there are various publicity channels such as search channels, blogs, social media channels such as Facebook and Instagram. With the explosive increase in the number of users, influencers began to appear among users using various platforms.

인플루언서(influencer)란 '영향력을 행사하는 사람'이라는 뜻으로서, 소셜 네트워크 서비스(SNS)에서 많은 수의 팔로워(인플루언서가 업로드하는 콘텐츠를 구독하는 사용자)를 보유한 실제 인플루언서를을 지칭한다.Influencer means 'person who exerts influence'. In social network service (SNS), a real influencer who has a large number of followers (users who subscribe to the contents uploaded by the influencer) refers to

최근 스마트폰 등 인터넷 단말기의 보급으로 인해 소셜 네트워크 서비스의 이용자가 증가함에 따라, 이러한 인플루언서를 마케팅에 활용하고자 하는 광고주들이 증가하고 있다. 인플루언서를 통한 SNS 마케팅은 영화배우나 스포츠 스타 등 전통적인 광고모델을 통한 TV 마케팅에 비해 효율적인 것으로 알려져 있다. TV나 라디오를 이용한 광고는 불특정 다수에게 광고를 전달해야 하므로 대부분의 사람들에게 영향력을 미칠 수 있는 정도의 높은 인지도를 가진 연예인을 기용하는 것이 일반적이지만, 인플루언서는 특정 분야에서 특정 관심사를 공유하는 팔로워들에 대해서 특히 높은 인지도를 가지므로 팔로워들이 관심을 가질만한 제품을 집중적으로 홍보하기가 용이할 수 있다.As the number of users of social network services increases due to the recent spread of Internet terminals such as smartphones, advertisers who want to utilize these influencers for marketing are increasing. SNS marketing through influencers is known to be more efficient than TV marketing through traditional advertising models such as movie stars or sports stars. It is common to appoint a celebrity with a high level of awareness that can influence most people because advertisements using TV or radio must be delivered to an unspecified number of people, but influencers are those who share specific interests in a specific field. Since the product has a particularly high awareness of the followers, it may be easy to intensively promote a product that the followers may be interested in.

다만, 인플루언서를 활용하여 광고 마케팅을 하는 것은 일부 위험부담이 따르기도 하는데, 예를 들어, 광고 모델인 인플루언서에 대하여 부정적인 뉴스가 터지면 그로 인해 해당 인플루언서를 통해 광고를 진행했던 기업 내지 클라이언트는 이미지 훼손 리스크를 감내해야했다. 따라서, 실존하는 인플루언서가 아닌 실제 사람과 동일한 형태를 보이는 가상 인플루언서를 활용한 마케팅 방안이 마련될 필요가 있다.However, advertising marketing using influencers is accompanied by some risks. For example, if negative news about an influencer, an advertising model, breaks out, the company that advertised through the influencer as a result. The internal client had to endure the risk of image damage. Therefore, it is necessary to prepare a marketing plan using virtual influencers that look the same as real people rather than actual influencers.

본 명세서에서 달리 표시되지 않는 한, 이 섹션에 설명되는 내용들은 이 출원의 청구항들에 대한 종래 기술이 아니며, 이 섹션에 포함된다고 하여 종래 기술이라고 인정되는 것은 아니다.Unless otherwise indicated herein, material described in this section is not prior art to the claims in this application, and inclusion in this section is not an admission that it is prior art.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 가상 인플루언서를 활용하여 클라이언트에게 맞춤형 광고를 제공하는데 있다.An object of the present invention to solve the above problems is to provide customized advertisements to clients by utilizing virtual influencers.

상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 본 문서를 통해 직접적 또는 간접적으로 파악되는 목적들을 추가로 제공할 수 있다.Another object of the present invention for solving the above problems may further provide objects directly or indirectly identified through this document.

다양한 실시 예에 따르면, 가상 모델을 통해 마케팅하는 가상 모델 기반 광고 플랫폼 서버에 있어서, 클라이언트의 광고 의뢰를 수신하는 광고 의뢰 수신부;According to various embodiments of the present disclosure, in a virtual model-based advertising platform server for marketing through a virtual model, the advertisement request receiving unit receiving a client's advertisement request;

광고에 활용되는 가상 모델들을 생성하는 가상 모델 생성부; 상기 가상 모델들 중 적어도 하나의 가상 모델을 상기 클라이언트와 매칭하고, 상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 가상 모델 기반 광고 수행부; 클라이언트 단말로부터 수신한 광고 내용에 기반하여 메타버스 공간을 생성하는 메타버스 서비스 제공부; 및 상기 클라이언트 단말에 채팅 서비스를 제공하는 웹페이지를 출력하는 채팅 서비스 제공부를 포함할 수 있다.a virtual model generating unit generating virtual models used in advertisements; a virtual model-based advertisement performer matching at least one of the virtual models with the client and performing an advertisement through the at least one virtual model; A metaverse service provider for generating a metaverse space based on advertisement content received from a client terminal; And it may include a chat service providing unit for outputting a web page providing a chat service to the client terminal.

다양한 실시 예에 따르면, 상기 가상 모델 생성부는, 상기 클라이언트의 SNS 활동 정보에 기반하여 취향 정보를 분석하고, 분석된 상기 클라이언트의 취향 정보에 기반하여 상기 클라이언트의 광고를 수행할 가상 모델을 생성할 수 있다.According to various embodiments, the virtual model generating unit may analyze taste information based on SNS activity information of the client and generate a virtual model to perform advertisement of the client based on the analyzed taste information of the client. there is.

다양한 실시 예에 따르면, 상기 가상 모델 기반 광고 수행부는, 상기 가상 모델을 포함하는 게시물을 생성하고, 생성된 상기 게시물을 상기 클라이언트의 활동 플랫폼에 업로드할 수 있다.According to various embodiments of the present disclosure, the virtual model-based advertisement implementation unit may create a posting including the virtual model and upload the created posting to an activity platform of the client.

다양한 실시 예에 따르면, 상기 가상 모델 기반 광고 수행부는, 상기 가상 모델을 포함하지 않은 상기 클라이언트의 제1 게시물과 상기 가상 모델을 포함한 상기 클라이언트의 제2 게시물 각각에 대한 관심 정도를 비교하고, 상기 비교에 기반하여 상기 가상 모델의 기여도를 산출할 수 있다.According to various embodiments of the present disclosure, the virtual model-based advertisement performing unit compares a degree of interest in each of the client's first post not including the virtual model and the client's second post including the virtual model, and the comparison It is possible to calculate the contribution of the virtual model based on.

다양한 실시 예에 따르면, 상기 채팅 서비스 제공부는, 가상 모델마다 채팅 분야를 결정하고, 결정된 채팅 분야에 따라 상기 가상 모델에 대응하는 인공지능 모델을 학습시킬 수 있다.According to various embodiments, the chatting service provider may determine a chatting field for each virtual model and learn an artificial intelligence model corresponding to the virtual model according to the determined chatting field.

다양한 실시 예에 따르면, 가상 모델을 통해 마케팅하는 온라인 마케팅 플랫폼 제공 방법으로서, 클라이언트의 광고 의뢰를 수신하는 단계; 광고에 활용되는 가상 모델들을 생성하는 단계; 상기 가상 모델들 중 적어도 하나의 가상 모델을 상기 클라이언트와 매칭하는 단계; 상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 단계; 클라이언트 단말로부터 수신한 광고 내용에 기반하여 메타버스 공간을 생성하는 단계; 및 상기 클라이언트 단말에 채팅 서비스를 제공하는 웹페이지를 출력하는 단계를 포함할 수 있다.According to various embodiments, a method of providing an online marketing platform for marketing through a virtual model, comprising: receiving a request for an advertisement from a client; generating virtual models used in advertisements; matching at least one virtual model among the virtual models with the client; performing an advertisement through the at least one virtual model; Generating a metaverse space based on the advertisement content received from the client terminal; and outputting a web page providing a chatting service to the client terminal.

다양한 실시 예에 따르면, 상기 방법을 실행시키기 위한 프로그램이 기록되고, 컴퓨터에 의해 읽혀질 수 있는, 비일시적 기록매체가 개시될 수 있다.According to various embodiments, a non-transitory recording medium on which a program for executing the method is recorded and which can be read by a computer may be disclosed.

다양한 실시 예에 따르면, 상기 가상 모델 기반 광고 플랫폼 서버에서, 상기 방법을 실행시키기 위하여 비일시적 기록매체에 기록된 컴퓨터 프로그램이 개시될 수 있다.According to various embodiments, a computer program recorded on a non-transitory recording medium may be started in the virtual model-based advertising platform server to execute the method.

다양한 실시 예에 따르면, 가상 모델에 기반한 온라인 마케팅 플랫폼을 제공하는 시스템으로서, 광고를 의뢰하는 클라이언트의 클라이언트 단말; 상기 광고가 업로드되는 SNS를 이용하는 사용자의 사용자 단말; 및 상기 가상 모델을 통해 마케팅하는 가상 모델 기반 광고 플랫폼 서버를 포함할 수 있다. 상기 가상 모델 기반 광고 플랫폼 서버는, 상기 클라이언트의 광고 의뢰를 수신하는 광고 의뢰 수신부; 상기 광고에 활용되는 가상 모델들을 생성하는 가상 모델 생성부; 상기 가상 모델들 중 적어도 하나의 가상 모델을 상기 클라이언트와 매칭하고, 상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 가상 모델 기반 광고 수행부; 클라이언트 단말로부터 수신한 광고 내용에 기반하여 메타버스 공간을 생성하는 메타버스 서비스 제공부; 및 상기 클라이언트 단말에 채팅 서비스를 제공하는 웹페이지를 출력하는 채팅 서비스 제공부를 포함할 수 있다.According to various embodiments, a system for providing an online marketing platform based on a virtual model, comprising: a client terminal of a client requesting an advertisement; a user terminal of a user using SNS where the advertisement is uploaded; and a virtual model-based advertising platform server marketing through the virtual model. The virtual model-based advertisement platform server may include an advertisement request receiving unit receiving an advertisement request from the client; a virtual model generating unit generating virtual models used in the advertisement; a virtual model-based advertisement performer matching at least one of the virtual models with the client and performing an advertisement through the at least one virtual model; A metaverse service provider for generating a metaverse space based on advertisement content received from a client terminal; And it may include a chat service providing unit for outputting a web page providing a chat service to the client terminal.

본 문서에 개시되는 다양한 실시 예들에 따르면, 실제 인플루언서를을 광고 모델로 쓰다가 스캔들이 터질 때 입을 있는 피해를 받지 않을 수 있다.According to various embodiments disclosed in this document, it is possible not to suffer damage when a scandal breaks out while using an actual influencer as an advertising model.

또한, 다양한 실시 예들에 따르면, 광고주들의 맞춤형 광고를 맞춤형 가상 모델을 통해 행하므로 효율적인 광고가 가능하다.Also, according to various embodiments, since customized advertisements of advertisers are performed through customized virtual models, efficient advertisements are possible.

이 외에, 본 문서를 통해 직접적 또는 간접적으로 파악되는 다양한 효과들이 제공될 수 있다.In addition to this, various effects identified directly or indirectly through this document may be provided.

도 1은 일 실시 예에 따른 가상 모델 기반 광고 플랫폼 시스템을 도시한 도면이다.
도 2는 가상 모델 기반 광고 플랫폼 서버의 주요 구성 요소를 나타낸 도면이다.
도 3은 일 실시 예에 따른 클라이언트의 의뢰에 따라 가상 모델을 활용한 서버의 동작들을 나타낸 도면이다.
도 4는 일 실시 예에 따른 가상 모델을 이용한 SNS 광고 게시물을 나타낸 도면이다.
도 5는 일 실시 예에 따른 가상 모델을 이용한 채팅 서비스를 나타낸 도면이다.
도 6은 도 1에 따른 가상 모델 기반 광고 플랫폼 서버의 하드웨어 구성을 나타낸 도면이다.
도 7은 본 발명의 일 실시예에 따른 통신 과정에서 적용될 수 있는 무선 통신 시스템을 나타낸 도면이다.
도 8은 도 7에 따른 무선 통신 시스템에서 기지국을 나타낸 도면이다.
도 9는 도 7에 따른 무선 통신 시스템에서 단말을 나타낸 도면이다.
도 10은 도 7에 따른 무선 통신 시스템에서 통신 인터페이스를 나타낸 도면이다.
1 is a diagram illustrating an advertising platform system based on a virtual model according to an embodiment.
2 is a diagram showing the main components of a virtual model-based advertising platform server.
3 is a diagram illustrating operations of a server using a virtual model according to a request of a client according to an embodiment.
4 is a diagram illustrating an SNS advertisement post using a virtual model according to an embodiment.
5 is a diagram illustrating a chat service using a virtual model according to an embodiment.
FIG. 6 is a diagram showing the hardware configuration of the virtual model-based advertising platform server according to FIG. 1 .
7 is a diagram illustrating a wireless communication system that can be applied in a communication process according to an embodiment of the present invention.
8 is a diagram illustrating a base station in the wireless communication system according to FIG. 7 .
9 is a diagram illustrating a terminal in the wireless communication system according to FIG. 7 .
10 is a diagram illustrating a communication interface in the wireless communication system according to FIG. 7 .

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.Since the present invention can make various changes and have various embodiments, specific embodiments will be illustrated in the drawings and described in detail in the detailed description. However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention. Like reference numerals have been used for like elements throughout the description of each figure.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first, second, A, and B may be used to describe various components, but the components should not be limited by the terms. These terms are only used for the purpose of distinguishing one component from another. For example, a first element may be termed a second element, and similarly, a second element may be termed a first element, without departing from the scope of the present invention. The terms and/or include any combination of a plurality of related recited items or any of a plurality of related recited items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.It is understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, but other elements may exist in the middle. It should be. On the other hand, when an element is referred to as “directly connected” or “directly connected” to another element, it should be understood that no other element exists in the middle.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Terms used in this application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, the terms "include" or "have" are intended to designate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, but one or more other features It should be understood that the presence or addition of numbers, steps, operations, components, parts, or combinations thereof is not precluded.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the present invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related art, and unless explicitly defined in the present application, they should not be interpreted in an ideal or excessively formal meaning. don't

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 일 실시 예에 가상 모델 기반 광고 플랫폼 시스템(10)을 도시한 도면이다. 도 1을 참조하면, 가상 모델 기반 광고 플랫폼 시스템(10)은 가상 모델 기반 광고 플랫폼 서버(100), 클라이언트 단말(200), 사용자 단말(300) 등을 포함할 수 있다. 이하 설명되는 동작들은 서버(100)에 의하여 제어되는 플랫폼(예: 웹 페이지 및/또는 어플리케이션)을 통해 수행 내지 구현될 수 있다. 다시 말해서, 서버(100)는, 사용자가 사용자 단말(300) 내지 클라이언트 단말(200)을 이용하여 네트워크를 통해 서버(100)에 접속하여 다양한 정보를 입력하고, 등록하고, 출력할 수 있는 웹 사이트를 제공할 수 있으며, 사용자 단말(300) 내지 클라이언트 단말(200)에 설치되고 실행됨으로써 다양한 정보를 입력하고, 등록하고, 출력할 수 있는 어플리케이션을 제공할 수 있다.1 is a diagram illustrating a virtual model-based advertising platform system 10 according to an embodiment. Referring to FIG. 1 , the virtual model-based advertising platform system 10 may include a virtual model-based advertising platform server 100 , a client terminal 200 , a user terminal 300 , and the like. Operations described below may be performed or implemented through a platform (eg, a web page and/or application) controlled by the server 100 . In other words, the server 100 is a website through which a user accesses the server 100 through a network using the user terminal 300 or the client terminal 200 to input, register, and output various information. It is possible to provide, and by being installed and executed in the user terminal 300 or the client terminal 200, it is possible to provide an application capable of inputting, registering, and outputting various information.

가상 모델 기반 광고 플랫폼 서버(100)는 클라이언트 단말(200)로부터 광고를 의뢰받고, 광고 의뢰 내용에 기반하여 클라이언트 단말(200)의 광고에 활용될 가상 모델을 매칭할 수 있다. 가상 모델 기반 광고 플랫폼 서버(100)는 가상 모델을 이용한 광고를 통해 클라이언트의 상품 내지 서비스 등을 홍보하도록 할 수 있다.The virtual model-based advertising platform server 100 may receive an advertisement request from the client terminal 200 and match a virtual model to be used for advertisement of the client terminal 200 based on the contents of the advertisement request. The virtual model-based advertising platform server 100 may promote products or services of a client through advertisements using virtual models.

가상 모델 기반 광고 플랫폼 서버(100)는 가상 모델을 활용한 마케팅 서비스를 제공하되, 소셜 미디어 광고를 원하는 클라이언트들을 대상으로 마케팅 서비스를 제공할 수 있다. 다시 말해서, 가상 모델 기반 광고 플랫폼 서버(100)는 인스타그램, 유튜브, 페이스북, 트위터, 네이버 블로그, 티스토리 등과 같은 플랫폼에서 클라이언트와 매칭된 가상 모델을 이용한 마케팅 게시물을 생성하고, 생성된 마케팅 게시물을 통해 클라이언트의 광고 의뢰 내용을 홍보할 수 있다.The virtual model-based advertising platform server 100 provides marketing services using virtual models, but may also provide marketing services to clients who want social media advertisements. In other words, the virtual model-based advertising platform server 100 generates a marketing post using a virtual model matched with a client on platforms such as Instagram, YouTube, Facebook, Twitter, Naver Blog, and Tistory, and the generated marketing post. It is possible to publicize the contents of the client's advertisement request.

가상 모델 기반 광고 플랫폼 서버(100)는 단순히 소셜 미디어 광고 서비스를 제공하는 것뿐만 아니라, 생성된 가상 모델을 활용하여 메타버스 공간 내지 NFT 상품에 대한 광고 및 홍보 서비스를 제공할 수 있다. 본 명세서에서 가상 모델은 가상 인플루언서, 버추얼 인플루언서, 가상 인간, 메타 휴먼 등으로 이해되거나 지칭될 수 있다. 다시 말해서, 메타버스 공간 내에서의 광고를 원하는 클라이언트들에게 가상 모델을 매칭시켜 상기 가상 모델을 통한 메타버스 광고 서비스를 제공할 수 있다.The virtual model-based advertising platform server 100 not only simply provides social media advertising services, but also provides advertising and promotion services for metaverse space or NFT products by utilizing the generated virtual models. In this specification, virtual models may be understood or referred to as virtual influencers, virtual influencers, virtual humans, metahumans, and the like. In other words, a metaverse advertisement service through the virtual model can be provided by matching a virtual model to clients who want advertisements in the metaverse space.

가상 모델 기반 광고 플랫폼 서버(100)는 가상 모델을 활용하여 클라이언트 내지 사용자들과 채팅할 수 있는 채팅 서비스를 제공할 수 있다. 가상 모델 기반 광고 플랫폼 서버(100)는 각 분야별로 가상 모델을 결정할 수 있으며, 예를 들어, 제1 가상 모델은 제1 분야에 대한 채팅이 가능하도록 세팅되어 있으며, 제2 가상 모델은 제2 분야에 대한 채팅이 가능하도록 세팅되어 있을 수 있다. 가상 모델 기반 광고 플랫폼 서버(100)는 텍스트 기반의 채팅 서비스 내지 영상 기반의 채팅 서비스를 제공할 수 있으며, 사용자 단말(300) 내지 클라이언트 단말(200)의 자판 입력이나 마이크 등을 이용하여 사용자 내지 클라이언트의 질문 신호를 수신할 수 있으며, 사용자 단말(300) 내지 클라이언트 단말(200)의 디스플레이나 스피커를 이용하여 가상 모델의 답변 신호를 송신할 수 있다.The virtual model-based advertising platform server 100 may provide a chat service capable of chatting with clients or users by utilizing a virtual model. The virtual model-based advertising platform server 100 may determine a virtual model for each field. For example, a first virtual model is set to enable chatting for a first field, and a second virtual model is set to enable chatting for a second field. It may be set to allow chatting about. The virtual model-based advertising platform server 100 may provide a text-based chatting service or a video-based chatting service, and use a keyboard input or microphone of the user terminal 300 or client terminal 200 to allow users or clients A question signal of can be received, and an answer signal of the virtual model can be transmitted using a display or speaker of the user terminal 300 or the client terminal 200 .

클라이언트 단말(200)은 게재될 광고의 대상이 되는 제품 및/또는 서비스(즉, 광고주가 홍보하고자 하는 제품 및/또는 서비스)에 관한 정보 및 상기 광고를 언제부터 언제까지 게재할지에 대한 광고 기간 정보 등을 네트워크를 통해 가상 모델 기반 광고 플랫폼 서버(100)에 전송할 수 있다. 사용자 단말(300)은 클라이언트가 광고를 하는 플랫폼(예: SNS, 메타버스) 상의 서비스를 이용하는 사용자의 단말로 이해될 수 있다. 사용자 단말 내지 클라라언트 단말은 편의상 '단말'이라고 표현하였으나, 반드시 하드웨어적인 단일 구성요소만을 의미하는 것은 아니며, 서버의 형태로 구현될 수 있으며, 예를 들어, 클라이언트 단말(200)은 통신 가능한 데스크탑 컴퓨터(desktop computer), 랩탑 컴퓨터(laptop computer), 노트북(notebook), 스마트폰(smart phone), 태블릿 PC(tablet PC), 모바일폰(mobile phone), 스마트 워치(smart watch), 스마트 글래스(smart glass), e-book 리더기, PMP(portable multimedia player), 휴대용 게임기, 네비게이션(navigation) 장치, 디지털 카메라(digital camera), DMB(digital multimedia broadcasting) 재생기, 디지털 음성 녹음기(digital audio recorder), 디지털 음성 재생기(digital audio player), 디지털 동영상 녹화기(digital video recorder), 디지털 동영상 재생기(digital video player), 및 PDA(Personal Digital Assistant) 등 일 수 있다.The client terminal 200 provides information on the product and/or service (ie, the product and/or service that the advertiser intends to promote) that is the target of the advertisement to be displayed and advertisement period information on when and until when the advertisement is to be displayed. etc. may be transmitted to the virtual model-based advertising platform server 100 through a network. The user terminal 300 may be understood as a terminal of a user using a service on a platform (eg, SNS, metaverse) on which a client advertises. The user terminal or client terminal is expressed as a 'terminal' for convenience, but does not necessarily mean only a single hardware component, and may be implemented in the form of a server. For example, the client terminal 200 is a desktop computer capable of communication. (desktop computer), laptop computer, notebook, smart phone, tablet PC, mobile phone, smart watch, smart glass ), e-book reader, PMP (portable multimedia player), portable game machine, navigation device, digital camera, DMB (digital multimedia broadcasting) player, digital audio recorder, digital voice player (digital audio player), digital video recorder, digital video player, and personal digital assistant (PDA).

서버(100), 클라이언트 단말(200), 사용자 단말(300)은 각각 통신 네트워크에 연결되어, 통신 네트워크를 통해 서로간 데이터를 송수신할 수 있다. 예를 들어, 통신 네트워크는 LAN(Local Area Network), MAN(Metropolitan Area Network), GSM(Global System for Mobile Network), EDGE(Enhanced Data GSM Environment), HSDPA(High Speed Downlink Packet Access), W-CDMA(Wideband Code Division Multiple Access), CDMA(Code Division Multiple Access), TDMA(Time Division Multiple Access), 블루투스(Bluetooth), 지그비(Zigbee), 와이-파이(Wi-Fi), VoIP(Voice over Internet Protocol), LTE Advanced, IEEE802.16m, WirelessMAN-Advanced, HSPA+, 3GPP Long Term Evolution (LTE), Mobile WiMAX(IEEE 802.16e), UMB(formerly EV-DO Rev. C), Flash-OFDM, iBurst and MBWA (IEEE 802.20) systems, HIPERMAN, Beam-Division Multiple Access (BDMA), Wi-MAX(World Interoperability for Microwave Access), 5G 등 다양한 종류의 유선 또는 무선 네트워크가 사용될 수 있다.The server 100, the client terminal 200, and the user terminal 300 are connected to a communication network, respectively, and can transmit and receive data to and from each other through the communication network. For example, communication networks include Local Area Network (LAN), Metropolitan Area Network (MAN), Global System for Mobile Network (GSM), Enhanced Data GSM Environment (EDGE), High Speed Downlink Packet Access (HSDPA), and W-CDMA. (Wideband Code Division Multiple Access), CDMA (Code Division Multiple Access), TDMA (Time Division Multiple Access), Bluetooth, Zigbee, Wi-Fi, Voice over Internet Protocol (VoIP) , LTE Advanced, IEEE802.16m, WirelessMAN-Advanced, HSPA+, 3GPP Long Term Evolution (LTE), Mobile WiMAX (IEEE 802.16e), UMB (formerly EV-DO Rev. C), Flash-OFDM, iBurst and MBWA (IEEE Various types of wired or wireless networks may be used, such as 802.20) systems, HIPERMAN, Beam-Division Multiple Access (BDMA), World Interoperability for Microwave Access (Wi-MAX), and 5G.

도 2는 가상 모델 기반 광고 플랫폼 서버(100)의 주요 구성 요소를 나타낸 도면이다. 도 3은 일 실시 예에 따른 클라이언트의 의뢰에 따라 가상 모델을 활용한 서버의 동작들을 나타낸 도면이다. 도 4는 일 실시 예에 따른 가상 모델을 이용한 SNS 광고 게시물을 나타낸 도면이다. 도 5는 일 실시 예에 따른 가상 모델을 이용한 채팅 서비스를 나타낸 도면이다.2 is a diagram showing the main components of the virtual model-based advertising platform server 100 . 3 is a diagram illustrating operations of a server using a virtual model according to a request of a client according to an embodiment. 4 is a diagram illustrating an SNS advertisement post using a virtual model according to an embodiment. 5 is a diagram illustrating a chat service using a virtual model according to an embodiment.

데이터 관리부(101)는 클라이언트 단말(200) 및 사용자 단말(300)로부터 데이터를 획득할 수 있다. 예를 들어, 데이터 관리부(101)는 클라이언트 단말(200)로부터 마케팅 의뢰를 수신하고, 의뢰된 마케팅에 대응하는 마케팅 기간, 마케팅 방법, 마케팅 매체, 마케팅 의뢰비, 마케팅 링크 등을 포함하는 마케팅 정보를 획득할 수 있다. The data management unit 101 may obtain data from the client terminal 200 and the user terminal 300 . For example, the data management unit 101 receives a marketing request from the client terminal 200, and provides marketing information including a marketing period corresponding to the requested marketing, a marketing method, a marketing medium, a marketing request fee, a marketing link, and the like. can be obtained

데이터 관리부(101)는 빅데이터에 기반하여 복수의 인플루언서들이 포스팅한 게시물을 플랫폼 별로 크롤링(crawling)하고, 상기 복수의 인플루언서들의 활동 정보를 획득할 수 있다. 예를 들어, 데이터 관리부(101)는 인스타그램, 유튜브, 페이스북, 트위터, 네이버 블로그, 티스토리 등과 같은 플랫폼 별로 복수의 인플루언서들이 업로드한 게시물을 크롤링할 수 있다. 예를 들어, 활동 정보는 인플루언서의 플랫폼 별 업르드한 게시물 수, 플랫폼 별 활동량, 게시물 카테고리, 게시물 내용, 게시물 포맷, 활동 기간 및 피드백 등을 포함할 수 있다. 데이터 관리부(101)는 상기 복수의 인플루언서들의 업로드 성향에 관한 정보를 획득할 수 있다. 업로드 성향에 대한 정보를 파악하여 가상 모델(가상 인플루언서)에 의한 마케팅 내지 광고 방법을 적용하기 위해서이다.The data management unit 101 may crawl posts posted by a plurality of influencers for each platform based on big data, and obtain activity information of the plurality of influencers. For example, the data management unit 101 may crawl posts uploaded by a plurality of influencers for each platform, such as Instagram, YouTube, Facebook, Twitter, Naver Blog, and Tistory. For example, the activity information may include the number of posts uploaded by the influencer by platform, amount of activity by platform, post category, post content, post format, activity period, and feedback. The data management unit 101 may obtain information about upload tendencies of the plurality of influencers. This is to apply a marketing or advertising method by a virtual model (virtual influencer) by grasping information on upload propensity.

광고 의뢰 수신부(102)는 클라이언트 단말(200)로부터 광고 의뢰 요청 신호를 수신할 수 있다. 광고 의뢰 수신부(102)는 클라이언트 단말(200)로부터 광고 의뢰 요청 신호와 함께 광고 기간, 광고 대상물, 광고 컨셉트 등에 관한 정보를 수신할 수 있다.The advertisement request receiver 102 may receive an advertisement request request signal from the client terminal 200 . The advertisement request receiving unit 102 may receive information about an advertisement period, an advertisement object, an advertisement concept, and the like together with an advertisement request request signal from the client terminal 200 .

가상 모델 생성부(103)는 가상 모델을 생성하되, 광고 의뢰 전에 미리 가상 모델을 생성하거나 광고 의뢰와 함께 클라이언트의 의뢰 내용에 대응하는 맞춤형 가상 모델을 생성할 수 있다.The virtual model generating unit 103 may generate a virtual model, but may generate a virtual model in advance before requesting an advertisement or may create a customized virtual model corresponding to the contents requested by a client together with requesting an advertisement.

가상 모델 생성부(103)는 연령대별 선호 조건을 갖춘 다수의 가상 모델을 생성할 수 있다. 예를 들어, 가상 모델 생성부(103)는 10대가 선호하는 조건을 갖춘 10대 선호 가상 모델, 20대가 선호하는 조건을 갖춘 20대 선호 가상 모델, 30대가 선호하는 조건을 갖춘 30대 선호 가상 모델, 40대가 선호하는 조건을 갖춘 40대 선호 가상 모델, 50대가 선호하는 조건을 갖춘 50대 선호 가상 모델, 60대가 선호하는 조건을 갖춘 60대 선호 가상 모델 등을 생성할 수 있다.The virtual model generator 103 may create a plurality of virtual models having preference conditions for each age group. For example, the virtual model generation unit 103 may include a virtual model preferred by teenagers with conditions preferred by teenagers, a virtual model preferred by 20s with conditions preferred by 20s, and a virtual model preferred by 30s with conditions preferred by 30s. , virtual models preferred by those in their 40s with conditions preferred by those in their 40s, virtual models preferred by those in their 50s with conditions preferred by those in their 50s, and virtual models preferred by those in their 60s with conditions preferred by those in their 60s can be created.

가상 모델 생성부(103)는 분야별 선호 조건을 갖춘 다수의 가상 모델을 생성할 수 있다. 예를 들어, 가상 모델 생성부(103)는 패션 분야에 관심 있는 사람들의 선호 조건을 갖춘 패션 선호 가상 모델, 대중음악 분야에 관심 있는 사람들의 선호 조건을 갖춘 대중음악 선호 가상 모델, 클래식음악 분야에 관심 있는 사람드르이 선호 조건을 갖춘 클래식음악 선호 가상 모델, 테니스에 관심 있는 사람들의 선호 조건을 갖춘 테니스 선호 가상 모델 등을 생성할 수 있다.The virtual model generation unit 103 may generate a plurality of virtual models having preference conditions for each field. For example, the virtual model generation unit 103 may include a fashion preference virtual model having preference conditions for people interested in fashion, a popular music preference virtual model having preference conditions for people interested in pop music, and a classical music field. A classical music preference virtual model with preference conditions for interested people, a tennis preference virtual model with preference conditions for people interested in tennis, and the like can be created.

가상 모델의 외모는 클라이언트가 광고 내지 홍보하고자 하는 내용에 관심이 있을만한 사람들의 선호 외모와 광고 내용으로 정하는 것이 가장 효율적일 수 있다. 따라서, 가상 모델 생성부(103)는 상기 사람들의 선호 외모와 광고 내용에 기반하여 가상 모델을 생성할 수 있다. 예를 들어, 화장품 광고의 경우, 화장품에 관심이 많은 사람들의 선호 외모와 피부가 깨끗하고 우아한 느낌의 가상 모델이 어울릴 수 있으므로, 위와 같은 조건에 대응하는 가상 모델을 생성할 수 있다.It may be most efficient to determine the appearance of the virtual model based on the preferred appearance of people who may be interested in advertisements or contents to be promoted by the client and contents of advertisements. Accordingly, the virtual model generation unit 103 may generate a virtual model based on the preferred appearance of the people and the content of the advertisement. For example, in the case of a cosmetics advertisement, a virtual model corresponding to the above condition may be generated because the preferred appearance of people interested in cosmetics and a virtual model having clean and elegant skin may match.

가상 모델 생성부(103)는 클라이언트의 계정(클라이언트가 운영하는 계정)을 팔로우 내지 구독하는 사용자들이 관심을 가진 게시물(좋아요를 누르거나 댓글을 달거나 관심을 누른 게시물)에 포함된 얼굴 이미지들에 기반하여 이상형 이미지를 생성할 수 있다. 가상 모델 생성부(103)는 상기 얼굴 이미지들 각각의 랜드 마크를 지정하고, 상기 랜드 마크에 기반하여 얼굴 이미지들 각각에 대하여 얼굴 특징점들을 획득할 수 있다. 가상 모델 생성부(103)는 얼굴 특징점들의 평균 특징점을 가지는 이상형 이미지를 생성할 수 있다. 가상 모델 생성부(103)는 생성된 상기 이상형 이미지에 기반하여 가상 모델의 얼굴을 생성할 수 있다.The virtual model generation unit 103 is based on facial images included in posts (posts that users who follow or subscribe to the client's account (an account operated by the client) are interested in (likes, comments, or interest). By doing so, an ideal type image can be created. The virtual model generator 103 may designate a landmark of each of the face images, and obtain facial feature points for each of the face images based on the landmark. The virtual model generating unit 103 may generate an ideal type image having an average of facial feature points. The virtual model generator 103 may generate a face of a virtual model based on the generated ideal type image.

또는, 가상 모델 생성부(103)는 클라이언트가 광고 내지 홍보하고자 하는 내용에 관심이 있는 사람들의 선호 외모에 기반하여 가상 모델을 생성하는 것뿐만 아니라, 클라이언트의 선호에 기반하여 가상 모델을 생성할 수 있다.Alternatively, the virtual model generation unit 103 may generate a virtual model based on the preference of the client as well as a virtual model based on the preferred appearance of people who are interested in advertisements or contents to be promoted by the client. there is.

가상 모델 생성부(103)는 SNS 서버(예: 인스타그램, 페이스북)를 통해 사용자가 팔로우하고 있는 사람들의 공개 계정을 크롤링할 수 있다. 가상 모델 생성부는 사용자가 일정 기간 동안 접속하는 수, 접속 유지 시간, 사용자가 누른 좋아요 수, 사용자가 작성한 댓글 수 등에 기초하여, 사용자가 팔로우하고 있는 사람들 각각의 이상형 선호도를 산정할 수 있다. 가상 모델 생성부는 산정된 이상형 선호도가 임계값 이상인 사람들의 계정에 업로드된 사진들을 크롤링하고, 크롤링된 사진들을 통해 상기 임계값 이상인 사람들의 평균 얼굴을 생성할 수 있다. 가상 모델 생성부는 크롤링한 사진들 각각에 대하여 객체 검출을 통해 얼굴을 인식하고, 인식된 얼굴들의 특징점들을 추출할 수 있다. 가상 모델 생성부는 추출한 특징점들에 기초하여 평균 특징점을 산정하고, 산정된 평균 특징점에 기초하여 상기 임계값 이상인 사람들의 평균 얼굴을 생성할 수 있다. 가상 모델 생성부는 생성된 평균 얼굴을 사용자의 이상형의 얼굴로 결정하고, 결정된 이상형의 얼굴을 가상 모델의 얼굴로 결정할 수 있다. 가상 모델 생성부(103)는 생성한 가상 모델을 가상 모델 DB에 저장할 수 있다.The virtual model generating unit 103 may crawl public accounts of people the user follows through an SNS server (eg, Instagram, Facebook). The virtual model generator may calculate the ideal type preference of each of the people the user follows based on the number of accesses made by the user during a certain period of time, the duration of the connection, the number of likes the user clicked, the number of comments the user wrote, and the like. The virtual model generation unit may crawl photos uploaded to accounts of people whose calculated ideal type preference is greater than or equal to a threshold value, and may generate average faces of people whose ideal type preference is equal to or greater than the threshold value through the crawled photos. The virtual model generation unit may recognize faces for each of the crawled photos through object detection and extract feature points of the recognized faces. The virtual model generating unit may calculate an average feature point based on the extracted feature points, and generate an average face of people having the threshold value or more based on the calculated average feature point. The virtual model generator may determine the generated average face as the user's ideal type face, and determine the determined ideal type face as the face of the virtual model. The virtual model generating unit 103 may store the generated virtual model in a virtual model DB.

가상 모델 기반 광고 수행부(104)는 광고의 대상인 제품 내지 서비스를 홍보할 타겟 고객들을 결정하고, 결정된 타겟 고객들을 분석할 수 있다. The virtual model-based advertisement execution unit 104 may determine target customers to promote a product or service that is an advertisement target, and analyze the determined target customers.

가상 모델 기반 광고 수행부(104)는 클라이언트의 선호 취향 및 광고 의뢰 내용에 기반하여 맞춤형 제1 가상 모델을 결정하고, 결정된 제1 가상 모델을 클라이언트와 매칭할 수 있다. 가상 모델 기반 광고 수행부(104)는 결정된 제1 가상 모델을 상기 클라이언트의 메인 활동 플랫폼 내지 SNS에 게시할 게시물을 생성할 수 있다. 상기 게시물은 글, 사진 및/또는 동영상으로 구성될 수 있다.The virtual model-based advertisement performing unit 104 may determine a customized first virtual model based on the client's preference and advertisement request contents, and match the determined first virtual model with the client. The virtual model-based advertisement performing unit 104 may create a post to be posted on the main activity platform or SNS of the client with the determined first virtual model. The posts may consist of text, photos and/or videos.

가상 모델 기반 광고 수행부(104)는 광고에 대한 제1 가상 모델의 기여도를 산출할 수 있다. 가상 모델 기반 광고 수행부(104)는 제1 가상 모델을 포함하는 게시물의 좋아요 수, 관심 수, 댓글 수, 공유 수 등에 기반하여 제1 가상 모델의 기여도를 산출할 수 있다. 예를 들어, 가상 모델을 활용하기 전의 클라이언트 게시물의 관심 정도보다 가상 모델을 활용한 이후의 클라이언트 게시물의 관심 정도를 비교하여 가상 모델의 기여도를 산출할 수 있다.The virtual model-based advertisement performer 104 may calculate the contribution of the first virtual model to the advertisement. The virtual model-based advertisement performer 104 may calculate the contribution of the first virtual model based on the number of likes, interests, comments, shares, etc. of a post including the first virtual model. For example, the degree of contribution of the virtual model may be calculated by comparing the degree of interest of the client post after using the virtual model with the degree of interest of the client post before utilizing the virtual model.

가상 모델 기반 광고 수행부(104)는 가상 모델의 광고 기여도를 산출하고, 산출된 광고 기여도에 따라 광고 기여도 테이블을 생성할 수 있다. 광고 기여도는 가상 모델이 광고 수행에 있어서 얼마나 기여를 했는지를 나타내는 지표일 수 있다. 가상 모델 기반 광고 플랫폼 서버(100)는 생성된 광고 기여도 테이블을 클라이언트 단말(200)에 제공할 수 있으며, 클라이언트로 하여금 광고 기여도 테이블에 나타난 가상 모델들 각각의 광고 기여도를 참고하게 함으로써, 가상 모델들을 관리할 수 있도록 도움을 제공할 수 있다.The virtual model-based advertisement performing unit 104 may calculate the advertisement contribution of the virtual model and generate an advertisement contribution table according to the calculated advertisement contribution. The advertisement contribution may be an index indicating how much the virtual model contributes to advertisement performance. The virtual model-based advertising platform server 100 may provide the generated advertisement contribution table to the client terminal 200, and have the client refer to the advertisement contribution of each of the virtual models shown in the advertisement contribution table, so that the virtual models are We can help you manage it.

가상 모델 기반 광고 수행부(104)는 가상 모델에 기반한 게시물이 업로드되기 전, 클라이언트 계정으로 유입되는 일평균 사용자 수, 클라이언트 계정의 게시물을 시청하는 일평균 사용자 수, 클라이언트 계정의 게시물에 대하여 관심을 표시(좋아요, 관심, 댓글 등의 합)하는 일평균 사용자의 수, 클라이언트 계정에 대한 팔로우 내지 구독하는 사용자들의 증감률을 산출할 수 있다. 가상 모델 기반 광고 수행부(104)는 가상 모델에 기반한 게시물이 업로드된 이후에 클라이언트 계정으로 유입되는 일평균 사용자 수, 가상 모델에 기반한 게시물을 시청하는 일평균 사용자 수, 가상 모델에 기반한 게시물에 대하여 관심을 표시(좋아요, 관심, 댓글 등의 합)하는 일평균 사용자 수, 가상 모델에 기반한 게시물이 업로드된 이후에 클라이언트 계정에 대한 팔로우 내지 구독하는 사용자들의 증감률을 산출할 수 있다. 가상 모델 기반 광고 수행부(104)는 가상 모델에 기반한 게시물의 업로드 되기 전과 후를 비교하여 가상 모델의 광고 기여도를 산출 내지 결정할 수 있다.The virtual model-based advertisement execution unit 104 determines the daily average number of users flowing into the client account, the daily average number of users viewing the client account's posts, and interest in the client account's posts before the virtual model-based posts are uploaded. The daily average number of users who display (the sum of likes, interests, comments, etc.) and the rate of change of users who follow or subscribe to the client account can be calculated. The virtual model-based advertisement execution unit 104 determines the daily average number of users who flow into the client account after a post based on the virtual model is uploaded, the average daily number of users who view posts based on the virtual model, and posts based on the virtual model. The daily average number of users who show interest (the sum of likes, interests, comments, etc.) and the rate of change of users following or subscribing to the client account after the post based on the virtual model is uploaded can be calculated. The virtual model-based advertisement performing unit 104 may compare before and after uploading of posts based on the virtual model to calculate or determine an advertisement contribution of the virtual model.

클라이언트의 광고가 진행되는 과정에서 가상 모델들 각각의 계정에 부여된 고유 링크(즉, 가상 모델에게 할당된 링크 정보)를 통해 미리 설정된 기간동안 클라이언트의 서버에 접속한 수, 상기 고유 링크가 공유된 횟수, 가상 모델 활용 전후의 변화도 등에 기반하여 상기 광고 기여도를 산출할 수 있다. 가상 모델 기반 광고 수행부(104)는 이하 수학식 1을 통해 상기 광고 기여도를 산출할 수 있다.The number of accesses to the client's server during a preset period of time through the unique link assigned to each account of the virtual models (ie, link information assigned to the virtual model) in the course of the client's advertisement, the number of times the unique link was shared The advertisement contribution may be calculated based on the number of times, the degree of change before and after using the virtual model, and the like. The virtual model-based advertisement performer 104 may calculate the advertisement contribution through Equation 1 below.

Figure 112023009226020-pat00001
Figure 112023009226020-pat00001

상기 수학식 1에서, Pg는 광고 기여도, m은 가상 모델의 계정에 부여된 고유 링크를 통해 미리 설정된 기간 동안 클라이언트의 판매 서버에 접속한 사용자의 수, s는 사용자에 의하여 상기 고유 링크가 공유된 횟수, c는 클라이언트를 팔로우 내지 구독하고 있는 사람들의 수, z는 가상 모델의 게시물에 대한 관심수를 의미할 수 있다. 상기 관심수는 게시물(게시글, 영상물, 사진 등)에 대한 좋아요 표시 수, 관심 표시 수, 댓글 수 등을 합친 수일 수 있다. z+m+s의 값이 동일하더라도 클라이언트를 팔로우 내지 구독하고 있는 사람들의 수가 적을수록 더 효율적인 마케팅이라고 이해될 수 있으므로, 팔로우 내지 구독하고 있는 사람들의 수에 대한 값이 분모로 이해될 수 있다.In Equation 1, P g is the advertising contribution, m is the number of users who accessed the sales server of the client during a preset period through the unique link assigned to the account of the virtual model, s is the unique link shared by the user The number of times that the client is viewed, c may mean the number of people following or subscribing to the client, and z may mean the number of interest in the post of the virtual model. The number of interests may be the sum of the number of likes, interest marks, and comments for posts (posts, videos, photos, etc.). Even if the value of z+m+s is the same, the smaller the number of people following or subscribing to the client, the more efficient marketing can be understood. Therefore, the value for the number of people following or subscribing can be understood as the denominator.

가상 모델 기반 광고 수행부(104)는 광고에 대한 제1 가상 모델의 기여도에 따라서 광고에 활용하는 가상 모델을 제1 가상 모델에서 제2 가상 모델로 변경할 수 있다. 가상 모델 기반 광고 수행부(104)는 제1 가상 모델의 기여도가 미리 설정된 제1 기여도 이하인 경우, 클라이언트의 광고에 대한 모델로 제1 가상 모델에서 제2 가상 모델로 변경할 수 있다.The virtual model-based advertisement performer 104 may change a virtual model used for advertisement from the first virtual model to the second virtual model according to the contribution of the first virtual model to the advertisement. When the contribution of the first virtual model is equal to or less than the preset first contribution, the virtual model-based advertisement performer 104 may change the first virtual model to the second virtual model as a model for the advertisement of the client.

메타버스 서비스 제공부(105)는 클라이언트 단말(200)로부터 획득된 광고 내용 내지 마케팅 내용에 기반하여 메타버스 공간을 생성할 수 있다. 메타버스 서비스 제공부(105)는 생성된 메타버스 공간 내에 상기 클라이언트에 대응되는 가상 모델을 배치시킬 수 있으며, 클라이언트가 광고하고자 하는 대상(예: 의류, 자동차 등)에 대한 가상 사물을 함께 배치할 수 있다.The metaverse service provider 105 may create a metaverse space based on advertisement contents or marketing contents acquired from the client terminal 200 . The metaverse service provider 105 may place a virtual model corresponding to the client in the created metaverse space, and place virtual objects for the target (eg, clothes, cars, etc.) that the client wants to advertise together. can

메타버스 서비스 제공부(105)는 메타버스 공간의 현실감을 높이기 위하여, 서버(100)에 연동된 센서(예: 카메라, ToF 센서, 적외선 센서 등)를 통해 획득한 객체 정보에 기초하여 상기 객체에 대응하는 가상 객체를 생성할 수 있다. 메타버스 서비스 제공부(105)는 생성된 메타버스 공간을 통해 광고 내용 내지 마케팅 내용을 효율적으로 홍보할 수 있다. 다시 말해서, 메타버스 서비스 제공부(105)는 서버(100)에 연동된 센서를 통해 획득한 객체 정보를 이용하여 객체를 식별하고, 메타버스 서비스 제공부(105)는 식별된 객체에 대응하는 가상 객체를 메타버스 공간에 배치할 수 있다. 객체 정보는, 홍보에 필요한 기타 객체(예: 커튼, 의자, 테이블, 벽지 등)를 포함할 수 있다.In order to increase the realism of the metaverse space, the metaverse service provider 105 provides information on the object based on object information obtained through a sensor (eg, camera, ToF sensor, infrared sensor, etc.) linked to the server 100. A corresponding virtual object can be created. The metaverse service provider 105 can efficiently promote advertisement contents or marketing contents through the created metaverse space. In other words, the metaverse service provider 105 identifies an object using object information acquired through a sensor linked to the server 100, and the metaverse service provider 105 identifies a virtual object corresponding to the identified object. Objects can be placed in the metaverse space. Object information may include other objects (eg, curtains, chairs, tables, wallpaper, etc.) necessary for publicity.

메타버스 서비스 제공부(105)는 서버(100)에 연동된 센서로부터 실시간 공간 정보 및 실시간 객체 정보를 획득할 수 있다. 구체적으로, 서버(100)에 연동된 센서는 이미지 센서, 레이더 센서, 및/또는 거리 감지 센서(예: ToF 센서, 라이다 센서)를 포함할 수 있으며, 이미지 센서를 통해 영상 데이터를 획득하고, 레이더 센서를 통해 레이더 데이터를 획득하고, 거리 감지 센서를 통해 거리 데이터를 획득하고, 거리 감지 센서를 통해 거리 데이터를 획득할 수 있다. 서버(100)에 연동된 센서는 획득된 영상 데이터, 레이더 데이터 및/또는 라이다 데이터를 메타버스 서비스 제공부(105)로 전송 내지 제공할 수 있다. 이미지 센서는 카메라 모듈에 포함될 수 있다. 영상 데이터는 이미지 데이터로 지칭될 수 있다.The metaverse service provider 105 may obtain real-time spatial information and real-time object information from sensors linked to the server 100 . Specifically, the sensor linked to the server 100 may include an image sensor, a radar sensor, and/or a distance detection sensor (eg, a ToF sensor, a LiDAR sensor), acquires image data through the image sensor, Radar data may be obtained through a radar sensor, distance data may be obtained through a distance detection sensor, and distance data may be obtained through a distance detection sensor. The sensor linked to the server 100 may transmit or provide acquired image data, radar data, and/or lidar data to the metaverse service provider 105. An image sensor may be included in a camera module. Image data may be referred to as image data.

메타버스 서비스 제공부(105)는 서버(100)에 연동된 센서로부터 획득한 실시간 라이다 데이터 및 영상 데이터에 기초하여 실시간 공간 정보를 생성하고, 생성된 메타버스 공간의 현실성 향상을 위하여 생성된 실시간 공간 정보와 메타버스 공간을 비교할 수 있다. 메타버스 서비스 제공부(105)는 상기 실시간 공간 정보와 메타버스 공간에서 중첩되는 부분은 유지하고, 상이한 부분은 상기 실시간 공간 정보에 기반하여 메타버스 공간을 변형 내지 재생성할 수 있다.The metaverse service provider 105 generates real-time spatial information based on real-time lidar data and image data obtained from sensors linked to the server 100, and real-time generated to improve the reality of the generated metaverse space. Spatial information and metaverse space can be compared. The metaverse service provider 105 maintains overlapping portions of the real-time spatial information and the metaverse space, and may modify or regenerate the metaverse space based on the real-time spatial information for different portions.

메타버스 서비스 제공부(105)는 메타버스 공간에 배치할 가상 객체를 생성하기 위하여, 메타버스 서비스 제공부(105)를 통해 현실 공간에 있는 객체들을 식별하고, 식별된 객체에 대응하는 가상 객체를 생성하여 메타버스 공간에 배치할 수 있다.The metaverse service provider 105 identifies objects in the real space through the metaverse service provider 105 and creates virtual objects corresponding to the identified objects in order to create virtual objects to be placed in the metaverse space. It can be created and placed in the metaverse space.

메타버스 서비스 제공부(105)는 서버(100)에 연동된 센서에 장착된 거리 감지 센서로부터 획득된 거리 데이터의 포인트 좌표, 서버(100)에 연동된 센서에 장착된 이미지 센서로부터 획득된 영상 데이터의 픽셀 값에 기반하여 객체를 식별할 수 있다. 거리 감지 센서는 360도 회전 가능한 라이다 센서 및/또는 360도 회전 가능한 ToF 센서일 수 있으며, 거리 감지 센서는 상기 거리 감지 센서의 센싱 반경(예: 360도) 내에서 객체에 대응하는 포인트 클라우드 정보를 획득할 수 있다. 상기 포인트 클라우드 정보는 상기 거리 감지 센서의 센싱 반경의 방위각에 대응하여 맵핑될 수 있다. 상기 포인트 클라우드 정보는 상기 거리 감지 센서에서 객체까지의 거리 정보를 포함할 수 있다. 상기 포인트 클라우드 정보는 거리 감지 센서 및/또는 이미지 센서를 통해 획득될 수 있다.The metaverse service provider 105 provides point coordinates of distance data obtained from a distance detection sensor mounted on a sensor linked to the server 100 and image data obtained from an image sensor mounted on a sensor linked to the server 100. An object can be identified based on the pixel value of The distance detection sensor may be a 360-degree rotatable lidar sensor and/or a 360-degree rotatable ToF sensor, and the distance detection sensor may include point cloud information corresponding to an object within a sensing radius (eg, 360 degrees) of the distance detection sensor. can be obtained. The point cloud information may be mapped corresponding to an azimuth angle of a sensing radius of the distance sensor. The point cloud information may include distance information from the distance sensor to the object. The point cloud information may be obtained through a distance detection sensor and/or an image sensor.

상기 포인트 클라우드 정보는 상기 센싱 반경 사이의 방위각에서 일정한 양자화 간격으로 양자화되며, 방위각을 기준으로 양자화된 포인트 클라우드 정보는 거리 감지 센서의 회전에 따라 프레임화될 수 있다. The point cloud information is quantized at a constant quantization interval at an azimuth between the sensing radii, and the point cloud information quantized based on the azimuth may be framed according to rotation of the distance sensor.

메타버스 서비스 제공부(105)는 양자화된 상기 포인트 클라우드 정보에 기반한 프레임(frame)들 중에서, 서로 시간적으로 인접한 2개의 프레임들을 대상으로, 제1 프레임에서의 특정 방위각에 맵핑되는 포인트들 각각의 거리 정보인 제1 거리값들의 제1 평균값과 제2 프레임에서의 상기 특정 방위각에 맵핑되는 포인트들 각각의 거리 정보인 제2 거리값들의 제2 평균값끼리 차분하여 차분 프레임을 생성할 수 있다. 메타버스 서비스 제공부(105)는 생성된 차분 프레임에서의 특정 방위각에 맵핑되는 포인트들 각각의 거리 정보인 제3 거리값들의 평균값이 미리 설정된 임계값 이상인 경우, 상기 객체를 식별 대상 객체로 결정할 수 있다.The metaverse service provider 105 targets two frames temporally adjacent to each other among frames based on the quantized point cloud information, and the distance between each of the points mapped to a specific azimuth in the first frame. A difference frame may be generated by difference between a first average value of first distance values, which is information, and a second average value of second distance values, which is distance information of each of points mapped to the specific azimuth in the second frame. The metaverse service provider 105 may determine the object as an object to be identified when the average value of the third distance values, which is distance information of each of the points mapped to a specific azimuth in the generated difference frame, is greater than or equal to a preset threshold value. there is.

메타버스 서비스 제공부(105)는 식별 대상 객체로 결정된 상기 객체에 대한 영상 데이터에 기초하여, 상기 객체를 식별할 수 있다. 상기 객체에 대한 영상 데이터는 상기 서버(100)에 연동된 센서에 장착된 이미지 센서에 의하여 획득될 수 있다.The metaverse service provider 105 may identify the object based on image data of the object determined as the object to be identified. Image data of the object may be acquired by an image sensor mounted on a sensor linked to the server 100 .

메타버스 서비스 제공부(105)는 서버(100)에 연동된 센서를 통해 획득된 영상 데이터를 인공 신경망에 입력 데이터로 입력할 수 있다. 메타버스 서비스 제공부(105)는 인공신경망(ANN; artificial neural network)을 통해 객체의 종류명을 출력할 수 있다. 상기 인공신경망은 CNN(convolutional neural network) 기반의 객체 식별 알고리즘인 SSD(Single Shot Detector), R-CNN(Region with CNN) 또는 YOLO(you only look once) 등을 이용하여 구현될 수 있다.The metaverse service provider 105 may input image data obtained through a sensor linked to the server 100 to the artificial neural network as input data. The metaverse service provider 105 may output the type name of the object through an artificial neural network (ANN). The artificial neural network may be implemented using a convolutional neural network (CNN)-based object identification algorithm such as single shot detector (SSD), region with CNN (R-CNN), or you only look once (YOLO).

일 실시 예에서, 메타버스 서비스 제공부(105)는 객체 대한 영상 데이터에 따른 객체 추측 모델을 지도학습(supervised learning)할 수 있으며, 객체 추측 모델은 인공 신경망으로 구현될 수 있다. 인공 신경망은 많은 수의 인공 뉴런(또는, 노드)들을 이용하여 생물학적인 시스템의 계산 능력을 모방하는 소프트웨어나 하드웨어로 구현된 예측 모델이다.In one embodiment, the metaverse service provider 105 may perform supervised learning on an object estimation model according to image data of an object, and the object estimation model may be implemented as an artificial neural network. An artificial neural network is a predictive model implemented in software or hardware that mimics the computational power of a biological system using a large number of artificial neurons (or nodes).

객체 추측 모델은 객체 추측 모델 학습부에 의해서 '객체에 대한 영상 데이터' 및 '영상 데이터에서 인식된 객체에 대하여 라벨링된 데이터'을 이용하여 지도 학습될 수 있다. 이때 지도 학습이란, 입력값과 그에 따른 출력값이 있는 데이터를 학습 데이터로 이용하여 주어진 입력값에 따른 출력값을 찾는 학습을 의미하며, 정답을 알고 있는 상태에서 이루어지는 학습을 의미한다. 예를 들어, 라벨링된 데이터는 객체의 종류를 라벨링한 데이터일 수 있다. 지도 학습에 주어지는 입력값과 출력값 세트를 훈련 데이터(Training Data)라고 한다. 즉, 상술한 '객체에 대한 영상 데이터'와 '라벨링된 데이터'는 각각 입력값과 출력값으로서, 객체 추측 모델의 지도 학습을 위한 훈련 데이터로 사용될 수 있다.The object guessing model may be supervised and learned by the object guessing model learning unit using 'image data for an object' and 'labeled data for an object recognized in the image data'. At this time, supervised learning means learning to find an output value according to a given input value by using data with input values and corresponding output values as learning data, and means learning that takes place in a state where the correct answer is known. For example, the labeled data may be data labeling the type of object. The set of inputs and outputs given to supervised learning is called training data. That is, the above-described 'image data for an object' and 'labeled data' are input values and output values, respectively, and may be used as training data for supervised learning of an object estimation model.

다시 말해서, 메타버스 서비스 제공부(105)는 미리 지도학습(supervised learning)된 객체 추측 모델을 이용하여 상기 객체의 종류를 결정할 수 있다. 메타버스 서비스 제공부(105)는 지도학습된 상기 객체 추측 모델에 상기 영상 데이터를 미리 설정된 크기의 입력 이미지로 변환하여 상기 객체 추측 모델에 입력할 수 있다. 메타버스 서비스 제공부(105)는 상기 객체 추측 모델의 출력에 기초하여 영상 데이터에 포함된 객체의 종류를 결정할 수 있다.In other words, the metaverse service provider 105 may determine the type of the object by using an object estimation model that has been supervised learning in advance. The metaverse service provider 105 may convert the image data into an input image of a preset size in the supervised object estimation model and input the image data to the object estimation model. The metaverse service provider 105 may determine the type of object included in the image data based on the output of the object estimation model.

메타버스 서비스 제공부(105)는 결정된 객체의 종류에 따라 상기 메타버스 공간에 상기 객체에 대응하는 가상 객체를 생성할 수 있다. 예를 들어, 메타버스 서비스 제공부(105)는 식별된 객체의 종류가 사람인 경우, 사람에 대응하는 가상 아바타를 생성할 수 있다. 메타버스 서비스 제공부(105)는 식별된 객체의 종류가 의자인 경우, 의자에 대응하는 가상 의자를 생성할 수 있다.The metaverse service provider 105 may create a virtual object corresponding to the object in the metaverse space according to the determined object type. For example, if the identified object type is a person, the metaverse service provider 105 may create a virtual avatar corresponding to the person. When the identified object type is a chair, the metaverse service provider 105 may create a virtual chair corresponding to the chair.

가상 모델 기반 광고 수행부(104)는 생성된 메타버스 공간, 생성된 아바타, 기타 객체에 기반하여 광고 내지 마케팅을 홍보할 내용물을 생성할 수 있으며, 생성된 내용물에 기반하여 광고를 수행할 수 있다.The virtual model-based advertisement execution unit 104 may generate contents to promote advertisements or marketing based on the created metaverse space, created avatars, and other objects, and may perform advertisements based on the created contents. .

채팅 서비스 제공부(106)는 클라이언트 단말(200) 및 사용자 단말(300)에 채팅 서비스를 제공하는 웹페이지 내지 어플리케이션 정보를 제공할 수 있다. 클라이언트 내지 사용자는 클라이언트 단말(200) 및 사용자 단말(300)을 통해 채팅 서비스를 제공하는 페이지에 접속할 수 있다.The chat service providing unit 106 may provide web page or application information for providing a chat service to the client terminal 200 and the user terminal 300 . A client or user may access a page providing a chatting service through the client terminal 200 and the user terminal 300 .

채팅 서비스 제공부(106)는 클라이언트 내지 사용자에게 채팅 서비스를 제공하기 위하여, 가상 모델에 대응하는 인공지능 모델을 학습시킬 수 있다. 채팅 서비스 제공부(106)는 가상 모델마다 각각 채팅 분야를 설정하고, 설정된 채팅 분야에 대하여 인공지능 모델을 학습시킬 수 있다. 이때, 클라이언트 단말(200) 및 사용자 단말(300)은 자신의 통화정보나, 나이나 성별, 텍스트로 대화한 정보 등을 채팅 서비스 제공부(106)로 제공하거나 해당 정보를 엑세스할 수 있는 권한을 채팅 서비스 제공부(106)에 제공할 수 있다. 이에 따라, 채팅 서비스 제공부(106)는 클라이언트 단말(200) 및 사용자 단말(300)에서 발생하는 음성통화를 통하여 사용자의 대화패턴을 학습하고, 텍스트 메세지 송수신을 통하여 텍스트 송수신 패턴을 학습할 수 있으며, 이를 인공지능 모델의 학습에 적용할 수 있다.The chat service providing unit 106 may learn an artificial intelligence model corresponding to the virtual model in order to provide a chat service to clients or users. The chat service provider 106 may set a chatting field for each virtual model and train an artificial intelligence model for the set chatting field. At this time, the client terminal 200 and the user terminal 300 provide their own call information, age, gender, text conversation information, etc. to the chat service provider 106, or give permission to access the information It can be provided to the chat service provider 106. Accordingly, the chat service provider 106 can learn a conversation pattern of a user through voice calls generated by the client terminal 200 and the user terminal 300, and learn a text transmission/reception pattern through text message transmission and reception. , it can be applied to the learning of artificial intelligence models.

채팅 서비스 제공부(106)는 자연어 처리 기능을 이용하여 사용자와 대화한 대화 정보에 대하여 토픽 모델링 알고리즘을 이용하여 토픽을 추출할 수 있으며, 토픽 클러스터링(군집화)를 통해 토픽 분류를 설정할 수 있으며, 설정된 토픽 분류에 따라 사용자와의 대화 정보에 기반한 증강 정보(augmented information)를 생성하고, 생성된 증강 정보를 포함하는 학습 데이터를 이용하여 상기 인공지능 모델을 재학습할 수 있다.The chat service provider 106 may extract a topic using a topic modeling algorithm with respect to conversation information of a conversation with a user using a natural language processing function, and may set topic classification through topic clustering (clustering). According to topic classification, augmented information based on conversation information with a user may be generated, and the artificial intelligence model may be re-learned using learning data including the generated augmented information.

이때, 대화형 인터랙션의 이론적인 근거는 언어/행위 관점(Language/Action Perspective) 연구가 가장 대표적인 데, 언어적 의사소통의 과정을 정보 시스템 설계에 도입하기 위하여 CfA(Conversation for Action) 모델을 적용할 수 있으나, 이에 한정되지 않는다. CfA 모델에 기초하면 언어는 인간의 모든 협업 행위에서 가장 근본적인 요인이며, 이러한 언어-행위 관점이 모든 CSCW (Computer-Supported Cooperative Work) 시스템 개발에서 매우 중요한 역할을 수행한다. 언어-행위 관점에서 초점을 두는 것은 언어의 의미와 사용이 실제 업무를 수행하는 형태, 즉 대화의 구조이다. 대화 구조의 기본 요소는 요청(Request)와 응답(Response)인데, 대화 참여자 중 한 편이 상대편에게 요청을 하면, 상대편은 일련의 차후 행위를 예상하고 공감, 수락, 거부, 또는 수정제안의 형태로 응답하게 된다. 이 과정은 순환적으로 진행되면서 대화 참여자간에 상호이해가 형성되며 이에 기반하여 의미 있는 협업 행위가 발생하게 된다는 것이다. 이를 위하여, 사람과 기기 간에 이루어지는 대화의 특성을 관찰하고 시사점을 도출하기 위한 실험과, 실험의 입력 데이터가 요구되는데, 이는 별도로 사용자가 제공하는 것도 포함하지만, 클라이언트 단말(200) 및 사용자 단말(300)로 수신되는 호(Call) 또는 발신되는 호에서 주고받는 대화를 백그라운드 모드로 가상 모델 기반 광고 플랫폼 서버(100)로 스트리밍하여 입력값을 제공할 수도 있고, 클라이언트 단말(200) 및 사용자 단말(300)에 설치된 적어도 하나의 어플리케이션 내지 메신저에서 사용자가 입력하는 값과 반응하는 값을 제공할 수도 있다.At this time, the language/action perspective study is the most representative of the theoretical basis for conversational interaction, and the CfA (Conversation for Action) model can be applied to introduce the process of linguistic communication into information system design. may, but is not limited thereto. Based on the CfA model, language is the most fundamental factor in all human cooperative behaviors, and this language-action perspective plays a very important role in the development of all CSCW (Computer-Supported Cooperative Work) systems. The focus from the language-action perspective is the structure of dialogue, the form in which the meaning and use of language accomplishes real tasks. The basic elements of the dialogue structure are request and response. When one of the conversation participants makes a request to the other party, the other party anticipates a series of subsequent actions and responds in the form of sympathy, acceptance, rejection, or amendment proposal. will do As this process proceeds in a circular fashion, mutual understanding is formed among the participants in the conversation, and based on this, meaningful collaborative actions occur. To this end, an experiment for observing the characteristics of a conversation between a person and a device and deriving implications and input data of the experiment are required, which include those separately provided by the user, but the client terminal 200 and the user terminal 300 An input value may be provided by streaming a call received in ) or a conversation exchanged in an outgoing call to the virtual model-based advertising platform server 100 in a background mode, and the client terminal 200 and the user terminal 300 ) may provide a value that reacts to a value input by a user in at least one application or messenger installed in the .

채팅 서비스 제공부(106)는 클라이언트 단말(200) 및 사용자 단말(300)에서 단순히 텍스트 기반의 채팅이 아니라, 화상 기반의 채팅 서비스도 제공하며, 클라이언트 내지 사용자가 화상 채팅 서비스를 선택하는 경우, 가상 모델의 표정을 매핑시킬 실제 인플루언서를 선택할 수 있는 인터페이스를 제공할 수 있다. 채팅 서비스 제공부(106)는 선택된 실제 인플루언서의 실사 모델링 데이터, 음성 복제 데이터, 및 얼굴 표정 변화 데이터를 로딩할 수 있다. 여기서, 실제 인플루언서의 실사 모델링 데이터는 감정 분류에 따라 영상이 별도로 촬영될 수도 있고, 하나의 얼굴 표정에 워핑(warping) 기법으로 영상처리하여 영상의 형태(얼굴의 형태)를 변형시킴으로써 얼굴표정을 다분화할 수도 있다. 전자의 경우에는, 공감, 고민, 화남, 슬픔, 기쁨, 무표정 등의 감정분류변화에 따라 촬영 객체(실제 인플루언서)을 촬영하고, 이를 메타 데이터나 태그를 붙여 분류한 후 학습시키는 방법을 이용할 수 있다. 후자의 경우에는, 픽셀 위치와 이동 정보를 기하학적 처리를 통하여 표정변화를 주고, 변화된 표정이 포함된 영상을 분류하여 데이터베이스화할 수 있다.The chat service providing unit 106 provides not only text-based chatting but also video-based chatting services in the client terminal 200 and the user terminal 300, and when the client or user selects the video chatting service, the virtual chatting service is provided. You can provide an interface to select real influencers to map the model's expression to. The chat service provider 106 may load live action modeling data, voice replication data, and facial expression change data of the selected real influencer. Here, the actual influencer's live-action modeling data may be separately filmed according to emotion classification, or image processing of one facial expression with a warping technique to transform the shape of the image (face shape) to create a facial expression. can be diversified. In the case of the former, a method of photographing a shooting object (actual influencer) according to emotion classification changes such as sympathy, worry, anger, sadness, joy, and expressionless, classifying it with meta data or tags, and then learning it is used. can In the latter case, a facial expression change may be given to pixel location and movement information through geometric processing, and images including the changed facial expression may be classified and stored in a database.

채팅 서비스 제공부(106)는 실사를 이용하여 모델링된 실제 인플루언서(실제 인플루언서)의 감정에 따라 실시간으로 변하는 얼굴표정변화를 줄 수 있고, 워핑은 입력영상과 출력영상이 있을 때 두 영상 사이에 서로 대응되어야 할 위치를 제어선으로 기술한 후 제어선과 픽셀의 기하학적 관계를 계산하여 최종적으로 이동시킬 수 있다. 이러한 워핑 과정을 여러 프레임에 걸쳐 수행한다면 입력 영상으로부터 출력 영상까지의 변환 과정을 세분화시킬 수 있는데 원하는 장면만큼 중간 프레임의 제어선을 보간하며 매 프레임이 변환될 때마다 워핑의 과정을 반복하게 될 수 있다. 또한, 채팅 서비스 제공부(106)는 미리 감정에 따른 표정의 제어선을 기술해 놓는다면 입력되는 감정의 가중치만큼 제어선을 변화시켜 실제 인플루언서의 표정을 변화시키는 데에 이용할 수 있다. 이 외에도, 채팅 서비스 제공부(106)는 현재 입력되는 표정에 따라 실제 인플루언서의 표정, 또는 아바타의 표정이 정해져서 바뀌는 표정 인식 관련 연구나 해부학적인 인간의 열굴 표정을 토대로 사실적인 얼굴 표정 변화를 만들어내는 방법이 이용될 수도 있지만 상술한 방법들에 한정되지 않고 얼굴 표정을 세부적으로 분류할 수 있도록 변경하는 방법이라면 어느 것이든 사용가능하다. 또한, 감정 적응형 표정 변환 모델을 이용할 수도 있는데, 일반적 워핑 기법에서와 같이 입력 영상에서 미리 정해진 제어선과 각 감정에 맞는 표정의 제어선을 가지고 있다면 실제 인플루언서의 감정 상태에 따라 각 감정에 맞는 제어선이 선택된다. 그리고 이 제어선을 통한 프레임 보간 과정은 감정의 가 중치에 따라 처리할 수 있고, 매 프레임의 실제 인플루언서에 설정된 감정 상태에 따라 가중치만큼 변화되는 표정을 확인할 수 있다.The chat service provider 106 can give a facial expression change that changes in real time according to the emotions of the actual influencer (real influencer) modeled using live action, and warping is performed when there is an input image and an output image. Positions to be corresponded between images are described with control lines, and then the geometric relationship between the control lines and pixels is calculated to finally move them. If this warping process is performed over several frames, the conversion process from the input video to the output video can be subdivided. The control line of the intermediate frame is interpolated as much as the desired scene, and the warping process can be repeated whenever each frame is converted. there is. In addition, if the chat service provider 106 describes the control line of the expression according to the emotion in advance, it can be used to change the expression of the actual influencer by changing the control line as much as the weight of the input emotion. In addition to this, the chat service provider 106 calculates realistic facial expression changes based on research related to facial expression recognition or anatomical human facial expression in which the facial expression of the actual influencer or the avatar is determined and changed according to the currently input facial expression. A generating method may be used, but it is not limited to the above-described methods, and any method may be used as long as it is modified to classify facial expressions in detail. In addition, an emotion-adaptive facial expression conversion model can be used. As in the general warping technique, if the input image has a predetermined control line and a control line of a facial expression suitable for each emotion, it is suitable for each emotion according to the emotional state of the actual influencer. A control line is selected. In addition, the frame interpolation process through this control line can be processed according to the weight of emotion, and the expression that changes by the weight according to the emotional state set in the actual influencer of each frame can be checked.

이를 위하여, 입력되는 실사 실제 인플루언서의 기본 제어선은 이미 설정되어 있고, 그에 맞는 표정들의 제어선이 정해져 있다면 실시간으로 실제 인플루언서의 새로운 감정 변화에 대응하는 제어선이 선택되고, 가중치만큼 변 화되어야 한다. 감정에 따른 얼굴 표정 근육의 변화는 P.Ekman의 얼굴 심리학에 의거하여 운동(표정) 심리학, 기초 해부학에 따른 인간의 표정 변화에 사용되는 근육을 지정하고, 이를 데이터베이스화하여 선택되는 제어선에 따라 감정 변화 가중치만큼 출력 제어선의 변화량을 조절할 수 있다.To this end, if the basic control line of the live-action actual influencer input is already set, and if the control line of the corresponding expressions is determined, the control line corresponding to the new emotional change of the actual influencer is selected in real time, and the weight must change Changes in facial expression muscles according to emotions are based on P.Ekman's facial psychology, designating the muscles used for human facial expression changes according to exercise (expression) psychology and basic anatomy, and organizing them into a database. According to the control line selected The change amount of the output control line may be adjusted by the emotion change weight.

이를 위하여, 매 프레임의 출력되는 영상내의 모든 픽셀들은 정해져 있는 모든 제어선의 영향을 받으며 입력 영상의 대응되는 픽셀 값을 복사해 오고, 이미지의 가로방향 세로방향으로 영상내의 모든 픽셀들을 탐색하며 그에 대응되는 값을 찾아오는 계산은 데이터 병렬 처리할 수 있다.To this end, all pixels in the output image of each frame are affected by all predetermined control lines, copy the corresponding pixel values of the input image, search all pixels in the image in the horizontal and vertical directions of the image, and Calculations to retrieve values can be processed in data parallelism.

채팅 서비스 제공부(106)는 클라이언트 단말(200) 및 사용자 단말(300)에서 음성이 입력된 경우, 입력된 음성을 자연어 처리 알고리즘을 통하여 분석한 후, 입력된 음성의 응답 텍스트와 얼굴 표정을 결정할 수 있다. 채팅 서비스 제공부(106)는, 클라이언트 단말(200) 및 사용자 단말(300)에서 음성이 입력된 경우, 입력된 음성을 자연어 처리 알고리즘을 통하여 분석한 후, 입력된 음성의 응답 텍스트와 얼굴 표정을 결정할 때, 입력된 음성 신호로부터 감정을 인식하여 특징을 추출하고, 추출된 특징을 이용하여 패턴을 인식할 수 있다. 이때, 감정인식의 특징은 피치, 에너지, 포만트, 및 말의 빠르기 중 어느 하나 또는 적어도 하나의 조합으로 추출되고, 감정인식은 어쿠스틱 특징(acoustic feature) 중 피치의 통계치, 소리의 크기, 섹션 개수, IR(Increasing Rate), 및 CR(Crossing Rate) 중 어느 하나 또는 적어도 하나의 조합의 특징을 인공신경망에 적용할 수 있다.When voice is input from the client terminal 200 and the user terminal 300, the chat service provider 106 analyzes the input voice through a natural language processing algorithm and then determines the response text and facial expression of the input voice. can When voice is input from the client terminal 200 and the user terminal 300, the chat service provider 106 analyzes the input voice through a natural language processing algorithm, and then converts the response text and facial expression of the input voice. When making a decision, emotions can be recognized from the input voice signal to extract features, and patterns can be recognized using the extracted features. At this time, the feature of emotion recognition is extracted as any one or a combination of at least one of pitch, energy, formant, and speed of speech, and emotion recognition is a statistical value of pitch, loudness, and number of sections among acoustic features. , IR (Increasing Rate), and CR (Crossing Rate), any one or a combination of at least one feature may be applied to the artificial neural network.

이때, 자연어 처리(Natural Language Processing, NLP)란 인간이 발화하는 언어 현상을 기계적으로 분석해서 컴퓨터가 이해할 수 있는 형태로 만드는 자연 언어 이해 혹은 그러한 형태를 다시 인간이 이해할 수 있는 언어로 표현하는 제반 기술을 의미하며, 자연어 처리 방식으로는 전통적으로 규칙 기반 접근법, 통계기반 접근법이 있 고, 이 둘의 강점을 통합한 하이브리드 방식이 있으며, 인공신경망 방식이 있는데, 최근 들어 부상하고 있는 딥 러닝(Deep Learning)이 인공신경망 방식에 해당한다. 딥러닝을 이용한 방식은 입력 문장과 출력 문장을 하나의 쌍으로 두고, 가장 적합한 표현 및 번역 결과를 찾는 방식이다.At this time, Natural Language Processing (NLP) is a natural language understanding that mechanically analyzes language phenomena spoken by humans and converts them into a form that computers can understand, or various technologies that express such forms in a language that humans can understand. As for natural language processing methods, there are traditionally rule-based and statistical-based approaches, hybrid methods that integrate the strengths of the two, and artificial neural networks, which have recently emerged. ) corresponds to the artificial neural network method. The method using deep learning is a method of finding the most suitable expression and translation result by putting an input sentence and an output sentence as a pair.

일 실시 예에서, 채팅 서비스 제공부(106)는 자연어를 처리하는 것뿐만 아니라, 자연어로부터 감정을 분석해야 하는데, 감정분석을 위하여 감정 어휘 사전을 사용할 수 있고, 단어의 극성(즉, 긍정, 부정, 중립)을 추출하는 데에 어 휘사전 및 반지도 학습(semi-supervised learning) 알고리즘과 무작위 행보 과정을 통해 긍정, 부정, 중립으로 나누어지는 단어의 극성을 수치로 부여한 어휘 사전을 이용할 수 있다.In one embodiment, the chat service provider 106 should not only process natural language, but also analyze emotions from natural language. For emotion analysis, an emotion vocabulary may be used, and the polarity of words (i.e., positive, negative) , Neutral), it is possible to use a vocabulary dictionary, a semi-supervised learning algorithm, and a vocabulary dictionary in which the polarity of words divided into positive, negative, and neutral values is assigned numerically through a semi-supervised learning algorithm and a random walking process.

채팅 서비스 제공부(106)는 클라이언트 단말(200) 및 사용자 단말(300)에서 음성이 입력된 경우, 입력된 음성을 자연어 처리 알고리즘을 통하여 분석한 후, 입력된 음성의 응답 텍스트와 얼굴 표정을 결정할 때, 클라이언트 단말(200) 및 사용자 단말(300)의 얼굴 표정 데이터를 입력받는 경우, 입력된 얼굴 표정 데이터인 다차원 특징 벡터 데이터를 이용하여 얼굴 표정 데이터로부터 감정을 인식할 수 있다. 이때, 다차원 특징 벡터 데이터를 광학적 흐름 분석법, 홀리스틱 분석법, 및 국부적인 표현 분석법 중 어느 하나 또는 적어도 하나의 조합의 분석으로 감정을 인식하고, 홀리스틱 분석은 PCA 방법에 기반하여 특 징을 추출하고 최소거리 분류 방법을 이용하여 감정을 인식하는 방법일 수 있으나, 상술한 방법에 한정되지는 않는다.When voice is input from the client terminal 200 and the user terminal 300, the chat service provider 106 analyzes the input voice through a natural language processing algorithm and then determines the response text and facial expression of the input voice. At this time, when receiving facial expression data of the client terminal 200 and the user terminal 300, emotions can be recognized from the facial expression data using multidimensional feature vector data that is the input facial expression data. At this time, the multi-dimensional feature vector data is analyzed by any one or a combination of at least one of optical flow analysis, holistic analysis, and local expression analysis to recognize emotions, and holistic analysis extracts features based on the PCA method and It may be a method of recognizing emotions using a classification method, but is not limited to the above method.

채팅 서비스 제공부(106)는, 결정된 응답 텍스트를 얼굴 표정을 통하여 가상 모델이 발화하도록 제어할 수 있다. 채팅 서비스 제공부(106)에서 결정된 응답 텍스트를 얼굴 표정을 통하여 가상 모델이 발화하도록 제어할 때, 결정된 얼굴 표정에 대응하는 정면 및 측면의 직교하는 복수의 2차원 또는 3차원의 기 저장된 얼굴 영상을 추출하고, 추출된 얼굴 영상에 포함된 적어도 하나의 특징점을 추출하여 가상 모델의 얼굴을 변형하고, 변형된 얼굴을 가진 가상 모델의 위치, 크기, 표정 및 회전 정보를 반영하여 합성할 수 있다. 채팅 서비스 제공부(106)는 결정된 응답 텍스트를 얼굴 표정을 통하여 가상 모델이가 발화하도록 제어할 때, 결정된 얼굴 표정에 대응하는 표정을 메타데이터로 가진 가상 모델을를 검색하고, 검색된 표정을 가진 가상 모델이가 결정된 응답 텍스트를 발화하도록 합성할 수 있다.The chat service provider 106 may control the virtual model to utter the determined response text through facial expressions. When the chat service provider 106 controls the virtual model to utter the determined response text through facial expressions, a plurality of orthogonal 2-dimensional or 3-dimensional face images corresponding to the determined facial expressions are generated from the front and sides. The face of the virtual model may be transformed by extracting at least one feature point included in the extracted face image, and the position, size, facial expression, and rotation information of the virtual model having the deformed face may be reflected and synthesized. When the chat service provider 106 controls the virtual model to utter the determined response text through a facial expression, it searches for a virtual model having a facial expression corresponding to the determined facial expression as metadata, and the virtual model having the retrieved facial expression. It can synthesize the determined response text to utter it.

채팅 서비스 제공부(106)는 사용자 데이터를 학습 데이터로 획득할 수 있다. 학습 데이터는 채팅 서비스 제공부(106)에 의하여 수집 또는 테스트한 데이터가 이용될 수도 있다. 또는, 학습 데이터는 본 개시에 따른 마이크를 통해 사용자가 발화한 자연어로부터 생성된 음성 데이터를 포함할 수 있다. 또는, 학습 데이터는 카메라를 통해 촬영된 사용자의 움직임 데이터를 포함할 수 있다. 또는, 학습 데이터는 다양한 센서를 통해 감지된 센싱 데이터를 포함할 수 있다. 예를 들어, 학습 데이터는 적외선 센서를 통해 감지된 사용자의 존재 유무에 대한 데이터를 포함하거나, 압력 센서를 통해 감지된 사용자와의 물리적인 접촉과 관련된 데이터를 포함하거나, 조도 센서 도는 습도 센서를 통해 감지된 주변 조도 또는 습 도 데이터를 포함할 수 있다.The chat service provider 106 may acquire user data as learning data. As the learning data, data collected or tested by the chat service provider 106 may be used. Alternatively, the learning data may include voice data generated from a natural language uttered by a user through a microphone according to the present disclosure. Alternatively, the learning data may include user motion data photographed through a camera. Alternatively, the learning data may include sensing data sensed through various sensors. For example, the learning data includes data on the presence or absence of a user detected through an infrared sensor, data related to physical contact with the user detected through a pressure sensor, or data related to a user's physical contact detected through a light sensor or humidity sensor. It may include the detected ambient light or humidity data.

채팅 서비스 제공부(106)는 데이터 인식 모델의 인식 결과를 향상시키거나, 데이터 인식 모델의 생성에 필요한 자원 또는 시간을 절약하기 위하여, 전처리부 및 학습 데이터 선택부를 더 포함할 수도 있다.The chat service providing unit 106 may further include a pre-processing unit and a learning data selection unit in order to improve the recognition result of the data recognition model or to save resources or time required for generating the data recognition model.

전처리부는 데이터 관리부(101)에서 획득된 데이터를 전처리할 수 있다. 예를 들어, 전처리부는 모델 학습부가 데이터 인식 모델의 학습을 위한 데이터의 이용이 용이하도록, 획득된 데이터를 기 정의된 포맷으로 가공할 수 있다. 예를 들어, 전처리부는 데이터 관리부(101)에 의해 획득된 음성 데이터를 텍스트 데이터로 가공할 수 있으며, 영상 데이터를 기 설정된 포맷의 영상 데이터로 가공할 수 있다. 전처리된 데이터는 학습 데이터로서 후술할 모델 학습부에게 제공될 수 있다.The pre-processing unit may pre-process data obtained from the data management unit 101 . For example, the pre-processing unit may process the acquired data into a predefined format so that the model learning unit can easily use the data for learning the data recognition model. For example, the pre-processing unit may process audio data acquired by the data management unit 101 into text data, and process video data into video data in a preset format. The preprocessed data may be provided to a model learning unit to be described later as training data.

또한, 학습 데이터 선택부가 전처리된 데이터 중에서 학습에 필요한 학습 데이터를 선별적으로 선택할 수 있다. 선택된 학습 데이터는 모델 학습부에 제공될 수 있다. 학습 데이터 선택부는 기 설정된 선별 기준에 따라, 전처리된 데이터 중에서 학습에 필요한 학습 데이터를 선별할 수 있다. 또한, 학습 데이터 선택부는 모델 학습부에 의한 학습에 의해 기 설정된 선별 기준에 따라 학습에 필요한 학습 데이 터를 선별할 수도 있다. 본 개시의 일 실시예로, 학습 데이터 선택부는 입력된 음성 데이터 중 특정 사용자가 발화한 음성 데이터만을 선택할 수 있으며, 영상 데이터 중 배경을 제외한 사람이 포함된 영역만을 선택할 수 있다In addition, the learning data selector may selectively select learning data necessary for learning from among the preprocessed data. The selected learning data may be provided to the model learning unit. The learning data selection unit may select learning data necessary for learning from preprocessed data according to a predetermined selection criterion. In addition, the learning data selection unit may select learning data necessary for learning according to a selection criterion set by learning by the model learning unit. As an embodiment of the present disclosure, the learning data selector may select only audio data uttered by a specific user from among input audio data, and may select only an area including a person excluding the background from image data.

모델 학습부는 클러스터링 또는 가상 모델의 반응 결정에 이용되는 데이터 인식 모델을 학습 데이터를 이용하여 학습시킬 수 있다. 예를 들어, 모델 학습부는 학습 데이터 중 적어도 일부를 판단 기준으로 이용하는 지도 학습(supervised learning)을 통하여, 데이터 인식 모델을 학습시킬 수 있다. 또는, 모델 학습부는, 예를 들어, 별다른 지도 없이 학습 데이터를 이용하여 스스로 학습함으로써, 상황의 판단을 위한 판단 기준을 발견하는 비지도 학습(unsupervised learning)을 통하여, 데이터 인식 모델을 학습시킬 수 있다.The model learning unit may train a data recognition model used for clustering or determining a response of a virtual model using training data. For example, the model learning unit may train a data recognition model through supervised learning using at least some of the learning data as a criterion. Alternatively, the model learning unit may learn a data recognition model through, for example, unsupervised learning in which a criterion for determining a situation is discovered by self-learning using learning data without any guidance. .

또한, 모델 학습부는 클러스터링 또는 가상 모델의 반응 결정을 위하여 어떤 학습 데이터를 이용해야 하는지에 대한 선별 기준을 학습할 수도 있다.In addition, the model learning unit may learn a selection criterion for which learning data to use for clustering or determining the response of the virtual model.

데이터 인식 모델은, 인식 모델의 적용 분야, 학습의 목적 또는 장치의 성능 등을 고려하여 구축될 수 있다. 데이터 인식 모델은, 예를 들어, 신경망(Neural Network)을 기반으로 하는 모델일 수 있다. 데이터 인식 모델은 인간의 뇌 구조를 컴퓨터 상에서 모의하도록 설계될 수 있다. 데이터 인식 모델은 인간의 신경망의 뉴런 (neuron)을 모의하는, 가중치를 가지는 복수의 네트워크 노드(node)를 포함할 수 있다. 복수의 네트워크 노드는 뉴런이 시냅스(synapse)를 통하여 신호를 주고받는 시냅틱(synaptic) 활동을 모의하도록 각각 연결 관계를 형성할 수 있다. 데이터 인식 모델은, 일 예로, 신경망 모델, 또는 신경망 모델에서 발전한 딥 러닝 모델을 포함할 수 있다. 딥 러닝 모델에서 복수의 네트워크 노드들은 서로 다른 깊이(또는, 레이어)에 위치하면서 컨볼루션(convolution) 연결 관계에 따라 데이터를 주고받을 수 있다. 예컨대, DNN(Deep Neural Network), RNN(Recurrent Neural Network), BRDNN(Bidirectional Recurrent Deep Neural Network)과 같은 모델이 데이터 인식 모델로서 사용될 수 있으나, 이에 한정되지 않을 수 있다.The data recognition model may be constructed in consideration of the field of application of the recognition model, the purpose of learning, or the performance of a device. The data recognition model may be, for example, a model based on a neural network. A data recognition model can be designed to simulate the structure of the human brain on a computer. The data recognition model may include a plurality of network nodes having weights that simulate neurons of a human neural network. A plurality of network nodes may each form a connection relationship to simulate a synaptic activity in which neurons exchange signals through synapses. The data recognition model may include, for example, a neural network model or a deep learning model developed from a neural network model. In the deep learning model, a plurality of network nodes may exchange data according to a convolution connection relationship while being located at different depths (or layers). For example, a model such as a deep neural network (DNN), a recurrent neural network (RNN), or a bidirectional recurrent deep neural network (BRDNN) may be used as a data recognition model, but may not be limited thereto.

도 6은 도 1에 따른 서버(100)의 하드웨어 구성을 나타낸 도면이다.FIG. 6 is a diagram showing a hardware configuration of the server 100 according to FIG. 1 .

도 6을 참조하면, 서버(100)는 적어도 하나의 프로세서(110) 및 상기 적어도 하나의 프로세서(110)가 적어도 하나의 동작(operation)을 수행하도록 지시하는 명령어들(instructions)을 저장하는 메모리(memory)를 포함할 수 있다.Referring to FIG. 6, the server 100 includes at least one processor 110 and a memory for storing instructions instructing the at least one processor 110 to perform at least one operation ( memory) may be included.

상기 적어도 하나의 동작은, 전술한 서버(100)의 동작이나 기능 중 적어도 일부를 포함하고 명령어들 형태로 구현되어 프로세서(110)에 의하여 수행될 수 있다.The at least one operation may include at least some of the above-described operations or functions of the server 100 and may be implemented in the form of instructions and performed by the processor 110 .

여기서 적어도 하나의 프로세서(110)는 중앙 처리 장치(central processing unit, CPU), 그래픽 처리 장치(graphics processing unit, GPU), 또는 본 발명의 실시예들에 따른 방법들이 수행되는 전용의 프로세서를 의미할 수 있다. 메모리(120) 및 저장 장치(160) 각각은 휘발성 저장 매체 및 비휘발성 저장 매체 중에서 적어도 하나로 구성될 수 있다. 예를 들어, 메모리(120)는 읽기 전용 메모리(read only memory, ROM) 및 랜덤 액세스 메모리(random access memory, RAM) 중 하나일 수 있고, 저장 장치(160)는, 플래시메모리(flash-memory), 하드디스크 드라이브(HDD), 솔리드 스테이트 드라이브(SSD), 또는 각종 메모리 카드(예를 들어, micro SD 카드) 등일 수 있다.Here, the at least one processor 110 may mean a central processing unit (CPU), a graphics processing unit (GPU), or a dedicated processor for performing methods according to embodiments of the present invention. can Each of the memory 120 and the storage device 160 may include at least one of a volatile storage medium and a non-volatile storage medium. For example, the memory 120 may be one of a read only memory (ROM) and a random access memory (RAM), and the storage device 160 may be a flash-memory. , a hard disk drive (HDD), a solid state drive (SSD), or various memory cards (eg, a micro SD card).

또한, 서버(100)는 무선 네트워크를 통해 통신을 수행하는 송수신 장치(transceiver)(130)를 포함할 수 있다. 또한, 서버(100)는 입력 인터페이스 장치(140), 출력 인터페이스 장치(150), 저장 장치(160) 등을 더 포함할 수 있다. 서버(100)에 포함된 각각의 구성 요소들은 버스(bus)(170)에 의해 연결되어 서로 통신을 수행할 수 있다. 도 6에서는 서버(100)를 예로 들어 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 복수 개의 클라이언트 단말들은 도 6에 따른 구성요소를 포함할 수 있다.In addition, the server 100 may include a transceiver 130 that performs communication through a wireless network. In addition, the server 100 may further include an input interface device 140, an output interface device 150, a storage device 160, and the like. Each component included in the server 100 may be connected by a bus 170 to communicate with each other. In FIG. 6, the server 100 has been described as an example, but is not limited thereto. For example, a plurality of client terminals may include a component according to FIG. 6 .

도 7은 본 발명의 일 실시예에 따른 통신 과정에서 적용될 수 있는 무선 통신 시스템을 나타낸 도면이다. 도 8은 도 7에 따른 무선 통신 시스템에서 기지국을 나타낸 도면이다. 도 9는 도 7에 따른 무선 통신 시스템에서 단말을 나타낸 도면이다. 도 10은 도 7에 따른 무선 통신 시스템에서 통신 인터페이스를 나타낸 도면이다.7 is a diagram illustrating a wireless communication system that can be applied in a communication process according to an embodiment of the present invention. 8 is a diagram illustrating a base station in the wireless communication system according to FIG. 7 . 9 is a diagram illustrating a terminal in the wireless communication system according to FIG. 7 . 10 is a diagram illustrating a communication interface in the wireless communication system according to FIG. 7 .

이하에서는 본 발명에 따라 가상 모델 기반 광고 플랫폼 서버(100)와 단말들(201, 202, 203, 204) 사이의 통신을 지원하는 무선 통신 네트워크 시스템의 일례를 구체적으로 예를 들어 설명한다. 다음 설명에서, 제1 노드(장치)는 앵커/도너 노드 또는 앵커/도너 노드의 CU(centralized unit) 일 수 있고, 제2 노드(장치)는 앵커/도너 노드 또는 릴레이 노드의 DU(distributed unit) 일 수 있다.Hereinafter, an example of a wireless communication network system supporting communication between the virtual model-based advertising platform server 100 and the terminals 201, 202, 203, and 204 according to the present invention will be described in detail as an example. In the following description, a first node (device) may be an anchor/donor node or a centralized unit (CU) of an anchor/donor node, and a second node (device) may be an anchor/donor node or a distributed unit (DU) of a relay node can be

무선 통신 시스템에서 무선 채널을 사용하는 노드의 일부로 기지국(base station, BS), 단말, 서버 등이 포함될 수 있다.A base station (BS), terminal, server, etc. may be included as a part of a node using a radio channel in a wireless communication system.

기지국은 단말 및 단말에 무선 액세스를 제공하는 네트워크 인프라이다. 기지국은 신호가 전송될 수 있는 거리에 따라 소정의 지리적 영역으로 정의된 커버리지를 갖는다.A base station is a terminal and a network infrastructure that provides wireless access to terminals. A base station has a coverage defined as a predetermined geographic area according to a distance over which a signal can be transmitted.

기지국은 "기지국"과 마찬가지로 "액세스 포인트(access point, AP)", "이노드비(enodeb, eNB)", "5 세대(5th generation, 5G) 노드", "무선 포인트(wireless point)", "송/수신 포인트(transmission/reception point, TRP)" 지칭될 수 있다.A base station, like a "base station," is referred to as "access point (AP)", "enodeb (eNB)", "5th generation (5G) node", "wireless point", " It may be referred to as a transmission/reception point (TRP).

기지국, 단말 및 단말은 밀리미터 파(millimeter wave, mmWave) 대역(예: 28GHz, 30GHz, 38GHz, 60GHz)으로 무선 신호를 송수신할 수 있다. 이때, 채널 이득 향상을 위해 기지국, 단말 및 단말은 빔포밍을 수행할 수 있다. 빔포밍은 송신 빔포밍 및 수신 빔포밍을 포함할 수 있다. 즉, 기지국, 단말 및 단말은 송신 신호와 수신 신호에 지향성을 부여할 수 있다. 이를 위해 기지국, 단말 및 단말은 빔 탐색 절차 또는 빔 관리 절차를 통해 서빙 빔을 선택할 수 있다. 그 후, 통신은 서빙 빔을 운반하는 자원과 준 동일위치(quasi co-located) 관계에 있는 자원을 사용하여 수행될 수 있다.The base station, the terminal, and the terminal may transmit and receive wireless signals in a millimeter wave (mmWave) band (eg, 28 GHz, 30 GHz, 38 GHz, and 60 GHz). At this time, the base station, the terminal, and the terminal may perform beamforming to improve the channel gain. Beamforming may include transmit beamforming and receive beamforming. That is, the base station, the terminal, and the terminal can give directivity to the transmitted signal and the received signal. To this end, the base station, the terminal, and the terminal may select a serving beam through a beam search procedure or a beam management procedure. After that, communication may be performed using a resource carrying a serving beam and a resource having a quasi co-located relationship.

첫 번째 안테나 포트 및 두 번째 안테나 포트는 첫 번째 안테나 포트의 심볼이 전달되는 채널의 대규모 속성이 두 번째 안테나 포트의 심볼이 전달되는 채널에서 유추될 수 있는 경우 준 동일위치 위치에 있는 것으로 간주된다. 대규모 속성은 지연 확산, 도플러 확산, 도플러 시프트, 평균 이득, 평균 지연 및 공간 Rx 파라미터 중 하나 이상을 포함할 수 있다.A first antenna port and a second antenna port are considered quasi-colocated if the large-scale properties of the channel through which the symbol of the first antenna port carries can be inferred from the channel through which the symbol of the second antenna port carries. The large-scale properties may include one or more of delay spread, Doppler spread, Doppler shift, average gain, average delay, and spatial Rx parameters.

이하에서는 상술한 무선 통신 시스템에서 기지국을 예시한다. 이하에서 사용되는 "-모듈(module)", "-부(unit)"또는 "-er"라는 용어는 적어도 하나의 기능 또는 동작을 처리하는 유닛을 의미할 수 있으며, 하드웨어, 소프트웨어 또는 하드웨어와 소프트웨어의 조합으로 구현될 수 있다.Hereinafter, a base station in the wireless communication system described above is exemplified. The terms "-module", "-unit" or "-er" used below may mean a unit that processes at least one function or operation, and may include hardware, software, or both hardware and software. It can be implemented as a combination of

기지국은 무선 통신 인터페이스, 백홀 통신 인터페이스, 저장부(storage unit 및 컨트롤러을 포함할 수 있다.The base station may include a wireless communication interface, a backhaul communication interface, a storage unit and a controller.

무선 통신 인터페이스는 무선 채널을 통해 신호를 송수신하는 기능을 수행한다. 예를 들어, 무선 통신 인터페이스는 시스템의 물리 계층 표준에 따라 베이스 밴드 신호와 비트 스트림 간의 변환 기능을 수행할 수 있다. 예를 들어, 데이터 전송에서, 무선 통신 인터페이스은 전송 비트 스트림을 인코딩 및 변조하여 복합 심볼을 생성한다. 또한, 데이터 수신 시 무선 통신 인터페이스는 베이스 밴드 신호를 복조 및 디코딩하여 수신 비트 스트림을 재구성한다.The wireless communication interface performs a function of transmitting and receiving signals through a wireless channel. For example, the wireless communication interface may perform a conversion function between a baseband signal and a bit stream according to a physical layer standard of the system. For example, in data transmission, a radio communication interface encodes and modulates a transmitted bit stream to generate composite symbols. Also, upon receiving data, the wireless communication interface demodulates and decodes the baseband signal to reconstruct the received bit stream.

무선 통신 인터페이스는 무선 채널을 통해 신호를 송수신하는 기능을 수행한다. 예를 들어, 무선 통신 인터페이스은 시스템의 물리 계층 표준에 따라 베이스 밴드 신호와 비트 스트림 간의 변환 기능을 수행할 수 있다. 예를 들어, 데이터 전송에서, 무선 통신 인터페이스은 전송 비트 스트림을 인코딩 및 변조하여 복합 심볼을 생성한다. 또한, 데이터 수신 시 무선 통신 인터페이스은 베이스 밴드 신호를 복조 및 디코딩하여 수신 비트 스트림을 재구성한다.The wireless communication interface performs a function of transmitting and receiving signals through a wireless channel. For example, the wireless communication interface may perform a conversion function between a baseband signal and a bit stream according to a system physical layer standard. For example, in data transmission, a radio communication interface encodes and modulates a transmitted bit stream to generate composite symbols. Also, upon receiving data, the wireless communication interface demodulates and decodes the baseband signal to reconstruct the received bit stream.

또한, 무선 통신 인터페이스는 베이스 대역 신호를 RF(Radio Frequency) 대역 신호로 상향 변환하고, 변환된 신호를 안테나를 통해 전송한 후 안테나를 통해 수신된 RF 대역 신호를 베이스 대역 신호로 하향 변환한다. 이를 위해, 무선 통신 인터페이스은 송신 필터(transmission filter), 수신 필터(reception filter), 증폭기(amplifier), 믹서(mixer), 발진기(oscillator), 디지털-아날로그 컨버터(digital-to-analog convertor, DAC), 아날로그-디지털 컨버터(analog-to-digital convertor, ADC) 등을 포함할 수 있다. 또한, 무선 통신 인터페이스는 복수의 송수신 경로를 포함할 수 있다. 또한, 무선 통신 인터페이스는 복수의 안테나 요소를 포함하는 적어도 하나의 안테나 어레이를 포함할 수 있다.In addition, the wireless communication interface up-converts a baseband signal into a radio frequency (RF) band signal, transmits the converted signal through an antenna, and down-converts the RF band signal received through the antenna into a baseband signal. To this end, the wireless communication interface includes a transmission filter, a reception filter, an amplifier, a mixer, an oscillator, a digital-to-analog converter (DAC), An analog-to-digital converter (ADC) and the like may be included. Also, the wireless communication interface may include a plurality of transmit/receive paths. Additionally, the wireless communication interface may include at least one antenna array comprising a plurality of antenna elements.

하드웨어 측면에서 무선 통신 인터페이스는 디지털 유닛과 아날로그 유닛을 포함할 수 있고, 아날로그 유닛은 동작 전력, 동작 주파수 등에 따라 복수의 서브 유닛을 포함할 수 있다. 디지털 유닛은 적어도 하나의 프로세서(예를 들어, 디지털 신호 프로세서(digital signal processor, DSP))로 구현될 수 있다.In terms of hardware, the wireless communication interface may include a digital unit and an analog unit, and the analog unit may include a plurality of sub-units according to operating power, operating frequency, and the like. A digital unit may be implemented with at least one processor (eg, a digital signal processor (DSP)).

무선 통신 인터페이스는 전술한 바와 같이 신호를 송수신한다. 따라서, 무선 통신 인터페이스는 "송신기(transmitter)", "수신기(receiver)"또는 "트랜시버(transceiver)"로 지칭될 수 있다. 또한, 이하의 설명에서 무선 채널을 통해 수행되는 송수신은 전술한 바와 같이 무선 통신 인터페이스에서 수행되는 처리를 포함하는 의미로 사용될 수 있다.The wireless communication interface transmits and receives signals as described above. Accordingly, a wireless communication interface may be referred to as a “transmitter”, “receiver” or “transceiver”. In addition, in the following description, transmission and reception performed through a wireless channel may be used as a meaning including processing performed in a wireless communication interface as described above.

백홀 통신 인터페이스는 네트워크 내의 다른 노드와 통신을 수행하기위한 인터페이스를 제공한다. 즉, 백홀 통신 인터페이스는 다른 노드로 전송되는 비트 스트림을 변환하고, 예를 들어, 다른 액세스 노드, 다른 기지국, 상위 노드 또는 기지국으로부터의 코어 네트워크는 물리적 신호로, 다른 노드로부터 수신된 물리적 신호를 비트 스트림으로 변환한다.The backhaul communication interface provides an interface for communicating with other nodes in the network. That is, the backhaul communication interface converts the bit stream transmitted to other nodes, for example, other access nodes, other base stations, upper nodes or core networks from base stations into physical signals, and the physical signals received from other nodes into bits. convert to stream

저장부는 기본 프로그램, 어플리케이션, 기지국의 동작을 위한 설정 정보 등의 데이터를 저장한다. 저장부는 휘발성 메모리, 비 휘발성 메모리 또는 휘발성 메모리와 비 휘발성 메모리의 조합을 포함할 수 있다.The storage unit stores data such as basic programs, applications, and setting information for operation of the base station. The storage unit may include volatile memory, non-volatile memory, or a combination of volatile and non-volatile memory.

컨트롤러는 기지국의 전반적인 동작을 제어한다. 예를 들어, 컨트롤러는 무선 통신 인터페이스 또는 백홀 통신 인터페이스를 통해 신호를 송수신한다. 또한 컨트롤러는 저장부에 데이터를 기록하고 기록된 데이터를 읽는다. 컨트롤러는 통신 규격에서 요구하는 프로토콜 스택의 기능을 수행할 수 있다. 다른 구현에 따르면, 프로토콜 스택은 무선 통신 인터페이스에 포함될 수 있다. 이를 위해 컨트롤러는 적어도 하나의 프로세서를 포함할 수 있다.The controller controls the overall operation of the base station. For example, the controller transmits and receives signals through a wireless communication interface or a backhaul communication interface. Also, the controller writes data to the storage unit and reads the recorded data. The controller can perform protocol stack functions required by communication standards. According to another implementation, a protocol stack may be included in a wireless communication interface. To this end, the controller may include at least one processor.

일 실시 예에 따르면 컨트롤러는 본 발명의 실시 예에 따른 동작을 수행하도록 기지국을 제어할 수 있다.According to an embodiment, the controller may control the base station to perform an operation according to an embodiment of the present invention.

다양한 실시 예에 따르면, 무선 통신 시스템의 도너 노드는 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서에 동작 가능하게 결합된 트랜시버를 포함하고, 상기 릴레이 노드에 액세스하는 단말에 대한 복수의 라디오 베어러에 관한 상기 도너 노드와 관련된 제1 정보를 포함하는 제1 메시지를 릴레이 노드로 전송하도록 구성되고; 상기 릴레이 노드로부터 상기 단말에 대한 복수의 라디오 베어러에 관한 상기 릴레이 노드와 관련된 제2 정보를 포함하는 제2 메시지를 수신하고; 단말에 대한 데이터를 릴레이 노드로 전송할 수 있다. 데이터는 제1 정보 및 제2 정보에 기초하여 복수의 라디오 베어러를 통해 단말로 전송될 수 있다.According to various embodiments, a donor node of a wireless communication system includes at least one processor, includes a transceiver operably coupled to the at least one processor, and includes a plurality of radio bearers for a terminal accessing the relay node. configured to transmit to a relay node a first message including first information related to the donor node about; receive a second message including second information related to the relay node regarding a plurality of radio bearers for the terminal from the relay node; Data for the terminal may be transmitted to the relay node. Data may be transmitted to the terminal through a plurality of radio bearers based on the first information and the second information.

다양한 실시 예에 따르면, 복수의 라디오 베어러 중 라디오 베어러는 복수의 라디오 베어러를 통합시킬 수 있다. 적어도 하나의 프로세서는 또한 릴레이 노드에 액세스하는 단말에 대한 라디오 베어러 및 라디오 베어러에 의해 통합된 다중 라디오 베어러를 결정하도록 구성되고; 또는 릴레이 노드에 액세스하는 단말에 대한 라디오 베어러를 결정할 수 있다.According to various embodiments, a radio bearer among a plurality of radio bearers may integrate a plurality of radio bearers. the at least one processor is also configured to determine a radio bearer for a terminal accessing the relay node and multiple radio bearers aggregated by the radio bearer; Alternatively, a radio bearer for a UE accessing a relay node may be determined.

다양한 실시 예에 따르면, 제1 메시지는 다음 중 하나 이상을 포함할 수 있다: 릴레이 노드에 액세스하는 터미널의 식별; 릴레이 노드에 접속하는 단말의 종류를 나타내는 표시 정보; 릴레이 노드에 접속하는 단말의 라디오 베어러에 대한 정보; 릴레이 노드에 액세스하는 단말에 의해 전달된 라디오 베어러에 대한 정보; 도너 노드와 릴레이 노드 사이의 라디오 베어러에 대해 설정된 터널에 대한 정보; 통합된 다중 라디오 베어러에 대한 정보; 라디오 베어러 매핑 정보; 도너 노드 측면의 주소에 대한 정보; 릴레이 노드 측의 주소에 대한 정보; 릴레이 노드에 접속하는 단말의 라디오 베어러에 대응하는 표시 정보; 릴레이 노드에 액세스하는 단말에 대해 새로운 주소를 라디오 베어러에 할당하도록 릴레이 노드를 나타내는 표시 정보; 릴레이 노드에 접속하는 단말의 라디오 베어러의 데이터를 전송하는 릴레이 노드가 사용할 수 없는 주소 정보 목록; 및 보안 구성과 관련된 정보.According to various embodiments, the first message may include one or more of: identification of a terminal accessing the relay node; display information indicating the type of terminal accessing the relay node; information about a radio bearer of a terminal accessing a relay node; information about a radio bearer transmitted by a terminal accessing a relay node; information about a tunnel established for a radio bearer between the donor node and the relay node; information about integrated multiple radio bearers; radio bearer mapping information; information about the address of the side of the donor node; information about the address of the relay node side; indication information corresponding to a radio bearer of a terminal accessing the relay node; indication information indicating the relay node to allocate a new address to a radio bearer for a terminal accessing the relay node; a list of address information that cannot be used by a relay node that transmits radio bearer data of a terminal accessing the relay node; and information related to security configuration.

다양한 실시 예에 따르면, 제2 메시지는 다음 중 하나 이상을 포함할 수 있다: 릴레이 노드에 액세스하는 터미널의 식별; 릴레이 노드에 의해 승인된 라디오 베어러에 대한 정보; 릴레이 노드에 의해 승인되지 않은 라디오 베어러에 대한 정보; 릴레이 노드에 의해 부분적으로 승인된 라디오 베어러에 대한 정보; 라디오 베어러 매핑 정보; 릴레이 노드가 생성한 릴레이 노드에 접속하는 단말의 구성 정보; 릴레이 노드 측의 주소에 대한 정보; 및 보안 구성과 관련된 정보.According to various embodiments, the second message may include one or more of: identification of a terminal accessing the relay node; information about the radio bearer granted by the relay node; information about radio bearers not acknowledged by the relay node; information about radio bearers partially granted by the relay node; radio bearer mapping information; Configuration information of a terminal accessing the relay node created by the relay node; information about the address of the relay node side; and information related to security configuration.

다양한 실시 예에 따르면, 제2 메시지는 통합된 다중 라디오 베어러에 대한 정보를 더 포함할 수 있다.According to various embodiments, the second message may further include information on integrated multiple radio bearers.

다양한 실시 예에 따르면, 도너 노드는 도너 노드의 중앙 유닛을 포함하고, 릴레이 노드는 도너 노드의 분산 유닛을 포함할 수 있다.According to various embodiments, the donor node may include a central unit of the donor node, and the relay node may include a distribution unit of the donor node.

다양한 실시 예에 따르면, 무선 통신 시스템의 릴레이 노드는 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서에 동작 가능하게 결합된 트랜시버를 포함하고, 도너 노드로부터, 릴레이 노드에 액세스하는 단말에 대한 복수의 라디오 베어러에 관한 도너 노드와 관련된 제1 정보를 포함하는 제1 메시지를 수신하도록 구성되고; 단말에 대한 복수의 라디오 베어러에 관한 릴레이 노드와 관련된 제2 정보를 포함하는 제2 메시지를 도너 노드로 전송하고; 도너 노드로부터 단말기에 대한 데이터를 수신할 수 있다. 데이터는 제1 정보 및 제2 정보에 기초하여 복수의 라디오 베어러를 통해 단말로 전송될 수 있다.According to various embodiments, a relay node of a wireless communication system includes at least one processor, includes a transceiver operably coupled to the at least one processor, and provides a plurality of information from a donor node to a terminal accessing the relay node. configured to receive a first message including first information related to a donor node for a radio bearer of; transmit to the donor node a second message including second information related to the relay node for the plurality of radio bearers for the terminal; Data on the terminal may be received from the donor node. Data may be transmitted to the terminal through a plurality of radio bearers based on the first information and the second information.

다양한 실시 예에 따르면, 복수의 라디오 베어러 중 라디오 베어러는 복수의 라디오 베어러를 통합시킬 수 있다. 적어도 하나의 프로세서는 또한 릴레이 노드에 액세스하는 단말에 대한 라디오 베어러 및 라디오 베어러에 의해 통합된 다중 라디오 베어러를 결정하도록 구성되고; 또는 라디오 베어러에 의해 통합된 다중 라디오 베어러를 결정할 수 있다.According to various embodiments, a radio bearer among a plurality of radio bearers may integrate a plurality of radio bearers. the at least one processor is also configured to determine a radio bearer for a terminal accessing the relay node and multiple radio bearers aggregated by the radio bearer; Alternatively, multiple radio bearers integrated by radio bearer may be determined.

다양한 실시 예에 따르면, 제1 메시지는 다음 중 하나 이상을 포함할 수 있다: 릴레이 노드에 액세스하는 터미널의 식별; 릴레이 노드에 접속하는 단말의 종류를 나타내는 표시 정보; 릴레이 노드에 접속하는 단말의 라디오 베어러에 대한 정보; 릴레이 노드에 액세스하는 단말에 의해 전달된 라디오 베어러에 대한 정보; 도너 노드와 릴레이 노드 사이의 라디오 베어러에 대해 설정된 터널에 대한 정보; 통합된 다중 라디오 베어러에 대한 정보; 라디오 베어러 매핑 정보; 도너 노드 측면의 주소에 대한 정보; 릴레이 노드 측의 주소에 대한 정보; 릴레이 노드에 접속하는 단말의 라디오 베어러에 대응하는 표시 정보; 릴레이 노드에 액세스하는 단말에 대해 새로운 주소를 라디오 베어러에 할당하도록 릴레이 노드를 나타내는 표시 정보; 릴레이 노드에 접속하는 단말의 라디오 베어러의 데이터를 전송하는 릴레이 노드가 사용할 수 없는 주소 정보 목록; 및 보안 구성과 관련된 정보.According to various embodiments, the first message may include one or more of: identification of a terminal accessing the relay node; display information indicating the type of terminal accessing the relay node; information about a radio bearer of a terminal accessing a relay node; information about a radio bearer transmitted by a terminal accessing a relay node; information about a tunnel established for a radio bearer between the donor node and the relay node; information about integrated multiple radio bearers; radio bearer mapping information; information about the address on the side of the donor node; information about the address of the relay node side; indication information corresponding to a radio bearer of a terminal accessing the relay node; indication information indicating the relay node to allocate a new address to a radio bearer for a terminal accessing the relay node; a list of address information that cannot be used by a relay node that transmits radio bearer data of a terminal accessing the relay node; and information related to security configuration.

다양한 실시 예에 따르면, 제2 메시지는 다음 중 하나 이상을 포함할 수 있다: 릴레이 노드에 액세스하는 터미널의 식별; 릴레이 노드에 의해 승인된 라디오 베어러에 대한 정보; 릴레이 노드에 의해 승인되지 않은 라디오 베어러에 대한 정보; 릴레이 노드에 의해 부분적으로 승인된 라디오 베어러에 대한 정보; 라디오 베어러 매핑 정보; 릴레이 노드가 생성한 릴레이 노드에 접속하는 단말의 구성 정보; 릴레이 노드 측의 주소에 대한 정보; 및 보안 구성과 관련된 정보.According to various embodiments, the second message may include one or more of: identification of a terminal accessing the relay node; information about the radio bearer granted by the relay node; information about radio bearers not acknowledged by the relay node; information about radio bearers partially granted by the relay node; radio bearer mapping information; Configuration information of a terminal accessing the relay node created by the relay node; information about the address of the relay node side; and information related to security configuration.

다양한 실시 예에 따르면, 제2 메시지는 통합된 다중 라디오 베어러에 대한 정보를 더 포함할 수 있다.According to various embodiments, the second message may further include information on integrated multiple radio bearers.

다양한 실시 예에 따르면, 도너 노드는 도너 노드의 중앙 유닛을 포함하고, 릴레이 노드는 도너 노드의 분산 유닛을 포함할 수 있다.According to various embodiments, the donor node may include a central unit of the donor node, and the relay node may include a distribution unit of the donor node.

이하에서는 상술한 무선 통신 시스템에서 단말의 구성요소를 도시한다. 이하에서는 설명하는 단말의 구성요소는 무선 통신 시스템에서 지원하는 범용적인 단말의 구성요소로서 전술한 내용들에 따른 단말의 구성요소와 병합되거나 통합될 수 있고, 일부 중첩되거나 상충되는 범위에서 앞서 도면을 참조하여 설명한 내용이 우선적용되는 것으로 해석될 수 있다. 이하에서 사용되는 "-모듈", "-유닛"또는 "-er"라는 용어는 적어도 하나의 기능을 처리하는 유닛을 의미할 수 있다.Hereinafter, components of a terminal in the wireless communication system described above are illustrated. Components of a terminal to be described below are components of a general-purpose terminal supported by a wireless communication system, and may be merged or integrated with components of a terminal according to the foregoing contents, and may overlap or conflict with the above drawings. It can be interpreted that the content described with reference takes precedence. The terms "-module", "-unit" or "-er" used below may mean a unit that processes at least one function.

단말은 통신 인터페이스, 저장부 및 컨트롤러를 포함한다.The terminal includes a communication interface, a storage unit and a controller.

통신 인터페이스는 무선 채널을 통해 신호를 송수신하는 기능을 수행한다. 예를 들어, 통신 인터페이스는 시스템의 물리 계층 표준에 따라 베이스 밴드 신호와 비트 스트림 간의 변환 기능을 수행한다. 예를 들어, 데이터 전송에서 통신 인터페이스는 전송 비트 스트림을 인코딩 및 변조하여 복합 심볼을 생성한다. 또한, 데이터 수신시 통신 인터페이스는 베이스 대역 신호를 복조 및 복호화하여 수신 비트 스트림을 재구성한다. 또한, 통신 인터페이스는 베이스 대역 신호를 RF 대역 신호로 상향 변환하고, 변환된 신호를 안테나를 통해 전송한 후 안테나를 통해 수신된 RF 대역 신호를 기저 대역 신호로 하향 변환한다. 예를 들어, 통신 인터페이스는 송신 필터(transmission filter), 수신 필터(reception filter), 증폭기(amplifier), 믹서(mixer), 발진기(oscillator), 디지털-아날로그 컨버터(digital-to-analog convertor, DAC), 아날로그-디지털 컨버터(analog-to-digital convertor, ADC) 등을 포함할 수 있다.The communication interface performs a function of transmitting and receiving signals through a wireless channel. For example, the communication interface performs a conversion function between a baseband signal and a bit stream according to the physical layer standard of the system. For example, in data transmission, a communication interface encodes and modulates a transmission bit stream to generate composite symbols. Also, when receiving data, the communication interface demodulates and decodes the baseband signal to reconstruct the received bit stream. Further, the communication interface up-converts the baseband signal to an RF-band signal, transmits the converted signal through an antenna, and down-converts the RF-band signal received through the antenna into a baseband signal. For example, the communication interface includes a transmission filter, a reception filter, an amplifier, a mixer, an oscillator, and a digital-to-analog converter (DAC). , an analog-to-digital converter (ADC), and the like.

또한, 통신 인터페이스는 복수의 송수신 경로를 포함할 수 있다. 또한, 통신 인터페이스는 복수의 안테나 요소를 포함하는 적어도 하나의 안테나 어레이를 포함할 수 있다. 하드웨어 측에서 무선 통신 인터페이스는 디지털 회로 및 아날로그 회로(예를 들어, radio frequency integrated circuit, RFIC)를 포함할 수 있다. 디지털 회로는 적어도 하나의 프로세서(예: DSP)로 구현될 수 있다. 통신 인터페이스는 복수의 RF 체인을 포함할 수 있다. 통신 인터페이스는 빔포밍을 수행할 수 있다.Also, the communication interface may include a plurality of transmit/receive paths. Additionally, the communication interface may include at least one antenna array comprising a plurality of antenna elements. On the hardware side, the wireless communication interface may include a digital circuit and an analog circuit (eg, a radio frequency integrated circuit (RFIC)). A digital circuit may be implemented with at least one processor (eg, DSP). A communication interface may include multiple RF chains. The communication interface may perform beamforming.

통신 인터페이스는 전술한 바와 같이 신호를 송수신한다. 따라서, 통신 인터페이스는 "송신기(transmitter)", "수신기(receiver)"또는 "트랜시버(transceiver)"로 지칭될 수 있다. 또한, 이하의 설명에서 무선 채널을 통해 수행되는 송수신은 전술한 바와 같이 통신 인터페이스에서 수행되는 처리를 포함하는 의미로 사용될 수 있다.The communication interface transmits and receives signals as described above. Accordingly, a communication interface may be referred to as a “transmitter”, “receiver” or “transceiver”. In addition, in the following description, transmission and reception performed through a radio channel may be used as a meaning including processing performed in a communication interface as described above.

저장부는 단말기의 동작을 위한 기본 프로그램, 어플리케이션, 설정 정보 등의 데이터를 저장한다. 저장부는 휘발성 메모리, 비 휘발성 메모리 또는 휘발성 메모리와 비 휘발성 메모리의 조합을 포함할 수 있다. 또한, 저장부는 컨트롤러의 요청에 따라 저장된 데이터를 제공한다.The storage unit stores data such as basic programs for operation of the terminal, applications, and setting information. The storage unit may include volatile memory, non-volatile memory, or a combination of volatile and non-volatile memory. In addition, the storage unit provides stored data according to the request of the controller.

컨트롤러는 단말의 전반적인 동작을 제어한다. 예를 들어, 컨트롤러는 통신 인터페이스를 통해 신호를 송수신한다. 또한 컨트롤러는 저장부에 데이터를 기록하고 기록된 데이터를 읽는다. 컨트롤러는 통신 규격에서 요구하는 프로토콜 스택의 기능을 수행할 수 있다. 다른 구현에 따르면, 프로토콜 스택은 통신 인터페이스에 포함될 수 있다. 이를 위해, 컨트롤러는 적어도 하나의 프로세서 또는 마이크로 프로세서를 포함하거나 프로세서의 일부를 재생할 수 있다. 또한, 통신 인터페이스 또는 컨트롤러의 일부를 통신 프로세서(communication processor, CP)라고 할 수 있다.The controller controls the overall operation of the terminal. For example, the controller sends and receives signals through a communication interface. Also, the controller writes data to the storage unit and reads the recorded data. The controller can perform protocol stack functions required by communication standards. According to another implementation, a protocol stack may be included in the communication interface. To this end, the controller may include at least one processor or microprocessor or reproduce parts of a processor. Also, a part of the communication interface or controller may be referred to as a communication processor (CP).

본 발명의 일 실시 예에 따르면, 컨트롤러는 본 발명의 실시 예에 따른 동작을 수행하도록 단말을 제어할 수 있다.According to an embodiment of the present invention, a controller may control a terminal to perform an operation according to an embodiment of the present invention.

이하에서는 무선 통신 시스템에서 통신 인터페이스를 예시한다. Hereinafter, a communication interface in a wireless communication system is illustrated.

통신 인터페이스는 인코딩 및 변조 회로, 디지털 빔포밍 회로, 복수의 전송 경로 및 아날로그 빔포밍 회로를 포함한다.The communication interface includes encoding and modulation circuitry, digital beamforming circuitry, a plurality of transmission paths, and analog beamforming circuitry.

인코딩 및 변조 회로는 채널 인코딩을 수행한다. 채널 인코딩을 위해 low-density parity check(LDPC) 코드, 컨볼루션 코드 및 폴라 코드 중 적어도 하나가 사용될 수 있다. 인코딩 및 변조 회로는 성상 매핑(constellation mapping)을 수행함으로써 변조 심볼을 생성한다.Encoding and modulation circuitry performs channel encoding. At least one of a low-density parity check (LDPC) code, a convolution code, and a polar code may be used for channel encoding. An encoding and modulation circuit generates modulation symbols by performing constellation mapping.

디지털 빔포밍 회로는 디지털 신호(예를 들어, 변조 심볼)에 대한 빔 형성을 수행한다. 이를 위해, 디지털 빔포밍 회로는 빔포밍 가중 값에 의해 변조 심볼을 다중화한다. 빔포밍 가중치는 신호의 크기 및 문구를 변경하는데 사용될 수 있으며, "프리코딩 매트릭스(precoding matrix)"또는 "프리코더(precoder)"라고 할 수 있다. 디지털 빔포밍 회로는 디지털 빔포밍된 변조 심볼을 복수의 전송 경로로 출력한다. 이때, 다중 안테나 기술(multiple input multiple output, MIMO) 전송 방식에 따라 변조 심볼이 다중화 되거나 동일한 변조 심볼이 복수의 전송 경로에 제공될 수 있다.A digital beamforming circuit performs beamforming on a digital signal (eg, a modulation symbol). To this end, a digital beamforming circuit multiplexes modulation symbols by beamforming weights. Beamforming weights can be used to change the size and phrase of a signal, and can be referred to as a "precoding matrix" or "precoder". The digital beamforming circuit outputs digital beamformed modulation symbols to a plurality of transmission paths. In this case, according to a multiple input multiple output (MIMO) transmission method, modulation symbols may be multiplexed or the same modulation symbol may be provided to a plurality of transmission paths.

복수의 전송 경로는 디지털 빔포밍된 디지털 신호를 아날로그 신호로 변환한다. 이를 위해, 복수의 전송 경로 각각은 인버스 고속 푸리에 변환(inverse fast fourier transform, IFFT) 계산 유닛, 순환 전치(cyclic prefix, CP) 삽입 유닛, DAC 및 상향 변환 유닛을 포함할 수 있다. CP 삽입 부는 직교 주파수 분할 다중화(orthogonal frequency division multiplexing, OFDM) 방식을 위한 것으로 다른 물리 계층 방식(예: 필터 뱅크 다중 반송파(a filter bank multi-carrier): FBMC) 적용시 생략될 수 있다. 즉, 복수의 전송 경로는 디지털 빔포밍을 통해 생성된 복수의 스트림에 대해 독립적인 신호 처리 프로세스를 제공한다. 그러나, 구현에 따라 복수의 전송 경로의 일부 요소는 공통적으로 사용될 수 있다.The plurality of transmission paths convert digital beamformed digital signals into analog signals. To this end, each of the plurality of transmission paths may include an inverse fast fourier transform (IFFT) computation unit, a cyclic prefix (CP) insertion unit, a DAC, and an up conversion unit. The CP insertion unit is for an orthogonal frequency division multiplexing (OFDM) scheme and may be omitted when other physical layer schemes (eg, a filter bank multi-carrier: FBMC) are applied. That is, the plurality of transmission paths provide independent signal processing processes for a plurality of streams generated through digital beamforming. However, depending on the implementation, some elements of the plurality of transmission paths may be commonly used.

아날로그 빔포밍 회로는 아날로그 신호에 대한 빔포밍을 수행한다. 이를 위해, 디지털 빔포밍 회로는 빔포밍 가중 값에 의해 아날로그 신호를 다중화한다. 빔포밍된 가중치는 신호의 크기와 문구를 변경하는데 사용된다. 보다 구체적으로, 복수의 전송 경로와 안테나 사이의 연결 구조에 따라, 아날로그 빔포밍 회로는 다양한 방식으로 구성될 수 있다. 예를 들어, 복수의 전송 경로 각각은 하나의 안테나 어레이에 연결될 수 있다. 다른 예에서, 복수의 전송 경로는 하나의 안테나 어레이에 연결될 수 있다. 또 다른 예에서, 복수의 전송 경로는 하나의 안테나 어레이에 적응적으로 연결될 수 있거나 2개 이상의 안테나 어레이에 연결될 수 있다.An analog beamforming circuit performs beamforming on an analog signal. To this end, the digital beamforming circuit multiplexes analog signals by beamforming weighting values. The beamformed weights are used to change the amplitude and phrase of the signal. More specifically, the analog beamforming circuit may be configured in various ways according to a connection structure between a plurality of transmission paths and an antenna. For example, each of a plurality of transmission paths may be connected to one antenna array. In another example, multiple transmission paths may be coupled to one antenna array. In another example, multiple transmission paths may be adaptively coupled to one antenna array or may be coupled to two or more antenna arrays.

본 발명에 따른 방법들은 다양한 컴퓨터 수단을 통해 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 컴퓨터 판독 가능 매체에 기록되는 프로그램 명령은 본 발명을 위해 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.The methods according to the present invention may be implemented in the form of program instructions that can be executed by various computer means and recorded on a computer readable medium. Computer readable media may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on a computer readable medium may be specially designed and configured for the present invention or may be known and usable to those skilled in computer software.

컴퓨터 판독 가능 매체의 예에는 롬(ROM), 램(RAM), 플래시 메모리(flash memory) 등과 같이 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 프로그램 명령의 예에는 컴파일러(compiler)에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터(interpreter) 등을 사용해서 컴퓨터에 의해 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 적어도 하나의 소프트웨어 모듈로 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of computer readable media may include hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions may include not only machine language codes generated by a compiler but also high-level language codes that can be executed by a computer using an interpreter and the like. The hardware device described above may be configured to operate with at least one software module to perform the operations of the present invention, and vice versa.

또한, 상술한 방법 또는 장치는 그 구성이나 기능의 전부 또는 일부가 결합되어 구현되거나, 분리되어 구현될 수 있다.In addition, the above-described method or device may be implemented by combining all or some of its components or functions, or may be implemented separately.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to preferred embodiments of the present invention, those skilled in the art will variously modify and change the present invention within the scope not departing from the spirit and scope of the present invention described in the claims below. You will understand that it can be done.

100: 가상 모델 기반 광고 플랫폼 서버 200: 클라이언트 단말
300: 사용자 단말
100: virtual model-based advertising platform server 200: client terminal
300: user terminal

Claims (9)

가상 모델을 통해 마케팅하는 가상 모델 기반 광고 플랫폼 서버에 있어서,
클라이언트의 광고 의뢰를 수신하는 광고 의뢰 수신부;
광고에 활용되는 가상 모델들을 생성하는 가상 모델 생성부;
상기 가상 모델들 중 적어도 하나의 가상 모델을 상기 클라이언트와 매칭하고, 상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 가상 모델 기반 광고 수행부;
클라이언트 단말로부터 수신한 광고 내용에 기반하여 메타버스 공간을 생성하는 메타버스 서비스 제공부; 및
상기 클라이언트 단말에 채팅 서비스를 제공하는 웹페이지를 출력하는 채팅 서비스 제공부를 포함하고,
상기 가상 모델 기반 광고 수행부는,
상기 가상 모델을 포함하는 게시물을 생성하고, 생성된 상기 게시물을 상기 클라이언트의 활동 플랫폼에 업로드하고,
상기 가상 모델을 포함하지 않은 상기 클라이언트의 제1 게시물과 상기 가상 모델을 포함한 상기 클라이언트의 제2 게시물 각각에 대한 관심 정도를 비교하고, 상기 비교에 기반하여 상기 가상 모델의 광고 기여도를 산출하되,
상기 가상 모델의 기여도는 하기 수학식에 따라 결정되고,
Figure 112023033009846-pat00012

상기 수학식에서, Pg는 상기 광고 기여도, m은 상기 클라이언트의 계정에 부여된 고유 링크를 통해 미리 설정된 기간 동안 클라이언트의 판매 서버에 접속한 사용자의 수, s는 사용자에 의하여 상기 고유 링크가 공유된 횟수, c는 상기 클라이언트를 팔로우 내지 구독하고 있는 사람들의 수, z는 상기 제1 게시물 또는 상기 제2 게시물에 대한 관심수로서 상기 관심수는 좋아요 표시 수, 관심 표시 수, 및 댓글 수를 합친 수인, 광고 플랫폼 서버.
In a virtual model-based advertising platform server marketing through a virtual model,
an advertisement request receiving unit receiving a client's advertisement request;
a virtual model generating unit generating virtual models used in advertisements;
a virtual model-based advertisement performer matching at least one of the virtual models with the client and performing an advertisement through the at least one virtual model;
A metaverse service provider for generating a metaverse space based on advertisement content received from a client terminal; and
Including a chat service provider for outputting a web page providing a chat service to the client terminal;
The virtual model-based advertisement execution unit,
creating a post containing the virtual model, and uploading the created post to an activity platform of the client;
Comparing the degree of interest in each of the client's first posts not including the virtual model and the client's second posts including the virtual model, and calculating the advertisement contribution of the virtual model based on the comparison,
The contribution of the virtual model is determined according to the following equation,
Figure 112023033009846-pat00012

In the above equation, Pg is the contribution to the advertisement, m is the number of users accessing the sales server of the client during a preset period through the unique link assigned to the client's account, and s is the number of times the unique link is shared by the user , c is the number of people following or subscribing to the client, z is the number of interests in the first post or the second post, and the number of interests is the sum of the number of likes, interest, and comments, Advertising platform server.
청구항 1에서,
상기 가상 모델 생성부는,
상기 클라이언트의 SNS 활동 정보에 기반하여 취향 정보를 분석하고, 분석된 상기 클라이언트의 취향 정보에 기반하여 상기 클라이언트의 광고를 수행할 가상 모델을 생성하는, 광고 플랫폼 서버.
In claim 1,
The virtual model generator,
An advertising platform server that analyzes taste information based on SNS activity information of the client and generates a virtual model to perform advertisement of the client based on the analyzed taste information of the client.
삭제delete 삭제delete 청구항 1에서,
상기 채팅 서비스 제공부는,
가상 모델마다 채팅 분야를 결정하고, 결정된 채팅 분야에 따라 상기 가상 모델에 대응하는 인공지능 모델을 학습시키는, 광고 플랫폼 서버.
In claim 1,
The chat service provider,
An advertising platform server for determining a chatting field for each virtual model and learning an artificial intelligence model corresponding to the virtual model according to the determined chatting field.
가상 모델을 통해 마케팅하는 온라인 마케팅 플랫폼 제공 방법으로서,
클라이언트의 광고 의뢰를 수신하는 단계;
광고에 활용되는 가상 모델들을 생성하는 단계;
상기 가상 모델들 중 적어도 하나의 가상 모델을 상기 클라이언트와 매칭하는 단계;
상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 단계;
클라이언트 단말로부터 수신한 광고 내용에 기반하여 메타버스 공간을 생성하는 단계; 및
상기 클라이언트 단말에 채팅 서비스를 제공하는 웹페이지를 출력하는 단계를 포함하고,
상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 단계는,
상기 가상 모델을 포함하는 게시물을 생성하고, 생성된 상기 게시물을 상기 클라이언트의 활동 플랫폼에 업로드하는 단계; 및
상기 가상 모델을 포함하지 않은 상기 클라이언트의 제1 게시물과 상기 가상 모델을 포함한 상기 클라이언트의 제2 게시물 각각에 대한 관심 정도를 비교하고, 상기 비교에 기반하여 상기 가상 모델의 광고 기여도를 산출하는 단계;를 포함하고,
상기 가상 모델의 기여도는 하기 수학식에 따라 결정되고,
Figure 112023033009846-pat00013

상기 수학식에서, Pg는 상기 광고 기여도, m은 상기 클라이언트의 계정에 부여된 고유 링크를 통해 미리 설정된 기간 동안 클라이언트의 판매 서버에 접속한 사용자의 수, s는 사용자에 의하여 상기 고유 링크가 공유된 횟수, c는 상기 클라이언트를 팔로우 내지 구독하고 있는 사람들의 수, z는 상기 제1 게시물 또는 상기 제2 게시물에 대한 관심수로서 상기 관심수는 좋아요 표시 수, 관심 표시 수, 및 댓글 수를 합친 수인, 방법.
As a method of providing an online marketing platform marketing through a virtual model,
Receiving a client's advertisement request;
generating virtual models used in advertisements;
matching at least one virtual model among the virtual models with the client;
performing an advertisement through the at least one virtual model;
Generating a metaverse space based on the advertisement content received from the client terminal; and
And outputting a web page providing a chat service to the client terminal,
The step of performing an advertisement through the at least one virtual model,
generating a posting including the virtual model, and uploading the created posting to an activity platform of the client; and
comparing a level of interest in each of the client's first post not including the virtual model and the client's second post including the virtual model, and calculating an advertisement contribution of the virtual model based on the comparison; including,
The contribution of the virtual model is determined according to the following equation,
Figure 112023033009846-pat00013

In the above equation, Pg is the contribution to the advertisement, m is the number of users accessing the sales server of the client during a preset period through the unique link assigned to the client's account, and s is the number of times the unique link is shared by the user , c is the number of people following or subscribing to the client, z is the number of interests in the first post or the second post, and the number of interests is the sum of the number of likes, interest, and comments, method.
청구항 6에 따른 방법을 실행시키기 위한 프로그램이 기록되고, 컴퓨터에 의해 읽혀질 수 있는, 비일시적 기록매체.A non-transitory recording medium on which a program for executing the method according to claim 6 is recorded and can be read by a computer. 가상 모델 기반 광고 플랫폼 서버에서, 청구항 6에 따른 방법을 실행시키기 위하여 비일시적 기록매체에 기록된 컴퓨터 프로그램.A computer program recorded on a non-transitory recording medium to execute the method according to claim 6 in a virtual model-based advertising platform server. 가상 모델에 기반한 온라인 마케팅 플랫폼을 제공하는 시스템으로서,
광고를 의뢰하는 클라이언트의 클라이언트 단말;
상기 광고가 업로드되는 SNS를 이용하는 사용자의 사용자 단말; 및
상기 가상 모델을 통해 마케팅하는 가상 모델 기반 광고 플랫폼 서버를 포함하고,
상기 가상 모델 기반 광고 플랫폼 서버는,
상기 클라이언트의 광고 의뢰를 수신하는 광고 의뢰 수신부;
상기 광고에 활용되는 가상 모델들을 생성하는 가상 모델 생성부;
상기 가상 모델들 중 적어도 하나의 가상 모델을 상기 클라이언트와 매칭하고, 상기 적어도 하나의 가상 모델을 통해 광고를 수행하는 가상 모델 기반 광고 수행부;
클라이언트 단말로부터 수신한 광고 내용에 기반하여 메타버스 공간을 생성하는 메타버스 서비스 제공부; 및
상기 클라이언트 단말에 채팅 서비스를 제공하는 웹페이지를 출력하는 채팅 서비스 제공부를 포함하고,
상기 가상 모델 기반 광고 수행부는,
상기 가상 모델을 포함하는 게시물을 생성하고, 생성된 상기 게시물을 상기 클라이언트의 활동 플랫폼에 업로드하고,
상기 가상 모델을 포함하지 않은 상기 클라이언트의 제1 게시물과 상기 가상 모델을 포함한 상기 클라이언트의 제2 게시물 각각에 대한 관심 정도를 비교하고, 상기 비교에 기반하여 상기 가상 모델의 광고 기여도를 산출하되,
상기 가상 모델의 기여도는 하기 수학식에 따라 결정되고,
Figure 112023033009846-pat00014

상기 수학식에서, Pg는 상기 광고 기여도, m은 상기 클라이언트의 계정에 부여된 고유 링크를 통해 미리 설정된 기간 동안 클라이언트의 판매 서버에 접속한 사용자의 수, s는 사용자에 의하여 상기 고유 링크가 공유된 횟수, c는 상기 클라이언트를 팔로우 내지 구독하고 있는 사람들의 수, z는 상기 제1 게시물 또는 상기 제2 게시물에 대한 관심수로서 상기 관심수는 좋아요 표시 수, 관심 표시 수, 및 댓글 수를 합친 수인, 시스템.
As a system that provides an online marketing platform based on a virtual model,
a client terminal of a client requesting an advertisement;
a user terminal of a user using SNS where the advertisement is uploaded; and
A virtual model-based advertising platform server marketing through the virtual model;
The virtual model-based advertising platform server,
an advertisement request receiving unit receiving an advertisement request from the client;
a virtual model generating unit generating virtual models used in the advertisement;
a virtual model-based advertisement performer matching at least one of the virtual models with the client and performing an advertisement through the at least one virtual model;
A metaverse service provider for generating a metaverse space based on advertisement content received from a client terminal; and
Including a chat service provider for outputting a web page providing a chat service to the client terminal;
The virtual model-based advertisement execution unit,
creating a post containing the virtual model, and uploading the created post to an activity platform of the client;
Comparing the degree of interest in each of the client's first posts not including the virtual model and the client's second posts including the virtual model, and calculating the advertisement contribution of the virtual model based on the comparison,
The contribution of the virtual model is determined according to the following equation,
Figure 112023033009846-pat00014

In the above equation, Pg is the contribution to the advertisement, m is the number of users accessing the sales server of the client during a preset period through the unique link assigned to the client's account, and s is the number of times the unique link is shared by the user , c is the number of people following or subscribing to the client, z is the number of interests in the first post or the second post, and the number of interests is the sum of the number of likes, interest, and comments, system.
KR1020230009853A 2023-01-25 2023-01-26 Method and system for providing advertisement service using virtual model KR102552915B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020230086185A KR20230110218A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model
KR1020230086186A KR20230110219A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR1020230009572 2023-01-25
KR20230009572 2023-01-25
KR20230009804 2023-01-26
KR1020230009804 2023-01-26

Related Child Applications (2)

Application Number Title Priority Date Filing Date
KR1020230086185A Division KR20230110218A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model
KR1020230086186A Division KR20230110219A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model

Publications (1)

Publication Number Publication Date
KR102552915B1 true KR102552915B1 (en) 2023-07-07

Family

ID=87155196

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020230009853A KR102552915B1 (en) 2023-01-25 2023-01-26 Method and system for providing advertisement service using virtual model
KR1020230086185A KR20230110218A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model
KR1020230086186A KR20230110219A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020230086185A KR20230110218A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model
KR1020230086186A KR20230110219A (en) 2023-01-25 2023-07-04 Method and system for providing advertisement service using virtual model

Country Status (1)

Country Link
KR (3) KR102552915B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102671625B1 (en) 2023-09-06 2024-06-03 주식회사 케이에스앤픽 Casting recommendation device and method for aspiring celebrities

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020090244A (en) * 2001-05-24 2002-12-02 (주)엠텍소프트 Picture chatting service method and system using virtual chatter via network
KR20200097225A (en) * 2020-02-11 2020-08-18 류경희 Display method of character avatar created for service provision in virtual reality space
KR20210011933A (en) * 2018-04-22 2021-02-02 알엑스프리즘 헬스 시스템즈 프라이빗 리미티드 System and method for generating and presenting detailed content on-demand by means of a communication interface about a product or service
KR20220045487A (en) * 2020-10-05 2022-04-12 주식회사 모먼트랩 System for advertising using virtual character object and method thereof
KR20220159178A (en) * 2021-05-25 2022-12-02 주식회사 초코엔터테인먼트 Method for providing advertisement contents

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020090244A (en) * 2001-05-24 2002-12-02 (주)엠텍소프트 Picture chatting service method and system using virtual chatter via network
KR20210011933A (en) * 2018-04-22 2021-02-02 알엑스프리즘 헬스 시스템즈 프라이빗 리미티드 System and method for generating and presenting detailed content on-demand by means of a communication interface about a product or service
KR20200097225A (en) * 2020-02-11 2020-08-18 류경희 Display method of character avatar created for service provision in virtual reality space
KR20220045487A (en) * 2020-10-05 2022-04-12 주식회사 모먼트랩 System for advertising using virtual character object and method thereof
KR20220159178A (en) * 2021-05-25 2022-12-02 주식회사 초코엔터테인먼트 Method for providing advertisement contents

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102671625B1 (en) 2023-09-06 2024-06-03 주식회사 케이에스앤픽 Casting recommendation device and method for aspiring celebrities

Also Published As

Publication number Publication date
KR20230110219A (en) 2023-07-21
KR20230110218A (en) 2023-07-21

Similar Documents

Publication Publication Date Title
KR101925440B1 (en) Method for providing vr based live video chat service using conversational ai
US11249774B2 (en) Realtime bandwidth-based communication for assistant systems
US10922866B2 (en) Multi-dimensional puppet with photorealistic movement
US20210117780A1 (en) Personalized Federated Learning for Assistant Systems
US10061985B2 (en) Video understanding platform
WO2019099805A1 (en) Machine-leaning models based on non-local neural networks
Xie et al. A Survey on Machine Learning‐Based Mobile Big Data Analysis: Challenges and Applications
CN110555714A (en) method and apparatus for outputting information
CN110580500A (en) Character interaction-oriented network weight generation few-sample image classification method
CN104025626B (en) Periodically extraneous waveform analysis for device Dynamically Configuration
US11868738B2 (en) Method and apparatus for generating natural language description information
CN110234018A (en) Multimedia content description generation method, training method, device, equipment and medium
CN111125386B (en) Media resource processing method and device, storage medium and electronic device
KR102552915B1 (en) Method and system for providing advertisement service using virtual model
KR102456158B1 (en) Method and apparatus for creating a virtual space inside a company to provide job seekers with an indirect experience service for the company
Shehada et al. A lightweight facial emotion recognition system using partial transfer learning for visually impaired people
CN117726884A (en) Training method of object class identification model, object class identification method and device
KR20220126051A (en) System for providing real-time streaming based non face-to-face learning service
KR102120936B1 (en) System for providing customized character doll including smart phone
CN114970494A (en) Comment generation method and device, electronic equipment and storage medium
CN113221951A (en) Time domain attention pooling network-based dynamic graph classification method and device
Shylaja et al. Facial emotion recognition based scoring system
Zhang et al. [Retracted] Application Analysis of 5G Intelligent Communication Technologies in the Field of Sports Distance Education
KR102568378B1 (en) Apparatus for Learning Service of Foreign Language and Driving Method Thereof
Kabakchieva Additional Value End Effect of Digitalization in Tourism

Legal Events

Date Code Title Description
A107 Divisional application of patent
GRNT Written decision to grant