KR20210053739A - Apparatus for creation of contents of game play - Google Patents

Apparatus for creation of contents of game play Download PDF

Info

Publication number
KR20210053739A
KR20210053739A KR1020190139736A KR20190139736A KR20210053739A KR 20210053739 A KR20210053739 A KR 20210053739A KR 1020190139736 A KR1020190139736 A KR 1020190139736A KR 20190139736 A KR20190139736 A KR 20190139736A KR 20210053739 A KR20210053739 A KR 20210053739A
Authority
KR
South Korea
Prior art keywords
content
game
progress
neural network
artificial neural
Prior art date
Application number
KR1020190139736A
Other languages
Korean (ko)
Other versions
KR102430547B1 (en
Inventor
유태준
조면철
박승원
최홍섭
Original Assignee
주식회사 마인즈랩
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 마인즈랩 filed Critical 주식회사 마인즈랩
Priority to KR1020190139736A priority Critical patent/KR102430547B1/en
Publication of KR20210053739A publication Critical patent/KR20210053739A/en
Application granted granted Critical
Publication of KR102430547B1 publication Critical patent/KR102430547B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • G06N3/0454
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services

Abstract

According to an embodiment of the present invention, provided is a gameplay content creation device, which generates video contents including contents of game contents being played and contents responding to feedback received from a user during a play process. The gameplay content creation device uses a first artificial neural network to generate a manipulation input according to a first progress state, which is a progress state of the game contents, while playing the game contents by inputting the generated manipulation input to the game content, generates the video contents including a process of changing a progress state from the first progress state to a second progress state according to the input of the manipulation input, receives the feedback of the user watching the video contents, and may generate response contents including a response to the feedback by using a second artificial neural network.

Description

게임 플레이 콘텐츠 제작 장치{APPARATUS FOR CREATION OF CONTENTS OF GAME PLAY}Gameplay content creation device {APPARATUS FOR CREATION OF CONTENTS OF GAME PLAY}

본 발명의 일 실시예에는 게임 콘텐츠가 플레이 되는 내용을 포함하는 영상 콘텐츠 및 게임 콘텐츠의 플레이 과정 중 사용자로부터 수신된 피드백에 대한 응답 콘텐츠를 생성하는 게임 플레이 콘텐츠 제작 장치에 관한 것이다.An embodiment of the present invention relates to a game play content production apparatus that generates video content including content on which game content is played and response content to a feedback received from a user during a process of playing the game content.

정보통신 기술의 비약적인 발전으로 인해 이동통신 단말, 개인용 컴퓨터 등과 같은 다양한 종류의 단말들은 다양한 기능을 수행할 수 있도록 구현되고 있다.Due to the rapid development of information and communication technology, various types of terminals such as mobile communication terminals and personal computers are being implemented to perform various functions.

이동통신 단말을 예로 들어 설명하면, 이동통신 단말은 기본적인 음성 통신 기능에서 더 나아가 데이터 통신, 카메라를 이용한 사진이나 동영상 촬영, 음악 또는 동영상 파일 재생, 게임, 방송 시청 등 다양한 기능들을 이용할 수 있도록 구현되고 있다.Taking a mobile communication terminal as an example, the mobile communication terminal is implemented to use various functions such as data communication, photographing or video recording using a camera, playing music or video files, playing games, and watching broadcasts, in addition to basic voice communication functions. have.

최근에는 이동통신 단말을 이용한 영상 콘텐츠 감상의 수요가 증가하고 있으며, 특히 타인에 의해 게임 콘텐츠가 플레이 되는 내용을 포함하는 영상 콘텐츠의 수요가 꾸준하게 증가하고 있는 추세이다.Recently, the demand for viewing video content using a mobile communication terminal is increasing, and in particular, the demand for video content including content in which game content is played by another person is steadily increasing.

한편 이와 같은 게임 플레이 콘텐츠의 경우 사람에 의해 플레이 되는 장면을 기록하는것이라는 점에서 콘텐츠 생산의 시간적 한계와 양적 한계가 있어 콘텐츠의 대량 생산이나 다양한 콘텐츠의 생산이 어려운 문제점이 있었다.On the other hand, in the case of such game play contents, there is a problem in that it is difficult to mass-produce contents or to produce various contents due to the temporal and quantitative limitations of content production in that it records scenes played by humans.

본 발명은 학습된 인공신경망을 이용하여 게임 콘텐츠를 플레이 하는 게임 플레이 콘텐츠를 생성하고자 한다.An object of the present invention is to create game play content for playing game content using a learned artificial neural network.

또한 본 발명은 게임 플레이 내용을 포함하는 영상 콘텐츠와 함께 다양한 형태의 응답 콘텐츠를 제공함으로써 사용자로 하여금 게임 콘텐츠가 사람에 의해 플레이 되고 있는 듯한 몰입감을 제공하고자 한다.In addition, the present invention is to provide a user with a sense of immersion as if the game content is being played by a person by providing various types of response content along with video content including game play content.

또한 본 발명은 게임 플레이 콘텐츠 생성의 시간적 물리적 제약을 감소시켜 보다 다량의 게임 플레이 콘텐츠 생성이 가능하도록 하고자 한다.In addition, an object of the present invention is to reduce the temporal and physical constraints of creating game play contents, thereby enabling the creation of a larger amount of game play contents.

본 발명의 일 실시예에 따른 게임 콘텐츠가 플레이 되는 내용을 포함하는 영상 콘텐츠 및 상기 플레이 과정 중 사용자로부터 수신된 피드백에 대한 응답 콘텐츠를 생성하는 게임 플레이 콘텐츠 제작 장치는, 제1 인공 신경망을 이용하여 게임 콘텐츠의 진행 상황인 제1 진행 상황에 따른 조작 입력을 생성하고, 상기 게임 콘텐츠에 상기 생성된 조작 입력을 입력하여 상기 게임 콘텐츠를 플레이 하면서 상기 조작 입력의 입력에 따라 상기 제1 진행 상황에서 제2 진행 상황으로 진행 상황이 변경되는 과정을 포함하는 영상 콘텐츠를 생성하고, 상기 영상 콘텐츠를 시청하는 사용자의 피드백을 수신하고, 제2 인공 신경망을 이용하여 상기 피드백에 대한 응답을 포함하는 응답 콘텐츠를 생성할 수 있다.According to an embodiment of the present invention, an apparatus for producing game play content that generates video content including content on which game content is played and response content to a feedback received from a user during the play process, uses a first artificial neural network. An operation input according to a first progress state, which is a progress state of the game content, is generated, and while playing the game content by inputting the generated operation input to the game content, the first progress state is controlled according to the input of the operation input. 2 Generate video content including a process of changing the progress as progress, receive feedback from a user viewing the video content, and generate response content including a response to the feedback using a second artificial neural network. Can be generated.

상기 제1 인공 신경망은 상기 게임 콘텐츠의 복수의 진행 상황, 상기 복수의 진행 상황 각각에서의 조작 입력 및 상기 복수의 진행 상황 각각에서의 조작 입력에 따른 게임 콘텐츠의 진행 결과에 기초하여 상기 제1 진행 상황에서의 조작 입력을 생성하도록 학습된 신경망일 수 있다. 이때 상기 제1 인공 신경망은 상기 조작 입력에 따라 상기 게임 콘텐츠의 결과 달성 정도가 최대인방향으로 학습될 수 있다.The first artificial neural network performs the first progress based on a progress result of the game content according to a plurality of progress states of the game content, an operation input in each of the plurality of progress states, and an operation input in each of the plurality of progress states. It may be a neural network that has been trained to generate manipulation inputs in the context. In this case, the first artificial neural network may be learned in a direction in which the result of the game content is achieved according to the manipulation input.

상기 제1 인공 신경망은 상기 게임 콘텐츠의 복수의 진행 상황, 상기 복수의 진행 상황 각각에서의 조작 입력, 상기 복수의 진행 상황 각각에서의 조작 입력에 따른 게임 콘텐츠의 진행 결과 및 상기 복수의 진행 상황 각각에서의 복수의 사용자의 피드백에 기초하여 상기 제1 진행 상황에서의 조작 입력을 생성하도록 학습된 신경망일 수 있다. 이때 상기 제1 인공 신경망은 상기 조작 입력에 따라 상기 사용자의 피드백 정도가 최대인 방향으로 학습될 수 있다.The first artificial neural network includes a plurality of progress states of the game content, an operation input in each of the plurality of progress states, a progress result of the game content according to an operation input in each of the plurality of progress states, and each of the plurality of progress states. It may be a neural network that has been trained to generate an operation input in the first progress situation based on the feedback of a plurality of users at. In this case, the first artificial neural network may be trained in a direction in which the user's feedback level is maximum according to the manipulation input.

상기 응답 콘텐츠는 상기 제1 진행 상황을 고려한 메시지로써, 상기 사용자의 메시지에 대한 응답이 되는 메시지를 포함할 수 있다.The response content is a message in consideration of the first progress situation, and may include a message that is a response to the user's message.

상기 응답 콘텐츠는 상기 제1 진행 상황을 고려한 아바타 영상으로써, 상기 사용자의 메시지에 따라 표시가 변경되는 아바타 영상을 포함하는 영상일 수 있다.The response content is an avatar image in consideration of the first progress situation, and may be an image including an avatar image whose display is changed according to the user's message.

본 발명의 일 실시예에 따른 게임 플레이 콘텐츠 제작 장치는 상기 영상 콘텐츠와 함께 상기 응답 콘텐츠를 하나 이상의 사용자 단말에 제공할 수 있다.The apparatus for producing game play content according to an embodiment of the present invention may provide the response content together with the video content to one or more user terminals.

본 발명에 따르면 학습된 인공신경망을 이용하여 게임 콘텐츠를 플레이 하는 게임 플레이 콘텐츠를 생성할 수 있다. 특히 목적에 따라 인공 신경망을 학습시킴으로써, 게임 콘텐츠의 결과 달성 정도가 최대인 방향으로 진행되는 게임 플레이 콘텐츠뿐만 아니라 사용자들의 피드백 정도가 최대인 방향으로 진행되는 게임 플레이 콘텐츠도 생성할 수 있다.According to the present invention, it is possible to generate game play content for playing game content using the learned artificial neural network. In particular, by learning the artificial neural network according to the purpose, it is possible to generate not only game play content proceeding in the direction in which the degree of achievement of the game content is the maximum, but also game play content proceeding in the direction in which the degree of user's feedback is maximum.

아울러 본 발명에 따르면 게임 플레이 내용을 포함하는 영상 콘텐츠와 함께 다양한 형태의 응답 콘텐츠를 제공함으로써 사용자로 하여금 게임 콘텐츠가 사람에 의해 플레이 되고 있는 듯한 몰입감을 제공할 수 있다.In addition, according to the present invention, by providing various types of response content along with video content including game play content, it is possible to provide a user with an immersion feeling as if the game content is being played by a person.

나아가 본 발명은 게임 플레이 콘텐츠 생성의 시간적 물리적 제약을 감소시켜 보다 다량의 게임 플레이 콘텐츠 생성이 가능하도록 한다.Furthermore, the present invention reduces the temporal and physical constraints of generating game play contents, thereby enabling the creation of a larger amount of game play contents.

도 1은 본 발명의 일 실시예에 따른 시스템의 구성을 개략적으로 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 콘텐츠 제작 서버(100)에 구비되는 콘텐츠 제작 장치(110)의 구성을 개략적으로 도시한 도면이다.
도 3은 학습 데이터(510)를 이용하여 제1 인공 신경망(520)을 학습하는 과정을 설명하기 위한 도면이다.
도 4는 학습 데이터(530)를 이용하여 제2-1 인공 신경망(540)을 학습하는 과정을 설명하기 위한 도면이다.
도 5는 학습 데이터(550)를 이용하여 제2-2 인공 신경망(560)을 학습하는 과정을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 따른 제어부(112)가 게임 플레이 콘텐츠를 생성하는 과정을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따른 제어부(112)가 영상 콘텐츠를 생성하는 과정을 설명하기 위한 도면이다.
도 8은 콘텐츠 제작 서버(100)에 의해 제공되는 게임 플레이 콘텐츠가 사용자 단말(200)에 표시된 화면(810)의 예시이다.
도 9는 본 발명의 일 실시예에 따른 게임 플레이 콘텐츠 제작 장치(110)를 구비하는 서버(100)에 의해 수행되는 게임 플레이 콘텐츠 제작 방법을 설명하기 위한 흐름도이다.
1 is a diagram schematically showing the configuration of a system according to an embodiment of the present invention.
2 is a diagram schematically showing the configuration of a content production device 110 provided in the content production server 100 according to an embodiment of the present invention.
3 is a diagram illustrating a process of learning the first artificial neural network 520 using the training data 510.
4 is a diagram illustrating a process of learning the 2-1 artificial neural network 540 using the training data 530.
5 is a diagram for describing a process of learning the 2-2 artificial neural network 560 using the training data 550.
6 is a view for explaining a process of generating game play content by the control unit 112 according to an embodiment of the present invention.
7 is a diagram for explaining a process in which the controller 112 generates video content according to an embodiment of the present invention.
8 is an example of a screen 810 in which game play content provided by the content creation server 100 is displayed on the user terminal 200.
9 is a flowchart illustrating a method of producing game play contents performed by the server 100 including the apparatus 110 for producing game play contents according to an embodiment of the present invention.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다. Since the present invention can apply various transformations and have various embodiments, specific embodiments are illustrated in the drawings and will be described in detail in the detailed description. Effects and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described later in detail together with the drawings. However, the present invention is not limited to the embodiments disclosed below and may be implemented in various forms.

이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, and when describing with reference to the drawings, the same or corresponding constituent elements are assigned the same reference numerals, and redundant descriptions thereof will be omitted. .

이하의 실시예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다. 이하의 실시예에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 이하의 실시예에서, 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다. 도면에서는 설명의 편의를 위하여 구성 요소들이 그 크기가 과장 또는 축소될 수 있다. 예컨대, 도면에서 나타난 각 구성의 크기 및 형태는 설명의 편의를 위해 임의로 나타내었으므로, 본 발명이 반드시 도시된 바에 한정되지 않는다. In the following embodiments, terms such as first and second are used for the purpose of distinguishing one constituent element from other constituent elements rather than a limiting meaning. In the following examples, expressions in the singular include plural expressions unless the context clearly indicates otherwise. In the following embodiments, terms such as include or have means that the features or elements described in the specification are present, and do not preclude the possibility of adding one or more other features or components in advance. In the drawings, components may be exaggerated or reduced in size for convenience of description. For example, the size and shape of each component shown in the drawings are arbitrarily shown for convenience of description, and thus the present invention is not necessarily limited to what is shown.

도 1은 본 발명의 일 실시예에 따른 시스템의 구성을 개략적으로 도시한 도면이다.1 is a diagram schematically showing the configuration of a system according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시예에 따른 시스템은 콘텐츠 제작 서버(100), 사용자 단말(200), 영상 스트리밍 서버(300) 및 통신망(400)을 포함할 수 있다.Referring to FIG. 1, a system according to an embodiment of the present invention may include a content production server 100, a user terminal 200, an image streaming server 300, and a communication network 400.

본 발명의 일 실시예에 따른 시스템은 게임 콘텐츠가 플레이되는 내용을 포함하는 영상 콘텐츠와 게임 콘텐츠의 플레이 과정 중 사용자로부터 수신된 피드백에 대한 응답 콘텐츠를 생성하여 사용자 단말(200)에 전송할 수 있다.The system according to an embodiment of the present invention may generate video content including content in which game content is played and response content for feedback received from a user during a process of playing the game content and transmit it to the user terminal 200.

본 발명에서 '게임 콘텐츠'는 소정의 조작에 따라 화면, 음성과 같이 사람이 인지할 수 있는 출력 요소가 변경되는 콘텐츠를 의미할 수 있다. 가령 게임 콘텐츠는 도 8에 도시된 바와 같이 하단의 바(Bar) 조작에 따라 상단의 블록(Block)을 깨는 블록 깨기 콘텐츠 일 수 있다. 다만 이는 예시적인것으로 본 발명의 사상이 이에 한정되는 것은 아니며, 다양한 장르 및/또는 종류의 게임 콘텐츠가 본 발명의 게임 콘텐츠에 해당할 수 있다.In the present invention, “game content” may mean content in which an output element that can be recognized by a person, such as a screen or a voice, is changed according to a predetermined operation. For example, the game content may be block breaking content that breaks a block at the top according to a bar operation at the bottom, as shown in FIG. 8. However, this is exemplary, and the spirit of the present invention is not limited thereto, and various genres and/or types of game contents may correspond to the game contents of the present invention.

이와 같은 게임 콘텐츠는 조작 주체가 주로 사람일 것을 고려하여 생성된 것 일 수 있으나, 본 발명에서는 게임 콘텐츠가 사람이 아닌 학습된 인공 신경망에 의해 조작되는 내용을 중심으로 설명한다.Such game content may be generated in consideration of the fact that the operating subject is mainly human, but in the present invention, the game content will be described centering on content that is manipulated by a learned artificial neural network rather than a person.

본 발명에서 게임 콘텐츠를 '플레이'하는 것은 게임 콘텐츠 내에서 소정의 목적을 달성하기 위해 게임 콘텐츠에 대한 조작(또는 입력)을 수행하는 것을 의미할 수 있다. 가령 도 8에 도시된 바와 같은 블록 깨기 콘텐츠에 있어서, 게임 콘텐츠를 플레이 하는 것은 상단의 블록(Block)을 깨서 보다 높은 점수를 얻기 위해 하단의 바(Bar)의 위치를 적절히 이동시키는 것을 의미할 수 있다.In the present invention,'playing' the game content may mean performing an operation (or input) on the game content in order to achieve a predetermined purpose within the game content. For example, in the block breaking content as shown in FIG. 8, playing the game content may mean appropriately moving the position of the lower bar in order to obtain a higher score by breaking the upper block. have.

본 발명에서 게임 콘텐츠의 '진행 상황'은 특정 시점에서 게임 콘텐츠가 진행되고 있는 상황을 의미하는 것으로, 게임 콘텐츠의 종류에 따라 다양한 요소로 묘사될 수 있다. 가령 도 8에 도시된 바와 같은 블록 깨기 콘텐츠에 있어서 진행 상황은 특정 시점에서 잔존하고 있는 블록의 수, 공의 위치, 하단 바의 위치 및 스코어를 포함할 수 있으며, 게임의 종류에 따라 상이하게 설정될 수 있다.In the present invention, the'progress status' of the game content means a situation in which the game content is in progress at a specific point in time, and may be described as various factors according to the type of the game content. For example, in the block breaking content as shown in FIG. 8, the progress status may include the number of blocks remaining at a specific point in time, the position of the ball, the position of the lower bar, and the score, and is set differently according to the type of game. Can be.

본 발명에서 게임 콘텐츠가 플레이 되는 내용을 포함하는 '영상 콘텐츠'는 게임 콘텐츠의 플레이 과정을 나타내는 영상을 의미하는 것으로, 플레이 과정을 나타내는 음향을 포함할 수도 있다.In the present invention, “video content” including content on which game content is played refers to an image representing a process of playing the game content, and may include sound representing the process of playing.

본 발명에서 '응답 콘텐츠'는 사용자의 피드백에 대한 응답이 되는 다양한 형태의 콘텐츠로, 가령 영상 콘텐츠, 문자 콘텐츠 및 음향 콘텐츠 중 어느 하나를 포함할 수 있다.In the present invention,'response content' is various types of content that responds to user feedback, and may include any one of video content, text content, and sound content.

본 발명에서 '인공 신경망'은 소정의 목적에 따라 학습된 신경망으로, 머신 러닝(Machine Learning) 또는 딥러닝(Deep Learning) 기법에 의해 학습된 신경망을 의미할 수 있다. 개별 신경망에 대한 상세한 설명은 후술한다.In the present invention, the'artificial neural network' is a neural network learned according to a predetermined purpose, and may mean a neural network learned by a machine learning or deep learning technique. A detailed description of individual neural networks will be described later.

본 발명의 일 실시예에 따른 사용자 단말(200)은 사용자가 콘텐츠 제작 서버(100) 및/또는 영상 스트리밍 서버(300)에 의해 제공되는 다양한 서비스를 이용할 수 있도록 사용자와 콘텐츠 제작 서버(100) 및/또는 영상 스트리밍 서버(300)를 매개하는 다양한 형태의 장치를 의미할 수 있다. The user terminal 200 according to an embodiment of the present invention includes a user and a content production server 100 so that the user can use various services provided by the content production server 100 and/or the video streaming server 300. / Or may mean various types of devices that mediate the video streaming server 300.

바꾸어 말하면, 본 발명의 일 실시예에 따른 사용자 단말(200)은 콘텐츠 제작 서버(100) 및/또는 영상 스트리밍 서버(300)와 데이터를 송수신 하는 다양한 형태의 장치를 의미할 수 있다.In other words, the user terminal 200 according to an embodiment of the present invention may refer to various types of devices that transmit and receive data with the content production server 100 and/or the video streaming server 300.

이와 같은 사용자 단말(200)은 도 1에 도시된 바와 같이, 휴대용 단말(201, 202, 203)을 의미할 수도 있고, 컴퓨터(204)를 의미할 수도 있다. As shown in FIG. 1, such a user terminal 200 may refer to portable terminals 201, 202, and 203, or may refer to a computer 204.

한편 사용자 단말(200)은 상술한 기능을 수행하기 위해 콘텐츠 등을 표시하기 위한 표시수단, 이러한 콘텐츠에 대한 사용자의 입력을 획득하기 위한 입력수단을 구비할 수 있다. 이 때 입력수단 및 표시수단은 다양하게 구성될 수 있다. 가령 입력수단은 키보드, 마우스, 트랙볼, 마이크, 버튼, 터치패널 등을 포함할 수 있으나 이에 한정되지 않는다. Meanwhile, the user terminal 200 may include a display means for displaying content or the like in order to perform the above-described functions, and an input means for acquiring a user's input for such content. In this case, the input means and the display means may be configured in various ways. For example, the input means may include a keyboard, a mouse, a trackball, a microphone, a button, and a touch panel, but are not limited thereto.

사용자 단말(200)은 사용자로부터 콘텐츠 제작 서버(100)에 의해 제공되는 영상 콘텐츠에 대한 피드백을 입력받아 콘텐츠 제작 서버(100)로 전송하고, 콘텐츠 제작 서버(100)로부터 피드백에 대한 응답 콘텐츠를 수신하여 표시할 수 있다.The user terminal 200 receives feedback on the video content provided by the content production server 100 from the user, transmits it to the content production server 100, and receives response content for the feedback from the content production server 100 Can be displayed.

본 발명의 일 실시예에 따른 통신망(400)은 시스템의 각 구성 간의 데이터 송수신을 매개하는 통신망을 의미할 수 있다. 가령 통신망(400)은 LANs(Local Area Networks), WANs(Wide Area Networks), MANs(Metropolitan Area Networks), ISDNs(Integrated Service Digital Networks) 등의 유선 네트워크나, 무선 LANs, CDMA, 블루투스, 위성 통신 등의 무선 네트워크를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.The communication network 400 according to an embodiment of the present invention may mean a communication network that mediates data transmission/reception between components of a system. For example, the communication network 400 is wired networks such as LANs (Local Area Networks), WANs (Wide Area Networks), MANs (Metropolitan Area Networks), ISDNs (Integrated Service Digital Networks), wireless LANs, CDMA, Bluetooth, satellite communication, etc. It may cover wireless networks of, but the scope of the present invention is not limited thereto.

본 발명의 일 실시예에 따른 영상 스트리밍 서버(300)는 콘텐츠 제작 서버(100)에 의해 생성된 영상 콘텐츠를 스트리밍 하는 장치를 의미할 수 있다. 이와 같은 영상 스트리밍 서버(300)는 가령 사용자 단말(200)에 대해서 영상 스트리밍 서비스를 제공하는 영상 스트리밍 업체의 서버를 의미할 수 있다. 이때 영상 스트리밍 서버(300)는 콘텐츠 제작 서버(100)에 의해 생성된 영상 콘텐츠와 함께 콘텐츠 제작 서버(100)에 의해 생성된 응답 콘텐츠를 사용자 단말(200)에 제공할 수 있다. The video streaming server 300 according to an embodiment of the present invention may mean a device for streaming video content generated by the content production server 100. Such an image streaming server 300 may refer to a server of an image streaming company that provides an image streaming service to the user terminal 200, for example. In this case, the video streaming server 300 may provide the response content generated by the content production server 100 together with the video content generated by the content production server 100 to the user terminal 200.

선택적 실시예에서, 영상 스트리밍 서버(300)는 콘텐츠 제작 서버(100)와 일체로 구성될 수 있다. 이러한 경우 콘텐츠 제작 서버(100)는 영상 콘텐츠 및 응답 콘텐츠를 생성하여 사용자 단말(200)에 스트리밍(또는 제공)할 수 있다.In an optional embodiment, the video streaming server 300 may be integrally configured with the content production server 100. In this case, the content creation server 100 may generate video content and response content and stream (or provide) to the user terminal 200.

본 발명의 일 실시예에 따른 콘텐츠 제작 서버(100)는 게임 콘텐츠가 플레이되는 내용을 포함하는 영상 콘텐츠와 게임 콘텐츠의 플레이 과정 중 사용자로부터 수신된 피드백에 대한 응답 콘텐츠를 생성하여 사용자 단말(200)에 전송할 수 있다. 이를 위하여 본 발명의 일 실시예에 따른 콘텐츠 제작 서버(100)는 도 2에 도시된 바와 같은 콘텐츠 제작 장치(110)를 포함할 수 있다.The content creation server 100 according to an embodiment of the present invention generates video content including content on which game content is played, and response content to the feedback received from the user during the process of playing the game content, so that the user terminal 200 Can be transferred to. To this end, the content creation server 100 according to an embodiment of the present invention may include a content creation device 110 as shown in FIG. 2.

도 2는 본 발명의 일 실시예에 따른 콘텐츠 제작 서버(100)에 구비되는 콘텐츠 제작 장치(110)의 구성을 개략적으로 도시한 도면이다.2 is a diagram schematically showing the configuration of a content production device 110 provided in the content production server 100 according to an embodiment of the present invention.

도 2를 참조하면, 본 발명의 일 실시예에 따른 콘텐츠 제작 장치(110)는 통신부(111), 제어부(112) 및 메모리(113)를 포함할 수 있다. 또한 도면에는 도시되지 않았으나, 본 실시예에 따른 콘텐츠 제작 장치(110)는 입/출력부, 프로그램 저장부 등을 더 포함할 수 있다. Referring to FIG. 2, the content production apparatus 110 according to an embodiment of the present invention may include a communication unit 111, a control unit 112, and a memory 113. In addition, although not shown in the drawings, the content production apparatus 110 according to the present embodiment may further include an input/output unit, a program storage unit, and the like.

통신부(111)는 콘텐츠 제작 장치(110)가 사용자 단말(200) 및/또는 영상 스트리밍 서버(300)와 같은 다른 네트워크 장치와 유무선 연결을 통해 제어 신호 또는 데이터 신호와 같은 신호를 송수신하기 위해 필요한 하드웨어 및 소프트웨어를 포함하는 장치일 수 있다. The communication unit 111 is a hardware required for the content production device 110 to transmit and receive signals such as control signals or data signals through wired or wireless connection with other network devices such as the user terminal 200 and/or the video streaming server 300 And a device including software.

제어부(112)는 프로세서(Processor)와 같이 데이터를 처리할 수 있는 모든 종류의 장치를 포함할 수 있다. 여기서, '프로세서(Processor)'는, 예를 들어 프로그램 내에 포함된 코드 또는 명령으로 표현된 기능을 수행하기 위해 물리적으로 구조화된 회로를 갖는, 하드웨어에 내장된 데이터 처리 장치를 의미할 수 있다. 이와 같이 하드웨어에 내장된 데이터 처리 장치의 일 예로써, 마이크로프로세서(Microprocessor), 중앙처리장치(Central Processing Unit: CPU), 프로세서 코어(Processor Core), 멀티프로세서(Multiprocessor), ASIC(Application-Specific Integrated Circuit), FPGA(Field Programmable Gate Array) 등의 처리 장치를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.The control unit 112 may include all types of devices capable of processing data, such as a processor. Here, the'processor' may refer to a data processing device embedded in hardware, which has a circuit physically structured to perform a function represented by a code or command included in a program. As an example of such a data processing device built into the hardware, a microprocessor, a central processing unit (CPU), a processor core, a multiprocessor, and an ASIC (Application-Specific Integrated) Circuit) and processing devices such as a Field Programmable Gate Array (FPGA) may be covered, but the scope of the present invention is not limited thereto.

메모리(113)는 콘텐츠 제작 장치(110)가 처리하는 데이터를 일시적 또는 영구적으로 저장하는 기능을 수행한다. 메모리는 자기 저장 매체(Magnetic Storage Media) 또는 플래시 저장 매체(Flash Storage Media)를 포함할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다. 가령 메모리(113)는 인공 신경망을 구성하는 데이터들(가령 계수들)을 일시적 및/또는 영구적으로 저장할 수 있다. 물론 메모리(113)는 인공 신경망을 학습하기 위한 학습 데이터도 저장할 수 있다. 다만 이는 예시적인것으로 본 발명의 사상이 이에 한정되는 것은 아니다.The memory 113 performs a function of temporarily or permanently storing data processed by the content creation device 110. The memory may include a magnetic storage medium or a flash storage medium, but the scope of the present invention is not limited thereto. For example, the memory 113 may temporarily and/or permanently store data (eg, coefficients) constituting an artificial neural network. Of course, the memory 113 may also store training data for learning an artificial neural network. However, this is merely an example, and the spirit of the present invention is not limited thereto.

이하에서는 콘텐츠 제작 장치(110)의 제어부(112)에 의해 생성된 인공 신경망들에 대해서 먼저 설명하고, 생성된 인공 신경망을 이용하여 게임 플레이 콘텐츠를 제작하는 과정을 나중에 설명한다.Hereinafter, artificial neural networks generated by the control unit 112 of the content production apparatus 110 will be first described, and a process of producing game play content using the generated artificial neural network will be described later.

본 발명의 일 실시예에 따른 제어부(112)는 게임 플레이 콘텐츠의 제작에 사용되는 하나 이상의 인공 신경망을 생성하거나 학습시켜 게임 플레이 콘텐츠의 제작에 사용할 수 있다. 가령 제어부(112)는 게임 콘텐츠의 특정 시점의 진행 상황에서의 조작 입력을 생성하는 제1 인공 신경망을 생성하여 사용할 수 있다. 또한 제어부(112)는 사용자의 피드백에 대한 응답 메시지를 생성하는 제2-1 인공 신경망을 생성하여 사용할 수도 있고, 사용자의 피드백에 대한 응답 영상을 생성하는 제2-2 인공 신경망을 생성하여 사용할 수도 있다.The control unit 112 according to an exemplary embodiment of the present invention may generate or learn one or more artificial neural networks used in the production of game play contents to be used for production of game play contents. For example, the control unit 112 may generate and use a first artificial neural network that generates an operation input in a progress situation at a specific point in time of the game content. In addition, the control unit 112 may generate and use a 2-1 artificial neural network that generates a response message to the user's feedback, or may generate and use a 2-2 artificial neural network that generates a response image to the user's feedback. have.

도 3은 학습 데이터(510)를 이용하여 제1 인공 신경망(520)을 학습하는 과정을 설명하기 위한 도면이다.3 is a diagram for describing a process of learning the first artificial neural network 520 using the training data 510.

전술한 바와 같이 본 발명에서 '인공 신경망'은 소정의 목적에 따라 학습된 신경망으로, 머신 러닝(Machine Learning) 또는 딥러닝(Deep Learning) 기법에 의해 학습된 신경망을 의미할 수 있다. 이때 인공 신경망의 종류(또는 인공 신경망의 생성 기법)은 게임 콘텐츠의 종류에 따라 적합하게 결정될 수 있다. 가령 게임 콘텐츠의 진행 상황을 게임 콘텐츠의 표시 화면으로부터 획득하는 경우, 합성 곱 신경망(CNN: Convolutional Neural Network) 모델에 따른 인공 신경망이 사용될 수 있다. 다만 이는 예시적인것으로 본 발명의 사상이 이에 한정되는 것은 아니며, 전술한 바와 같이 게임 콘텐츠의 종류 및/또는 게임 콘텐츠의 진행 상황을 획득하는 방식에 따라 다양한 종류 및/또는 형태의 인공 신경망이 사용될 수 있다.As described above, in the present invention, the'artificial neural network' is a neural network learned according to a predetermined purpose, and may mean a neural network learned by a machine learning or deep learning technique. In this case, the type of artificial neural network (or a technique for generating the artificial neural network) may be appropriately determined according to the type of game content. For example, when the progress of the game content is acquired from the display screen of the game content, an artificial neural network according to a convolutional neural network (CNN) model may be used. However, this is exemplary, and the spirit of the present invention is not limited thereto, and as described above, various types and/or forms of artificial neural networks may be used depending on the type of game content and/or the method of acquiring the progress of the game content. have.

본 발명에서 제1 인공 신경망(520)은 특정 시점에서의 게임 콘텐츠의 진행 상황에 대한 조작 입력을 생성하기 위해 생성된 인공 신경망일 수 있다. 가령 게임 콘텐츠의 진행 상황이 게임 콘텐츠의 표시 화면으로부터 획득되는 예시에서, 제1 인공 신경망(520)은 게임 콘텐츠의 표시 화면에 대한 입력에 대응하여 게임 콘텐츠에 대한 조작 입력을 출력할 수 있다. 이때 출력되는 조작 입력은 예를 들어 게임 콘텐츠 내에서 케릭터의 위치를 이동시키기 위한 입력, 게임 콘텐츠 내에서 특정 아이템을 선택하기 위한 입력 등 일 수 있다. 다만 이는 예시적인것으로 본 발명의 사상이 이에 한정되는 것은 아니다. In the present invention, the first artificial neural network 520 may be an artificial neural network generated to generate a manipulation input for the progress of game content at a specific point in time. For example, in an example in which the progress of the game content is obtained from the display screen of the game content, the first artificial neural network 520 may output a manipulation input for the game content in response to the input to the display screen of the game content. The manipulation input output at this time may be, for example, an input for moving the position of a character in the game content, an input for selecting a specific item in the game content, or the like. However, this is merely an example, and the spirit of the present invention is not limited thereto.

한편 게임 콘텐츠의 플레이에 제1 인공 신경망(520)을 사용하기에 앞서서 제1 인공 신경망(520)은 소정의 학습 데이터(510)에 기초하여 학습될 수 있다. 이때 학습 데이터(510)는 게임 콘텐츠의 복수의 진행상황 각각에서의 조작 입력이 대응된 데이터 셋(511, 512, 513)을 포함할 수 있다. 이때 첫 번째 진행 상황에 대한 데이터 셋(511)에는 첫 번째 진행 상황(Situation 1), 첫 번째 진행 상황에서의 조작 입력(Control) 및 첫 번째 진행 상황에서의 해당 조작 입력에 따른 게임 콘텐츠의 진행 결과(Result)가 포함될 수 있다. 두 번째 진행 상황에 대한 데이터 셋(512) 및 N 번째 진행 상황에 대한 데이터 셋(513) 또한 첫 번째 진행 상황에 대한 데이터 셋(511)과 마찬가지로 동일한 항목들을 포함할 수 있다.Meanwhile, prior to using the first artificial neural network 520 to play game content, the first artificial neural network 520 may be learned based on predetermined training data 510. In this case, the learning data 510 may include data sets 511, 512, and 513 corresponding to manipulation inputs in each of a plurality of progress situations of game content. At this time, in the data set 511 for the first progress situation, the first progress status (Situation 1), the operation input (Control) in the first progress status, and the progress result of the game content according to the corresponding manipulation input in the first progress status. (Result) may be included. The data set 512 for the second progress status and the data set 513 for the N-th progress status may also include the same items as the data set 511 for the first progress status.

선택적 실시예에서, 학습 데이터(510)는 조작의 목적(Goal) 및 사용자의 피드백(Feedback) 항목을 더 포함할 수 있다. In an optional embodiment, the learning data 510 may further include an operation goal and a user's feedback item.

본 발명에서 '조작의 목적'은 제1 인공 신경망(520)에 의해 생성된 조작 입력이 게임 콘텐츠를 어떤 방향으로 이끌어 갈 것인지에 관한 것으로, 가령 '결과 달성 정도가 최대인 목적'일 수도 있고 '사용자의 피드백 정도가 최대인 목적'일 수도 있다. 다만 이와 같은 목적들은 예시적인것으로 본 발명의 사상이 이에 한정되는 것은 아니며, 조작의 목적은 다양하게 설정될 수 있다.In the present invention, the'object of manipulation' relates to the direction in which the manipulation input generated by the first artificial neural network 520 will lead the game content, for example,'the purpose of achieving the maximum result' or'the user It may be the purpose that the level of feedback is the maximum. However, such objects are exemplary, and the spirit of the present invention is not limited thereto, and the purpose of operation may be set in various ways.

본 발명에서 '사용자의 피드백'은 사용자 단말(200)로부터 수신되는 다양한 형태의 정보를 포함할 수 있다. 가령 사용자의 피드백은 사용자 단말(200)로부터 수신된 문자 형태의 메시지, 음성 형태의 메시지를 포함할 수 있다. 또한 사용자의 피드백은 스트리밍 되고 있는 영상 콘텐츠에 대한 아이템 사용 입력, 공감 입력, 공유 요청 입력 등을 포함할 수도 있고, 피드백의 총량 등을 포함할 수도 있다. 다만 이는 예시적인것으로 본 발명의 사상이 이에 한정되는 것은 아니다.In the present invention,'user feedback' may include various types of information received from the user terminal 200. For example, the user's feedback may include a text message and a voice message received from the user terminal 200. In addition, the user's feedback may include an item use input, an empathy input, a sharing request input, etc. for the video content being streamed, or may include the total amount of feedback. However, this is merely an example, and the spirit of the present invention is not limited thereto.

선택적 실시예에 따를 경우, 제1 인공 신경망(520)은 특정 시점에서의 게임 콘텐츠의 진행 상황, 사용자의 피드백 및 조작의 목적의 입력에 따라 해당 시점에서의 게임의 조작 입력을 생성할 수 있다. 가령 게임 콘텐츠의 진행 상황이 게임 콘텐츠의 표시 화면으로부터 획득되는 예시에서, 제1 인공 신경망(520)은 게임 콘텐츠의 표시 화면에 대한 입력, 이에 대한 사용자의 피드백 및 조작의 목적(예를 들어 사용자의 피드백 정도가 최대인 목적)에 대응하여 게임 콘텐츠에 대한 조작 입력을 출력할 수 있다. 이때 출력되는 조작 입력은 예를 들어 게임 콘텐츠 내에서 케릭터의 위치를 이동시키기 위한 입력, 게임 콘텐츠 내에서 특정 아이템을 선택하기 위한 입력 등 일 수 있다. According to an optional embodiment, the first artificial neural network 520 may generate a game operation input at a specific time point according to the progress of the game content at a specific time point, feedback from the user, and input of the purpose of operation. For example, in an example in which the progress of the game content is obtained from the display screen of the game content, the first artificial neural network 520 inputs an input to the display screen of the game content, the user's feedback, and the purpose of operation (for example, the user's In response to the purpose of the maximum feedback level), a manipulation input for the game content may be output. The manipulation input output at this time may be, for example, an input for moving the position of a character in the game content, an input for selecting a specific item in the game content, or the like.

본 발명의 일 실시예에 따른 제어부(112)는 제1 인공 신경망(520)에 의해 생성된 게임 콘텐츠의 조작 입력을 이용하여 게임을 플레이할 수 있다. 제어부(112)는 게임의 플레이에 따라 발생되는 게임 콘텐츠의 새로운 진행 상황과 제1 인공 신경망(520)을 이용하여 새로운 조작 입력을 생성함으로써 게임 콘텐츠를 연속적으로 플레이 할 수 있다.The controller 112 according to an embodiment of the present invention may play a game by using a manipulation input of game content generated by the first artificial neural network 520. The controller 112 can continuously play the game content by generating a new operation input using the first artificial neural network 520 and a new progress status of the game content generated according to the game play.

이와 같이 본 발명은 학습된 제1 인공 신경망(520)을 이용하여 게임 콘텐츠의 조작 입력을 생성하되, 소정의 목적에 부합되도록 조작 입력을 생성하여 목적에 따른 게임 콘텐츠의 플레이 내용을 생성할 수 있다.In this way, the present invention generates an operation input of the game content using the learned first artificial neural network 520, but by generating an operation input to meet a predetermined purpose, it is possible to generate the play content of the game content according to the purpose. .

도 4는 학습 데이터(530)를 이용하여 제2-1 인공 신경망(540)을 학습하는 과정을 설명하기 위한 도면이다.4 is a diagram for describing a process of learning the 2-1 artificial neural network 540 using the training data 530.

본 발명에서 제2-1 인공 신경망(540)은 특정 시점에서의 게임 콘텐츠의 진행 상황, 해당 상황에서 제1 인공 신경망(520)이 생성한 조작 입력 및 사용자의 피드백 메시지의 입력에 따라 응답이 되는 메시지를 생성하도록 학습된 신경망을 의미할 수 있다. 가령 게임 콘텐츠의 진행 상황이 게임 콘텐츠의 표시 화면으로부터 획득되는 예시에서, 제2-1 인공 신경망(540)은 게임 콘텐츠의 표시 화면에 대한 입력, 해당 화면의 입력에 따라 제1 인공 신경망(520)이 생성한 조작 입력 및 사용자의 피드백 메시지에 대응하여, 사용자의 피드백 메시지에 대한 응답 메시지를 생성할 수 있다.In the present invention, the 2-1 artificial neural network 540 responds according to the progress of the game content at a specific point in time, an operation input generated by the first artificial neural network 520 in the corresponding situation, and an input of a user's feedback message. It can mean a neural network that has been trained to generate a message. For example, in an example in which the progress of the game content is obtained from the display screen of the game content, the 2-1 artificial neural network 540 is an input to the display screen of the game content and the first artificial neural network 520 according to the input of the screen. In response to the generated operation input and the user's feedback message, a response message to the user's feedback message may be generated.

선택적 실시예에서 본 발명의 일 실시예에 따른 제어부(112)는 사용자의 음성 메시지를 포함하는 피드백 메시지를 텍스트화 하여 제2-1 인공 신경망(540)에 입력하거나, 제2-1 인공 신경망(540)이 텍스트의 형태로 생성한 응답 메시지를 음성화 할 수도 있다.In an optional embodiment, the controller 112 according to an embodiment of the present invention converts a feedback message including a user's voice message into text and inputs it to the 2-1 artificial neural network 540, or the 2-1 artificial neural network ( 540), the response message generated in the form of this text may be voiced.

한편 상술한 바와 같이 응답 메시지의 생성에 제2-1 인공 신경망(540)을 사용하기에 앞서서, 제2-1 인공 신경망(540)은 소정의 학습 데이터(530)에 기초하여 학습될 수 있다.Meanwhile, prior to using the 2-1 artificial neural network 540 to generate a response message as described above, the 2-1 artificial neural network 540 may be trained based on the predetermined training data 530.

이때 학습 데이터(530)는 복수의 사용자 피드백 메시지 각각에 대한 응답 메시지가 대응된 데이터 셋(531, 532, 533)을 포함할 수 있다. 이때 첫 번째 피드백 메시지에 대한 데이터 셋(531)에는 첫 번째 피드백 메시지(Feedback MSG1), 첫 번째 피드백 메시지를 수신할 때의 게임 콘텐츠의 진행상황(Situation), 해당 진행 상황에서 제1 인공 신경망(520)이 생성한 조작 입력(Control) 및 응답 메시지(Response MSG)가 포함될 수 있다. 두 번째 진행 상황에 대한 데이터 셋(532) 및 N 번째 진행 상황에 대한 데이터 셋(533) 또한 첫 번째 진행 상황에 대한 데이터 셋(531)과 마찬가지로 동일한 항목들을 포함할 수 있다.In this case, the learning data 530 may include data sets 531, 532, and 533 corresponding to response messages for each of the plurality of user feedback messages. At this time, in the data set 531 for the first feedback message, the first feedback message (Feedback MSG1), the situation of the game content when the first feedback message is received, and the first artificial neural network 520 in the corresponding progress state. ) May include the generated operation input (Control) and response message (Response MSG). The data set 532 for the second progress status and the data set 533 for the N-th progress status may also include the same items as the data set 531 for the first progress status.

본 발명의 일 실시예에 따른 제어부(112)는 제2-1 인공 신경망(540)을 이용하여 게임 콘텐츠의 플레이 과정 중 수신한 사용자의 피드백 메시지에 대한 응답 메시지를 생성하여 사용자 단말(200)에 전송할 수 있다.The control unit 112 according to an embodiment of the present invention generates a response message to the user's feedback message received during the process of playing game content using the 2-1 artificial neural network 540 and sends it to the user terminal 200. Can be transmitted.

이로써 본 발명은 게임의 흐름을 고려하여 보다 자연스러운 응답 메시지의 생성이 가능하도록 할 수 있다.Accordingly, the present invention may allow generation of a more natural response message in consideration of the flow of the game.

도 5는 학습 데이터(550)를 이용하여 제2-2 인공 신경망(560)을 학습하는 과정을 설명하기 위한 도면이다.5 is a diagram illustrating a process of learning the 2-2 artificial neural network 560 using the training data 550.

본 발명에서 제2-2 인공 신경망(560)은 특정 시점에서의 게임 콘텐츠의 진행 상황, 해당 상황에서 제1 인공 신경망(520)이 생성한 조작 입력 및 사용자의 피드백 메시지의 입력에 따라 응답이 되는 아바타 영상을 생성하도록 학습된 신경망을 의미할 수 있다. 가령 게임 콘텐츠의 진행 상황이 게임 콘텐츠의 표시 화면으로부터 획득되는 예시에서, 제2-2 인공 신경망(560)은 게임 콘텐츠의 표시 화면에 대한 입력, 해당 화면의 입력에 따라 제1 인공 신경망(520)이 생성한 조작 입력 및 사용자의 피드백 메시지에 대응하여, 사용자의 피드백 메시지에 대한 응답이 되는 아바타 영상을 생성할 수 있다.In the present invention, the 2-2 artificial neural network 560 responds according to the progress of the game content at a specific point in time, an operation input generated by the first artificial neural network 520 in the corresponding situation, and an input of a user's feedback message. It may mean a neural network that has been trained to generate an avatar image. For example, in an example in which the progress of the game content is obtained from the display screen of the game content, the 2-2 artificial neural network 560 is an input to the display screen of the game content, the first artificial neural network 520 according to the input of the screen. In response to the generated manipulation input and the user's feedback message, an avatar image that responds to the user's feedback message may be generated.

본 발명에서 '아바타 영상'은 가상의 케릭터의 행동, 표정 등이 나타나는 영상을 의미할 수 있다. 이때 아바타 영상은 가상의 케릭터의 음성(예를 들어 응답 메시지를 읽어주는 음성)을 더 포함할 수도 있다.In the present invention, the'avatar image' may mean an image in which a virtual character's actions, facial expressions, etc. are displayed. In this case, the avatar image may further include the voice of the virtual character (for example, a voice for reading a response message).

선택적 실시예에서 본 발명의 일 실시예에 따른 제어부(112)는 사용자의 음성 메시지를 포함하는 피드백 메시지를 텍스트화 하여 제2-2 인공 신경망(560)에 입력하거나, 제2-2 인공 신경망(560)이 텍스트의 형태로 생성한 응답 메시지를 음성화 하여 아바타 영상에 포함시킬 수도 있다.In an optional embodiment, the controller 112 according to an embodiment of the present invention converts a feedback message including a user's voice message into text and inputs it to the 2-2 artificial neural network 560, or the 2-2 artificial neural network ( 560) The response message generated in the form of text may be voiced and included in the avatar image.

한편 상술한 바와 같이 아바타 영상의 생성에 제2-2 인공 신경망(560)을 사용하기에 앞서서, 제2-2 인공 신경망(560)은 소정의 학습 데이터(550)에 기초하여 학습될 수 있다.Meanwhile, as described above, prior to using the 2-2 artificial neural network 560 for generating an avatar image, the 2-2 artificial neural network 560 may be trained based on the predetermined training data 550.

이때 학습 데이터(550)는 복수의 사용자 피드백 메시지 각각에 대한 아바타 영상이 대응된 데이터 셋(551, 552, 553)을 포함할 수 있다. 이때 첫 번째 피드백 메시지에 대한 데이터 셋(551)에는 첫 번째 피드백 메시지(Feedback MSG 1), 첫 번째 피드백 메시지를 수신할 때의 게임 콘텐츠의 진행상황(Situation), 해당 진행 상황에서 제1 인공 신경망(520)이 생성한 조작 입력(Control) 및 아바타 영상과 관련된 정보(Response AVT)가 포함될 수 있다. 두 번째 진행 상황에 대한 데이터 셋(552) 및 세 번째 진행 상황에 대한 데이터 셋(553) 또한 첫 번째 진행 상황에 대한 데이터 셋(551)과 마찬가지로 동일한 항목들을 포함할 수 있다.In this case, the training data 550 may include data sets 551, 552, and 553 corresponding to avatar images for each of the plurality of user feedback messages. At this time, in the data set 551 for the first feedback message, the first feedback message (Feedback MSG 1), the situation of the game content when the first feedback message is received, and the first artificial neural network ( A manipulation input (Control) generated by 520 and information related to the avatar image (Response AVT) may be included. The data set 552 for the second progress status and the data set 553 for the third progress status may also include the same items as the data set 551 for the first progress status.

본 발명의 일 실시예에 따른 제어부(112)는 제2-2 인공 신경망(560)을 이용하여 게임 콘텐츠의 플레이 과정 중 수신한 사용자의 피드백 메시지에 대한 응답 아바타 영상을 생성하여 사용자 단말(200)에 전송할 수 있다.The control unit 112 according to an embodiment of the present invention uses the 2-2 artificial neural network 560 to generate a response avatar image to the user's feedback message received during the playing process of the game content, and the user terminal 200 Can be transferred to.

이로써 본 발명은 게임의 흐름을 고려하여 보다 자연스럽게 가상 게임 BJ 생성이 가능하도록 할 수 있다.Accordingly, the present invention may allow the creation of a virtual game BJ more naturally in consideration of the flow of the game.

이하에서는 제어부(112)가 상술한 과정에 따라 생성된 인공 신경망들(520, 540, 560)을 이용하여 게임 플레이 콘텐츠를 생성하는 방법에 대해 설명한다.Hereinafter, a method of generating game play content by using the artificial neural networks 520, 540, and 560 generated by the control unit 112 according to the above-described process will be described.

도 6은 본 발명의 일 실시예에 따른 제어부(112)가 게임 플레이 콘텐츠를 생성하는 과정을 설명하기 위한 도면이다. 도 7은 본 발명의 일 실시예에 따른 제어부(112)가 영상 콘텐츠를 생성하는 과정을 설명하기 위한 도면이다. 이하에서는 도 6 및 도 7을 함께 참조하여 설명한다.6 is a view for explaining a process of generating game play content by the control unit 112 according to an embodiment of the present invention. 7 is a diagram for explaining a process in which the control unit 112 generates video content according to an embodiment of the present invention. Hereinafter, it will be described with reference to FIGS. 6 and 7 together.

본 발명의 일 실시예에 따른 제어부(112)는 제1 인공 신경망(520)을 이용하여, 게임 콘텐츠(660)의 진행 상황인 제1 진행 상황(610)에 따른 조작 입력(630)을 생성할 수 있다. 이때 제어부(112)는 사용자의 피드백(620)을 더 고려하여, 제1 진행 상황(610)에 따른 조작 입력(630)을 생성할 수 있다.The control unit 112 according to an embodiment of the present invention uses the first artificial neural network 520 to generate an operation input 630 according to the first progress status 610, which is the progress status of the game content 660. I can. In this case, the controller 112 may generate a manipulation input 630 according to the first progress situation 610 by further considering the user's feedback 620.

또한 제어부(112)는 게임 콘텐츠(660)에 생성된 조작 입력(630)을 입력하여 게임 콘텐츠(660)를 플레이 하면서, 조작 입력(630)의 입력에 따라 제1 진행 상황(620)에서 제2 진행 상황(670)으로 진행 상황이 변경되는 과정을 포함하는 영상 콘텐츠(700)를 생성할 수 있다.In addition, the control unit 112 inputs the operation input 630 generated in the game contents 660 to play the game contents 660, and the second operation in the first progress situation 620 according to the input of the operation input 630 The video content 700 including the process of changing the progress status to the progress status 670 may be generated.

가령 게임 콘텐츠(660)가 도 8에 도시된 바와 같이 블록 깨기 콘텐츠인 경우 제어부(112)는 생성된 조작 입력(630)에 따라 하단 바를 이동시키는 과정, 이동된 바에 볼이 튕겨져올라가는 과정 및 튕겨져 올라간 볼에 의해 일부 블록이 깨지는 과정을 포함하는 영상 콘텐츠(700)를 생성할 수 있다.For example, if the game content 660 is a block breaking content as shown in FIG. 8, the control unit 112 moves the lower bar according to the generated manipulation input 630, the process of bounced on the moved bar, and the process of bounced up. Video content 700 including a process in which some blocks are broken by a ball may be generated.

한편 본 발명에서 게임 콘텐츠(660)의 '진행 상황'은 다양한 방식으로 정의될 수 있다. 가령 진행 상황은 게임 콘텐츠(660) 내에서 특정한 이벤트가 발생할 경우 새로운 진행 상황이 되는 것으로 정의될 수도 있고, 특정한 이벤트가 발생하지 않더라도 일정한 시간이 경과한 경우 새로운 진행 상황이 되는 것으로 정의될 수도 있다. 물론 진행 상황은 게임의 화면을 구성하는 화면이 소정의 수만큼의 프레임이 전환될 때마다 새로운 진행 상황이 되는 것으로 정의될 수도 있다. 다만 이는 예시적인것으로 본 발명의 사상이 이에 한정되는 것은 아니다.Meanwhile, in the present invention, the'progress status' of the game content 660 may be defined in various ways. For example, the progress status may be defined as a new progress status when a specific event occurs in the game content 660, or may be defined as a new progress status when a certain time elapses even if a specific event does not occur. Of course, the progress status may be defined as a new progress status whenever a screen constituting the game screen is changed by a predetermined number of frames. However, this is merely an example, and the spirit of the present invention is not limited thereto.

본 발명의 일 실시예에 따른 제어부(112)는 게임 콘텐츠(660)의 플레이에 따라 발생되는 진행 상황들(610, 670, 690)을 시계열적으로 연결하여 영상 콘텐츠(700)를 생성할 수 있다. 이때 영상 콘텐츠(700)는 게임 콘텐츠(660)의 플레이 과정의 적어도 일부 화면을 포함할 수 있다.The control unit 112 according to an embodiment of the present invention may generate the video content 700 by connecting progress statuses 610, 670, and 690 generated according to the play of the game content 660 in a time series. . In this case, the video content 700 may include at least some screens of a play process of the game content 660.

본 발명의 일 실시예에 따른 제어부(112)는 상술한 과정에 의해 생성된 영상 콘텐츠(700)를 사용자 단말(200)에 전송할 수 있다. 이때 제어부(112)는 전술한 스트리밍 서버(300)에 의해 제공되는 영상 스트리밍 시스템을 이용하여 사용자 단말(200)에 영상 콘텐츠(700)를 제공할 수도 있고, 직접 사용자 단말(200)에 영상 콘텐츠(700)를 스트리밍 할 수도 있다.The controller 112 according to an embodiment of the present invention may transmit the image content 700 generated by the above-described process to the user terminal 200. At this time, the control unit 112 may provide the video content 700 to the user terminal 200 using the video streaming system provided by the above-described streaming server 300, or directly to the user terminal 200 ( 700).

본 발명의 일 실시예에 따른 제어부(112)는 상술한 영상 콘텐츠(700)의 생성 및 전송과 병렬적으로, 영상 콘텐츠(700)를 시청하는 사용자의 피드백(620)을 수신할 수 있다. 또한 제어부(112)는 제2 인공 신경망들(540, 560)을 이용하여 수신된 피드백(620)에 대한 응답을 포함하는 응답 콘텐츠를 생성할 수 있다.The controller 112 according to an embodiment of the present invention may receive a feedback 620 from a user viewing the video content 700 in parallel with the generation and transmission of the video content 700 described above. In addition, the controller 112 may generate response content including a response to the received feedback 620 using the second artificial neural networks 540 and 560.

가령 제어부(112)는 제2-1 인공 신경망(540)을 이용하여 게임 콘텐츠(660)의 플레이 과정 중(또는 영상 콘텐츠(700)의 스트리밍 과정 중) 수신한 사용자의 피드백(620)에 대한 응답 메시지(640)를 생성하여 사용자 단말(200)에 전송할 수 있다. 이때 제어부(112)는 제1 진행 상황(610) 및 제1 진행 상황(610)에 따른 조작 입력(630)을 추가적으로 고려하여 사용자의 피드백(620)에 대한 응답 메시지(640)를 생성할 수도 있다.For example, the controller 112 responds to the user's feedback 620 received during the playing process of the game content 660 (or during the streaming process of the video content 700) using the 2-1 artificial neural network 540 The message 640 may be generated and transmitted to the user terminal 200. At this time, the controller 112 may generate a response message 640 for the user's feedback 620 by additionally considering the first progress status 610 and the manipulation input 630 according to the first progress status 610. .

또한 제어부(112)는 제2-2 인공 신경망(560)을 이용하여 게임 콘텐츠(660)의 플레이 과정 중(또는 영상 콘텐츠(700)의 스트리밍 과정 중) 수신한 사용자의 피드백(620)에 대한 응답 아바타 영상(650)을 생성하여 사용자 단말(200)에 전송할 수 있다. 물론 이때에도 제어부(112)는 제1 진행 상황(610) 및 제1 진행 상황(610)에 따른 조작 입력(630)을 추가적으로 고려하여 사용자의 피드백(620)에 대한 응답 아바타 영상(650)을 생성할 수도 있다.In addition, the controller 112 responds to the user's feedback 620 received during the playing process of the game content 660 (or during the streaming process of the video content 700) using the 2-2 artificial neural network 560 An avatar image 650 may be generated and transmitted to the user terminal 200. Of course, also at this time, the control unit 112 generates a response avatar image 650 to the user's feedback 620 by additionally considering the operation input 630 according to the first progress status 610 and the first progress status 610. You may.

이로써 본 발명은 학습된 인공신경망을 이용하여 게임 콘텐츠(660)를 플레이 하는 게임 플레이 콘텐츠를 생성할 수 있다. 특히 본 발명은 목적에 따라 인공 신경망을 학습시킴으로써, 게임 콘텐츠의 결과 달성 정도가 최대인 방향으로 진행되는 게임 플레이 콘텐츠뿐만 아니라, 사용자들의 피드백 정도가 최대인 방향으로 진행되는 게임 플레이 콘텐츠도 생성할 수 있다.Accordingly, the present invention can generate game play content for playing the game content 660 using the learned artificial neural network. In particular, by learning an artificial neural network according to the purpose of the present invention, it is possible to generate not only game play content that proceeds in the direction in which the degree of achievement of the game content is the maximum, but also game play content that proceeds in the direction in which the level of feedback from users is maximum. have.

아울러 본 발명은 게임 콘텐츠의 플레이 영상과 함께 다양한 형태의 응답 콘텐츠를 제공함으로써, 사용자로 하여금 게임 콘텐츠(660)가 사람에 의해 플레이 되고 있는 듯한 몰입감을 제공할 수 있다.In addition, the present invention may provide a user with an immersion feeling as if the game content 660 is being played by a person by providing various types of response content along with a play image of the game content.

나아가 본 발명은 게임 플레이 콘텐츠 생성의 시간적 물리적 제약을 감소시켜 보다 다량의 게임 플레이 콘텐츠 생성이 가능하도록 한다.Furthermore, the present invention reduces the temporal and physical constraints of generating game play contents, thereby enabling the creation of a larger amount of game play contents.

도 8은 콘텐츠 제작 서버(100)에 의해 제공되는 게임 플레이 콘텐츠가 사용자 단말(200)에 표시된 화면(810)의 예시이다.8 is an example of a screen 810 in which game play content provided by the content creation server 100 is displayed on the user terminal 200.

도 8을 참조하면, 화면(810)에는 전체적으로 게임의 진행 상황이 표시되고, 그와 함께 메시지들이 표시되는 영역(811), 아바타가 표시되는 영역(812) 및 게임 콘텐츠 결과 달성의 정도가 표시되는 영역(813)을 포함할 수 있다.Referring to FIG. 8, the progress of the game is displayed on the screen 810 as a whole, and along with it, an area 811 in which messages are displayed, an area 812 in which an avatar is displayed, and the degree of achievement of the game content result are displayed. It may include an area 813.

이때 메시지들이 표시되는 영역(811)에 표시되는 메시지들은 사용자가 발송한 메시지이거나, 콘텐츠 제작 서버(100)가 제2-1 인공 신경망을 이용하여 생성한 메시지 일 수 있다.At this time, messages displayed in the area 811 in which messages are displayed may be messages sent by a user or messages generated by the content creation server 100 using the 2-1 artificial neural network.

한편 아바타가 표시되는 영역(812)에 표시되는 아바타는 콘텐츠 제작 서버(100)가 제2-2 인공 신경망을 이용하여 생성한 아바타 영상일 수 있다.Meanwhile, the avatar displayed in the area 812 in which the avatar is displayed may be an avatar image generated by the content creation server 100 using the 2-2 artificial neural network.

도 9는 본 발명의 일 실시예에 따른 게임 플레이 콘텐츠 제작 장치(110)를 구비하는 서버(100)에 의해 수행되는 게임 플레이 콘텐츠 제작 방법을 설명하기 위한 흐름도이다. 이하에서는 도 1 내지 도 8에서 설명한 내용과 중복하는 내용의 설명은 생략하되, 도 1 내지 도 8을 함께 참조하여 설명한다.9 is a flowchart illustrating a method of producing game play contents performed by the server 100 including the apparatus 110 for producing game play contents according to an embodiment of the present invention. Hereinafter, descriptions of contents overlapping with those described in FIGS. 1 to 8 will be omitted, but will be described with reference to FIGS. 1 to 8 together.

본 발명의 일 실싱예에 따른 서버(100)는 게임 콘텐츠의 제1 진행 상황을 확인할 수 있다.(S910) 한편 서버(100)는 확인된 제1 상황을 포함하는 영상 콘텐츠를 외부장치(300)로 스트리밍할 수 있다.(S920) 도 9의 몇몇 단계(S920, S960, S990)에서, 영상 콘텐츠 스트리밍이 다른 단계들 사이에 이루어지는 것으로 도시되었지만, 이는 영상 콘텐츠가 실시간으로 스트리밍 됨을 나타내기 위한 것일 뿐, 다른 단계와의 선후관계나 스트리밍 횟수가 이에 한정되는 것은 아니다.The server 100 according to an exemplary embodiment of the present invention may check the first progress of the game content (S910). Meanwhile, the server 100 transmits the video content including the confirmed first situation to the external device 300. (S920) In some steps (S920, S960, S990) of FIG. 9, video content streaming is shown to take place between different steps, but this is only to indicate that video content is streamed in real time. , The predecessor relationship with other stages or the number of streaming are not limited thereto.

본 발명의 일 실시예에 따른 서버(100)는 제1 인공 신경망(520)을 이용하여, 게임 콘텐츠(660)의 진행 상황인 제1 진행 상황(610)에 따른 조작 입력(630)을 생성할 수 있다.(S930) 이때 서버(100)는 사용자의 피드백(620)을 더 고려하여, 제1 진행 상황(610)에 따른 조작 입력(630)을 생성할 수 있다.The server 100 according to an embodiment of the present invention uses the first artificial neural network 520 to generate an operation input 630 according to the first progress status 610, which is the progress status of the game content 660. (S930) At this time, the server 100 may generate a manipulation input 630 according to the first progress status 610 by further considering the user's feedback 620.

본 발명의 일 실시예에 따른 서버(100)는 게임 콘텐츠(660)에 생성된 조작 입력(630)을 입력하여 게임 콘텐츠(660)를 플레이 할 수 있다.(S940) 또한 서버(100)는 조작 입력(630)의 입력에 따라 변경된 진행 상황인 제2 진핸 상황(670)을 확인할 수 있다.(S950) 이와 병렬적으로, 본 발명의 일 실시예에 따른 서버(100)는 제1 진행 상황(620)에서 제2 진행 상황(670)으로 진행 상황이 변경되는 과정을 포함하는 영상 콘텐츠(700)를 생성할 수 있다. 생성된 영상 콘텐츠(700)는 전술한 단계 S920 및 후술하는 단계 S960, S980 등에서 외부장치(300)로 스트리밍 될 수 있다. 가령 게임 콘텐츠(660)가 도 8에 도시된 바와 같이 블록 깨기 콘텐츠인 경우 서버(100)는 생성된 조작 입력(630)에 따라 하단 바를 이동시키는 과정, 이동된 바에 볼이 튕겨져올라가는 과정 및 튕겨져 올라간 볼에 의해 일부 블록이 깨지는 과정을 포함하는 영상 콘텐츠(700)를 생성할 수 있다.The server 100 according to an embodiment of the present invention can play the game content 660 by inputting the manipulation input 630 generated in the game content 660. (S940) In addition, the server 100 operates According to the input of the input 630, a second progress status 670, which is a changed progress status, can be checked. (S950) Parallel to this, the server 100 according to an embodiment of the present invention provides a first progress status ( The image content 700 including a process of changing the progress status from 620 to the second progress status 670 may be generated. The generated image content 700 may be streamed to the external device 300 in steps S920 described above and steps S960 and S980 described later. For example, if the game content 660 is a block breaking content as shown in FIG. 8, the server 100 moves the lower bar according to the generated manipulation input 630, the process of bounced on the moved bar, and the process of bounced up. Video content 700 including a process in which some blocks are broken by a ball may be generated.

본 발명의 일 실시예에 따른 서버(100)는 상술한 영상 콘텐츠(700)의 생성 및 전송과 병렬적으로, 영상 콘텐츠(700)를 시청하는 사용자의 피드백(620)을 수신할 수 있다.(S970) 이때 피드백의 수신 시점은 도 9에 도시된 시점에 한정되는 것은 아니다.The server 100 according to an embodiment of the present invention may receive a feedback 620 from a user viewing the video content 700 in parallel with the generation and transmission of the video content 700 described above. S970) At this time, the time point at which the feedback is received is not limited to the time point shown in FIG. 9.

또한 서버(100)는 제2 인공 신경망들(540, 560)을 이용하여 수신된 피드백(620)에 대한 응답을 포함하는 응답 콘텐츠를 생성할 수 있다.(S980) 가령 서버(100)는 제2-1 인공 신경망(540)을 이용하여 게임 콘텐츠(660)의 플레이 과정 중(또는 영상 콘텐츠(700)의 스트리밍 과정 중) 수신한 사용자의 피드백(620)에 대한 응답 메시지(640)를 생성하여 사용자 단말(200)에 전송할 수 있다.(S990) 이때 서버(100)는 제1 진행 상황(610) 및 제1 진행 상황(610)에 따른 조작 입력(630)을 추가적으로 고려하여 사용자의 피드백(620)에 대한 응답 메시지(640)를 생성할 수도 있다. In addition, the server 100 may generate response content including a response to the received feedback 620 using the second artificial neural networks 540 and 560 (S980). For example, the server 100 may generate a second artificial neural network (S980). -1 By using the artificial neural network 540 to generate a response message 640 to the user's feedback 620 received during the playing process of the game content 660 (or during the streaming process of the video content 700) It can be transmitted to the terminal 200. (S990) At this time, the server 100 additionally considers the first progress status 610 and the manipulation input 630 according to the first progress status 610, and the user's feedback 620 A response message 640 for may be generated.

또한 서버(100)는 제2-2 인공 신경망(560)을 이용하여 게임 콘텐츠(660)의 플레이 과정 중(또는 영상 콘텐츠(700)의 스트리밍 과정 중) 수신한 사용자의 피드백(620)에 대한 응답 아바타 영상(650)을 생성하여 사용자 단말(200)에 전송할 수 있다.(S990) 물론 이때에도 서버(100)는 제1 진행 상황(610) 및 제1 진행 상황(610)에 따른 조작 입력(630)을 추가적으로 고려하여 사용자의 피드백(620)에 대한 응답 아바타 영상(650)을 생성할 수도 있다.In addition, the server 100 responds to the user's feedback 620 received during the playing process of the game content 660 (or during the streaming process of the video content 700) using the 2-2 artificial neural network 560 The avatar image 650 may be generated and transmitted to the user terminal 200 (S990). Of course, also at this time, the server 100 may input a manipulation input 630 according to the first progress status 610 and the first progress status 610. ) May be additionally considered to generate a response avatar image 650 to the user's feedback 620.

이로써 본 발명은 학습된 인공신경망을 이용하여 게임 콘텐츠(660)를 플레이 하는 게임 플레이 콘텐츠를 생성할 수 있다. 특히 본 발명은 목적에 따라 인공 신경망을 학습시킴으로써, 게임 콘텐츠의 결과 달성 정도가 최대인 방향으로 진행되는 게임 플레이 콘텐츠뿐만 아니라, 사용자들의 피드백 정도가 최대인 방향으로 진행되는 게임 플레이 콘텐츠도 생성할 수 있다.Accordingly, the present invention can generate game play content for playing the game content 660 using the learned artificial neural network. In particular, by learning an artificial neural network according to the purpose of the present invention, it is possible to generate not only game play content that proceeds in the direction in which the degree of achievement of the game content is the maximum, but also game play content that proceeds in the direction in which the degree of feedback from users is maximum have.

아울러 본 발명은 게임 콘텐츠의 플레이 영상과 함께 다양한 형태의 응답 콘텐츠를 제공함으로써, 사용자로 하여금 게임 콘텐츠(660)가 사람에 의해 플레이 되고 있는 듯한 몰입감을 제공할 수 있다.In addition, the present invention may provide a user with an immersion feeling as if the game content 660 is being played by a person by providing various types of response content along with a play image of the game content.

나아가 본 발명은 게임 플레이 콘텐츠 생성의 시간적 물리적 제약을 감소시켜 보다 다량의 게임 플레이 콘텐츠 생성이 가능하도록 한다.Furthermore, the present invention reduces the temporal and physical constraints of generating game play contents, thereby enabling the creation of a larger amount of game play contents.

이상 설명된 본 발명에 따른 실시예는 컴퓨터 상에서 다양한 구성요소를 통하여 실행될 수 있는 컴퓨터 프로그램의 형태로 구현될 수 있으며, 이와 같은 컴퓨터 프로그램은 컴퓨터로 판독 가능한 매체에 기록될 수 있다. 이때, 매체는 컴퓨터로 실행 가능한 프로그램을 저장하는 것일 수 있다. 매체의 예시로는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등을 포함하여 프로그램 명령어가 저장되도록 구성된 것이 있을 수 있다. The embodiment according to the present invention described above may be implemented in the form of a computer program that can be executed through various components on a computer, and such a computer program may be recorded in a computer-readable medium. In this case, the medium may store a program executable by a computer. Examples of media include magnetic media such as hard disks, floppy disks and magnetic tapes, optical recording media such as CD-ROMs and DVDs, magneto-optical media such as floptical disks, And there may be ones configured to store program instructions, including ROM, RAM, flash memory, and the like.

한편, 상기 컴퓨터 프로그램은 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 프로그램의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함될 수 있다.Meanwhile, the computer program may be specially designed and configured for the present invention, or may be known and usable to a person skilled in the computer software field. Examples of the computer program may include not only machine language codes such as those produced by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like.

본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, "필수적인", "중요하게" 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.Specific implementations described in the present invention are examples, and do not limit the scope of the present invention in any way. For brevity of the specification, descriptions of conventional electronic configurations, control systems, software, and other functional aspects of the systems may be omitted. In addition, the connection or connection members of the lines between the components shown in the drawings exemplarily represent functional connections and/or physical or circuit connections. It may be referred to as a connection, or circuit connections. In addition, if there is no specific mention such as "essential", "important", etc., it may not be an essential component for the application of the present invention.

따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.Accordingly, the spirit of the present invention is limited to the above-described embodiments and should not be defined, and all ranges equivalent to or equivalently changed from the claims to be described later as well as the claims to be described later are the scope of the spirit of the present invention. It will be said to belong to.

100: 서버
110: 게임 플레이 콘텐츠 제작 장치
111: 통신부
112: 제어부
113: 메모리
200: 사용자 단말
300: 영상 스트리밍 서버
400: 통신망
100: server
110: gameplay content creation device
111: communication department
112: control unit
113: memory
200: user terminal
300: video streaming server
400: communication network

Claims (9)

게임 콘텐츠가 플레이 되는 내용을 포함하는 영상 콘텐츠 및 상기 플레이 과정 중 사용자로부터 수신된 피드백에 대한 응답 콘텐츠를 생성하는 게임 플레이 콘텐츠 제작 장치에 있어서, 상기 장치는,
제1 인공 신경망을 이용하여 게임 콘텐츠의 진행 상황인 제1 진행 상황에 따른 조작 입력을 생성하고, 상기 게임 콘텐츠에 상기 생성된 조작 입력을 입력하여 상기 게임 콘텐츠를 플레이 하면서 상기 조작 입력의 입력에 따라 상기 제1 진행 상황에서 제2 진행 상황으로 진행 상황이 변경되는 과정을 포함하는 영상 콘텐츠를 생성하고,
상기 영상 콘텐츠를 시청하는 사용자의 피드백을 수신하고, 제2 인공 신경망을 이용하여 상기 피드백에 대한 응답을 포함하는 응답 콘텐츠를 생성하는, 게임 플레이 콘텐츠 제작 장치.
A game play content production apparatus for generating video content including content on which game content is played and response content to a feedback received from a user during the playing process, the device comprising:
Using a first artificial neural network, an operation input according to a first progress situation is generated, and the generated operation input is input to the game content to play the game content according to the input of the operation input. Generate video content including a process of changing a progress situation from the first progress situation to a second progress situation,
Receiving the feedback of the user viewing the video content, and generating a response content including a response to the feedback by using a second artificial neural network, game play content production apparatus.
청구항 1에 있어서
상기 제1 인공 신경망은
상기 게임 콘텐츠의 복수의 진행 상황, 상기 복수의 진행 상황 각각에서의 조작 입력 및 상기 복수의 진행 상황 각각에서의 조작 입력에 따른 게임 콘텐츠의 진행 결과에 기초하여 상기 제1 진행 상황에서의 조작 입력을 생성하도록 학습된 신경망인, 게임 플레이 콘텐츠 제작 장치.
The method according to claim 1
The first artificial neural network
An operation input in the first progress situation is performed based on a plurality of progress states of the game content, an operation input in each of the plurality of progress states, and a progress result of the game content according to an operation input in each of the plurality of progress states. A device for creating gameplay content, a neural network that has been trained to generate.
청구항 2에 있어서
상기 제1 인공 신경망은
상기 조작 입력에 따라 상기 게임 콘텐츠의 결과 달성 정도가 최대인방향으로 학습되는, 게임 플레이 콘텐츠 제작 장치.
The method according to claim 2
The first artificial neural network
According to the operation input, the game play content production device is learned in a direction in which the result of the game content is achieved at a maximum level.
청구항 1에 있어서
상기 제1 인공 신경망은
상기 게임 콘텐츠의 복수의 진행 상황, 상기 복수의 진행 상황 각각에서의 조작 입력, 상기 복수의 진행 상황 각각에서의 조작 입력에 따른 게임 콘텐츠의 진행 결과 및 상기 복수의 진행 상황 각각에서의 복수의 사용자의 피드백에 기초하여 상기 제1 진행 상황에서의 조작 입력을 생성하도록 학습된 신경망인, 게임 플레이 콘텐츠 제작 장치.
The method according to claim 1
The first artificial neural network
A plurality of progress statuses of the game content, an operation input in each of the plurality of progress situations, a progress result of the game content according to an operation input in each of the plurality of progress situations, and a plurality of users in each of the plurality of progress situations A device for producing game play content, which is a neural network that has been trained to generate an operation input in the first progress situation based on feedback.
청구항 4에 있어서
상기 제1 인공 신경망은
상기 조작 입력에 따라 상기 사용자의 피드백 정도가 최대인 방향으로 학습되는, 게임 플레이 콘텐츠 제작 장치.
The method of claim 4
The first artificial neural network
According to the operation input, the user's feedback degree is learned in a direction in which the maximum degree of feedback is maximized.
청구항 1에 있어서
상기 응답 콘텐츠는
상기 제1 진행 상황을 고려한 메시지로써, 상기 사용자의 메시지에 대한 응답이 되는 메시지를 포함하는, 게임 플레이 콘텐츠 제작 장치.
The method according to claim 1
The response content is
As a message in consideration of the first progress situation, the game play content production apparatus including a message that is a response to the user's message.
청구항 1에 있어서
상기 응답 콘텐츠는
상기 제1 진행 상황을 고려한 아바타 영상으로써, 상기 사용자의 메시지에 따라 표시가 변경되는 아바타 영상을 포함하는 영상인, 게임 플레이 콘텐츠 제작 장치.
The method according to claim 1
The response content is
The apparatus for producing game play content, which is an avatar image taking into account the first progress situation, which is an image including an avatar image whose display is changed according to a message of the user.
청구항 1에 있어서
상기 장치는
상기 영상 콘텐츠와 함께 상기 응답 콘텐츠를 하나 이상의 사용자 단말에 제공하는, 게임 플레이 콘텐츠 제작 장치.
The method according to claim 1
The device is
Apparatus for producing game play content, providing the response content together with the video content to one or more user terminals.
컴퓨터를 이용하여
청구항 1 내지 청구항 8 중 어느 한 항의 방법을 실행하기 위하여 매체에 저장된 컴퓨터 프로그램.
Using a computer
A computer program stored in a medium to execute the method of any one of claims 1 to 8.
KR1020190139736A 2019-11-04 2019-11-04 Apparatus for creation of contents of game play KR102430547B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190139736A KR102430547B1 (en) 2019-11-04 2019-11-04 Apparatus for creation of contents of game play

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190139736A KR102430547B1 (en) 2019-11-04 2019-11-04 Apparatus for creation of contents of game play

Publications (2)

Publication Number Publication Date
KR20210053739A true KR20210053739A (en) 2021-05-12
KR102430547B1 KR102430547B1 (en) 2022-08-09

Family

ID=75918845

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190139736A KR102430547B1 (en) 2019-11-04 2019-11-04 Apparatus for creation of contents of game play

Country Status (1)

Country Link
KR (1) KR102430547B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023214602A1 (en) * 2022-05-06 2023-11-09 주식회사 엔씨소프트 Method and computer-readable storage medium for generating hit reaction on basis of trained neural network

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101603681B1 (en) * 2014-11-12 2016-03-16 세종대학교산학협력단 System and method for generating artificial intelligence of game character based on imitation of game play data
JP2018520772A (en) * 2015-06-30 2018-08-02 アマゾン・テクノロジーズ・インコーポレーテッド Integration of game system and watching system
KR20190043698A (en) * 2017-10-19 2019-04-29 한국산업기술대학교산학협력단 Artificaial intelligence drone player implementation method in virtual reality drone racing game
JP2019095973A (en) * 2017-11-21 2019-06-20 株式会社 ディー・エヌ・エー Information processor and information processing program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101603681B1 (en) * 2014-11-12 2016-03-16 세종대학교산학협력단 System and method for generating artificial intelligence of game character based on imitation of game play data
JP2018520772A (en) * 2015-06-30 2018-08-02 アマゾン・テクノロジーズ・インコーポレーテッド Integration of game system and watching system
KR20190043698A (en) * 2017-10-19 2019-04-29 한국산업기술대학교산학협력단 Artificaial intelligence drone player implementation method in virtual reality drone racing game
JP2019095973A (en) * 2017-11-21 2019-06-20 株式会社 ディー・エヌ・エー Information processor and information processing program

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
BLOTER, "게임 플레이 넘어 게임엔진을 학습하는 AI", (2017.09.12)* *
Matthew Guzdial 외 2명, "Game Engine Learning from Video", School of Interactive Computing, Georgia Institute of Technology, (2017.Aug)* *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023214602A1 (en) * 2022-05-06 2023-11-09 주식회사 엔씨소프트 Method and computer-readable storage medium for generating hit reaction on basis of trained neural network

Also Published As

Publication number Publication date
KR102430547B1 (en) 2022-08-09

Similar Documents

Publication Publication Date Title
US10987596B2 (en) Spectator audio analysis in online gaming environments
TWI778477B (en) Interaction methods, apparatuses thereof, electronic devices and computer readable storage media
JP6602393B2 (en) Filtering and parental control methods to limit visual effects on head mounted displays
US10293260B1 (en) Player audio analysis in online gaming environments
US20160203645A1 (en) System and method for delivering augmented reality to printed books
US20140036022A1 (en) Providing a conversational video experience
CN114746159B (en) Artificial Intelligence (AI) controlled camera view generator and AI broadcaster
JP2017188833A (en) Information processing device and information processing method; and program
WO2012021902A2 (en) Methods and systems for interaction through gestures
US8439751B2 (en) Multi-user computer-controlled input system and a method of compressing and processing multiple input data
CN114746158B (en) Artificial Intelligence (AI) controlled camera view generator and AI broadcaster
WO2006006274A1 (en) Game apparatus and game program
CN113301358B (en) Content providing and displaying method and device, electronic equipment and storage medium
CN112528936B (en) Video sequence arrangement method, device, electronic equipment and storage medium
WO2015153878A1 (en) Modeling social identity in digital media with dynamic group membership
US11418848B2 (en) Device and method for interactive video presentation
JP2022546190A (en) Adapting a video storyline
US20220360826A1 (en) Remote Virtual Reality Viewing of an Event Using Crowdsourcing
EP4347070A1 (en) Simulating crowd noise for live events through emotional analysis of distributed inputs
JP6587817B2 (en) Game system
KR102430547B1 (en) Apparatus for creation of contents of game play
KR20230173680A (en) System and method for performance in a virtual reality environment
Lytle et al. Toward live streamed improvisational game experiences
Nakatsu et al. Construction of interactive movie system for multi-person participation
WO2024060888A1 (en) Virtual scene interaction processing method and apparatus, and electronic device, computer-readable storage medium and computer program product

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant