KR102377080B1 - Apparatus for generating digital contents based on user interface of multi-track - Google Patents

Apparatus for generating digital contents based on user interface of multi-track Download PDF

Info

Publication number
KR102377080B1
KR102377080B1 KR1020210100825A KR20210100825A KR102377080B1 KR 102377080 B1 KR102377080 B1 KR 102377080B1 KR 1020210100825 A KR1020210100825 A KR 1020210100825A KR 20210100825 A KR20210100825 A KR 20210100825A KR 102377080 B1 KR102377080 B1 KR 102377080B1
Authority
KR
South Korea
Prior art keywords
track
area
video
tracks
digital content
Prior art date
Application number
KR1020210100825A
Other languages
Korean (ko)
Inventor
이영욱
이제원
윤데이빗
Original Assignee
아이디아이디 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아이디아이디 주식회사 filed Critical 아이디아이디 주식회사
Priority to KR1020210100825A priority Critical patent/KR102377080B1/en
Application granted granted Critical
Publication of KR102377080B1 publication Critical patent/KR102377080B1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/9201Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal
    • H04N5/9202Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal the additional signal being a sound signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 디지털 컨텐츠 생성장치에 관한 것으로서, 일실시예에 따른 디지털 컨텐츠 생성장치는 사용자 입력에 기초하여 UI 제어신호를 생성하는 멀티 트랙 제어부 및 UI 제어신호에 기초하여 화면의 제1 영역에 비트 트랙, 영상 트랙 및 음성 트랙 중 적어도 둘 이상의 멀티 트랙을 표시하고, 화면의 제2 영역에 기록 버튼을 표시하는 표시 제어부를 포함한다.The present invention relates to a digital content generation device. According to one embodiment, the digital content generation device includes a multi-track control unit that generates a UI control signal based on a user input, and a bit track in a first area of the screen based on the UI control signal. , a display control unit that displays at least two multi-tracks among the video track and the audio track, and displays a record button in a second area of the screen.

Description

멀티 트랙 UI 기반의 디지털 컨텐츠 생성장치{APPARATUS FOR GENERATING DIGITAL CONTENTS BASED ON USER INTERFACE OF MULTI-TRACK}Digital content creation device based on multi-track UI {APPARATUS FOR GENERATING DIGITAL CONTENTS BASED ON USER INTERFACE OF MULTI-TRACK}

본 발명은 디지털 컨텐츠 생성장치에 관한 것으로, 보다 상세하게는 영상 및 음성 데이터에 대한 기록 동작 시 데이터에 대응되는 멀티 트랙을 시각화하는 기술적 사상에 관한 것이다.The present invention relates to a digital content creation device, and more specifically, to a technical idea of visualizing multi-tracks corresponding to data during a recording operation for video and audio data.

최근, 유튜브(YouTube), 틱톡(TikTok) 및 트릴러(Triller)와 같은 영상 공유 어플(App)에 대한 수요가 증가하고 있다. Recently, demand for video sharing apps such as YouTube, TikTok, and Triller is increasing.

이러한 영상 공유 어플은 영상의 녹화 기능, 편집 기능 및 업로드 기능과 같이 영상 공유를 위해 필요한 전반적인 기능들을 제공하고 있으나, 복수의 음성 트랙을 포함하는 멀티 트랙에 대한 효율적인 시각화, 기록 및 편집 기능을 제공하지는 못하고 있다.These video sharing apps provide overall functions necessary for video sharing, such as video recording, editing, and uploading functions, but do not provide efficient visualization, recording, and editing functions for multi-tracks including multiple audio tracks. I can't do it.

한국등록특허 제10-2058857호, "촬영 장치 및 촬영 제어 방법"Korean Patent No. 10-2058857, “Shooting device and shooting control method” 한국공개특허 제10-2018-0014966호, "미발표 신곡 공유 및 가수 발굴 오디션 서비스 제공 방법"Korean Patent Publication No. 10-2018-0014966, “Method for sharing unreleased new songs and providing audition services to discover singers”

본 발명은 비트 트랙, 영상 트랙 및 음성 트랙으로 구성되는 멀티 트랙에 대한 기록 동작을 보다 효율적으로 수행할 수 있는 디지털 컨텐츠 생성장치를 제공하고자 한다. The present invention seeks to provide a digital content generation device that can more efficiently perform recording operations on multi-tracks consisting of bit tracks, video tracks, and audio tracks.

또한, 본 발명은 화면을 통해 표시되는 영상을 최대한 가리지 않고, 멀티 트랙을 화면 상에 효율적으로 시각화할 수 있는 디지털 컨텐츠 생성장치를 제공하고자 한다.Additionally, the present invention seeks to provide a digital content creation device that can efficiently visualize multi-tracks on a screen without blocking the images displayed on the screen as much as possible.

또한, 본 발명은 멀티 트랙을 가이드 트랙과 촬영 트랙으로 구분하고, 구분된 가이드 트랙과 촬영 트랙을 화면 상에 동시에 시각화하여 사용자의 편의성을 향상시킬 수 있는 디지털 컨텐츠 생성장치를 제공하고자 한다.In addition, the present invention seeks to provide a digital content creation device that can improve user convenience by dividing multi-tracks into guide tracks and shooting tracks and visualizing the divided guide tracks and shooting tracks on the screen at the same time.

본 발명의 일실시예에 따른 디지털 컨텐츠 생성장치는 사용자 입력에 기초하여 UI 제어신호를 생성하는 멀티 트랙 제어부 및 UI 제어신호에 기초하여 화면의 제1 영역에 비트 트랙, 영상 트랙 및 음성 트랙 중 적어도 둘 이상의 멀티 트랙을 표시하고, 화면의 제2 영역에 기록 버튼을 표시하는 표시 제어부를 포함할 수 있다. A digital content creation device according to an embodiment of the present invention includes a multi-track control unit that generates a UI control signal based on a user input, and at least one of a bit track, a video track, and an audio track in a first area of the screen based on the UI control signal. It may include a display control unit that displays two or more multi-tracks and displays a record button in a second area of the screen.

일측에 따르면, 멀티 트랙 제어부는 멀티 트랙을 기록 작업이 완료된 가이드 트랙과 기록 작업이 가능한 촬영 트랙으로 구분하고, 가이드 트랙을 제1 영역에 구비된 제1 서브영역에 표시하며, 촬영 트랙을 제1 영역에 구비된 제2 서브영역에 표시하기 위한 UI 제어신호를 생성할 수 있다. According to one side, the multi-track control unit divides the multi-track into a guide track for which recording work has been completed and a shooting track for which recording work is possible, displays the guide track in the first sub-area provided in the first area, and displays the shooting track in the first sub-area. A UI control signal for displaying in the second sub-area provided in the area can be generated.

일측에 따르면, 멀티 트랙 제어부는 영상 트랙 및 음성 트랙 중 기록된 데이터의 길이가 기설정된 임계 시간 이상인 트랙과, 비트 트랙을 가이드 트랙으로 구분할 수 있다. According to one side, the multi-track control unit can distinguish between the video track and the audio track, the track of which the length of recorded data is longer than a preset threshold time, and the bit track as a guide track.

일측에 따르면, 멀티 트랙 제어부는 영상 트랙 및 음성 트랙 중 사용자 입력에 따른 기록 완료 신호가 수신된 트랙과, 비트 트랙을 가이드 트랙으로 구분할 수 있다. According to one side, the multi-track control unit can distinguish between the video track and the audio track, a track for which a recording completion signal according to a user input has been received, and a bit track as a guide track.

일측에 따르면, 제1 서브 영역은 가이드 트랙으로 구분된 N개(여기서, N은 양의 정수)의 트랙 중 제1 가이드 트랙을 표시하는 제1 트랙 영역과, 제1 가이드 트랙에 대응되는 아이콘이 표시되는 제1 아이콘 영역을 포함하고, 제2 서브 영역은 촬영 트랙으로 구분된 M개(여기서, M은 양의 정수)의 트랙 중 제1 촬영 트랙을 표시하는 제2 트랙 영역과, 제1 촬영 트랙에 대응되는 아이콘이 표시되는 제2 아이콘 영역을 포함할 수 있다. According to one side, the first sub-area includes a first track area that displays the first guide track among N tracks divided by guide tracks (where N is a positive integer), and an icon corresponding to the first guide track. It includes a displayed first icon area, and the second sub-area is a second track area that displays the first shooting track among M tracks divided into shooting tracks (where M is a positive integer), and the first shooting track. It may include a second icon area where an icon corresponding to the track is displayed.

일측에 따르면, 멀티 트랙 제어부는 제1 아이콘 영역에 대한 사용자 입력이 감지되면, 제1 트랙 영역에 가이드 트랙으로 구분된 N개의 트랙 중 제2 가이드 트랙을 표시하도록 제어하는 UI 제어신호를 생성하고, 제2 아이콘 영역에 대한 사용자 입력이 감지되면, 제2 트랙 영역에 촬영 트랙으로 구분된 M개의 트랙 중 제2 촬영 트랙을 표시하도록 제어하는 UI 제어신호를 생성할 수 있다. According to one side, when a user input to the first icon area is detected, the multi-track control unit generates a UI control signal to control the display of a second guide track among N tracks divided by guide tracks in the first track area, When a user input to the second icon area is detected, a UI control signal may be generated to control display of the second shooting track among the M tracks divided into shooting tracks in the second track area.

일측에 따르면, 표시 제어부는 가이드 트랙에 대한 사용자 입력이 감지되면, 화면의 제2 영역에 재생 버튼을 표시할 수 있다. According to one side, when a user input for a guide track is detected, the display control unit can display a play button in a second area of the screen.

일측에 따르면, 멀티 트랙 제어부는 기록 버튼에 대한 사용자 입력 또는 기설정된 어플의 실행을 위한 사용자 입력이 감지되면, 영상 트랙 및 제1 음성 트랙 중 적어도 하나의 트랙과 비트 트랙을 제1 영역에 표시하기 위한 UI 제어신호를 생성할 수 있다. According to one side, when a user input for a record button or a user input for executing a preset application is detected, the multi-track control unit displays at least one track and a bit track among the video track and the first audio track in the first area. UI control signals can be generated for.

일측에 따르면, 멀티 트랙 제어부는 영상 트랙 및 제1 음성 트랙 중 적어도 하나의 트랙과 비트 트랙이 제1 영역에 표시되고, 기록 버튼에 대한 사용자 입력이 감지되면, 제2 음성 트랙을 제1 영역에 표시하기 위한 UI 제어신호를 생성할 수 있다. According to one side, the multi-track control unit displays at least one track and a bit track among the video track and the first audio track in the first area, and when a user input to the record button is detected, the multi-track control unit displays the second audio track in the first area. UI control signals for display can be generated.

일측에 따르면, 멀티 트랙은 영상 트랙 및 음성 트랙 중 적어도 하나의 트랙이 비트 트랙에 동기화될 수 있다. According to one side, in multi-track, at least one of the video track and the audio track may be synchronized to the bit track.

일측에 따르면, 멀티 트랙 제어부는 멀티 트랙 중 어느 하나의 트랙의 터치 동작에 따른 사용자 입력이 1회 감지되면, 어느 하나의 트랙이 활성화 되도록 제어하는 UI 제어신호를 생성하고, 어느 하나의 트랙의 터치 동작에 따른 사용자 입력이 2회 감지되면, 어느 하나의 트랙에 대한 편집 메뉴를 표시하기 위한 UI 제어신호를 생성하며, 기설정된 입력시간 동안 지속되는 어느 하나의 트랙의 터치 동작에 따른 사용자 입력이 감지되면, 어느 하나의 트랙에 대한 트랙 옵션 메뉴를 표시하기 위한 UI 제어신호를 생성할 수 있다. According to one side, the multi-track control unit generates a UI control signal that controls one track to be activated when a user input according to a touch operation of one of the multi-tracks is detected once, and the touch of any one track When user input according to an action is detected twice, a UI control signal is generated to display the edit menu for one track, and user input according to a touch action on one track that lasts for a preset input time is detected. If so, a UI control signal can be generated to display a track option menu for one track.

일측에 따르면, 어느 하나의 트랙에 대한 편집 메뉴는 오디오 FX 기능, 트랙 브레이크 기능, 볼륨 제어 기능 및 트랙 초기화 기능 중 적어도 하나의 기능을 포함할 수 있다. According to one side, the edit menu for one track may include at least one of an audio FX function, a track break function, a volume control function, and a track initialization function.

일측에 따르면, 어느 하나의 트랙에 대한 트랙 옵션 메뉴는 트랙 삭제 기능 및 트랙 복제 기능 중 적어도 하나의 기능을 포함할 수 있다.According to one side, the track option menu for one track may include at least one of a track deletion function and a track duplication function.

일측에 따르면, 표시 제어부는 영상 트랙에 대한 사용자 입력에 기초하여, 영상 트랙에 대응되는 기록 동작 또는 재생 동작이 수행되면, 화면에 기록 동작 또는 재생 동작에 따른 영상 데이터를 표시하되, 멀티 트랙이 오버랩되어 표시되도록 제어할 수 있다.According to one side, the display control unit displays video data according to the recording or playback operation on the screen when a recording operation or playback operation corresponding to the video track is performed based on the user input for the video track, but the multi-track overlaps. You can control it to be displayed.

일실시예에 따르면, 본 발명은 비트 트랙, 영상 트랙 및 음성 트랙으로 구성되는 멀티 트랙에 대한 기록 동작을 보다 효율적으로 수행할 수 있다. According to one embodiment, the present invention can more efficiently perform a recording operation on a multi-track consisting of a bit track, a video track, and an audio track.

일실시예에 따르면, 본 발명은 화면을 통해 표시되는 영상을 최대한 가리지 않고, 멀티 트랙을 화면 상에 효율적으로 시각화할 수 있다.According to one embodiment, the present invention can efficiently visualize multi-tracks on a screen without blocking the image displayed on the screen as much as possible.

일실시예에 따르면, 본 발명은 멀티 트랙을 가이드 트랙과 촬영 트랙으로 구분하고, 구분된 가이드 트랙과 촬영 트랙을 화면 상에 동시에 시각화하여 사용자의 편의성을 향상시킬 수 있다.According to one embodiment, the present invention can improve user convenience by dividing multi-tracks into guide tracks and shooting tracks and visualizing the divided guide tracks and shooting tracks on the screen simultaneously.

도 1은 일실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다.
도 2는 제1 실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다.
도 3은 제2 실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다.
도 4는 제3 실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다.
도 5는 일실시예에 따른 디지털 컨텐츠 생성장치의 동작예를 설명하기 위한 도면이다.
도 6은 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 멀티 트랙을 활성화하는 예시를 설명하기 위한 도면이다.
도 7은 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 비트 트랙을 생성하는 예시를 설명하기 위한 도면이다.
도 8은 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 영상 트랙을 생성하는 예시를 설명하기 위한 도면이다.
도 9는 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 음성 트랙을 생성하는 예시를 설명하기 위한 도면이다.
도 10은 제2 실시예에 따른 디지털 컨텐츠 생성장치의 동작방법을 설명하기 위한 도면이다.
도 11은 제3 실시예에 따른 디지털 컨텐츠 생성장치의 동작방법을 설명하기 위한 도면이다.
1 is a diagram for explaining a digital content creation device according to an embodiment.
Figure 2 is a diagram for explaining a digital content creation device according to the first embodiment.
Figure 3 is a diagram for explaining a digital content creation device according to a second embodiment.
Figure 4 is a diagram for explaining a digital content creation device according to a third embodiment.
Figure 5 is a diagram for explaining an operation example of a digital content creation device according to an embodiment.
FIG. 6 is a diagram illustrating an example of activating multi-track using a digital content creation device according to an embodiment.
FIG. 7 is a diagram illustrating an example of generating a bit track using a digital content generating device according to an embodiment.
FIG. 8 is a diagram for explaining an example of generating a video track using a digital content creation device according to an embodiment.
FIG. 9 is a diagram for explaining an example of generating a voice track using a digital content creation device according to an embodiment.
Figure 10 is a diagram for explaining the operating method of the digital content creation device according to the second embodiment.
FIG. 11 is a diagram for explaining an operating method of a digital content creation device according to a third embodiment.

이하, 본 문서의 다양한 실시 예들이 첨부된 도면을 참조하여 기재된다.Hereinafter, various embodiments of this document are described with reference to the attached drawings.

실시 예 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시 예의 다양한 변경, 균등물, 및/또는 대체물을 포함하는 것으로 이해되어야 한다.The examples and terms used herein are not intended to limit the technology described in this document to a specific embodiment, and should be understood to include various changes, equivalents, and/or substitutes for the embodiments.

하기에서 다양한 실시 예들을 설명에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.In the following description of various embodiments, if a detailed description of a related known function or configuration is judged to unnecessarily obscure the gist of the invention, the detailed description will be omitted.

그리고 후술되는 용어들은 다양한 실시 예들에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.In addition, the terms described below are terms defined in consideration of functions in various embodiments, and may vary depending on the intention or custom of the user or operator. Therefore, the definition should be made based on the contents throughout this specification.

도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.In connection with the description of the drawings, similar reference numbers may be used for similar components.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다.Singular expressions may include plural expressions, unless the context clearly indicates otherwise.

본 문서에서, "A 또는 B" 또는 "A 및/또는 B 중 적어도 하나" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다.In this document, expressions such as “A or B” or “at least one of A and/or B” may include all possible combinations of the items listed together.

"제1," "제2," "첫째," 또는 "둘째," 등의 표현들은 해당 구성요소들을, 순서 또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.Expressions such as “first,” “second,” “first,” or “second,” can modify the corresponding components regardless of order or importance and are used to distinguish one component from another. It is only used and does not limit the corresponding components.

어떤(예: 제1) 구성요소가 다른(예: 제2) 구성요소에 "(기능적으로 또는 통신적으로) 연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다.When a component (e.g., a first) component is said to be "connected (functionally or communicatively)" or "connected" to another (e.g., second) component, it means that the component is connected to the other component. It may be connected directly to an element or may be connected through another component (e.g., a third component).

본 명세서에서, "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, 하드웨어적 또는 소프트웨어적으로 "~에 적합한," "~하는 능력을 가지는," "~하도록 변경된," "~하도록 만들어진," "~를 할 수 있는," 또는 "~하도록 설계된"과 상호 호환적으로(interchangeably) 사용될 수 있다.In this specification, “configured to” means “suitable for,” “having the ability to,” or “changed to,” depending on the situation, for example, in terms of hardware or software. ," can be used interchangeably with "made to," "capable of," or "designed to."

어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다.In some contexts, the expression “a device configured to” may mean that the device is “capable of” working with other devices or components.

예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(예: CPU 또는 application processor)를 의미할 수 있다.For example, the phrase "processor configured (or set) to perform A, B, and C" refers to a processor dedicated to performing the operations (e.g., an embedded processor), or by executing one or more software programs stored on a memory device. , may refer to a general-purpose processor (e.g., CPU or application processor) capable of performing the corresponding operations.

또한, '또는' 이라는 용어는 배타적 논리합 'exclusive or' 이기보다는 포함적인 논리합 'inclusive or' 를 의미한다.Additionally, the term 'or' means 'inclusive or' rather than 'exclusive or'.

즉, 달리 언급되지 않는 한 또는 문맥으로부터 명확하지 않는 한, 'x가 a 또는 b를 이용한다' 라는 표현은 포함적인 자연 순열들(natural inclusive permutations) 중 어느 하나를 의미한다.That is, unless otherwise stated or clear from the context, the expression 'x uses a or b' means any of the natural inclusive permutations.

상술한 구체적인 실시 예들에서, 발명에 포함되는 구성 요소는 제시된 구체적인 실시 예에 따라 단수 또는 복수로 표현되었다.In the above-described specific embodiments, components included in the invention are expressed in singular or plural numbers depending on the specific embodiment presented.

그러나, 단수 또는 복수의 표현은 설명의 편의를 위해 제시한 상황에 적합하게 선택된 것으로서, 상술한 실시 예들이 단수 또는 복수의 구성 요소에 제한되는 것은 아니며, 복수로 표현된 구성 요소라 하더라도 단수로 구성되거나, 단수로 표현된 구성 요소라 하더라도 복수로 구성될 수 있다.However, the singular or plural expressions are selected to suit the presented situation for convenience of explanation, and the above-described embodiments are not limited to singular or plural components, and even if the components expressed in plural are composed of singular or , Even components expressed as singular may be composed of plural elements.

한편 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 다양한 실시 예들이 내포하는 기술적 사상의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다.Meanwhile, in the description of the invention, specific embodiments have been described, but of course, various modifications are possible without departing from the scope of the technical idea implied by the various embodiments.

그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니되며 후술하는 청구범위뿐만 아니라 이 청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the claims described below as well as equivalents to these claims.

도 1은 일실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다.1 is a diagram for explaining a digital content creation device according to an embodiment.

도 1을 참조하면, 일실시예에 따른 디지털 컨텐츠 생성장치(100)는 입력부(110), 멀티 트랙 제어부(120), 기록 제어부(130) 및 표시 제어부(140)를 포함할 수 있다. Referring to FIG. 1, the digital content creation device 100 according to an embodiment may include an input unit 110, a multi-track control unit 120, a recording control unit 130, and a display control unit 140.

예를 들면, 디지털 컨텐츠 생성장치(100)는 스마트폰 및 테블릿 PC 중 적어도 하나의 사용자 단말에 구비될 수 있으며, 사용자 단말에서 수행되는 영상 공유 어플과 연동하여 동작할 수 있다. For example, the digital content creation device 100 may be installed in at least one user terminal selected from a smartphone or a tablet PC, and may operate in conjunction with a video sharing application running on the user terminal.

일실시예에 따른 입력부(110)는 카메라와 같이 영상을 기록할 수 있는 영상 입력 수단, 마이크와 같이 음성을 기록할 수 있는 음성 입력 수단 및 사용자 단말에 구비된 화면 상에서 사용자의 터치 입력을 수신할 수 있는 터치 입력 수단을 포함할 수 있다. The input unit 110 according to one embodiment includes an image input means capable of recording images such as a camera, a voice input means capable of recording voices such as a microphone, and a device capable of receiving a user's touch input on a screen provided in a user terminal. It may include a touch input means.

이하에서 설명하는 사용자 입력은 터치 입력 수단을 통한 사용자의 터치 입력을 의미하나, 일실시예에 따른 사용자 입력은 이에 한정되지 않고 영상 입력 수단을 이용한 사용자의 제스처 입력 및 음성 입력 수단을 이용한 사용자의 음성 명령 입력을 포함할 수도 있다. The user input described below refers to the user's touch input through a touch input means, but the user input according to one embodiment is not limited to this, and the user's gesture input using a video input means and the user's voice using a voice input means. It may also include command input.

일실시예에 따른 멀티 트랙 제어부(120)는 사용자 입력에 대응하여, 비트 트랙, 영상 트랙 및 음성 트랙 중 적어도 둘 이상의 멀티 트랙을 화면에 표시하기 위한 UI 제어신호를 생성할 수 있다. The multi-track control unit 120 according to one embodiment may generate a UI control signal for displaying at least two multi-tracks among a bit track, video track, and audio track on the screen in response to user input.

예를 들면, 비트 트랙은 비트 음원 데이터 및 배경 음원 데이터 중 적어도 하나의 데이터를 포함할 수 있다. 또한, 비트 트랙은 사전에 비트 데이터 서버로부터 다운받아 사용자 단말에 저장되어 있거나, 사용자에 의해 사전에 제작되어 사용자 단말에 저장되어 있을 수 있다. For example, a beat track may include at least one of beat sound source data and background sound source data. Additionally, the beat track may be downloaded in advance from a bit data server and stored in the user terminal, or may be created in advance by the user and stored in the user terminal.

또한, 영상 트랙은 영상 입력 수단을 통해 실시간으로 기록(즉, 녹화) 중인 영상 데이터 및 기록(즉, 녹화)이 완료된 영상 데이터 중 적어도 하나의 영상 데이터에 대응되는 트랙이고, 음성 트랙은 음성 입력 수단을 통해 실시간으로 기록(즉, 녹음) 중인 음성 데이터 및 기록(즉, 녹음)이 완료된 음성 데이터 중 적어도 하나의 음성 데이터에 대응되는 트랙일 수 있다. In addition, the video track is a track corresponding to at least one video data among video data being recorded (i.e., recorded) in real time through a video input means and video data that has been recorded (i.e., recorded), and the audio track is a track corresponding to an audio input means. It may be a track corresponding to at least one voice data among voice data being recorded (that is, recorded) in real time and voice data that has been recorded (that is, recorded).

일실시예에 따른 표시 제어부(140)는 멀티 트랙 제어부(120)로부터 UI 제어신호를 수신하고, 수신한 UI 제어신호에 기초하여 화면을 통해 표시되는 영상을 최대한 가리지 않고, 멀티 트랙을 화면 상에서 효율적으로 시각화할 수 있다. The display control unit 140 according to one embodiment receives a UI control signal from the multi-track control unit 120, and based on the received UI control signal, does not block the image displayed on the screen as much as possible and efficiently displays the multi-track on the screen. It can be visualized as

또한, 표시 제어부(140)는 화면을 통해 표시되는 영상 및 멀티 트랙과 함께, 기록 버튼, 기록 완료 버튼, 재생 버튼 및 정지 버튼 중 적어도 하나의 가상 버튼을 화면 상에 시각화할 수 있다. Additionally, the display control unit 140 may visualize on the screen at least one virtual button among a record button, a record completion button, a play button, and a stop button, along with the image and multi-track displayed on the screen.

구체적으로, 멀티 트랙 제어부(120)는 멀티 트랙 중 어느 하나의 트랙이 사용자 입력에 의해 활성화된 상태에서 기록 버튼에 대한 사용자 입력이 감지되면 활성화된 트랙에 대응되는 실시간 기록 데이터(즉, 실시간으로 기록 중인 영상/음성 데이터)를 생성할 수 있다. Specifically, when a user input to the record button is detected while any one of the multi-tracks is activated by a user input, the multi-track control unit 120 records real-time recording data (i.e., records in real time) corresponding to the activated track. video/audio data) can be created.

또한, 멀티 트랙 제어부(120)는 기록 버튼에 대한 사용자 입력이 감지된 이후에, 정지 버튼(또는 정지 버튼 + 기록 완료 버튼)에 대한 사용자 입력이 감지되거나, 정지 버튼에 대한 사용자 입력이 기설정된 임계 시간이 초과할 때까지 감지되지 않으면, 최초 기록 시점(0:00) 부터 정지 버튼에 대한 입력이 감지된 시간 또는 임계 시간까지 기록된 데이터를 기록 데이터(즉, 기록이 일시정지/완료된 영상 데이터 및/또는 음성 데이터)로 생성할 수 있다. In addition, after the user input to the record button is detected, the multi-track control unit 120 detects the user input to the stop button (or the stop button + recording completion button), or the user input to the stop button is set to a preset threshold. If it is not detected until the time expires, the data recorded from the time of the first recording (0:00) until the time the input to the stop button is detected or the threshold time is converted to recorded data (i.e. video data for which recording is paused/completed and /or voice data).

일측에 따르면, 기설정된 임계 시간은 비트 트랙의 총 재생 시간(즉, 비트 길이)일 수 있다. According to one side, the preset threshold time may be the total playback time (i.e., bit length) of the bit track.

구체적으로, 멀티 트랙 제어부(120)는 기설정된 비트 트랙의 비트 길이가 3분 40초인 경우에, 최대 3분 40초까지 단일 트랙에 대한 기록(녹음/녹화)을 수행할 수 있고, 하나의 트랙에 대해 3분 40초를 초과하여 기록이 진행이 되면 하나의 트랙에 하나의 파일(데이터)만이 생성될 수 있으며, 하나의 트랙에 대해 3분 40초 내에서 3번 나눠서 기록이 진행되면 하나의 트랙에 대해 3개의 파일(데이터)가 생성될 수 있다. Specifically, the multi-track control unit 120 can perform recording (recording/recording) on a single track for up to 3 minutes and 40 seconds when the bit length of the preset bit track is 3 minutes and 40 seconds, and one track If recording progresses beyond 3 minutes and 40 seconds, only one file (data) can be created for one track, and if recording progresses three times within 3 minutes and 40 seconds for one track, one file (data) can be created for one track. Three files (data) can be created for a track.

일측에 따르면, 입력부(110), 멀티 트랙 제어부(120) 및 표시 제어부(140)는 기록 제어부(130)를 통해 제어될 수 있다. 즉, 멀티 트랙 제어부(120)는 기록 제어부(130)를 통해 제어되어 실시간 기록 데이터 및/또는 기록 데이터를 생성할 수 있다.According to one side, the input unit 110, the multi-track control unit 120, and the display control unit 140 may be controlled through the recording control unit 130. That is, the multi-track control unit 120 can be controlled through the recording control unit 130 to generate real-time recorded data and/or recorded data.

한편, 표시 제어부(140)는 기록 버튼에 대한 사용자 입력이 감지되면, 기록 버튼에 대응되는 위치에 기록 버튼 대신 정지 버튼을 표시할 수 있으며, 이후 정지 버튼에 대한 사용자 입력이 감지되면, 정지 버튼에 대응되는 위치에 정지 버튼 대신 기록 버튼을 다시 표시할 수 있다. Meanwhile, when the display control unit 140 detects a user input to the record button, it can display a stop button instead of the record button at a position corresponding to the record button. Then, when a user input to the stop button is detected, the stop button is displayed. You can display the record button again instead of the stop button at the corresponding location.

또한, 표시 제어부(140)는 정지 버튼과 함께 기록 완료 버튼을 시각화할 수도 있다. Additionally, the display control unit 140 may visualize the recording completion button along with the stop button.

일실시예에 따른 멀티 트랙 제어부(120) 및 표시 제어부(140)는 이후 실시예 도 2를 통해 보다 구체적으로 설명하기로 한다. The multi-track control unit 120 and the display control unit 140 according to an embodiment will be described in more detail later with reference to FIG. 2 according to the embodiment.

일실시예에 따른 기록 제어부(130)는 화면에 표시되는 멀티 트랙 중 적어도 하나의 트랙에 대응되는 실시간 기록 데이터 또는 기록 데이터를 수신하고, 수신된 데이터에 영상 효과 및 음성 효과 중 적어도 하나의 효과를 적용할 수 있다. The recording control unit 130 according to one embodiment receives real-time recording data or recorded data corresponding to at least one track among multi-tracks displayed on the screen, and applies at least one of a video effect and a voice effect to the received data. It can be applied.

구체적으로, 기록 제어부(130)는 멀티 트랙에 대한 기록 과정 및 편집 과정 전반에 필요한 기능을 제공할 수도 있다. Specifically, the recording control unit 130 may provide functions necessary for the overall multi-track recording process and editing process.

이를 위해, 기록 제어부(130)는 오디오 매니저(AudioManager), 오디오 기록 매니저(AudioRecordManager), 카메라 뷰 매니저(CameraViewManager), 미디어 매니저(MediaManager) 및 비디오 뷰 매니저(VideoViewManager)를 포함할 수 있다.To this end, the recording control unit 130 may include an audio manager (AudioManager), an audio record manager (AudioRecordManager), a camera view manager (CameraViewManager), a media manager (MediaManager), and a video view manager (VideoViewManager).

구체적으로, 오디오 매니저는 음성 효과(Reverb, Delay, Distortion, Pitch Shift, Pitch correction과 같은 효과)와 함께 여러 트랙의 동시 재생을 지원하는 매니저로, 여기서 트랙은 동시에 N(여기서, N은 양의 정수)개까지 재생할 수 있다. Specifically, the audio manager is a manager that supports simultaneous playback of multiple tracks along with voice effects (effects such as Reverb, Delay, Distortion, Pitch Shift, and Pitch correction), where N tracks are simultaneously N (where N is a positive integer). ) can be played.

오디오 매니저는 음성 효과와 함께 음성 트랙을 재생하기 위해, 직접 PCM 데이터를 로딩하여 음성 효과를 입힌 데이터를 가공해서 재생되도록 제어할 수 있다. In order to play a voice track with voice effects, the audio manager can directly load PCM data and control the data with voice effects to be processed and played.

보다 구체적으로, 오디오 매니저는 음성 트랙에 음성 효과를 적용하기 위해, 음성트랙을 초기화하는 startSession 함수, 음성 트랙을 중지하고 해당 리소스를 반환하는 stopSession 함수, 음성 재생시 실제 사용자 단말의 스피커에서 출력되기까지 걸리는 딜레이 시간을 반환하는 getAudioDelay 함수, 선택한 음성 트랙에 음성 효과를 적용하는 setEffect 함수, 선택한 음성 트랙의 모든 트랙에 대해서 EQ를 설정하는 setEQ 함수를 이용할 수 있다. More specifically, in order to apply voice effects to the voice track, the audio manager uses a startSession function to initialize the voice track, a stopSession function to stop the voice track and return the corresponding resource, and a stopSession function to stop the voice track and return the corresponding resource, until the voice is output from the speaker of the actual user terminal when playing. You can use the getAudioDelay function, which returns the delay time, the setEffect function, which applies voice effects to the selected voice track, and the setEQ function, which sets the EQ for all tracks of the selected voice track.

또한, 오디오 매니저는 선택한 음성 트랙의 볼륨을 조절하는 setVolume 함수, 재생하고자 하는 음성 트랙 정보를 입력하는 setPlaylist 함수, 선택한 음성 트랙의 총재생 길이를 결정하는 setTotalDurationTime 함수, 음성 재생시 페이드-인(Fade-in), 페이드-아웃(Fade-out) 시간을 지정하는 setFadeTiming 함수, 음성 트랙의 시작 시간에 맞춰 음성을 재생하는 play 함수 및 현재 재생 중인 음성 트랙을 정지하는 stop 함수를 이용할 수 있다. In addition, the audio manager has a setVolume function that adjusts the volume of the selected voice track, a setPlaylist function that inputs the voice track information to be played, a setTotalDurationTime function that determines the total playback length of the selected voice track, and a fade-in (Fade-in) function that determines the total playback length of the selected voice track. in), the setFadeTiming function that specifies the fade-out time, the play function that plays the voice according to the start time of the voice track, and the stop function that stops the voice track currently playing.

오디오 기록 매니저는 영상에 대한 기록(녹화) 없이 음성만 기록(녹음)하기 위한 매니저로, 이를 위해 오디오 기록 매니저는 현재 마이크로 들어오는 음성을 현재 적용된 음성 효과와 함께 직접 들을 수 있게 에코(모니터링) 해주는 setEchoMode 함수, 음성 트랙에서 음성 기록을 시작하는 startAudioRecord 함수 및 음성 트랙에서 음성 녹음을 중지하는 stopAudioRecord 함수를 이용할 수 있다. The audio recording manager is a manager for recording (recording) only audio without recording (recording) video. To this end, the audio recording manager uses setEchoMode to echo (monitor) the voice currently coming into the microphone so that you can directly hear it along with the currently applied voice effect. You can use the functions, startAudioRecord function to start audio recording in an audio track, and stopAudioRecord function to stop audio recording in an audio track.

여기서, startAudioRecord 함수는 음성 트랙이 기록 중지 후 재 기록시 기존 음성 파일과 별도로 새로운 음성 파일을 생성하여 추가되도록 제어할 수 있다. Here, the startAudioRecord function can control the creation and addition of a new voice file separately from the existing voice file when the voice track is re-recorded after stopping recording.

카메라 뷰 매니저는 카메라에서 받은 화면을 쉐이더(Shader)와 함께 출력하고, 쉐이더 상태로 출력된 영상을 녹화하기 위한 매니저로, 이를 위해 카메라 뷰 매니저는 카메라를 실행하고 실시간 영상정보 및 실시간 음성정보를 받아오는 startSession 함수, 카메라를 종료하고 그와 관련된 모든 동작을 종료하는 endSession 함수, 전면/후면카메라를 설정하는 setCameraDirection 함수, 카메라 플래쉬를 설정하는 setFlashLight 함수, 카메라 뷰의 쉐이더를 결정하고, 설정된 영상 효과를 적용하는 setShader 함수, 카메라의 줌을 설정하는 setZoom 함수, 현 재 카메라 뷰에 시각화되는 실시간 영상 정보 및 음성 정보를 녹화하는 startVideoRecord 함수 및 녹화를 종료하는 stopVideoRecord 함수를 이용할 수 있다. The camera view manager is a manager that outputs the screen received from the camera with a shader and records the video output in the shader state. To this end, the camera view manager runs the camera and receives real-time video information and real-time audio information. The following startSession function, the endSession function that terminates the camera and all actions related to it, the setCameraDirection function that sets the front/rear camera, the setFlashLight function that sets the camera flash, determines the shader of the camera view, and applies the set video effects. You can use the setShader function that sets the camera's zoom, the setZoom function that sets the camera's zoom, the startVideoRecord function that records real-time video and audio information visualized in the current camera view, and the stopVideoRecord function that ends recording.

여기서, 멀티 트랙 중 시각화 되는 영상 트랙은 하나이나, stopVideoRecord 함수는 기록 중지 후 재 기록시, 기존 영상 파일에 이어서 녹화하지 않고, 새로운 비디오 파일을 생성하여 추가할 수 있다. Here, there is only one video track visualized among the multi-tracks, but the stopVideoRecord function allows you to create and add a new video file instead of continuing recording with the existing video file when re-recording after stopping recording.

미디어 매니저는 영상 트랙 및 음성 트랙에 대응하여 기록된 영상 파일과 음성 파일로부터 정보를 가져오기 위한 매니저로, 이를 위해 미디어 매니저는 영상 파일에서 영상의 길이를 가져오는 getVideoFileDescription 함수, 여러 개의 영상 파일에서 썸네일 이미지 하나를 문자열로 반환하는 getVideoPreviewBase64 함수, 여러 개의 영상 파일에서 썸네일 이미지 여러장을 문자열 목록으로 반환하는 getVideoPreviewListBase64 함수, 음성파일에서 음성의 길이 정보를 가져오는 getAudioFileDescription 함수 및 음성파일에서 PCM 데이터를 가져오는 getAudioVisualPCMData 함수를 이용할 수 있다. The media manager is a manager for retrieving information from video and audio files recorded in response to the video track and audio track. To this end, the media manager uses the getVideoFileDescription function to retrieve the video length from the video file and thumbnails from multiple video files. getVideoPreviewBase64 function, which returns one image as a string, getVideoPreviewListBase64 function, which returns multiple thumbnail images from multiple video files as a list of strings, getAudioFileDescription function, which retrieves audio length information from an audio file, and getAudioVisualPCMData, which retrieves PCM data from an audio file. You can use functions.

비디오 뷰 매니저는 기록된 여러 개의 영상 파일을 지정된 쉐이더와 함께 재생하기 위한 매니저로, 이를 위해 비디오 뷰 매니저는 영상 트랙의 영상 파일 목록을 저장하는 setPlaylist 함수, 영상 재생 시 페이드-인 및 페이드-아웃 시간을 저장하는 setFadeTiming 함수, 시작 시간에 맞춰 영상을 재생하는 play 함수, 재생 중인 영상을 종료하는 stop 함수, 여러 개의 영상 파일 목록을 영상 검색에 맞춰 해당 파일 및 시간으로 설명/재생하는 seek 함수 및 비디오 뷰의 쉐이더를 설정하는 setShader 함수를 이용할 수 있다. The video view manager is a manager for playing multiple recorded video files with a specified shader. For this purpose, the video view manager uses the setPlaylist function to store the list of video files in the video track, and the fade-in and fade-out times when playing video. setFadeTiming function to save the video, play function to play the video according to the start time, stop function to end the video being played, seek function to describe/play a list of multiple video files with the corresponding files and time according to the video search, and video view. You can use the setShader function to set the shader.

여기서, 영상 트랙은 단일 트랙이나 setPlaylist 함수는 기록 중지 후 재 기록 시 기존 영상 파일에 이어서 기록하지 않고, 새로운 비디오 파일을 생성하여 추가할 수 있다. 또한, setShader 함수는 영상의 LUT(Look-Up Table) 필터를 포함한 여러 영상 효과 필터에 적용될 수 있다. Here, the video track is a single track, but the setPlaylist function can create and add a new video file instead of continuing recording with the existing video file when re-recording after stopping recording. Additionally, the setShader function can be applied to several image effect filters, including LUT (Look-Up Table) filters for images.

한편, 멀티 트랙 제어부(120)는 기록 제어부(130)를 통해 녹화/편집 처리된 데이터를 인코딩할 수 있으며, 이를 위해 인코딩 매니저(EncodingManager)를 포함할 수 있다. Meanwhile, the multi-track control unit 120 can encode data recorded/edited through the recording control unit 130, and may include an encoding manager (EncodingManager) for this purpose.

인코딩 매니저는 프로젝트 구성 정보(Project.json)에 저장된 프로젝트 정보를 바탕으로 최종 영상을 생성하기 위한 매니저로, 이를 위해 인코딩 매니저는 Project.json 파일을 이용하여 인코딩을 시작하는 encodeProject 함수 및 인코딩을 중단하는 stop 함수를 이용할 있으며, 여기서 Project.json 파일은 녹화 화면 진입시 생성될 수 있다. The encoding manager is a manager for creating the final video based on the project information stored in the project configuration information (Project.json). To this end, the encoding manager uses the encodeProject function to start encoding and the encodeProject function to stop encoding using the Project.json file. You can use the stop function, where the Project.json file can be created when entering the recording screen.

일측에 따르면, 디지털 컨텐츠 생성장치(100)를 이용한 멀티 트랙의 기록 과정에서, 사용자 단말의 화면 상에 녹화 화면이 실행된 후에 녹화 화면이 로딩되면, 카메라 뷰 매니저는 카메라를 활성화하고, 오디오 매니저는 모든 트랙의 볼륨, EQ 및 음성 효과를 초기화할 수 있다. According to one side, during the multi-track recording process using the digital content creation device 100, when the recording screen is loaded after the recording screen is executed on the screen of the user terminal, the camera view manager activates the camera and the audio manager You can reset the volume, EQ, and voice effects of all tracks.

다음으로, 화면 상에서 영상 트랙이 추가/변경되면, 카메라 뷰 매니저는 카메라의 설정치(방향, 줌 등)을 초기화하고, 오디오 매니저는 해당 트랙의 볼륨, EQ, 음성 효과를 초기화할 수 있으며, 화면 상에서 음성 트랙이 추가/변경되면, 오디오 매니저는 해당 트랙의 볼륨, EQ, 음성 효과를 초기화할 수 있다.Next, when a video track is added/changed on the screen, the camera view manager can initialize the camera settings (direction, zoom, etc.), and the audio manager can initialize the volume, EQ, and voice effects of the track. When a voice track is added/changed, the audio manager can reset the volume, EQ, and voice effects of that track.

다음으로, 화면 상에서 영상 트랙에 대한 기록이 수행되면, 카메라 뷰 매니저는 영상/음성 데이터를 기록하고, 오디오 매니저는 해당 트랙의 볼륨, EQ, 음성 효과를 초기화할 수 있다.Next, when the video track is recorded on the screen, the camera view manager records video/audio data, and the audio manager can initialize the volume, EQ, and voice effects of the track.

다음으로, 화면 상에서 음성 트랙에 대한 녹음이 수행되면, 오디오 기록 매니저에서 음성 데이터를 기록하고, 오디오 매니저는 해당 트랙의 볼륨, EQ, 음성 효과를 초기화할 수 있다.Next, when recording of the voice track is performed on the screen, the voice data is recorded in the audio recording manager, and the audio manager can initialize the volume, EQ, and voice effects of the track.

다음으로, 화면 상에서 영상 효과가 추가/변경되면, 카메라 뷰 매니저는 영상 데이터에 영상 효과를 적용하고, 화면 상에서 음성 효과가 추가/변경되면, 오디오 기록 매니저에서 음성 데이터에 대한 모니터링을 수행하고, 오디오 매니저에서 음성 트랙의 음성 효과를 초기화 및 변경할 수 있다. Next, when a video effect is added/changed on the screen, the camera view manager applies the video effect to the video data, and when a voice effect is added/changed on the screen, the audio recording manager performs monitoring for the audio data and audio You can reset and change the voice effects of the voice track in the manager.

일측에 따르면, 디지털 컨텐츠 생성장치(100)를 이용한 멀티 트랙의 편집 과정에서, 사용자 단말의 화면 상에 편집 화면이 실행되면, 미디어 매니저는 각 트랙별 영상/음성 파일 정보를 불러올 수 있다. According to one side, during the multi-track editing process using the digital content creation device 100, when the editing screen is executed on the screen of the user terminal, the media manager can load video/audio file information for each track.

다음으로, 화면 상에서 편집 화면이 로딩되면, 비디오 뷰 매니저는 영상을 활성화시킬 수 있으며, 화면 상에서 영상에 스티커/텍스트가 추가되면, 비디오 뷰 매니저는 비디오 텍스쳐를 추가할 수 있다. Next, when the editing screen is loaded on the screen, the video view manager can activate the video, and when stickers/text are added to the video on the screen, the video view manager can add video texture.

다음으로, 화면 상에서 영상의 길이가 조절되면, 비디오 뷰 매니저는 영상 미리보기를 제공하고, 미디어 매니저는 대응되는 영상 파일 정보를 불러올 수 있다. Next, when the length of the video on the screen is adjusted, the video view manager provides a video preview, and the media manager can retrieve the corresponding video file information.

다음으로, 화면 상에서 영상의 페이드-인/페이드-아웃 효과가 적용되면, 비디오 뷰 매니저는 영상 페이드 효과의 미리보기를 제공하고, 미디어 매니저는 대응되는 영상 파일 정보를 불러올 수 있다.Next, when the fade-in/fade-out effect of the video is applied on the screen, the video view manager provides a preview of the video fade effect, and the media manager can retrieve the corresponding video file information.

다음으로, 화면 상에서 음성의 페이드-인/페이드-아웃 효과가 적용되면, 오디오 매니저는 음성 페이드 효과 미리듣기를 제공하고, 미디어 매니저는 대응되는 음성 파일 정보를 불러올 수 있다.Next, when the fade-in/fade-out effect of the voice is applied on the screen, the audio manager provides a preview of the voice fade effect, and the media manager can load the corresponding voice file information.

다음으로, 화면 상에서 EQ가 적용되면, 오디오 매니저는 음성 EQ 미리듣기를 제공하고, 미디어 매니저는 대응되는 음성 파일 정보를 불러올 수 있다.Next, when EQ is applied on the screen, the audio manager provides a preview of the voice EQ, and the media manager can load the corresponding voice file information.

다음으로, 화면 상에서 영상 커버 이미지 선택이 수행되면, 비디오 뷰 매니저는 대응되는 영상 미리보기를 제공하고, 미디어 매니저는 영상 미리보기 중에서 사용자의 입력을 통해 선택된 하나의 이미지 정보를 불러올 수 있다.Next, when a video cover image is selected on the screen, the video view manager provides a corresponding video preview, and the media manager can retrieve information about one image selected through the user's input from the video preview.

일실시예에 따른 기록 제어부(130)는 이후 실시예 도 3 내지 도 4를 통해 보다 구체적으로 설명하기로 한다. The recording control unit 130 according to one embodiment will be described in more detail later with reference to FIGS. 3 and 4 according to the embodiment.

도 2는 제1 실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다. Figure 2 is a diagram for explaining a digital content creation device according to the first embodiment.

도 2를 참조하면, 제1 실시예에 따른 디지털 컨텐츠 생성장치(200)는 비트 트랙, 영상 트랙 및 음성 트랙으로 구성되는 멀티 트랙에 대한 기록 동작을 보다 효율적으로 수행할 수 있다. Referring to FIG. 2, the digital content generating apparatus 200 according to the first embodiment can more efficiently perform a recording operation on a multi-track consisting of a bit track, a video track, and an audio track.

또한, 디지털 컨텐츠 생성장치(200)는 화면을 통해 표시되는 영상을 최대한 가리지 않고, 멀티 트랙을 화면 상에 효율적으로 시각화할 수 있다. Additionally, the digital content creation device 200 can efficiently visualize multi-tracks on the screen without blocking the images displayed on the screen as much as possible.

또한, 디지털 컨텐츠 생성장치(200)는 멀티 트랙을 가이드 트랙과 촬영 트랙으로 구분하고, 구분된 가이드 트랙과 촬영 트랙을 화면 상에 동시에 시각화하여 사용자의 편의성을 향상시킬 수 있다. In addition, the digital content creation device 200 can improve user convenience by dividing the multi-track into a guide track and a shooting track and visualizing the divided guide track and the shooting track simultaneously on the screen.

이를 위해, 디지털 컨텐츠 생성장치(200)는 멀티 트랙 제어부(210) 및 표시 제어부(220)를 포함할 수 있다. 즉, 도 2를 통해 설명하는 멀티 트랙 제어부(210) 및 표시 제어부(220)는 도 1을 통해 설명한 일실시예에 따른 디지털 컨텐츠 생성장치의 멀티 트랙 제어부 및 표시 제어부일 수 있다. To this end, the digital content creation device 200 may include a multi-track control unit 210 and a display control unit 220. That is, the multi-track control unit 210 and the display control unit 220 explained with reference to FIG. 2 may be the multi-track control unit and the display control unit of the digital content creation device according to the embodiment described with reference to FIG. 1 .

제1 실시예에 따른 멀티 트랙 제어부(210)는 사용자 입력에 기초하여 UI 제어신호를 생성할 수 있다. The multi-track control unit 210 according to the first embodiment may generate a UI control signal based on user input.

또한, 표시 제어부(220)는 UI 제어신호에 기초하여 화면의 제1 영역에 비트 트랙, 영상 트랙 및 음성 트랙 중 적어도 둘 이상의 멀티 트랙을 표시하고, 화면의 제2 영역에 기록 버튼을 표시할 수 있다. Additionally, the display control unit 220 may display at least two multi-tracks among a bit track, video track, and audio track in a first area of the screen based on the UI control signal, and display a record button in a second area of the screen. there is.

예를 들면, 표시 제어부(220)는 사용자 단말의 화면 상에서 제1 영역 및 제1 영역의 하단에 배치되는 제2 영역을 설정할 수 있다. For example, the display control unit 220 may set a first area and a second area disposed below the first area on the screen of the user terminal.

또한, 멀티 트랙은 영상 트랙 및 음성 트랙 중 적어도 하나의 트랙이 비트 트랙에 동기화될 수 있다. 다시 말해, 멀티 트랙은 비트 트랙의 시간 정보에 기초하여 나머지 트랙들이 동기화될 수 있다. Additionally, in multi-track, at least one of the video track and the audio track may be synchronized to the bit track. In other words, in multi-track, the remaining tracks can be synchronized based on the time information of the bit track.

일측에 따르면, 멀티 트랙 제어부(210)는 멀티 트랙을 기록 작업이 완료된 가이드 트랙과 기록 작업이 가능한 촬영 트랙으로 구분하고, 가이드 트랙을 제1 영역에 구비된 제1 서브영역에 표시하며, 촬영 트랙을 제1 영역에 구비된 제2 서브영역에 표시하기 위한 UI 제어신호를 생성할 수 있다. According to one side, the multi-track control unit 210 divides the multi-track into a guide track for which recording work has been completed and a shooting track for which recording work is possible, displays the guide track in the first sub-area provided in the first area, and displays the shooting track. A UI control signal for displaying in the second sub-area provided in the first area can be generated.

예를 들면, 가이드 트랙에서는 선택된 트랙의 진행도를 표시하고, 촬영 트랙에서는 기록 진행 시, 영상 트랙의 경우에는 프리뷰, 음성 트랙의 경우에는 기록된 음성의 파형을 표시할 수 있다. For example, the guide track can display the progress of the selected track, the shooting track can display the recording progress, the video track can display a preview, and the audio track can display the waveform of the recorded voice.

일측에 따르면, 멀티 트랙 제어부(210)는 영상 트랙 및 음성 트랙 중 기록된 데이터의 길이가 기설정된 임계 시간 이상인 트랙과, 비트 트랙을 가이드 트랙으로 구분할 수 있다. According to one side, the multi-track control unit 210 may distinguish between the video track and the audio track, the track whose recorded data length is longer than a preset threshold time, and the bit track as a guide track.

또한, 멀티 트랙 제어부(210)는 영상 트랙 및 음성 트랙 중 사용자 입력에 따른 기록 완료 신호가 수신된 트랙과, 비트 트랙을 가이드 트랙으로 구분할 수도 있다. Additionally, the multi-track control unit 210 may distinguish between the video track and the audio track, a track for which a recording completion signal according to a user input has been received, and a bit track as a guide track.

즉, 비트 트랙은 사용자 입력에 따라 가이드 트랙이 선택됨과 동시에 제1 영역에 고정적으로 표시될 수 있다. That is, the bit track can be fixedly displayed in the first area at the same time as the guide track is selected according to the user input.

구체적으로, 멀티 트랙 제어부(210)는 영상 트랙 및 음성 트랙 중 어느 하나의 트랙이 활성화되고, 화면 상에 표시된 기록 버튼에 대한 사용자 입력이 감지된 이후에, 정지 버튼에 대한 사용자 입력이 기설정된 임계 시간이 초과할 때까지 감지되지 않거나, 화면 상에 표시된 기록 완료 버튼에 대한 사용자 입력이 감지되면, 활성화된 트랙을 가이드 트랙으로 구분될 수 있다. Specifically, after any one of the video track and the audio track is activated and the user input to the record button displayed on the screen is detected, the multi-track control unit 210 determines that the user input to the stop button is set to a preset threshold. If it is not detected until the time expires, or if a user input for the recording completion button displayed on the screen is detected, the activated track may be classified as a guide track.

또한, 멀티 트랙 제어부(210)는 제1 영역을 제1 서브영역과 제1 서브영역의 하단에 배치되는 제2 서브영역으로 구분하고, 제1 서브영역에 적어도 하나 이상의 가이드 트랙을 표시하며, 제2 서브영역에 적어도 하나의 촬영 트랙을 표시하기 위한 UI 제어신호를 생성할 수 있다. Additionally, the multi-track control unit 210 divides the first area into a first sub-area and a second sub-area disposed at the bottom of the first sub-area, displays at least one guide track in the first sub-area, and 2 A UI control signal can be generated to display at least one shooting track in the sub-area.

일측에 따르면, 제1 서브 영역은 가이드 트랙으로 구분된 N개(여기서, N은 양의 정수)의 트랙 중 제1 가이드 트랙을 표시하는 제1 트랙 영역과, 제1 가이드 트랙에 대응되는 아이콘이 표시되는 제1 아이콘 영역을 포함할 수 있다. According to one side, the first sub-area includes a first track area that displays the first guide track among N tracks divided by guide tracks (where N is a positive integer), and an icon corresponding to the first guide track. It may include a displayed first icon area.

또한, 제2 서브 영역은 촬영 트랙으로 구분된 M개(여기서, M은 양의 정수)의 트랙 중 제1 촬영 트랙을 표시하는 제2 트랙 영역과, 제1 촬영 트랙에 대응되는 아이콘이 표시되는 제2 아이콘 영역을 포함할 수 있다. In addition, the second sub-area includes a second track area displaying the first shooting track among M tracks divided into shooting tracks (where M is a positive integer), and an icon corresponding to the first shooting track being displayed. It may include a second icon area.

일측에 따르면, 멀티 트랙 제어부(210)는 제1 아이콘 영역에 대한 사용자 입력이 감지되면, 제1 트랙 영역에 가이드 트랙으로 구분된 N개의 트랙 중 제2 가이드 트랙을 표시하도록 제어하는 UI 제어신호를 생성할 수 있다. According to one side, when a user input to the first icon area is detected, the multi-track control unit 210 sends a UI control signal to control the display of a second guide track among N tracks divided by guide tracks in the first track area. can be created.

또한, 멀티 트랙 제어부(210)는 제2 아이콘 영역에 대한 사용자 입력이 감지되면, 제2 트랙 영역에 촬영 트랙으로 구분된 M개의 트랙 중 제2 촬영 트랙을 표시하도록 제어하는 UI 제어신호를 생성할 수 있다. In addition, when a user input to the second icon area is detected, the multi-track control unit 210 generates a UI control signal to control the display of the second shooting track among the M tracks divided into shooting tracks in the second track area. You can.

구체적으로, 제1 서브 영역 및 제2 서브 영역 각각은 제1 내지 제N 가이드 트랙 중 제1 가이드 트랙과, 제1 내지 제M 촬영 트랙 중 제1 촬영 트랙만이 화면 내에 표시될 수 있으며, 제1 서브 영역 및 제2 서브 영역 각각에 구비된 제1 아이콘 영역 및 제2 아이콘 영역에 대한 사용자 입력이 감지될 때마다 화면에 표시되는 트랙을 순차적으로 변경할 수 있다. Specifically, in each of the first sub-area and the second sub-area, only the first guide track among the first to N-th guide tracks and the first shooting track among the first to M-th shooting tracks may be displayed on the screen, and Whenever a user input is detected for the first icon area and the second icon area provided in each of the first sub-area and the second sub-area, the track displayed on the screen can be sequentially changed.

다시 말해, 제1 아이콘 영역에 대한 사용자 입력이 감지될 때마다 제1 트랙 영역에는 제2 내지 제N 가이드 트랙이 순차적으로 표시되고, 제2 아이콘 영역에 대한 사용자 입력이 감지될 때마다 제2 트랙 영역에는 제2 내지 제M 촬영 트랙이 순차적으로 표시될 수 있다. In other words, whenever a user input to the first icon area is detected, the 2nd to Nth guide tracks are sequentially displayed in the first track area, and whenever a user input to the second icon area is detected, the second track is displayed sequentially. The second to M shooting tracks may be sequentially displayed in the area.

또한, 제N 가이드 트랙이 제1 트랙 영역에 표시된 상태에서 제1 아이콘 영역에 대한 사용자 입력이 감지되면 제1 트랙 영역에는 다시 제1 가이드 트랙이 표시되고, 제M 촬영 트랙이 제2 트랙 영역에 표시된 상태에서 제2 아이콘 영역에 대한 사용자 입력이 감지되면 제2 트랙 영역에는 다시 제1 촬영 트랙이 표시될 수 있다. In addition, when a user input to the first icon area is detected while the Nth guide track is displayed in the first track area, the first guide track is displayed again in the first track area, and the Mth shooting track is displayed in the second track area. If a user input to the second icon area is detected in the displayed state, the first shooting track may be displayed again in the second track area.

예를 들면, 제1 내지 제N 가이드 트랙과 제1 내지 제M 촬영 트랙 각각은 생성된 시간에 기초하여 순차적으로 넘버링될 수 있다. For example, each of the first to Nth guide tracks and the first to Mth shooting tracks may be sequentially numbered based on the creation time.

한편, 표시 제어부(220)는 가이드 트랙에 대한 사용자 입력이 감지되면, 화면의 제2 영역에 재생 버튼을 표시할 수 있다. Meanwhile, when the display control unit 220 detects a user input for the guide track, it can display a play button in the second area of the screen.

구체적으로, 표시 제어부(220)는 가이드 트랙이 활성화되면, 제2 영역에서 기록 버튼에 대응되는 위치에 기록 버튼 대신 재생 버튼을 표시할 수 있으며, 촬영 트랙이 활성화되면, 제2 영역에 기록 버튼을 그대로 표시할 수 있다. Specifically, when the guide track is activated, the display control unit 220 may display a play button instead of a record button at a position corresponding to the record button in the second area, and when the shooting track is activated, the display control unit 220 may display a play button in the second area. It can be displayed as is.

일측에 따르면, 멀티 트랙 제어부(210)는 기록 버튼에 대한 사용자 입력 또는 기설정된 어플의 실행을 위한 사용자 입력이 감지되면, 영상 트랙 및 제1 음성 트랙 중 적어도 하나의 트랙과 비트 트랙을 제1 영역에 표시하기 위한 UI 제어신호를 생성할 수 있다. According to one side, when a user input for a record button or a user input for executing a preset application is detected, the multi-track control unit 210 stores at least one of the video track and the first audio track and the bit track in the first area. You can generate UI control signals for display.

예를 들면, 기설정된 어플은 영상/음성에 대한 기록 기능을 제공하는 영상 공유 어플로, 디지털 컨텐츠 생성장치(200)의 동작에 기초하여 어플 실행 시 제1 영역에 멀티 트랙을 표시하고, 제2 영역에 기록 버튼을 표시할 수 있다. For example, the preset application is a video sharing application that provides a recording function for video/audio, and when running the application based on the operation of the digital content creation device 200, multi-tracks are displayed in the first area and the second area is displayed. You can display a record button in the area.

구체적으로, 멀티 트랙 제어부(210)는 사용자 입력을 통해 기설정된 어플이 실행되면, 하나의 영상 트랙 및 하나의 음성 트랙을 촬영 트랙으로 생성할 수 있다. Specifically, when a preset application is executed through user input, the multi-track control unit 210 can create one video track and one audio track as a shooting track.

또한, 멀티 트랙 제어부(210)는 사용자 입력을 통해 기설정된 어플이 실행된 후, 최초에 기록 버튼에 대한 사용자 입력이 감지되면, 하나의 영상 트랙 및 하나의 음성 트랙을 촬영 트랙으로 생성할 수도 있다.In addition, the multi-track control unit 210 may generate one video track and one audio track as a recording track when a user input to the record button is initially detected after executing a preset application through user input. .

또한, 멀티 트랙 제어부(210)는 사용자의 입력에 기초하여 복수의 비트 중 어느 하나의 비트를 선택하여 가이드 트랙으로 생성할 수 있으며, 사용자 입력을 통해 기설정된 어플이 실행되면 기설정된 비트 트랙을 가이드 트랙으로 자동 생성할 수도 있다. In addition, the multi-track control unit 210 can select one of a plurality of bits based on the user's input and create it as a guide track, and when a preset application is executed through user input, the preset bit track is guided. It can also be automatically created as a track.

일측에 따르면, 멀티 트랙 제어부(210)는 영상 트랙 및 제1 음성 트랙 중 적어도 하나의 트랙과 비트 트랙이 제1 영역에 표시되고, 기록 버튼에 대한 사용자 입력이 감지되면, 제2 음성 트랙을 제1 영역에 표시하기 위한 UI 제어신호를 생성할 수 있다. According to one side, when at least one of the video track and the first audio track and the bit track are displayed in the first area and a user input to the record button is detected, the multi-track control unit 210 selects the second audio track. UI control signals for display in area 1 can be generated.

이후, 멀티 트랙 제어부(210)는 기록 버튼에 대한 사용자 입력이 입력될 때마다 제1 영역 상에 제3 내지 제i 음성 트랙(여기서, i는 양의 정수)을 생성하여 표시하기 위한 UI 제어신호를 생성할 수 있다. Thereafter, the multi-track control unit 210 generates and displays the third to i voice tracks (where i is a positive integer) on the first area whenever a user input to the record button is input. can be created.

즉, 제1 영역에는 하나의 비트 트랙, 하나의 영상 트랙 및 i개의 음성 트랙이 표시될 수 있다. That is, one bit track, one video track, and i audio tracks can be displayed in the first area.

일측에 따르면, 멀티 트랙 제어부(210)는 멀티 트랙 중 어느 하나의 트랙의 터치 동작에 따른 사용자 입력이 1회 감지되면, 어느 하나의 트랙이 활성화 되도록 제어하는 UI 제어신호를 생성할 수 있다. According to one side, the multi-track control unit 210 may generate a UI control signal that controls one of the tracks to be activated when a user input according to a touch operation of one of the multi-tracks is detected once.

또한, 멀티 트랙 제어부(210)는 어느 하나의 트랙의 터치 동작에 따른 사용자 입력이 2회 감지되면, 어느 하나의 트랙에 대한 편집 메뉴를 표시하기 위한 UI 제어신호를 생성할 수 있다. Additionally, when a user input according to a touch operation of one track is detected twice, the multi-track control unit 210 may generate a UI control signal to display an edit menu for one track.

또한, 멀티 트랙 제어부(210)는 기설정된 입력시간 동안 지속되는 어느 하나의 트랙의 터치 동작에 따른 사용자 입력이 감지되면, 어느 하나의 트랙에 대한 트랙 옵션 메뉴를 표시하기 위한 UI 제어신호를 생성할 수 있다. In addition, when the multi-track control unit 210 detects a user input according to a touch operation of one track that lasts for a preset input time, the multi-track control unit 210 generates a UI control signal to display a track option menu for one track. You can.

구체적으로, 멀티 트랙 제어부(210)는 멀티 트랙 중 어느 하나의 트랙이 짧게 한번 터치되면 어느 하나의 트랙을 활성화하고, 어느 하나의 트랙이 짧게 두번 터치되면 어느 하나의 트랙에 대한 편집 기능을 제공할 수 있으며, 어느 하나의 트랙이 길게 터치되면 트랙 옵션 기능을 제공할 수 있다. Specifically, the multi-track control unit 210 activates one track when one of the multi-tracks is briefly touched once, and provides an editing function for one track when one track is briefly touched twice. When one track is touched and held, a track option function can be provided.

예를 들면, 어느 하나의 트랙에 대한 편집 메뉴는 오디오 FX 기능, 트랙 브레이크 기능, 볼륨 제어 기능 및 트랙 초기화 기능 중 적어도 하나의 기능을 포함할 수 있다. For example, the edit menu for one track may include at least one of an audio FX function, a track break function, a volume control function, and a track initialization function.

또한, 트랙 옵션 기능은 트랙 삭제 기능 및 트랙 복제 기능 중 적어도 하나의 기능을 포함할 수 있다. Additionally, the track option function may include at least one of a track deletion function and a track duplication function.

한편, 표시 제어부(220)는 영상 트랙에 대한 사용자 입력에 기초하여, 영상 트랙에 대응되는 기록 동작 또는 재생 동작이 수행되면, 화면에 기록 동작 또는 재생 동작에 따른 영상 데이터를 표시하되, 멀티 트랙이 오버랩되어 표시되도록 제어할 수 있다. Meanwhile, when a recording operation or playback operation corresponding to a video track is performed based on a user input for a video track, the display control unit 220 displays video data according to the recording operation or playback operation on the screen, but multi-track You can control the display to overlap.

다시 말해, 표시 제어부(220)는 화면을 통해 표시되는 영상을 최대한 가리지 않고, 멀티 트랙을 화면 상에 효율적으로 시각화할 수 있다. In other words, the display control unit 220 can efficiently visualize multi-tracks on the screen without blocking the image displayed on the screen as much as possible.

제1 실시예에 따른 디지털 컨텐츠 생성장치(200)는 이후 실시예 도 5 내지 도 9를 통해 보다 구체적으로 설명하기로 한다. The digital content creation device 200 according to the first embodiment will be described in more detail with reference to FIGS. 5 to 9 below.

도 3은 제2 실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다.Figure 3 is a diagram for explaining a digital content creation device according to a second embodiment.

도 3을 참조하면, 제2 실시예에 따른 디지털 컨텐츠 생성장치(300)는 비트 트랙, 영상 트랙 및 음성 트랙으로 구성되는 멀티 트랙에 대한 기록 동작을 보다 효율적으로 수행할 수 있다.Referring to FIG. 3, the digital content generating apparatus 300 according to the second embodiment can more efficiently perform a recording operation on a multi-track consisting of a bit track, a video track, and an audio track.

또한, 디지털 컨텐츠 생성장치(300)는 멀티 트랙 각각에 대응되는 데이터에 실시간으로 영상 효과 및 음성 효과를 적용할 수 있다. Additionally, the digital content creation device 300 can apply video effects and audio effects to data corresponding to each multi-track in real time.

이를 위해, 디지털 컨텐츠 생성장치(300)는 데이터 수신부(310), 데이터 관리부(320) 및 멀티 트랙 제어부(330)를 포함할 수 있다. 즉, 도 3을 통해 설명하는 데이터 수신부(310) 및 데이터 관리부(320)는 도 1을 통해 설명한 일실시예에 따른 디지털 컨텐츠 생성장치의 기록 제어부에 포함될 수 있고, 멀티 트랙 제어부(330)는 일실시예에 따른 디지털 컨텐츠 생성장치의 멀티 트랙 제어부일 수 있다. To this end, the digital content creation device 300 may include a data reception unit 310, a data management unit 320, and a multi-track control unit 330. That is, the data reception unit 310 and the data management unit 320 described with reference to FIG. 3 may be included in the recording control section of the digital content creation device according to the embodiment described with reference to FIG. 1, and the multi-track control section 330 is a It may be a multi-track control unit of a digital content creation device according to an embodiment.

제2 실시예에 따른 데이터 수신부(310)는 화면에 표시되는 멀티 트랙 중 적어도 하나의 트랙에 대응되는 실시간 기록 데이터를 수신할 수 있다. The data receiver 310 according to the second embodiment can receive real-time recorded data corresponding to at least one track among the multi-tracks displayed on the screen.

예를 들면, 멀티 트랙은 비트 트랙, 영상 트랙 및 음성 트랙 중 화면에 표시되는 적어도 둘 이상의 트랙을 포함할 수 있다. For example, a multi-track may include at least two tracks displayed on the screen among a bit track, video track, and audio track.

또한, 실시간 기록 데이터는 영상 입력 수단을 통해 실시간으로 기록되고 있는 영상 데이터 및 음성 입력 수단을 통해 실시간으로 기록되고 있는 음성 데이터 중 어느 하나의 데이터를 포함할 수 있다. Additionally, real-time recorded data may include any one of video data being recorded in real time through a video input means and audio data being recorded in real time through an audio input means.

제2 실시예에 따른 데이터 관리부(320)는 기설정된 영상 효과 및 음성 효과 중 적어도 하나의 효과를 실시간 기록 데이터에 적용할 수 있다. The data management unit 320 according to the second embodiment may apply at least one of preset video effects and audio effects to real-time recorded data.

예를 들면, 기설정된 영상 효과는 색상 필터 효과 및 증강현실(AR) 스티커 효과 중 적어도 하나의 효과를 포함하고, 기설정된 음성 효과는 리볼브(reverb) 효과, 디스토션(distortion) 효과, 딜레이(delay) 효과, 피치 조정(picth correction) 효과 및 피치 시프트(pitch shift) 효과 중 적어도 하나의 효과를 포함할 수 있다. For example, the preset video effect includes at least one of a color filter effect and an augmented reality (AR) sticker effect, and the preset sound effect includes a revolve effect, a distortion effect, and a delay effect. ) effect, a pitch correction effect, and a pitch shift effect.

일측에 따르면, 화면은 멀티 트랙이 표시되는 제1 영역과, 제1 영역의 하단에 배치되고 기록 버튼, 기록 완료 버튼, 재생 버튼 및 정지 버튼 중 적어도 하나의 가상 버튼이 표시되는 제2 영역 및 제2 영역의 하단에 배치되고 제1 영역에 표시된 멀티 트랙 중 활성화된 어느 하나의 트랙에 대한 정보를 표시하는 제3 영역을 포함할 수 있다. According to one side, the screen includes a first area where multi-tracks are displayed, a second area disposed at the bottom of the first area and displaying at least one virtual button of a record button, a record completion button, a play button, and a stop button, and a second area where the multi-track is displayed. It is disposed at the bottom of area 2 and may include a third area that displays information about one of the activated tracks among the multi-tracks displayed in the first area.

구체적으로, 제1 영역에 표시된 비트 트랙이 짧게 두번 터치되면, 제3 영역에는 비트 브레이크 아이콘, 볼륨 아이콘 및 해당 세션에서 작업한 편집 내용을 초기화하는 초기화 아이콘 중 적어도 하나의 아이콘이 표시될 수 있으며, 이후 제3 영역에 표시된 비트 브레이크 아이콘 및 볼륨 아이콘 중 어느 하나의 아이콘이 터치되면 터치된 아이콘의 효과를 적용하기 위한 세부 편집 기능이 제2 영역에 표시될 수 있다. Specifically, when the beat track displayed in the first area is briefly touched twice, at least one icon among a beat break icon, a volume icon, and a reset icon that initializes the edits worked in the session may be displayed in the third area, Afterwards, when any one of the beat break icon and the volume icon displayed in the third area is touched, a detailed editing function for applying the effect of the touched icon may be displayed in the second area.

예를 들면, 비트 브레이크 아이콘이 터치되면, 제2 영역에는 기록 버튼이 표시되고, 이후 제1 영역에 표시된 트랙에 대한 스와이프 동작 및 기록 버튼에 대한 사용자 입력을 통해 비트 트랙에서 원하는 구간의 비트를 삭제할 수 있다. For example, when the beat break icon is touched, a record button is displayed in the second area, and then the beat of the desired section in the beat track can be selected through a swipe action on the track displayed in the first area and a user input to the record button. It can be deleted.

또한, 볼륨을 제어 아이콘이 터치되면, 제2 영역에는 비트 트랙의 볼륨을 제어하기 위한 게이지 바가 표시되고, 이후 게이지 바에 대한 사용자 입력을 통해 비트 트랙에 대응되는 비트 데이터의 볼륨을 제어할 수 있다. Additionally, when the volume control icon is touched, a gauge bar for controlling the volume of the bit track is displayed in the second area, and then the volume of bit data corresponding to the bit track can be controlled through user input to the gauge bar.

제1 영역에 표시된 음성 트랙이 짧게 두번 터치되면, 제3 영역에는 오디오 FX 아이콘, 오디오 트랙 브레이크 아이콘, 볼륨 아이콘 및 초기화 아이콘이 표시될 수 있으며, 이후 제3 영역에 표시된 오디오 FX 아이콘, 오디오 트랙 브레이크 아이콘 및 볼륨 아이콘 중 어느 하나의 아이콘이 터치되면 터치된 아이콘의 효과를 적용하기 위한 세부 편집 기능이 제2 영역에 표시될 수 있다. When the voice track displayed in the first area is briefly touched twice, the audio FX icon, audio track break icon, volume icon, and reset icon may be displayed in the third area, and then the audio FX icon and audio track break displayed in the third area may be displayed. When any one of the icon and the volume icon is touched, a detailed editing function for applying the effect of the touched icon may be displayed in the second area.

예를 들면, 오디오 FX 아이콘이 터치되면, 제2 영역에는 오디오 FX의 세부 기능인 리볼브 조절 아이콘, 디스토션 조절 아이콘, 딜레이 조절 아이콘 및 피치 조절 아이콘이 표시되고, 이후 제2 영역에 표시된 아이콘에 대한 사용자 입력을 통해 관련 음성 데이터를 조절할 수 있다. For example, when the audio FX icon is touched, the detailed functions of the audio FX, such as the revolve control icon, distortion control icon, delay control icon, and pitch control icon, are displayed in the second area, and then the user can click on the icons displayed in the second area. Related voice data can be adjusted through input.

또한, 오디오 트랙 브레이크 아이콘을 터치하면, 제2 영역에는 기록 버튼이 표시되고, 이후 제1 영역에 표시된 트랙에 대한 스와이프 동작 및 기록 버튼에 대한 사용자 입력을 통해 음성 트랙에서 원하는 구간의 음성 데이터를 삭제할 수 있다.In addition, when the audio track break icon is touched, a record button is displayed in the second area, and then voice data of the desired section in the voice track can be recorded through a swipe action on the track displayed in the first area and user input to the record button. It can be deleted.

마찬가지로, 제1 영역에 표시된 영상 트랙이 짧게 두번 터치되면, 제3 영역에는 색상 필터 아이콘 및 증강현실 스티커 아이콘이 표시될 수 있으며, 이후 제3 영역에 표시된 색상 필터 아이콘 및 증강현실 스티커 아이콘 중 적어도 하나의 아이콘이 터치되면 터치된 아이콘의 효과를 적용하기 위한 세부 편집 기능이 제2 영역에 표시될 수 있다.Similarly, when the video track displayed in the first area is briefly touched twice, a color filter icon and an augmented reality sticker icon may be displayed in the third area, and then at least one of the color filter icon and the augmented reality sticker icon displayed in the third area. When the icon is touched, a detailed editing function for applying the effect of the touched icon may be displayed in the second area.

일측에 따르면, 증강현실 스티커는 대응되는 컨텐츠가 연동되어 있으며, 데이터 관리부(320)는 사용자 입력에 따라 복수의 증강현실 스티커 중 적어도 하나의 증강현실 스티커를 영상 데이터에 반영할 수 있으며, 영상 데이터에 반영된 증강현실 스티커가 터치되면 터치된 증강현실 스티커에 대응되는 컨텐츠를 사용자에게 제공할 수 있다. According to one side, augmented reality stickers are linked with corresponding content, and the data management unit 320 can reflect at least one augmented reality sticker among a plurality of augmented reality stickers to the video data according to user input. When the reflected augmented reality sticker is touched, content corresponding to the touched augmented reality sticker can be provided to the user.

예를 들면, 증강현실 스티커에 대응되는 컨텐츠는 영상 컨텐츠를 포함할 수 있다.For example, content corresponding to an augmented reality sticker may include video content.

일측에 따르면, 데이터 관리부(320)는 기설정된 초기 효과 정보에 대응되는 적어도 하나의 효과를 실시간 기록 데이터에 적용할 수 있다.According to one side, the data management unit 320 may apply at least one effect corresponding to preset initial effect information to real-time recorded data.

일측에 따르면, 데이터 관리부(320)는 효과 적용을 위한 사용자 입력을 수신하고, 효과 적용을 위한 사용자 입력에 대응되는 적어도 하나의 효과를 실시간 기록 데이터에 적용할 수 있다. According to one side, the data management unit 320 may receive user input for effect application and apply at least one effect corresponding to the user input for effect application to real-time recorded data.

또한, 제2 실시예에 따른 멀티 트랙 제어부(330)는 적어도 하나의 효과가 적용된 실시간 기록 데이터를 인코딩할 수 있다. Additionally, the multi-track control unit 330 according to the second embodiment can encode real-time recorded data to which at least one effect has been applied.

도 4는 제3 실시예에 따른 디지털 컨텐츠 생성장치를 설명하기 위한 도면이다. Figure 4 is a diagram for explaining a digital content creation device according to a third embodiment.

도 4를 참조하면, 제3 실시예에 따른 디지털 컨텐츠 생성장치(400)는 비트 트랙, 영상 트랙 및 음성 트랙으로 구성되는 멀티 트랙에 대한 기록 동작을 보다 효율적으로 수행할 수 있다.Referring to FIG. 4, the digital content generating apparatus 400 according to the third embodiment can more efficiently perform a recording operation on a multi-track consisting of a bit track, a video track, and an audio track.

또한, 디지털 컨텐츠 생성장치(400)는 멀티 트랙 각각에 대응하여 기록된 데이터를 보다 효율적으로 편집할 수 있다. Additionally, the digital content creation device 400 can more efficiently edit data recorded corresponding to each multi-track.

이를 위해, 디지털 컨텐츠 생성장치(400)는 데이터 수신부(410), 데이터 편집부(420) 및 멀티 트랙 제어부(430)를 포함할 수 있다. 즉, 도 4를 통해 설명하는 데이터 수신부(410) 및 데이터 편집부(420)는 도 1을 통해 설명한 일실시예에 따른 디지털 컨텐츠 생성장치의 기록 제어부에 포함될 수 있고, 멀티 트랙 제어부(430)는 일실시예에 따른 디지털 컨텐츠 생성장치의 멀티 트랙 제어부일 수 있다. 또한, 데이터 수신부(410)는 도 3을 통해 설명한 제2 실시예에 따른 데이터 수신부일 수도 있다. To this end, the digital content creation device 400 may include a data reception unit 410, a data editing unit 420, and a multi-track control unit 430. That is, the data receiving unit 410 and the data editing unit 420 described with reference to FIG. 4 may be included in the recording control section of the digital content creation device according to the embodiment described with reference to FIG. 1, and the multi-track control section 430 is a It may be a multi-track control unit of a digital content creation device according to an embodiment. Additionally, the data receiving unit 410 may be a data receiving unit according to the second embodiment described with reference to FIG. 3.

한편, 제3 실시예에 따른 디지털 컨텐츠 생성장치(400)는 사용자 단말의 화면이 편집 모드(즉, 마스터링 모드)로 전환되면 수행될 수 있다. Meanwhile, the digital content creation device 400 according to the third embodiment can be performed when the screen of the user terminal is switched to editing mode (i.e., mastering mode).

제3 실시예에 따른 데이터 수신부(410)는 화면에 표시되는 멀티 트랙 중 적어도 하나의 트랙에 대응되는 기록 데이터를 수신할 수 있다. The data receiving unit 410 according to the third embodiment may receive recording data corresponding to at least one track among multi-tracks displayed on the screen.

예를 들면, 멀티 트랙은 비트 트랙, 영상 트랙 및 음성 트랙 중 화면에 표시되는 적어도 둘 이상의 트랙을 포함할 수 있다. For example, a multi-track may include at least two tracks displayed on the screen among a bit track, video track, and audio track.

일측에 따르면, 제3 실시예에 따른 디지털 컨텐츠 생성장치(400)는 기록 데이터 중 영상 데이터에 대한 렌더링(rendering)을 수행하는 데이터 렌더링부를 더 포함할 수 있다.According to one side, the digital content creation device 400 according to the third embodiment may further include a data rendering unit that performs rendering on image data among recorded data.

제3 실시예에 따른 데이터 편집부(420)는 이미지 스티커 효과, 텍스트 효과, 클립 조정 효과 및 페이드 효과 중 적어도 하나의 효과를 기록 데이터에 적용할 수 있다. The data editing unit 420 according to the third embodiment may apply at least one of an image sticker effect, a text effect, a clip adjustment effect, and a fade effect to the recorded data.

예를 들면, 이미지 스티커 효과는 기록 데이터가 영상 데이터인 경우, 기설정된 복수의 이미지 스티커 중 사용자 입력을 통해 선택된 적어도 하나의 이미지 스티커를 삽입하는 효과이고, 클립 조정 효과는 영상 데이터에 대응되는 비디오 클립 및 음성 데이터에 대응되는 음성 클립의 사이즈를 조절하는 효과이며, 페이드 효과는 영상 데이터 및 음성 데이터에 대한 페이드-인, 페이드-아웃 효과를 조절하는 효과일 수 있다. For example, the image sticker effect is an effect of inserting at least one image sticker selected through user input among a plurality of preset image stickers when the recorded data is video data, and the clip adjustment effect is an effect of inserting a video clip corresponding to the video data. and an effect that adjusts the size of an audio clip corresponding to audio data, and the fade effect may be an effect that adjusts the fade-in and fade-out effects for video data and audio data.

또한, 텍스트 효과는 기록 데이터 중 영상 데이터에 대한 텍스트 입력 효과, 영상 효과에 입력된 텍스트에 대한 색상 편집 효과, 폰트 편집 효과 및 크기 편집 효과 중 적어도 하나의 효과를 포함할 수 있다. Additionally, the text effect may include at least one of a text input effect for video data among recorded data, a color editing effect for text input to the video effect, a font editing effect, and a size editing effect.

일측에 따르면, 데이터 편집부(420)는 효과 적용을 위한 사용자 입력을 수신하고, 효과 적용을 위한 사용자 입력에 대응되는 적어도 하나의 효과를 기록 데이터에 적용할 수 있다. According to one side, the data editing unit 420 may receive a user input for applying an effect and apply at least one effect corresponding to the user input for applying the effect to the recorded data.

일측에 따르면, 화면은 데이터 생성 장치를 통해 기록된 멀티 트랙 영상을 합쳐서 하나의 영상으로 재생되는 제1 영역과, 제1 영역의 하단에 배치되고 멀티 트랙을 통합한 통합 트랙에 대한 정보를 표시하는 제2 영역 및 제2 영역의 하단에 배치되고 기록 버튼, 기록 완료 버튼, 재생 버튼 및 정지 버튼 중 적어도 하나의 가상 버튼이 표시되는 제3 영역을 포함할 수 있다.According to one side, the screen displays information about a first area in which multi-track images recorded through a data generation device are combined and played back as one image, and an integrated track that is placed at the bottom of the first area and integrates the multi-tracks. It may include a second area and a third area disposed below the second area and displaying at least one virtual button among a record button, a record completion button, a play button, and a stop button.

일측에 따르면, 사용자 입력을 통해 사용자 단말의 화면이 편집 모드로 전환되면, 제3 영역에는 스티커 효과 아이콘, 텍스트 효과 아이콘, 클립 조정 아이콘, 페이드 효과 아이콘, 오디오 EQ 아이콘 및 커버 설정 아이콘 중 적어도 하나의 아이콘이 표시될 수 있으며, 제1 영역에는 통합 영상 파일에 대응되는 제어 바가 표시될 수 있다. According to one side, when the screen of the user terminal is switched to edit mode through user input, the third area includes at least one of a sticker effect icon, a text effect icon, a clip adjustment icon, a fade effect icon, an audio EQ icon, and a cover setting icon. An icon may be displayed, and a control bar corresponding to the integrated video file may be displayed in the first area.

예를 들면, 제3 영역에 표시된 오디오 EQ 아이콘이 터치되면, 제1 영역에는 오디오 EQ를 제어하기 위한 세부 기능이 표시될 수 있다.For example, when the audio EQ icon displayed in the third area is touched, detailed functions for controlling the audio EQ may be displayed in the first area.

또한, 제3 영역에 표시된 커버 설정 아이콘이 터치되면, 기저장된 커버 이미지 또는 영상 데이터에 포함된 이미지 중 어느 하나의 이미지를 커버 이미지로 적용하는 기능을 제공할 수 있다. Additionally, when the cover setting icon displayed in the third area is touched, a function to apply either a pre-stored cover image or an image included in the video data as the cover image can be provided.

일측에 따르면, 데이터 편집부(420)는 렌더링이 수행된 기록 데이터에 적어도 하나의 효과를 적용할 수 있다. According to one side, the data editing unit 420 may apply at least one effect to recorded data on which rendering has been performed.

일측에 따르면, 데이터 편집부(420)는 영상 트랙 및 음성 트랙 중 적어도 하나의 데이터 트랙과 비트 트랙간의 지연시간을 연산하고, 연산된 지연시간에 기초하여 데이터 트랙과 비트 트랙을 동기화할 수 있다. According to one side, the data editing unit 420 may calculate the delay time between the data track and the bit track of at least one of the video track and the audio track, and synchronize the data track and the bit track based on the calculated delay time.

구체적으로, 디지털 컨텐츠 생성장치(400)는 멀티 트랙에 대한 기록 과정에서 저장된 프로젝트 설정 파일을 로딩하여 각 트랙을 하나의 영상 파일처럼 시각화하는데, 이 과정에서 비트 트랙과 각각 기록된 영상 트랙 및 음성 트랙간에는 지연시간이 발생되게 된다. Specifically, the digital content creation device 400 loads the saved project setting file during the multi-track recording process and visualizes each track as a single video file. In this process, the bit track and each recorded video track and audio track are There is a delay time between the two.

이에 데이터 편집부(420)는 각 트랙 간 지연시간을 계산하여 하나의 영상처럼 재생할 때 문제가 되지 않도록 계산된 지연시간을 보상할 수 있다.Accordingly, the data editing unit 420 can calculate the delay time between each track and compensate for the calculated delay time so that it does not cause a problem when playing as a single video.

한편, 제3 실시예에 따른 멀티 트랙 제어부(430)는 적어도 하나의 효과가 적용된 기록 데이터를 인코딩할 수 있다. Meanwhile, the multi-track control unit 430 according to the third embodiment can encode recorded data to which at least one effect has been applied.

도 5는 일실시예에 따른 디지털 컨텐츠 생성장치의 동작예를 설명하기 위한 도면이다. Figure 5 is a diagram for explaining an operation example of a digital content creation device according to an embodiment.

도 5를 참조하면, 일실시예에 따른 디지털 컨텐츠 생성장치의 동작에 따른 사용자 단말의 화면은 비트 트랙, 영상 트랙 및 음성 트랙 중 적어도 둘 이상의 멀티 트랙(511, 513)이 표시되는 제1 영역(510)과, 제1 영역(510)의 하단에 배치되고 기록 버튼(521)이 표시되는 제2 영역(520)을 포함할 수 있다. Referring to FIG. 5, the screen of the user terminal according to the operation of the digital content creation device according to one embodiment includes a first area ( 510, and a second area 520 disposed at the bottom of the first area 510 and displaying a record button 521.

예를 들면, 디지털 컨텐츠 생성장치의 동작에 따른 사용자 단말의 화면은 영상 공유 어플에 따른 스튜디오 모드 화면일 수 있다. For example, the screen of the user terminal according to the operation of the digital content creation device may be a studio mode screen according to the video sharing application.

또한, 제2 영역(520)은 사용자 입력에 따라 기록 버튼(521) 이외에도 기록 완료 버튼, 재생 버튼 및 정지 버튼 중 적어도 하나의 가상 버튼을 표시할 수 있다. Additionally, the second area 520 may display at least one virtual button selected from the recording completion button, play button, and stop button in addition to the record button 521 according to user input.

일측에 따르면, 사용자 단말의 화면은 제2 영역의 하단에 배치되고 제1 영역에 표시된 멀티 트랙 중 활성화된 어느 하나의 트랙에 대한 정보를 표시하는 제3 영역(530) 및 화면을 통해 기록되는 영상 데이터 및 음성 데이터 중 적어도 하나의 데이터에 대한 제어 기능을 제공하는 제4 영역(540)을 포함할 수 있다. According to one side, the screen of the user terminal is disposed at the bottom of the second area and includes a third area 530 that displays information about one of the activated tracks among the multi-tracks displayed in the first area, and an image recorded through the screen. It may include a fourth area 540 that provides a control function for at least one of data and voice data.

예를 들면, 제3 영역(530)에 표시되는 활성화된 어느 하나의 트랙에 대한 정보는 활성화된 트랙에 대한 현재 작업을 초기화하는 초기화 기능, 활성화된 트랙의 종류 정보(비디오, 오디오) 및 활성화된 트랙에서 이전에 실행한 작업 내용을 취소하는 실행취소 기능을 포함할 수 있다.For example, information about any one activated track displayed in the third area 530 includes an initialization function for initializing the current operation for the activated track, type information (video, audio) of the activated track, and activated track. You can include an undo function to undo previously performed actions on a track.

또한, 제4 영역(540)에 표시되는 제어 기능은 사용자 단말의 카메라 방향(전면/후면)을 전환하는 카메라 전환 기능, 기저장된 가사를 불러오는 기능, 해당 영상/음성을 모니터링하는 기능, 볼륨 조절 기능, 카메라 플래쉬의 온/오프(on/off) 기능 및 뷰티 모드의 온/오프 기능을 포함할 수 있으며, 제4 영역(540)의 맨 하단에 표시되는 화살표 아이콘의 터치 동작에 따라 제어 기능 항목을 제4 영역(540) 상에 전체 표시하거나 요약하여 표시할 수 있다. In addition, the control functions displayed in the fourth area 540 include a camera switching function to change the camera direction (front/rear) of the user terminal, a function to load pre-stored lyrics, a function to monitor the video/audio, and a volume control function. , may include an on/off function of the camera flash and an on/off function of the beauty mode, and control function items can be selected according to the touch operation of the arrow icon displayed at the bottom of the fourth area 540. It can be displayed entirely or summarized on the fourth area 540.

한편, 사용자 단말의 화면은 영상 트랙에 대응되는 기록 동작 또는 재생 동작이 수행되면, 화면에 기록 동작 또는 재생 동작에 따른 영상을 표시하되, 제1 영역 내지 제4 영역과 함께 오버랩하여 영상 데이터를 표시하는 영상 표시 영역을 더 포함할 수 있으며, 영상 표시 영역에서 화면을 위/아래로 스와이프하는 사용자 입력이 감지되면, 영상 표시 영역에 표시되는 영상을 줌-인/줌-아웃할 수 있다.Meanwhile, when a recording operation or playback operation corresponding to a video track is performed, the screen of the user terminal displays the image according to the recording operation or playback operation on the screen, and displays the image data by overlapping with the first to fourth areas. It may further include a video display area, and when a user input of swiping the screen up/down in the video display area is detected, the image displayed in the video display area can be zoomed in/zoomed out.

일측에 따르면, 제1 영역(510)은 멀티 트랙 중 기록 작업이 완료된 가이드 트랙(511)이 표시되는 제1 서브영역(511, 512)과, 기록 작업이 가능한 촬영 트랙이 표시되는 제2 서브영역(513, 514)을 포함할 수 있다. According to one side, the first area 510 includes a first sub-area 511 and 512 in which a guide track 511 for which a recording operation has been completed among multi-tracks is displayed, and a second sub-area in which a shooting track for which a recording operation is possible is displayed. It may include (513, 514).

구체적으로, 제1 서브영역(511, 512)은 가이드 트랙으로 구분된 N개의 트랙 중 제1 가이드 트랙을 표시하는 제1 트랙 영역(511)과, 제1 가이드 트랙에 대응되는 아이콘이 표시되는 제1 아이콘 영역(512)을 포함할 수 있다.Specifically, the first sub-areas 511 and 512 include a first track area 511 that displays the first guide track among N tracks divided by guide tracks, and a first track area 511 that displays an icon corresponding to the first guide track. 1 may include an icon area 512.

또한, 제2 서브영역(513, 514)은 촬영 트랙으로 구분된 M개의 트랙 중 제1 촬영 트랙을 표시하는 제2 트랙 영역(513)과, 제1 촬영 트랙에 대응되는 아이콘이 표시되는 제2 아이콘 영역(514)을 포함할 수 있다.In addition, the second sub-areas 513 and 514 include a second track area 513 that displays the first shooting track among the M tracks divided into shooting tracks, and a second track area 513 that displays an icon corresponding to the first shooting track. It may include an icon area 514.

다시 말해, 제1 서브영역(511, 512) 및 제2 서브영역(513, 514) 각각은 제1 내지 제N 가이드 트랙 중 제1 가이드 트랙과, 제1 내지 제M 촬영 트랙 중 제1 촬영 트랙만이 화면 내에 표시될 수 있으며, 제1 서브영역(511, 512) 및 제2 서브영역(513, 514) 각각에 구비된 제1 아이콘 영역(512) 및 제2 아이콘 영역(514)에 대한 사용자 입력이 감지될 때마다 화면에 표시되는 트랙을 순차적으로 변경할 수 있다.In other words, each of the first sub-areas 511 and 512 and the second sub-areas 513 and 514 includes a first guide track among the first to N-th guide tracks and a first shooting track among the first to M-th shooting tracks. Only can be displayed on the screen, and the user for the first icon area 512 and the second icon area 514 provided in each of the first sub-areas 511 and 512 and the second sub-areas 513 and 514. You can sequentially change the tracks displayed on the screen each time an input is detected.

즉, 제1 아이콘 영역(512)에 대한 사용자 입력이 감지될 때마다 제1 트랙 영역(511)에는 제2 내지 제N 가이드 트랙이 순차적으로 표시되고, 제2 아이콘 영역(514)에 대한 사용자 입력이 감지될 때마다 제2 트랙 영역(513)에는 제2 내지 제M 촬영 트랙이 순차적으로 표시될 수 있다. That is, whenever a user input to the first icon area 512 is detected, the 2nd to Nth guide tracks are sequentially displayed in the first track area 511, and the user input to the second icon area 514 is displayed. Whenever this is detected, the second to M shooting tracks may be sequentially displayed in the second track area 513.

또한, 제N 가이드 트랙이 제1 트랙 영역(511)에 표시된 상태에서 제1 아이콘 영역(512)에 대한 사용자 입력이 감지되면 제1 트랙 영역(511)에는 다시 제1 가이드 트랙이 표시되고, 제M 촬영 트랙이 제2 트랙 영역(513)에 표시된 상태에서 제2 아이콘 영역(514)에 대한 사용자 입력이 감지되면 제2 트랙 영역(513)에는 다시 제1 촬영 트랙이 표시될 수 있다.In addition, when a user input to the first icon area 512 is detected while the Nth guide track is displayed in the first track area 511, the first guide track is displayed again in the first track area 511, and the first guide track is displayed again in the first track area 511. If a user input to the second icon area 514 is detected while the M shooting track is displayed in the second track area 513, the first shooting track may be displayed again in the second track area 513.

일측에 따르면, 사용자 단말의 화면은 제1 트랙 영역(511)에 표시된 가이드 트랙의 번호와, 전체 가이드 트랙의 수에 대한 정보를 '가이드 트랙 번호/전체 가이드 트랙의 수'로 표시하는 제5 영역(515)과, 제2 트랙 영역(513)에 표시된 촬영 트랙의 번호와, 전체 촬영 트랙의 수에 대한 정보를 '촬영 트랙 번호/전체 촬영 트랙의 수'로 표시하는 제6 영역(516)을 더 포함할 수 있다. According to one side, the screen of the user terminal is a fifth area that displays the number of the guide track displayed in the first track area 511 and information about the total number of guide tracks as 'guide track number/total number of guide tracks'. (515) and a sixth area 516 that displays information about the number of the shooting tracks displayed in the second track area 513 and the number of total shooting tracks as 'shooting track number/number of total shooting tracks'. More may be included.

일측에 따르면, 제1 영역(510)은 멀티 트랙 중 어느 하나의 트랙이 짧게 한번 터치되면 어느 하나의 트랙을 활성화하고, 어느 하나의 트랙이 짧게 두번 터치되면 어느 하나의 트랙에 대한 편집 기능을 제공할 수 있으며, 어느 하나의 트랙이 길게 터치되면 트랙 옵션 기능을 제공할 수 있다.According to one side, the first area 510 activates one track among the multi-tracks when one track is briefly touched once, and provides an editing function for one track when any one track is briefly touched twice. This can be done, and when any one track is touched and held, a track option function can be provided.

예를 들면, 활성화된 트랙은 화면 상에서 별도의 색상으로 표시되어 활성화되지 않은 트랙과 구분될 수 있다.For example, activated tracks may be displayed in a separate color on the screen to distinguish them from non-activated tracks.

또한, 어느 하나의 트랙에 대한 편집 메뉴는 오디오 FX 기능, 트랙 브레이크 기능, 볼륨 제어 기능 및 트랙 초기화 기능 중 적어도 하나의 기능을 포함할 수 있다. Additionally, the edit menu for one track may include at least one of an audio FX function, a track break function, a volume control function, and a track initialization function.

또한, 트랙 옵션 기능은 트랙 삭제 기능 및 트랙 복제 기능 중 적어도 하나의 기능을 포함할 수 있다.Additionally, the track option function may include at least one of a track deletion function and a track duplication function.

구체적으로, 제1 영역에 표시된 음성 트랙이 짧게 두번 터치되면, 제3 영역에는 오디오 FX 아이콘, 오디오 트랙 브레이크 아이콘, 볼륨 아이콘 및 초기화 아이콘이 표시될 수 있으며, 이후 제3 영역에 표시된 오디오 FX 아이콘, 오디오 트랙 브레이크 아이콘 및 볼륨 아이콘 중 어느 하나의 아이콘이 터치되면 터치된 아이콘의 효과를 적용하기 위한 세부 편집 기능이 제2 영역에 표시될 수 있다.Specifically, when the voice track displayed in the first area is briefly touched twice, an audio FX icon, an audio track break icon, a volume icon, and a reset icon may be displayed in the third area, and then the audio FX icon displayed in the third area, When one of the audio track break icon and the volume icon is touched, a detailed editing function for applying the effect of the touched icon may be displayed in the second area.

도 6은 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 멀티 트랙을 활성화하는 예시를 설명하기 위한 도면이다.FIG. 6 is a diagram illustrating an example of activating multi-track using a digital content creation device according to an embodiment.

도 6을 참조하면, 도 6의 (a)는 제1 서브영역에 배치된 가이드 트랙 중 비트 트랙을 시각화하는 예시를 도시하고, 도 6의 (b)는 제2 서브영역에 배치된 촬영 트랙 중 영상 트랙이 활성화되는 예시를 도시하며, 도 6의 (c)는 제2 서브영역에 배치된 촬영 트랙 중 음성 트랙을 활성화하는 예시를 도시한다. Referring to FIG. 6, (a) of FIG. 6 shows an example of visualizing a bit track among the guide tracks arranged in the first sub-area, and (b) of FIG. 6 shows an example of visualizing a bit track among the shooting tracks arranged in the second sub-area. An example of activating a video track is shown, and Figure 6(c) shows an example of activating an audio track among the filming tracks arranged in the second sub-area.

도 6의 (a)에 따르면, 제1 서브영역에 배치된 비트 트랙이 활성화 되면, 기설정된 활성화 시간(일례로, 1초) 동안 활성화된 트랙 상에 트랙의 명칭 정보(610)가 표시되고, 제2 영역에는 재생 버튼(640)이 표시될 수 있다. According to (a) of FIG. 6, when a bit track arranged in the first sub-area is activated, track name information 610 is displayed on the activated track for a preset activation time (for example, 1 second), A play button 640 may be displayed in the second area.

도 6의 (b) 및 (c)에 따르면, 제2 서브영역에 배치된 촬영 트랙(영상 트랙 및 음성 트랙)이 활성화 되면, 기설정된 활성화 시간 동안 활성화된 트랙 상에 트랙의 명칭 정보(620, 630)가 표시되고, 제2 영역에는 기록 버튼(650, 660)이 표시되며, 제3 영역에는 활성화된 트랙의 명칭 정보(670, 680)가 표시될 수 있다.According to (b) and (c) of FIGS. 6, when the recording track (video track and audio track) arranged in the second sub-area is activated, the name information 620 of the track is displayed on the track activated during the preset activation time. 630) is displayed, record buttons 650 and 660 may be displayed in the second area, and name information 670 and 680 of the activated track may be displayed in the third area.

한편, 제1 서브영역에 배치된 가이드 트랙 중 비트 트랙 이외에 다른 트랙(영상 트랙 및 음성 트랙)이 활성화되면, 기설정된 활성화 시간 동안 활성화된 트랙 상에 트랙의 명칭 정보가 표시되고, 제2 영역에는 재생 버튼이 표시되며, 제3 영역에는 활성화된 트랙의 명칭 정보가 표시될 수 있다. Meanwhile, when tracks other than the bit track (video track and audio track) among the guide tracks arranged in the first sub-area are activated, the name information of the track is displayed on the track activated during the preset activation time, and in the second area. A play button is displayed, and name information of the activated track may be displayed in the third area.

도 7은 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 비트 트랙을 생성하는 예시를 설명하기 위한 도면이다. FIG. 7 is a diagram illustrating an example of generating a bit track using a digital content generating device according to an embodiment.

도 7의 (a)는 비트 트랙의 선택을 위한 안내 메시지를 표시하는 예시를 도시하고, 도 7의 (b)는 사용자 입력에 따라 복수의 비트 중 어느 하나의 비트를 선택하는 예시를 도시하며, 도 7의 (c)는 선택된 비트를 비트 트랙에 적용하는 예시를 도시한다. Figure 7(a) shows an example of displaying a guidance message for selecting a bit track, Figure 7(b) shows an example of selecting one of a plurality of bits according to a user input, Figure 7(c) shows an example of applying the selected bit to the bit track.

도 7의 (a) 내지 (c)에 따르면, 디지털 컨텐츠 생성장치의 동작에 따른 사용자 단말의 화면은 최초 스튜디오 모드 화면 진입 시, 비트 트랙이 사전에 설정되어 있지 않다면, 참조부호 710과 같이 비트 트랙 선택을 위한 메시지를 표시할 수 있다. According to (a) to (c) of FIG. 7, the screen of the user terminal according to the operation of the digital content creation device displays a bit track as indicated by reference numeral 710 if the beat track is not set in advance when entering the studio mode screen for the first time. A message can be displayed for selection.

예를 들면, 스튜디오 모드 화면에서는 제1 영역에 인디케이터가 중앙에 고정되어 있으며, 이후 인디케이터는 사용자가 트랙(또는 인디케이터)을 좌/우로 스와이프하거나, 트랙의 재생 또는 기록 동작이 진행되어 트랙이 움직이면, 트랙이 움직이면서 상단에 재생시간이 분/초로 표시(0:00)될 수 있다.For example, in the studio mode screen, the indicator is fixed at the center in the first area, and then the indicator changes when the user swipes the track (or indicator) left or right, or when the track moves as the track is played or recorded. , As the track moves, the playback time can be displayed in minutes/seconds (0:00) at the top.

다음으로, 사용자가 참조부호 710에 표시된 메시지를 선택하면, 도 7의 (b)와 같이 복수의 비트 목록을 화면 상에 표시할 수 있다. Next, when the user selects the message indicated by reference numeral 710, a plurality of bit lists can be displayed on the screen as shown in (b) of FIG. 7.

구체적으로, 비트 목록은 각각의 비트에 대한 비트 메이커 정보, 비트 제목, 재생 시간 및 비트의 BPM 정보와 함께, 각 비트에 대응되는 이미지 표시 영역(720)을 포함할 수 있으며, 이미지 표시 영역(720)을 선택하면, 대응되는 비트 데이터가 재생 또는 정지될 수 있다. Specifically, the beat list may include an image display area 720 corresponding to each beat, along with beat maker information, beat title, play time, and BPM information for each beat, and an image display area 720 ), the corresponding bit data can be played or stopped.

또한, 비트 목록에 포함된 복수의 비트 중 어느 하나의 비트(730)를 사용자가 왼쪽 방향으로 스와이프 하거나 선택하면, 비트 사용 버튼(740)이 표시될 수 있다. Additionally, when the user swipes to the left or selects one bit 730 among a plurality of bits included in the bit list, a bit use button 740 may be displayed.

일측에 따르면, 참조부호 710과 같이 비트 선택을 위한 메시지를 표시된 상태에서 사용자가 촬영 트랙을 활성화하여 제2 영역에 기록 버튼이 표시된 이후, 사용자가 기록 버튼을 선택하면, 비트 선택 오류를 표시한 후 비트 목록을 화면 상에 표시할 수도 있다.According to one side, when the user activates the shooting track while a message for bit selection is displayed, as shown by reference numeral 710, and the record button is displayed in the second area, when the user selects the record button, a bit selection error is displayed. The bit list can also be displayed on the screen.

이후, 비트 사용 버튼(740)을 선택하면, 제1 서브 영역 상에 가이드 트랙으로 선택된 비트의 음향 파형이 표시되며, 이와 동시에 참조부호 750과 같이 선택된 비트 트랙에 대한 정보가 표시될 수 있다. Thereafter, when the beat use button 740 is selected, the sound waveform of the beat selected as the guide track is displayed on the first sub-area, and at the same time, information about the selected beat track may be displayed as indicated by reference numeral 750.

한편, 사용자가 참조부호 750을 선택하면, 화면에는 비트 변경을 위한 메뉴를 표시할 수 있으며, 이때 사용자가 비트 변경을 선택하면 선택된 비트 트랙을 통해 사용자가 수행한 작업 내용이 모두 삭제될 수 있다. Meanwhile, if the user selects reference numeral 750, a menu for changing the bit may be displayed on the screen. At this time, if the user selects the bit change, all work performed by the user through the selected bit track may be deleted.

도 8은 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 영상 트랙을 생성하는 예시를 설명하기 위한 도면이다. FIG. 8 is a diagram for explaining an example of generating a video track using a digital content creation device according to an embodiment.

도 8의 (a) 내지 (c)를 참조하면, 일실시예에 따른 디지털 컨텐츠 생성장치의 동작에 따른 사용자 단말의 화면은 사용자가 제2 서브영역에 표시된 촬영 트랙 중 영상 트랙을 활성화한 상태에서 제2 영역에 표시된 기록 버튼(810)을 터치하면, 활성화된 영상 트랙에 대한 기록(녹화) 동작이 수행될 수 있다. Referring to (a) to (c) of FIG. 8, the screen of the user terminal according to the operation of the digital content creation device according to one embodiment is displayed when the user activates the video track among the shooting tracks displayed in the second sub-area. When the record button 810 displayed in the second area is touched, a recording operation for the activated video track can be performed.

예를 들면, 활성화된 영상 트랙에 대한 기록 동작 중 사용자가 기록 버튼(810)을 길게 누르면서 화면 위/아래로 스와이프하면 촬영 중 영상에 대한 줌-인/줌-아웃 효과가 적용될 수 있다.For example, if a user swipes up/down the screen while pressing and holding the record button 810 during a recording operation for an activated video track, a zoom-in/zoom-out effect may be applied to the video during recording.

또한, 활성화된 영상 트랙에 대한 기록 동작 중 사용자가 영상이 표시되고 있는 화면 영역을 위/아래로 스와이프하면 촬영 중 영상에 대한 줌-인/줌-아웃 효과가 적용될 수도 있다.Additionally, if the user swipes the screen area where the video is displayed up/down during the recording operation for the activated video track, a zoom-in/zoom-out effect may be applied to the video during shooting.

다음으로, 활성화된 영상 트랙에 대한 기록(녹화) 동작이 수행되면, 제2 영역에는 정지 버튼(820)이 표시될 수 있으며, 사용자가 기록 정지 버튼을 터치하면 활성화된 영상 트랙에 대한 기록 동작이 정지될 수 있다. Next, when a recording (recording) operation is performed for the activated video track, a stop button 820 may be displayed in the second area, and when the user touches the recording stop button, the recording operation for the activated video track is performed. It may be stopped.

다음으로, 활성화된 영상 트랙에 대한 기록 동작이 정지되면 제2 영역에는 기록 버튼과 함께 기록 완료 버튼(830)이 표시될 수 있으며, 사용자가 기록 완료 버튼(830)을 터치하면 모든 트랙에 대한 기록이 최종 종료되어, 사용자의 단말 화면이 편집 모드(즉, 마스터링 모드)로 이동될 수 있다. Next, when the recording operation for the activated video track is stopped, the recording completion button 830 may be displayed along with the recording button in the second area. When the user touches the recording completion button 830, all tracks are recorded. When this is finally finished, the user's terminal screen can be moved to editing mode (i.e., mastering mode).

일측에 따르면, 활성화된 영상 트랙에 대한 기록 동작이 정지된 후, 기록 버튼을 터치하면 기록 정지 버튼이 터치되어 기록이 정지된 시점부터 이어서 기록을 수행할 수 있다. According to one side, after the recording operation for the activated video track is stopped, if the record button is touched, the recording stop button is touched and recording can be continued from the point where recording was stopped.

도 9는 일실시예에 따른 디지털 컨텐츠 생성장치를 이용하여 음성 트랙을 생성하는 예시를 설명하기 위한 도면이다. FIG. 9 is a diagram for explaining an example of generating a voice track using a digital content creation device according to an embodiment.

도 9의 (a) 내지 (c)를 참조하면, 일실시예에 따른 디지털 컨텐츠 생성장치의 동작에 따른 사용자 단말의 화면은 사용자가 제2 서브영역에 표시된 촬영 트랙 중 음성 트랙을 활성화한 상태에서 제2 영역에 표시된 기록 버튼(910)을 터치하면, 활성화된 음성 트랙에 대한 기록(녹음) 동작이 수행될 수 있다. Referring to (a) to (c) of FIG. 9, the screen of the user terminal according to the operation of the digital content creation device according to one embodiment is displayed when the user activates the voice track among the shooting tracks displayed in the second sub-area. When the record button 910 displayed in the second area is touched, a recording operation for the activated voice track can be performed.

일측에 따르면, 활성화된 음성 트랙에 대한 기록 동작은 인디케이터 또는 활성화된 음성 트랙을 좌/우로 스와이프하여 선택된 시간부터 녹음을 진행할 수도 있다. According to one side, the recording operation for the activated voice track may be performed from a selected time by swiping the indicator or the activated voice track left/right.

다음으로, 활성화된 음성 트랙에 대한 기록 동작이 수행되면, 제2 영역에는 정지 버튼(920)이 표시될 수 있으며, 사용자가 기록 정지 버튼을 터치하면 활성화된 음성 트랙에 대한 기록 동작이 정지될 수 있다. Next, when a recording operation for the activated voice track is performed, a stop button 920 may be displayed in the second area, and when the user touches the recording stop button, the recording operation for the activated voice track may be stopped. there is.

다음으로, 활성화된 음성 트랙에 대한 기록 동작이 정지되면 제2 영역에는 기록 버튼과 함께 기록 완료 버튼(930)이 표시될 수 있으며, 사용자가 기록 완료 버튼(930)을 터치하면 모든 트랙에 대한 기록이 최종 종료되어, 사용자의 단말 화면이 편집 모드(즉, 마스터링 모드)로 이동될 수 있다. Next, when the recording operation for the activated voice track is stopped, the recording completion button 930 may be displayed along with the recording button in the second area, and when the user touches the recording completion button 930, all tracks are recorded. When this is finally finished, the user's terminal screen can be moved to editing mode (i.e., mastering mode).

또한, 활성화된 음성 트랙에 대한 기록 동작이 정지된 후, 기록 버튼을 터치하면 기록 정지 버튼이 터치되어 기록이 정지된 시점부터 이어서 기록을 수행할 수도 있다. In addition, after the recording operation for the activated voice track is stopped, if the record button is touched, the recording stop button is touched and recording can be continued from the point where recording was stopped.

도 10은 제2 실시예에 따른 디지털 컨텐츠 생성장치의 동작방법을 설명하기 위한 도면이다. Figure 10 is a diagram for explaining the operating method of the digital content creation device according to the second embodiment.

다시 말해, 도 10은 도 1 내지 도 9를 통해 설명한 제2 실시예에 따른 디지털 컨텐츠 생성장치를 이용한 디지털 컨텐츠 생성방법을 설명하기 위한 도면으로, 이하에서 도 10을 통해 설명하는 내용 중 도 1 내지 도 9를 통해 설명한 내용과 중복되는 설명은 생략하기로 한다. In other words, FIG. 10 is a diagram for explaining a method of generating digital content using the digital content generating device according to the second embodiment described with reference to FIGS. 1 to 9. Among the contents described with reference to FIG. 10 below, FIG. 1 to FIG. Descriptions that overlap with those described with reference to FIG. 9 will be omitted.

도 10을 참조하면, 1010 단계에서 디지털 컨텐츠 생성방법은 데이터 수신부에서 화면에 표시되는 멀티 트랙 중 적어도 하나의 트랙에 대응되는 실시간 기록 데이터를 수신할 수 있다. Referring to FIG. 10, in step 1010, the digital content creation method may receive real-time recorded data corresponding to at least one track among multi-tracks displayed on the screen from a data receiving unit.

다음으로, 1020 단계에서 디지털 컨텐츠 생성방법은 데이터 관리부에서 기설정된 영상 효과 및 음성 효과 중 적어도 하나의 효과를 실시간 기록 데이터에 적용할 수 있다. Next, in step 1020, the digital content creation method may apply at least one of the video effects and audio effects preset in the data management unit to the real-time recorded data.

예를 들면, 기설정된 영상 효과는 색상 필터 효과 및 증강현실 스티커 효과 중 적어도 하나의 효과를 포함하고, 기설정된 음성 효과는 리볼브(reverb) 효과, 디스토션(distortion) 효과, 딜레이(delay) 효과, 피치 조정(picth correction) 효과 및 피치 시프트(pitch shift) 효과 중 적어도 하나의 효과를 포함할 수 있다. For example, the preset video effect includes at least one of a color filter effect and an augmented reality sticker effect, and the preset sound effect includes a revolve effect, a distortion effect, a delay effect, It may include at least one of a pitch correction effect and a pitch shift effect.

다음으로, 1030 단계에서 디지털 컨텐츠 생성방법은 멀티 트랙 제어부에서 적어도 하나의 효과가 적용된 실시간 기록 데이터를 선택된 트랙에 따라 영상 트랙의 경우 영상 파일로, 음성 트랙의 경우 음성 파일로 인코딩할 수 있다. Next, in step 1030, the digital content generation method may encode real-time recorded data to which at least one effect is applied in a multi-track control unit into a video file for the video track and an audio file for the audio track, depending on the selected track.

도 11은 제3 실시예에 따른 디지털 컨텐츠 생성장치의 동작방법을 설명하기 위한 도면이다. Figure 11 is a diagram for explaining the operating method of the digital content creation device according to the third embodiment.

다시 말해, 도 11은 도 1 내지 도 9를 통해 설명한 제3 실시예에 따른 디지털 컨텐츠 생성장치를 이용한 디지털 컨텐츠 생성방법을 설명하기 위한 도면으로, 이하에서 도 11을 통해 설명하는 내용 중 도 1 내지 도 9를 통해 설명한 내용과 중복되는 설명은 생략하기로 한다. In other words, FIG. 11 is a diagram for explaining a method of generating digital content using the digital content generating device according to the third embodiment described with reference to FIGS. 1 to 9. Among the contents described with reference to FIG. 11 below, FIG. 1 to FIG. Descriptions that overlap with those described with reference to FIG. 9 will be omitted.

도 11을 참조하면, 1110 단계에서 디지털 컨텐츠 생성방법은 데이터 수신부에서 화면에 표시되는 멀티 트랙 중 적어도 하나의 트랙에 대응되는 기록 데이터를 수신할 수 있다.Referring to FIG. 11, in step 1110, the digital content creation method may receive recorded data corresponding to at least one track among multi-tracks displayed on the screen from a data receiving unit.

예를 들면, 멀티 트랙은 비트 트랙, 영상 트랙 및 음성 트랙 중 화면에 표시되는 적어도 둘 이상의 트랙을 포함할 수 있다.For example, a multi-track may include at least two tracks displayed on the screen among a bit track, video track, and audio track.

다음으로, 1120 단계에서 디지털 컨텐츠 생성방법은 데이터 편집부에서 스티커 효과, 텍스트 효과, 클립 조정 효과 및 페이드 효과 중 적어도 하나의 효과를 기록 데이터에 적용할 수 있다. Next, in step 1120, the digital content creation method may apply at least one of a sticker effect, a text effect, a clip adjustment effect, and a fade effect to the recorded data in a data editing unit.

일측에 따르면, 1120 단계에서 디지털 컨텐츠 생성방법은 데이터 렌더링부에서 기록 데이터 중 영상 데이터에 대한 렌더링(rendering)을 수행하는 단계를 더 포함할 수 있으며, 이후 데이터 편집부는 랜더링이 수행된 영상 데이터에 적어도 하나의 효과를 적용할 수 있다. According to one side, in step 1120, the method of generating digital content may further include a step of performing rendering on image data among recorded data in a data rendering unit, and thereafter, the data editing unit may perform rendering on at least the rendered image data. One effect can be applied.

일측에 따르면, 1120 단계에서 디지털 컨텐츠 생성방법은 데이터 편집부에서 영상 트랙 및 음성 트랙 중 적어도 하나의 데이터 트랙과 비트 트랙간의 지연시간을 연산하고, 연산된 지연시간에 기초하여 데이터 트랙과 비트 트랙을 동기화할 수 있다. According to one side, in step 1120, the digital content generation method calculates the delay time between the data track and the bit track of at least one of the video track and the audio track in the data editing unit, and synchronizes the data track and the bit track based on the calculated delay time. can do.

다음으로, 1130 단계에서 디지털 컨텐츠 생성방법은 멀티 트랙 제어부에서 멀티 트랙에 기록된 모든 데이터를 하나의 영상 파일 혹은 영상을 기록하지 않은 경우 음성파일로 인코딩할 수 있다. Next, in step 1130, the digital content generation method can encode all data recorded in the multi-track in the multi-track control unit into one video file or, if no video is recorded, into an audio file.

결국, 본 발명을 이용하면, 비트 트랙, 영상 트랙 및 음성 트랙으로 구성되는 멀티 트랙에 대한 기록 동작을 보다 효율적으로 수행할 수 있다.Ultimately, using the present invention, recording operations for multi-tracks consisting of bit tracks, video tracks, and audio tracks can be performed more efficiently.

또한, 본 발명을 이용하면, 화면을 통해 표시되는 영상을 최대한 가리지 않고, 멀티 트랙을 화면 상에 효율적으로 시각화할 수 있다.Additionally, using the present invention, multi-tracks can be efficiently visualized on the screen without blocking the image displayed on the screen as much as possible.

또한, 본 발명을 이용하면, 멀티 트랙을 가이드 트랙과 촬영 트랙으로 구분하고, 구분된 가이드 트랙과 촬영 트랙을 화면 상에 동시에 시각화하여 사용자의 편의성을 향상시킬 수 있다. Additionally, using the present invention, it is possible to improve user convenience by dividing multi-tracks into guide tracks and shooting tracks and visualizing the divided guide tracks and shooting tracks on the screen simultaneously.

또한, 본 발명을 이용하면, 멀티 트랙 각각에 대응되는 데이터에 실시간으로 영상 효과 및 음성 효과를 적용할 수 있다.Additionally, using the present invention, video effects and audio effects can be applied in real time to data corresponding to each multi-track.

또한, 본 발명을 이용하면, 멀티 트랙 각각에 대응하여 기록된 데이터를 보다 효율적으로 편집할 수 있다.Additionally, using the present invention, data recorded corresponding to each multi-track can be edited more efficiently.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.Although the embodiments have been described with limited drawings as described above, various modifications and variations can be made by those skilled in the art from the above description. For example, the described techniques are performed in a different order than the described method, and/or components of the described system, structure, device, circuit, etc. are combined or combined in a different form than the described method, or other components are used. Alternatively, appropriate results may be achieved even if substituted or substituted by an equivalent.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents of the claims also fall within the scope of the claims described below.

200: 디지털 컨텐츠 생성장치 210: 멀티 트랙 제어부
220: 표시 제어부
200: Digital content creation device 210: Multi-track control unit
220: display control unit

Claims (14)

사용자 입력에 기초하여 UI 제어신호를 생성하는 멀티 트랙 제어부 및
상기 UI 제어신호에 기초하여 화면의 제1 영역에 비트 트랙, 영상 트랙 및 음성 트랙 중 적어도 둘 이상의 멀티 트랙을 표시하고, 상기 화면의 제2 영역에 기록 버튼을 표시하는 표시 제어부
를 포함하고,
상기 멀티 트랙 제어부는,
상기 멀티 트랙 중 어느 하나의 트랙의 터치 동작에 따른 상기 사용자 입력이 1회 감지되면, 상기 어느 하나의 트랙이 활성화 되도록 제어하는 상기 UI 제어신호를 생성하고,
상기 어느 하나의 트랙의 터치 동작에 따른 상기 사용자 입력이 2회 감지되면, 상기 어느 하나의 트랙에 대한 편집 메뉴를 표시하기 위한 상기 UI 제어신호를 생성하며,
기설정된 입력시간 동안 지속되는 상기 어느 하나의 트랙의 터치 동작에 따른 상기 사용자 입력이 감지되면, 상기 어느 하나의 트랙에 대한 트랙 옵션 메뉴를 표시하기 위한 상기 UI 제어신호를 생성하는
디지털 컨텐츠 생성장치.
A multi-track control unit that generates UI control signals based on user input and
A display control unit that displays at least two multi-tracks among a bit track, video track, and audio track in a first area of the screen based on the UI control signal, and displays a record button in a second area of the screen.
Including,
The multi-track control unit,
When the user input according to a touch operation of any one of the multi-tracks is detected once, the UI control signal is generated to control the one track to be activated,
When the user input according to a touch operation of one of the tracks is detected twice, the UI control signal is generated to display an edit menu for the one track,
When the user input according to the touch operation of the one track lasting for a preset input time is detected, the UI control signal for displaying the track option menu for the one track is generated.
Digital content creation device.
제1항에 있어서,
상기 멀티 트랙 제어부는,
상기 멀티 트랙을 기록 작업이 완료된 가이드 트랙과 기록 작업이 가능한 촬영 트랙으로 구분하고, 상기 가이드 트랙을 상기 제1 영역에 구비된 제1 서브영역에 표시하며, 상기 촬영 트랙을 상기 제1 영역에 구비된 제2 서브영역에 표시하기 위한 UI 제어신호를 생성하는
디지털 컨텐츠 생성장치.
According to paragraph 1,
The multi-track control unit,
The multi-track is divided into a guide track for which a recording operation has been completed and a shooting track for which a recording operation is possible, the guide track is displayed in a first sub-area provided in the first area, and the shooting track is provided in the first area. Generating UI control signals for displaying in the second sub-area
Digital content creation device.
제2항에 있어서,
상기 멀티 트랙 제어부는,
상기 영상 트랙 및 상기 음성 트랙 중 기록된 데이터의 길이가 기설정된 임계 시간 이상인 트랙과, 상기 비트 트랙을 상기 가이드 트랙으로 구분하는
디지털 컨텐츠 생성장치.
According to paragraph 2,
The multi-track control unit,
Among the video track and the audio track, the track whose length of recorded data is longer than a preset threshold time and the bit track are divided into the guide track.
Digital content creation device.
제2항에 있어서,
상기 멀티 트랙 제어부는,
상기 영상 트랙 및 상기 음성 트랙 중 상기 사용자 입력에 따른 기록 완료 신호가 수신된 트랙과, 상기 비트 트랙을 상기 가이드 트랙으로 구분하는
디지털 컨텐츠 생성장치.
According to paragraph 2,
The multi-track control unit,
Among the video track and the audio track, the track for which a recording completion signal according to the user input is received and the bit track are divided into the guide track.
Digital content creation device.
제3항에 있어서,
상기 제1 서브 영역은,
상기 가이드 트랙으로 구분된 N개(여기서, N은 양의 정수)의 트랙 중 제1 가이드 트랙을 표시하는 제1 트랙 영역과, 상기 제1 가이드 트랙에 대응되는 아이콘이 표시되는 제1 아이콘 영역을 포함하고,
상기 제2 서브 영역은,
상기 촬영 트랙으로 구분된 M개(여기서, M은 양의 정수)의 트랙 중 제1 촬영 트랙을 표시하는 제2 트랙 영역과, 상기 제1 촬영 트랙에 대응되는 아이콘이 표시되는 제2 아이콘 영역을 포함하는
디지털 컨텐츠 생성장치.
According to paragraph 3,
The first sub-region is,
A first track area displaying a first guide track among N tracks (where N is a positive integer) divided by the guide track, and a first icon area displaying an icon corresponding to the first guide track. Contains,
The second sub-region is,
A second track area displaying a first capturing track among the M tracks (where M is a positive integer) divided into the capturing tracks, and a second icon area displaying an icon corresponding to the first capturing track. containing
Digital content creation device.
제5항에 있어서,
상기 멀티 트랙 제어부는,
상기 제1 아이콘 영역에 대한 상기 사용자 입력이 감지되면, 상기 제1 트랙 영역에 상기 가이드 트랙으로 구분된 N개의 트랙 중 제2 가이드 트랙을 표시하도록 제어하는 상기 UI 제어신호를 생성하고,
상기 제2 아이콘 영역에 대한 상기 사용자 입력이 감지되면, 상기 제2 트랙 영역에 상기 촬영 트랙으로 구분된 M개의 트랙 중 제2 촬영 트랙을 표시하도록 제어하는 상기 UI 제어신호를 생성하는
디지털 컨텐츠 생성장치.
According to clause 5,
The multi-track control unit,
When the user input to the first icon area is detected, the UI control signal is generated to control display of a second guide track among N tracks divided by the guide track in the first track area,
When the user input to the second icon area is detected, the UI control signal is generated to control display of a second shooting track among the M tracks divided by the shooting track in the second track area.
Digital content creation device.
제2항에 있어서,
상기 표시 제어부는,
상기 가이드 트랙에 대한 상기 사용자 입력이 감지되면, 상기 화면의 제2 영역에 재생 버튼을 표시하는
디지털 컨텐츠 생성장치.
According to paragraph 2,
The display control unit,
When the user input for the guide track is detected, a play button is displayed in a second area of the screen.
Digital content creation device.
제1항에 있어서,
상기 멀티 트랙 제어부는,
상기 기록 버튼에 대한 상기 사용자 입력 또는 상기 기설정된 어플의 실행을 위한 상기 사용자 입력이 감지되면, 상기 영상 트랙 및 제1 음성 트랙 중 적어도 하나의 트랙과 상기 비트 트랙을 상기 제1 영역에 표시하기 위한 상기 UI 제어신호를 생성하는
디지털 컨텐츠 생성장치.
According to paragraph 1,
The multi-track control unit,
When the user input for the record button or the user input for execution of the preset application is detected, at least one of the video track and the first audio track and the bit track are displayed in the first area. Generating the UI control signal
Digital content creation device.
제8항에 있어서,
상기 멀티 트랙 제어부는,
상기 영상 트랙 및 제1 음성 트랙 중 적어도 하나의 트랙과 상기 비트 트랙이 상기 제1 영역에 표시되고, 상기 기록 버튼에 대한 상기 사용자 입력이 감지되면, 제2 음성 트랙을 상기 제1 영역에 표시하기 위한 상기 UI 제어신호를 생성하는
디지털 컨텐츠 생성장치.
According to clause 8,
The multi-track control unit,
At least one of the video track and the first audio track and the bit track are displayed in the first area, and when the user input to the record button is detected, displaying the second audio track in the first area. Generating the UI control signal for
Digital content creation device.
제1항에 있어서,
상기 멀티 트랙은,
상기 영상 트랙 및 상기 음성 트랙 중 적어도 하나의 트랙이 상기 비트 트랙에 동기화되는
디지털 컨텐츠 생성장치.
According to paragraph 1,
The multi-track is
At least one of the video track and the audio track is synchronized to the bit track.
Digital content creation device.
삭제delete 제1항에 있어서,
상기 어느 하나의 트랙에 대한 편집 메뉴는,
오디오 FX 기능, 트랙 브레이크 기능, 볼륨 제어 기능 및 트랙 초기화 기능 중 적어도 하나의 기능을 포함하는
디지털 컨텐츠 생성장치.
According to paragraph 1,
The edit menu for any one of the above tracks is,
Containing at least one of the following functions: an audio FX function, a track break function, a volume control function, and a track initialization function.
Digital content creation device.
제1항에 있어서,
상기 어느 하나의 트랙에 대한 트랙 옵션 메뉴는,
트랙 삭제 기능 및 트랙 복제 기능 중 적어도 하나의 기능을 포함하는
디지털 컨텐츠 생성장치.
According to paragraph 1,
The track options menu for any one of the above tracks is,
Containing at least one of the track deletion function and the track duplication function
Digital content creation device.
제1항에 있어서,
상기 표시 제어부는,
상기 영상 트랙에 대한 상기 사용자 입력에 기초하여, 상기 영상 트랙에 대응되는 기록 동작 또는 재생 동작이 수행되면, 상기 화면에 상기 기록 동작 또는 상기 재생 동작에 따른 영상 데이터를 표시하되, 상기 멀티 트랙이 오버랩되어 표시되도록 제어하는
디지털 컨텐츠 생성장치.
According to paragraph 1,
The display control unit,
When a recording operation or a playback operation corresponding to the video track is performed based on the user input for the video track, video data according to the recording operation or the playback operation is displayed on the screen, wherein the multi-track overlaps. control to display
Digital content creation device.
KR1020210100825A 2021-07-30 2021-07-30 Apparatus for generating digital contents based on user interface of multi-track KR102377080B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210100825A KR102377080B1 (en) 2021-07-30 2021-07-30 Apparatus for generating digital contents based on user interface of multi-track

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210100825A KR102377080B1 (en) 2021-07-30 2021-07-30 Apparatus for generating digital contents based on user interface of multi-track

Publications (1)

Publication Number Publication Date
KR102377080B1 true KR102377080B1 (en) 2022-03-22

Family

ID=80992525

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210100825A KR102377080B1 (en) 2021-07-30 2021-07-30 Apparatus for generating digital contents based on user interface of multi-track

Country Status (1)

Country Link
KR (1) KR102377080B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180014966A (en) 2016-08-02 2018-02-12 이범희 Method for providing sharing new song to connect songwriter with singer
WO2018159054A1 (en) * 2017-02-28 2018-09-07 ソニー株式会社 Information processing device, information processing method, and program
KR102058857B1 (en) 2013-04-08 2019-12-26 삼성전자주식회사 Image photographing apparatus and method for controlling the same

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102058857B1 (en) 2013-04-08 2019-12-26 삼성전자주식회사 Image photographing apparatus and method for controlling the same
KR20180014966A (en) 2016-08-02 2018-02-12 이범희 Method for providing sharing new song to connect songwriter with singer
WO2018159054A1 (en) * 2017-02-28 2018-09-07 ソニー株式会社 Information processing device, information processing method, and program

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
How to add voiceovers to your TikToks(https://mashable.com/article/how-to-add-voiceover-to-tiktok, 2021.07.16.) *
How to add voiceovers to your TikToks(https://mashable.com/article/how-to-add-voiceover-to-tiktok, 2021.07.16.)*

Similar Documents

Publication Publication Date Title
US8744239B2 (en) Teleprompter tool for voice-over tool
JP7440119B2 (en) Apparatus, system, and method for recording and rendering multimedia
US6292620B1 (en) Edited-list creating apparatus, editing apparatus and editing method
US7653550B2 (en) Interface for providing modeless timeline based selection of an audio or video file
US9420394B2 (en) Panning presets
US7903927B2 (en) Editing apparatus and control method thereof, and program and recording medium
US6118444A (en) Media composition system with enhanced user interface features
US8452432B2 (en) Realtime editing and performance of digital audio tracks
US7561160B2 (en) Data editing program, data editing method, data editing apparatus and storage medium
US9142259B2 (en) Editing device, editing method, and program
JPH11341350A (en) Multimedia information editing and reproducing device, recording medium with multimedia information reproduction program and recording medium with sequence information respectively recorded on them
US20090273712A1 (en) System and method for real-time synchronization of a video resource and different audio resources
WO2010068175A2 (en) Creating a new video production by intercutting between multiple video clips
JPH07220452A (en) Method and device for video editing and real-time processing
JP2012058858A (en) Information processor, data division method and data division program
KR102377081B1 (en) Apparatus and method for generating digital contents based on recording operation of multi-track
US11551724B2 (en) System and method for performance-based instant assembling of video clips
KR102377080B1 (en) Apparatus for generating digital contents based on user interface of multi-track
KR102377082B1 (en) Apparatus and method for generating digital contents based on editing operation of multi-track
JPH07303209A (en) Special effect editing device
JP6244217B2 (en) Content processing apparatus, processing method and program for content processing apparatus
JP2001143446A (en) Digital audio disk recorder
JP2005278212A (en) Image editing method and image editing system
JPH04335283A (en) Device for editing information
Eagle Getting Started with Vegas

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant