KR102538058B1 - Announcing advertisement banner provision system for website - Google Patents

Announcing advertisement banner provision system for website Download PDF

Info

Publication number
KR102538058B1
KR102538058B1 KR1020220153764A KR20220153764A KR102538058B1 KR 102538058 B1 KR102538058 B1 KR 102538058B1 KR 1020220153764 A KR1020220153764 A KR 1020220153764A KR 20220153764 A KR20220153764 A KR 20220153764A KR 102538058 B1 KR102538058 B1 KR 102538058B1
Authority
KR
South Korea
Prior art keywords
banner
image
announcement
region
hand
Prior art date
Application number
KR1020220153764A
Other languages
Korean (ko)
Inventor
육은영
전성호
Original Assignee
육은영
전성호
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 육은영, 전성호 filed Critical 육은영
Priority to KR1020220153764A priority Critical patent/KR102538058B1/en
Application granted granted Critical
Publication of KR102538058B1 publication Critical patent/KR102538058B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0277Online advertisement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0276Advertisement creation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/2053D [Three Dimensional] animation driven by audio data
    • G06T5/005
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G10L21/10Transforming into visible information
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G10L21/10Transforming into visible information
    • G10L2021/105Synthesis of the lips movements from speech, e.g. for talking heads

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Multimedia (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Game Theory and Decision Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

An announcing advertisement banner provision system for a website according to the present invention comprises: a banner creation module which includes an image input unit receiving an image including a performer's face, a voice input unit receiving informational voice including guidance information, a background removal unit removing a background from the image, and a banner generator creating an announcing banner by dubbing the informational voice to the image from which the background is removed; a location setting module which sets an output location of the announcing banner on a website; and a banner exposure module which displays and replays the announcing banner at the output location. According to the announcing advertisement banner provision system for a website of the present invention, a performer such as an announcer provides advertisements by displaying an announcing banner on the website that appears to provide advertisements in the form of voice, thereby increasing effectiveness of advertising for advertisement viewers who may be users of the website where a relevant announcing banner is inserted.

Description

웹 사이트에 대한 아나운싱 광고 배너 제공 시스템{Announcing advertisement banner provision system for website}Announcing advertisement banner provision system for website}

본 발명은 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템에 관한 것으로서, 보다 상세히 설명하면 출연자의 얼굴 및 신체 일부를 포함하는 상태에서 정보음성이 더빙되어 출연자가 정보를 제공하는 듯한 효과를 제공하는 아나운싱 배너를 웹 사이트에 삽입하여 광고 효과를 높인, 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템에 관한 것이다.The present invention relates to a system for providing an announcement advertisement banner for a website, and more specifically, an announcement banner in which an information voice is dubbed with a performer's face and body parts to provide an effect as if the performer is providing information. The present invention relates to a system for providing an announcement advertisement banner for a website, which is inserted into a website to increase advertisement effect.

광고 배너란 일반적으로 웹 페이지의 일부 면을 차지하는 간단한 박스형 광고로서 이용자가 이를 클릭하면 보다 심도있는 광고가 표시되거나 광고주의 웹 사이트에 접속될 수 있도록 한 것이다.An advertising banner is a simple box-type advertisement that generally occupies a part of a web page, and when a user clicks on it, a more in-depth advertisement is displayed or access to an advertiser's website is provided.

이러한 광고 배너는 온라인상에서의 상품 매출 증대에 기여하는 매우 중요한 요소이다. 최근 웹 포털(web portal)의 페이지뿐만 아니라, 인스턴트 메시징 어플리케이션, SNS(Social Network Service) 어플리케이션 등의 페이지에서도 상품 및 서비스를 홍보하기 위한 수단으로 광고 배너가 많이 이용되고 있다.Such an advertisement banner is a very important factor contributing to an increase in product sales online. Recently, advertisement banners are widely used as means for promoting products and services not only on web portal pages but also on pages such as instant messaging applications and social network service (SNS) applications.

광고 배너는 페이지를 스크롤하거나 다른 페이지로 이동하는 과정에서 사용자의 눈에 쉽게 띄어야 하므로, 그 상품의 특성이 적절하게 반영되도록 디자인하는 것이 중요하다. 또한, 광고 배너에 표시될 이미지가 적절하게 배치된 다양한 광고 배너를 디자인할 필요성이 있다.Since the advertisement banner should easily catch the user's eye while scrolling the page or moving to another page, it is important to design the product so that the characteristics of the product are appropriately reflected. In addition, there is a need to design various advertisement banners in which images to be displayed on the advertisement banners are appropriately arranged.

이러한 광고 배너에 대한 선행기술로서, 한국 공개특허 제 10-2013-0040393호에 ‘온라인 배너 광고 표시 방법 및 시스템’이 개시되어 있다.As a prior art for such advertising banners, 'online banner advertisement display method and system' is disclosed in Korean Patent Publication No. 10-2013-0040393.

상기 선행기술에 따른 온라인 배너 광고 표시 방법은, 컨텐츠 제공 서비스의 이용을 위한 사이트로의 접속 화면 중 일부분인 제1 영역에, 사이트에서 이용 가능한 컨텐츠의 리스트를 표시하도록 제어하는 단계; 제1 영역을 제외한 접속 화면 중 일부분인 제2 영역에, 이용 가능한 컨텐츠에 관련된 내용을 포함하는 배너 컨텐츠의 리스트를 표시하도록 제어하는 단계; 및 제1 영역에, 배너 컨텐츠 리스트에 포함된 적어도 하나의 배너 컨텐츠에 대한 리스트 정보 중, 사용자 단말의 입력 수단에 의해 선택된 리스트 정보에 대응하는 배너 컨텐츠가 표시되도록 제어하는 단계;를 포함하는 것을 특징으로 한다.The method of displaying an online banner advertisement according to the prior art includes controlling a display of a list of contents available on a site in a first area, which is a part of a screen connected to a site for using a content providing service; Controlling to display a list of banner contents including contents related to available contents on a second area, which is a part of the access screen excluding the first area; and controlling display of banner content corresponding to list information selected by an input means of a user terminal among list information on at least one banner content included in the banner content list in the first area. to be

상기 선행기술에 따르면, 사용자들이 이용 가능한 컨텐츠의 리스트가 표시되는 곳에, 컨텐츠에 관련된 배너 컨텐츠가 표시되도록 함으로써, 불필요한 화면의 공간을 소모하지 않고 사용자들에게 직관적으로 배너 컨텐츠가 인지될 수 있도록 할 수 있다. 이를 통해, 사용자들에 대한 배너 컨텐츠의 광고 효과를 극대화할 수 있는 효과가 있다.According to the prior art, the banner content related to the content is displayed where the list of content available to users is displayed, so that the banner content can be intuitively recognized by users without consuming unnecessary screen space. there is. Through this, there is an effect of maximizing the advertising effect of the banner content for users.

그러나 상술한 선행기술은 단순히 컨텐츠 리스트에 배너 컨텐츠를 단순 표시한 것에 지나지 않아 광고 컨텐츠의 식별력이 다소 저해될 수 있으며 광고하고자 하는 내용이 자세히 전달되지 않는다는 문제점이 있으며, 서로 다른 디자인의 웹 사이트에 적용되기 어렵다는 한계성을 지닌다.However, the above-described prior art simply displays banner content in the content list, which may hinder the identification of advertising content, and has a problem that the content to be advertised is not conveyed in detail, and is applied to websites with different designs. It has limitations that make it difficult to become.

따라서 상술한 바와 같은 문제점을 해결하기 위해, 광고의 내용을 음성의 형태로 제공함으로써 광고 효과를 높일 수 있는 것으로, 식별력이 높음과 동시에 다양한 디자인과 인터페이스를 가진 웹 사이트에 모두 적용 가능한, 신규하고 진보한 광고 배너 제공 시스템을 개발할 필요성이 대두되는 실정이다.Therefore, in order to solve the above-mentioned problems, it is possible to increase the advertising effect by providing the contents of the advertisement in the form of voice. There is a need to develop an advertisement banner providing system.

한국 공개특허 제 10-2013-0040393호Korean Patent Publication No. 10-2013-0040393

본 발명은 웹페이지의 일 측에 아나운서가 음성과 함께 광고내용을 전달하는 듯한 아나운싱 배너를 생성 및 제공하여 광고 배너의 식별력을 높이는 것을 주요 목적으로 한다.A main object of the present invention is to increase the distinctiveness of the advertisement banner by generating and providing an announcement banner on one side of a web page in which an announcer delivers advertisement contents together with voice.

본 발명의 다른 목적은, 웹 사이트와 아나운싱 배너가 보다 자연스럽게 어우러지게 하는 것이다.Another object of the present invention is to make a website and an announcement banner more naturally harmonize.

본 발명의 또 다른 목적은, 웹 사이트의 구도에 맞게 아나운싱 배너의 팔 모양 및 길이를 제어하는 것이다.Another object of the present invention is to control the shape and length of the arm of the announcement banner according to the composition of the website.

상기 목적을 달성하기 위하여, 본 발명에 따른 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템은, 출연자의 얼굴을 포함하는 영상을 입력받는 영상 입력부와, 안내정보를 포함하는 정보음성을 입력받는 음성 입력부 및, 상기 영상에서 배경을 제거하는 배경 제거부와, 상기 배경이 제거된 영상에 상기 정보음성을 더빙하여 아나운싱 배너(announcing banner)를 생성하는 배너 생성부를 포함하는 배너 생성 모듈; 웹 사이트에서의 상기 아나운싱 배너의 출력 위치를 설정하는 위치 설정 모듈; 상기 출력 위치에 상기 아나운싱 배너를 표시하여 재생시키는 배너 노출 모듈;을 포함하는 것을 특징으로 한다.In order to achieve the above object, a system for providing an announcement advertisement banner for a website according to the present invention includes a video input unit for receiving an image including a performer's face, and an audio input unit for receiving information and audio including guidance information; a banner generating module including a background removing unit that removes the background from the image, and a banner generating unit that creates an announcing banner by dubbing the informational sound to the image from which the background has been removed; a position setting module for setting an output position of the announcement banner on a web site; and a banner exposure module for displaying and reproducing the announcement banner at the output position.

나아가, 상기 영상은, 출연자의 얼굴 및 팔과 손을 포함하는 상반신을 포함하는 신체 일부를 포함하며, 상기 시스템은, 입력된 복수의 영상을 저장한 영상 DB와, 상기 영상에서 팔 영역 및 손 영역을 검출하는 손 영역 검출부 및, 상기 영상 DB에 저장된 상기 복수의 영상 각각에서 검출된 상기 팔 영역 및 손 영역에 대해, 특정 방향을 가리키는 모양 별로 손 모양 오브젝트를 추출하여 저장하는 손 모양 오브젝트 추출부와, 상기 출력 위치와 최인접한 선의 돌출 방향을 포함하는 요철을 파악하는 요철 파악부와, 상기 돌출 방향을 가리키도록 상기 손 모양 오브젝트를 상기 배경이 제거된 영상의 팔 영역 및 손 영역에 합성하여 합성영상을 생성하는 손 합성부를 포함하는 합성 모듈;을 포함하며, 상기 배너 생성부는, 상기 합성영상에 상기 정보음성을 더빙하여 아나운싱 배너(announcing banner)를 생성하는 것을 특징으로 한다.Furthermore, the image includes a body part including a performer's face and an upper body including arms and hands, and the system includes an image DB storing a plurality of input images, and an arm region and a hand region in the image. a hand region detection unit that detects a hand shape object, and a hand shape object extractor that extracts and stores hand shape objects for each shape pointing in a specific direction with respect to the arm region and the hand region detected in each of the plurality of images stored in the image DB; and , a concavo-convex detection unit that detects concavo-convex including the protrusion direction of the line closest to the output position, and synthesizes the hand-shaped object with the arm region and the hand region of the image from which the background has been removed so as to point to the protrusion direction. and a synthesizing module including a hand synthesis unit generating an image, wherein the banner generation unit generates an announcing banner by dubbing the information voice to the synthesized image.

더하여, 상기 합성 모듈은, 상기 요철의 곡도에 따라 상기 합성 영상의 팔 영역의 길이를 제어하는 길이 제어부를 포함하는 것을 특징으로 한다.In addition, the synthesizing module may include a length control unit that controls the length of the arm region of the synthesized image according to the curvature of the irregularities.

본 발명의 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템에 따르면,According to the system for providing an announcement advertisement banner for a website of the present invention,

1) 아나운서와 같은 출연자가 음성의 형식으로 광고를 제공하는 듯한 아나운싱 배너를 웹 사이트에 표시 처리하여 광고를 제공함으로써 해당 아나운싱 배너가 삽입된 웹 사이트 이용자일 수 있는 광고 시청자에 대한 광고 효과를 높이고,1) By providing advertisements by displaying and processing an announcement banner on a website in which a performer such as an announcer seems to provide advertisements in the form of audio, the advertisement effect for advertisement viewers who may be website users with the announcement banner inserted is increased,

2) 아나운싱 배너의 표시 위치와 최인접한 선의 요철에 따라 아나운싱 배너의 팔 및 손 모양을 변형시킴으로써 아나운싱 배너가 웹 사이트의 특정 방향을 가리키며 강조하는 모양새를 나타낼 수 있어, 웹 사이트의 구도와 보다 자연스럽게 어우러짐과 동시에 웹 사이트의 특정 부위를 강조하는 아나운싱 배너를 제공할 수 있으며,2) By changing the shape of the arm and hand of the announcement banner according to the concavity and convexity of the line closest to the display position of the announcement banner, the announcement banner can show the appearance of pointing and emphasizing a specific direction of the website, harmonizing more naturally with the composition of the website At the same time, you can provide an announcement banner highlighting a specific part of the website,

3) 아나운싱 배너의 팔 길이 조절을 통해 보다 자연스러운 구도의 어우러짐을 구현한 특징이 있다.3) It is characterized by realizing a more natural harmony of composition through adjusting the arm length of the announcement banner.

도 1은 본 발명의 시스템의 개념도.
도 2는 본 발명의 시스템의 세부 구성을 나타낸 블록도.
도 3은 본 발명의 아나운싱 배너가 출력되는 웹 사이트의 개념도.
도 4는 본 발명의 색상이 변경된 아나운싱 배너를 나타낸 개념도.
도 5는 얼굴 영역 및 입 영역의 추출 예시를 나타낸 개념도.
도 6은 팔 영역 및 손 영역의 추출 예시를 나타낸 개념도.
도 7은 돌출 방향을 가리키는 합성 예시를 나타낸 개념도.
1 is a conceptual diagram of the system of the present invention;
Figure 2 is a block diagram showing the detailed configuration of the system of the present invention.
3 is a conceptual diagram of a website on which an announcement banner according to the present invention is displayed;
4 is a conceptual diagram showing an announcement banner in which the color of the present invention is changed;
5 is a conceptual diagram illustrating an example of extracting a face region and a mouth region;
6 is a conceptual diagram illustrating an example of extracting an arm region and a hand region;
7 is a conceptual diagram illustrating a synthesis example indicating a protruding direction;

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하도록 한다. 첨부된 도면은 축척에 의하여 도시되지 않았으며, 각 도면의 동일한 참조 번호는 동일한 구성 요소를 지칭한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. The accompanying drawings are not drawn to scale, and like reference numbers in each drawing indicate like elements.

도 1은 본 발명의 시스템에 대한 개략적인 구성을 나타낸 개념도이다.1 is a conceptual diagram showing a schematic configuration of the system of the present invention.

도 1을 참조하여 설명하면, 본 발명의 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템은 출연자(10) 및 중앙관제서버(20)를 포함한다.Referring to FIG. 1, the system for providing an announcement advertisement banner for a website of the present invention includes a performer 10 and a central control server 20.

출연자(10)는 아나운싱 배너(30)에 출연하여 광고 내용을 전달하는 자로서, 기업 대표, 해당분야의 전문가, 인플루언서, AI 휴먼, 아나운서나 앵커, 일기예보의 기상캐스터, 홈쇼핑의 쇼호스트 등이 출연자(10)가 될 수 있다. 본 발명의 시스템은 이러한 출연자(10)에 대한 영상을 촬영하여, 후술할 중앙관제서버(20)에서 출연자(10)를 촬영한 영상을 기반으로 아나운싱 배너(30)를 제작하여 웹 사이트에 아나운싱 배너(30)를 표시 처리한다.The performer (10) is a person who appears on the announcement banner (30) and conveys the contents of the advertisement, and is a company representative, an expert in the field, an influencer, an AI human, an announcer or anchor, a weather forecaster, and a show host for home shopping. etc. can be the performer 10. The system of the present invention takes a video of such a performer 10, produces an announcing banner 30 based on the video taken of the performer 10 in the central control server 20 to be described later, and announces the banner on the website. (30) is displayed.

이러한 출연자(10)를 촬영한 영상은 기본적으로 출연자(10)의 얼굴을 포함한 상태에서 얼굴을 포함한 상반신 일부, 혹은 상반신 및 하반신 일부를 포함하는 신체 일부를 포함할 수 있다. 따라서 출연자(10)의 전신 또는 신체 일부가 영상으로 촬영될 수 있다.The video taken of the performer 10 may basically include a part of the upper body including the face, or a part of the body including parts of the upper and lower body including the face of the performer 10. Accordingly, the entire body or body part of the performer 10 may be captured as an image.

나아가 바람직하게 생성되는 아나운싱 배너(30)는 광고를 보다 효과적으로 제공하도록 광고 내용에 관련한 음성인 정보음성을 포함하는데, 이때 정보음성을 제공하는 자 역시 출연자(10) 본인일 수 있다.Furthermore, the preferably created announcement banner 30 includes an informational voice, which is a voice related to the advertising content, so as to provide advertisements more effectively.

중앙관제서버(20)는 입력된 영상으로부터 배경을 제거하고, 배경이 제거된 영상에 정보음성을 더빙하여 아나운싱 배너(30)를 생성하며 웹 사이트 화면에 아나운싱 배너(30)를 표시 처리하는 기능을 제공한다. 즉 별도의 본 발명의 아나운싱 광고 배너 제공 시스템의 주체가 곧 중앙관제서버(20)라 할 수 있다.The central control server 20 removes the background from the input image, creates an announcement banner 30 by dubbing the information voice to the image from which the background has been removed, and displays the announcement banner 30 on the website screen. to provide. That is, the subject of the separate announcement advertisement banner providing system of the present invention can be said to be the central control server 20 .

이러한 중앙관제서버(20)는 본 발명의 시스템을 구현해내기 위한 일련의 주체로서, 서버PC 및 네트워크 통신망 등을 함께 포함한다. 더불어 중앙관제서버(20)는 중앙처리장치(CPU) 및 메모리와 하드디스크와 같은 저장수단을 구비한 하드웨어 기반에서 중앙처리장치에서 수행될 수 있는 프로그램, 즉 소프트웨어가 설치되어 이 소프트웨어를 실행할 수 있는데 이러한 소프트웨어에 대한 일련의 구체적 구성을 '모듈' 및 '부', '파트' 등의 구성단위로써 후술할 예정이다.The central control server 20 is a series of subjects for realizing the system of the present invention, and includes a server PC and a network communication network. In addition, the central control server 20 has a central processing unit (CPU) and a program that can be executed in the central processing unit on a hardware basis having storage means such as memory and hard disk, that is, software is installed and can run this software. A series of detailed configurations of such software will be described later as units such as 'modules', 'units' and 'parts'.

이러한 '모듈' 또는 '부' 또는 '인터페이스' 또는 ‘파트’ 등 의 구성은 중앙관제서버(20)의 저장수단에 설치 및 저장된 상태에서 CPU 및 메모리를 매개로 실행되는 소프트웨어 또는 FPGA 내지 ASIC과 같은 하드웨어의 일 구성을 의미한다. 이때, '모듈' 또는 '부', '인터페이스'라는 구성은 하드웨어에 한정되는 의미는 아니고, 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 일 예로서 '모듈' 또는 '부' 또는 '인터페이스'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다.Configurations such as 'modules' or 'units' or 'interfaces' or 'parts' are installed and stored in the storage means of the central control server 20, such as software or FPGA or ASIC executed via CPU and memory. Means a piece of hardware. At this time, the configuration of 'module' or 'unit' or 'interface' is not limited to hardware, and may be configured to be in an addressable storage medium or configured to reproduce one or more processors. As an example, 'module' or 'part' or 'interface' refers to components such as software components, object-oriented software components, class components, and task components, processes, functions, and attributes. fields, procedures, subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, databases, data structures, tables, arrays and variables.

이러한 '모듈' 또는 '부' 또는 '인터페이스'에서 제공되는 기능은 더 작은 수의 구성요소들 및 '부' 또는 '모듈'들로 결합되거나 추가적인 구성요소들과 '부' 또는 '모듈'들로 더 분리될 수 있다.Functions provided by these 'modules' or 'units' or 'interfaces' may be combined into a smaller number of components and 'units' or 'modules', or may be combined into additional components and 'units' or 'modules'. can be further separated.

더불어, 중앙관제서버(20)는 적어도 하나의 프로세서를 포함하는 모든 종류의 하드웨어 장치를 의미하는 것이고, 실시예에 따라 해당 하드웨어 장치에서 동작하는 소프트웨어적 구성도 포괄하는 의미로서 이해될 수 있다. 예를 들어, 서버의 일 예로서의 컴퓨팅 장치는 스마트폰, 태블릿 PC, 데스크탑, 노트북 및 각 장치에서 구동되는 사용자 클라이언트 및 애플리케이션을 모두 포함하는 의미로서 이해될 수 있으며, 또한 이에 제한되는 것은 아니다.In addition, the central control server 20 means all kinds of hardware devices including at least one processor, and can be understood as encompassing software configurations operating in the hardware device according to the embodiment. For example, a computing device as an example of a server may be understood as including all of smart phones, tablet PCs, desktops, laptops, and user clients and applications running on each device, but is not limited thereto.

이하, 이러한 중앙관제서버(20)의 구성을 기반으로 하여 본 발명의 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템의 세부 구성에 대해 도면과 함께 설명하면 다음과 같다.Hereinafter, based on the configuration of the central control server 20, the detailed configuration of the system for providing an announcement advertisement banner for a website according to the present invention will be described with drawings.

도 2는 본 발명의 시스템의 세부 구성을 나타낸 블록도이며, 도 3은 본 발명의 아나운싱 배너가 출력되는 웹 사이트의 개념도이다.2 is a block diagram showing the detailed configuration of the system of the present invention, and FIG. 3 is a conceptual diagram of a website on which an announcement banner according to the present invention is displayed.

도 2,3을 참조하여 설명하면, 본 발명의 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템은 배너 생성 모듈(100), 위치 설정 모듈(200), 배너 노출 모듈(300)을 포함하는 것을 특징으로 한다.Referring to FIGS. 2 and 3, the system for providing an announcement advertisement banner for a website of the present invention is characterized in that it includes a banner creation module 100, a location setting module 200, and a banner exposure module 300. .

배너 생성 모듈(100)은 출연자(10)의 얼굴을 포함하는 영상으로부터 배경을 제거하고 정보음성을 더빙하여 아나운싱 배너(30)를 생성하는 기능을 수행하는 것으로, 이를 위해 배너 생성 모듈(100)은 영상 입력부(110), 음성 입력부(120), 배경 제거부(130), 배너 생성부(140)를 포함한다.The banner generation module 100 performs a function of generating an announcement banner 30 by removing a background from an image including the face of the performer 10 and dubbing an informational voice. To this end, the banner generation module 100 It includes a video input unit 110, an audio input unit 120, a background removal unit 130, and a banner generator 140.

영상 입력부(110)는 출연자(10)의 얼굴을 포함하는 영상을 입력받는 기능을 수행한다. 여기서 영상이라 함은 출연자(10)의 얼굴, 나아가 얼굴 및 의상을 착용한 상반신을 포함하는 신체 일부가 촬영된 것으로, 바람직하게는 크로마키 스크린을 배경으로 하여 출연자(10)가 제스처를 취하면서 정보를 전달하는 영상일 수 있다.The image input unit 110 performs a function of receiving an image including the face of the performer 10 as an input. Here, the image refers to a photograph of the face of the performer 10, and furthermore, a part of the body including the face and the upper body wearing the costume, preferably against the background of the chroma key screen, while the performer 10 gestures, information It may be an image that conveys.

이때 제스처를 취하면서 정보를 전달하기 위해서는, 본 발명의 영상은 출연자(10)의 얼굴 뿐 아니라 손을 포함하는 상반신을 포함하는 신체 일부를 촬영한 것일 수 있다.At this time, in order to convey information while making a gesture, the image of the present invention may be a photograph of a part of the body including the upper body including the hands as well as the face of the performer 10 .

따라서 이러한 적어도 하나의 영상을 영상 입력부(110)를 통해 입력하는 것이며, 여기서 영상 입력부(110)를 통해 입력되는 영상의 개수엔 제한이 없고, 영상이 많을수록 후술할 합성을 위한 오브젝트 추출이 용이하기에 영상 입력부(110)를 통해 입력되는 영상의 수는 수십 내지 수백, 수천, 나아가 수 만개가 가능할 수 있다. 후술할 구성에서 보다 사실감 있게 표정이나 입모양을 합성해내기 위해서는, 영상 입력부(110)를 통해 입력되는 영상의 수가 빅데이터를 이룰 수 있는 수인 것이 바람직할 것이다.Therefore, such at least one image is input through the image input unit 110, and here there is no limit to the number of images input through the image input unit 110, and the more images there are, the easier it is to extract objects for synthesis, which will be described later. The number of images input through the image input unit 110 may be tens, hundreds, thousands, or even tens of thousands. In order to more realistically synthesize facial expressions or mouth shapes in a configuration to be described later, it is preferable that the number of images input through the image input unit 110 be a number capable of forming big data.

영상의 촬영 장소에도 제한이 없으므로 스튜디오 촬영 및 야외 촬영, 세트 촬영 등에 있어서 제한을 두지 않는다. 따라서 다양한 장소 및 시간에 촬영된 영상이 입력될 수 있으나, 바람직하게는 크로마키 스크린을 배경으로 하여 출연자(10)의 얼굴 및 상반신을 포함하는 신체 일부를 촬영한 영상을 입력함으로써 배경 제거를 용이하게 할 수 있다.There are no restrictions on where the video is filmed, so there are no restrictions on studio shooting, outdoor shooting, set shooting, etc. Therefore, images taken at various places and times may be input, but preferably background removal is facilitated by inputting images of parts of the body including the face and upper body of the performer 10 against the background of the chroma key screen. can do.

음성 입력부(120)는 안내정보를 포함하는 정보음성을 입력받는 기능을 수행하는데, 여기서 안내정보라 함은 제공하고자 하는 정보의 내용이다. 예를 들어 아나운싱 배너(30)를 통해 특정 서비스를 광고하고자 하는 경우, 해당 광고에 대한 내용을 담은 내용이 곧 안내정보가 되며, 정보음성은 해당 안내정보를 읽는 음성이 될 수 있다.The voice input unit 120 performs a function of receiving an information voice including guide information. Here, the guide information is the content of information to be provided. For example, when a specific service is to be advertised through the announcement banner 30, the content of the advertisement becomes guide information, and the voice information can be a voice that reads the guide information.

이때 정보음성을 제공하는 자는 바람직하게는 출연자(10)일 수 있으나, 출연자(10)가 아닌 다른 사람이 정보음성을 제공하는 것 역시 가능함은 물론이며, 정보음성의 경우 바람직하게는 분명한 발음으로 입력되는 것이 식별력을 높이기 위해 바람직하다. 혹은 안내정보를 텍스트로 입력하고, TTS (text to sound) 기능을 통해 이를 음성으로 변환하여 정보음성으로서 입력하는 것 역시 가능하다.At this time, the person providing the information voice may preferably be the performer 10, but it is also possible for someone other than the performer 10 to provide the information voice, and in the case of the information voice, it is preferably input with clear pronunciation. It is desirable to increase discrimination. Alternatively, it is also possible to input guide information as text, convert it into voice through a TTS (text to sound) function, and input the information as voice.

배경 제거부(130)는 영상에서 배경을 제거하는 기능을 수행하는 것으로, 여기서 배경 제거 방식에 있어서는 별도의 제한을 두지 않으나 영상 내에서 객체, 즉 출연자(10)를 인식하고 객체의 영역을 제외한 타 영역을 삭제하는 방식으로 배경이 제거될 수 있다.The background removal unit 130 performs a function of removing the background from the image. Here, a separate limitation is not imposed on the background removal method, but recognizes an object in the image, that is, the performer 10, and other objects except for the area of the object. The background may be removed by deleting the area.

보다 상세하게는, 영상 내에서 출연자(10)를 포함하는 출연자 영역과 배경 영역을 검출하여 배경 영역의 제거를 수행하면 되는데, 만약 영상 내에서 출연자(10)의 신체 전체가 촬영되어 있는 경우 신체 전체가 출연자 영역이 되고, 신체 일부가 촬영되어 있는 경우 신체 일부가 출연자 영역이 된다. 다시 말해 출연자 영역은 출연자(10)의 신체 전체 또는 일부를 일컫는다.More specifically, the performer area including the performer 10 and the background area in the video are detected and the background area is removed. If the entire body of the performer 10 is captured in the video, the entire body is captured. becomes a performer area, and when a body part is photographed, the body part becomes a performer area. In other words, the performer area refers to the entire body or part of the performer 10 .

이때 바람직하게 출연자 영역 및 배경의 검출을 위해서는 영상 내에서 촬영된 인물(출연자 영역)의 외곽선을 검출하여 외곽선이 이루는 폐곡선 내의 영역을 출연자 영역으로 검출해내고, 출연자 영역으로 검출되지 않은 영역을 배경으로 검출할 수 있다. 이는 종래의 영상 내에서의 인물 검출 방식을 적용하면 되므로 별도의 설명은 생략하도록 한다.In this case, in order to detect the performer area and the background, the outline of the person (performer area) captured in the video is detected, the area within the closed curve formed by the outline is detected as the performer area, and the area not detected as the performer area is detected as the background. can be detected. Since this can be done by applying a conventional method for detecting a person in an image, a separate description will be omitted.

나아가 상술한 바와 같이 영상이 크로마키 스크린을 배경으로 하는 경우 배경 제거가 보다 용이할 수 있는데, 이는 종래의 크로마키(chroma-key) 기법을 이용하면 구현 가능한 것으로, 영상 내에서 출연자 영역이 검출되는 경우, 검출된 출연자 영역을 제외한 배경을 제거하여 공백으로 만드는 것이라 할 수 있으며, 이는 각 프레임마다 이루어져 최종적으로는 크로마키 영상에서 배경이 모두 제거될 수 있다.Furthermore, as described above, when an image has a chroma-key screen as a background, background removal may be easier, which can be implemented using a conventional chroma-key technique, and a performer area is detected In this case, it can be said that the background except for the detected performer region is removed to make a blank, and this is done for each frame, and finally all the backgrounds can be removed from the chroma key image.

배너 생성부(140)는 배경 제거부(130)를 통해 배경이 제거된 영상, 즉 출연자 영역만이 남아있는 영상에 상술한 음성 입력부(120)를 통해 입력된 정보음성을 더빙 처리하여 아나운싱 배너(30)(announcing banner)를 생성하는 기능을 수행한다.The banner generation unit 140 dubs the information voice input through the voice input unit 120 to the image from which the background has been removed through the background removal unit 130, that is, the image in which only the performer area remains, and announces the banner ( 30) (announcing banner).

여기서 아나운싱 배너(30)라 함은 출연자(10), 즉 광고를 진행하는 진행자라고도 할 수 있는 출연자(10)가 정보음성을 제공하는 듯한, 다시 말해 아나운서가 광고를 전달해주는 듯한 느낌을 주는 배너를 일컫는다.Here, the announcement banner 30 refers to a banner that gives a feeling that the performer 10, that is, the performer 10, which can also be called the host of the advertisement, provides informational voice, that is, the announcer delivers the advertisement. refers to

따라서 상술한 배경이 제거된 영상에 음성과 같은 소리가 삽입되어 있었을 경우 해당 소리, 즉 사운드는 음소거 처리하고, 정보음성을 더빙 처리함으로써 아나운싱 배너(30)를 통해 배경이 제거된 영상과 정보음성이 함께 제공될 수 있도록 한다.Therefore, when a sound such as a voice is inserted into the image from which the background has been removed, the corresponding sound, that is, the sound is muted and the information voice is dubbed so that the image with the background removed and the information voice are displayed through the announcing banner 30. to be provided together.

위치 설정 모듈(200)은 웹 사이트에서의 생성된 아나운싱 배너(30)의 출력 위치를 설정하는 기능을 수행한다.The location setting module 200 performs a function of setting the output location of the created announcement banner 30 on the website.

여기서 웹 사이트라 함은 웹 페이지를 일컫는 것이라고도 할 수 있으며, 따라서 웹 페이지 상에서 출력 위치가 지정되는 경우 스크롤 업-다운 시 아나운싱 배너(30)가 이동될 수 있다. 이 경우는 출력 위치가 웹 페이지 상의 좌표로 설정될 수 있다. 다시 말해 웹 페이지에 종속되어 웹 페이지의 전환이나 이동에 따라 광고 시청자에게 아나운싱 배너(30)의 전체 또는 일부만이 출력될 수 있다.Here, the web site may also refer to a web page, and therefore, when an output position is designated on the web page, the announcement banner 30 may be moved when scrolling up or down. In this case, the output location can be set as coordinates on the web page. In other words, depending on the web page, only all or part of the announcement banner 30 may be output to advertisement viewers according to the conversion or movement of the web page.

혹은 웹 사이트가 출력되는 화면 상에서 특정 좌표에 아나운싱 배너(30)가 위치되도록 출력 위치가 지정될 수 있다. 다시 말해 웹 페이지를 스크롤 하더라도 웹 사이트 화면 상의 특정 위치에는 아나운싱 배너(30)가 출력되도록 웹 사이트가 출력되는 디스플레이 화면의 특정 좌표에 아나운싱 배너(30)가 출력되도록 출력 위치가 지정될 수 있는 것이다. 이 경우에는 출력 위치가 화면 상의 좌표로 설정될 수 있다. 다시 말해 출력 위치가 화면 상의 좌표 일 측으로 지정되는 경우 웹 페이지에 아나운싱 배너(30)가 종속되지 않아 페이지의 스크롤이 발생하거나 웹 페이지의 이동이 발생하더라도 아나운싱 배너(30)는 고정된 위치에 표시된다. Alternatively, the output location may be designated such that the announcement banner 30 is located at specific coordinates on the screen where the website is displayed. In other words, even if the web page is scrolled, the output position can be designated so that the announcement banner 30 is output at a specific coordinate of the display screen on which the web site is output so that the announcement banner 30 is output at a specific position on the web site screen. In this case, the output location may be set as coordinates on the screen. In other words, if the output position is designated as one side of the coordinates on the screen, the announcement banner 30 is not subordinate to the web page, so even if the page scrolls or the web page moves, the announcement banner 30 is displayed at a fixed position. .

여기서 가장 바람직하게 위치 설정 모듈(200)은 웹 사이트가 출력되는 화면 상에서 아나운싱 배너(30)의 출력 위치를 설정하도록 하여, 웹 페이지에 아나운싱 배너(30)가 종속되지 않아 페이지의 스크롤이 발생하거나 웹 페이지의 이동이 발생하더라도 아나운싱 배너(30)는 고정된 위치에서 출력되게 하는 것이 보다 광고 효과를 높이기 위해서는 바람직할 수 있다.Most preferably, the position setting module 200 sets the output position of the announcement banner 30 on the screen on which the web site is output, so that the announcement banner 30 is not dependent on the web page, so scrolling of the page occurs or web Even if the page is moved, it may be preferable to output the announcement banner 30 at a fixed location to increase the advertising effect.

배너 노출 모듈(300)은 설정된 출력 위치에 아나운싱 배너(30)를 표시하고 재생시키는 기능을 수행한다. 이때 아나운싱 배너(30)는 출연자(10)의 영상에 정보음성이 더빙되어 제공되는 영상의 형태이므로, 아나운싱 배너(30)의 표시 및 재생 시 별도의 재생/정지 버튼을 더하여 표시 처리함으로써 아나운싱 배너(30)의 재생 여부를 광고 시청자가 제어할 수 있도록 할 수 있음은 물론이다.The banner exposure module 300 performs a function of displaying and reproducing the announcement banner 30 at a set output location. At this time, since the announcement banner 30 is in the form of a video provided by dubbing the information voice to the video of the performer 10, when displaying and playing the announcement banner 30, a separate play/stop button is added to display the announcement banner ( 30) can be played or not reproduced, of course.

따라서 이와 같은 본 발명의 아나운싱 광고 배너 제공 시스템에 따르면, 아나운서와 같은 출연자(10)가 음성의 형식으로 광고를 제공하는 듯한 아나운싱 배너(30)를 웹 사이트에 표시 처리하여 광고를 제공함으로써 해당 아나운싱 배너(30)가 삽입된 웹 사이트 이용자일 수 있는 광고 시청자에 대한 광고 효과를 높인 효과가 있다.Therefore, according to the system for providing an announcement advertisement banner of the present invention, the announcer 10 displays the announcement banner 30 in the form of voice on the website and provides the advertisement, thereby providing the corresponding announcement banner 30. (30) has an effect of increasing the advertisement effect for advertisement viewers who may be web site users inserted.

도 4는 본 발명의 색상이 변경된 아나운싱 배너를 나타낸 개념도이다.4 is a conceptual diagram showing an announcement banner with a changed color according to the present invention.

도 4를 참조하여 설명하면, 상술한 설명에서 본 발명의 영상은 출연자(10)의 얼굴 및 의상을 착용한 상반신을 포함하는 신체 일부를 포함할 수 있다 하였다. 나아가 이 경우 아나운싱 배너 역시 출연자(10)의 배경 및 의상을 착용한 상반신을 포함하는 신체 일부를 포함할 수 있음은 물론이다.Referring to FIG. 4 , in the above description, the image of the present invention may include a part of the body including the face of the performer 10 and the upper body wearing the costume. Furthermore, in this case, the announcement banner may also include a part of the body including the upper body wearing the background and the costume of the performer 10 as a matter of course.

이때 웹 사이트의 출력 위치의 색상이 아나운싱 배너에 포함된 출연자(10)의 의상 색과 일치하는 경우 아나운싱 배너에 대한 식별력이 떨어져 광고 전달 효과가 저해될 우려가 존재한다.At this time, if the color of the output location of the website matches the color of the clothes of the performer 10 included in the announcement banner, there is a concern that the advertisement delivery effect may be hindered due to a decrease in discrimination of the announcement banner.

따라서 아나운싱 배너에 대한 식별력을 높이기 위해, 본 발명의 시스템은 아나운싱 배너에 포함된 의상(40)의 색상을 변경하는 구성을 더할 수 있는데, 이를 위해 시스템은 의상 변경 모듈(400)을 포함할 수 잇으며, 바람직하게 의상 변경 모듈(400)은 색상 파악부(410) 및 색상 변경부(420)를 포함하여 구성될 수 있다.Therefore, in order to increase the discrimination of the announcement banner, the system of the present invention can add a configuration for changing the color of the clothing 40 included in the announcing banner. To this end, the system may include a clothing change module 400 Preferably, the clothing change module 400 may include a color detection unit 410 and a color change unit 420.

의상 변경 모듈(400)에 포함되는 색상 파악부(410)는 지정된 출력 위치의 색상을 파악하는 기능을 수행한다. 여기서 출력 위치가 웹 사이트(웹 페이지)의 소정 위치, 즉 웹 페이지 상에서의 좌표인 경우 해당 웹 사이트 좌표의 색상을 파악하며, 출력 위치가 웹 사이트가 출력되는 화면의 소정 위치, 즉 화면의 좌표인 경우 현재 화면 상의 해당 좌표에 출력되고 있는 색상을 파악한다.The color detection unit 410 included in the costume change module 400 performs a function of determining the color of a designated output position. Here, if the output location is a predetermined location of the website (web page), that is, coordinates on the web page, the color of the website coordinates is identified, and the output location is a predetermined location on the screen where the website is output, that is, the coordinates of the screen. In this case, the color currently displayed at the corresponding coordinates on the screen is identified.

색상 변경부(420)는 출력 위치의 색상과 일치하지 않는 색상으로 아나운싱 배너에 포함된 의상(40)의 색상을 변경하는 기능을 수행한다. 다시 말해 아나운싱 배너에 포함된 의상(40)의 색상이 출력 위치의 색상과 달라지도록, 출력 위치의 색상과 다른 색상으로 아나운싱 배너에 포함된 의상(40)의 색상을 변경하는 것이다.The color changing unit 420 performs a function of changing the color of the clothing 40 included in the announcement banner to a color that does not match the color of the output position. In other words, the color of the clothing 40 included in the announcement banner is changed to a different color from the color of the output position so that the color of the clothing 40 included in the announcement banner is different from the color of the output position.

이때 출력 위치의 색상과 보색으로 의상(40)의 색상을 변경할 수도 있으나, 일치하지만 않는 색상이라면 자연스러운 색상 범위 내에서 의상(40)의 색상을 변경하는 것도 가능하다.At this time, the color of the clothing 40 may be changed to a color complementary to the color of the output position, but if the color does not match, it is also possible to change the color of the clothing 40 within a natural color range.

따라서 이와 같은 구성을 통해 출력 위치와 아나운싱 배너에 포함된 출연자(10)의 의상(40) 색이 동일하거나 혹은 아나운싱 배너의 식별력을 높이도록 의상(40)의 색상을 변경할 수 있어, 광고 효과를 극대화할 수 있다.Therefore, through this configuration, the color of the costume 40 of the performer 10 included in the output location and the announcement banner is the same or the color of the costume 40 can be changed to increase the discrimination of the announcement banner, maximizing the advertising effect. can do.

도 5는 얼굴 영역 및 입 영역의 추출 예시를 나타낸 개념도이다.5 is a conceptual diagram illustrating an example of extracting a face area and a mouth area.

도 5를 참조하여 설명하면, 정보음성과 일치하도록 입 모양이 움직이는 아나운싱 배너를 제작하기 위해서는 정보음성과 동일한 입 모양을 갖는 영상을 매번 입력받아야 하는 부담이 따른다. 그러나, 상술한 배경이 제거된 영상의 입 모양을 정보음성과 동일하게 바꿀 수 있다면 정보음성마다 매번 영상을 입력받아야 하는 불편이 해소될 수 있다.Referring to FIG. 5 , in order to produce an announcement banner whose mouth shape is moved to match the information voice, a burden of inputting an image having the same mouth shape as the information voice is incurred every time. However, if the mouth shape of the above-described background-removed image can be changed to be the same as that of the information voice, the inconvenience of having to receive an image every time for each information voice can be resolved.

따라서 이러한 문제를 해결하기 위해 본 발명의 시스템은 합성 모듈(500)을 포함할 수 있으며, 합성 모듈(500)은 바람직하게 영상 DB(510), 얼굴 영역 검출부(520), 입 모양 오브젝트 추출부(530), 발음 분석부(540), 입 합성부(550)를 포함할 수 있다.Therefore, in order to solve this problem, the system of the present invention may include a synthesis module 500, and the synthesis module 500 preferably includes an image DB 510, a face area detection unit 520, a mouth shape object extraction unit ( 530), a pronunciation analysis unit 540, and a mouth synthesis unit 550.

영상 DB(510)는 상기 영상 입력부(110)를 통해 입력된 복수의 영상을 저장하는 기능을 수행한다. 다시 말해 영상 입력부(110)를 통해 입력된 영상에 대한 데이터베이스라 할 수 있다.The image DB 510 performs a function of storing a plurality of images input through the image input unit 110 . In other words, it can be referred to as a database for images input through the image input unit 110 .

상술한 설명에서 영상 입력부(110)를 통해 입력되는 영상의 수는 수십 내지 수백, 수천, 나아가 수 만개가 가능할 수 있다고 하였으며, 보다 바람직하게는 영상 입력부(110)를 통해 입력되는 영상의 수가 빅데이터를 이룰 수 있는 수라 하였으므로, 이와 같은 복수의 영상을 영상 DB(510)에 저장하는 것이라 할 수 있다.In the above description, it has been said that the number of images input through the image input unit 110 can be tens, hundreds, thousands, or even tens of thousands. More preferably, the number of images input through the image input unit 110 is big data. Since is referred to as a number that can be achieved, it can be said that such a plurality of images are stored in the image DB 510.

얼굴 영역 검출부(520)는 영상에서 얼굴 영역(50)을 검출하고, 얼굴 영역(50)에서 입 영역(60)을 검출하는 기능을 수행한다. 이때 얼굴 영역(50) 및 입 영역(60)의 검출 방식에서는 제한을 두지 않으나, 바람직하게는 얼굴의 외곽선을 검출하여 외곽선이 이루는 폐곡선 내의 영역을 얼굴 영역(50)으로써 검출하고, 얼굴 영역(50) 내에서도 입술의 외곽선을 검출하여 입술의 외곽선이 이루는 내부 영역을 입 영역(60)으로 검출할 수 있다.The face area detection unit 520 performs a function of detecting the face area 50 in the image and detecting the mouth area 60 from the face area 50 . At this time, the detection method of the face area 50 and the mouth area 60 is not limited, but preferably, the outline of the face is detected and the area within the closed curve formed by the outline is detected as the face area 50, and the face area 50 ), it is also possible to detect the inner region formed by the outline of the lips as the mouth region 60 by detecting the outline of the lips.

여기서 영상이라 함은 출연자(10)의 얼굴이 촬영되어 얼굴이 포함된 것이라 하였으므로, 영상에서 출연자(10)의 얼굴 영역(50)만을 검출해내고, 얼굴 영역(50)에서도 입 모양을 나타내는 입 영역(60)만을 검출해내는 기능을 수행한다.Here, since the image means that the face of the performer 10 is photographed and includes the face, only the face region 50 of the performer 10 is detected from the image, and the mouth region showing the mouth shape in the face region 50 It performs the function of detecting only (60).

입 모양 오브젝트 추출부(530)는 영상 DB에 저장된 복수의 영상 각각에서 음성의 발음 별로 입 모양 오브젝트를 추출하여 저장하는 기능을 수행한다.The mouth shape object extraction unit 530 performs a function of extracting and storing a mouth shape object for each pronunciation of a voice from each of a plurality of images stored in the image DB.

예를 들어 각각의 영상은 광고 내용에 대한 안내정보를 전달하기 위한 영상이므로, 출연자(10)는 안내정보를 음성을 기반으로 전달하며, 이때 음성의 발음에 맞게 입 영역(60)이 움직이게 된다. 예를 들어 안내정보가 ‘안녕하세요’ 일 경우, ‘안’,‘녕’,‘하’,‘세’,‘요’와 같이 안내정보를 이루는 텍스트에 해당하는 발음을 하게 되는 것이다.For example, since each video is a video for delivering guide information about advertisement contents, the performer 10 delivers the guide information based on voice, and at this time, the mouth area 60 moves according to the pronunciation of the voice. For example, if the guide information is 'hello', pronunciation corresponding to the text constituting the guide information, such as 'an', 'nyeong', 'ha', 'se', and 'yo' is made.

이때 각 글자의 발음 별로 입 모양이 달라지게 되는데, 입 모양 오브젝트 추출부(530)는 이러한 발음 별로 입 모양 오브젝트를 추출하여 저장한다. 즉 각각의 영상에서 입 영역(60)만을 검출하고 잘라내어 입 영역(60)만을 저장하되, 각각의 발음 별로 입 모양을 구분한 오브젝트를 저장한 것이다. 예를 들어, 영상 내에서‘안’을 발음하는 입 모양에 해당하는 입 영역(60)만을 잘라낸 영상의 부분, 즉 입 영역(60)만을 편집한 부분은 ‘안’이라는 발음에 대한 오브젝트가 되는 것이다.At this time, the shape of the mouth is different for each pronunciation of each letter, and the mouth shape object extraction unit 530 extracts and stores the mouth shape object for each pronunciation. That is, only the mouth region 60 is detected and cut out from each image, and only the mouth region 60 is stored, and an object in which the shape of the mouth is divided for each pronunciation is stored. For example, a part of an image in which only the mouth region 60 corresponding to the shape of the mouth pronouncing 'an' in the image is cut out, that is, a part in which only the mouth region 60 is edited becomes an object for the pronunciation of 'an'. will be.

이때 발음 별 입 모양 오브젝트는 바람직하게는 한국어 발음 별로 저장될 수 있으며, 나아가 외국어에서도 해당 언어의 발음 별로 영상에서 입 영역(60)만을 잘라 저장하여 이를 발음 별 입 모양에 대한 오브젝트로써 저장하는 것 역시 가능하다.At this time, the mouth shape object for each pronunciation may preferably be stored for each Korean pronunciation, and furthermore, in a foreign language, only the mouth region 60 is cut and stored in the image for each pronunciation of the corresponding language and stored as an object for the mouth shape for each pronunciation. possible.

나아가 한국어에서는 표준발음법이 존재하므로, 입력된 영상에서 제공하고자 하는 정보의 내용을 텍스트로 변환한 뒤, 이를 표준발음법에 따라 발음대로 적고, 이를 음절마다 분할하여 음절에 해당하는 영상의 입 영역(60)만을 잘라 이를 발음 별 입 모양에 대한 오브젝트로 추출하여 저장하는 것 역시 가능하다.Furthermore, since there is a standard pronunciation method in Korean, the contents of the information to be provided in the input video are converted into text, and then written according to the pronunciation according to the standard pronunciation method, and then divided into syllables, and the mouth area of the video corresponding to the syllable It is also possible to cut only (60), extract it as an object for the mouth shape for each pronunciation, and store it.

발음 분석부(540)는 정보음성의 발음을 분석하는 기능을 수행하는 것이며, 안내정보에 해당하는 텍스트와 실제 발음은 다를 수 있는 만큼 해당 안내정보에 대한 음성인 정보음성의 발음을 분석하는 것이다.The pronunciation analysis unit 540 performs a function of analyzing the pronunciation of the information voice, and analyzes the pronunciation of the information voice corresponding to the guide information as much as the actual pronunciation may be different from the text corresponding to the guide information.

예를 들어 상술한 바와 같이‘내일의 날씨는 맑겠습니다’가 안내정보인 경우, 정보음성의 발음은 ‘내일의 날씨는 말?鞭였求蔑?가 된다. 이때 정보음성의 발음 분석은 바람직하게는 표준발음법에 의거하여 분석하는 것을 기본으로 한다.For example, as described above, if 'tomorrow's weather will be clear' is information information, the pronunciation of the information voice is 'tomorrow's weather is mal? At this time, the pronunciation analysis of the information voice is preferably based on the standard pronunciation method.

입 합성부(550)는 발음 분석부(540)에 의해 분석된 정보음성의 발음에 따라서, 해당 발음에 대응되는 입 모양 오브젝트를 배경이 제거된 영상의 입 영역(60)에 합성 처리하여 합성영상을 생성한다.According to the pronunciation of the information voice analyzed by the pronunciation analysis unit 540, the mouth synthesis unit 550 synthesizes a mouth-shaped object corresponding to the pronunciation to the mouth region 60 of the image from which the background has been removed, and processes the synthesized image. generate

즉 정보음성의 발음 및 재생속도에 맞추어, 해당 발음에 대응되는 입 모양 오브젝트를 합성의 원본이 되는 배경이 제거된 영상에서 검출된 입 영역(60)에 합성 처리하여 배경이 제거된 영상에서 입 모양이 바뀐 합성영상을 생성하는 것이다.That is, according to the pronunciation and playback speed of the information voice, the mouth shape object corresponding to the pronunciation is synthesized with the mouth area 60 detected in the background-removed image, which is the source of synthesis, and the mouth shape in the background-removed image. This is to create the altered composite image.

상술한 바와 같이‘내일의 날씨는 맑겠습니다’가 안내정보인 경우, 정보음성의 발음은 ‘내일의 날씨는 말?鞭였求蔑?가 된다고 하였으므로, 정보음성의 발음 및 재생속도에 맞추어 ‘내’‘일’‘의’‘날’‘씨’‘는’‘말’‘?阪?‘습’‘니’‘다’에 대한 각각의 음절을 발음하는 입 모양 오브젝트를 배경이 제거된 영상의 입 영역(60)에 합성 처리하여, 해당 정보음성의 내용 및 발음, 그리고 정보음성의 재생속도와 음성의 길이와 대응되도록 입 모양 오브젝트를 합성 처리하는 것이다.As described above, when 'the weather will be clear tomorrow' is information information, the pronunciation of the information voice is 'what is the weather tomorrow? The ''day'' of ''day'' is a mouth-shaped object that pronounces each syllable for ''word''? Synthesis processing is performed on the mouth area 60, and a mouth-shaped object is synthesized to correspond to the contents and pronunciation of the corresponding information voice, the reproduction speed of the information voice, and the length of the voice.

나아가 이와 같이 합성영상이 생성되는 경우, 배너 생성부(140)는 합성영상에 상기 발음 분석부(540)의 분석의 기반이 된 정보음성을 더빙 처리하여 아나운싱 배너를 완성하게 된다.Furthermore, when a synthesized video is generated in this way, the banner generator 140 completes an announcement banner by dubbing the synthesized video with informational voice, which is the basis of the analysis by the pronunciation analysis unit 540.

이에 따르면 정보음성을 실제 아나운싱 배너에 포함된 출연자(10)가 발음하는 것처럼 아나운싱 배너의 입 모양과 정보음성의 발음이 일치하게 되어, 보다 자연스러운 아나운싱 배너를 제공할 수 있게 되며, 나아가 모든 정보음성에 대해 영상을 촬영하지 않더라도 추출된 오브젝트를 영상에 삽입하는 방식으로 아나운싱 배너의 제작이 가능해져 아나운싱 배너에 대한 제작 비용 절감을 가능케 할 수 있다.According to this, as the announcer 10 included in the actual announcement banner pronounces the information voice, the mouth shape of the announcement banner and the pronunciation of the information voice match, so that a more natural announcement banner can be provided, and furthermore, all information voices Even if an image is not taken, an announcement banner can be produced by inserting the extracted object into the image, thereby reducing the production cost of the announcement banner.

더불어 보다 사실적인 합성영상 생성을 위해서는, 입 모양에 대한 오브젝트가 삽입된 입 영역(60)의 경계면에 있어서의 경계면 스머징(smudging), 즉 경계면의 번짐 처리를 수행하여 합성된 부분이 티나지 않게 처리하는 것 역시 가능하다. 이를 위해 합성 모듈(500)은 피부 화소 검출부(560)와 보정 처리부(570)를 더 포함할 수 있다.In addition, in order to create a more realistic composite image, the boundary surface smudging at the boundary surface of the mouth area 60 where the object for the mouth shape is inserted, that is, the boundary surface smearing process is performed so that the synthesized part is not visible. It is also possible to do To this end, the synthesis module 500 may further include a skin pixel detection unit 560 and a correction processing unit 570 .

피부 화소 검출부(560)는 생성된 합성영상에서 입 영역(60)과 얼굴 영역(50) 사이의 경계 부위, 즉 합성되는 입 영역(60)의 외곽선에 해당하는 경계면의 피부 화소를 검출한다. 여기서 피부 화소라 함은 피부 색상, 즉 상아색 내지 살구색, 나아가 갈색에 걸치는 일반적인 피부의 색상을 나타내는 화소를 검출하는 것으로, 합성되는 입 영역(60)의 경계면, 즉 외곽선 경계에 근접한 화소 중에서 피부의 색을 갖는 화소를 검출해내는 것이다.The skin pixel detection unit 560 detects a boundary between the mouth region 60 and the face region 50 in the generated composite image, that is, a skin pixel at the boundary corresponding to the outline of the synthesized mouth region 60 . Here, the skin pixel refers to detecting a pixel representing a skin color, that is, a general skin color ranging from ivory to apricot, and furthermore to brown. It is to detect a pixel having .

보정 처리부(570)는 검출된 경계 부위의 스머징(smudging) 처리하고 채도 및 명도를 보정 처리하는 기능을 수행한다.The correction processor 570 performs a function of smudging the detected boundary area and correcting saturation and brightness.

여기서 경계 부위의 스머징이라 함은 경계 부위를 번지게 처리하여 합성된 경계면을 블러링(blurring)함으로써 경계를 흐릿하게 번지게 하고, 합성된 부분의 경계를 알아볼 수 없도록 하는 것이다. 이를 통해 얼굴 영역(50)의 피부가 보다 깨끗해 보일 수 있음과 동시에 경계면이 흐려져 합성된 부분의 경계가 알아보기 힘들어지는 만큼, 보다 자연스러운 합성영상을 제공할 수 있게 된다.Here, the smudge of the boundary part means blurring the boundary by blurring the synthesized boundary surface by processing the boundary part to be smudged, and making the boundary of the synthesized part unrecognizable. Through this, the skin of the face area 50 can look cleaner, and at the same time, a more natural composite image can be provided as the boundary of the synthesized part becomes difficult to recognize because the boundary is blurred.

나아가 채도 및 명도의 보정을 수행하는 것은 다시 말해 합성 영상의 색감, 그리고 밝기를 보정하는 것이라 할 수 있는데, 따라서 입 모양에 대한 오브젝트가 합성되어 얼굴 영역(50) 및 입 영역(60) 사이에서 발생할 수 있는 채도(색감) 차이 및 명도(밝기)의 차이를 낮추고 경계 부위의 피부 화소에 있어 톤(tone)을 고르게 하여 자연스러운 경계면을 생성할 수 있다.Furthermore, correcting the saturation and brightness can be said to be correcting the color and brightness of the synthesized image. Therefore, objects for the shape of the mouth are synthesized to occur between the face area 50 and the mouth area 60. A natural boundary surface can be created by lowering the possible difference in saturation (color) and brightness (brightness) and evening the tone in the skin pixels in the boundary area.

따라서 이와 같은 피부 화소 검출부(560) 및 보정 처리부(570)의 구성에 따르면 모든 정보음성에 대해 영상을 생성하지 않고 입 모양에 대한 오브젝트를 합성 처리하여 아나운싱 배너를 제작하는 구성에 있어, 아나운싱 배너의 입 영역(60)과 얼굴 영역(50) 사이의 경계 부위의 어색함을 최소화하여 보다 자연스러운 아나운싱 배너를 제공할 수 있게 되는 효과가 있다.Therefore, according to the configuration of the skin pixel detection unit 560 and the correction processing unit 570, an announcement banner is produced by synthesizing and processing mouth shape objects without generating images for all information voices. There is an effect of providing a more natural announcement banner by minimizing the awkwardness of the boundary between the mouth area 60 and the face area 50.

도 6은 팔 영역 및 손 영역의 추출 예시를 나타낸 개념도이며, 도 7은 돌출 방향을 가리키는 합성 예시를 나타낸 개념도이다.6 is a conceptual diagram illustrating an example of extracting an arm region and a hand region, and FIG. 7 is a conceptual diagram illustrating a synthesis example indicating a protruding direction.

상술한 설명에서 본 발명의 아나운싱 배너는 출연자(10)가 제스처를 취하면서 광고 내용에 대한 안내정보를 제공하는 것일 수도 있다 하였는데, 이 경우 제스처를 취하면서 정보를 전달하기 위해서는, 본 발명의 영상은 출연자(10)의 얼굴 뿐 아니라 손을 포함하는 상반신을 포함하는 신체 일부를 포함하는 것일 수 있다 하였다. 여기서 손이 포함되었다는 것은 상반신 중에서도 팔 및, 팔에 연결된 손이 포함된 것을 의미한다 할 수 있다.In the above description, it is said that the announcement banner of the present invention may provide information about advertisement contents while the performer 10 makes a gesture. In this case, in order to deliver information while making a gesture, the video of the present invention It was said that it may include not only the face of the performer 10 but also body parts including the upper body including the hands. Here, the inclusion of the hand may mean that the arm and the hand connected to the arm are included among the upper body.

도 6,7을 참조하여 설명하면, 손이 포함되는 경우 손 모양의 변화에 따라 특정 방향을 가리키는 모양의 아나운싱 배너를 제작하는 것이 가능한데, 이를 위해 상술한 합성 모듈(500)은 손 영역 검출부(580), 손 모양 오브젝트 추출부(590), 요철 파악부(600), 손 합성부(610)를 더 포함할 수 있다.Referring to FIGS. 6 and 7 , when a hand is included, it is possible to manufacture an announcing banner pointing in a specific direction according to a change in hand shape. ), a hand shape object extraction unit 590, a concavo-convex detection unit 600, and a hand synthesis unit 610 may be further included.

손 영역 검출부(580)는 상술한 영상 DB에 저장된 복수의 영상에서 팔 영역(70) 및 손 영역(80)을 검출하는 기능을 수행한다. 여기서 손 영역(80) 검출이라 함은 영상에서 팔 영역(70)을 검출하고, 팔 영역(70)의 단부와 연결된 손 영역(80)을 검출하는 것이라 할 수 있다. 이는 팔과 손에 해당하는 형상을 지닌 외곽선을 검출하여 외곽선이 이루는 폐곡선 내의 영역을 팔 영역(70), 그리고 손 영역(80)으로 검출하는 것이라 할 수 있다.The hand region detection unit 580 performs a function of detecting the arm region 70 and the hand region 80 from the plurality of images stored in the above image DB. Here, the detection of the hand region 80 can be referred to as detecting the arm region 70 in the image and detecting the hand region 80 connected to the end of the arm region 70 . This may be referred to as detecting an outline having a shape corresponding to an arm and a hand, and detecting an area within a closed curve formed by the outline as an arm area 70 and a hand area 80.

따라서 팔 영역(70)은 어깨에서 이어지는 시작 지점부터 손과 연결되는 종료 지점까지를 일컫는 것이고, 팔 영역(70)의 종료 지점부터 말단까지가 손 영역(80)이 된다고 할 수 있다.Therefore, the arm region 70 refers to a starting point connected from the shoulder to an end point connected to the hand, and it can be said that the hand region 80 is from the end point to the end of the arm region 70 .

손 모양 오브젝트 추출부(590)는 영상 DB(510)에 저장된 복수의 영상 각각에서 검출된 손 영역(80)에 대해, 특정 방향을 가리키는 모양 별로 손 모양 오브젝트를 추출하여 저장하는 기능을 수행한다. 여기서 손 모양 오브젝트라 함은 왼쪽, 오른쪽, 위, 아래와 같이 특정 방향을 가리키는 모양 별로 추출된 것이라 할 수 있다.The hand shape object extraction unit 590 performs a function of extracting and storing hand shape objects for each shape pointing in a specific direction with respect to the hand region 80 detected in each of a plurality of images stored in the image DB 510. Here, the hand-shaped objects may be extracted for each shape pointing in a specific direction, such as left, right, up, and down.

예를 들어 팔이 왼쪽 방향을 향해 뻗어있고 손이 왼쪽을 가리키는 모양을 취하는 것이 왼쪽을 가리키는 손 모양 오브젝트가 되고, 팔이 위쪽 방향을 향해 뻗어있고 손이 위쪽을 가리키는 모양을 취하는 것이 위쪽을 가리키는 손 모양 오브젝트가 될 수 있다.For example, a hand pointing left with an arm extending to the left becomes a hand object object pointing left, and a hand pointing upward with an arm extending upward and a hand pointing upward. It can be a shape object.

요철 파악부(600)는 출력 위치의 인근 영역에 위치한 선의 돌출 방향을 포함하는 요철을 기능을 수행한다. 여기서 출력 위치는 웹 사이트의 소정 위치 또는 웹 사이트가 출력되는 화면의 소정 위치가 될 수 있다 하였으므로, 해당 출력 위치 인근 영역에는 웹 사이트에 포함된 특정 선(line)이 포함될 수 있다.The concavo-convex detection unit 600 performs a concavo-convex function including a protruding direction of a line located in a region adjacent to an output position. Here, since the output location may be a predetermined location of the website or a predetermined location of the screen on which the website is output, a specific line included in the website may be included in an area near the corresponding output location.

따라서 출력 위치의 인근 영역, 그중에서도 출력 위치와 최인접한 선의 돌출 방향을 포함하는 요철을 파악하게 되면, 아나운싱 배너의 출력 위치와 최인접한 선에 어느 정도의 요철이 있는지, 나아가 어떠한 방향으로 돌출이 되고 있는지를 파악할 수 있다. 예를 들어 왼쪽 방향으로 돌출이 되어 있고 10pixel 만큼 돌출되어 있는 경우 돌출 방향은 왼쪽, 요철 정도는 10pixel이 될 수 있다. 이와 같이 돌출 방향 및 요철이 파악될 수 있다.Therefore, if the irregularities including the projection direction of the output position and the line closest to the output position are identified in the area near the output position, in particular, how many irregularities are present in the output position and the line closest to the output position of the announcement banner, and furthermore, in what direction it is protruded. can figure out For example, if it protrudes in the left direction and protrudes by 10 pixels, the protrusion direction may be left and the degree of concavo-convex may be 10 pixels. In this way, protruding directions and irregularities can be identified.

만약 출력 위치와 최인접한 선이 단순 직선인 경우(수직선 또는 수평선)인 경우에는 돌출 방향 및 요철의 정도가 없는 것으로 판단 가능하다.If the line closest to the output position is a simple straight line (vertical or horizontal line), it can be determined that there is no protruding direction and degree of unevenness.

손 합성부(610)는 돌출 방향을 가리키도록 손 모양 오브젝트를 배경이 제거된 영상의 팔 영역(70) 및 손 영역(80)에 합성하여 합성영상을 생성하는 기능을 수행한다.The hand synthesizer 610 performs a function of generating a synthesized image by synthesizing a hand-shaped object with the arm region 70 and the hand region 80 of the image from which the background has been removed so as to point in the protruding direction.

예를 들어 돌출 방향이 왼쪽인 경우, 왼쪽을 가리키는 손 모양 오브젝트, 다시 말해 팔 영역(70) 및 손 영역(80)이 모두 왼쪽을 가리키는 손 모양 오브젝트를 배경이 제거된 영상의 팔 영역(70) 및 손 영역(80)에 합성하여 합성영상을 생성하게 된다.For example, when the extrusion direction is left, a hand-shaped object pointing to the left, that is, a hand-shaped object in which both the arm region 70 and the hand region 80 point to the left are converted into the arm region 70 of the image from which the background is removed. and synthesized with the hand region 80 to generate a synthesized image.

다른 예시로 돌출 방향이 오른쪽인 경우, 오른쪽을 가리키는 손 모양 오브젝트, 다시 말해 팔 영역(70) 및 손 영역(80)이 모두 오른쪽을 가리키는 손 모양 오브젝트를 배경이 제거된 영상의 팔 영역(70) 및 손 영역(80)에 합성하여 합성영상을 생성하게 된다.As another example, if the protrusion direction is right, the hand-shaped object pointing to the right, that is, the arm region 70 and the hand region 80 both point to the right, the arm region 70 of the image from which the background is removed. and synthesized with the hand region 80 to generate a synthesized image.

돌출 방향이 위쪽인 경우, 위쪽을 가리키는 손 모양 오브젝트, 다시 말해 팔 영역(70) 및 손 영역(80)이 모두 위쪽을 가리키는 손 모양 오브젝트를 배경이 제거된 영상의 팔 영역(70) 및 손 영역(80)에 합성하여 합성영상을 생성하게 된다.When the extrusion direction is upward, a hand-shaped object pointing upward, that is, a hand-shaped object in which both the arm region 70 and the hand region 80 point upward, is displayed as the arm region 70 and the hand region of the image from which the background has been removed. (80) to generate a synthesized image.

만약 돌출 방향이 아래쪽이거나 없는 경우, 다시 말해 출력 위치와 최인접한 선이 돌출 방향이 없는 직선인 경우에는 아래쪽을 가리키는 손 모양 오브젝트, 다시 말해 팔 영역(70) 및 손 영역(80)이 모두 오른쪽을 가리키는 손 모양 오브젝트를 배경이 제거된 영상의 팔 영역(70) 및 손 영역(80)에 합성하여 출연자(10)가 마치 차렷 자세를 취한 듯한 합성영상을 생성할 수 있다.If the extrusion direction is downward or nonexistent, that is, if the line closest to the output position is a straight line with no extrusion direction, the downward-pointing hand-shaped object, that is, the arm area 70 and the hand area 80 both point to the right. A synthesized image in which the performer 10 appears to be at attention may be generated by combining the pointing hand-shaped object with the arm region 70 and the hand region 80 of the image from which the background is removed.

나아가 이와 같이 합성영상이 생성되는 경우 배너 생성부(140)는 생성된 합성영상에 정보음성을 더빙하여 아나운싱 배너를 생성하게 되며, 이와 같이 생성된 아나운싱 배너가 출력위치에 표시 및 재생 처리될 수 있다.Furthermore, when a synthesized video is generated in this way, the banner generating unit 140 dubs information voice over the generated synthesized video to generate an announcing banner, and the generated announcing banner can be displayed and reproduced in an output position. .

따라서 이를 통해, 웹 사이트에 표시되는 아나운싱 배너에 있어 아나운싱 배너의 표시 위치와 최인접한 선의 요철에 따라 아나운싱 배너의 팔 및 손 모양을 변형시킴으로써 아나운싱 배너가 웹 사이트의 특정 방향을 가리키며 강조하는 모양새를 나타낼 수 있어, 웹 사이트의 구도와 보다 자연스럽게 어우러지는 아나운싱 배너를 제공할 뿐 아니라 웹 사이트에 대한 강조 효과를 제공할 수 있음은 물론이다.Therefore, through this, in the announcement banner displayed on the website, the shape of the arm and hand of the announcement banner is modified according to the concavity and convexity of the line adjacent to the display position of the announcement banner, thereby indicating the appearance of the announcement banner pointing in a specific direction of the website and emphasizing it. Therefore, it is of course possible to provide an announcing banner that more naturally blends with the composition of the website and to provide an emphatic effect for the website.

나아가 웹 사이트와 보다 자연스럽게 어우러질 수 있도록, 상술한 요철의 곡도에 따라 합성영상에 포함된 팔 영역(70)의 길이를 가변하는 것도 가능하다. 이를 위해 합성 모듈(500)은 길이 제어부(620)를 포함할 수 있다.Furthermore, it is possible to vary the length of the arm region 70 included in the synthesized image according to the above-described curvature of the concavo-convex so as to harmonize with the web site more naturally. To this end, the synthesis module 500 may include a length controller 620.

나아가 여기서 팔 영역(70)의 길이라 함은, 산출된 팔 영역(70)에서 가장 긴 부분의 길이를 의미하는 것이다. 즉 팔 영역(70)으로 파악된 영역에서 가장 긴, 장축의 길이가 팔 영역(70)의 길이가 된다.Furthermore, the length of the arm region 70 here means the length of the longest part of the calculated arm region 70 . That is, the length of the longest axis in the region identified as the arm region 70 becomes the length of the arm region 70 .

길이 제어부(620)는 요철의 곡도에 따라 합성영상에 포함된 팔 영역(70)의 길이를 가변하는 기능을 제공하는데, 여기서 바람직하게는 곡도가 높을수록 가파르고 급하게 돌출된 것을 의미하므로, 팔 영역(70)의 길이를 보다 길게 조절하여 돌출 방향을 자연스럽게 향하도록 할 수 있다. 또한 곡도가 낮을수록 완만하게 돌출되어 거의 요철이 없다는 것을 의미하므로, 팔 영역(70)의 길이를 거의 가변하지 않도록 하여 선을 침범하는 것을 방지할 수 있다.The length control unit 620 provides a function of varying the length of the arm region 70 included in the composite image according to the degree of curvature of the concavo-convex. Here, preferably, since a higher degree of curvature means a steeper and more abrupt protrusion, the arm region ( 70) may be adjusted to be longer so that the protruding direction is naturally directed. In addition, the lower the degree of curvature, the more gently protrudes, meaning that there are almost no irregularities, so that the length of the arm region 70 is hardly changed to prevent the line from being invaded.

여기서 팔 영역(70)의 길이가 가변된다는 것은 팔 영역(70)의 길이를 늘리거나 줄이는 것을 의미하므로, 영상이나 이미지 상에서의 특정 객체의 크기 변경을 통해 팔 영역(70)의 길이를 줄이거나 늘리는 것이 가능하다. 이는 종래의 사진 보정용 프로그램이나 어플리케이션을 통해 구현 가능한 것이므로, 보다 상세한 설명은 생략한다.Here, the variable length of the arm region 70 means that the length of the arm region 70 is increased or decreased. Therefore, the length of the arm region 70 is reduced or increased by changing the size of a specific object on a video or image. it is possible Since this can be implemented through a conventional photo correction program or application, a detailed description thereof will be omitted.

이때, 보다 바람직하게 상술한 길이 제어부는 수학식 1을 통해 팔 영역(70)의 길이를 가변할 수 있다.At this time, more preferably, the above-described length control unit may vary the length of the arm region 70 through Equation 1.

수학식 1,

Figure 112022122199888-pat00001
Equation 1,
Figure 112022122199888-pat00001

(여기서, A’은 가변된 팔 영역의 길이, A는 팔 영역의 길이, r은 곡률반경(pixel), D는 상기 손 영역의 끝 지점과 상기 선 사이의 최단 거리(pixel))(Where A' is the length of the arm region, A is the length of the arm region, r is the radius of curvature (pixel), and D is the shortest distance between the end point of the hand region and the line (pixel))

예를 들어 팔 영역의 길이가 100pixel이고, 곡률반경이 80pixel이며, 손 영역의 끝 지점과 선 사이의 최단 거리가 10pixel인 경우,For example, if the length of the arm area is 100 pixels, the radius of curvature is 80 pixels, and the shortest distance between the end point of the hand area and the line is 10 pixels,

Figure 112022122199888-pat00002
로 산출된다.
Figure 112022122199888-pat00002
is calculated as

따라서 가변된 팔 영역의 길이는 곡률반경이 클수록(곡도가 낮을수록) 작아지며, 곡률반경이 작을수록(곡도가 클수록) 길어지는 값의 분포를 보이게 된다.Therefore, the length of the variable arm region shows a distribution of values that become smaller as the radius of curvature increases (as the degree of curvature decreases) and becomes longer as the radius of curvature decreases (as the degree of curvature increases).

이때 단순히 선형의 보정을 수행하는 것이 아니라, 하이퍼탄젠트함수를 통해곡률반경과 손 영역의 끝 지점과 선 사이의 최단 거리를 비교하여 팔 영역의 거리를 가변할 수 있도록 함으로써, 하이퍼탄젠트의 최대값에 곱해진 값, 즉 0.3을 초과하는 값이 나타나진 않도록 하였다. 따라서 팔 영역의 길이가 30% 이상 가변되지는 않아 부자연스러운 길이 조절이 일어나는 것은 방지하면서도, 급격한 선형 보정이 아닌 하이퍼탄젠트를 취한 보정값을 반영하여 보다 자연스러운, 점차적인 보정을 가능케 한 효과가 있다.At this time, rather than simply performing linear correction, the distance of the arm region can be varied by comparing the radius of curvature and the shortest distance between the end point of the hand region and the line through the hypertangent function, so that the maximum value of the hypertangent The multiplied value, i.e., a value exceeding 0.3 was prevented from appearing. Therefore, the length of the arm region is not varied by more than 30%, preventing unnatural length adjustment, and reflecting a correction value obtained by taking a hypertangent rather than an abrupt linear correction, thereby enabling a more natural and gradual correction.

따라서 이와 같은 하이퍼탄젠트 함수를 통한 팔 영역(70)의 길이 가변에 따르면, 웹 사이트에 포함된 선의 요철의 곡도에 따라 합성영상에 포함된 팔 영역(70)의 길이를 가변함으로써 아나운싱 배너(30)가 웹 사이트에 포함된 선의 돌출 방향을 자연스럽게 향하도록 할 수 있어 웹 사이트의 구도와 보다 자연스럽게 어우러지게 할 수 있으며, 이때 아나운싱 배너(30)에 포함된 팔 영역(70)의 길이 가변이 부자연스럽게 이루어지지 않으며, 나아가 웹 페이지의 곡도 변화에 있어서도 점차적으로 가변이 이루어져 보다 자연스러운 가변을 가능케 한 특징을 제공한다.Therefore, according to the variation of the length of the arm region 70 through the hypertangent function, the announcement banner 30 can be obtained by varying the length of the arm region 70 included in the synthesized image according to the curvature of the unevenness of the line included in the website. The protruding direction of the line included in the website can be naturally directed so that it blends more naturally with the composition of the website. At this time, the length of the arm area 70 included in the announcement banner 30 is unnaturally varied Furthermore, even in the change of the music of the web page, the variation is gradually made to provide a feature that enables a more natural variation.

이와 같은 구성으로 아나운싱 배너의 최인접한 선의 곡도에 따라 팔 영역(70)이 조절함으로써 곡도를 지닌 선과 아나운싱 배너의 팔 및 손이 보다 자연스럽게 어우러지도록 함과 동시에 강조 효과를 높일 수 있는 효과를 지닌다.With this configuration, the arm region 70 is adjusted according to the curvature of the nearest line of the announcing banner, so that the curved line and the arm and hand of the announcing banner are more naturally harmonized, and at the same time, the effect of enhancing the emphasis is achieved.

지금까지 설명한 바와 같이, 본 발명에 따른 웹 사이트에 대한 아나운싱 광고 배너 제공 시스템의 구성 및 작용을 상기 설명 및 도면에 표현하였지만 이는 예를 들어 설명한 것에 불과하여 본 발명의 사상이 상기 설명 및 도면에 한정되지 않으며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능함은 물론이다.As described above, although the configuration and operation of the system for providing an announcement advertisement banner for a website according to the present invention is expressed in the above description and drawings, this is merely an example and the spirit of the present invention is limited to the above description and drawings. It is not, and of course, various changes and changes are possible within a range that does not deviate from the technical spirit of the present invention.

10 : 출연자 20 : 중앙관제서버
30 : 아나운싱 배너 40 : 의상
50 : 얼굴 영역 60 : 입 영역
70 : 팔 영역 80 : 손 영역
100 : 배너 생성 모듈 110 : 영상 입력부
120 : 음성 입력부 130 : 배경 제거부
140 : 배너 생성부 200 : 위치 설정 모듈
300 : 배너 노출 모듈 400 : 의상 변경 모듈
410 : 색상 파악부 420 : 색상 변경부
500 : 합성 모듈 510 : 영상 DB
520 : 얼굴 영역 검출부 530 : 입 모양 오브젝트 추출부
540 : 발음 분석부 550 : 입 합성부
560 : 피부 화소 검출부 570 : 보정 처리부
580 : 손 영역 검출부 590 : 손 모양 오브젝트 추출부
600 : 요철 파악부 610 : 손 합성부
620 : 길이 제어부
10: performer 20: central control server
30: Announcement Banner 40: Costume
50: face area 60: mouth area
70: arm area 80: hand area
100: banner generation module 110: video input unit
120: voice input unit 130: background removal unit
140: banner generation unit 200: location setting module
300: Banner exposure module 400: Costume change module
410: color identification unit 420: color change unit
500: synthesis module 510: image DB
520: face area detection unit 530: mouth shape object extraction unit
540: pronunciation analysis unit 550: mouth synthesis unit
560: skin pixel detection unit 570: correction processing unit
580: hand area detection unit 590: hand shape object extraction unit
600: concavo-convex part 610: hand composite part
620: length control

Claims (8)

웹 사이트에 대한 아나운싱 광고 배너 제공 시스템으로서,
출연자의 얼굴 및 팔과 손을 포함하는 상반신을 포함하는 신체 일부를 포함한 영상을 입력받는 영상 입력부와, 안내정보를 포함하는 정보음성을 입력받는 음성 입력부 및, 상기 영상에서 배경을 제거하는 배경 제거부와, 상기 배경이 제거된 영상에 상기 정보음성을 더빙하여 아나운싱 배너(announcing banner)를 생성하는 배너 생성부를 포함하는 배너 생성 모듈;
웹 사이트에서의 상기 아나운싱 배너의 출력 위치를 설정하는 위치 설정 모듈;
입력된 복수의 영상을 저장한 영상 DB와, 상기 영상에서 팔 영역 및 손 영역을 검출하는 손 영역 검출부 및, 상기 영상 DB에 저장된 상기 영상 각각에서 검출된 상기 팔 영역 및 손 영역에 대해 특정 방향을 가리키는 모양 별로 손 모양 오브젝트를 추출하여 저장하는 손 모양 오브젝트 추출부와, 상기 출력 위치와 최인접한 선(line)의 돌출 방향을 포함하는 요철을 파악하는 요철 파악부와, 상기 돌출 방향을 가리키도록 상기 손 모양 오브젝트를 상기 배경이 제거된 영상의 팔 영역 및 손 영역에 합성하여 합성영상을 생성하는 손 합성부와, 상기 요철의 곡도에 따라 상기 합성영상의 팔 영역의 길이를 가변하는 길이 제어부를 포함하는 합성 모듈;
상기 출력 위치에 상기 아나운싱 배너를 표시하여 재생시키는 배너 노출 모듈;을 포함하되,
상기 배너 생성부는,
상기 합성영상에 상기 정보음성을 더빙하여 아나운싱 배너(announcing banner)를 생성하고,
상기 길이 제어부는,
다음의 수학식 1을 통해 상기 팔 영역의 길이를 가변하는 것을 특징으로 하는, 아나운싱 광고 배너 제공 시스템.
수학식 1,
Figure 112023044251498-pat00011

(여기서, A’은 가변된 팔 영역의 길이, A는 팔 영역의 길이, r은 곡률반경(pixel), D는 상기 손 영역의 끝 지점과 상기 선 사이의 최단 거리(pixel))
As an announcement advertisement banner providing system for a website,
An image input unit that receives an image including a part of the body including the face of the performer and the upper body including arms and hands, an audio input unit that receives information audio including guide information, and a background removal unit that removes the background from the image and a banner generating module including a banner generating unit generating an announcing banner by dubbing the informational voice to the image from which the background has been removed;
a position setting module for setting an output position of the announcement banner on a web site;
An image DB storing a plurality of input images, a hand region detector detecting an arm region and a hand region from the images, and a specific direction for the arm region and the hand region detected in each of the images stored in the image DB. A hand-shaped object extraction unit for extracting and storing hand-shaped objects for each pointed shape, a concavo-convex detection unit for identifying concavo-convex and convexities including the protrusion direction of a line closest to the output position, and pointing to the protrusion direction. A hand synthesis unit generating a synthesized image by synthesizing the hand-shaped object with the arm region and the hand region of the image from which the background has been removed; and a length controller varying the length of the arm region of the synthesized image according to the curvature of the concavo-convex curve. A synthesis module comprising;
A banner exposure module for displaying and reproducing the announcement banner at the output location;
The banner generator,
dubbing the informational voice to the synthesized video to generate an announcing banner;
The length controller,
A system for providing an announcement advertisement banner, characterized in that the length of the arm region is varied through Equation 1 below.
Equation 1,
Figure 112023044251498-pat00011

(Where A' is the length of the arm region, A is the length of the arm region, r is the radius of curvature (pixel), and D is the shortest distance between the end point of the hand region and the line (pixel))
제 1항에 있어서,
상기 위치 설정 모듈은,
상기 웹 사이트가 출력되는 화면 상에서 상기 아나운싱 배너의 출력 위치를 설정하는 것을 특징으로 하는, 아나운싱 광고 배너 제공 시스템.
According to claim 1,
The location setting module,
The system for providing an announcement advertisement banner, characterized in that setting an output position of the announcement banner on a screen on which the web site is displayed.
제 1항에 있어서,
상기 영상은,
출연자의 얼굴 및 의상을 착용한 상반신을 포함하는 신체 일부를 포함하며,
상기 시스템은,
상기 출력 위치의 색상을 파악하는 색상 파악부와,
상기 출력 위치의 색상과 일치하지 않는 색상으로 상기 아나운싱 배너에 포함된 상기 의상의 색상을 변경하는 색상 변경부를 포함하는 의상 변경 모듈;을 포함하는 것을 특징으로 하는, 아나운싱 광고 배너 제공 시스템.
According to claim 1,
The video,
It includes parts of the body, including the face of the performer and the upper body wearing the costume,
The system,
a color grasping unit for grasping the color of the output position;
and an apparel change module including a color changer for changing the color of the apparel included in the announcement banner to a color that does not match the color of the output position.
제 1항에 있어서,
상기 합성 모듈은,
상기 영상에서 얼굴 영역을 검출하고, 상기 얼굴 영역에서 입 영역을 검출하는 얼굴 영역 검출부 및,
상기 영상 DB에 저장된 상기 영상 각각에서 검출된 상기 입 영역에 대해, 음성의 발음 별로 입 모양 오브젝트를 추출하여 저장하는 입 모양 오브젝트 추출부와,
상기 정보음성의 발음을 분석하는 발음 분석부와,
상기 발음에 따라 상기 입 모양 오브젝트를 상기 배경이 제거된 영상의 입 영역에 합성하여 합성영상을 생성하는 입 합성부를 추가로 포함하고,
상기 배너 생성부는,
상기 합성영상에 상기 정보음성을 더빙하여 아나운싱 배너(announcing banner)를 생성하는 것을 특징으로 하는, 아나운싱 광고 배너 제공 시스템.
According to claim 1,
The synthesis module,
a face area detection unit that detects a face area from the image and detects a mouth area from the face area;
a mouth shape object extraction unit extracting and storing a mouth shape object for each speech pronunciation from the mouth region detected in each of the images stored in the image DB;
a pronunciation analyzer for analyzing the pronunciation of the information voice;
Further comprising a mouth synthesis unit for generating a synthesized image by synthesizing the mouth-shaped object with the mouth region of the image from which the background has been removed according to the pronunciation,
The banner generator,
The system for providing an announcement advertisement banner, characterized in that an announcement banner is generated by dubbing the information voice to the synthesized video.
제 4항에 있어서,
상기 합성 모듈은,
상기 합성영상에 속한 상기 입 영역과 상기 얼굴 영역 사이의 경계 부위의 피부 화소를 검출하는 피부 화소 검출부와,
상기 경계 부위를 스머징(smudging) 처리하고 채도 및 명도를 보정하는 보정 처리부를 포함하는 것을 특징으로 하는, 아나운싱 광고 배너 제공 시스템.
According to claim 4,
The synthesis module,
a skin pixel detector detecting skin pixels at a boundary between the mouth region and the face region belonging to the synthesized image;
and a correction processing unit for smudging the boundary and correcting saturation and brightness.
삭제delete 삭제delete 삭제delete
KR1020220153764A 2022-11-16 2022-11-16 Announcing advertisement banner provision system for website KR102538058B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220153764A KR102538058B1 (en) 2022-11-16 2022-11-16 Announcing advertisement banner provision system for website

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220153764A KR102538058B1 (en) 2022-11-16 2022-11-16 Announcing advertisement banner provision system for website

Publications (1)

Publication Number Publication Date
KR102538058B1 true KR102538058B1 (en) 2023-05-26

Family

ID=86536707

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220153764A KR102538058B1 (en) 2022-11-16 2022-11-16 Announcing advertisement banner provision system for website

Country Status (1)

Country Link
KR (1) KR102538058B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130040393A (en) 2011-10-14 2013-04-24 (주)네오위즈게임즈 Method and system for displaying online banner advertisement
KR20180130911A (en) * 2017-05-30 2018-12-10 배재대학교 산학협력단 Smart augmented reality service system and method based on virtual studio
KR102094313B1 (en) * 2019-02-08 2020-03-27 송덕호 System for providing advertising messenger service linked with online service
KR102360919B1 (en) * 2021-05-28 2022-02-09 주식회사 유콘 A host video directing system based on voice dubbing
KR20220067476A (en) * 2020-11-17 2022-05-24 리메이크디지털 주식회사 Method and device for automatically creating advertisement banner using advertisement theme color extracted from image

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130040393A (en) 2011-10-14 2013-04-24 (주)네오위즈게임즈 Method and system for displaying online banner advertisement
KR20180130911A (en) * 2017-05-30 2018-12-10 배재대학교 산학협력단 Smart augmented reality service system and method based on virtual studio
KR102094313B1 (en) * 2019-02-08 2020-03-27 송덕호 System for providing advertising messenger service linked with online service
KR20220067476A (en) * 2020-11-17 2022-05-24 리메이크디지털 주식회사 Method and device for automatically creating advertisement banner using advertisement theme color extracted from image
KR102360919B1 (en) * 2021-05-28 2022-02-09 주식회사 유콘 A host video directing system based on voice dubbing

Similar Documents

Publication Publication Date Title
WO2021109652A1 (en) Method and apparatus for giving character virtual gift, device, and storage medium
US10163111B2 (en) Virtual photorealistic digital actor system for remote service of customers
US20210264139A1 (en) Creating videos with facial expressions
US20100085363A1 (en) Photo Realistic Talking Head Creation, Content Creation, and Distribution System and Method
US20020007276A1 (en) Virtual representatives for use as communications tools
WO2013120851A1 (en) Method for sharing emotions through the creation of three-dimensional avatars and their interaction through a cloud-based platform
CN112367551B (en) Video editing method and device, electronic equipment and readable storage medium
CN110636365B (en) Video character adding method and device, electronic equipment and storage medium
CN113542624A (en) Method and device for generating commodity object explanation video
JP6730757B2 (en) Server and program, video distribution system
CN113225587B (en) Video processing method, video processing device and electronic equipment
KR102538058B1 (en) Announcing advertisement banner provision system for website
JP6730760B2 (en) Server and program, video distribution system
Cui Hanfu as therapeutic governance in neo/non-liberal China: a multimodal discourse analysis of Hanfu videos on Bilibili
KR102360919B1 (en) A host video directing system based on voice dubbing
JP2017045374A (en) Information processing device and program
CN115529500A (en) Method and device for generating dynamic image
KR100554374B1 (en) A Method for manufacuturing and displaying a real type 2D video information program including a video, a audio, a caption and a message information, and a memory devices recorded a program for displaying thereof
KR20220122037A (en) Virtual reality system
CN108334806B (en) Image processing method and device and electronic equipment
JP7505590B2 (en) LAYOUT METHOD, LAYOUT DEVICE, AND PROGRAM
Ma et al. Automated Conversion of Music Videos into Lyric Videos
WO2022201515A1 (en) Server, animation recommendation system, animation recommendation method, and program
AU2009223616A1 (en) Photo realistic talking head creation, content creation, and distribution system and method
KR20230124188A (en) Method for manufacturing contents using virtual character

Legal Events

Date Code Title Description
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant