KR101409251B1 - Apparatus and method for generating real-time a personalized image - Google Patents

Apparatus and method for generating real-time a personalized image Download PDF

Info

Publication number
KR101409251B1
KR101409251B1 KR1020120145800A KR20120145800A KR101409251B1 KR 101409251 B1 KR101409251 B1 KR 101409251B1 KR 1020120145800 A KR1020120145800 A KR 1020120145800A KR 20120145800 A KR20120145800 A KR 20120145800A KR 101409251 B1 KR101409251 B1 KR 101409251B1
Authority
KR
South Korea
Prior art keywords
image
real
time
personalized
personalized image
Prior art date
Application number
KR1020120145800A
Other languages
Korean (ko)
Other versions
KR20140077066A (en
Inventor
박현우
진성민
Original Assignee
(유)어나더레인보우
주식회사 이노레드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (유)어나더레인보우, 주식회사 이노레드 filed Critical (유)어나더레인보우
Priority to KR1020120145800A priority Critical patent/KR101409251B1/en
Publication of KR20140077066A publication Critical patent/KR20140077066A/en
Application granted granted Critical
Publication of KR101409251B1 publication Critical patent/KR101409251B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명의 일 실시예와 관련된 실시간 개인화 영상 생성 단말기는 실시간 영상을 획득하는 촬영부 및 상기 실시간 영상에 상기 개인화 영상을 실시간으로 합성하는 제어부를 포함한다.A real-time personalized image generating terminal according to an embodiment of the present invention includes a photographing unit for acquiring a real-time image and a controller for real-time synthesizing the personalized image with the real-time image.

Description

실시간 개인화 영상 생성 단말기 및 방법{APPARATUS AND METHOD FOR GENERATING REAL-TIME A PERSONALIZED IMAGE}TECHNICAL FIELD [0001] The present invention relates to a personalized image generation terminal,

실시간으로 획득된 영상에 개인화 영상을 실시간으로 합성 및 저장할 수 있는 기술에 관한 것이다.
And to a technique capable of synthesizing and storing a personalized image in real time on an image obtained in real time.

최근 미디어 기술의 발달로 많은 영상들을 손쉽게 제작하거나 접할 수 있게 되었다. 더 나아가, 미디어 제작자들은 다수의 영상들을 서로 합성하는 기술에 대한 연구를 활발하게 진행하고 있으며, 이와 관련된 특허 출원을 진행하고 있다.Recently, with the development of media technology, many images can be easily produced or accessed. Furthermore, media producers are actively researching technologies for synthesizing a large number of images, and have filed patent applications related thereto.

이와 관련되어 참조할 만한 내용은 '한국등록특허 번호 : 10-0968501, 출원인 : 장승구, 발명의 명칭 : 합성 동영상 제공 방법 및 시스템'에 개시되어 있다.A related reference is disclosed in Korean Registered Patent No. 10-0968501, entitled: Jang Seung-gu, entitled " Method and System for Providing Composite Video ".

그러나, 이와 같은 기술은 단지 미리 저장된 두 개의 동영상을 합성하는 기술에 불과하므로, 실시간 동영상에 원하는 동영상을 자유자재로 합성하지 못하는 불편함이 있다.
However, such a technique is merely a technique of synthesizing two previously stored moving images, and therefore, there is an inconvenience that a desired moving image can not be freely synthesized in a real time moving image.

사용자가 원하는 대로 실시간으로 획득된 영상에 개인화 영상을 편리하게 실시간으로 합성 및 저장할 수 있는 기술을 제공하고자 한다.
And to provide a technique for conveniently synthesizing and storing personalized images in real time in a real-time manner as desired by a user.

본 발명의 일 실시예와 관련된 실시간 영상을 이용한 실시간 개인화 영상 생성 단말기는 실시간 영상을 획득하는 촬영부 및 실시간 영상에 개인화 영상을 실시간으로 합성하는 제어부를 포함할 수 있다.A real-time personalized image generation terminal using a real-time image according to an exemplary embodiment of the present invention may include a photographing unit that acquires a real-time image and a controller that synthesizes the personalized image in real time with the real-time image.

제어부는 실시간 영상에 개인화 영상을 오버랩시켜 실시간으로 합성할 수 있다. The control unit can synthesize real time images by overlapping the personalized images.

제어부는 실시간 영상 중 개인화 영상을 합성할 위치에 해당하는 영역의 픽셀 값을, 개인화 영상의 픽셀 값으로 변경하여 실시간으로 합성할 수 있다. The controller may change the pixel value of the region corresponding to the position where the personalized image is synthesized among the real-time images to the pixel value of the personalized image, and synthesize the pixel value in real time.

제어부는 사용자 입력부를 통해 입력된 개인화 영상의 위치 변경 신호에 따라, 개인화 영상의 위치를 변경할 수 있다.The control unit may change the position of the personalized image according to the position change signal of the personalized image input through the user input unit.

실시간 개인화 영상 생성 단말기는 실시간 영상에 포함된 오브젝트를 추출하는 추출부를 더 포함하고, 제어부는 개인화 영상을 추출된 오브젝트를 제외한 영역에 실시간으로 합성할 수 있다.The real-time personalized image generation terminal may further include an extraction unit for extracting an object included in the real-time image, and the control unit may synthesize the personalized image in real time except for the extracted object.

실시간 개인화 영상 생성 단말기는 실시간 영상에 포함된 오브젝트를 추출하는 추출부를 더 포함하고, 제어부는 개인화 영상을 추출된 오브젝트의 크기에 비례하게 변환한 후, 변환된 개인화 영상을 실시간 영상에 실시간으로 합성할 수 있다.The personalized image generating terminal may further include an extracting unit that extracts an object included in the real-time image. The controller converts the personalized image in proportion to the size of the extracted object, and then synthesizes the converted personalized image in real- .

실시간 개인화 영상 생성 단말기는 단말기의 움직임을 감지하는 자세 감지부를 더 포함하고, 제어부는 감지된 움직임 변화에 따라 개인화 영상의 위치를 변경하여 실시간으로 합성할 수 있다.The real-time personalized image generating terminal may further include a posture detecting unit for detecting a motion of the terminal, and the controller may change the position of the personalized image according to the detected motion change, and synthesize the personalized image in real time.

실시간 개인화 영상 생성 단말기는 실시간 영상 및 개인화 영상을 표시하는 디스플레이부를 더 포함하고, 제어부는 실시간 영상에 포함된 오브젝트의 위치를 개인화 영상에 맞게 조정하기 위한 가이드 라인을 디스플레이부에 표시할 수 있다.
The real-time personalized-image generating terminal may further include a display unit for displaying a real-time image and a personalized image, and the controller may display a guideline for adjusting the position of the object included in the real-time image to the personalized image on the display unit.

본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 방법은 실시간 영상을 획득하는 단계 및 실시간 영상에 개인화 영상을 실시간으로 합성하는 단계를 포함할 수 있다.The method of generating a real-time personalized image according to another embodiment of the present invention may include a step of acquiring a real-time image and a step of synthesizing the personalized image in real time with the real-time image.

제어하는 단계는 실시간 영상에 개인화 영상을 오버랩시켜 실시간으로 합성하는 단계를 포함할 수 있다.The controlling step may include a step of overlapping the personalized image with the real-time image and synthesizing the personalized image in real time.

제어하는 단계는 실시간 영상 중 개인화 영상을 합성할 위치에 해당하는 영역의 픽셀 값을, 개인화 영상의 픽셀 값으로 변경하여 실시간으로 합성하는 단계를 포함할 수 있다.The step of controlling may include a step of changing the pixel value of the region corresponding to the position of the personalized image of the real-time image to the pixel value of the personalized image and synthesizing the pixel value in real time.

제어하는 단계는 사용자 입력부를 통해 입력된 개인화 영상의 위치 변경 신호에 따라, 개인화 영상의 위치를 변경하는 단계를 포함할 수 있다.The step of controlling may include the step of changing the position of the personalized image according to the position change signal of the personalized image input through the user input unit.

실시간 개인화 영상 생성 방법은 실시간 영상에 포함된 오브젝트를 추출하는 단계를 더 포함하고, 제어하는 단계는 개인화 영상을 추출된 오브젝트를 제외한 영역에 실시간으로 합성하는 단계를 더 포함할 수 있다.The method of generating a real-time personalized image may further include extracting an object included in the real-time image, and the step of controlling may further include synthesizing the personalized image in an area excluding the extracted object in real time.

실시간 개인화 영상 생성 방법은 실시간 영상에 포함된 오브젝트를 추출하는 단계를 더 포함하고, 제어하는 단계는 개인화 영상을 추출된 오브젝트의 크기에 비례하게 변환한 후, 변환된 개인화 영상을 실시간 영상에 실시간으로 합성하는 단계를 더 포함할 수 있다.The method of generating a real-time personalized image further includes a step of extracting an object included in a real-time image, and the step of controlling includes converting the personalized image in proportion to the size of the extracted object, And a step of synthesizing.

실시간 개인화 영상 생성 방법은 단말기의 움직임을 감지하는 단계를 더 포함하고, 제어하는 단계는 감지된 움직임 변화에 따라 개인화 영상의 위치를 변경하여 실시간으로 합성하는 단계를 포함할 수 있다.The method of generating a real-time personalized image may further include detecting a motion of the terminal, and the step of controlling may include a step of changing the position of the personalized image according to the detected motion change and synthesizing the personalized image in real time.

실시간 개인화 영상 생성 방법은 실시간 영상 및 개인화 영상을 표시하는 단계를 더 포함하고, 제어하는 단계는 실시간 영상에 포함된 오브젝트의 위치를 개인화 영상에 맞게 조정하기 위한 가이드 라인을 표시하는 단계를 포함할 수 있다.
The method of generating a real-time personalized image may further include the step of displaying a real-time image and a personalized image, and the step of controlling may include displaying a guideline for adjusting the position of the object included in the real- have.

개시된 발명에 따르면 사용자 등은 촬영부를 통해 획득된 실시간 영상과 개인화 영상을 용이하게 합성할 수 있다.According to the disclosed invention, a user or the like can easily combine a personalized image and a real-time image acquired through the photographing unit.

또한, 실시간 영상 중 오브젝트가 존재하지 않는 영역에 개인화 영상을 합성하거나, 오브젝트의 크기에 비례하게 개인화 영상을 변환하여 합성하거나, 단말기의 움직임에 따라 개인화 영상을 움직인 후 합성하거나, 가이드 라인을 디스플레이부에 표시함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.
In addition, a personalized image may be synthesized in an area where no object exists in the real-time image, a personalized image may be converted and synthesized in proportion to the size of the object, or may be synthesized after moving the personalized image according to the movement of the terminal, It is possible to minimize the case where the personalized image is synthesized in a non-ideal manner with respect to the real-time image.

도 1은 본 발명의 일 실시예와 관련된 실시간 개인화 영상 생성 단말기에 대한 블록 구성도(block diagram)이다.
도 2a 내지 도 2c는 본 발명의 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.
도 3a 및 도 3b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.
도 4a 및 도 4b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.
도 5a 및 도 5b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.
도 6a 및 도 6b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시예와 관련된 실시간 개인화 영상 생성 방법을 설명하기 위한 흐름도이다.
1 is a block diagram of a real-time personalized image generating terminal according to an embodiment of the present invention.
2A to 2C are views for explaining a driving method of a real-time personalized image generating terminal according to an embodiment of the present invention.
3A and 3B are views for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.
4A and 4B are views for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.
5A and 5B are views for explaining a driving method of a real-time personalized image generation terminal according to another embodiment of the present invention.
6A and 6B are views for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.
7 is a view for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.
FIG. 8 is a flowchart illustrating a method for generating a real-time personalized image according to an embodiment of the present invention.

이하, 첨부된 도면을 참조하여 발명을 실시하기 위한 구체적인 내용에 대하여 상세하게 설명한다.
Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예와 관련된 실시간 개인화 영상 생성 단말기에 대한 블록 구성도(block diagram)이다.1 is a block diagram of a real-time personalized image generating terminal according to an embodiment of the present invention.

도 1을 참조하면, 실시간 개인화 영상 생성 단말기(100)는 촬영부(110), 디스플레이부(120), 추출부(130), 감지부(140) 및 제어부(150)를 포함한다.
Referring to FIG. 1, a real-time personalized image generating terminal 100 includes a photographing unit 110, a display unit 120, an extracting unit 130, a sensing unit 140, and a controller 150.

실시간 개인화 영상 생성 단말기(100)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션, 실시간 영상 촬영이 가능한 카메라 등과 같이 실시간으로 영상을 획득할 수 있는 촬영장치를 포함하는 다양한 종류의 단말기일 수 있다. The real-time personalized image generating terminal 100 may be a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a PDA (Personal Digital Assistants), a PMP (Portable Multimedia Player) And a photographing device capable of acquiring an image in real time such as a camera And may be various types of terminals.

촬영부(110)는 이미지 센서를 통해 실시간 영상을 획득할 수 있다. The photographing unit 110 may acquire a real-time image through an image sensor.

디스플레이부(120)는 본 발명의 실시에 필요한 다양한 정보를 표시할 수 있다. 예를 들면, 디스플레이부(120)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. The display unit 120 may display various information necessary for the implementation of the present invention. For example, the display unit 120 may include a liquid crystal display (LCD), a thin film transistor-liquid crystal display (TFT LCD), an organic light-emitting diode (OLED) A flexible display, and a three-dimensional display (3D display).

추출부(130)는 촬영부(110)를 통해 획득된 실시간 영상에 포함된 오브젝트(예를 들면, 사람, 책상, 의자, 천장 등)를 추출할 수 있다. 추출부(130)는 영상에서 오브젝트를 추출하기 위해 다양한 추출 알고리즘을 이용할 수 있다. The extracting unit 130 may extract an object (e.g., a person, a desk, a chair, a ceiling, etc.) included in the real-time image acquired through the photographing unit 110. [ The extraction unit 130 may use various extraction algorithms to extract an object from an image.

자세 감지부(140)는 실시간 개인화 영상 생성 단말기(100)의 움직임 변화를 감지할 수 있다. 예를 들면, 감지부(140)는 조도 센서, 근접 센서, 가속도 센서, 지자계 센서, 기압 센서 등과 같이 움직임 변화를 감지할 수 있는 다양한 센서를 포함하여 구성될 수 있다. The posture sensing unit 140 may sense the movement change of the real-time personalized image generation terminal 100. [ For example, the sensing unit 140 may include various sensors capable of sensing a change in motion, such as an illuminance sensor, a proximity sensor, an acceleration sensor, a geomagnetic sensor, and an air pressure sensor.

제어부(150)는 본 발명의 다양한 장치들을 제어할 수 있다. The control unit 150 can control various devices of the present invention.

제어부(150)는 촬영부(110)를 통해 획득된 실시간 영상에 개인화 영상을 실시간으로 합성할 수 있다. 개인화 영상은 단말기(100) 내부 또는 외부에 존재하는 메모리부(미도시)에 저장될 수 있으며, 광고 영상, 개인 사진 등과 같이 다양한 종류의 영상일 수 있다. 제어부(150)는 합성된 영상을 자동으로 메모리부(미도시)에 저장할 수 있다.The control unit 150 may synthesize the personalized image in real time with the real time image obtained through the photographing unit 110. [ The personalized image may be stored in a memory unit (not shown) existing inside or outside the terminal 100, and may be various types of images such as an advertisement image and a personal photograph. The control unit 150 may automatically store the synthesized image in a memory unit (not shown).

예를 들면, 제어부(150)는 촬영부(110)를 통해 획득된 실시간 영상에 개인화 영상을 오버랩(over-lap)시켜 실시간으로 합성할 수 있다. 또 다른 예를 들면, 제어부(150)는 실시간 영상 중 개인화 영상을 합성할 위치에 해당하는 영역의 픽셀 값을, 개인화 영상의 픽셀 값으로 변경함으로써, 실시간 영상과 개인화 영상을 실시간으로 합성할 수 있다.For example, the control unit 150 may overlay the personalized image with the real-time image obtained through the photographing unit 110 to synthesize the personalized image in real time. For example, the controller 150 may synthesize a real-time image and a personalized image in real time by changing a pixel value of an area corresponding to a position where a personalized image is synthesized among real-time images to a pixel value of the personalized image .

제어부(150)는 사용자 입력부를 통해 입력된 개인화 영상의 위치 변경 신호에 따라, 개인화 영상의 위치를 변경할 수 있다. 제어부(150)는 실시간 영상과 위치가 변경된 개인화 영상을 실시간으로 합성할 수 있다. 여기서, 사용자 입력부는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킬 수 있는 다양한 장치일 수 있다. 사용자 입력부는 터치 스크린, 키 패드(key pad) 돔 스위치(dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 예를 들면, 사용자가 사용자 입력부를 통해 개인화 영상을 오른쪽으로 변경하기 위한 위치 변경 신호를 입력하면, 제어부(150)는 개인화 영상의 위치를 오른쪽으로 이동시킬 수 있다. 이에 따라, 사용자는 개인화 영상의 위치를 자신이 원하는 위치로 용이하게 변경할 수 있다. The control unit 150 may change the position of the personalized image according to the position change signal of the personalized image input through the user input unit. The control unit 150 can synthesize the real-time image and the personalized image whose position has been changed in real time. Here, the user input unit may be various devices by which a user can generate input data for controlling the operation of the terminal. The user input unit may include a touch screen, a key pad dome switch, a touch pad (static / static), a jog wheel, a jog switch, and the like. For example, when the user inputs a position change signal for changing the personalized image to the right through the user input unit, the controller 150 can move the position of the personalized image to the right. Accordingly, the user can easily change the position of the personalized image to a desired position.

제어부(150)는 개인화 영상을 추출부(130)에 의해 추출된 오브젝트를 제외한 영역에 실시간으로 합성할 수 있다. 예를 들면, 추출부(130)가 실시간 영상으로부터 책상, 사람 및 의자를 추출한 경우, 제어부(150)는 실시간 영상 중 책상, 사람 및 의자를 제외한 영역에 개인화 영상을 실시간으로 합성할 수 있다. 이에 따라, 개인화 영상이 오브젝트들 위에 합성되는 것을 방지함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.The control unit 150 can synthesize the personalized image in real time except for the object extracted by the extracting unit 130. [ For example, when the extracting unit 130 extracts a desk, a person, and a chair from a real-time image, the controller 150 can synthesize a personalized image in real time, except for a desk, a person, and a chair. Thus, by preventing the personalized image from being synthesized on the objects, it is possible to minimize the case where the personalized image is synthesized non-ideal in the real-time image.

제어부(150)는 개인화 영상을 추출된 오브젝트의 크기에 비례하게 변환한 후, 변환된 개인화 영상을 실시간 영상에 합성할 수 있다. 예를 들면, 제어부(150)는 오브젝트의 크기가 10cm인 경우, 개인화 영상의 크기를 7cm로 변환한 후, 변환된 개인화 영상을 실시간 영상에 합성할 수 있다. 또 다른 예를 들면, 제어부(150)는 오브젝트의 크기가 20cm인 경우, 개인화 영상의 크기를 14cm로 변환한 후, 변환된 개인화 영상을 실시간 영상에 합성할 수 있다. 이에 따라, 개인화 영상의 크기가 실시간 영상에 포함된 오브젝트의 크기와 많은 차이가 나지 않도록 함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.The control unit 150 may convert the personalized image in proportion to the size of the extracted object, and then synthesize the converted personalized image into a real-time image. For example, if the size of the object is 10 cm, the controller 150 may convert the size of the personalized image to 7 cm, and then synthesize the converted personalized image into a real-time image. In another example, when the size of the object is 20 cm, the controller 150 may convert the size of the personalized image into 14 cm, and then synthesize the converted personalized image into a real-time image. Accordingly, the size of the personalized image is not much different from the size of the object included in the real-time image, so that it is possible to minimize the case where the personalized image is non-ideally synthesized with the real-time image.

제어부(150)는 자세 감지부(140)에서 감지된 움직임 변화에 따라 개인화 영상의 위치를 변경할 수 있다. 예를 들면, 사용자가 실시간 개인화 영상 생성 단말기(100)를 수직축을 기준으로 회전시키면, 자세 감지부(140)는 실시간 개인화 영상 생성 단말기(100)의 회전 각도를 감지할 수 있다. 회전 각도가 45도인 경우, 제어부(150)는 개인화 영상을 45도 회전시킬 수 있다. 제어부(150)는 회전된 개인화 영상을 실시간 영상에 합성할 수 있다. 또 다른 예를 들면, 사용자가 실시간 개인화 영상 생성 단말기(100)를 수평축을 기준으로 오른쪽으로 이동시키면, 자세 감지부(140)는 실시간 개인화 영상 생성 단말기(100)의 이동 거리를 감지할 수 있다. 이동 거리가 1cm인 경우, 제어부(150)는 개인화 영상을 오른쪽으로 1cm 이동시킬 수 있다. 제어부(150)는 이동된 개인화 영상을 실시간 영상에 합성할 수 있다. 단말기의 움직임에 연동하여 개인화 영상을 움직임으로써, 실시간 영상과 개인화 영상을 더욱 실감나게 합성할 수 있다.The control unit 150 may change the position of the personalized image according to the motion change detected by the posture sensing unit 140. [ For example, when the user rotates the real-time personalized image generating terminal 100 on the vertical axis, the posture sensing unit 140 can sense the rotation angle of the real-time personalized image generating terminal 100. If the rotation angle is 45 degrees, the controller 150 can rotate the personalized image by 45 degrees. The control unit 150 may synthesize the rotated personalized image into a real-time image. For example, if the user moves the real-time personalized image generating terminal 100 to the right with respect to the horizontal axis, the posture sensing unit 140 may sense the moving distance of the real-time personalized image generating terminal 100. If the moving distance is 1 cm, the controller 150 can move the personalized image 1 cm to the right. The control unit 150 may synthesize the moved personalized image into a real-time image. By moving the personalized image in association with the movement of the terminal, the real-time image and the personalized image can be synthesized more realistically.

제어부(150)는 실시간 영상에 포함된 오브젝트의 위치를 개인화 영상에 맞게 조정하기 위한 가이드 라인을 디스플레이부(120)에 표시할 수 있다. 예를 들면, 개인화 영상이 사람이고, 촬영부(110)를 통해 사람 영상이 획득되는 경우, 제어부(150)는 촬영부(110)를 통해 입력된 사람 영상이 개인화 영상과 겹치기 않거나 마주보도록 하기 위해 촬영부(110)를 통해 입력된 사람 영상의 위치를 지정해주는 가이드 라인을 디스플레이부(120)에 표시할 수 있다. 사용자는 촬영부(110)를 통해 입력된 사람 영상이 가이드 라인의 내부에 위치하도록 함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.The control unit 150 may display on the display unit 120 a guideline for adjusting the position of the object included in the real-time image according to the personalized image. For example, when a personalized image is a person and a human image is obtained through the photographing unit 110, the control unit 150 controls the photographing unit 110 so that a person image input through the photographing unit 110 does not overlap with or faces the personalized image A guideline for specifying the position of a person image input through the photographing unit 110 can be displayed on the display unit 120. [ The user can minimize the case where the personalized image is synthesized non-ideal in the real-time image by allowing the user image inputted through the photographing unit 110 to be positioned inside the guide line.

메모리(미도시)는 실시간 개인화 영상 생성 단말기(100)의 내부 또는 외부에 위치하며, 본 발명의 실시에 필요한 다양한 정보를 저장할 수 있다.The memory (not shown) is located inside or outside the real-time personalized image generating terminal 100, and can store various information necessary for the practice of the present invention.

실시간 개인화 영상 생성 단말기는 촬영부를 통해 획득된 실시간 영상과 개인화 영상을 용이하게 합성할 수 있다.The real-time personalized image generation terminal can easily combine the real-time image and the personalized image acquired through the photographing unit.

또한, 실시간 개인화 영상 생성 단말기는 실시간 영상 중 오브젝트가 존재하지 않는 영역에 개인화 영상을 합성하거나, 오브젝트의 크기에 비례하게 개인화 영상을 변환하여 합성하거나, 단말기의 움직임에 따라 개인화 영상을 움직인 후 합성하거나, 가이드 라인을 디스플레이부에 표시함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.
In addition, the real-time personalized image generation terminal may synthesize a personalized image in an area where no object exists in the real-time image, convert the personalized image in proportion to the size of the object, or move the personalized image according to the movement of the terminal, Or displaying the guideline on the display unit, it is possible to minimize the case where the personalized image is synthesized non-ideally with the real-time image.

도 2a 내지 도 2c는 본 발명의 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.2A to 2C are views for explaining a driving method of a real-time personalized image generating terminal according to an embodiment of the present invention.

도 1 및 도 2a를 참조하면, 촬영부(110)는 이미지 센서 등을 통해 실시간 영상(200)을 획득할 수 있다. 제어부(150)는 촬영부(110)에서 획득된 실시간 영상을 디스플레이부(120)에 표시할 수 있다. Referring to FIGS. 1 and 2A, the photographing unit 110 may acquire a real-time image 200 through an image sensor or the like. The control unit 150 may display the real-time image acquired by the photographing unit 110 on the display unit 120. [

도 1 및 도 2b를 참조하면, 개인화 영상(210)은 실시간 개인화 영상 생성 단말기(100)의 내부 또는 외부에 존재하는 메모리부(미도시)에 저장될 수 있다.Referring to FIGS. 1 and 2B, the personalized image 210 may be stored in a memory unit (not shown) existing inside or outside the real-time personalized image generation terminal 100.

도 1 및 도 2c를 참조하면, 제어부(150)는 촬영부(110)를 통해 획득된 실시간 영상(200)에 개인화 영상(210)을 실시간으로 합성할 수 있다. 예를 들면, 제어부(150)는 촬영부(110)를 통해 획득된 실시간 영상에 개인화 영상을 오버랩(over-lap)시켜 실시간으로 합성할 수 있다. 또 다른 예를 들면, 제어부(150)는 실시간 영상 중 개인화 영상을 합성할 위치에 해당하는 영역의 픽셀 값을, 개인화 영상의 픽셀 값으로 변경함으로써, 실시간 영상과 개인화 영상을 실시간으로 합성할 수 있다.Referring to FIGS. 1 and 2C, the controller 150 may synthesize the personalized image 210 in real time with the real-time image 200 obtained through the photographing unit 110. FIG. For example, the control unit 150 may overlay the personalized image with the real-time image obtained through the photographing unit 110 to synthesize the personalized image in real time. For example, the controller 150 may synthesize a real-time image and a personalized image in real time by changing a pixel value of an area corresponding to a position where a personalized image is synthesized among real-time images to a pixel value of the personalized image .

이와 같이, 실시간 개인화 영상 생성 단말기는 촬영부를 통해 획득된 실시간 영상과 개인화 영상을 용이하게 합성할 수 있다.
As described above, the real-time personalized-image generating terminal can easily combine the real-time image and the personalized image acquired through the photographing unit.

도 3a 및 도 3b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.3A and 3B are views for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.

도 1 및 도 3a를 참조하면, 촬영부(110)는 이미지 센서 등을 통해 실시간 영상(300)을 획득할 수 있다. 제어부(150)는 촬영부(110)에서 획득된 실시간 영상(300)과 개인화 영상(310)을 합성하여 디스플레이부(120)에 표시할 수 있다. 만약 사용자가 사용자 입력부를 통해 개인화 영상(310)을 오른쪽으로 변경하기 위한 위치 변경 신호(310)를 입력하였다면, 제어부(150)는 개인화 영상(310)의 위치를 오른쪽으로 이동시킬 수 있다. 1 and 3A, the photographing unit 110 may acquire a real-time image 300 through an image sensor or the like. The control unit 150 may combine the real-time image 300 and the personalized image 310 acquired by the photographing unit 110 and display the synthesized real-time image 300 on the display unit 120. [ If the user inputs the position change signal 310 for changing the personalized image 310 to the right through the user input unit, the controller 150 can move the position of the personalized image 310 to the right.

도 1 및 도 3b를 참조하면, 제어부(150)는 실시간 영상(300)과 이동된 개인화 영상(330)을 실시간으로 합성하고 저장할 수 있다.Referring to FIGS. 1 and 3B, the controller 150 may synthesize and store the real-time image 300 and the moved personalized image 330 in real time.

이에 따라, 사용자는 개인화 영상의 위치를 자신이 원하는 위치로 용이하게 변경할 수 있다.
Accordingly, the user can easily change the position of the personalized image to a desired position.

도 4a 및 도 4b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.4A and 4B are views for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.

도 1 및 도 4a를 참조하면, 촬영부(110)는 이미지 센서 등을 통해 실시간 영상(400)을 획득할 수 있다. 제어부(150)는 촬영부(110)에서 획득된 실시간 영상(400)을 디스플레이부(120)에 표시할 수 있다. Referring to FIGS. 1 and 4A, the photographing unit 110 may acquire a real-time image 400 through an image sensor or the like. The control unit 150 may display the real time image 400 obtained by the photographing unit 110 on the display unit 120. [

추출부(130)는 촬영부(110)를 통해 획득된 실시간 영상(400)에 포함된 사람(410), 책상(411), 모니터(412), 의자(413) 및 천장 경계(414) 등과 같은 오브젝트들을 추출할 수 있다. 제어부(150)는 실시간 영상(400) 중 오브젝트를 제외한 영역(420)을 설정할 수 있다. The extraction unit 130 extracts the real time image 400 such as the person 410, the desk 411, the monitor 412, the chair 413, and the ceiling boundary 414 included in the real time image 400 obtained through the photographing unit 110 Objects can be extracted. The control unit 150 can set the region 420 excluding the object among the real-time images 400. FIG.

도 1 및 도 4b를 참조하면, 제어부(150)는 개인화 영상(430)을 오브젝트를 제외한 영역(420)에 실시간으로 합성할 수 있다. Referring to FIGS. 1 and 4B, the controller 150 may synthesize the personalized image 430 in an area 420 excluding an object in real time.

이에 따라, 개인화 영상이 오브젝트들 위에 합성되는 것을 방지함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.
Thus, by preventing the personalized image from being synthesized on the objects, it is possible to minimize the case where the personalized image is synthesized non-ideal in the real-time image.

도 5a 및 도 5b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.5A and 5B are views for explaining a driving method of a real-time personalized image generation terminal according to another embodiment of the present invention.

도 1 및 도 5a를 참조하면, 촬영부(110)는 이미지 센서 등을 통해 실시간 영상(500)을 획득할 수 있다. 제어부(150)는 촬영부(110)에서 획득된 실시간 영상(400)을 디스플레이부(120)에 표시할 수 있다. Referring to FIGS. 1 and 5A, the photographing unit 110 may acquire a real-time image 500 through an image sensor or the like. The control unit 150 may display the real time image 400 obtained by the photographing unit 110 on the display unit 120. [

추출부(130)는 촬영부(110)를 통해 획득된 실시간 영상(400)에 포함된 사람, 책상, 모니터, 의자 및 천장 경계 등과 같은 오브젝트들을 추출할 수 있다. 제어부(150)는 각 오브젝트들의 크기(510)를 측정할 수 있다. The extraction unit 130 may extract objects such as a person, a desk, a monitor, a chair, and a ceiling boundary included in the real-time image 400 obtained through the photographing unit 110. The controller 150 may measure the size 510 of each object.

도 1 및 도 5b를 참조하면, 제어부(150)는 원본 개인화 영상을 추출된 오브젝트들의 크기(510)에 비례하게 변환한 후, 변환된 개인화 영상(520)을 실시간 영상에 합성할 수 있다. 예를 들면, 제어부(150)는 오브젝트의 크기가 10cm인 경우, 개인화 영상의 크기를 7cm로 변환한 후, 변환된 개인화 영상을 실시간 영상에 합성할 수 있다. Referring to FIGS. 1 and 5B, the controller 150 may convert the original personalized image to a size 510 of the extracted objects, and then synthesize the converted personalized image 520 into a real-time image. For example, if the size of the object is 10 cm, the controller 150 may convert the size of the personalized image to 7 cm, and then synthesize the converted personalized image into a real-time image.

이에 따라, 개인화 영상의 크기가 실시간 영상에 포함된 오브젝트의 크기와 많은 차이가 나지 않도록 함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.
Accordingly, the size of the personalized image is not much different from the size of the object included in the real-time image, so that it is possible to minimize the case where the personalized image is non-ideally synthesized with the real-time image.

도 6a 및 도 6b는 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.6A and 6B are views for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.

도 1 및 도 6a를 참조하면, 촬영부(110)는 이미지 센서 등을 통해 실시간 영상(600)을 획득할 수 있다. 제어부(150)는 촬영부(110)에서 획득된 실시간 영상(600)과 개인화 영상(610)을 합성하여 디스플레이부(120)에 표시할 수 있다.Referring to FIGS. 1 and 6A, the photographing unit 110 may acquire a real-time image 600 through an image sensor or the like. The control unit 150 may combine the real-time image 600 and the personalized image 610 obtained by the photographing unit 110 and display the synthesized real-time image 600 on the display unit 120. [

자세 감지부(140)는 실시간 개인화 영상 생성 단말기(100)의 움직임 변화를 감지할 수 있다. 예를 들면, 감지부(140)는 조도 센서, 근접 센서, 가속도 센서, 지자계 센서, 기압 센서 등과 같이 움직임 변화를 감지할 수 있는 다양한 센서를 포함하여 구성될 수 있다. The posture sensing unit 140 may sense the movement change of the real-time personalized image generation terminal 100. [ For example, the sensing unit 140 may include various sensors capable of sensing a change in motion, such as an illuminance sensor, a proximity sensor, an acceleration sensor, a geomagnetic sensor, and an air pressure sensor.

제어부(150)는 자세 감지부(140)에서 감지된 움직임 변화에 따라 개인화 영상(610)의 위치를 변경할 수 있다. 예를 들면, 사용자가 실시간 개인화 영상 생성 단말기(100)를 수직축을 기준으로 회전(620)시키면, 자세 감지부(140)는 실시간 개인화 영상 생성 단말기(100)의 회전 각도를 감지할 수 있다. 회전 각도가 45도인 경우, 실시간 개인화 영상 생성 단말기(100)가 45도 회전됨에 따라 촬영부(110)도 45도 회전된다. 따라서, 실시간 영상(600)도 45도 회전된 상태로 디스플레이부(120)에 표시될 수 있다. The control unit 150 may change the position of the personalized image 610 according to the motion change detected by the posture sensing unit 140. [ For example, if the user rotates the real-time personalized image generating terminal 100 on the vertical axis 620, the posture sensing unit 140 can sense the rotation angle of the real-time personalized image generating terminal 100. When the rotation angle is 45 degrees, as the real-time personalized image generating terminal 100 is rotated by 45 degrees, the photographing unit 110 is also rotated by 45 degrees. Accordingly, the real-time image 600 can be displayed on the display unit 120 in a state rotated by 45 degrees.

도 1 및 도 6b를 참조하면, 제어부(150)는 원래 개인화 영상(610)을 45도 회전시킬 수 있다. 제어부(150)는 회전된 실시간 영상(620)과 회전된 개인화 영상(630)을 실시간으로 합성할 수 있다. Referring to FIGS. 1 and 6B, the controller 150 may rotate the original personalized image 610 by 45 degrees. The control unit 150 can synthesize the rotated real-time image 620 and the rotated personalized image 630 in real time.

이와 같이 실시간 영상만이 회전되는 것이 아니라 개인화 영상도 함께 회전시킴으로써, 실시간 영상과 개인화 영상이 비이상적으로 합성되는 것을 방지할 수 있다. 이에 따라, 실시간 영상과 개인화 영상을 더욱 실감나게 합성할 수 있다.
In this way, not only the real-time image is rotated but also the personalized image is rotated together, thereby preventing the non-ideal combination of the real-time image and the personalized image. Accordingly, the real-time image and the personalized image can be synthesized more realistically.

도 7은 본 발명의 또 다른 일 실시예에 따른 실시간 개인화 영상 생성 단말기의 구동 방법을 설명하기 위한 도면이다.7 is a view for explaining a driving method of a real-time personalized image generating terminal according to another embodiment of the present invention.

도 1 및 도 7을 참고하면, 제어부(150)는 실시간 영상에 포함된 오브젝트의 위치를 개인화 영상(710)에 맞게 조정하기 위한 가이드 라인(700)을 디스플레이부(120)에 표시할 수 있다. 제어부(150)는 가이드 라인(700) 주변에 가이드 라인에 맞추신 후 녹화 버튼을 눌러주세여와 같은 가이드 라인 안내 메시지를 더 표시할 수 있다. 예를 들면, 개인화 영상(710)이 사람이고, 촬영부(110)를 통해 사람 영상이 획득되는 경우, 제어부(150)는 촬영부(110)를 통해 입력된 사람 영상이 개인화 영상(710)과 겹치기 않거나 마주보도록 하기 위해 촬영부(110)를 통해 입력된 사람 영상의 위치를 지정해주는 가이드 라인(720)을 디스플레이부(120)에 표시할 수 있다. 사용자는 촬영부(110)를 통해 입력된 사람 영상이 가이드 라인(720)의 내부에 위치하도록 한 상태에서, 실시간 개인화 영상 생성 단말기(100)를 구동시켜 실시간 영상 및 개인화 영상을 합성할 수 있다. Referring to FIGS. 1 and 7, the controller 150 may display a guide line 700 on the display unit 120 for adjusting the position of the object included in the real-time image to the personalized image 710. The control unit 150 may display a guide line guidance message such as a main payment by pressing the record button after fitting the guide line around the guide line 700. [ For example, when the personalized image 710 is a person and a human image is obtained through the photographing unit 110, the control unit 150 determines whether the person image input through the photographing unit 110 is a personalized image 710, A guide line 720 for designating the position of a person image input through the photographing unit 110 may be displayed on the display unit 120 so as not to overlap or face each other. The user can combine the real-time image and the personalized image by driving the real-time personalized image generating terminal 100 in a state where the user image input through the photographing unit 110 is positioned inside the guide line 720.

이에 따라, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.
Accordingly, it is possible to minimize the case in which the personalized image is synthesized non-ideal in the real-time image.

도 8은 본 발명의 일 실시예와 관련된 실시간 개인화 영상 생성 방법을 설명하기 위한 흐름도이다.FIG. 8 is a flowchart illustrating a method for generating a real-time personalized image according to an embodiment of the present invention.

도 1 및 도 8을 참조하면, 실시간 개인화 영상 생성 단말기(100)는 실시간 영상에 포함된 오브젝트의 위치를 개인화 영상에 맞게 조정하기 위한 가이드 라인을 디스플레이부에 표시한다(800). 예를 들면, 개인화 영상이 사람이고, 촬영부(110)를 통해 사람 영상이 획득되는 경우, 제어부(150)는 촬영부(110)를 통해 입력된 사람 영상이 개인화 영상과 겹치기 않거나 마주보도록 하기 위해 촬영부(110)를 통해 입력된 사람 영상의 위치를 지정해주는 가이드 라인을 디스플레이부(120)에 표시할 수 있다. 사용자는 촬영부(110)를 통해 입력된 사람 영상이 가이드 라인의 내부에 위치하도록 함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.Referring to FIGS. 1 and 8, the real-time personalized image generating terminal 100 displays a guideline for adjusting the position of an object included in the real-time image to a personalized image on the display unit 800. For example, when a personalized image is a person and a human image is obtained through the photographing unit 110, the control unit 150 controls the photographing unit 110 so that a person image input through the photographing unit 110 does not overlap with or faces the personalized image A guideline for specifying the position of a person image input through the photographing unit 110 can be displayed on the display unit 120. [ The user can minimize the case where the personalized image is synthesized non-ideal in the real-time image by allowing the user image inputted through the photographing unit 110 to be positioned inside the guide line.

실시간 개인화 영상 생성 단말기(100)는 촬영부를 통해 실시간 영상을 획득하고 디스플레이부에 표시한다(810). 실시간 개인화 영상 생성 단말기(100)는 실시간 영상에 포함된 오브젝트를 추출한다(820). 실시간 개인화 영상 생성 단말기(100)는 실시간 영상 중 추출된 오브젝트를 제외한 영역을 추출한다(830). 실시간 개인화 영상 생성 단말기(100)는 추출된 오브젝트의 크기를 추출한다(840). The real-time personalized image generation terminal 100 acquires a real-time image through the photographing unit and displays the real-time image on the display unit (810). The real-time personalized image generation terminal 100 extracts objects included in the real-time image (820). The real-time personalized image generation terminal 100 extracts an area excluding the extracted object from the real-time image (830). The real-time personalized image generation terminal 100 extracts the size of the extracted object (840).

실시간 개인화 영상 생성 단말기(100)는 위치 변경 신호가 입력되는지 여부를 감지한다(850). 감지 결과, 위치 변경 신호가 입력된 경우, 실시간 개인화 영상 생성 단말기(100)는 입력된 개인화 영상의 위치 변경 신호에 따라, 개인화 영상의 위치를 변경한다(860). 예를 들면, 사용자가 사용자 입력부를 통해 개인화 영상을 오른쪽으로 변경하기 위한 위치 변경 신호를 입력하면, 실시간 개인화 영상 생성 단말기(100)는 개인화 영상의 위치를 오른쪽으로 이동시킬 수 있다. The real-time personalized image generation terminal 100 detects whether a position change signal is inputted (850). When the position change signal is input, the real-time personalized image generating terminal 100 changes the position of the personalized image according to the position change signal of the inputted personalized image (860). For example, when the user inputs a position change signal for changing the personalized image to the right through the user input unit, the real-time personalized image generating terminal 100 can move the position of the personalized image to the right.

실시간 개인화 영상 생성 단말기(100)는 실시간 개인화 영상 단말기(100)의 움직임을 감지한다(870). 감지 결과, 실시간 개인화 영상 생성 단말기(100)의 움직임이 감지된 경우, 실시간 개인화 영상 생성 단말기(100)는 감지된 움직임 변화에 따라 개인화 영상의 위치를 변경할 수 있다(880). 예를 들면, 사용자가 실시간 개인화 영상 생성 단말기(100)를 수직축을 기준으로 회전시키면, 실시간 개인화 영상 생성 단말기(100)는 움직임 변화를 감지할 수 있다. 실시간 개인화 영상 생성 단말기(100)는 감지된 움직임 변화에 따라 개인화 영상의 위치를 변경할 수 있다. 만약 회전 각도가 45도라면, 실시간 개인화 영상 생성 단말기(100)는 개인화 영상을 45도 회전시킬 수 있다.The real-time personalized image generation terminal 100 senses the motion of the real-time personalized video terminal 100 (870). If the motion of the real-time personalized-image generating terminal 100 is detected as a result of detection, the real-time personalized-image generating terminal 100 may change the position of the personalized image according to the detected motion change (880). For example, when the user rotates the real-time personalized-image generating terminal 100 on the basis of the vertical axis, the real-time personalized image generating terminal 100 can detect a change in the motion. The real-time personalized image generation terminal 100 can change the position of the personalized image according to the detected movement change. If the rotation angle is 45 degrees, the real-time personalized image generating terminal 100 can rotate the personalized image by 45 degrees.

실시간 개인화 영상 생성 단말기(100)는 위 과정들에서 생성된 결과에 기초하여 실시간 영상 및 개인화 영상을 합성한다(890). 예를 들면, 실시간 개인화 영상 생성 단말기(100)는 획득된 실시간 영상에 개인화 영상을 오버랩(over-lap)시켜 실시간으로 합성할 수 있다. 또 다른 예를 들면, 실시간 개인화 영상 생성 단말기(100)는 실시간 영상 중 개인화 영상을 합성할 위치에 해당하는 영역의 픽셀 값을, 개인화 영상의 픽셀 값으로 변경함으로써, 실시간 영상과 개인화 영상을 실시간으로 합성할 수 있다. 또 다른 예를 들면, 실시간 개인화 영상 생성 단말기(100)는 실시간 영상과 위치가 변경된 개인화 영상을 실시간으로 합성할 수 있다. 또 다른 예를 들면, 실시간 개인화 영상 생성 단말기(100)는 개인화 영상을 실시간 영상 중 추출된 오브젝트를 제외한 영역에 실시간으로 합성할 수 있다. 또 다른 예를 들면, 실시간 개인화 영상 생성 단말기(100)는 개인화 영상을 추출된 오브젝트의 크기에 비례하게 변환한 후, 변환된 개인화 영상을 실시간 영상에 합성할 수 있다. 또 다른 예를 들면, 실시간 개인화 영상 생성 단말기(100)는 감지된 단말기의 움직임 변화에 따라 개인화 영상의 위치를 변경한 후, 실시간 영상과 위치가 변경된 개인화 영상을 실시간으로 합성할 수 있다. The real-time personalized image generation terminal 100 synthesizes the real-time image and the personalized image based on the results generated in the above processes (890). For example, the real-time personalized image generation terminal 100 may synthesize real-time images by over-lapping the personalized images with the obtained real-time images. For example, the real-time personalized image generating terminal 100 may change the pixel value of the region corresponding to the position where the personalized image is synthesized from the real-time image to the pixel value of the personalized image, Can be synthesized. In another example, the real-time personalized image generation terminal 100 can synthesize a real-time image and a personalized image whose position has been changed in real time. In another example, the real-time personalized image generation terminal 100 may synthesize the personalized image in real-time except for the extracted objects in the real-time image. As another example, the real-time personalized image generating terminal 100 may convert the personalized image to a size proportional to the size of the extracted object, and then synthesize the converted personalized image into a real-time image. In another example, the real-time personalized image generation terminal 100 may change the position of the personalized image according to a change in the detected movement of the terminal, and then synthesize the real-time image and the personalized image with the changed position in real time.

실시간 개인화 영상 생성 단말기(100)는 합성된 영상을 자동으로 내부 또는 외부에 존재하는 메모리부(미도시)에 저장할 수 있다.The real-time personalized image generation terminal 100 can automatically store the synthesized image in a memory unit (not shown) existing inside or outside.

실시간 개인화 영상 생성 단말기는 촬영부를 통해 획득된 실시간 영상과 개인화 영상을 용이하게 합성할 수 있다.The real-time personalized image generation terminal can easily combine the real-time image and the personalized image acquired through the photographing unit.

또한, 실시간 개인화 영상 생성 단말기는 실시간 영상 중 오브젝트가 존재하지 않는 영역에 개인화 영상을 합성하거나, 오브젝트의 크기에 비례하게 개인화 영상을 변환하여 합성하거나, 단말기의 움직임에 따라 개인화 영상을 움직인 후 합성하거나, 가이드 라인을 디스플레이부에 표시함으로써, 개인화 영상이 실시간 영상에 비이상적으로 합성되는 경우를 최소화할 수 있다.
In addition, the real-time personalized image generation terminal may synthesize a personalized image in an area where no object exists in the real-time image, convert the personalized image in proportion to the size of the object, or move the personalized image according to the movement of the terminal, Or displaying the guideline on the display unit, it is possible to minimize the case where the personalized image is synthesized non-ideally with the real-time image.

설명된 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The embodiments described may be constructed by selectively combining all or a part of each embodiment so that various modifications can be made.

또한, 실시예는 그 설명을 위한 것이며, 그 제한을 위한 것이 아님을 주의하여야 한다. 또한, 본 발명의 기술분야의 통상의 전문가라면 본 발명의 기술사상의 범위에서 다양한 실시예가 가능함을 이해할 수 있을 것이다.It should also be noted that the embodiments are for explanation purposes only, and not for the purpose of limitation. In addition, it will be understood by those of ordinary skill in the art that various embodiments are possible within the scope of the technical idea of the present invention.

또한, 본 발명의 일실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
Further, according to an embodiment of the present invention, the above-described method can be implemented as a code that can be read by a processor on a medium on which the program is recorded. Examples of the medium that can be read by the processor include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, etc., and may be implemented in the form of a carrier wave (e.g., transmission over the Internet) .

100 : 실시간 개인화 영상 생성 단말기
110 : 촬영부
120 : 디스플레이부
130 : 추출부
140 : 자세 감지부
150 : 제어부
100: Real-time personalized image generation terminal
110:
120:
130:
140:
150:

Claims (16)

실시간 영상을 획득하는 촬영부;
상기 실시간 영상 및 메모리에 저장된 적어도 하나의 영상인 개인화 영상을 표시하는 디스플레이부; 및
상기 실시간 영상에 포함된 오브젝트의 위치를 상기 개인화 영상에 맞게 조정하기 위한 가이드 라인을 상기 디스플레이부에 표시하고, 상기 실시간 영상에 상기 개인화 영상을 실시간으로 합성하는 제어부를 포함하는 실시간 개인화 영상 생성 단말기.
A photographing unit for acquiring a real time image;
A display unit for displaying the real-time image and a personalized image, which is at least one image stored in the memory; And
And a controller for displaying on the display unit a guide line for adjusting a position of an object included in the real-time image according to the personalized image, and synthesizing the personalized image in real time with the real-time image.
제 1 항에 있어서,
상기 제어부는,
상기 실시간 영상에 상기 개인화 영상을 오버랩시켜 실시간으로 합성하는 실시간 개인화 영상 생성 단말기.
The method according to claim 1,
Wherein,
Wherein the personalized image is overlapped with the real-time image and synthesized in real time.
제 1 항에 있어서,
상기 제어부는,
상기 실시간 영상 중 상기 개인화 영상을 합성할 위치에 해당하는 영역의 픽셀 값을, 상기 개인화 영상의 픽셀 값으로 변경하여 실시간으로 합성하는 실시간 개인화 영상 생성 단말기.
The method according to claim 1,
Wherein,
Wherein a pixel value of an area corresponding to a position where the personalized image is to be synthesized among the real time images is converted into a pixel value of the personalized image and synthesized in real time.
제 1 항에 있어서,
상기 제어부는,
사용자 입력부를 통해 입력된 개인화 영상의 위치 변경 신호에 따라, 상기 개인화 영상의 위치를 변경하는 실시간 개인화 영상 생성 단말기.
The method according to claim 1,
Wherein,
A personalized image generating terminal for changing a position of a personalized image according to a position change signal of a personalized image input through a user input unit.
제 1 항에 있어서,
상기 실시간 영상에 포함된 오브젝트를 추출하는 추출부를 더 포함하고,
상기 제어부는,
상기 개인화 영상을 상기 추출된 오브젝트를 제외한 영역에 실시간으로 합성하는 실시간 개인화 영상 생성 단말기.
The method according to claim 1,
And an extracting unit for extracting an object included in the real-time image,
Wherein,
Wherein the personalized image is synthesized in real time in a region excluding the extracted object.
제 1 항에 있어서,
상기 실시간 영상에 포함된 오브젝트를 추출하는 추출부를 더 포함하고,
상기 제어부는,
상기 개인화 영상을 상기 추출된 오브젝트의 크기에 비례하게 변환한 후, 변환된 개인화 영상을 상기 실시간 영상에 실시간으로 합성하는 실시간 개인화 영상 생성 단말기.
The method according to claim 1,
And an extracting unit for extracting an object included in the real-time image,
Wherein,
Converting the personalized image into a size proportional to the size of the extracted object, and then synthesizing the converted personalized image into the real-time image in real time.
제 1 항에 있어서,
단말기의 움직임을 감지하는 자세 감지부를 더 포함하고,
상기 제어부는,
감지된 움직임 변화에 따라 상기 개인화 영상의 위치를 변경하여 실시간으로 합성하는 실시간 개인화 영상 생성 단말기.
The method according to claim 1,
Further comprising a posture sensing unit for sensing movement of the terminal,
Wherein,
Wherein the position of the personalization image is changed according to the detected movement change and synthesized in real time.
삭제delete 실시간 개인화 영상 생성 단말기의 실시간 개인화 영상 생성 방법에 있어서,
실시간 영상을 획득하는 단계;
상기 실시간 영상 및 메모리에 저장된 적어도 하나의 영상인 개인화 영상을 표시하는 단계; 및
상기 실시간 영상에 포함된 오브젝트의 위치를 상기 개인화 영상에 맞게 조정하기 위한 가이드 라인을 표시하고, 상기 실시간 영상에 개인화 영상을 실시간으로 합성하는 단계를 포함하는 실시간 개인화 영상 생성 방법.
A real-time personalized image generation method of a terminal,
Acquiring a real-time image;
Displaying the real-time image and the personalized image, which is at least one image stored in the memory; And
Displaying a guideline for adjusting a position of an object included in the real-time image according to the personalized image, and synthesizing the personalized image in real time with the real-time image.
제 9 항에 있어서,
상기 합성하는 단계는,
상기 실시간 영상에 상기 개인화 영상을 오버랩시켜 실시간으로 합성하는 단계를 포함하는 실시간 개인화 영상 생성 방법.
10. The method of claim 9,
Wherein the combining comprises:
And superimposing the personalized image on the real time image to synthesize the real time personalized image in real time.
제 9 항에 있어서,
상기 합성하는 단계는,
상기 실시간 영상 중 상기 개인화 영상을 합성할 위치에 해당하는 영역의 픽셀 값을, 상기 개인화 영상의 픽셀 값으로 변경하여 실시간으로 합성하는 단계를 포함하는 실시간 개인화 영상 생성 방법.
10. The method of claim 9,
Wherein the combining comprises:
And generating a real-time personalized image by synthesizing real-time personalized images by changing a pixel value of a region corresponding to a position of the personalized image of the real-time image to a pixel value of the personalized image.
제 9 항에 있어서,
상기 합성하는 단계는,
사용자 입력부를 통해 입력된 개인화 영상의 위치 변경 신호에 따라, 상기 개인화 영상의 위치를 변경하는 단계를 포함하는 실시간 개인화 영상 생성 방법.
10. The method of claim 9,
Wherein the combining comprises:
And changing a position of the personalized image according to a position change signal of the personalized image input through the user input unit.
제 9 항에 있어서,
상기 실시간 영상에 포함된 오브젝트를 추출하는 단계를 더 포함하고,
상기 합성하는 단계는,
상기 개인화 영상을 상기 추출된 오브젝트를 제외한 영역에 실시간으로 합성하는 단계를 더 포함하는 실시간 개인화 영상 생성 방법.
10. The method of claim 9,
Further comprising extracting an object included in the real-time image,
Wherein the combining comprises:
And synthesizing the personalized image in real time except for the extracted object in real time.
제 9 항에 있어서,
상기 실시간 영상에 포함된 오브젝트를 추출하는 단계를 더 포함하고,
상기 합성하는 단계는,
상기 개인화 영상을 상기 추출된 오브젝트의 크기에 비례하게 변환한 후, 변환된 개인화 영상을 상기 실시간 영상에 실시간으로 합성하는 단계를 더 포함하는 실시간 개인화 영상 생성 방법.
10. The method of claim 9,
Further comprising extracting an object included in the real-time image,
Wherein the combining comprises:
Converting the personalized image to a size proportional to the size of the extracted object, and synthesizing the converted personalized image to the real-time image in real time.
제 9 항에 있어서,
단말기의 움직임을 감지하는 단계를 더 포함하고,
상기 합성하는 단계는,
감지된 움직임 변화에 따라 상기 개인화 영상의 위치를 변경하여 실시간으로 합성하는 단계를 포함하는 실시간 개인화 영상 생성 방법.
10. The method of claim 9,
Further comprising the step of detecting movement of the terminal,
Wherein the combining comprises:
And changing the position of the personalized image according to the detected motion change and synthesizing the personalized image in real time.
삭제delete
KR1020120145800A 2012-12-13 2012-12-13 Apparatus and method for generating real-time a personalized image KR101409251B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120145800A KR101409251B1 (en) 2012-12-13 2012-12-13 Apparatus and method for generating real-time a personalized image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120145800A KR101409251B1 (en) 2012-12-13 2012-12-13 Apparatus and method for generating real-time a personalized image

Publications (2)

Publication Number Publication Date
KR20140077066A KR20140077066A (en) 2014-06-23
KR101409251B1 true KR101409251B1 (en) 2014-06-24

Family

ID=51129145

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120145800A KR101409251B1 (en) 2012-12-13 2012-12-13 Apparatus and method for generating real-time a personalized image

Country Status (1)

Country Link
KR (1) KR101409251B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10915730B2 (en) 2017-09-21 2021-02-09 Lexset.Ai Llc Detecting one or more objects in an image, or sequence of images, and determining a category and one or more descriptors for each of the one or more objects, generating synthetic training data, and training a neural network with the synthetic training data

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100136833A (en) * 2009-06-19 2010-12-29 삼성전자주식회사 Method of creating contents using camera in terminal and apparatus thereof
KR20110132031A (en) * 2010-06-01 2011-12-07 엘지전자 주식회사 Mobile terminal and image processing method for mobile terminal

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100136833A (en) * 2009-06-19 2010-12-29 삼성전자주식회사 Method of creating contents using camera in terminal and apparatus thereof
KR20110132031A (en) * 2010-06-01 2011-12-07 엘지전자 주식회사 Mobile terminal and image processing method for mobile terminal

Also Published As

Publication number Publication date
KR20140077066A (en) 2014-06-23

Similar Documents

Publication Publication Date Title
US10719981B2 (en) Generating a three-dimensional model using a portable electronic device recording
WO2019141100A1 (en) Method and apparatus for displaying additional object, computer device, and storage medium
US11231845B2 (en) Display adaptation method and apparatus for application, and storage medium
US11348306B2 (en) Method, apparatus, and recording medium for processing image
US9571734B2 (en) Multi display device and method of photographing thereof
CN104243819B (en) Photo acquisition methods and device
US9910505B2 (en) Motion control for managing content
CN111010510B (en) Shooting control method and device and electronic equipment
CN111145352A (en) House live-action picture display method and device, terminal equipment and storage medium
KR102097452B1 (en) Electro device comprising projector and method for controlling thereof
US10147399B1 (en) Adaptive fiducials for image match recognition and tracking
KR102146858B1 (en) Photographing apparatus and method for making a video
US20140240576A1 (en) Digital device and method for controlling the same
US11231828B2 (en) Smart globe and control method therefor
US20120026376A1 (en) Anamorphic projection device
US20110319130A1 (en) Mobile terminal and method of operation
US10019140B1 (en) One-handed zoom
CN113407291A (en) Content item display method, device, terminal and computer readable storage medium
CN104038694A (en) Method and device for displaying panoramic image
JP7523511B2 (en) Information processing device and information processing method
US8704939B1 (en) Mobile device and method for controlling the same
KR20160071783A (en) Method and device for displaying contents
CN109582134A (en) The method, apparatus and display equipment that information is shown
CN113467682B (en) Method, device, terminal and storage medium for controlling movement of map covering
KR101409251B1 (en) Apparatus and method for generating real-time a personalized image

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170512

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180503

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190510

Year of fee payment: 6