KR101439550B1 - 터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를이용한 이미지와 동영상 합성 장치 - Google Patents

터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를이용한 이미지와 동영상 합성 장치 Download PDF

Info

Publication number
KR101439550B1
KR101439550B1 KR1020080037569A KR20080037569A KR101439550B1 KR 101439550 B1 KR101439550 B1 KR 101439550B1 KR 1020080037569 A KR1020080037569 A KR 1020080037569A KR 20080037569 A KR20080037569 A KR 20080037569A KR 101439550 B1 KR101439550 B1 KR 101439550B1
Authority
KR
South Korea
Prior art keywords
image
touch screen
moving
moving picture
images
Prior art date
Application number
KR1020080037569A
Other languages
English (en)
Other versions
KR20090111945A (ko
Inventor
김정호
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020080037569A priority Critical patent/KR101439550B1/ko
Publication of KR20090111945A publication Critical patent/KR20090111945A/ko
Application granted granted Critical
Publication of KR101439550B1 publication Critical patent/KR101439550B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Processing Or Creating Images (AREA)

Abstract

터치스크린을 이용하여 동영상을 합성할 수 있는 방법 및 장치가 개시된다. 동영상과 합성될 합성대상 객체를 선택받고, 선택된 합성대상 객체와 합성될 동영상을 선택받고, 선택된 동영상을 재생하며, 재생되는 동영상 상에 합성대상 객체의 합성위치를 터치스크린을 통하여 지정하여 합성대상 객체를 동영상 내에 합성하는 것으로 이미지와 동영상 합성 방법을 구성한다. 따라서, 동영상 내에 합성될 합성대상 객체를 편리하게 선택하여, 재생되는 동영상의 변화에 따라 터치스크린을 이용하여 합성대상 객체의 합성 위치를 즉시적으로 지정하는 방식으로 동작하는 것에 의하여 합성이 완료된 동영상을 예측하면서 재미있는 동영상 합성 효과를 얻을 수 있다.
동영상, 이미지, 터치스크린, 영상합성, 카메라

Description

터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를 이용한 이미지와 동영상 합성 장치{METHOD OF COMPOSING IMAGE AND MOTION PICTURE AND DEVICE USING THE SAME}
본 발명은 이미지와 동영상의 합성 방법에 관한 것으로, 더욱 상세하게는 터치스크린을 이용한 이미지와 동영상의 합성 방법으로서 터치스크린을 통해 동영상과 합성될 대상 객체의 동영상 내 합성 위치를 지정하는 이미지와 동영상의 합성 방법 및 이를 이용한 이미지와 동영상 합성 장치에 관한 것이다.
최근의 단말기들은 사용자의 요구를 충족시키기 위해 다양한 기능과 서비스를 제공하는 반면, 사용자 입력 장치로는 아직까지도 고정적인 매트릭스 배열을 가지는 키-패드가 주로 이용되고 있다. 예컨대, 단말기에 컬러 및 고해상도의 디스플레이 화면이 채용되고, 외형적으로도 슬림화, 소형화가 진행되는 중에도 사용자 입력 장치의 경우에는 종래의 키-패드 형태의 입력 장치에서 큰 변화가 없었던 것이다.
이러한 키-패드를 이용한 사용자 인터페이스의 대안으로 장래 생산되는 단말기들의 상당 수는 터치-패드(touch pad) 또는 터치-스크린(touch screen)과 같은 터치 방식의 사용자 인터페이스로 채택할 것이 예상되고 있다. 이는 터치 방식 인터페이스 장치의 비용절감 및 종래의 터치 방식 인터페이스 장치들의 낮은 신뢰성과 수명의 문제가 해결된 결과이다.
터치 패드(touch pad)는 압력 감지기가 달려 있는 평판으로서, 손가락이나 펜 등을 이용해 접촉하면 압력을 감지하여 화면의 지시자가 움직이고 이 위치 정보를 컴퓨터가 인식한다.
터치스크린(touch screen)은 디스플레이 화면상의 한 점을 손가락 등으로 누르면 그 접촉점의 좌표를 출력하는 위치 감지기를 포함한다. 예컨대, 디스플레이 화면이 터치 패드의 역할을 겸하는 장치를 터치스크린으로 정의할 수 있다.
이러한 터치 방식의 입력 장치들에는 압력식 저항막 방식, 접촉식 정전용량 방식, 표면초음파전도(Surface Acoustic Wave: SAW) 방식, 적외선 광 감지 방식 및 압전 방식 등의 기술이 적용된다. 이들 중, 터치스크린에는 투과율이 높고 반응속도가 빠르며 내성이 우수하여 작동환경의 영향을 적게 받는 압력식 저항막 방식이 일반적으로 가장 많이 채용되고 있다.
특히, 터치스크린은 사용자에게 화면상에 출력되는 내용과 화면을 통하여 입력되는 내용의 대화적이고 즉시적인 대응을 제공할 수 있고, 다양한 방식으로 다채로운 형태의 입력이 가능하여 높은 사용자 만족도와 사용상 편의성을 제공할 수 있다. 즉, 종래의 고정적인 배열을 가지는 키-패드와 같은 정형화된 사용자 입력 장치에 비하여 사용자 인터페이스를 구성하는 출력장치와 입력장치를 일체화시키는 개념으로서 다양한 형태의 입력과 출력을 동시에 가능하게 한다. 특히, 종래의 저 해상도 숫자 및 문자로 구성된 텍스트 기반 인터페이스에서 고해상도의 그래픽 기반 인터페이스로 변화되어 가면서, 그래픽 기반의 객체를 통한 입력을 실현하는 것이 가능해지고, 키-패드를 대체할 경우에는 키-패드 설치면적을 생략 가능하므로 동일한 체적을 가지는 단말기에서 상대적으로 대 화면의 디스플레이가 가능해진다는 장점 또한 가진다.
한편, 최근의 이동통신단말기는 카메라 모듈을 장착하여, 사용자가 언제나 휴대하는 이동통신단말기의 특성에 맞게 외부환경을 촬영하거나, 자신이나 동료의 모습을 언제 어디서나 정지 화상 또는 동영상으로 촬영하여 메모리에 저장할 수 있는 기능을 제공하고 있다. 그러나, 정지 화상 또는 동영상을 상기 터치 스크린을 이용하여 출력하면서 이를 용이하게 편집하거나 합성하는 기능을 제공하고 있지는 못하다.
상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 터치스크린을 이용하여 합성 대상이 되는 동영상 상에 사용자가 선택한 객체 이미지를 합성하여 합성 동영상을 생성하는 방법을 제공하는데 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 터치스크린을 이용하여 합성 대상이 되는 동영상 상에 사용자가 선택한 객체 이미지를 합성하여 합성 동영상을 생성하는 단말기를 제공하는데 있다.
상술한 목적을 달성하기 위한 본 발명은, 동영상과 합성될 합성대상 객체를 선택 받는 합성대상 객체 선택 단계, 상기 합성대상 객체와 합성될 동영상을 선택 받는 동영상 선택 단계 및 상기 동영상을 재생하며, 상기 재생되는 동영상 상에 상기 합성대상 객체의 합성위치를 터치스크린을 통하여 지정하여 상기 합성대상 객체를 상기 동영상 내에 합성하는 동영상 합성 단계를 포함한 것을 특징으로 하는 이미지와 동영상 합성 방법을 제공한다.
여기에서, 상기 합성대상 객체 선택 단계는, 저장된 이미지를 터치스크린 상에 표시하고, 상기 저장된 이미지 상에 터치를 통하여 객체의 윤곽을 그리는 것에 의하여 상기 합성대상 객체를 선택 받도록 구성될 수 있다.
여기에서, 상기 합성대상 객체 선택 단계는, 동영상과 합성될 적어도 하나의 합성대상 객체 이미지를 터치스크린 상에 표시하고, 상기 표시된 적어도 하나의 합 성대상 객체 이미지 중에서 적어도 하나를 선택 받도록 구성될 수 있다.
여기에서, 상기 동영상 합성 단계는, 상기 재생되는 동영상 상에 터치를 중지할 경우에는 상기 합성대상 객체와 상기 동영상의 합성을 중지하고, 상기 재생되는 동영상 상에 터치를 재개할 경우에는 상기 합성대상 객체와 상기 동영상의 합성을 재개하도록 구성될 수 있다.
여기에서, 상기 동영상 합성 단계에서, 상기 터치스크린을 통하여 지정된 상기 합성대상 객체의 합성 위치에는 상기 합성대상 객체가 오버레이(overlay) 형태로 표시되어, 상기 동영상과 상기 합성대상 객체의 합성결과를 프리뷰(preview) 형태로 제시하도록 구성될 수 있다.
상술한 다른 목적을 달성하기 위한 본 발명은, 터치스크린, 적어도 하나의 이미지와 적어도 하나의 동영상을 저장하고 있는 저장부 및 상기 저장부에 저장된 적어도 하나의 이미지를 상기 터치 스크린 상에 출력하고, 출력된 적어도 하나의 이미지 중 적어도 하나의 이미지의 적어도 일부를 합성대상 객체 이미지로 선택하고, 상기 적어도 하나의 동영상을 출력하고, 출력된 적어도 하나의 동영상 중 하나를 합성대상 객체 이미지로 선택하여, 상기 동영상을 재생하며, 재생되는 동영상 상에 상기 합성대상 객체의 합성위치를 터치스크린에 대한 터치로 지정하여 입력받아 상기 합성대상 객체를 상기 동영상 내에 합성하는 제어 및 영상합성부를 포함하는 이미지와 동영상 합성 장치를 제공한다.
여기에서, 상기 이미지와 동영상 합성 장치는 카메라 모듈을 추가로 포함하고, 상기 카메라 모듈은 촬영된 동영상 및/또는 촬영된 이미지를 상기 저장부에 저 장하도록 구성될 수 있다.
상기와 같은 본 발명에 따른 이미지와 동영상 합성 방법을 이용할 경우에는 동영상 내에 합성될 합성대상 객체를 편리하게 선택하여, 재생되는 동영상의 변화에 따라 터치스크린을 이용하여 합성대상 객체의 합성 위치를 즉시적으로 지정하는 방식으로 동작하는 것에 의하여 합성이 완료된 동영상을 예측하면서 재미있는 동영상 합성 효과를 얻을 수 있다.
특히, 상기와 같은 본 발명에 따른 이미지와 동영상 합성 방법을 카메라 모듈을 구비한 이동통신단말기에서 이용할 경우에는, 카메라 모듈을 이용하여 촬영한 동영상과 카메라 모듈을 이용하여 촬영한 이미지를 이동통신단말기내에서 터치스크린을 이용하여 즉시적으로 합성하고, 합성된 이미지를 MMS(Multimedia Message Service)로 전송하고, UCC(User Created Contents) 웹 사이트 등에 전송하는 등으로의 이용이 가능해진다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
본 발명에 따른 이미지와 동영상 합성 방법
도 1은 본 발명에 따른 이미지와 동영상 합성 방법을 설명하기 위한 순서도이다.
도 1을 참조하면, 본 발명에 따른 이미지와 동영상 합성 방법은 합성대상 객체 선택 단계(S110), 동영상 선택 단계(S120) 및 동영상 합성 단계(S130)를 포함하여 구성될 수 있다.
먼저, 합성대상 객체 선택 단계(S110)는 동영상과 합성될 합성대상 객체(object)를 선택 받는 단계이다.
합성대상 객체를 선택받기 위한 방법으로는 여러 가지 방식이 이용될 수 있다. 대표적으로는, 저장된 이미지 내에서 객체를 추출하여 합성대상 객체를 선택하도록 구성될 수도 있으며, 합성대상 객체로 이용될 수 있는 여러 개의 합성대상 객 체의 후보 이미지들 중에서 적어도 하나를 선택 받는 방식이 이용될 수 있다.
도 2a는 본 발명에 따른 이미지와 동영상 합성방법에서 합성대상 객체를 선택 받는 방법의 일 예를 설명하기 위한 개념도이다.
도 2a를 참조하면, 저장된 이미지(220)를 터치스크린(210) 상에 표시하고, 상기 저장된 이미지 상에 터치를 통하여 객체의 윤곽(221)을 그리는 것에 의하여 합성대상 객체를 선정하는 방식이 예시되어 있다.
예컨대, 도 2b에서는 저장된 이미지(220)에서 강아지의 머리에 해당되는 부분을 터치스크린에 대한 터치입력을 통하여 윤곽(221)을 그리고, 그려진 윤곽의 내측 부분(222)을 합성대상 객체로서 추출하는 경우가 예시되어 있다.
또는, 상기의 경우에는 사용자가 직접 객체의 윤곽선을 그리는 것에 의해서 추출될 합성대상 객체를 선택하는 방식이지만, 저장된 이미지 내에서 영상 처리(image processing)을 통하여 자동적으로 객체를 분리시키고, 추출 가능한 객체의 후보들에 윤곽선을 표시하여 사용자에게 제시하고 윤곽선이 표시된 객체들 중에서 터치를 통하여 합성대상 객체를 선정하는 방식 또한 이용될 수 있을 것이다.
한편, 여기에서 저장된 이미지는 본 발명에 따른 이미지와 동영상 합성 방법이 수행되는 장치에 카메라 모듈이 포함되어 있거나, 카메라 장치가 연결되어 있는 경우에는 카메라 모듈을 통하여 촬영되어 메모리 장치 또는 메모리 카드 내에 저장되어 있거나, 카메라 장치로부터 소정의 인터페이스(USB, IEEE-1394 등)를 이용하여 다운로드 받은 이미지를 의미한다.
도 2b는 본 발명에 따른 이미지와 동영상 합성방법에서 합성대상 객체를 선 택 받는 방법의 다른 예를 설명하기 위한 개념도이다.
도 2b를 참조하면, 동영상과 합성될 적어도 하나의 합성대상 객체 이미지들(223, 224, 225, 226)를 터치스크린(210) 상에 표시하고, 상기 표시된 적어도 하나의 합성대상 객체 이미지 중에서 적어도 하나를 선택 받는 경우가 예시되어 있다.
도 2a에서 예시된 방식과의 차이점은, 도 2a에서는 사용자가 직접 저장된 이미지 내에서 합성대상 객체를 추출하는 방식이 예시되었지만, 도 2b에서는 동영상과 합성될 합성대상 객체의 후보들이 동영상에 합성되기에 적절한 사이즈로 미리 추출되어 썸네일(thumb nail) 형태의 작은 아이콘으로 표시되고, 표시된 합성대상 객체의 후보들 중에서 적어도 하나를 선택하도록 구성된다는 점이다.
한편, 도 2a와 도 2b에서는 하나의 합성대상 객체를 선택 받는 것을 예시하고 있으나, 본 발명에 따른 이미지와 동영상 합성 방법에서는 합성대상 객체가 하나일 필요 없이, 두 개 이상의 합성 대상 객체를 선택하고, 두 개 이상의 합성대상 객체를 합성하여 합성대상 객체로 이용하는 경우도 가능할 것이다.
또한, 저장된 이미지에서 추출하거나, 합성대상 객체 후보에서 선택하는 방식 대신에 직접 사용자가 터치스크린을 통하여 합성대상 객체를 그리고 그려진 이미지를 합성대상 객체로 이용하는 방식도 물론 가능할 것이다.
다음으로, 동영상 선택 단계(S120)는 상기 합성대상 객체와 합성될 동영상을 선택 받는 단계이다.
합성대상 객체와 합성될 동영상은 MPEG, AVI 등의 다양한 형식의 디지털 영 상 데이터의 형태로 준비될 수 있다. 예컨대, 앞서 언급된 바와 같이, 본 발명에 따른 이미지와 동영상 합성 방법이 수행되는 장치에 카메라 모듈이 포함되어 있거나, 카메라 장치가 연결되어 있는 경우에는 카메라 모듈을 통하여 촬영되어 메모리 장치 또는 메모리 카드 내에 저장되어 있거나, 카메라 장치로부터 소정의 인터페이스(USB, IEEE-1394 등)를 이용하여 다운로드 받은 동영상 데이터가 동영상 선택 단계(S120)에서 합성대상 객체와 합성될 동영상으로 선택될 수 있다.
한편, 상술된 합성대상 객체 선택 단계(S110)와 동영상 선택 단계(S120)는 설명의 편의상 순서대로 설명되었을 뿐, 동영상 선택 단계(S120)가 합성대상 객체 선택 단계(S110)보다 앞서 수행되거나, 동영상 선택 단계(S120)와 합성대상 객체 선택 단계(S110)가 동시에 수행되는 경우도 본 발명에 따른 이미지와 동영상 합성방법에 포함될 것이다. 예컨대, 한 화면 내에서 합성대상 객체와 동영상을 함께 선택 가능하다.
마지막으로, 동영상 합성 단계(S130)는 앞서 동영상 선택 단계(S120)에서 선택된 동영상을 재생하며, 재생되는 동영상 상에 합성대상 객체 선택 단계(S110)에서 선택된 합성대상 객체의 합성위치를 터치스크린을 통하여 지정하여 합성대상 객체를 동영상 내에 합성하는 단계이다.
도 2c는 본 발명에 따른 이미지와 동영상 합성방법에서 동영상과 합성대상 객체를 합성하는 과정을 설명하기 위한 개념도이다.
도 2c를 참조하면, 터치스크린(210)을 일부 분할하여, 상측부에는 선택된 동영상(230)이 재생되며, 하측부에는 도 2b에서 설명된 바 있는 합성대상 객체 후보 이미지들(223 내지 226)이 표시되어 있다.
이때, 사용자는 터치스크린(210)에 대하여 손가락이나 스타일러스 펜(240)을 이용하여 재생되는 동영상(230)의 소정 위치(즉, 합성대상 객체가 합성될 위치)를 지정하는 방식으로 합성대상 객체의 합성 위치를 지정한다.
즉, 동영상이 재생됨에 따라서, 동영상 내에 합성대상 객체가 합성되기를 사용자가 원하는 위치는 변경될 수 있으므로, 사용자는 동영상을 시청하면서 지속적으로 동영상 내에 합성대상 객체가 합성될 위치를 지정하는 방식으로 동영상 합성 단계(S130)는 수행될 수 있다. 이때, 손가락이나 스타일러스 펜(240)이 터치된 터치스크린의 위치(즉, 합성대상 객체가 합성될 위치)에는 합성대상 객체를 오버레이(overlay) 상태로 출력하여 사용자가 합성 이후의 동영상을 미리 예측할 수 있도록 하는 프리뷰(preview) 형식의 화면이 제공되는 것이 바람직할 것이다.
한편, 상기 동영상 합성 단계(S130)에서는 재생되는 동영상 상에 터치를 중지할 경우에는 합성대상 객체와 동영상의 합성을 중지하고, 재생되는 동영상 상에 터치를 재개할 경우에는 합성대상 객체와 동영상의 합성을 재개하는 방식으로 동작될 수 있다.
예컨대, 사용자가 전체 동영상 중에서 일부 재생 구간에 대해서만 합성대상 객체를 동영상에 합성시키기를 원하고, 일부 재생 구간에 대해서는 합성대상 객체가 동영상에 합성되기를 원하지 않을 경우에는, 터치스크린에 대한 터치동작을 일시 중지하거나 재개하는 것에 의하여 동영상의 합성여부를 결정짓도록 구성될 수 있을 것이다.
한편, 도 2c에서는 동영상이 재생되는 중에도 터치스크린(210)의 하측부에는 합성대상 객체 후보 이미지들(223~226)이 표시되어 있는 경우를 예시하고 있다. 즉, 동영상 합성 중에도 합성대상 객체의 변경이 가능할 수 있다.
예컨대, 웃는 사람의 얼굴(225)을 동영상에 합성시키다가, 우는 사람의 얼굴(226)로 합성대상 객체의 변경이 가능하다. 이 경우, 스타일러스 펜(240)이나 손가락을 통하여 터치스크린의 하측부에 위치한 합성대상 객체에서 새로운 합성대상 객체를 선택한 후, 터치스크린 상측부에 위치한 동영상 재생 영역(230)을 다시 터치하는 것에 의하여 동영상 합성을 재개할 수 있다. 이때, 손가락이나 스타일러스 펜(240)이 터치된 터치스크린의 위치에는 현재 선택된 합성대상 객체의 이미지를 표시하는 것에 의해 현재 선택된 합성대상 객체가 무엇인지를 사용자가 바로 알 수 있도록 할 수 있다.
마지막으로, 동영상 합성 단계(S130)를 마친 이후에는 합성된 동영상이 본 발명에 따른 이미지와 동영상 합성 방법이 수행되는 장치의 메모리에 저장된다.
본 발명에 따른 이미지와 동영상 합성 장치
도 3은 본 발명에 따른 이미지와 동영상 합성 장치의 구성예를 설명하기 위한 블록도이다.
도 3을 참조하면, 본 발명에 따른 이미지와 동영상 합성 장치(300)는 터치스크린(310), 저장부(320), 제어 및 영상 합성부(330)를 포함하여 구성될 수 있다. 추가적인 구성요소로서, 상기 이미지와 동영상 합성 장치(300)는 카메라 모듈(340) 을 포함할 수 있다.
이때, 본 발명에 따른 이미지와 동영상 합성 장치는 이동통신단말기, PDA(Personal Digital Assistant), UMPC(Ultra Mobile PC) 등의 휴대용 장치이거나, 터치스크린을 구비한 노트북 PC 등 다양한 장치들 중의 하나가 될 수 있다.
먼저, 터치스크린(310)은 압력식 저항막 방식, 접촉식 정전용량 방식, 표면초음파전도(SAW) 방식, 적외선 광 감지 방식 및 압전 방식 등을 이용한 터치스크린이 이용될 수 있다. 특히, 압력식 저항막 방식이 투과율이 높고 반응속도가 빠르며 내성이 우수하여 작동환경의 영향을 적게 받는 장점을 가지고 있으므로 주로 이용될 수 있을 것이다.
다음으로, 저장부(320)는 적어도 하나의 이미지와 적어도 하나의 동영상을 저장하고 있는 구성요소이다. 저장부(320)는 다양한 형태의 저장 장치로 구성될 수 있다. 예컨대, NAND 또는 NOR 플래쉬(flash) 메모리 장치 등의 불휘발성(non-volatile) 메모리 장치가 이용되는 것이 바람직할 것이나, 하드디스크(HDD: Hard Disk Drive), 광학 디스크(ODD: Optical Disk Drive) 등의 저장 장치가 이용될 수도 있을 것이다.
또한, 여기에서 저장부(320)는 이미지와 동영상 합성 장치(300)내에 내장(built-in)된 형태가 아니라, 메모리 카드(SD, Micro-SD, CF, MMC, Memory-Stick)의 형태로 본 발명에 따른 이미지와 동영상 합성 장치(300)에 착탈식으로 삽입되어 동작하는 형태의 저장장치를 포괄하는 개념이다.
추가적으로, 이미지와 동영상 합성 장치(300)는 카메라 모듈(340)을 가질 수 있으며, 상기 카메라 모듈(340)이 장비된 경우에는, 카메라 모듈(340)을 통하여 촬영된 정지화상 이미지나 촬영된 동영상을 상기 저장부(320)에 저장하도록 구성될 수 있다. 이미지와 동영상 합성 장치(300)가 카메라 모듈(340)을 내장하지 않은 경우에는 적절한 인터페이스(USB, IEEE-1394)를 통하여 외부의 카메라 장치나 외부의 저장공간으로부터 저장부(320)에 다운로드 될 수 있다.
마지막으로, 제어 및 영상 합성부(330)는 저장부에 저장된 적어도 하나의 이미지를 상기 터치 스크린 상에 출력하고, 출력된 적어도 하나의 이미지 중 적어도 하나의 이미지의 적어도 일부를 합성대상 객체 이미지로 선택 받으며, 적어도 하나의 동영상을 출력하고, 출력된 적어도 하나의 동영상 중 하나를 합성대상 객체 이미지로 선택 받으며, 선택된 동영상을 재생하며, 재생되는 동영상 상에 합성대상 객체의 합성위치를 터치스크린에 대한 터치로 지정하여 입력받아 상기 합성대상 객체를 상기 동영상 내에 합성하는 구성요소이다.
상술된 제어 및 영상 합성부(330)의 동작을 수행하기 위해서, 제어 및 영상 합성부(330)는 프로세서 유닛(processor unit; 331)과 상기 일련의 동작을 기술한 프로그램 코드들 및 프로그램 코드들을 저장할 수 있는 코드(code) 및 데이터(data) 메모리(334)를 포함하여 구성될 수 있다. 코드 및 데이터 메모리(334)는 제어 및 영상 합성부(330)내에 D-RAM(Dynamic RAM) 또는 S-RAM(Static RAM) 등을 이용하여 구현될 수 있다.
또한, 제어 및 영상 합성부(330)는 선택된 동영상의 동영상 데이터를 저장부(320)로부터 독출하면서 압축코딩된 동영상 데이터를 디코딩시키는 영상 디코 더(decoder; 333) 등의 구성요소를 추가로 포함할 수 있다. 한편, 도 3에서는 별도의 하드웨어 구성요소로서 영상 디코더(332)를 도시하였으나, 상기 영상 디코더(333)는 상기 프로세서 유닛에서 압축코딩된 동영상 데이터를 디코딩시키는 동작을 소프트웨어적으로 수행하는 소프트웨어 디코더로서 구현될 수도 있을 것이다.
또한, 제어 및 영상 합성부(330)는 터치스크린을 이용하여 지정된 합성위치에 합성대상 객체를 포함시켜, 동영상을 다시 재 인코딩시키는 영상 인코더(encoder; 332)의 구성요소를 추가로 포함할 수 있다. 한편, 도 3에서는 별도의 하드웨어 구성요소로서 영상 인코더(332)를 도시하였으나, 상기 영상 인코더(332)는 마찬가지로, 프로세서 유닛에서 상기 동영상 데이터를 재인코딩하여 생성하는 동작을 소프트웨어적으로 수행하는 소프트웨어 인코더로 구성될 수도 있을 것이다.
한편, 제어 및 영상 합성부(330)는 합성된 동영상을 상기 저장부에 다시 저장하도록 구성될 수 있다. 즉, 상기 영상 인코더(332)는 재인코딩되어 생성된 동영상을 저장부(320)으로 출력하고 저장부(320)에서는 생성된 동영상을 저장하도록 구성될 수 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
도 1은 본 발명에 따른 이미지와 동영상 합성 방법을 설명하기 위한 순서도이다.
도 2a는 본 발명에 따른 이미지와 동영상 합성방법에서 합성대상 객체를 선택 받는 방법의 일 예를 설명하기 위한 개념도이다.
도 2b는 본 발명에 따른 이미지와 동영상 합성방법에서 합성대상 객체를 선택 받는 방법의 다른 예를 설명하기 위한 개념도이다.
도 2c는 본 발명에 따른 이미지와 동영상 합성방법에서 동영상과 합성대상 객체를 합성하는 과정을 설명하기 위한 개념도이다.
도 3은 본 발명에 따른 이미지와 동영상 합성 장치의 구성예를 설명하기 위한 블록도이다.
<도면의 주요 부분에 대한 부호의 설명>
310: 터치 스크린 320: 저장부
330: 제어 및 영상 합성부
331: 프로세서 유닛 332: 영상 인코더
333: 영상 디코더 334: 코드 및 데이터 메모리
340: 카메라 모듈

Claims (8)

  1. 단말에서 수행되는 이미지와 동영상 합성 방법에 있어서,
    상기 단말에 미리 저장된 복수의 이미지를 터치스크린에 표시하고, 상기 복수의 이미지 중 사용자에 의해 선택된 하나의 이미지를 상기 터치스크린에 표시하고, 상기 하나의 이미지 내에서 상기 사용자가 선택한 영역 정보를 획득하고, 상기 영역 정보가 나타내는 영역을 동영상과 합성될 합성대상 객체로 결정하는 합성대상 객체 선택 단계;
    상기 단말에 미리 저장된 복수의 동영상을 상기 터치스크린에 표시하고, 상기 복수의 동영상 중 사용자에 의해 선택된 하나의 동영상을 상기 합성대상 객체와 합성될 동영상으로 결정하는 동영상 선택 단계; 및
    상기 결정한 동영상을 상기 터치스크린에 재생하고, 상기 터치스크린을 통해 상기 합성대상 객체의 합성 위치를 나타내는 지속적인 터치 신호를 수신하고, 상기 터치 신호가 나타내는 상기 합성대상 객체의 합성 위치에 상기 합성대상 객체를 합성하는 동영상 합성 단계를 포함하되,
    상기 영역 정보는 상기 터치스크린에 표시한 이미지 상에 상기 사용자의 터치 신호를 수신하는 지점을 따라 그려지는 닫힌 형태의 윤곽의 내부를 의미하는 이미지와 동영상 합성 방법.
  2. 삭제
  3. 삭제
  4. 제 1 항에 있어서,
    상기 동영상 합성 단계는,
    상기 터치스크린을 통해 상기 합성대상 객체의 합성 위치를 나타내는 상기 터치 신호의 수신이 중지되는 경우, 상기 합성대상 객체의 합성을 중지하는 단계를 포함하는 것을 특징으로 하는 이미지와 동영상 합성 방법.
  5. 제 1 항에 있어서,
    상기 동영상 합성 단계는,
    상기 합성대상 객체를 상기 터치 신호가 나타내는 상기 합성대상 객체의 합성 위치에 오버레이(overlay) 형태로 표시하고, 상기 동영상과 상기 합성대상 객체의 합성결과를 프리뷰(preview) 형태로 제시하는 것을 특징으로 하는 이미지와 동영상 합성 방법.
  6. 터치스크린;
    복수의 이미지 및 복수의 동영상을 저장하고 있는 저장부;
    상기 복수의 이미지를 상기 터치스크린에 표시하고, 상기 복수의 이미지 중 사용자에 의해 선택된 하나의 이미지를 상기 터치스크린에 표시하고, 상기 하나의 이미지 내에서 상기 사용자가 선택한 영역 정보를 획득하고, 상기 영역 정보가 나타내는 영역을 동영상과 합성될 합성대상 객체로 결정하고, 상기 복수의 동영상을 상기 터치스크린에 표시하고, 상기 복수의 동영상 중 사용자에 의해 선택된 하나의 동영상을 상기 합성대상 객체와 합성될 동영상으로 결정하고, 상기 결정한 동영상을 상기 터치스크린에 재생하고, 상기 터치스크린을 통해 상기 합성대상 객체의 합성 위치를 나타내는 지속적인 터치 신호를 수신하고, 상기 터치 신호가 나타내는 상기 합성대상 객체의 합성 위치에 상기 합성대상 객체를 합성하는 제어 및 영상합성부를 포함하되,
    상기 영역 정보는 상기 터치스크린에 표시한 이미지 상에 상기 사용자의 터치 신호를 수신하는 지점을 따라 그려지는 닫힌 형태의 윤곽 내부를 의미하는 이미지와 동영상 합성 장치.
  7. 제 6 항에 있어서,
    상기 이미지와 동영상 합성 장치는 카메라 모듈을 추가로 포함하고, 상기 카메라 모듈은 촬영된 동영상 및 촬영된 이미지 중 적어도 하나를 상기 저장부에 저장하는 것을 특징으로 하는 이미지와 동영상 합성 장치.
  8. 제 7 항에 있어서,
    상기 제어 및 영상합성부는 합성된 동영상을 상기 저장부에 저장하는 것을 특징으로 하는 이미지와 동영상 합성 장치.
KR1020080037569A 2008-04-23 2008-04-23 터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를이용한 이미지와 동영상 합성 장치 KR101439550B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080037569A KR101439550B1 (ko) 2008-04-23 2008-04-23 터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를이용한 이미지와 동영상 합성 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080037569A KR101439550B1 (ko) 2008-04-23 2008-04-23 터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를이용한 이미지와 동영상 합성 장치

Publications (2)

Publication Number Publication Date
KR20090111945A KR20090111945A (ko) 2009-10-28
KR101439550B1 true KR101439550B1 (ko) 2014-09-11

Family

ID=41553187

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080037569A KR101439550B1 (ko) 2008-04-23 2008-04-23 터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를이용한 이미지와 동영상 합성 장치

Country Status (1)

Country Link
KR (1) KR101439550B1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014085823A1 (en) * 2012-12-02 2014-06-05 Bachir Babale Virtual decals for precision alignment and stabilization of motion graphics on mobile video
KR20150083475A (ko) * 2014-01-09 2015-07-20 이용수 터치입력을 이용한 미디어 편집 방법 및 장치
WO2017200232A1 (en) * 2016-05-20 2017-11-23 Lg Electronics Inc. Mobile terminal and control method thereof
KR20170131101A (ko) 2016-05-20 2017-11-29 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101743874B1 (ko) * 2016-06-17 2017-06-20 (주)잼투고 복수의 공연객체들의 협업을 이용한 동영상 컨텐츠 생성 시스템 및 방법
KR102193469B1 (ko) * 2019-06-20 2020-12-21 엔에이치엔 주식회사 이미지 변환을 수행하는 컴퓨터 장치 및 방법
KR102661488B1 (ko) * 2024-01-19 2024-04-26 주식회사 더매트릭스 생성형 ai 모델을 이용한 특수효과 합성 및 3d 모델 생성 서비스 제공 서버, 시스템, 방법 및 프로그램

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040072109A (ko) * 2003-02-08 2004-08-18 삼성전자주식회사 카메라 및 터치 스크린을 구비한 휴대용 단말기에서데이터 합성방법
KR20050013769A (ko) * 2003-07-29 2005-02-05 삼성전자주식회사 휴대 단말기에서 영상화면의 표시방법
KR20050047800A (ko) * 2003-11-18 2005-05-23 김영면 동영상 제작 장치 및 시스템
KR20060058182A (ko) * 2004-11-24 2006-05-29 박성진 영상합성모듈

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040072109A (ko) * 2003-02-08 2004-08-18 삼성전자주식회사 카메라 및 터치 스크린을 구비한 휴대용 단말기에서데이터 합성방법
KR20050013769A (ko) * 2003-07-29 2005-02-05 삼성전자주식회사 휴대 단말기에서 영상화면의 표시방법
KR20050047800A (ko) * 2003-11-18 2005-05-23 김영면 동영상 제작 장치 및 시스템
KR20060058182A (ko) * 2004-11-24 2006-05-29 박성진 영상합성모듈

Also Published As

Publication number Publication date
KR20090111945A (ko) 2009-10-28

Similar Documents

Publication Publication Date Title
US12094047B2 (en) Animated emoticon generation method, computer-readable storage medium, and computer device
US20250044916A1 (en) Content Presentation and Interaction Across Multiple Displays
KR101439550B1 (ko) 터치스크린을 이용한 이미지와 동영상의 합성 방법 및 이를이용한 이미지와 동영상 합성 장치
KR102013331B1 (ko) 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법
TWI459282B (zh) 用以使用多媒體項目之使用者介面的提供方法、系統及電腦程式產品
KR101044320B1 (ko) 가상 키입력수단의 배경화면 컨텐츠 제공 방법 및 시스템
US10891032B2 (en) Image reproduction apparatus and method for simultaneously displaying multiple moving-image thumbnails
KR20100028344A (ko) 휴대단말의 영상 편집 방법 및 장치
TWI411304B (zh) 播放與編輯多媒體資料之電子裝置
JPWO2007069471A1 (ja) 画像表示装置
KR101945830B1 (ko) 다중 동영상 재생 방법 및 장치
KR20190070955A (ko) 픽처 프로세싱 방법 및 장치, 전자 장치, 및 그래픽 사용자 인터페이스
US8456491B2 (en) System to highlight differences in thumbnail images, mobile phone including system, and method
JP2004199299A (ja) 手書き情報記録方法、投影記録装置
CN107431752B (zh) 一种处理方法及便携式电子设备
US20090167961A1 (en) Image processing device
US20070101270A1 (en) Method and system for generating a presentation file for an embedded system
JP4793377B2 (ja) 投影記録装置並びにスクリーン上情報記録方法及びプログラム
JPWO2006103830A1 (ja) 表示処理装置及び表示処理方法
CN111984173B (zh) 表情包生成方法和装置
US8477101B2 (en) Reading device for electronic document and operation method of reading electronic document
KR100665037B1 (ko) 디지털 카메라를 구비하는 이동 단말기에서 미리보기모드를 설정하는 방법 및 장치
JP2013115691A (ja) 撮像装置及び撮像装置に用いる制御プログラム
JP5419783B2 (ja) 画像再生装置及び画像再生装置の制御方法
JP2014002625A (ja) 表示制御装置、タッチパネル制御方法、制御プログラム及び記録媒体

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20080423

PG1501 Laying open of application
N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20130109

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20130408

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20080423

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20140317

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20140825

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20140902

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20140902

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20180903

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20180903

Start annual number: 5

End annual number: 5

FPAY Annual fee payment

Payment date: 20190807

Year of fee payment: 6

PR1001 Payment of annual fee

Payment date: 20190807

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20200901

Start annual number: 7

End annual number: 7

PR1001 Payment of annual fee

Payment date: 20210831

Start annual number: 8

End annual number: 8

PR1001 Payment of annual fee

Payment date: 20220824

Start annual number: 9

End annual number: 9

PR1001 Payment of annual fee

Payment date: 20230830

Start annual number: 10

End annual number: 10