KR20090065354A - 2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 장치 - Google Patents

2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 장치 Download PDF

Info

Publication number
KR20090065354A
KR20090065354A KR1020070132855A KR20070132855A KR20090065354A KR 20090065354 A KR20090065354 A KR 20090065354A KR 1020070132855 A KR1020070132855 A KR 1020070132855A KR 20070132855 A KR20070132855 A KR 20070132855A KR 20090065354 A KR20090065354 A KR 20090065354A
Authority
KR
South Korea
Prior art keywords
image
user
mask
conversion
image conversion
Prior art date
Application number
KR1020070132855A
Other languages
English (en)
Other versions
KR100971498B1 (ko
Inventor
최윤석
구본기
이지형
김보연
김희정
박일규
이승욱
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020070132855A priority Critical patent/KR100971498B1/ko
Priority to US12/314,858 priority patent/US20090154762A1/en
Publication of KR20090065354A publication Critical patent/KR20090065354A/ko
Application granted granted Critical
Publication of KR100971498B1 publication Critical patent/KR100971498B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 이미지 변환 방법에 관한 것이다. 즉, 본 발명에서는 2차원 이미지를 다양한 예술적 이미지로 변환시키는 방법에 있어서, 디지털 카메라 등으로 촬영된 2차원 이미지에 대해 컴퓨터를 이용한 이미지 변환 처리를 통해 다양한 예술적 기법으로 이미지 변환이 가능하도록 하여 유화, 펜 일러스트, 카툰, 이중 그림, 템플릿 모자이크 등과 같이 보다 사람이 그린 듯한 자연스러운 이미지를 제공할 수 있다. 또한, 2차원 이미지에 대한 다양한 예술적 기법으로 변환 과정에 있어서 예술적 이미지 생성되는 과정을 화면에 출력하여 사람이 작업하는 것과 같이 과정을 재현함으로써, 사용자가 예술적 이미지 생성과정을 볼 수 있어 예술적 이미지에 대한 감흥을 보다 느낄 수 있도록 한다.
비사실적 렌더링, 템플릿, 모자이크, 유화, 이미지, 변환

Description

2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 시스템{METHOD AND SYSTEM FOR 2D IMAGE TRANSFORMATION WITH VARIOUS ARTISTIC EFFECT}
본 발명은 이미지 변환 방법에 관한 것으로, 특히 디지털 카메라(digital camera) 등으로 촬영된 2차원(2 dimension) 이미지(image)에 대해 컴퓨터(computer)를 이용한 이미지 변환 처리를 통해 다양한 예술적 기법으로 이미지를 변환시켜 자신만의 독특한 콘텐츠(contents)로 생성할 수 있도록 하는 이미지 변환 방법 및 시스템에 관한 것이다.
본 발명은 정보통신부 및 정보통신연구진흥원의 IT성장동력기술개발지원사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2005-S-082-03, 과제명 : 비사실적 애니메이션 기술 개발].
최근 들어, 컴퓨터 그래픽(computer graphic)과 이를 이용한 멀티미디어 기기(multimedia device)의 발달은 사람들이 손쉽게 자신이 원하는 다양한 이미지를 생성할 수 있는 저작 도구를 활용할 수 있는 환경을 제공하고 있다.
위와 같은 다양한 이미지 저작 도구로 디지털 카메라를 예를 들 수 있는데, 현재 대부분의 사람들이 디지털 카메라를 보유하고 있으며, 디지털 카메라를 이용하여 자신이 찍은 사진을 컴퓨터 기록매체에 저장하거나 전자 앨범을 꾸미기도, 이를 인화하여 보관하기도 하는 등 다양하게 활용하고 있다.
그러나, 상기한 바와 같이 디지털 카메라 등과 같은 이미지 저작도구를 이용하여 자신이 직접 촬영한 사진을 인화하여 앨범이나 액자에 넣어두거나 컴퓨터에 저장하여 전자앨범을 만드는 작업에 있어서는, 디지털 카메라로 찍은 사진의 형태를 그대로 이용하는 것으로, 과거 경험의 기록 이상의 감흥을 주지는 못하고 있다.
따라서, 단순히 촬영된 2차원 이미지에 대해 마치 사람이 손으로 그린 듯한 다양한 효과를 낼 수 있도록 하는 다양한 이미지 처리 방법들에 대한 욕구가 있어왔다.
한편, 종래 위와 같이 2차원 이미지에 대해 다양한 효과를 내고자 하는 방법으로 비사실적 렌더링(non-photorealistic rendering)이 사용되고 있는데, 포토샵(photo shop)이나 페인트 샵 프로(paint shop pro)와 같은 프로그램에서도 이와 비슷한 효과를 제공하고 있다.
그러나, 종래의 방법들은 픽셀(pixel) 기반의 이미지 처리에 의존하기 때문에 결과 효과적인 측면에서 유화, 펜 일러스트, 카툰, 템플릿(template) 모자이크 등의 효과에 있어서는 사람이 직접 손으로 그린 듯한 자연스러운 이미지 변환을 제공하기에는 한계가 있었다.
따라서 본 발명은 스트로크 기반의 유화 기법에서 인물화에서 인물들의 묘사를 높이기 위한 효과적인 유화 렌더링 방법을 제공하고 임의의 자유로운 형태의 이미지를 사용하여 모자이크를 구성하는 템플릿 모자이크 방법을 제공하여 유화, 펜 일러스트, 카툰, 이중그림, 템플릿 모자이크 등과 같이 보다 사람이 그린 듯한 자연스러운 이미지를 제공함으로써 자신만의 독특한 콘텐츠로 생성할 수 있도록 하는 이미지 변환 방법 및 시스템을 제공하고자 한다.
또한 이러한 렌더링 기법들을 포함한 다양한 비사실적 렌더링 기법들을 활용하여 결과 이미지 뿐만 아니라, 영상 생성의 과정을 동영상으로 제작하여 사용자에게 제공하여 영상이 생성되는 과정을 감상할 수 있도록 하는 2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 시스템을 제공하고자 한다.
상술한 목적을 달성하기 위한 본 발명은 사용자의 입력 이미지에 대해 다수의 비사실적 변환 효과를 적용한 이미지 변환 서비스를 제공하는 방법에 있어서, (a)사용자로부터 유/무선 네트워크를 통해 이미지 변환을 요청 받는 단계와, (b)사용자의 환경에 따라 클라이언트 또는 서버에서 이미지 변환을 실행하는 단계와, (c)비사실적 이미지 변환 효과를 적용한 결과 이미지를 생성하는 단계를 포함한다.
또한, 본 발명은 사용자의 입력 이미지에 대해 다수의 비사실적 변환 효과를 적용한 이미지 변환 서비스를 제공하는 시스템으로서, 사용자에 의해 변환 요청되는 2차원 이미지에 대해 비사실적 렌더링을 통해 요구된 형태의 이미지로 변환시키는 렌더링 서버와, 상기 이미지 변환 요청 수신 시 상기 사용자의 단말 사양에 따라 상기 이미지 변환 요청을 상기 렌더링 서버로 전달한 후, 결과이미지를 해당 사용자 단말로 전달하거나, 상기 사용자 단말로 이미지 변환 프로그램을 전달하여 해당 사용자 단말에서 이미지 변환이 수행되도록 제어하는 웹서버와, 상기 웹서버로 2차원 이미지에 대한 비사실적 렌더링 처리를 요청하는 사용자 단말을 포함한다.
본 발명에서는 2차원 이미지 변환 방법에 있어서, 디지털 카메라 등으로 촬영된 2차원 이미지에 대해 컴퓨터를 이용한 이미지 변환 처리를 통해 다양한 예술적 기법으로 이미지 변환이 가능하도록 하여 유화, 펜 일러스트, 카툰, 이중 그림, 모자이크, 템플릿 모자이크 등과 같이 보다 사람이 그린 듯한 자연스러운 이미지를 제공할 수 있는 이점이 있다. 또한, 2차원 이미지에 대한 다양한 예술적 기법으로 변환 과정에 있어서 예술적 이미지 생성되는 과정을 화면에 출력하여 사람이 작업하는 것과 같이 과정을 재현함으로써, 사용자가 예술적 이미지 생성과정을 볼 수 있어 예술적 이미지에 대한 감흥을 보다 느낄 수 있는 이점이 있다.
이하, 첨부된 도면을 참조하여 본 발명의 동작 원리를 상세히 설명한다. 하 기에서 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 발명의 구체적인 핵심 기술요지를 살펴보면, 디지털 카메라 등으로 촬영된 2차원 이미지에 대해 컴퓨터를 이용한 이미지 변환 처리를 통해 다양한 예술적 기법으로 이미지를 변환시켜 자신만의 독특한 콘텐츠로 생성할 수 있도록 하는 기술을 통해 본 발명에서 이루고자 하는 바를 쉽게 달성할 수 있다.
본 발명은 사진 입력으로 받아 카툰, 템플릿 모자이크, 펜 스타일화, 회화, 이중 그림 등의 비사실적 렌더링 기법을 이용하여 예술가가 작성한 것과 같은 예술적 효과를 갖는 이미지로 변환하는 렌더링 방법과 이 렌더링 방법을 이용하여 서비스 제공을 위한 시스템이다.
전체적인 서비스 시스템의 개요는 사용자가 예술적 변환 효과를 적용하고자 하는 대상 이미지를 유무선 네트워크 환경을 사용하여 계산 서버와의 작업을 통하여 최종 변환 이미지를 얻는 방식이다. 이때 사용자가 네트워크에서 사용하는 단말기의 성능에 따라서 변환 작업 방식이 달라진다. 사용자가 계산 성능이 낮은 PDA나 휴대폰 등을 단말기로 사용하는 경우에는 예술적 변환 작업 수행하기 위해 이미지 를 서버로 전달하고 계산 서버에서 이미지 변환을 수행하고 그 결과를 전달받게 된다. 이때 이미지 생성 과정이 담긴 동영상은 그 용량이 크기 때문에 직접 단말기를 통한 전송보다는 사용자의 이메일 주소를 입력받아 해당 메일로 전송하는 방식을 취한다. 이는 단순히 전송 속도 보다는 유료의 무선 네트워크 이용에 따른 비용 증가를 고려하였다.
이하, 첨부된 도면을 참조하여 시스템의 작동 요령과 각 기술들의 작동 방법을 상세히 설명한다.
도 1은 본 발명의 실시 예에 따른 예술적 이미지 제공을 위한 이미지 변환 서비스 시스템 구성도로, 예술적 이미지 제공을 위한 이미지 변환 서비스 시스템은, 렌더링 서버, 웹 서버, 유무선 네트워크, 사용자 단말을 포함한다.
동작을 살펴보면, 렌더링 서버(101)는 이미지 렌더링을 처리하는 계산 서버이며, 웹 서버(web server)(102)는 사용자간 웹 기반 서비스 서버이다. 유무선 네트워크(wired/wireless network)(103)은 사용자로부터의 이미지 변환 요구와, 예술적 이미지 변환된 결과물을 렌더링 서버(101)와 사용자 단말(104, 105)간 전달하는 유무선 네트워크를 의미한다. 사용자 단말1(104, 105)은 데스크탑(desk top), 노트북(notebook) 등의 성능이 높은 중앙처리장치를 포함한 단말기를 나타내며, 사용자 단말2(105)는 사용자의 휴대성이 높은 PDA(personal digital assistant), 휴대폰 등의 비교적 계산 성능이 낮은 기기를 나타낸다.
성능이 높은 사용자 단말(104)에서 웹 서버(102)에 이미지 변환을 요청하면 웹 서버(102)는 이미지 변환 프로그램을 사용자 단말기(104)로 전달하여 자체에서 이미지를 생성하도록 한다. 이와 달리 저성능 사용자 단말(105)에서 네트워크(103)를 통해서 사진을 전달하면 웹 서버(102)는 렌더링 서버(101)에게 이미지 변환을 요청하고 렌더링 서버(101)는 그 결과 이미지와 과정 동영상을 생성하여 웹서버(102)에 전달한다. 사용자가 동영상 요청하였을 경우에는 웹 서버(102)에서 사용자에게 전자 메일(e-mail)로 전달한다.
도 2는 본 발명의 실시 예에 따라 예술적 이미지 제공을 위한 이미지 변환 서비스 시스템에서 성능이 높은 사용자 단말 기반의 예술적 변환 효과를 적용한 이미지의 생성 절차를 도시한 것이다.
이하, 도 2를 참조하면, 중앙처리 장치의 성능이 높은 데스크탑 PC나 노트북의 경우는 렌더링 서버(101)의 부하를 줄이기 위해 사용자의 단말(104)에서 직접 이미지를 생성하도록 한다.
즉, 사용자가 이미지 변환 서비스를 웹 서버(102)에 요청(S201)하면 웹 서버(102)는 변환 프로그램을 해당 사용자 단말(104)에 전송(S202)한다. 그러면 사용자 단말(104)은 웹 서버(102)로부터 전송 받은 변환 프로그램을 실행(S203)한 후, 예술적 이미지 변환이 필요한 대상 이미지를 프로그램에 읽어와 변환 작업을 수행(S204)한다. 위와 같은 변환 작업 중에는 이미지 변환 과정이 화면에 출력(S205)되고, 최종 결과 이미지는 사용자 단말의 저장매체 저장(S206)된다.
도 3은 본 발명의 실시 예에 따라 예술적 이미지 제공을 위한 이미지 변환 서비스 시스템에서 성능이 낮은 사용자 단말 기반의 예술적 변환 효과를 적용한 이미지 생성 절차를 도시한 것이다.
이하, 도 3을 참조하면, 중앙처리 장치의 성능이 낮은 PDA나 휴대폰 경우는 렌더링 서버(101)에서 변환 작업을 수행하고 결과 이미지와 동영상을 사용자에게 전송한다.
즉, 성능이 낮은 사용자 단말(105)을 가진 사용자가 사용자 단말(105)에서 예술적 이미지 변환을 요청할 대상 이미지를 웹 서버(102)에 전달(S301)하면, 웹 서버(102)는 이미지를 렌더링 서버(101)에 전달(S302)하고, 렌더링 서버(101)는 결과 영상을 변환하는 변환 프로그램을 수행하여 과정 동영상과 결과 이미지를 생성(S303)한다. 위와 같이 렌더링 서버(101)에서의 변환 작업이 종료되면 웹 서버(102)는 결과 이미지를 사용자 단말(105)에 전송(S304)하고, 사용자의 요청이 있는 경우 과정 동영상을 사용자의 메일로 전송(S305)한다.
도 4는 본 발명의 실시 예에 따라 예술적 이미지 제공을 위한 이미지 변환 서비스 시스템에서 예술적 효과 중 유화 기법으로 사진에서 인물의 묘사도를 높이기 위해 배경 기반 선택적 스트로크를 추가하는 논리적 절차를 도시한 것이다.
유화 기법은 이미지가 입력되면 미리 정해진 스트로크 회수만큼 반복하면서 이미지에 스트로크를 더한다. 이때 원본 이미지와의 비교를 스트로크의 위치, 크기, 색상은 이미지 분석에 의해 결정하게 되는데, 원본과의 차이가 큰 부분에 많은 스트로크를 할당하게 된다. 일반적인 이미지의 처리의 경우에는 그리 문제가 있지 않지만, 사람을 포함하는 인물화의 경우에는 문제가 있다. 배경 묘사에 많은 스트로크가 할당되기 때문에 인물의 얼굴을 묘사하기 위한 이미지가 상대적으로 줄어들어 얼굴에 대한 묘사도가 떨어지게 된다.
본 발명의 시스템에서는 이러한 문제를 해결하기 위해 얼굴 인식 기법을 추가하였다. 동작을 살펴보면, 렌더링 서버(101)는 이미지가 입력(S401)되면 먼저 이미지에서 얼굴 인식 작업(S402)를 수행하여 감지된 얼굴 영역을 저장한다. 그런 후, 일반적인 유화 변환 작업을 수행(S403)한 다음에, 추가로 얼굴 인식 영역에 스트로크를 추가(S404)하여 최종 영상을 생성(S405)한다. 물론 얼굴이 없거나 적은 경우에는 얼굴이 감지되지 않기 때문에 추가적인 계산이 필요하지 않다.
도 5는 본 발명의 실시 예에 따라 예술적 렌더링 기법을 재현하면서 결과물의 생성 과정을 동영상으로 제작하는 서비스에서 결과 동영상을 캡처한 제작 단계의 결과물 영상을 예시한 것으로, 특히 정물에 대한 유화 효과 생성 과정과 풍경 사진에 대한 템플릿 모자이크 효과를 적용하였을 때 이미지를 생성하는 과정을 보여주고 있다. 위 도 5에서 보여지는 바와 같이, 본 발명에서는 영상이 생성되는 과정을 사용자에게 보여줌으로써 예술적 효과의 감흥을 더해주는 효과를 더할 수 있다.
도 6은 본 발명의 실시 예에 따라 템플릿 기반으로 이미지 모자이크를 생성에서 타일 이미지가 최종적으로 이미지의 한 부분에 그려지도록 하는 과정을 도시한 것이다.
위 도 6에서 보여지는 바와 같이, 렌더링 서버(101)는 먼저 타일 이미지(S601)를 읽어들여 이를 원본 이미지의 바탕 그림과 비교하여 최적의 방향으로 회전(S602)한다. 이어, 회전한 타일 이미지에 템플릿 마스크를 추출(S603)한 다음에, 이를 최종적으로 그릴 것인지를 에지 마스크(edge mask), 에너지 마스 크(energy mask), 쓰기 마스크(writing mask)와 비교하여 여부를 결정(S604)한다. 해당 위치에 타일을 놓기를 결정하였다면 해당 바탕 이미지에서 색상을 읽어와서 색상을 입히고 그림자 효과를 적용(S605)한다. 이러한 작업을 계속적으로 반복하여 최종 이미지(S606)를 생성한다.
도 7은 본 발명의 실시 예에 따른 템플릿 기반 이미지 모자이크 기법에 사용하는 3가지 마스크를 도시한 것이다.
이하, 도 7을 참조하면, 참조번호 (701)은 입력 이미지이며, (702)는 에지 마스크로 모자이크 이미지에서 사물들의 윤곽선을 유지하기 위한 방법으로 입력 에지 추출 알고리즘을 적용하여 생성한다. 타일을 위치를 결정하는 작업에서 에지가 존재하는 경우 에지를 유지 위해 타일의 크기를 조절한다. (703)은 에너지 마스크로 이미지에서 여백의 미 효과를 넣기 위한 것으로 명도가 어느 정도 이상이면 빈 공간으로 비워둔다. (704)는 쓰기 마스크로 타일이 중첩되는 것을 조절한다.
도 8은 템플릿 기반 이미지 모자이크 생성은 채우기 단계와 세부 묘사 강화의 2단계로 구성되며 단계별 결과를 보여주고 있다. 1단계는 이미지를 채우는 단계로서 대상 이미지를 색상과 밝기를 기준으로 공간을 분할한 후 타일 이미지를 분할 된 공간에 채우는 단계이다. 이 단계에서는 3개의 마스크를 이용하여 단층을 유지하도록 타일이 겹치지 않도록 하며 윤곽선을 보호하도록 한다. 2단계를 세부 묘사 강화 단계로 영역의 밝기 정보를 기반으로 타일의 겹침 정도를 조절한다. 1단계에서는 겹침을 허용하지 않았지만, 2단계에서는 밝기 정보에 따라 타일의 겹침 정도를 조정한다.
도 8은 본 발명의 실시 예에 따른 템플릿 기반 이미지 모자이크 생성에서, 입력 이미지(801)와 1단계 채우기 작업을 마친 이미지(802)와 최종 단계를 마친 이미지(803)를 도시한 것이고, 도 9는 본 발명에서 제안한 템플릿 모자이크를 통해 생성된 다양한 결과 이미지를 예시한 것이다.
도 10 내지 도 13에는 본 발명의 실시 예에 따라 예술적 이미지 제공을 위한 이미지 변환 서비스 시스템에서 제공하는 예술적 기법을 이용한 다양한 결과 이미지 예시도이다.
위 도 10 내지 도 13에서 보여지는 바와 같이, 본 발명에서는 디지털 카메라 등으로 촬영된 2차원 이미지에 대해 컴퓨터를 이용한 이미지 변환 처리를 통해 다양한 예술적 기법으로 이미지 변환이 가능하도록 하여 유화, 펜 일러스트, 카툰, 이중 그림, 템플릿 모자이크 등과 같이 보다 사람이 그린 듯한 자연스러운 이미지를 제공할 수 있다. 또한, 2차원 이미지에 대한 다양한 예술적 기법으로 변환 과정에 있어서 예술적 이미지 생성되는 과정을 화면에 출력하여 사람이 작업하는 것과 같이 과정을 재현함으로써, 사용자가 예술적 이미지 생성과정을 볼 수 있어 예술적 이미지에 대한 감흥을 보다 느낄 수 있도록 한다.
한편 상술한 본 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시될 수 있다. 따라서 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위에 의해 정하여져야 한다.
도 1은 본 발명의 실시 예에 따른 전체 서비스 시스템 구성을 나타내는 예시도,
도 2는 본 발명의 시스템에서 성능이 높은 단말기 기반의 예술적 변환 효과를 적용한 이미지의 생성 절차 흐름도,
도 3은 본 발명의 시스템에서 성능이 낮은 단말기 기반의 예술적 변환 효과를 서비스를 사용하는 절차 흐름도,
도 4는 본 발명의 실시 예에 따라 유화 기법으로 사진에서 인물의 묘사를 높이는 이미지 변환 처리 흐름도,
도 5는 본 발명의 실시 예에 따른 예술적 렌더링 기법으로 생성되는 결과물의 제작 과정 예시도,
도 6은 본 발명의 실시 예에 따라 템플릿 기반으로 이미지 모자이크를 생성하는 흐름도,
도 7은 본 발명의 실시 예에 따라 템플릿 모자이크에서 각 타일간의 중첩도를 조절하기 위한 마스크 작동 원리 예시도,
도 8은 본 발명의 실시 예에 따라 템플릿 기반 이미지 모자이크 생성을 위한 단계별 이미지 예시도,
도 9는 본 발명의 실시 예에 따라 템플릿 모자이크를 통해 나온 다양한 결과 이미지의 예시도,
도 10 내지 도 13은 본 발명의 실시 예에 따른 예술적 기법에 의한 결과 이 미지의 예시도.
<도면의 주요 부호에 대한 간략한 설명>
101 : 렌더링 서버 102 : 웹서버
103 : 유/무선 네트워크 104 : 데스크탑 PC
105 : 휴대폰, PDA

Claims (12)

  1. 사용자의 입력 이미지에 대해 다수의 비사실적 변환 효과를 적용한 이미지 변환 서비스를 제공하는 방법에 있어서,
    (a)사용자로부터 유/무선 네트워크를 통해 이미지 변환을 요청 받는 단계와,
    (b)사용자의 환경에 따라 클라이언트 또는 서버에서 이미지 변환을 실행하는 단계와,
    (c)비사실적 이미지 변환 효과를 적용한 결과 이미지를 생성하는 단계
    를 포함하는 이미지 변환방법.
  2. 제 1 항에 있어서,
    상기 (c)단계이후, (d)상기 비사실적 이미지 변환 효과의 적용 과정을 담는 동영상을 생성하는 단계를 더 포함하는 것을 특징으로 하는 이미지 변환방법.
  3. 제 1 항에 있어서,
    상기 (c)단계에서, 비사실적 이미지 변환 효과 적용에서 인물을 포함하는 이미지 처리하는 과정에서 얼굴 감지 기법을 적용하여 인물의 얼굴 부분에 추가적인 스트로크를 할당하여 인물의 묘사도를 높이는 것을 특징으로 하는 이미지 변환방 법.
  4. 제 2 항에 있어서,
    상기 (d)단계에서, 템플릿 모자이크, 유화 효과를 적용하여 상기 결과 이미지를 생성하는 과정을 동영상으로 저장하는 것을 특징으로 하는 이미지 변환방법.
  5. 제 2 항에 있어서,
    상기 (d)단계이후, (e)상기 결과 이미지를 생성하는 과정을 담은 동영상을 전자 메일을 통해 해당 사용자에게 전달하는 단계를 더 포함하는 것을 특징으로 하는 이미지 변환방법.
  6. 제 1 항에 있어서,
    상기 (c)단계에서, 상기 변환 요청된 이미지에 대해 임의의 자유로운 형태의 타일 이미지를 사용하여 타일의 템플릿을 활용한 템플릿 모자이크 이미지를 생성하는 것을 특징으로 하는 이미지 변환방법.
  7. 제 6 항에 있어서,
    상기 타일 이미지에서 템플릿을 추출하여 템플릿 마스크를 생성하는 것을 특징으로 하는 이미지 변환방법.
  8. 제 6 항에 있어서,
    상기 변환 요청된 원본 이미지에서 에너지 마스크, 에지 마스크 및 쓰기 마스크를 생성하는 것을 특징으로 하는 이미지 변환방법.
  9. 제 8 항에 있어서,
    상기 템플릿 모자이크 이미지 생성시, 각 타일간 중첩도 조절을 위해, 상기 에너지, 에지 및 쓰기 마스크를 기반으로 각 타일의 위치를 결정하는 것을 특징으로 하는 이미지 변환방법.
  10. 제 9 항에 있어서,
    상기 템플릿 모자이크 이미지 생성은,
    (a')이미지 분석을 통한 화면 분할 기반으로 Flood Filling 방법으로 분할 공간을 채우는 단계와,
    (b')상기 에너지 마스크와 에지 마스크에서 기반으로 분할 공간의 가장자리에서 타일의 크기를 선택적으로 줄여나가는 단계와,
    (c')결과 이미지의 세부 묘사를 강조하기 위해 결과 이미지와 원본 이미지와의 비교를 통하여 타일의 겹칠 위치를 결정하는 단계와,
    (d')상기 에너지 마스크와 쓰기 마스크를 결합한 마스크를 기반으로 타일을 겹침을 허용할 것인지를 결정하는 단계
    를 포함하는 것을 특징으로 하는 이미지 변환방법.
  11. 제 10 항에 있어서,
    상기 에너지, 에지 및 쓰기 마스크간 선택적 조합에 있어서는, 상기 (a')단계에서는 에너지, 에지 및 쓰기 마스크를 사용하고, 상기 (c')단계에서는 에지 마스크를 제외한 에너지와 쓰기 마스크의 조합만을 사용하는 것을 특징으로 하는 이미지 변환방법.
  12. 사용자의 입력 이미지에 대해 다수의 비사실적 변환 효과를 적용한 이미지 변환 서비스를 제공하는 시스템으로서,
    사용자에 의해 변환 요청되는 2차원 이미지에 대해 비사실적 렌더링을 통해 요구된 형태의 이미지로 변환시키는 렌더링 서버와,
    상기 이미지 변환 요청 수신 시 상기 사용자의 단말 사양에 따라 상기 이미지 변환 요청을 상기 렌더링 서버로 전달한 후, 결과이미지를 해당 사용자 단말로 전달하거나, 상기 사용자 단말로 이미지 변환 프로그램을 전달하여 해당 사용자 단말에서 이미지 변환이 수행되도록 제어하는 웹서버와,
    상기 웹서버로 2차원 이미지에 대한 비사실적 렌더링 처리를 요청하는 사용자 단말
    을 포함하는 이미지 변환 시스템.
KR1020070132855A 2007-12-17 2007-12-17 2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 장치 KR100971498B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020070132855A KR100971498B1 (ko) 2007-12-17 2007-12-17 2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 장치
US12/314,858 US20090154762A1 (en) 2007-12-17 2008-12-17 Method and system for 2D image transformation with various artistic effects

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070132855A KR100971498B1 (ko) 2007-12-17 2007-12-17 2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20090065354A true KR20090065354A (ko) 2009-06-22
KR100971498B1 KR100971498B1 (ko) 2010-07-21

Family

ID=40753335

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070132855A KR100971498B1 (ko) 2007-12-17 2007-12-17 2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 장치

Country Status (2)

Country Link
US (1) US20090154762A1 (ko)
KR (1) KR100971498B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012144715A1 (ko) * 2011-04-19 2012-10-26 Park Deok-Eun 화가의 페인팅 절차에 기반한 회화적 렌더링 방법
KR101388965B1 (ko) * 2012-02-10 2014-04-25 박수조 디지털 사진의 드로잉 변환 방법
KR20160055465A (ko) * 2014-11-10 2016-05-18 (주) 디스플레이이엔지 전자 초상화 어플리케이션을 이용한 휴대폰의 즉석 유화 제작 장치 및 방법
KR101951433B1 (ko) * 2018-10-15 2019-05-21 조정우 사진 드로잉 장치
KR20240079729A (ko) 2022-11-29 2024-06-05 연세대학교 산학협력단 입력 영상의 스타일 변환 장치 및 방법

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8294767B2 (en) * 2009-01-30 2012-10-23 Microsoft Corporation Body scan
SG184496A1 (en) * 2010-05-04 2012-11-29 Universal City Studios Llc A method and device for transforming an image
CN102737369A (zh) * 2011-03-31 2012-10-17 卡西欧计算机株式会社 图像处理装置及图像处理方法
JP5787644B2 (ja) * 2011-07-01 2015-09-30 キヤノン株式会社 画像処理装置および画像処理装置の制御方法
JP5569504B2 (ja) * 2011-10-31 2014-08-13 カシオ計算機株式会社 画像処理装置、画像処理方法、及びプログラム
CN103177430A (zh) * 2011-12-20 2013-06-26 深圳万兴信息科技股份有限公司 图片处理方法、装置及视频处理方法
JP5641015B2 (ja) 2012-05-24 2014-12-17 カシオ計算機株式会社 絵画変換snsシステム及び方法、絵画変換sns装置並びにリスト端末
US9786088B2 (en) 2014-06-03 2017-10-10 Universal City Studios Llc Animated poster
KR101651558B1 (ko) * 2014-11-12 2016-09-05 (주) 디스플레이이엔지 전자 초상화 키오스크 장치 및 즉석유화 제작방법
US10163254B2 (en) * 2016-06-24 2018-12-25 Adobe Systems Incorporated Rendering of digital images on a substrate
KR102546599B1 (ko) * 2018-10-12 2023-06-23 삼성전자주식회사 디스플레이장치, 서버 및 그 제어방법
US11146763B1 (en) * 2018-10-31 2021-10-12 Snap Inc. Artistic and other photo filter light field effects for images and videos utilizing image disparity
KR102172644B1 (ko) * 2020-01-13 2020-11-02 (주)에스프레소미디어 스타일 변환 외부 연동 시스템, 그리고 스타일 변환 외부 연동 서버

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0105561D0 (en) * 2001-03-07 2001-04-25 Segmentis Ltd Improvements in and relating to image signal processing and printing of picture therefrom
US7330872B2 (en) * 2001-10-02 2008-02-12 Citrix Systems, Inc. Method for distributed program execution with web-based file-type association
US7154510B2 (en) * 2002-11-14 2006-12-26 Eastman Kodak Company System and method for modifying a portrait image in response to a stimulus
US7639250B2 (en) * 2005-11-01 2009-12-29 Microsoft Corporation Sketching reality
KR100809523B1 (ko) * 2005-12-08 2008-03-07 한국전자통신연구원 3차원 비사실적 렌더링을 위한 확장성이 있는 스타일 기반의 통합 프레임워크 및 이러한 프레임워크의 구성 시스템 및 방법
KR100692101B1 (ko) * 2006-06-30 2007-03-12 주식회사 인프라웨어 원격지의 파일을 전송하는 파일 서비스 시스템 및 그서비스 방법
US20080284791A1 (en) * 2007-05-17 2008-11-20 Marco Bressan Forming coloring books from digital images
US7995060B2 (en) * 2007-08-01 2011-08-09 Disney Enterprises, Inc. Multiple artistic look rendering methods and apparatus
US8064724B2 (en) * 2007-10-25 2011-11-22 Hewlett-Packard Development Company, L.P. Apparatus, and associated method, for displaying data using data painting of an asymmetrical facial image

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012144715A1 (ko) * 2011-04-19 2012-10-26 Park Deok-Eun 화가의 페인팅 절차에 기반한 회화적 렌더링 방법
KR101279021B1 (ko) * 2011-04-19 2013-07-02 박덕은 화가의 페인팅 절차에 기반한 회화적 렌더링 방법
KR101388965B1 (ko) * 2012-02-10 2014-04-25 박수조 디지털 사진의 드로잉 변환 방법
KR20160055465A (ko) * 2014-11-10 2016-05-18 (주) 디스플레이이엔지 전자 초상화 어플리케이션을 이용한 휴대폰의 즉석 유화 제작 장치 및 방법
WO2016076565A1 (ko) * 2014-11-10 2016-05-19 (주) 디스플레이이엔지 전자 초상화 어플리케이션을 이용한 휴대폰의 즉석 유화 제작 장치 및 방법
KR101951433B1 (ko) * 2018-10-15 2019-05-21 조정우 사진 드로잉 장치
KR20240079729A (ko) 2022-11-29 2024-06-05 연세대학교 산학협력단 입력 영상의 스타일 변환 장치 및 방법

Also Published As

Publication number Publication date
KR100971498B1 (ko) 2010-07-21
US20090154762A1 (en) 2009-06-18

Similar Documents

Publication Publication Date Title
KR100971498B1 (ko) 2차원 이미지의 예술적 효과 적용을 위한 이미지 변환 방법 및 장치
US9990760B2 (en) Generating a 3D interactive immersive experience from a 2D static image
US20210303835A1 (en) Transformation of hand-drawn sketches to digital images
US8917286B2 (en) Image processing device, information processing device, image processing method, and information processing method
JP5307761B2 (ja) 電子画像のリアルタイムパーソナライゼーション方法及びシステム
KR102461919B1 (ko) 동적 깊이 이미지를 캡처 및 편집하는 기술
EP2560145A2 (en) Methods and systems for enabling the creation of augmented reality content
KR101212965B1 (ko) 원격 기반에서 사인회 및 헌정회를 가능하게 하기 위한시스템, 방법 및 컴퓨터 프로그램
US20170329502A1 (en) Method and device for processing image
CN1462416A (zh) 图像变换和编码技术
CN112804459A (zh) 基于虚拟摄像头的图像展示方法、装置、存储介质及电子设备
CN110620884B (zh) 基于表情驱动的虚拟视频合成方法、装置及存储介质
JP4477012B2 (ja) イメージをフレーミングするためのシステムおよび方法
KR102065632B1 (ko) 복수의 가상 카메라를 이용한 게임 내 360 vr 영상 획득 장치 및 방법
CN101930340A (zh) 一种电子书模拟真实翻页产生光照效果的方法
KR102159326B1 (ko) 작가체학습단말기 및 시스템
JP2018056667A (ja) 画像処理方法及び画像処理プログラム
KR100844829B1 (ko) 모자이크 이미지 생성 방법 및 모자이크 이미지 생성 장치
KR20190101601A (ko) 차트 표시 방법 및 이를 이용하는 장치
US10896483B2 (en) Dynamic content generation system
Miyachi A Trial Development of 3D Statues Map with 3D Point Server
JP2022124629A (ja) 情報処理装置、情報処理方法、及びプログラム
JP2013206242A (ja) 撮像装置、及びコンテンツ生成システム、並びにコンテンツ生成方法
CN118236701A (zh) 一种制作物体表面三维流动渲染图的方法
CN115996302A (zh) 一种数字拼接墙上条屏信号图像平滑方法、装置及设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130624

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140630

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150629

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170627

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180627

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20190625

Year of fee payment: 10