KR20160142772A - 색칠놀이를 위한 증강현실 서비스 방법 및 시스템 - Google Patents

색칠놀이를 위한 증강현실 서비스 방법 및 시스템 Download PDF

Info

Publication number
KR20160142772A
KR20160142772A KR1020160065717A KR20160065717A KR20160142772A KR 20160142772 A KR20160142772 A KR 20160142772A KR 1020160065717 A KR1020160065717 A KR 1020160065717A KR 20160065717 A KR20160065717 A KR 20160065717A KR 20160142772 A KR20160142772 A KR 20160142772A
Authority
KR
South Korea
Prior art keywords
image
augmented reality
color
user
coloring
Prior art date
Application number
KR1020160065717A
Other languages
English (en)
Inventor
이삼희
Original Assignee
디에스글로벌 (주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 디에스글로벌 (주) filed Critical 디에스글로벌 (주)
Publication of KR20160142772A publication Critical patent/KR20160142772A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B1/00Manually or mechanically operated educational appliances using elements forming, or bearing, symbols, signs, pictures, or the like which are arranged or adapted to be arranged in one or more particular ways
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00095Systems or arrangements for the transmission of the picture signal
    • H04N1/00103Systems or arrangements for the transmission of the picture signal specially adapted for radio transmission, e.g. via satellites
    • H04N1/00108Systems or arrangements for the transmission of the picture signal specially adapted for radio transmission, e.g. via satellites of digital signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04W4/008
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10008Still image; Photographic image from scanner, fax or copier
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2012Colour editing, changing, or manipulating; Use of colour codes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Tourism & Hospitality (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Astronomy & Astrophysics (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 색칠놀이를 위한 증강현실 서비스 방법 및 시스템에 관한 것으로서, 보다 상세하게는 인쇄물에 색칠을 하지 않고 서비스 앱 상에서 채색한 후 인쇄물의 마크를 인식하여 사용자가 채색한 이미지에 대응되는 증강현실 서비스를 실행하는 색칠놀이를 위한 증강현실 서비스 방법 및 시스템에 관한 것이다.
본 발명에 의한 색칠놀이를 위한 증강현설 서비스 방법은 1) 사용자 단말에서 서비스 앱을 실행하고 서버로부터 색칠할 이미지를 선택하여 다운로드하는 단계; 2) 상기 서비스 앱에서 제공된 툴을 이용하여 다운로드 받은 이미지에 특정 패턴으로 채색하는 단계; 3) 채색된 이미지를 인쇄하는 단계; 4) 상기 서비스 앱을 실행하고 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고 상기 이미지의 좌표에 따른 색상정보를 추출하는 단계; 5) 추출된 상기 색상정보에 따라 상기 서버에서 제공되는 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하는 단계; 및 7) 상기 사용자 단말의 표시부에 상기 칼라 증강현실 컨텐츠를 디스플레이하는 단계;를 포함한다.

Description

색칠놀이를 위한 증강현실 서비스 방법 및 시스템{METHOD FOR PROVIDING AUGMENTED REALITY SERVICE FOR COLORING AND SYSTEM OF THE SAME}
본 발명은 색칠놀이를 위한 증강현실 서비스 방법 및 시스템에 관한 것으로서, 보다 상세하게는 인쇄물에 색칠을 하지 않고 서비스 앱 상에서 채색한 후 인쇄물의 마크를 인식하여 사용자가 채색한 이미지에 대응되는 증강현실 서비스를 실행하는 색칠놀이를 위한 증강현실 서비스 방법 및 시스템에 관한 것이다.
최근, 수년간 스마트폰의 보급이 급속도로 증가하고 스마트폰을 이용하는 시간이 크게 늘어나게 되면서, 스마트폰의 어플리케이션(application, 이하, '서비스 앱(app)'이라 한다)은 그 수를 열거할 수 없을 정도로 다양하게 개발되었고 또 진화를 거듭하고 있어 실생활에 유익한 아이디어로 많은 편리함을 제공하고 있다.
증강현실 서비스 앱도 그 중 하나이다. 증강현실 관련 기술 중 마커기반 증강현실은 미리 설치된 마커(특정한 패턴, 이미지)위에 특정한 물체를 증강시키는 방법이다. 이 마커기반의 방식은 해당 장소에 정확하게 특정 물체를 증강할 수 있다는 장점으로 인해, 흔히 사용되는 방법 중에 하나이다. 상기 마커기반의 방식은 마커가 가려지거나 카메라가 빠르게 이동하는 경우 마커를 검출하는 데 있어 인식의 오차가 생긴다는 단점이 있지만 이를 보완하고자 모바일 기기에서 제공하는 가속계 센서 등을 추가로 사용하는 보정 방법 등도 연구되어 지고 있다.
콜라믹스(colAR Mix)는 현재 스마트폰 앱으로 제공되고 있는 마커기반 증강현실 서비스 중의 하나이다. 콜라믹스(colAR Mix)는 색칠놀이를 위해 제공되는 증강현실 서비스로서, 아이들에게 창작능력을 키워줄 수 있다.
콜라믹스(colAR Mix)를 이용하고자 하는 사용자는 컴퓨터(예: PC)를 이용하여 콜라믹스(colAR Mix) 서버에 접속한 후 그림 도안을 다운받은 후 프린터를 통해 A4의 종이 인쇄물을 출력한다.
그리고, 상기 출력된 종이 인쇄물(예: 로보트)을 원하는 색으로 채색한 다음, 서비스 앱(예: 콜라믹스(colAR Mix))을 실행시키고 스마트폰 화면에 맞추면, 사용자는 스마트폰 화면에 자신이 색칠한 로보트가 3D형상으로 나타나 움직이고 동작하는 모습을 관찰할 수 있다.
좀 더 구체적을 설명하면, 서버에는 색칠놀이를 위한 각종 이미지와, 해당 이미지에 대응하는 증강현실 컨텐츠가 저장되어 있다.
사용자 단말에서 특정 마커를 인식하게 되면 해당 이미지에 대응하는 증강현실 컨텐츠가 3D형상으로 나타나 움직이고 동작하는 것이다.
특히, 사용자가 인쇄물을 특정 패턴으로 채색을 한 후에 서비스 앱을 실행하고 채색된 이미지의 인쇄물을 스캔하면 이미지의 좌표에 따른 색상정보를 추출한다. 이렇게 추출된 색상정보에 따라 서버에서 제공되는 증강현실 컨텐츠에 칼라를 조합하여 채색된 증강현실 컨텐츠를 생성하는 것이다.
따라서 사용자는 사용자 단말의 표시부를 통해 자신이 채색한 이미지가 나타나 움직이고 동작하는 모습을 관찰할 수 있는 것이다.
종래, 콜라믹스(colAR Mix)와 같이 색칠놀이를 위해 제공되는 증강현실 서비스의 경우, 사용자가 미리 자신의 컴퓨터(예: PC)를 통해 서버에 접속하여 원하는 이미지를 다운로드하고 그 다운로드 이미지를 종이 인쇄물로 출력(프린트)해야 했다. 그리고 출력한 종이 인쇄물을 각종 필기도구로 채색하는 작업이 필요했다.
이렇듯, 종래에 서비스 실행을 위한 절차들이, 아이들에게는 종이 인쇄물의 그림 도안을 색칠함으로써 창작능력과 재미를 줄 수 있으나, 스마트폰 하나로 모든 것이 해결되기를 바라는 어른들에게는 불편하고 시간이 많이 소요되고 번거롭게 느껴지는 작업에 불과한 것들이었다.
또한 출력물에 직접 색칠을 해야 하므로 다양한 색상의 색연필이나 물감, 붓 등이 별도로 구비되어야 한다는 문제점도 있다.
또한 일반적으로 A4용지에 이미지를 출력을 색칠하기 때문에 사용자 단말이 스캔하는 인쇄물의 면적이 커서 사용자 단말의 화면으로 마커의 인식이 용이하지 않다.
본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은 인쇄물에 색칠을 하지 않고 서비스 앱 상에서 채색한 후 인쇄물의 마크를 인식하여 사용자가 채색한 이미지에 대응되는 증강현실 서비스를 실행하는 색칠놀이를 위한 증강현실 서비스 방법 및 시스템을 제공함에 있다.
본 발명의 다른 목적은 증강현실 컨텐츠를 실행할 때 사용자의 음성파일도 함께 재생할 수 있는 색칠놀이를 위한 증강현실 서비스 방법 및 시스템을 제공함에 있다.
위와 같은 기술적 과제를 해결하기 위하여 본 발명에 의한 색칠놀이를 위한 증강현설 서비스 방법은 1) 사용자 단말에서 서비스 앱을 실행하고 서버로부터 색칠할 이미지를 선택하여 다운로드하는 단계; 2) 상기 서비스 앱에서 제공된 툴을 이용하여 다운로드 받은 이미지에 특정 패턴으로 채색하는 단계; 3) 채색된 이미지를 인쇄하는 단계; 4) 상기 서비스 앱을 실행하고 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고 상기 이미지의 좌표에 따른 색상정보를 추출하는 단계; 5) 추출된 상기 색상정보에 따라 상기 서버에서 제공되는 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하는 단계; 및 7) 상기 사용자 단말의 표시부에 상기 칼라 증강현실 컨텐츠를 디스플레이하는 단계;를 포함한다.
또한 상기 2)단계에서 채색된 이미지를 상기 사용자 단말에 저장하는 단계;가 더 부가되는 것이 바람직하다.
또한 상기 채색 증강현실 컨텐츠는 상기 서버 또는 사용자 단말에서 생성되는 것이 바람직하다.
또한 상기 3)단계는 상기 사용자가 채색한 이미지를 칼라인쇄하는 것이 바람직하다.
또한 상기 2)단계는 사용자가 음성파일을 생성하여 상기 서버로 전송하는 것을 포함하고, 상기 7)단계는 상기 사용자 단말의 표시부에 상기 칼라 증강현실 컨텐츠를 디스플레이할 때 상기 음성파일을 재생하는 것이 바람직하다.
본 발명에 의한 색칠놀이를 위한 증강현실 서비스 시스템은 색칠놀이를 위한 각종 이미지와, 해당 이미지에 대응하는 증강현실 컨텐츠를 제공하는 서버; 사용자의 선택에 의해 상기 이미지를 다운로드하고, 사용자가 상기 이미지를 채색하기 위한 툴을 제공하는 서비스 앱을 포함하는 사용자 단말; 및 상기 서비스 앱에서 채색된 이미지를 인쇄하는 인쇄기기;를 포함하며, 상기 서비스 앱은 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고, 이미지의 좌표에 따른 색상정보를 추출하고, 상기 서버 또는 서비스 앱은 추출된 상기 색상정보에 따라 상기 서버에서 제공되는 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하며, 상기 사용자 단말은 상기 채색 증강현실 컨텐츠를 디스플레이하는 것을 특징으로 한다.
또한 상기 사용자 단말은 사용자가 상기 서비스 앱에서 채색한 이미지를 저장하는 것이 바람직하다.
또한 상기 인쇄기기는 근거리 무선통신 수단을 구비하여 상기 사용자 단말로부터 채색된 이미지를 수신하여 칼라인쇄하는 것이 바람직하다.
본 발명에 따르면, 색칠놀이를 위한 증강현실 서비스에서 인쇄물에 색칠을 하지 않고 서비스 앱 상에서 채색한 후 인쇄물의 마크를 인식하여 사용자가 채색한 이미지에 대응되는 증강현실 서비스를 즐길 수 있는 효과가 있다.
따라서 서비스 앱에서 제공하는 디지털화된 다양한 편집기능을 활용할 수 있다는 장점이 있다.
이에 더하여 증강현실 컨텐츠를 실행할 때 사용자의 음성파일도 함께 재생할 수 있는 효과도 있다.
도1은 본 발명에 따른 증강현실 서비스 시스템의 블록 구성도.
도2는 본 발명에 따른 인쇄기기의 사시도.
도3은 본 발명에 따른 증강현실 서비스 방법을 나타낸 동작 흐름도.
도4는 본 발명에 따라 다운로드한 이미지에 색을 입히는 절차를 나타낸 예시도.
도5는 본 발명에 따라 이미지를 인쇄기기로 출력하는 절차를 나타낸 예시도.
도6은 본 발명에 따른 증강현실 서비스를 나타낸 예시도.
본 발명의 착안점은, 색칠놀이를 좀 더 흥미롭게 하기 위하여 증강현실 서비스를 제공하는 것으로서, 스마트 폰 등 사용자 단말에서 서비스 앱을 실행하여 무채색의 이미지를 다운로드 받아 색칠을 한 다음, 이를 칼라로 출력하고, 서버에서 제공하는 무채색의 증강현실 컨텐츠에 사용자가 이미지에 색칠한 것과 동일한 칼라로 채색하여 칼라 증강현실 컨텐츠를 생성 및 실행하는 방법 및 시스템을 구현하는데 있다.
도 1은 본 발명에 따른 증강현실 서비스 시스템의 블록 구성도이다.
도 1에 도시된 바와 같이, 본 발명에 따른 증강현실 서비스 시스템은 스마트 폰 등 사용자 단말기(100), 인쇄기기(200), 서버(300)를 포함하여 구성된다.
상기 서버(300)는 색칠 놀이를 위한 무채색의 이미지와, 각 이미지에 대응하여 증강현실 서비스(예: 콜라믹스(colAR Mix) 등)를 위한 각종 증강현실 컨텐츠를 저장하고 관리하며, 사용자 단말기(100)에 서비스 앱을 실행하여 접속하면 상기 저장된 이미지들을 단말(100)측에 제공한다.
상기 사용자 단말기(100)는 증강현실 서비스 앱(App)이 실행되면, 상기 서버(300)에 접속하여 사용자가 원하는 무채색의 이미지를 다운로드한다. 그리고, 사용자의 입력에 따라 색 또는 선 또는 텍스트를 상기 다운로드한 이미지에 추가하거나 편집을 수행한다.
또한, 사용자 단말기(100)는 사용자로부터 음성신호를 입력받아 상기 다운로드한 이미지와 연동시킬 수 있다. 상기 이미지와 연동된 음성파일은 해당 증강현실 서비스가 실행되면, 증강현실 서비스와 함께 출력된다. 따라서 사용자는 색칠놀이와 함께 음성파일을 저장하고 보관할 수 있으며, 또한 색칠한 이미지를 출력한 인쇄물과 함께 제3자에게 음성파일을 제공 및 전달할 수 있다. 따라서 전달받은 제3자는 인쇄물의 마커를 인식하여 증강현실 컨텐츠를 실행시킬 수 있고, 이와 동시에 사용자의 음성메세지를 청취할 수 있는 것이다.
사용자 단말기(100)는, 상기 인쇄기기(200)를 통해 상기 이미지의 인쇄물이 출력되면, 그 인쇄물을 스캔하여 마커와 상기 이미지 각 부분의 색상들을 인식한 후 상기 이미지에 대응되는 증강현실 서비스를 수행한다. 증강현실 서비스가 수행되면, 단말(100) 표시부 상의 상기 이미지 위에 상기 색 또는 선의 편집이 반영된 3D형상의 객체가 펼쳐지며, 사용자는 상기 이미지의 인쇄물을 돌려가며 이미지 위에 펼쳐진 3D형상의 객체를 입체적으로 관찰할 수 있다. 다시 말해 서비스 앱을 실행하고 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고, 한편으로는 채색된 이미지의 좌표에 따른 색상정보를 추출한다. 이와 같이 추출된 색상정보에 따라 서버에서 제공하는 무채색의 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하는 것이다. 이와 같이 추출된 색상정보에 따라 채색 증강현실 컨텐츠를 생성하는 것은 사용자 단말의 서비스 앱에서 생성할 수도 있지만, 서버에 색상정보를 전송하여 서버에서 채색 증강현실 컨텐츠를 생성하는 것도 가능하다.
사용자 단말기(100)는 노트북 컴퓨터(예: 태블릿 PC) 혹은 이동통신 단말기(예컨대, 휴대폰, PDA, 혹은 스마트폰 등)일 수 있다. 사용자 단말기(100)는 무선 통신부, A/V(Audio/Video) 입력부, 사용자 입력부, 센싱부, 출력부, 메모리, 인터페이스부, 카메라 모듈, 제어부 및 전원 공급부 등을 포함할 수 있다. 상기 구성요소들이 모두 필수적인 것은 아니며, 그보다 많은 구성요소들을 갖거나 혹은 적은 구성요소들을 갖는 휴대 가능한 단말기일 수 있다. 상기 무선통신부는 블루투스(Bluetooth)나 RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(Zigbee (IEEE 802.15.4)), 와이파이(Wi-Fi)와 같은 근거리 무선통신 모듈을 포함하고, 근거리 무선통신 모듈을 통해 상기 인쇄기기(200)로 이미지 데이터를 전달하여 인쇄물 출력을 수행한다.
사용자 단말기(100)는 본 발명에 따른 증강현실 서비스를 수행하는 소프트웨어 또는 어플리케이션(예: 증강현실 서비스 앱(App))을 설치하거나 메모리에 저장할 수 있다. 사용자는 증강현실 서비스 앱(App)을 상기 서버(300)나 어플리케이션 스토어(이하, '앱스토어(App store)'라 한다)로부터 다운로드하여 단말(100)에 설치할 수 있다.
상기 인쇄기기(200)는 소형화와 휴대성을 중점적 고려사항으로 설계된 휴대용 인화 혹은 인쇄기기로서, 근거리 무선통신 수단을 통해 상기 사용자 단말(100)로부터 이미지를 수신한다. 그리고, 수신된 이미지의 컬러 인쇄물을 출력(인쇄)한다. 상기 근거리 무선통신 수단은 사용자 단말기(100)와의 통신을 위한 것으로서, 블루투스 (Bluetooth)나 RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(Zigbee (IEEE 802.15.4)), 와이파이(Wi-Fi)와 같은 근거리 무선통신 프로토콜 중 어느 하나를 수행할 수 있다.
상기 인쇄기기(200)는 도 2에 도시된 바와 같이, 본체부(220), 인화지 급지부(230), 인화지 배출부(240), 전원부(250), 연결 포트부(260)를 포함하여 구성된다.
상기 본체부(220)는 인쇄기기(200)의 몸체를 이루는 케이스(CASE)로서, 상기 인화지 급지부(230), 인화지 배출부(240), 전원부(250), 연결 포트부(260)가 장착(or 형성)될 수 있는 기반을 제공한다.
상기 인화지 급지부(230)는 인쇄기기(200)의 인화에 필요한 용지들을 공급하는 장치단으로, 용지확인 윈도우(232), 카트리지(미도시), 삽입구(미도시)를 포함하여 구성된다. 상기 용지확인 윈도우(232)는 본체부(220) 일측에 구비되며, 사용자는 용지확인 윈도우(232)를 통해 상기 카트리지 트레이에 남아있는 인화지의 잔여량을 확인할 수 있다.
상기 인화지 배출부(240)는 인쇄기기(200)에서 인화된 용지들을 배출하는 장치단으로, 배출구, 덮개부, 덮개 힌지를 포함하여 구성된다.
상기 전원부(250)는 인쇄기기(200)의 온(on)/오프(off)를 제어하고, 인쇄기기(200)를 구성하는 전기/전자 소자에 전원을 공급하며, 전원버튼(254)과 배터리(미도시)를 포함하여 구성된다. 상기 전원버튼(254)은 본체부(220) 일측에 구비되며, 전원버튼(254)을 누르는(push) 사용자의 조작에 따라 인쇄기기(200)의 온(on)/오프(off)를 제어한다.
상기 연결 포트부(260)는 상기 본체부(220)의 측면(예: 좌측 or 우측) 일측에 구비되며, USB 연결포트(미도시)와 충전기 연결포트(미도시)를 포함하여 구성된다.
본 발명에 따른 인쇄기기(200)는 연결 포트부(260)를 구비하여 상기 사용자 단말(100)과의 무선연결(예: 근거리 무선통신)뿐 아니라, 상기 USB 연결포트를 통해, 유선으로 인쇄기기(200)와 외부 장치(예: 스마트폰, 태블릿 PC 등, 노트북 등)간의 유선 데이터 전송을 수행할 수 있도록 한다. 그리고, 상기 충전기 연결포트(268)를 통해, 전원을 공급받아 배터리(258) 충전을 수행하도록 한다.
또한 본 발명에 따른 인쇄기기는 인화지에 도료가 도포되어 있고, 인쇄기기에서 특정 온도의 열을 특정 시간 동안 인화지에 인가하여 풀칼라를 구현하는 제로잉크방식인 것이 바람직하다.
또한 인화지(인쇄물)의 사이즈는 일반 사진 사이즈인 4인치 × 6인치 이하인 것이 바람직하다. 증강현실 컨텐츠를 실행할 때 인쇄물을 움직이면서 다양한 각도로 볼 수 있는데, 인쇄물을 움직이기 위하여 A4 사이즈는 너무 크기 때문이다. 또한 인쇄물의 크기가 너무 크면 상대적으로 작은 면적의 표시부를 갖는 스마트 폰 등으로 마커를 인식하는 것이 용이하지 않기 때문이다.
도 3은 본 발명에 따른 증강현실 서비스 방법을 나타낸 동작 흐름도로서, 증강현실 서비스를 제공하기 위한 방법과 절차를 나타낸 것이다.
본 발명은 증강현실 서비스 앱(이하, '서비스 앱(app)'이라 한다)을 이용하여, 이미지를 채색하여 색상을 입히고 인쇄물로 출력한 후, 출력된 인쇄물을 스캔하여 증강현실 서비스 화면이 단말(100, 예: 스마트폰 or 태블릿 PC 등)에 디스플레이 되도록 한다.
사용자가 단말(100)에 저장된 서비스 앱을 실행하면, 앱의 실행에 따라 도4 에 도시된 바와 같이, 앱의 메인 화면(M110a)이 디스플레이 된다.
단말(100)에 앱의 메인 화면(M110a)이 디스플레이되면, 사용자는 우선, '컨텐츠 다운로드' 버튼을 선택(터치)하여, 서버(300)에 접속한다. 그리고 접속된 서버(300)에서, 사용자가 선택하는 이미지(예: 동식물, 애니매이션 캐릭터, 로보트 등)를 다운로드 한다(S10). 이때, 상기 이미지는 증강현실 서비스 실행을 위한 것으로 이미지 상의 특정 객체를 증강시킬 수 있는 마커(특정한 패턴 or 이미지)를 포함한다. 도 4는 본 발명에 따라 다운로드한 이미지에 색을 입히는 절차를 나타낸 예시도이다.
이후, 상기 선택된 이미지의 다운로드가 완료되면, 이미지에 색상을 칠하거나 원하는 문구(text)를 입력하기 위해 사용자는 우선 앱의 메인 화면(M110a)에서 '에디션 모드' 버튼을 선택(터치)한다. 그러면, '색상&라인 입력', '텍스트 입력', '음성입력'과 같은 서브 항목들로 구성된 에디션 모드의 서브 메뉴화면(M120a)이 디스플레이 되고, 사용자는 상기 서브 메뉴화면(M120a)의 '색상&라인 입력'항목을 선택하여 이미지에 색상을 입힐 수 있다.
사용자는 도 4의 화면 M130a에 도시된 바와 같은 편집화면을 통해, 상기 다운로드된 이미지에 색상을 칠하거나 라인(or 도형)을 입력할 수 있다. 그리고, 채색(편집)이 완료되면 해당 이미지를 저장한다(S20). 특히 본 발명에 의하면 인쇄물에 색연필이나 물감을 이용하여 채색하는 것이 아니라 서비스 앱에서 제공하는 툴을 이용하여 손쉽게 채색(편집)할 수 있다. 즉, 서비스 앱에서는 공지의 이미지 편집 프로그램(예를 들어 '포토샵')에서 사용하는 이미지 편집 툴을 제공할 수 있다.
경우에 따라서는 음성파일을 생성하여 서버로 전송할 수도 있다.
이후, 사용자는 상기 앱의 메인화면(M110a)에서 '인쇄 모드' 버튼을 선택(터치)하는 것으로서, 상기 편집된 칼라 이미지를 도 5에 도시된 바와 같이, 사용자 단말(100)과 무선으로 연결된 인쇄기기(200)로 출력(인쇄)할 수 있다(S30). 도 5는 본 발명에 따라 이미지를 인쇄기기로 출력하는 절차를 나타낸 예시도이다.
일단, 상기 인쇄기기(200)로 컬러 이미지가 출력되면, 사용자는 도 6에 도시된 바와 같이 상기 메인 화면(M110a)에서 '증강현실 서비스 모드' 버튼을 선택(터치)하여, 증강현실 모드를 실행한 후 상기 출력된 컬러 이미지 전체가 단말화면 안으로 들어오도록 단말(100)의 방향을 컬러 이미지 쪽으로 맞추고 컬러 이미지와의 거리를 일정하게 유지시킨다.
증강현실 모드가 실행되면, 단말(100)은 단말화면에 컬러 이미지가 나타나도록 카메라 모듈을 구동하고 상기 컬러 이미지를 출력한 인쇄물을 스캔한다(S40). 스캔이 이루어지는 동안, 단말(100)은 마커와 상기 컬러 이미지 각 부분의 색상들을 인식한다. 즉, 이미지의 좌표에 따른 색상정보를 추출하는 것이다(S50).
그리고 그 인식된 마커와 이미지 각 부분의 색상을 적용한 증강현실 컨텐츠를 생성한다(S60). 구체적으로 설명하면, 서버에서 제공하는 무채색의 증강현실 컨텐츠에 사용자가 채색한 대로 좌표에 따른 색상정보를 적용하는 것이다. 이렇게 함으로써 서버에서 제공하는 무채색의 증강현실 컨텐츠는 사용자의 채색에 따른 칼라 증강현실 컨텐츠로 재탄생하는 것이다(S60).
이와 같이 생성된 칼라 증강현실 컨텐츠를 실행하여 사용자 단말의 표시부에 디스플레이한다(S70). 이 때 사용자가 음성파일을 연동시켰다면, 서버에서 음성파일을 다운로드하여 칼라 증강현실 컨텐츠와 함께 음성파일도 재생된다. 상기 음성파일은 배경음악이나 색칠놀이와 관련된 내용을 음성으로 남기기 위한 것일 수도 있고, 또는 인쇄물을 전달받은 제3자에게 전달하는 음성메세지일 수도 있다.
증강현실 서비스가 실행되면, 단말(100)은 상기 인식된 마커와 이미지 각 부분의 색상에 따른 3D형상의 객체(예: 동식물, 애니매이션 캐릭터, 로보트 등)를 도 6에 도시된 바와 같이 단말화면 상의 컬러 이미지 위에 출력한다. 도 6은 본 발명에 따른 증강현실 서비스를 나타낸 예시도이다. 즉, 채색된 칼라 인쇄물 상에 3D형상의 객체가 인쇄물과 동일한 색상으로 채색되어 증강현실로 서비스 되는 것이다.
3D형상의 객체는 미리 설정된 시나리오에 따라 다양한 모션과 동작을 수행하며, 사용자는 컬러 이미지 인쇄물을 돌려가며 상기 컬러 이미지 위에 펼쳐진 3D형상의 객체를 입체적으로 관찰(예: 전, 후, 좌, 우, 상, 하)할 수 있다. 본 발명에 의한 인쇄기기는 A4보다 작은 사이즈로 인쇄물을 인쇄하기 때문에 손바닥에 올려 놓고 돌려가며 관찰하기가 용이하다.
이와 같이 생성된 칼라 증강현실 컨텐츠는 기본적으로 서버에서 제공하지만, 컨텐츠의 3D형상 객체에 사용자가 색칠놀이를 통해 채색한 색상이 반영되어 있기 때문에, 객체가 살아 움직이는 등의 3D 애니메이션 등의 효과를 부여하여 창작능력과 재미를 한층 높일 수 있다.
여기에 설명되는 본 발명의 동작은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수 있다.
하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 동작 예들이 제어부(or 서비스 앱(App)) 자체로 구현될 수 있다.
소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(미도시)에 저장되고, 제어부(or 서비스 앱(App))에 의해 실행될 수 있다.
본 발명은 도면에 도시된 실시 예(들)를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형이 이루어질 수 있으며, 상기 설명된 실시예(들)의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
이상 기술된 바와 같이, 본 발명은 사용자 단말기(100)의 이미지 편집기능(예: 색입히기)과 인쇄기기(200)의 인쇄(인화)기능을 채용하여, 색칠놀이 증강현실 서비스 시스템을 구현하였다.
본 발명은 어른들에게는 불편하고 번거롭게 느껴지는 종래 증강현실 서비스를 스마트폰 하나만으로 간단히 처리되도록 하여, 보다 쉽고 편리함을 요구하는 스마트폰 사용자들의 요구(needs)를 만족시킬 수 있게 되었다.
100: 사용자 단말기
200 : 인쇄기기
300 : 서버

Claims (8)

1) 사용자 단말에서 서비스 앱을 실행하고 서버로부터 색칠할 이미지를 선택하여 다운로드하는 단계;
2) 상기 서비스 앱에서 제공된 툴을 이용하여 다운로드 받은 이미지에 특정 패턴으로 채색하는 단계;
3) 채색된 이미지를 인쇄하는 단계;
4) 상기 서비스 앱을 실행하고 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고 상기 이미지의 좌표에 따른 색상정보를 추출하는 단계;
5) 추출된 상기 색상정보에 따라 상기 서버에서 제공되는 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하는 단계; 및
7) 상기 사용자 단말의 표시부에 상기 칼라 증강현실 컨텐츠를 디스플레이하는 단계;를 포함하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
제1항에 있어서,
상기 2)단계에서 채색된 이미지를 상기 사용자 단말에 저장하는 단계;가 더 부가되는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
제1항에 있어서,
상기 채색 증강현실 컨텐츠는 상기 서버 또는 사용자 단말에서 생성되는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
제1항에 있어서,
상기 3)단계는 상기 사용자가 채색한 이미지를 칼라인쇄하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
제1항에 있어서,
상기 2)단계는 사용자가 음성파일을 생성하여 상기 서버로 전송하는 것을 포함하고,
상기 7)단계는 상기 사용자 단말의 표시부에 상기 칼라 증강현실 컨텐츠를 디스플레이할 때 상기 음성파일을 재생하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
색칠놀이를 위한 각종 이미지와, 해당 이미지에 대응하는 증강현실 컨텐츠를 제공하는 서버;
사용자의 선택에 의해 상기 이미지를 다운로드하고, 사용자가 상기 이미지를 채색하기 위한 툴을 제공하는 서비스 앱을 포함하는 사용자 단말; 및
상기 서비스 앱에서 채색된 이미지를 인쇄하는 인쇄기기;를 포함하며,
상기 서비스 앱은 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고, 이미지의 좌표에 따른 색상정보를 추출하고,
상기 서버 또는 서비스 앱은 추출된 상기 색상정보에 따라 상기 서버에서 제공되는 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하며,
상기 사용자 단말은 상기 채색 증강현실 컨텐츠를 디스플레이하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 시스템.
제5항에 있어서,
상기 사용자 단말은 사용자가 상기 서비스 앱에서 채색한 이미지를 저장하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 시스템.
제5항에 있어서,
상기 인쇄기기는 근거리 무선통신 수단을 구비하여 상기 사용자 단말로부터 채색된 이미지를 수신하여 칼라인쇄하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 시스템.
KR1020160065717A 2015-06-03 2016-05-27 색칠놀이를 위한 증강현실 서비스 방법 및 시스템 KR20160142772A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150078714 2015-06-03
KR20150078714 2015-06-03

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020170115944A Division KR20170134277A (ko) 2017-09-11 2017-09-11 색칠놀이를 위한 증강현실 서비스 방법

Publications (1)

Publication Number Publication Date
KR20160142772A true KR20160142772A (ko) 2016-12-13

Family

ID=57441257

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160065717A KR20160142772A (ko) 2015-06-03 2016-05-27 색칠놀이를 위한 증강현실 서비스 방법 및 시스템

Country Status (5)

Country Link
US (1) US10311642B2 (ko)
JP (1) JP2018524685A (ko)
KR (1) KR20160142772A (ko)
CN (1) CN107710305A (ko)
WO (1) WO2016195348A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101968152B1 (ko) 2017-10-11 2019-04-11 (주)아이디 색칠놀이 기반의 영상분석 및 3d디스플레이 시스템
KR102152793B1 (ko) * 2020-04-06 2020-09-07 주식회사 라프라스 도색 시뮬레이션 장치

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109389687A (zh) * 2018-09-05 2019-02-26 百度在线网络技术(北京)有限公司 基于ar的信息处理方法、装置、设备及可读存储介质

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020014078A (ko) 2000-08-16 2002-02-25 김성민 컴퓨터의 이미지 편집시스템
KR20050114142A (ko) 2004-05-31 2005-12-05 고성민 전자 동화책 편집 방법 및 그 장치
WO2010029553A1 (en) * 2008-09-11 2010-03-18 Netanel Hagbi Method and system for compositing an augmented reality scene
CN101571956A (zh) * 2009-06-09 2009-11-04 庄晨更 矢量电脑工笔画制作方法
US8633947B2 (en) * 2010-06-02 2014-01-21 Nintendo Co., Ltd. Computer-readable storage medium having stored therein information processing program, information processing apparatus, information processing system, and information processing method
KR101444407B1 (ko) * 2010-11-02 2014-09-29 한국전자통신연구원 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법
JP2014029566A (ja) * 2012-07-03 2014-02-13 Interactive Communication Design Co Ltd 画像処理装置、画像処理方法、及び画像処理プログラム
US10530486B2 (en) * 2012-12-27 2020-01-07 Panasonic Intellectual Property Corporation Of America Transmitting method, transmitting apparatus, and program
JP2014127987A (ja) * 2012-12-27 2014-07-07 Sony Corp 情報処理装置および記録媒体
JP6089828B2 (ja) * 2013-03-15 2017-03-08 株式会社リコー 情報処理システムおよび情報処理方法
KR20140148061A (ko) 2013-06-21 2014-12-31 디에스글로벌 (주) 휴대용 이미지 출력기기
KR101440766B1 (ko) 2013-08-09 2014-09-18 디에스글로벌 (주) 인쇄물을 이용한 가상 이미지 전달 서비스 방법
US9727977B2 (en) * 2014-12-29 2017-08-08 Daqri, Llc Sample based color extraction for augmented reality
US20160343173A1 (en) * 2015-05-20 2016-11-24 Daqri, Llc Acousto-optical display for augmented reality

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101968152B1 (ko) 2017-10-11 2019-04-11 (주)아이디 색칠놀이 기반의 영상분석 및 3d디스플레이 시스템
KR102152793B1 (ko) * 2020-04-06 2020-09-07 주식회사 라프라스 도색 시뮬레이션 장치

Also Published As

Publication number Publication date
US20180137683A1 (en) 2018-05-17
CN107710305A (zh) 2018-02-16
JP2018524685A (ja) 2018-08-30
US10311642B2 (en) 2019-06-04
WO2016195348A1 (ko) 2016-12-08

Similar Documents

Publication Publication Date Title
CN104461318B (zh) 基于增强现实技术的点读方法及系统
TWI543726B (zh) 自動上色系統及其方法
CN105931500B (zh) 一种基于点读笔的影像设备控制方法和点读笔系统
EP1926051A2 (en) Network connected media platform
US20090113091A1 (en) Digital Arts and Crafts Computer Peripheral Toy Device
CN106610826B (zh) 在线场景应用的制作方法及装置
JP2016527045A (ja) 少なくとも1つの手指/足指の爪面に図柄を印刷するためのシステム及び印刷方法
US20160019708A1 (en) Armature and Character Template for Motion Animation Sequence Generation
JP2012232042A (ja) 付け爪サービス提供装置および端末装置
US20170293214A1 (en) Display system, display device, display terminal, display method of display terminal, and control program
KR20160142772A (ko) 색칠놀이를 위한 증강현실 서비스 방법 및 시스템
US20150331888A1 (en) Image capture and mapping in an interactive playbook
CN104937524B (zh) 高级的内嵌式触控光学笔
CN102750121A (zh) 电子显示装置的智能扩展与精确控制系统及其多用户多任务加密共享方法
JP2016099731A (ja) 情報処理装置、情報処理システム、情報処理方法及びプログラム
WO2022241085A1 (en) System and method for making a custom miniature figurine using a three-dimensional (3d) scanned image and a pre-sculpted body
KR20170134277A (ko) 색칠놀이를 위한 증강현실 서비스 방법
CN112911052A (zh) 信息分享方法和装置
US9430754B2 (en) Storage medium, information processing method and information processing system
JP2007325131A (ja) 画像編集装置、画像編集方法、画像編集プログラム、およびこれを記録した記録媒体、ならびに写真撮影プリント装置
JP4793107B2 (ja) 写真撮影プリント装置、写真撮影プリント装置の制御方法、画像編集プログラム、およびこれを記録した記録媒体
CN111913560B (zh) 虚拟内容的显示方法、装置、系统、终端设备及存储介质
EP2648083A2 (en) Apparatus and Method of Generating a Sound Effect in a Portable Terminal
JP2001238107A (ja) 画像撮影伝送装置及び撮影画像伝送システム
KR20030062494A (ko) 손톱 프린트 장치 및 그 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
A107 Divisional application of patent
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL NUMBER: 2017101004340; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20170911

Effective date: 20190607

J2X1 Appeal (before the patent court)

Free format text: TRIAL NUMBER: 2019201005171; APPEAL AGAINST DECISION TO DECLINE REFUSAL