KR20170134277A - Method for providing augmented reality service system for coloring - Google Patents

Method for providing augmented reality service system for coloring Download PDF

Info

Publication number
KR20170134277A
KR20170134277A KR1020170115944A KR20170115944A KR20170134277A KR 20170134277 A KR20170134277 A KR 20170134277A KR 1020170115944 A KR1020170115944 A KR 1020170115944A KR 20170115944 A KR20170115944 A KR 20170115944A KR 20170134277 A KR20170134277 A KR 20170134277A
Authority
KR
South Korea
Prior art keywords
image
augmented reality
color
user
coloring
Prior art date
Application number
KR1020170115944A
Other languages
Korean (ko)
Inventor
이삼희
Original Assignee
디에스글로벌 (주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 디에스글로벌 (주) filed Critical 디에스글로벌 (주)
Priority to KR1020170115944A priority Critical patent/KR20170134277A/en
Publication of KR20170134277A publication Critical patent/KR20170134277A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B1/00—Manually or mechanically operated educational appliances using elements forming, or bearing, symbols, signs, pictures, or the like which are arranged or adapted to be arranged in one or more particular ways
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Software Systems (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

The present invention relates to an augmented reality service method for coloring and a system thereof and, more specifically, to an augmented reality service method for coloring and a system thereof to execute an augmented reality service corresponding to an image colored by a user by recognizing a mark of a printout after a user colors on a service application without coloring the printout. The augmented reality service method for coloring according to the present invention comprises: 1) a step of executing a service application on a user terminal, selecting an image to be colored from a server, and download the image; 2) a step of coloring the downloaded image into a specific pattern using a tool provided by the service application; 3) a step of printing the colored image; 4) a step of executing the service application, scanning the printout of the colored image, recognizing a mark, and extracting color information according to coordinates of the image; 5) a step of coloring augmented reality content provided by the server according to the extracted color information and generating color augmented reality content based on the image colored by the user; and 7) a step of displaying the color augmented reality content on a display unit of the user terminal.

Description

색칠놀이를 위한 증강현실 서비스 방법{METHOD FOR PROVIDING AUGMENTED REALITY SERVICE SYSTEM FOR COLORING}TECHNICAL FIELD [0001] The present invention relates to a method for providing a coloring game,

본 발명은 증강현실 서비스에 관한 것으로, 보다 상세하게는 색칠놀이를 위한 증강현실 서비스에 관한 것이다.The present invention relates to an augmented reality service, and more particularly, to an augmented reality service for coloring play.

최근, 수년간 스마트폰의 보급이 급속도로 증가하고 스마트폰을 이용하는 시간이 크게 늘어나게 되면서, 스마트폰의 어플리케이션(application, 이하, '앱(app)'이라 한다)은 그 수를 열거할 수 없을 정도로 다양하게 개발되었고 또 진화를 거듭하고 있어 실생활에 유익한 아이디어로 많은 편리함을 제공하고 있다.In recent years, as the spread of smartphones has rapidly increased and the time for using smartphones has increased greatly, the number of applications (hereinafter referred to as "apps") of the smartphone has been various And it has been evolving and has been providing many convenience with ideas that are useful for real life.

증강현실 서비스 앱도 그 중 하나이다. The augmented reality service app is one of them.

증강현실 관련 기술 중 마커기반 증강현실은 미리 설치된 마커(특정한 패턴, 이미지)위에 특정한 물체를 증강시키는 방법이다. 이 마커기반의 방식은 해당 장소에 정확하게 특정 물체를 증강할 수 있다는 장점으로 인해, 흔히 사용되는 방법 중에 하나이다. 상기 마커기반의 방식은 마커가 가려지거나 카메라가 빠르게 이동하는 경우 마커를 검출하는 데 있어 인식의 오차가 생긴다는 단점이 있지만 이를 보완하고자 모바일 기기에서 제공하는 가속계 센서 등을 추가로 사용하는 보정 방법 등도 연구되어 지고 있다. Among the augmented reality related technologies, a marker based augmented reality is a method of augmenting a specific object on a predetermined marker (a specific pattern, an image). This marker-based approach is one of the commonly used methods because of the advantage of being able to augment certain objects precisely at the site. The marker-based method has a disadvantage in that recognition errors are generated in detecting markers when the markers are obscured or when the camera moves quickly. However, in order to compensate for such a disadvantage, a correction method using an accelerometer sensor or the like provided by a mobile device It is being studied.

콜라믹스(colAR Mix)는 현재 스마트폰 앱으로 제공되고 있는 마커기반 증강현실 서비스 중의 하나이다. 콜라믹스(colAR Mix)는 색칠놀이를 위해 제공되는 증강현실 서비스로서, 아이들에게 창작능력을 키워줄 수 있다.The COLAR Mix is one of the marker-based augmented reality services currently offered as a smartphone app. The COLAR Mix is an augmented reality service that is provided for coloring, and can be used to develop children's creative abilities.

콜라믹스(colAR Mix)를 이용하고자 하는 사용자는 컴퓨터(예: PC)를 이용하여 콜라믹스(colAR Mix) 서버에 접속한 후 그림 도안을 다운받은 후 프린터를 통해 A4의 종이 인쇄물을 출력한다. 그리고, 상기 출력된 종이 인쇄물(예: 로보트)을 원하는 색으로 채색한 다음, 서비스 앱(예: 콜라믹스(colAR Mix))를 실행시키고 스마트폰 화면에 맞추면, 사용자는 스마트폰 화면에 자신이 색칠한 로보트가 3D형상으로 나타나 움직이고 동작하는 모습을 관찰할 수 있다. A user who wants to use a colAm Mix connects to a colAm Mix server using a computer (eg PC), downloads a drawing, and prints an A4 paper print through the printer. Then, after coloring the output paper print product (for example, a robot) to a desired color, and then executing a service application (for example, a colAm Mix) to fit the smartphone screen, You can observe how a robot moves and behaves in a 3D shape.

종래, 콜라믹스(colAR Mix)와 같이 색칠놀이를 위해 제공되는 증강현실 서비스의 경우, 사용자가 미리 자신의 컴퓨터(예: PC)를 통해 서버에 접속하여 원하는 이미지를 다운로드하고 그 다운로드 이미지를 종이 인쇄물로 출력(프린트)해야 했다. 그리고 출력한 종이 인쇄물을 각종 필기도구로 채색하는 작업이 필요했다. Conventionally, in the case of an augmented reality service provided for coloring play such as a colAm Mix, a user connects to a server through his / her computer (e.g., PC) in advance to download a desired image, (Print). And it was necessary to paint the printed paper with various writing tools.

이렇듯, 종래에 서비스 실행을 위한 절차들이, 아이들에게는 종이 인쇄물의 그림 도안을 색칠함으로써 창작능력과 재미를 줄 수 있으나, 스마트폰 하나로 모든 것이 해결되기를 바라는 어른들에게는 불편하고 시간이 많이 소요되고 번거롭게 느껴지는 작업에 불과한 것들이었다.Thus, conventionally, procedures for service execution can give children the ability to create and color by painting a picture of a paper print, but it is inconvenient, time-consuming and cumbersome for adults who want to solve everything with one smartphone .

본 발명의 목적은, 스마트폰의 편집기능과 인쇄 기능을 색칠놀이 증강현실 서비스에 적용하는 색칠놀이를 위한 증강현실 서비스 방법을 제공하는데 있다. It is an object of the present invention to provide an augmented reality service method for coloring play applying the editing function and the printing function of a smartphone to a coloring game augmented reality service.

본 발명의 부가적인 특성 및 이점들은 아래의 설명에 기재될 것이며, 부분적으로는 상기 설명에 의해 명백해지거나 본 발명의 실행을 통해 숙지될 것이다. 본 발명의 목표 및 다른 이점들은 특히 아래 기재된 설명 및 부가된 도면뿐만 아니라 청구항에서 지적한 구조에 의해 구현될 것이다.Additional features and advantages of the invention will be set forth in the description which follows, and in part will be apparent from the description, or may be learned by practice of the invention. The objectives and other advantages of the present invention will be realized and attained by the structure particularly pointed out in the claims, as well as the following description and the annexed drawings.

본 발명은 사용자 단말기의 이미지 편집기능(예: 색입히기)과 인쇄기기의 인쇄(인화)기능을 채용하여, 색칠놀이 증강현실 서비스 시스템을 구현하였다.The present invention employs the image editing function (e.g., coloring) of a user terminal and the printing (printing) function of a printing device to implement a coloring augmented reality service system.

본 발명은 어른들에게는 불편하고 번거롭게 느껴지는 종래 증강현실 서비스를 스마트폰 하나만으로 간단히 처리되도록 하여, 보다 쉽고 편리함을 요구하는 스마트폰 사용자들의 요구(needs)를 만족시킬 수 있게 되었다.The present invention enables simple processing of a conventional augmented reality service, which is inconvenient and cumbersome to adults, with a single smartphone, thereby satisfying the needs of smartphone users who demand more convenience and convenience.

도1은 본 발명에 따른 증강현실 서비스 시스템의 블록 구성도.
도2는 본 발명에 따른 인쇄기기의 사시도.
도3은 본 발명에 따른 증강현실 서비스 방법을 나타낸 동작 흐름도.
도4는 본 발명에 따라 다운로드한 이미지에 색을 입히는 절차를 나타낸 예시도.
도5는 본 발명에 따라 이미지를 인쇄기기로 출력하는 절차를 나타낸 예시도.
도6은 본 발명에 따른 증강현실 서비스를 나타낸 예시도.1 is a block diagram of an augmented reality service system according to the present invention;
2 is a perspective view of a printing apparatus according to the present invention.
3 is a flowchart illustrating an AR method according to an embodiment of the present invention.
4 is an exemplary view showing a procedure of coloring an image downloaded according to the present invention;
5 is a diagram illustrating an example of a procedure for outputting an image to a printing apparatus according to the present invention.
6 is a diagram illustrating an example of an augmented reality service according to the present invention.

상기와 같은 목적을 달성하기 위하여, 본 발명에 따른 색칠놀이를 위한 증강현실 서비스 시스템은,According to another aspect of the present invention, there is provided an AR service system for coloring play,

증강현실 서비스를 위한 각종 이미지를 저장하고 관리하는 서버와, 상기 서버로부터 이미지를 다운로드하여 사용자의 입력에 따라 색 또는 선 또는 텍스트를 상기 다운로드한 이미지에 추가하거나 편집을 수행하는 사용자 단말기와, 근거리 무선통신 수단을 구비한 휴대용 인쇄기기로서, 구비된 근거리 무선통신 수단을 통해 상기 사용자 단말로부터 이미지를 수신하여 해당 이미지의 인쇄물을 출력하는 인쇄기기를 포함하여 구성되며, 상기 사용자 단말기는 상기 이미지의 인쇄물을 스캔하여 상기 이미지 각 부분에 칠해진 색상들과 마커를 인식한 후 상기 이미지에 대응되는 증강현실 서비스를 수행한다. A user terminal for downloading an image from the server and adding or editing color or line or text to the downloaded image according to a user's input; And a printing device for receiving an image from the user terminal through the provided short-range wireless communication means and outputting a printed product of the image, wherein the user terminal comprises: And performs the augmented reality service corresponding to the image after recognizing the colors and markers painted on each part of the image.

바람직하게, 상기 인쇄기기는 카트리지 트레이를 통해 용지들을 공급하고, 카트리지 트레이에 남아있는 인화지의 잔여량을 확인할 수 있도록 용지확인 윈도우를 포함하는 인화지 급지부와, 상기 공급된 용지에 인화가 완료되면, 인화된 용지들을 배출하는 인화지 배출부(240)와, 사용자의 조작에 따라 인쇄기기(200)의 온(on)/오프(off)를 제어하는 전원부(250)와, 인쇄기기(200)의 몸체를 이루는 케이스(CASE)로서, 상기 인화지 급지부(230), 인화지 배출부(240), 전원부(250)가 구비될 수 있는 기반을 제공하는 본체부(220)를 포함하여 구성되는 것을 특징으로 한다. Preferably, the printing apparatus further comprises: a paper feeder including a paper check window to supply paper through the cartridge tray and to check the remaining amount of the photo paper remaining in the cartridge tray; A power supply unit 250 for controlling the on / off state of the printing apparatus 200 according to a user's operation, a power supply unit 250 for controlling the on / off state of the printing apparatus 200, The main body 220 is provided with a base on which the paper feed unit 230, the paper output unit 240, and the power unit 250 may be installed.

상기와 같은 목적을 달성하기 위하여, 본 발명에 따른 색칠놀이를 위한 증강현실 서비스 방법은, According to another aspect of the present invention, there is provided an AR method for coloring play,

서버로부터 증강현실 서비스를 위한 이미지를 다운로드하는 과정과, 사용자의 입력에 따라 색 또는 선 또는 텍스트를 상기 다운로드한 이미지에 추가하거나 편집하는 과정과, 상기 편집한 이미지를 근거리 무선통신 수단을 통해 휴대용 인쇄기기로 출력하여 인쇄물을 생성하는 과정과, 상기 이미지의 인쇄물을 스캔하여 마커와 상기 이미지 각 부분의 색상들을 인식한 후 상기 이미지에 대응되는 증강현실 서비스를 수행하는 과정을 포함하여 이루어진다. The method comprising the steps of: downloading an image for an augmented reality service from a server; adding or editing color or line or text to the downloaded image according to a user's input; Generating a printed matter by outputting to a device; and recognizing colors of the marker and the image by scanning a printed matter of the image, and performing augmented reality service corresponding to the image.

이하, 본 발명의 바람직한 실시 예를 도면을 참조하여 설명하면 다음과 같다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있음을 유념해야 한다.Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings. The suffix "module" and " part "for components used in the following description are given merely for convenience of description, and do not give special significance or role in themselves. Accordingly, it should be noted that the above-mentioned "module" and "part"

본 발명의 착안점은, 사용자의 입력에 따라 컨텐츠(예: 이미지, 텍스트, 음성 등)를 편집하여 프린트 출력한 후 그에 대응되는 증강현실 서비스를 수행하는 색칠놀이를 위한 증강현실 서비스 시스템 및 방법을 구현하는데 있다. The embodiment of the present invention implements an augmented reality service system and method for coloring play that edits and prints content (e.g., image, text, voice, etc.) according to a user's input and performs the augmented reality service corresponding thereto .

도1은 본 발명에 따른 증강현실 서비스 시스템의 블록 구성도이다. 1 is a block diagram of an augmented reality service system according to the present invention.

도1에 도시된 바와 같이, 본 발명에 따른 증강현실 서비스 시스템은 사용자 단말기(100), 인쇄기기(200), 서버(300)를 포함하여 구성된다.1, the augmented reality service system according to the present invention includes a user terminal 100, a printing device 200, and a server 300.

상기 서버(300)는 증강현실 서비스(예: 콜라믹스(colAR Mix) 등)를 위한 각종 이미지를 저장하고 관리하며, 사용자 단말기(100)이 접속하면 상기 저장된 이미지들을 단말(100)측에 제공한다.The server 300 stores and manages various images for augmented reality services (e.g., colAm Mix), and provides the stored images to the terminal 100 when the user terminal 100 accesses the images .

상기 사용자 단말기(100)는 증강현실 서비스 앱(App)이 실행되면, 상기 서버(300)에 접속하여 사용자가 원하는 이미지를 다운로드한다. 그리고, 사용자의 입력에 따라 색 또는 선 또는 텍스트를 상기 다운로드한 이미지에 추가하거나 편집을 수행한다. When the augmented reality service application (App) is executed, the user terminal 100 accesses the server 300 and downloads an image desired by the user. Then, color or line or text is added to the downloaded image or edited according to the user's input.

또한, 사용자 단말기(100)는 사용자로부터 음성신호를 입력받아 상기 다운로드한 이미지와 연동시킬 수 있다. 상기 이미지와 연동된 음성신호는 해당 증강현실 서비스가 실행되면, 증강현실 서비스와 함께 출력된다.In addition, the user terminal 100 may receive a voice signal from a user and link it with the downloaded image. The voice signal interlocked with the image is output together with the augmented reality service when the augmented reality service is executed.

사용자 단말기(100)는, 상기 인쇄기기(200)를 통해 상기 이미지의 인쇄물이 출력되면, 그 인쇄물을 스캔하여 마커와 상기 이미지 각 부분의 색상들을 인식한 후 상기 이미지에 대응되는 증강현실 서비스를 수행한다. 증강현실 서비스가 수행되면, 단말(100) 화면 상의 상기 이미지 위에 상기 색 또는 선의 편집이 반영된 3D형상의 객체가 펼쳐지며, 사용자는 상기 이미지의 인쇄물을 돌려가며 이미지 위에 펼쳐진 3D형상의 객체를 입체적으로 관찰할 수 있다.When the printed matter of the image is output through the printing device 200, the user terminal 100 scans the printed matter to recognize the markers and colors of the respective portions of the image, and then performs the augmented reality service corresponding to the image do. When the augmented reality service is performed, an object of a 3D shape reflecting the editing of the color or the line is expanded on the image on the screen of the terminal 100, and the user rotates the printed matter of the image and three- can do.

사용자 단말기(100)는 노트북 컴퓨터(예: 태블릿 PC) 혹은 이동통신 단말기(예컨대, 휴대폰, PDA, 혹은 스마트폰 등)일 수 있다. 사용자 단말기(100)는 무선 통신부, A/V(Audio/Video) 입력부, 사용자 입력부, 센싱부, 출력부, 메모리, 인터페이스부, 카메라 모듈, 제어부 및 전원 공급부 등을 포함할 수 있다. 상기 구성요소들이 모두 필수적인 것은 아니며, 그보다 많은 구성요소들을 갖거나 혹은 적은 구성요소들을 갖는 휴대 가능한 단말기일 수 있다. 상기 무선통신부는 블루투스(Bluetooth)나 RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(Zigbee (IEEE 802.15.4)), 와이파이(Wi-Fi)와 같은 근거리 무선통신 모듈을 포함하고, 근거리 무선통신 모듈을 통해 상기 인쇄기기(200)로 이미지 데이터를 전달하여 인쇄물 출력을 수행한다. The user terminal 100 may be a notebook computer (e.g., a tablet PC) or a mobile communication terminal (e.g., a mobile phone, a PDA, or a smart phone). The user terminal 100 may include a wireless communication unit, an audio / video (A / V) input unit, a user input unit, a sensing unit, an output unit, a memory, an interface unit, a camera module, a control unit, and a power supply unit. Not all of the above components are essential, but may be a portable terminal having more or fewer components. The wireless communication unit may be a wireless communication unit such as Bluetooth, Radio Frequency Identification (RFID), IrDA, Ultra Wideband (UWB), Zigbee (IEEE 802.15.4), Wi- And transmits the image data to the printing apparatus 200 through the short-range wireless communication module to output the printed matter.

사용자 단말기(100)는 본 발명에 따른 증강현실 서비스를 수행하는 소프트웨어 또는 어플리케이션(예: 증강현실 서비스 앱(App))을 설치하거나 메모리에 저장할 수 있다. 사용자는 증강현실 서비스 앱(App)을 상기 서버(300)나 어플리케이션 스토어(이하, '앱스토어(App store)'라 한다)로부터 다운로드하여 단말(100)에 설치할 수 있다.The user terminal 100 may install or store software or an application (e.g., an augmented reality service application (App)) that performs the augmented reality service according to the present invention. The user can download the augmented reality service application from the server 300 or the application store (hereinafter referred to as an 'app store') and install the augmented reality service application in the terminal 100.

상기 인쇄기기(200)는 소형화와 휴대성을 중점적 고려사항으로 설계된 휴대용 인화 혹은 인쇄기기로서, 근거리 무선통신 수단을 통해 상기 사용자 단말(100)로부터 이미지를 수신한다. 그리고, 수신된 이미지의 컬러 인쇄물을 출력(인쇄)한다. 상기 근거리 무선통신 수단은 사용자 단말기(100)와의 통신을 위한 것으로서, 블루투스 (Bluetooth)나 RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(Zigbee (IEEE 802.15.4)), 와이파이(Wi-Fi)와 같은 근거리 무선통신 프로토콜 중 어느 하나를 수행할 수 있다.The printing apparatus 200 is a portable printing apparatus or a printing apparatus designed in consideration of miniaturization and portability as an important consideration, and receives an image from the user terminal 100 through short-range wireless communication means. Then, a color print of the received image is output (printed). The short range wireless communication means is for communicating with the user terminal 100 and may be a Bluetooth or an RFID (Radio Frequency Identification), an IrDA, an Ultra Wideband (UWB), a Zigbee 802.15.4), and Wi-Fi (Wi-Fi).

상기 인쇄기기(200)는 도2에 도시된 바와 같이, 본체부(220), 인화지 급지부(230), 인화지 배출부(240), 전원부(250), 연결 포트부(260)를 포함하여 구성된다. 도2는 본 발명에 따른 인쇄기기의 사시도이다. 2, the printing apparatus 200 includes a main body 220, a paper feed unit 230, a paper output unit 240, a power unit 250, and a connection port unit 260 . 2 is a perspective view of a printing apparatus according to the present invention.

상기 본체부(220)는 인쇄기기(200)의 몸체를 이루는 케이스(CASE)로서, 상기 인화지 급지부(230), 인화지 배출부(240), 전원부(250), 연결 포트부(260)가 장착(or 형성)될 수 있는 기반을 제공한다.The main body 220 is a case which forms the body of the printing apparatus 200 and includes the paper feed unit 230, the paper output unit 240, the power unit 250, and the connection port unit 260 or < / RTI > formed).

상기 인화지 급지부(230)는 인쇄기기(200)의 인화에 필요한 용지들을 공급하는 장치단으로, 용지확인 윈도우(232), 카트리지(미도시), 삽입구(미도시)를 포함하여 구성된다. 상기 용지확인 윈도우(232)는 본체부(220) 일측에 구비되며, 사용자는 용지확인 윈도우(232)를 통해 상기 카트리지 트레이에 남아있는 인화지의 잔여량을 확인할 수 있다.The paper feed unit 230 is a unit for feeding sheets necessary for printing of the printing apparatus 200 and includes a paper check window 232, a cartridge (not shown), and an insertion port (not shown). The paper confirmation window 232 is provided at one side of the main body 220, and the user can check the remaining amount of the photo paper remaining in the cartridge tray through the paper confirmation window 232.

상기 인화지 배출부(240)는 인쇄기기(200)에서 인화된 용지들을 배출하는 장치단으로, 배출구, 덮개부, 덮개 힌지를 포함하여 구성된다.The photo paper discharge unit 240 is an apparatus end for discharging paper printed in the printing machine 200, and includes an outlet, a lid, and a cover hinge.

상기 전원부(250)는 인쇄기기(200)의 온(on)/오프(off)를 제어하고, 인쇄기기(200)를 구성하는 전기/전자 소자에 전원을 공급하며, 전원버튼(254)과 배터리(미도시)를 포함하여 구성된다. 상기 전원버튼(254)은 본체부(220) 일측에 구비되며, 전원버튼(254)을 누르는(push) 사용자의 조작에 따라 인쇄기기(200)의 온(on)/오프(off)를 제어한다.The power supply unit 250 controls the on / off state of the printing apparatus 200 and supplies power to the electric / electronic elements constituting the printing apparatus 200. The power supply button 254, (Not shown). The power button 254 is provided on one side of the main body 220 and controls the on / off state of the printing apparatus 200 according to an operation of a user pushing the power button 254 .

상기 연결 포트부(260)는 상기 본체부(220)의 측면(예: 좌측 or 우측) 일측에 구비되며, USB 연결포트(미도시)와 충전기 연결포트(미도시)를 포함하여 구성된다. The connection port portion 260 is provided on one side of the main body 220 on the side (for example, the left side or the right side) and includes a USB connection port (not shown) and a charger connection port (not shown).

본 발명에 따른 인쇄기기(200)는 연결 포트부(260)를 구비하여 상기 사용자 단말(100)과의 무선연결(예: 근거리 무선통신)뿐 아니라, 상기 USB 연결포트를 통해, 유선으로 인쇄기기(200)와 외부 장치(예: 스마트폰, 태블릿 PC 등, 노트북 등)간의 유선 데이터 전송을 수행할 수 있도록 한다. 그리고, 상기 충전기 연결포트(268)를 통해, 전원을 공급받아 배터리(258) 충전을 수행하도록 한다.The printing apparatus 200 according to the present invention may include a connection port unit 260 to wirelessly connect to the user terminal 100 through a USB connection port as well as a wireless connection (E.g., a smart phone, a tablet PC, a notebook, and the like) and the external device 200 (e.g., a notebook, etc.). Then, power is supplied through the charger connecting port 268 to charge the battery 258.

도3은 본 발명에 따른 증강현실 서비스 방법을 나타낸 동작 흐름도로서, 증강현실 서비스를 제공하기 위한 방법과 절차를 나타낸 것이다.FIG. 3 is a flow chart illustrating an AR method according to the present invention, and shows a method and a procedure for providing an AR service.

본 발명은 증강현실 서비스 앱(이하, '서비스 앱(app)'이라 한다)을 이용하여, 이미지에 색상을 입히고 인쇄물로 출력한 후, 출력된 인쇄물을 스캔하여 증강현실 서비스 화면이 단말(100, 예: 스마트폰 or 태블릿 PC 등)에 디스플레이 되도록 한다.The present invention applies color to an image using an augmented reality service application (hereinafter, referred to as a 'app') and outputs the resultant as a printout, and then scans the output printout so that an augmented reality service screen is displayed on the terminal 100, For example, a smartphone or tablet PC).

사용자가 단말(100)에 저장된 서비스 앱을 실행하면, 앱의 실행에 따라 도4에 도시된 바와 같이, 앱의 메인 화면(M110a)이 디스플레이 된다.When the user executes the service application stored in the terminal 100, the main screen M110a of the application is displayed as shown in FIG. 4 according to the execution of the application.

단말(100)에 앱의 메인 화면(M110a)이 디스플레이되면, 사용자는 우선, '컨텐츠 다운로드' 버튼을 선택(터치)하여, 서버(300)에 접속한다. 그리고 접속된 서버(300)에서, 사용자가 선택하는 이미지(예: 동식물, 애니매이션 캐릭터, 로보트 등)를 다운로드 한다. (S10) 이때, 상기 이미지는 증강현실 서비스 실행을 위한 것으로 이미지 상의 특정 객체를 증강시킬 수 있는 마커(특정한 패턴 or 이미지)를 포함한다. 도4는 본 발명에 따라 다운로드한 이미지에 색을 입히는 절차를 나타낸 예시도이다.When the main screen M110a of the app is displayed on the terminal 100, the user first touches (touches) the 'download content' button to access the server 300. [ Then, the connected server 300 downloads images (for example, plants and animals, animation characters, robots, etc.) selected by the user. (S10) At this time, the image includes a marker (specific pattern or image) for augmented reality service execution and capable of augmenting a specific object on the image. 4 is an exemplary view showing a procedure of coloring an image downloaded according to the present invention.

이후, 상기 선택된 이미지의 다운로드가 완료되면, 이미지에 색상을 칠하거나 원하는 문구(text)를 입력하기 위해 사용자는 우선 앱의 메인 화면(M110a)에서 '에디션 모드' 버튼을 선택(터치)한다. 그러면, '색상&라인 입력', '텍스트 입력', '음성입력'과 같은 서브 항목들로 구성된 에디션 모드의 서브 메뉴화면(M120a)이 디스플레이 되고, 사용자는 상기 서브 메뉴화면(M120a)의 '색상&라인 입력'항목을 선택하여 이미지에 색상을 입힐 수 있다.After the downloading of the selected image is completed, the user first selects (touches) the 'edition mode' button on the main screen M110a of the app to color the image or input a desired text. Then, an edition mode sub-menu screen M120a composed of sub-items such as 'color & line input', 'text input', and 'voice input' is displayed, You can apply color to the image by selecting the & line input item.

사용자는 도4의 화면 M130a에 도시된 바와 같은 편집화면을 통해, 상기 다운로드된 이미지에 색상을 칠하거나 라인(or 도형)을 입력할 수 있다. 그리고, 편집이 완료되면 해당 이미지를 저장한다. (S20)The user can fill in the color of the downloaded image or input a line (or graphic) through the edit screen as shown in the screen M130a of FIG. When editing is completed, the image is saved. (S20)

이후, 사용자는 상기 앱의 메인화면(M110a)에서 '인쇄 모드' 버튼을 선택(터치)하는 것으로서, 상기 편집된 컬러 이미지를 도5에 도시된 바와 같이, 사용자 단말(100)과 무선 연결된 인쇄기기(200)로 출력(인쇄)할 수 있다. (S30) 도5는 본 발명에 따라 이미지를 인쇄기기로 출력하는 절차를 나타낸 예시도이다.5, the user selects (touches) the 'print mode' button on the main screen M110a of the application and displays the edited color image on the printing device (Printed) to the image forming apparatus 200 as shown in FIG. (S30) FIG. 5 is an exemplary view showing a procedure of outputting an image to a printing apparatus according to the present invention.

일단, 상기 인쇄기기(200)로 컬러 이미지가 출력되면, 사용자는 도6에 도시된 바와 같이 상기 메인 화면(M110a)에서 '증강현실 서비스 모드' 버튼을 선택(터치)하여, 증강현실 모드를 실행한 후 상기 출력된 컬러 이미지 전체가 단말화면 안으로 들어오도록 단말(100)의 방향을 컬러 이미지 쪽으로 맞추고 컬러 이미지와의 거리를 일정하게 유지시킨다.Once the color image is output to the printing device 200, the user selects (touches) the 'augmented reality service mode' button on the main screen M110a as shown in FIG. 6 to execute the augmented reality mode The direction of the terminal 100 is adjusted toward the color image so that the entire output color image enters the terminal screen, and the distance from the color image is kept constant.

증강현실 모드가 실행되면, 단말(100)은 단말화면에 컬러 이미지가 나타나도록 카메라 모듈을 구동하고 상기 컬러 이미지를 스캔한다. (S40) 스캔이 이루어지는 동안, 단말(100)은 마커와 상기 컬러 이미지 각 부분의 색상들을 인식한다. 그리고 그 인식된 마커와 이미지 각 부분의 색상을 적용한 증강현실 서비스를 수행한다. (S50)When the augmented reality mode is executed, the terminal 100 drives the camera module to scan the color image so that a color image appears on the terminal screen. (S40) During the scan, the terminal 100 recognizes the markers and the colors of the respective portions of the color image. Then, the augmented reality service using the recognized marker and the color of each part of the image is performed. (S50)

증강현실 서비스가 수행되면, 단말(100)은 상기 인식된 마커와 이미지 각 부분의 색상에 따른 3D형상의 객체(예: 동식물, 애니매이션 캐릭터, 로보트 등)를 도6에 도시된 바와 같이 단말화면 상의 컬러 이미지 위에 출력한다. 도6은 본 발명에 따른 증강현실 서비스를 나타낸 예시도이다.When the augmented reality service is performed, the terminal 100 displays 3D-shaped objects (e.g., animals and plants, animation characters, robots, etc.) according to the recognized marker and the color of each part of the image on the terminal screen Print on color image. 6 is a diagram illustrating an example of an augmented reality service according to the present invention.

3D형상의 객체는 미리 설정된 시나리오에 따라 다양한 모션과 동작을 수행하며, 사용자는 컬러 이미지 인쇄물을 돌려가며 상기 컬러 이미지 위에 펼쳐진 3D형상의 객체를 입체적으로 관찰(예: 전, 후, 좌, 우, 상, 하)할 수 있다.The 3D shape object performs various motions and operations in accordance with a preset scenario. The user rotates the color image print and observes the 3D shape object displayed on the color image in three dimensions (e.g., front, back, left, Upper, lower).

여기에 설명되는 본 발명의 동작은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수 있다.The operation of the present invention described herein can be implemented in a computer-readable recording medium using software, hardware, or a combination thereof.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 동작 예들이 제어부(or 서비스 앱(App)) 자체로 구현될 수 있다.According to a hardware implementation, the embodiments described herein may be implemented as application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays May be implemented using at least one of processors, controllers, micro-controllers, microprocessors, and electrical units for performing functions. In some cases, May be implemented by a control unit (or a service application (App)) itself.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(미도시)에 저장되고, 제어부(or 서비스 앱(App))에 의해 실행될 수 있다.According to a software implementation, embodiments such as the procedures and functions described herein may be implemented with separate software modules. Each of the software modules may perform one or more of the functions and operations described herein. Software code can be implemented in a software application written in a suitable programming language. The software code is stored in a memory (not shown) and can be executed by a control unit (or a service application (App)).

본 발명은 도면에 도시된 실시 예(들)를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형이 이루어질 수 있으며, 상기 설명된 실시예(들)의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those skilled in the art that various changes and modifications may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. May be constructed by selectively or in combination. Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.

이상 기술된 바와 같이, 본 발명은 사용자 단말기(100)의 이미지 편집기능(예: 색입히기)과 인쇄기기(200)의 인쇄(인화)기능을 채용하여, 색칠놀이 증강현실 서비스 시스템을 구현하였다.As described above, the present invention employs the image editing function (e.g., coloring) of the user terminal 100 and the printing (printing) function of the printing device 200 to implement the coloring augmented reality service system.

본 발명은 어른들에게는 불편하고 번거롭게 느껴지는 종래 증강현실 서비스를 스마트폰 하나만으로 간단히 처리되도록 하여, 보다 쉽고 편리함을 요구하는 스마트폰 사용자들의 요구(needs)를 만족시킬 수 있게 되었다.The present invention enables simple processing of a conventional augmented reality service, which is inconvenient and cumbersome to adults, with a single smartphone, thereby satisfying the needs of smartphone users who demand more convenience and convenience.

100: 사용자 단말기
200 : 인쇄기기
300 : 서버100: User terminal
200: Printing equipment
300: server

Claims (8)

1) 사용자 단말에서 서비스 앱을 실행하고 서버로부터 색칠할 이미지를 선택하여 다운로드하는 단계;
2) 상기 서비스 앱에서 제공된 툴을 이용하여 다운로드 받은 이미지에 특정 패턴으로 채색하는 단계;
3) 채색된 이미지를 인쇄하는 단계;
4) 상기 서비스 앱을 실행하고 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고 상기 이미지의 좌표에 따른 색상정보를 추출하는 단계;
5) 추출된 상기 색상정보에 따라 상기 서버에서 제공되는 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하는 단계; 및
7) 상기 사용자 단말의 표시부에 상기 칼라 증강현실 컨텐츠를 디스플레이하는 단계;를 포함하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
1) executing a service application on a user terminal and selecting and downloading an image to be painted from a server;
2) coloring the downloaded image in a specific pattern using a tool provided by the service application;
3) printing a colored image;
4) executing the service application and scanning a print of a color image to recognize a marker and extracting color information according to coordinates of the image;
5) coloring the augmented reality contents provided by the server according to the extracted color information to generate color augmented reality contents based on the image painted by the user; And
7) displaying the color augmented reality contents on a display unit of the user terminal.
제1항에 있어서,
상기 2)단계에서 채색된 이미지를 상기 사용자 단말에 저장하는 단계;가 더 부가되는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
The method according to claim 1,
And storing the colorized image in the user terminal in step 2).
제1항에 있어서,
상기 채색 증강현실 컨텐츠는 상기 서버 또는 사용자 단말에서 생성되는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
The method according to claim 1,
Wherein the color augmented reality contents are generated in the server or the user terminal.
제1항에 있어서,
상기 3)단계는 상기 사용자가 채색한 이미지를 칼라인쇄하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
The method according to claim 1,
Wherein the step 3) color prints the image painted by the user.
제1항에 있어서,
상기 2)단계는 사용자가 음성파일을 생성하여 상기 서버로 전송하는 것을 포함하고,
상기 7)단계는 상기 사용자 단말의 표시부에 상기 칼라 증강현실 컨텐츠를 디스플레이할 때 상기 음성파일을 재생하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 방법.
The method according to claim 1,
The step 2) includes generating a voice file by the user and transmitting the voice file to the server,
Wherein the step 7) reproduces the voice file when the color augmented reality contents are displayed on the display unit of the user terminal.
색칠놀이를 위한 각종 이미지와, 해당 이미지에 대응하는 증강현실 컨텐츠를 제공하는 서버;
사용자의 선택에 의해 상기 이미지를 다운로드하고, 사용자가 상기 이미지를 채색하기 위한 툴을 제공하는 서비스 앱을 포함하는 사용자 단말; 및
상기 서비스 앱에서 채색된 이미지를 인쇄하는 인쇄기기;를 포함하며,
상기 서비스 앱은 채색된 이미지의 인쇄물을 스캔하여 마커를 인식하고, 이미지의 좌표에 따른 색상정보를 추출하고,
상기 서버 또는 서비스 앱은 추출된 상기 색상정보에 따라 상기 서버에서 제공되는 증강현실 컨텐츠를 채색하여 사용자가 채색한 이미지를 기반으로 하는 채색 증강현실 컨텐츠를 생성하며,
상기 사용자 단말은 상기 채색 증강현실 컨텐츠를 디스플레이하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 시스템.
A server for providing various images for coloring play and augmented reality contents corresponding to the images;
A user terminal including a service app for downloading the image by a user's selection and providing a tool for a user to color the image; And
And a printing device that prints a color image in the service application,
The service application recognizes the markers by scanning the printed image of the painted image, extracts color information according to the coordinates of the image,
The server or the service application generates the color augmented reality contents based on the image painted by the user by coloring the augmented reality contents provided by the server according to the extracted color information,
Wherein the user terminal displays the color augmented reality contents.
제5항에 있어서,
상기 사용자 단말은 사용자가 상기 서비스 앱에서 채색한 이미지를 저장하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 시스템.
6. The method of claim 5,
Wherein the user terminal stores the image painted by the user in the service application.
제5항에 있어서,
상기 인쇄기기는 근거리 무선통신 수단을 구비하여 상기 사용자 단말로부터 채색된 이미지를 수신하여 칼라인쇄하는 것을 특징으로 하는 색칠놀이를 위한 증강현실 서비스 시스템.
6. The method of claim 5,
Wherein the printing apparatus includes short-range wireless communication means for receiving a color image from the user terminal and performing color printing.
KR1020170115944A 2017-09-11 2017-09-11 Method for providing augmented reality service system for coloring KR20170134277A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170115944A KR20170134277A (en) 2017-09-11 2017-09-11 Method for providing augmented reality service system for coloring

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170115944A KR20170134277A (en) 2017-09-11 2017-09-11 Method for providing augmented reality service system for coloring

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020160065717A Division KR20160142772A (en) 2015-06-03 2016-05-27 Method for providing augmented reality service for coloring and system of the same

Publications (1)

Publication Number Publication Date
KR20170134277A true KR20170134277A (en) 2017-12-06

Family

ID=60922739

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170115944A KR20170134277A (en) 2017-09-11 2017-09-11 Method for providing augmented reality service system for coloring

Country Status (1)

Country Link
KR (1) KR20170134277A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200050108A (en) 2018-11-01 2020-05-11 예스튜디오 주식회사 Coloring service system linking illustrator and user and the method thereof
KR102152793B1 (en) * 2020-04-06 2020-09-07 주식회사 라프라스 Painting Simulation Device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200050108A (en) 2018-11-01 2020-05-11 예스튜디오 주식회사 Coloring service system linking illustrator and user and the method thereof
KR102152793B1 (en) * 2020-04-06 2020-09-07 주식회사 라프라스 Painting Simulation Device

Similar Documents

Publication Publication Date Title
CN111601039B (en) Video shooting method and device and electronic equipment
US10295896B2 (en) Display system, display device, display terminal, display method of display terminal, and control program
JP2016527045A (en) System and printing method for printing a pattern on at least one finger / toe nail surface
CN105931500B (en) Image equipment control method based on touch and talk pen and touch and talk pen system
US9454829B2 (en) Systems and methods for obtaining a digital wallpaper
CN111723746A (en) Scene recognition model generation method, system, platform, device and medium
KR20160142772A (en) Method for providing augmented reality service for coloring and system of the same
CN104428809A (en) Golf information providing system, information provision guidance apparatus for providing golf information and golf information providing method
KR20170134277A (en) Method for providing augmented reality service system for coloring
CN102878978B (en) Method for generating project blueprint by remote control distance measurement
US20150331888A1 (en) Image capture and mapping in an interactive playbook
JP5339159B2 (en) Information management system
JP2008117083A (en) Coordinate indicating device, electronic equipment, coordinate indicating method, coordinate indicating program, and recording medium with the program recorded thereon
CN106453824A (en) Function extension device of smartphone and use method thereof
JP4793107B2 (en) PHOTOGRAPHIC PRINTING DEVICE, PHOTOGRAPHIC PRINTING DEVICE CONTROL METHOD, IMAGE EDITING PROGRAM, AND RECORDING MEDIUM CONTAINING THE SAME
CN112565844B (en) Video communication method and device and electronic equipment
CN111399920B (en) Method, device and storage medium for automatic configuration of mobile terminal application program keys
US20120026184A1 (en) Image processing apparatus, image processing system, and image processing method
US20110244442A1 (en) Video whiteboard apparatus and method
CN112101297A (en) Training data set determination method, behavior analysis method, device, system and medium
EP2648083A2 (en) Apparatus and Method of Generating a Sound Effect in a Portable Terminal
KR20160080886A (en) Instant Print Vending Machine for Mobile Phone Case
KR102236328B1 (en) Method and system for providing augmented reality service using ar sticker
CN115097997B (en) Method and device for deploying mark patterns, electronic equipment and storage medium
US10599876B2 (en) Data communication method between a stylus and a tablet computer

Legal Events

Date Code Title Description
A107 Divisional application of patent