KR20190005081A - 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템 - Google Patents

증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템 Download PDF

Info

Publication number
KR20190005081A
KR20190005081A KR1020170085660A KR20170085660A KR20190005081A KR 20190005081 A KR20190005081 A KR 20190005081A KR 1020170085660 A KR1020170085660 A KR 1020170085660A KR 20170085660 A KR20170085660 A KR 20170085660A KR 20190005081 A KR20190005081 A KR 20190005081A
Authority
KR
South Korea
Prior art keywords
information
terminal device
article
identification code
augmented reality
Prior art date
Application number
KR1020170085660A
Other languages
English (en)
Inventor
한주현
이영석
장언동
Original Assignee
십일번가 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 십일번가 주식회사 filed Critical 십일번가 주식회사
Priority to KR1020170085660A priority Critical patent/KR20190005081A/ko
Priority to CN201810730105.0A priority patent/CN109214743A/zh
Priority to US16/027,827 priority patent/US20190012756A1/en
Publication of KR20190005081A publication Critical patent/KR20190005081A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/28Logistics, e.g. warehousing, loading, distribution or shipping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06037Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14172D bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/083Shipping
    • G06Q10/0832Special goods or special handling procedures, e.g. handling of hazardous or fragile goods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12Messaging; Mailboxes; Announcements

Abstract

본 발명은 배송된 물품을 수취한 수취인이 포장을 제거하기 전에 상기 물품과 관련된 정보를 증강현실에서 확인할 수 있는 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템에 관한 것이다.
배송된 물품과 관련된 정보를 촬영상 영상과 결합하여 증강현실로 출력함으로써, 수취인이 손쉽고 편리하게 배송된 물품과 관련된 정보를 확인할 수 있도록 할 수 있다

Description

증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템{METTHOD AND SYSTEM FOR PROVINDG INFORMATION REGARDING WITHD DELIVERY ARTICLE USING AUGMENTED REALITY}
본 발명은 배송된 물품을 수취한 수취인이 포장을 제거하기 전에 상기 물품과 관련된 정보를 증강현실에서 확인할 수 있는 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템에 관한 것이다.
이 부분에 기술된 내용은 단순히 본 실시 예에 대한 배경 정보를 제공할 뿐, 종래기술을 구성하는 것은 아니다.
최근 들어, 인터넷 쇼핑이나 홈 쇼핑 등 비대면 거래가 활성화됨에 따라 우편, 소포, 택배, 항공 수화물 등의 배송 서비스 산업도 계속 증가되고 있다.
현재의 배송 서비스에 따르면 발송인은 배송 물품의 파손을 방지하기 위하여 종이 상자, 비닐, 플라스틱 등으로 이루어진 포장재로 배송 물품을 포장하고, 그 겉면에 운송장을 부착시켜 배송을 하게 된다.
즉, 수취인이 배송 받은 물품은 포장재를 제거하기 전에 배송된 물품이 무엇인지 확인 할 수 상태가 아니다. 따라서 수취인이 배송 물품에 대한 주문자가 아닐 경우, 원하지 않는 배송 물품을 수취하는 경우가 발생 될 수 있으며, 주문자와 수취인이 동일한 경우라도 자신이 주문한 물품과 다른 물품이 배송된 경우에 배송 물품을 개봉하기 전까지는 확인 할 수 없다는 문제점이 있다.
한편, 최근 이동 통신 기술이 발달함에 따라서, 휴대폰, 스마트 폰, 태블릿 PC 등과 같은 휴대 단말기는 종래의 단순한 통신 장치 또는 정보 제공 장치의 범주를 벗어나 토탈 엔터테인먼트 기기로 진화해 가고 있으며, 이러한 휴대 단말기를 이용한 활용 범위는 더욱 다양해지고 있다.
예를 들어, 대다수의 휴대 단말기가 바코드, QR 코드 등과 같은 정보를 담을 수 있는 코드를 인식할 수 있는 기능을 탑재하고 있으며, 이러한 코드 인식 기능을 이용한 다양한 응용 서비스들이 제공되고 있다.
그러나, 기존의 코드 인식 기능을 이용하는 응용 서비스들은, 단순히 특정 웹 페이지의 주소 정보를 코드화하여, 코드 인식 기능을 통해 사용자가 별도의 주소 입력 없이 해당 웹 페이지에 손쉽게 접속할 수 있도록 하는 정도의 수준으로 제공되고 있을 뿐으로 해당 응용 서비스의 활용도가 매우 낮다는 문제점이 있다.
특히, 현재의 배송 서비스와 관련하여, 상기 코드들은 단순히 물류 관리 차원에서 배송 물품의 정보를 기록하거나 입력하는 용도로 이용되고 있을 뿐이며, 수취인이나 발송인의 입장에서 편의를 제공하기 위한 서비스는 제공되고 있지 않다.
따라서 본 발명은 전술한 종래 기술의 문제점을 해결하기 위하여 제안된 것으로, 본 발명의 목적은 배송되는 물품과 관련된 정보에 접근할 수 있는 정보를 포함하는 코드를 배송되는 물품의 포장재에 부착하고, 수취인이 포장재의 제거 없이 상기 포장재에 부착된 코드를 촬영하면 상기 코드를 인식하여 배송된 물품과 관련된 정보를 가져와 증강현실로 출력함으로써, 수취인이 배송된 물품과 관련된 정보를 손쉽게 확인 할 수 있도록 하는 것을 목적으로 한다.
또한, 본 발명의 목적은 상기 코드를 이용하여 발송인의 메시지를 수취인에게 손쉽게 전달할 수 있도록 하는 것을 목적으로 한다.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 도 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
상술한 과제의 해결 수단으로서, 본 발명은 단말 장치의 카메라를 통해 정보 식별 코드가 부착된 배송 물품을 촬영하는 단계; 촬영된 이미지로부터 상기 정보 식별 코드를 인식하는 단계; 인식된 정보 식별 코드를 기반으로 정보 제공 서버에 접근하여, 상기 배송 물품과 관련된 정보를 요청하는 단계; 상기 정보 제공 서버로부터 상기 물품과 관련된 정보를 수신하는 단계; 상기 수신한 물품과 관련된 정보를 촬영 화면의 실사 이미지와 결합하여 증강현실로 출력하는 단계를 포함하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법을 제공할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 물품과 관련된 정보는 물품 이미지, 물품의 제조 또는 생산 정보, 물품의 구매처 정보, 물품의 사용 설명서, 물품의 이력정보, 발송인 정보, 수취인 정보, 발송인이 수취인에게 전달하는 메시지 중 적어도 어느 하나를 포함할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 증강 현실로 출력하는 단계는, 배송 물품을 촬영한 화면에 표시되어 있는 마커를 기준으로 상기 택배 상자의 이미지와 결합하여 물품과 관련된 정보를 표시 할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 마커는 상기 정보 식별 코드 또는 상기 배송 물품의 포장재 이미지인 것으로 할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 증강 현실로 출력하는 단계는, 상기 카메라의 이동에 따라 변화되는 마커의 위치에 맞추어 출력하는 정보의 종류, 위치, 크기, 색상, 형상, 방향, 상태 중 하나 이상을 변화 시킬 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 발송인이 수취인에게 전달하는 메시지는 이미지, 동영상, 텍스트, 음성 중 하나 이상을 포함할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 발송인이 수취인에게 전달하는 메시지는, SNS(Social Network Service), 인스턴트 메신저(Instant Messenger), 전자 메일, SMS(Short Message Service), MMS(Multimedia Message Service) 중 하나 이상을 포함하는 네트워크 기반의 커뮤니케이션 서비스와 연동 할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 정보를 요청하는 단계는, 상기 정보 제공 서버에서 수취인 인증을 수행 할 수 있도록, 상기 단말 장치에 할당된 IP 주소, MAC 주소, 이동통신번호, 수취인의 얼굴 이미지, 수취인의 생체 정보 중 어느 하나 이상을 포함하는 수취인을 식별할 수 있는 수취인 식별 정보를 수집하는 단계; 추출한 수취인 식별 정보를 상기 정보 제공 서버로 전송하는 단계를 포함할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 수취인 식별 정보의 수집을 위하여 상기 단말 장치의 카메라를 통해 수취인이 얼굴을 촬영하는 단계; 및 상기 단말 장치의 지문 인식 센서를 통해 상기 수취인의 지문을 인식하는 단계 중 어느 하나를 포함할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 정보 식별 코드는 QR(Quick Response) 코드, 2차원 바코드, 컬러 바코드 중 하나 이상을 포함하는 매트릭스 코드일 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 제1 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나로부터 발송인의 증강 현실 기반 정보 서비스 요청을 수신하는 단계; 상기 발송인이 구매하거나 발송하는 물품과 관련된 하나 이상의 정보를 수집하여 저장하는 단계; 상기 수집하여 저장한 하나 이상의 정보에 접근할 수 있는 정보 식별 코드를 생성하는 단계; 상기 정보 식별 코드를 상기 제1 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나로 전송하는 단계; 상기 정보 식별 코드를 인식하여 접근한 제2 단말 장치로부터 정보 제공 요청을 수신하는 단계; 상기 정보 식별 코드에 대응하는 상기 제2 단말 장치로 전송하는 단계를 포함할 수 있다.
본 발명에 따른 단말 장치에 의한 증강 현실 기반의 정보 제공 방법에 있어, 상기 서비스를 요청한 제2 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나로부터 증강 현실 기반의 정보를 제공받을 수취인 정보를 수신하여 저장하는 단계; 상기 정보 식별 코드를 인식하여 접근한 단말 장치로부터 해당 단말 장치에 할당된 IP 주소, MAC 주소, 이동통신번호, 수취인의 얼굴 이미지, 수취인의 생체 정보 중 하나 이상을 포함하는 수취인을 식별 할 수 있는 단계; 및 상기 저장한 수취인 정보와 상기 수신한 수취인 식별 정보를 비교하여 수취인 인증을 수행하는 단계를 포함하고, 인증에 성공한 경우 상기 하나 이상의 정보를 정보 제공을 요청한 단말 장치로 전송할 수 있다.
더하여, 본 발명은 상술한 증강 현실 기반의 정보 제공 방법을 실행시키는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체를 제공한다.
더하여, 본 발명은 상술한 증강 현실 기반의 정보 제공 방법을 실행시키도록 구현되어 있는 컴퓨터 판독 가능한 기록 매체에 저장된 프로그램을 제공한다.
더하여, 본 발명은 단말 장치와 통신을 수행하는 서버통신부; 물품 발송인이 제공한 택배 상자에 포함된 물품과 관련된 정보를 저장하는 저장부; 상기 단말 장치로부터 수신한 정보 식별 코드를 수신하고 수신된 식별 코드에 해당하는 배송 물품과 관련된 정보를 단말 장치로 전송하는 서버 제어부; 를 포함하는 정보 제공서버를 제공한다.
본 발명의 정보 제공서버에 있어, 상기 저장부는 증강 현실 기반 물품 정보를 제공받을 수취인을 수신하여 저장하고, 상기 제어부는 상기 저장한 수취인 정보와 상기 정보 식별 코드를 전송한 단말 장치의 수취인 식별 정보를 비교하여 일치하는 경우에만 택배 상자에 포함된 물품과 관련된 정보를 단말 장치로 전송 할 수 있다.
더하여, 본 발명은 정보 제공 서버와 통신하기 위한 통신부; 정보 식별 코드 촬영 및 수취인 식별 정보 수집을 위한 수취인 얼굴을 촬영하는 카메라부; 수취인의 생체 정보를 인식할 수 있는 생체 정보 인식부; 상기 정보 제공 서버로부터 물품과 관련된 정보를 수신하고 증강현실로 출력하는 제어부; 상기 수신한 물품과 관련된 정보를 저장하는 저장부; 를 포함하는 사용자 단말 장치를 제공한다.
본 발명의 사용자 단말 장치에 있어, 상기 증강현실로 출력하는 제어부는, 정보 식별 코드 또는 배송 물품의 이미지인 것을 특징으로 하는 마커를 기준으로, 카메라의 이동에 따라 변화되는 마커의 위치에 맞추어 출력하는 정보의 종류, 위치, 크기, 색상, 형상, 방향, 상태 중 하나 이상을 변화시킬 수 있다.
본 발명에 따르면, 배송된 물품의 포장재에 부착되는 QR 코드 등과 같은 정보 식별 코드를 카메라를 가진 단말기를 이용하여 촬영하면, 촬영된 영상에 포함된 정보 식별 코드를 인식하여 배송된 물품과 관련된 정보를 획득하고, 획득한 배송된 물품과 관련된 정보를 상기 촬영상 영상과 결합하여 증강현실로 출력함으로써, 수취인이 손쉽고 편리하게 배송된 물품과 관련된 정보를 확인할 수 있도록 할 수 있다.
더하여, 본 발명은 상기 정보 식별 코드에 상기 물품의 발송인이 수취인에게 전달하는 메시지를 연관시켜, 수취인이 정보 식별 코드를 포함하는 배송된 물품의 촬영 시, 상기 메시지를 상기 촬영된 영상과 결합하여 출력함으로써, 발송인이 물품과 발송인의 메시지를 함께 수취인에게 전달할 수 있다.
더하여, 본 발명은 상기 정보 식별 코드에 배송되는 물품과 관련된 이력, 생산자 정보 등 다양한 정보를 연관시켜, 수취인이 정보 정보 식별 코드를 포함하는 배송된 물품의 촬영 시, 상기 구매 정보를 상기 촬영된 영상과 결합하여 출력함으로써, 수취인이 배송된 물품의 수취 시점에서 바로 물품과 관련된 정보를 확인하도록 할 수 있다.
도 1은 본 발명의 실시 예에 따른 증강 현실 기반의 정보 제공 시스템의 구성을 개략적으로 나타낸 도면,
도 2는 본 발명의 실시 예에 따른 전자상거래 서비스와 연계된 증강 현실 기반의 정보 제공 방법을 나타낸 도면,
도 3은 본 발명의 실시 예에 따른 배송 서비스와 연계된 증강 현실 기반의 정보 제공 방법을 나타낸 도면,
도 4는 본 발명의 실시 예에 따른 정보 제공 서버의 구성을 나타낸 순서도,
도 5는 본 발명의 실시 예에 따른 정보 제공 서버의 동작을 나타낸 순서도,
도 6은 본 발명의 실시 예에 따른 증강 현실 기반의 정보 제공을 위한 단말 장치의 구성을 나타낸 도면,
도 7은 본 발명의 실시 예에 따른 단말 장치의 증강 현실 기반의 정보 제공을 위한 동작을 설명하기 위한 순서도,
도 8의 (a) 내지 (c)는 본 발명의 실시 예에 따른 증강 현실 기반의 정보 제공 과정을 설명하기 위한 예시도,
도 9 는 본 발명의 실시 예에 따른 증강 현실 기반의 배송 물품 관련 정보 제공 방법을 실행시키는 컴퓨팅 환경을 도시한 도면이다.
본 발명의 과제 해결 수단의 특징 및 이점을 보다 명확히 하기 위하여, 첨부된 도면에 도시된 본 발명의 특정 실시 예를 참조하여 본 발명을 상세하게 설명한다.
다만, 하기의 설명 및 첨부된 도면에서 본 설명의 요지를 흐릴 수 있는 공지 기능 또는 구성에 대한 상세한 설명은 생략한다. 또한, 도면 전체에 걸쳐 동일한 구성 요소들은 가능한 한 동일한 도면 부호로 나타내고 있음에 유의하여야 한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되는 것은 아니며, 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
한편, 본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위한 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.
더하여, 어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급할 경우, 이는 논리적 또는 물리적으로 연결되거나, 접속될 수 있음을 의미한다. 다시 말해, 구성요소가 다른 구성요소에 직접적으로 연결되거나 접속되어 있을 수 있지만, 중간에 다른 구성요소가 존재할 수도 있으며, 간접적으로 연결되거나 접속될 수도 있다고 이해되어야 할 것이다.
또한, 본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한, 본 명세서에서 기술되는 "포함 한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하에서 설명하는 본 발명은 QR(Quick Response code), 바코드, 컬러 코드 등과 같이 패턴, 흑백 막대의 굵기, 컬러 등의 조합을 통해서 소정의 정보를 나타내는 정보 식별 코드를 이용하여, 배송되는 물품의 수취 시에 수취인이 배송된 물품과 관련된 정보를 증강현실로 확인하도록 하기 위한 것으로서, 이때, 발송인이나 수취인은 자신이 소지한 단말 장치를 이용하여 본 발명에 따른 정보를 제공하거나 제공받을 수 있다.
본 발명에 있어서 상기 단말 장치는, 사용자가 소지할 수 있는 형태의 정보 처리 장치로서, 구체적으로 무선 통신이 가능하며 카메라가 구비된 것이 바람직하나, 이에 한정되지 않는다. 예를 들어 상기 단말 장치는, 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, 개인용 컴퓨터(Personal Computer), 노트북 컴퓨터, 슬레이트 PC(Slate PC), 태블릿 PC(Tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(Wearable Device, 예를 들어, 워치형 단말기(Smartwatch), 글래스형 단말기(Smart Glass), HMD(Head Mounted Display) 등 포함), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 스마트 TV, 디지털방송용 단말기, AVN(Audio Video Navigation) 단말기, A/V(Audio/Video) 시스템, 플렉시블 단말기(Flexible Terminal) 등과 같은 다양한 단말기가 될 수 있다.
이러한 본 발명의 단말 장치는 디지털 기기의 컨버전스(convergence) 추세에 따라 휴대 기기의 변형이 매우 다양하여 모두 열거할 수는 없으나, 상기 언급된 유닛들과 동등한 수준의 유닛이 본 발명에 따른 단말 장치로 사용될 수도 있으며 통신망을 통해 상품 정보 제공 서버와 정보를 송수신할 수 있는 장치라면, 어떠한 장치도 본 발명의 단말로 적용이 가능하다. 뿐만 아니라 단말장치는 현재 개발되어 상용화되었거나 향후 개발 될 모든 통신이 가능한 장치가 이용될 수 있다. 또한 본 발명의 실시 예에서는 하나의 단말 장치만을 도시하였으나, 상품 정보 제공 서버와 통신할 수 있는 단말 장치는 복수 개 존재할 수 도 있다.
또한, 본 발명의 실시 예에서는 상기 단말 장치는, 사용자에 따라서, 발송인의 단말 장치와 수취인의 단말 장치로 구분할 수 있다. 그러나, 발송인의 단말 장치와 수취인의 단말 장치는, 하드웨어 적인 관점에서 동일한 장치일 수 있으며, 특정 단말 장치가 본 발명에 따른 정보 제공 서비스에서의 사용자의 역할에 따라서 발송인의 단말 장치로 동작할 수도 있고, 수취인의 단말 장치로 동작할 수 도 있다.
이제, 본 발명의 실시 예에 따른 증강현실을 이용한 배송 물품 관련 정보 제공 시스템 및 그 동작에 대하여 도면을 참조하여 상세하게 설명하도록 한다.
도 1은 본 발명의 실시 예에 따른 증강 현실 기반의 정보 제공 시스템의 구성을 나타낸 도면으로, 네트워크(600)를 통해서 연결된 제 1 단말장치(100), 전자 상거래 서버(200), 배송 서비스 서버(300), 정보 제공 서버(400), 및 제 2 단말장치(500)를 포함하여 구성될 수 있다.
이 때 네트워크(600)는 상기 장치들, 즉, 제 1 단말장치(100), 전자 상거래 서버(200), 배송 서비스 서버(300), 정보 제공 서버(400), 및 제 2 단말장치(500) 간에 데이터를 송수신 하는 것으로, 종류는 특별히 제한 되지 않는다.
예를 들면, 네트워크(600)는 WLAN(Wireless LAN), 와이파이(Wi-Fi), 와이브로(Wibro), 와이맥스(Wimax), HSDPA(High Speed Downlink Packet Access) 등의 무선 통신망을 포함할 수 있으며, 시스템 구현 방식에 따라 이더넷(Ethernet), xDSL(ADSL, VDSL), HFC(Hybrid Fiber Coaxial Cable), FTTC(Fiber to The Curb), FTTH(Fiber To The Home) 등의 유선 통신망을 포함할 수도 있다.
아울러, 본 발명의 네트워크(600)는 예컨대, 다수의 접속망(미도시) 및 이들을 연결하는 코어망(미도시)으로 이루어진 이동통신망을 포함할 수 있다. 여기서, 접속망은 단말과 직접 접속하여 무선 통신을 수행하는 망으로서, 예를 들어, BS(Base Station), BTS(Base Transceiver Station), NodeB, eNodeB 등과 같은 다수의 기지국과, BSC(Base Station Controller), RNC(Radio Network Controller)와 같은 기지국 제어기로 구현될 수 있다. 또한, 전술한 바와 같이, 상기 기지국에 일체로 구현되어 있던 디지털 신호 처리부와 무선 신호 처리부를 각각 디지털 유니트(Digital Unit, 이하 DU라 함과 무선 유니트(Radio Unit, 이하 RU라 함)으로 구분하여, 다수의 영역에 각각 다수의 RU(미도시)를 설치하고, 다수의 RU를 집중화된 DU와 연결하여 구성할 수도 있다. 또한, 접속망과 함께 모바일 망을 구성하는 코어망(미도시)은 접속망과 외부 망, 예컨대, 인터넷망과 같은 다른 통신망을 연결하는 역할을 수행한다.
이러한 코어망은 앞서 설명한 바와 같이, 접속망 간의 이동성 제어 및 스위칭 등의 이동통신 서비스를 위한 주요 기능을 수행하는 네트워크 시스템으로서, 서킷 교환(circuit switching) 또는 패킷 교환(packet switching)을 수행하며, 모바일 망 내에서의 패킷 흐름을 관리 및 제어한다. 또한, 코어망은 주파수간 이동성을 관리하고, 접속망 및 코어망 내의 트래픽 및 다른 네트워크, 예컨대 인터넷망과의 연동을 위한 역할을 수행할 수도 있다. 이러한 코어망은 SGW(Serving GateWay), PGW(PDN GateWay), MSC(Mobile Switching Center), HLR(Home Location Register), MME(Mobile Mobility Entity)와 HSS(Home Subscriber Server) 등을 더 포함하여 구성될 수도 있다.
또한, 본 발명에 따른 네트워크(600)은 인터넷망을 포함할 수 있다. 인터넷망은 TCP/IP 프로토콜에 따라서 정보가 교환되는 통상의 공개된 통신망, 즉 공용망을 의미한다.
이러한 네트워크(600)를 통해서 제 1 단말장치(100), 전자 상거래 서버(200), 배송 서비스 서버(300), 정보 제공 서버(400), 및 제 2 단말장치(500)가 상호 연동하여 본 발명에 따른 증강 현실 기반의 정보 제공 서비스를 제공할 수 있다.
이때, 제 1 단말장치(100)는, 물품의 배송을 요청하는 발송인이 사용하는 단말 장치로, 여기서, 발송인은, 전자상거래 서비스를 통해 상기 물품을 구매한 구매자 또는 배송 서비스를 통해 물품 배송을 요청한 사용자가 될 수 있다. 상기 발송인인 구매자인 경우, 상기 제1 단말장치(100)는 발송인의 조작에 따라서 전자 상거래 서버(200)에 접속하여 물품을 구매하고, 구매한 물품의 배송 시 증강 현실 기반의 정보 제공 서비스를 요청할 수 있다. 또한, 상기 발송인인 배송 서비스 요청자인 경우, 상기 제1 단말장치(100)는 발송인의 조작에 따라서 배송 서비스 서버(300)에 접속하여 물품 배송을 요청하면서, 배송되는 물품과 관련하여 증강 현실 기반의 정보 제공 서비스를 요청할 수 있다. 이와 같이 제1 단말 장치(100)로부터의 증강 현실 기반의 정보 제공 서비스 요청은, 제1 단말 장치(100)로부터 정보 제공 서버(400)로 전송되거나, 상기 전자상거래 서버(200) 또는 배송 서비스 서버(300)를 통해서 정보 제공 서버(400)로 전송될 수 있다.
아울러, 상기 제1 단말 장치(100)는 증강 현실 기반의 정보 제공 서비스 요청과 함께 증강 현실 기반으로 제공한 정보를 상기 정보 제공 서버(400)로 제공한다. 이를 위하여, 상기 제1 단말 장치(100)는, 상기 정보 제공 서버(400)로부터 증강 현실로 제공 가능한 정보 목록을 수신하고, 상기 목록 중 원하는 정보를 선택하여 제공할 수 있다.
이때, 제1 단말장치(100)에서 구매한 물품은 전자상거래 서버(200)에서의 구매 절차에 따라서 처리되어 지정된 수취인에게 배송되며, 마찬가지로 상기 제1 단말장치(100)에서 배송 요청한 물품은 배송 서비스 서버(300)에 의한 배송 서비스 절차에 따라서 처리되어 수취인에게 배송된다. 여기서, 수취인은 구매자가 될 수 도 있고, 구매자 혹은 발송인이 아닌 제3자가 될 수도 있다.
상기 전자 상거래 서버(200)는, 네트워크(600)를 기반으로 한 전자상거래 서비스, 예를 들면 판매자와 소비자 간의 거래를 중개하는 오픈 마켓, 판매자에 의해 구성된 온라인 쇼핑몰, 공동 구매형 소셜 커머스 서비스를 운용하는 서비스 제공자 측의 서버 장치이다. 상기 전자 상거래 서버(200)는 자신과 연동하여 전자상거래 서비스를 이용할 수 있도록 구현된 어플리케이션을 배포하고, 상기 제1 단말 장치(100)는 상기 어플리케이션을 설치하여 실행함으로써 상기 전자 상거래 서버(200)와 연동하여 전자상거래 서비스를 사용자에게 제공할 수 있게 된다.
상기 어플리케이션은 상품 구매 처리를 포함할 수 있으며, 상기 상품 구매 처리는, 상품 조회, 선택, 주문 및 결제 절차를 포함한다.
본 발명에 있어서, 상기 전자상거래 서버(200)는 정보 제공 서버(400)를 통해 이루어지는 증강 현실 기반의 정보 제공 서비스를 지원할 수 있다. 구체적으로, 전자상거래 서버(200)는 제1 단말 장치(100)의 증강 현실 기반의 정보 제공 서비스 요청을 상기 정보 제공 서버(400)로 전달하며, 아울러, 전자상거래 서버(200)는 제1 단말 장치(100) 또는 정보 제공 서버(200)로 전자상거래 서버(200)내에서 관리되는 해당 물품과 관련된 정보를 상기 정보 제공 서버(400)로 제공할 수 있다. 또한, 상기 전자상거래 서버(200)는 상기 정보 제공 서버(400)에서 생성된 물품과 관련된 정보에 대응하는 정보 식별 코드를 배송되는 물품의 포장재에 부착할 수 있도록 물품의 배송을 수행하는 주체, 예를 들어, 구매인, 판매자, 및 배송업체 중 어느 하나에게 제공할 수 있다.
상기에서 물품에 관련된 정보는, 물품의 이미지, 물품의 이력, 물품의 사이즈, 물품의 색상, 물품의 생산 정보, 물품의 재료, 물품의 사용 설명서 등이 될 수 있다.
상기 배송 서비스 서버(300)는 배송 서비스 업체의 서버로서, 네트워크(600)를 통해서 배송 서비스 요청을 수신하고, 배송을 위한 발송인 정보, 수취인 정보를 접수하고, 그에 필요한 결제 처리를 수행한다. 배송 서비스 업체는 배송 서비스 서버(300)를 통해서 접수된 정보에 따라서 발송인으로부터 물품을 수거하여, 지정된 수취인에게 배달한다.
이러한 배송 서비스 서버(300)는 전자상거래 서버(200)와 마찬가지로 본 발명에 따른 증강현실 기반의 정보 제공 서비스를 지원할 수 있다. 일 예로 제1 단말 장치(100) 또는 전자상거래 서버(200)로부터 증강 현실로 제공할 정보를 수신하여 정보 제공 서버(400)로 전달하고, 정보 제공 서버(400)로부터 생성된 정보 식별 코드를 수신하여, 수취인에게 물품을 배송할 때 함께 배포되도록 할 수 있다.
다음으로, 정보 제공 서버(400)는 본 발명의 실시 예에 따른 증강 현실 기반의 정보 제공 서비스를 제공하는 장치로서, 증강현실로 제공될 정보에 관한 데이터의 수집, 이에 대응하는 정보 식별코드의 생성 및 배포, 배포된 정보 식별 코드를 이용한 증강현실 기반의 정보 제공을 수행한다.
이를 위하여 정보 제공 서버(400)는 제1 단말 장치(100), 전자상거래 서버(200), 배송 서비스 서버(300) 및 제2 단말 장치(500) 중 하나 이상과 연동한다.
구체적으로, 상기 정보 제공 서버(400)는 제1 단말 장치(100), 전자상거래 서버(200) 및 배송 서비스 서버(300) 중 어느 하나로부터 증강 현실 기반의 정보 제공 서비스 요청을 수신하고, 증강 현실로 제공될 물품과 관련된 정보를 수신한다. 상기 물품과 관련된 정보는, 상기 물품의 물품 이미지, 상기 배송 물품의 제조 또는 생산 정보, 상기 배송 물품의 구매처 정보, 상기 배송 물품의 사용 설명서, 상기 배송 물품의 이력정보, 발송인 정보, 수취인 정보, 상기 발송인이 수취인에게 전달하는 메시지 중 적어도 하나를 포함한다. 상기 물품과 관련된 정보는, 상기 제1 단말 장치(100), 전자상거래 서버(200) 및 배송 서비스 서버(300) 외의 다른 장치로부터 수집할 수 도 있다.
그리고, 상기 정보 제공 서버(400)는 상기 수집한 물품과 관련된 정보에 대응하는 정보 식별 코드를 생성하고, 상기 생성한 정보 식별 코드를 해당 물품의 배송 주체가 될 수 있는 제1 단말장치(100), 전자상거래 서버(200) 및 배송 서비스 서버(300) 중 어느 하나에 전달하는 형태로 배포한다. 이때, 상기 정보 식별 코드는, 상기 물품과 관련된 정보가 코드화되거나, 상기 물품과 관련된 정보가 저장된 저장소의 주소 정보(URL)가 코드화되어, 상기 물품과 관련된 정보를 획득할 수 있도록 이용된다.
상기 정보 식별 코드는 기존의 택배에 부착되는 운송장과 같은 형태로 출력되어 해당 물품, 더 구체적으로는 해당 물품의 포장재에 부착 될 수 있으며, 이렇게 정보 식별 코드가 부착된 물품은 배송 업체를 통해서 수취인에게 배송된다.
더하여, 상기 정보 제공 서버(400)는 제2 단말 장치(500)로부터 상기 배포된 정보 식별 코드를 이용한 정보 요청을 수신하여, 상기 정보 식별 코드에 대응하는 물품 관련 정보를 제2 단말 장치(500)로 제공할 수 있다.
제 2 단말장치(500)는, 본 발명에 따른 증강 현실 기반의 정보를 제공받는 사용자이다. 여기서, 정보를 제공받는 사용자는 배송 물품의 수취인이 된다. 이러한 제2 단말장치(500)는 수취인의 조작에 따라서 다음과 같이 동작한다.
구체적으로 제 2 단말장치(500)는 네트워크(600)를 통해 정보 제공 서버(400)와 통신하여 연동하는 증강현실 기반의 정보 제공 서비스 지원을 위한 어플리케이션을 실행 할 수 있다. 그리고 상기 어플리케이션의 실행을 통해, 제 2 단말장치(500)는 내장된 카메라를 활성화하고, 활성화된 카메라를 통해 배송 물품에 부착된 식별 코드를 촬영한다. 여기서, 배송 물품은 택배 또는 우편 등의 배송 서비스를 통해 배송되는 물품을 의미하며, 일반적으로 상자, 비닐 포장 등과 같은 포장재로 포장되어 있어 포장재를 제거하기 전에는 내용물에 대한 확인이 어려우며, 반면에 포장재가 제거한 후에는 반품이나 취소가 복잡해진다는 문제점이 있다. 본 발명은 이러한 배송 물품의 포장을 제거하기 전에 배송 물품에 대한 정보를 보다 용이하게 확인하기 위한 것으로, 이를 위해 배송 물품과 관련된 정보에 연관되어 생성된 정보 식별 코드를 해당 배송 물품의 포장에 부착하여 배송하도록 한다. 제 2 단말장치(500)는 이렇게 배송 물품에 부착된 정보 식별 코드를 촬영하면, 촬영 이미지에 포함된 정보 식별 코드를 추출하여 인식한 후, 인식한 정보 식별 코드를 이용하여 배송 물품에 관한 정보를 정보 제공 서버(400)에 요청하여 수신한다.
상기 정보 식별 코드는 바코드(barcode)로 대표되는 1차원 바코드, QR코드로 대표되는 2차원 바코드, 컬러 바코드 등과 같이 패턴, 바의 굵기, 컬러의 조합 등과 같이 시각적인 특징을 기반으로 정보를 기록하는 코드를 의미한다. 상기 정보 식별 코드는 현재 공지되어 이용되고 있는 QR 코드, 컬러 바코드 등 이외에도 향후 제안될 수 있는 다양한 형태의 코드를 포함할 수 있다.
본 발명의 바람직한 실시 예에서는 정보 식별 코드로서 2차원 바코드(QR 코드)를 이용한다. 2차원 바코드는 가로 세로를 활용하여 숫자 최대 7,089자, 문자 최대 4,296자, 한자 최대 1,817자 정도를 기록할 수 있는 코드로, 긴 문장의 인터넷 주소(URL)나 사진 및 동영상 정보, 지도 정보, 명함 정보 등을 모두 기록할 수 있다는 장점이 있어, 최근 기업의 홍보, 마케팅 수단으로 폭넓게 활용되고 있다. 본 발명에서는 상술한 2차원 바코드에 물품에 관련 정보를 포함하거나, 상기 물품에 관한 정보에 접근할 수 있는 주소 정보(URL)를 포함하도록 생성한다. 이러한 정보 식별 코드는 정보 제공 서버(400)에서 생성되어 배포됨으로써, 해당 물품에 부착되어 배송된다.
따라서, 본 발명의 제 2 단말 장치(500)가 상기 정보 식별 코드를 해독하여 물품과 관련된 정보를 획득하거나, 물품과 관련된 정보에 접근할 수 있는 주소정보를 추출한 후, 상기 주소 정보에 대응하는 정보를 정보 제공 서버(400)에 요청하여 해당 물품에 관한 정보를 획득할 수 있게 된다.
이렇게 획득한 물품에 관한 정보는 배송된 물품과 관련하여 수취인에게 제공되어야 할 정보라면 어떠한 정보라도 포함될 수 있다. 구체적으로 예를 들면, 상기 정보는 배송 물품의 사용 설명서, 배송 물품의 이미지, 배송 물품의 제조 또는 생산 정보, 상기 배송 물품의 구매처 정보, 상기 배송 물품의 이력정보 등의 배송 물품과 관련된 정보는 물론, 배송 물품의 광고, 제조 회사의 기업 광고, 각종 마케팅 정보, 물품의 배송을 요청한 사용자, 즉, 발송인이 수취인에게 전달하는 메시지를 포함할 수 있다.
이러한 물품에 관한 정보를 정보 제공 서버(400)로부터 수신하게 되면, 제 2 단말 장치(500)은 수신된 물품에 관한 정보를 활성화된 카메라를 통해 촬영되는 영상(실사 이미지)와 결합하여 증강현실로 출력한다. 즉, 본 발명의 제 2 단말 장치(500)는 정보 식별 코드에 대응하는 물품에 관한 정보를 카메라를 통해 촬영되고 있는 실사 영상과 결합하는 증강 현실 형태로 출력함으로써, 사용자는 보다 더 생동감 있게 물품에 관한 정보를 확인할 수 있도록 하며, 배송된 물품이 어떤 물품인지를 포장재의 제거없이 보다 더 쉽고 실감나게 확인할 수 있게 된다. 이때, 제 2 단말 장치(500)의 움직임(이동)에 따라 증강현실로 표시되는 정보를 변경함으로써 보다 더 생동감 있는 정보 제공이 가능하게 된다.
더하여, 상기 제2 단말장치(500)는 상기 물품과 관련된 정보에 사적인 정보가 포함되는 경우(예를 들어, 발송인의 메시지 등), 정당한 수취인만 확인할 수 있도록 하기 위하여, 제2 단말장치(500)의 사용자를 식별할 수 있는 사용자 식별 정보(예를 들어, 장치 식별 번호, 이동통신번호, 사용자 ID 등)를 추출하여 상기 정보 제공 서버(400)로 전송할 수 있다.
이에, 상기 정보 제공 서버(400)는, 정보를 요청한 제2 단말장치(500)로부터 수신한 사용자 식별 정보를 기 등록된 수취인 정보와 비교하여 지정된 수취인인지 여부를 판단하고, 그 판단에 따라서 제2 단말장치(500)로의 정보 제공을 제어할 수 있다.
이상과 같이 구성된 정보 제공 시스템의 동작을 도 2 및 도 3을 참조하여 구체적으로 설명한다.
도 2는 본 발명의 실시 예에 따른 전자상거래 서비스와 연동하여 이루어지는 증강 현실기반의 정보 제공 과정을 나타낸 흐름도이다.
도 2에서, 전자상거래 서비스를 이용하는 사용자(이하에서, 구매자라 함)는, 제1 단말장치(100)를 통해 전자상거래 서버(200)에 접속하여, 전자상거래 서비스를 통해 제공되는 물품 중 특정 물품을 선택하여 구매할 수 있다.
이 경우, 제1 단말장치(100)와 전자상거래 서버(200) 간에 전자상거래 서버(200)에서 지정한 구매 절차(물품 선택, 구매요청, 결제)가 수행된다(S101). 여기서, 구매 절차는 전자상거래 서비스 상에서 이루어지는 것이므로 그 상세한 설명은 생략한다.
이러한 전자상거래 서비스의 구매 절차를 수행하는 중에, 증강 현실 기반의 정보 서비스를 요청할 수 있으며(s102), 상기 증강 현실 기반의 정보 서비스 요청은 전자상거래 서버(200)를 통해서 정보 제공 서버(400)로 전송된다(S103).
이 때 상기 증강현실 기반의 정보 서비스 요청은 구매한 물품을 수취한 수취인에게 해당 물품과 관련된 정보를 제공하도록 요청하는 것으로서, 상기 실시 예와 달리, 상기 증강 현실 기반의 정보 서비스 요청은, 구매자가 아닌 상기 선택한 물품의 판매자 혹은 전자상거래 서비스 제공자에 의해서 요청될 수도 있다.
더하여, 구매자는 제1 단말장치(100)를 통해 증강현실 기반으로 제공할 정보를 선택할 수 있으며, 이렇게 선택된 정보는 전자상거래 서버(200)를 통해서 정보제공서버(400)로 전송된다(S104, S105), 보내는 사람 정보 및 받는 사람의 정보를 입력 하는 과정을 거칠 수 있다. 여기서 증강현실로 제공할 정보에는 물품명, 물품 이미지, 수신인 정보, 물품 이력, 물품 사용 설명서, 메시지 등과 같이 배송되는 물품 및/또는 발송인과 연관된 다수의 정보들이 포함 될 수 있다.
정보 제공 서버(400)는 수신한 정보를 기반으로 정보 식별 코드를 생성한다(S106). 구체적으로, 상기 정보 제공 서버(400)는 상기 수신한 정보를 저장하고, 상기 저장한 정보에 접근할 수 있는 주소 정보(URL: Uniform Resource Locator)를 포함하도록 상기 정보 식별 코드를 생성하거나, 상기 수신한 정보를 포함하도록 상기 정보 식별 코드를 생성할 수 있다.
그리고 정보 제공 서버(400)는 생성한 정보 식별 코드를 전자상거래 서버(200)로 제공한다(S107).
이 때 생성한 정보 식별 코드는, 패턴, 굵기, 컬러의 조합에 의해 정보를 기록하는 코드로서, 기 공지된 코드라면 어떠한 것이라도 이용 가능하다. 구체적으로 예를 들면, 본 발명의 일 실시 예에서 상기 정보 식별 코드는 QR 코드이다. 그러나 이에 한정하는 것은 아니고, 2차원 바코드, 컬러 코드 등 정보를 수용할 수 있는 코드라면 1차원, 2차원, 3차원 코드 등 그 종류에 구애 받지 않고 향후 실용화될 수 있는 모든 코드가 다양하게 적용될 수 있다.
한편, 상기 S107단계는 상기 정보 제공 서버(400)는 생성된 정보 식별 코드를 해당하는 배송 물품에 부착할 수 있도록 배포하기 위한 과정으로, 도 2의 실시 예에서는 전자상거래 서비스 제공자 측에서 물품의 배송을 제어하거나, 관리할 수 있으므로, 상기 정보 식별 코드를 상기 전자상거래 서버(200)로 전송한다.
따라서, 상기 전자상거래 서버(200)는 전자상거래 서비스 절차에 포함된 배송 절차에 따라서, 상기 정보 제공 서버(400)로부터 수신한 정보 식별 코드를 해당 물품에 부착하여 배송할 수 있도록 처리한다(S108). 예를 들면, 상기 전자상거래 서버(200)는 물품의 배송이 판매자에 의해 이루어지는 경우, 상기 정보 식별 코드를 해당 판매자에게 전송하여, 판매자가 정보 식별 코드를 인쇄하여 해당 물품에 부착 후 배송할 수 있도록 한다. 다른 예에서, 전자상거래 서비스 제공자가 배송까지 수행하는 경우, 상기 전자상거래 서버(200)는 수신한 정보 식별 코드를 배송 담당자에게 전송하여 상기 배송 담당자가 정보 식별 코드를 인쇄하여 해당 물품에 부착 후 전송하도록 할 수 있다. 여기서, 구체적인 배송 절차는 본 발명에 따른 정보 제공과는 관련없이 전자상거래 서비스에서 지정된 절차에 따라 이루어지므로 그에 대한 상세한 설명은 생략하기로 한다.
이 때, 상기 정보 식별 코드는 운송장과 함께 출력되거나, 별도의 스티커 형태로 인쇄될 수 있다.
이와 같은 과정을 통해 정보 식별 코드를 부착한 물품은 해당하는 수취인에게 배송되며, 이후, 상기 물품을 배송 받은 수취인이 소지한 제2 단말 장치(500)와 정보 제공 서버(400)의 연동을 통해 증강 현실 기반의 정보가 수취인에게 제공되며, 그 구체적인 과정은 다음과 같이 이루어 질 수 있다.
즉, 수취인이 배송된 물품을 수취하고(S109), 배송 받은 물품과 관련된 정보를 원할 경우, 제2 단말 장치(500)의 카메라를 활성화시켜 상기 물품에 부착된 정보 식별코드 촬영하면 촬영할 수 있으며, 이에 촬영된 이미지로부터 상기 정보 식별 코드를 추출하여 인식한다(S110). 상기 정보 식별 코드의 인식은 상기 정보 식별 코드를 해독하여 디지털 데이터 혹은 정보 값으로 변환하는 과정을 의미한다. 본 실시 예에서, 상기 정보 식별 코드는 증강 현실로 제공되는 정보에 접근할 수 있는 주소 정보를 포함하는 것으로 가정한다.
그리고 상기 제2 단말 장치(500)는 상기 S110 단계를 통해서 정보 식별 코드로부터 추출한 주소 정보를 기반으로 정보 제공 서버(400)에 물품과 관련된 정보를 요청한다(S111).
한편, 본 발명에 있어서, 증강 현실 기반의 정보 제공은 프라이버시 보호 등을 위해서 지정된 수취인에 대해서만 제공되도록 할 수 있으며, 이를 위한 사용자 인증 처리를 위해서 상기 제2 단말 장치(500)는 상기 S111 단계에서 정보를 요청하면서, 제2 단말 장치(500)의 사용자, 즉, 수취인을 식별할 수 있는 정보(이하, 수취인 식별 정보)를 함께 전송할 수 있다.
아울러, 상기 S110 단계에서 정보 식별 코드를 촬영하고 인식하기 위해 제2 단말 장치(500)는 카메라를 활성화시켜 영상을 촬영하고, 촬영된 영상을 포함된 정보 식별 코드를 인식하여 정보 제공 서버(400)에 접근하는 어플리케이션을 설치하여 실행할 수 있다.
더하여, 상기 정보 식별 코드의 촬영이란, 카메라의 일정 프레임 내로 식별 코드가 위치되는 과정을 포함할 수 있으며, 카메라의 촬영 버튼을 누르는 과정을 포함할 수도 있다. 이 때, 카메라의 프레임 내로 정보 식별 코드가 위치할 수 있도록 별도의 가이드라인을 활성화된 카메라 상에 표시 시킬 수 있으며, 사용자는 가이드라인에 따라 프레임 내로 식별 코드가 들어올 수 있도록 제 2 단말 장치(500)를 움직이는 동작을 수행 할 수 있다.
아울러, 상기 S110단계에서 인식된 정보 식별 코드에, 정보에 접근할 수 있는 정보가 아니라 물품과 관련된 정보가 포함된 경우, 상기 제2 단말 장치(500)는 S111 단계를 통해 정보 요청을 수행할 필요가 없이, 바로 S115단계를 수행하여 추출한 물품 관련 정보를 증강 현실로 출력하거나, s111단계에서 정보 요청 없이, 수취인 식별 정보를 전송하여 사용자가 정당한 수취인인지 확인하는 사용자 인증을 요청할 수 있다.
다음으로 S111단계 이후, 정보 제공 서버(400)는 발송인이 지정한 수취인에게만 정보를 제공하기 위해, 제2 단말 장치(500)의 사용자가 정당한 수취인이 맞는지 여부를 확인하는 사용자 인증을 수행할 수 있다(s112). 상기 사용자 인증은, 발송인이 지정한 수위치인 정보와 상기 제2 단말 장치(500)로부터 전송된 수취인 식별 정보를 비교하여 일치하는 경우 정당한 수취인으로 판단함에 의해 이루어질 수 있다.
S112 단계의 판단 결과, 지정된 수취인 정보와 수신한 수취인 식별 정보가 일치하는 경우, 정보 제공 서버(400)는 제 2 단말 장치(500)로 해당 주소 정보에 대응하여 저장된 물품 관련 정보를 제공하고(S114), 일치하지 않는 경우, 정보 제공 서버(400)는 제 2 단말 장치(500)로 지정된 수취인이 아니므로 정보를 제공할 수 없음을 알리는 정보제공 오류 안내 메시지를 보낼 수 있다(S113).
상기 s114단계를 통해서 물품 관련 정보를 수신한 제2 단말 장치(500)는 수신한 물품 관련 정보를 카메라를 통해 촬영되고 있는 실제 영상과 결합하여 증강 현실로 출력한다(S115).
참고로, 사용자 인증이 불필요한 경우, 정보 제공 서버(400)는 S112단계 내지 S113단계를 생략하고, S114 단계를 수행하여, 해당 주소 정보에 대응하여 저장된 물품과 관련된 정보를 바로 제2 단말 장치(500)로 전송할 수 있다.
한편, 상술한 바와 같이 사용자 인증을 통해 지정된 수취인에게만 정보를 제한하여 제공함으로써, 발송인이 수취인에게 전달하는 개인적인 메시지를 제공하거나, 배송되는 물품에 대한 정보가 외부로 노출되기를 원하지 않는 경우, 사용자의 요구를 충족시켜 안전하게 정보를 전달할 수 있게 된다.
아울러, 상기 사용자 인증은, 정보 식별 코드를 인식하여 접근한 제2 단말 장치(500)로부터 해당 제2 단말 장치(500) 혹은 그 사용자를 식별할 수 있는 고유 정보, 즉, 제2 단말장치(500)에 할당된 IP주소, MAC주소, 이동통신번호 혹은 제2 단말 장치(500)를 사용하는 수취인의 얼굴 이미지, 수취인의 생체 정보 중 어느 하나를 수취인 식별 정보로서 전송하여 비교하도록 함으로써 이루어질 수 있다.
이와 같이 본 발명의 일 실시 예에 따르면 수취인인 배송된 물품을 개봉하지 않더라도 배송 물품에 대한 정보를 카메라를 통한 촬영 동작을 통해 간단히 제공받아 확인할 수 있으며, 특히, 배송된 물품의 촬영 이미지와 결합하여 증강 현실로 제공함으로써 직관적인 방식으로 물품 정보를 확인할 수 있게 된다.
특히, 수취인이 배송된 물품의 이미지와 관련 정보를 증강 현실로 결합하여 제공함으로써, 발송인의 메시지 전송 시, 수취인이 발송인의 메시지를 보다 생동감 있게 확인 할 수 있게 된다.
도 3 은 본 발명의 실시 예에 따른 배송 서비스와 연계된 증강 현실기반의 정보 제공방법을 나타낸 흐름도이다.
도 3 배송서비스를 이용하는 사용자는 제 1 단말장치(100)를 통해 배송 서비스 서버(300)에 물품 배송 요청과, 증강현실 기반 정보 서비스를 요청한다(S116, S117). 이때, 배송 처리는 배송 서비스 절차에 따라 이루어진다.
배송 서비스 절차와 더불어, 상기 배송 서비스 서버(300)는 상기 증강 현실 기반의 정보 서비스 요청을 정보 제공 서버(400)로 전송한다(S118).
이때, 상기 증강현실 기반의 정보 서비스 요청은 구매한 물품을 수취한 수취인에게 해당 물품과 관련된 정보를 제공하도록 요청하는 것으로서, 상기 실시 예와 달리, 상기 증강 현실 기반의 정보 서비스 요청은, 사용자 혹은 배송 서비스 서버(300)에 의해서 요청될 수도 있다.
더하여, 사용자는 제1 단말장치(100)을 통해 증강현실 기반으로 제공할 정보를 선택할 수 있고, 이렇게 선택된 정보는 정보 제공 서버(400)로 전송된다(S119). 이 때 보내는 사람 정보 및 받는 사람의 정보를 입력하는 과정을 거칠 수 있으며, 여기서 증강현실로 제공할 물품에 관한 정보에는 물품 이미지, 수신인 정보, 물품 이력, 물품 사용 설명서, 발송인의 메시지 등이 포함 될 수 있다.
정보 제공 서버(400)는 수신한 정보를 기반으로 정보 식별 코드를 생성한다(S121). 구체적으로, 상기 정보 제공 서버(400)는 상기 수신한 정보를 저장하고(S120), 상기 저장한 정보에 접근할 수 있는 주소 정보(URL: Uniform Resource Locator)를 포함하도록 상기 정보 식별 코드를 생성하거나, 상기 수신한 정보를 포함하도록 상기 정보 식별 코드를 생성할 수 있다.
그리고, 정보 제공 서버(400)는 생성한 정보 식별 코드를 배송 서비스 서버(300)에 전송한다(S122).
상기 S122단계는 상기 정보 제공 서버(400)는 생성된 정보 식별 코드를 해당하는 배송 물품에 부착할 수 있도록 배포하기 위한 과정이다.
이 때 생성한 정보 식별 코드는, 패턴, 굵기, 컬러의 조합에 의해 정보를 기록하는 코드로서, 기 공지된 코드라면 어떠한 것이라도 이용 가능하다. 구체적으로 예를 들면, 본 발명의 일 실시 예에서 상기 정보 식별 코드는 QR 코드이다. 그러나 이에 한정하는 것은 아니고, 2차원 바코드, 컬러 코드 등 정보를 수용할 수 있는 코드라면 1차원, 2차원, 3차원 코드 등 그 종류에 구애 받지 않고 향후 실용화될 수 있는 모든 코드가 다양하게 적용될 수 있다.
이 후, 배송 서비스 서버(300)는 정보 식별 코드를 포함하는 운송장을 출력하고 상품 배송처리를 수행한다(S123).
예를 들면, 상기 물품의 배송이 배송업체에 의해 이루어지는 경우, 상기 정보 식별 코드를 해당 배송업체에게 전송하여, 배송업체가 정보 식별 코드를 인쇄하여 해당 물품에 부착 후 배송할 수 있도록 한다.
이 때, 상기 정보 식별 코드는 운송장과 함께 출력되거나, 별도의 스티커 형태로 인쇄될 수 있다.
상기 예와 달리, 정보 식별 코드는 제1 단말 장치(10)로 제공될 수 도 있으며, 이 경우, 사용자가 직접 정보 식별 코드를 출력하여 배송할 물품의 포장재에 부착할 수 있다.
이후, 배송된 물품의 수취인이 정보 식별 코드를 통해 물품 정보를 얻게 되는 단계는 다음과 같이 이루어 질 수 있다.
수취인이 배송 물품을 수취하고(S124), 배송 받은 물품과 관련된 정보를 원할 경우, 제2 단말 장치(500)의 카메라를 활성화시켜 상기 물품에 부착된 정보 식별코드 촬영하면 촬영할 수 있으며, 이에 촬영된 이미지로부터 상기 정보 식별 코드를 추출하여 인식한다(S125).
그리고, 제 2 단말 장치(500)는 정보 제공 서버(400)에 수신자 식별 정보가 포함된 정보를 요청한다(S126). 이 때, 식별코드를 촬영하고 정보를 요청하는 과정은 어플리케이션을 통해 이루어 질 수 있다.
한편, 본 발명에 있어서, 증강 현실 기반의 정보 제공은 프라이버시 보호 등을 위해서 지정된 수취인에 대해서만 제공되도록 할 수 있으며, 이를 위한 사용자 인증 처리를 위해서 상기 제2 단말 장치(500)는 상기 S126 단계에서 정보를 요청하면서, 제2 단말 장치(500)의 사용자, 즉, 수취인을 식별할 수 있는 정보(이하, 수취인 식별 정보)를 함께 전송할 수 있다.
아울러, 상기 S125 단계에서 정보 식별 코드를 촬영하고 인식하기 위해 제2 단말 장치(500)는 카메라를 활성화시켜 영상을 촬영하고, 촬영된 영상을 포함된 정보 식별 코드를 인식하여 정보 제공 서버(400)에 접근하는 어플리케이션을 설치하여 실행할 수 있다.
더하여, 상기 정보 식별 코드의 촬영이란, 카메라의 일정 프레임 내로 식별 코드가 위치되는 과정을 포함할 수 있으며, 카메라의 촬영 버튼을 누르는 과정을 포함할 수도 있다. 이 때, 카메라의 프레임 내로 정보 식별 코드가 위치할 수 있도록 별도의 가이드라인을 활성화된 카메라 상에 표시 시킬 수 있으며, 사용자는 가이드라인에 따라 프레임 내로 식별 코드가 들어올 수 있도록 제 2 단말 장치(500)를 움직이는 동작을 수행 할 수 있다.
이 때, 상기 S125단계에서 인식된 정보 식별 코드에, 정보에 접근할 수 있는 정보가 아니라 물품과 관련된 정보가 포함된 경우, 상기 제2 단말 장치(500)는 S126 단계를 통해 정보 요청을 수행할 필요가 없이, 바로 S131단계를 수행하여 추출한 물품 관련 정보를 증강 현실로 출력하거나, S126단계에서 정보 요청 없이, 수취인 식별 정보를 전송하여 사용자가 정당한 수취인인지 확인하는 사용자 인증을 요청할 수 있다.
다음으로 정보 제공 서버(400)는 수취인이 배송 상품을 수신할 수 있는 정당한 수취인인지를 판단하기 위해 단말 장치(500) 사용자의 인증 정보, 주문자 정보 등을 비교하여, 사용자를 인증하는 과정을 수행할 수 있다(S127). S127 단계의 판단 결과 지정된 수취인 정보와 수신한 수취인 식별 정보가 일치하는 경우, 정보 제공 서버(400)는 제 2 단말 장치(500)로 해당 주소 정보에 대응하여 저장된 물품 관련 정보를 제공하고(S129), 일치하지 않는 경우, 정보 제공 서버(400)는 제 2 단말 장치(500)로 지정된 수취인이 아니므로 정보를 제공할 수 없음을 알리는 정보제공 오류 안내 메시지를 보낼 수 있다(S128).
상기 S129단계를 통해서 물품 관련 정보를 수신한 제2 단말 장치(500)는 수신한 물품 관련 정보를 카메라를 통해 촬영되고 있는 실제 영상과 결합하여 증강 현실로 출력한다(S130).
한편, 상술한 바와 같이 사용자 인증을 통해 지정된 수취인에게만 정보를 제한하여 제공함으로써, 발송인이 수취인에게 전달하는 개인적인 메시지를 제공하거나, 배송되는 물품에 대한 정보가 외부로 노출되기를 원하지 않는 경우, 사용자의 요구를 충족시켜 안전하게 정보를 전달할 수 있게 된다.
이 때, 수신자를 인증하는 방법은, 예를 들어, 수취인 단말(500)에 저장된 어플리케이션 실행과 함께 단말 장치의 전면부 카메라도 같이 실행 되고, 전면부 카메라를 통해 수취인의 얼굴 이미지를 인식하여 물품 구매자가 지정한 수취인과 일치하는지 여부를 판단하거나, 수취인의 생체 정보 예컨대, 홍채 인식 또는 지문 인식 등을 통해 일치 여부를 판단 할 수 있다. 더하여, 정보 식별 코드를 인식하여 접근한 단말 장치로부터 해당 단말 장치에 할당된 IP주소, MAC주소, 이동통신번호, 수취인의 얼굴 이미지 중 어느 하나가 일치하는지 여부로 인증할 수 있다.
도 4는 본 발명에 따른 정보 제공 서버(400)의 구성을 나타내는 도면이다.
도 4를 참조하면, 도 5와 같은 동작을 수행하기 위하여, 정보 제공 서버(400)는 네트워크 통신부(410), 제어부(420), 및 저장부(430)를 포함 할 수 있다. 도 4는 본 발명에 따른 정보 제공 서버(400)의 기본적인 구성 요소를 개략적으로 나타낸 것으로서, 정보 제공 서버(400)는 필요에 따라서 도시된 구성 이외에 다른 구성을 더 포함할 수 있다. 상기 네트워크 통신부(410), 제어부(420) 및 저장부(430)는 컴퓨터 소프트웨어, 펌웨어 혹은 하드웨어로 구현되거나, 이들 중 하나 이상의 결합으로 구현 가능하다.
네트워크 통신부(410)은 제1,2 단말 장치(100, 500), 전자 상거래 서버(200), 배송 서비스 서버(300)와 통신하기 위한 것으로, 택배사 시스템 등의 연계 서버와 연동하여 배송 물품 정보 제공 서비스에 따른 필요한 정보의 송수신을 지원 할 수 있다.
제어부(420)는 본 발명의 실시 예에 따른 정보 제공 서버(400)의 전반적인 제어를 수행하는 것으로, 운영체제 및 정보 식별 코드의 생성 및 관리를 수행 할 수 있도록 하는 프로세스 장치가 될 수 있다. 여기서, 정보 식별 코드는 배송 물품별로 각각 생성될 수 있으며, 배송 물품의 종류 또는 수신자별 또는 기타 기준에 따라 생성 될 수도 있다.
또한, 제2 단말 장치(500)로부터 수신한 정보 식별 코드를 수신하고 수신된 정보 식별 코드에 해당하는 배송 물품과 관련된 정보를 제2 단말 장치(500)로 전송하는데 이용된다.
더하여, 발송인이 제공한 수취인 정보와 배송된 물품을 수신한 수취인 식별 정보를 비교하여 일치하는 경우에만 택배 상자에 포함된 물품과 관련된 정보를 단말 장치로 전송한다.
이 때, 수취인 식별 정보는 정보 식별 코드를 인식하여 접근한 제2 단말 장치(500)로부터 전송되는 것으로서, 해당 단말 장치에 할당된 IP주소, MAC주소, 이동통신번호, 수취인의 얼굴 이미지, 수취인의 생체 정보 중 어느 하나일 수 있다.
저장부(430)는 발송인이 제공한 배송 물품과 관련된 정보를 저장하고 관련 서비스를 제공하기 위한 모든 프로그램을 저장하는 부분으로, 이 때 정보는, 물품의 이미지, 물품의 이력, 물품의 사용 설명서, 발송인의 메시지, 수취인의 식별 정보 등이 포함 될 수 있다.
도 5는 본 발명에 따른 증강 현실 기반의 정보 제공 서비스에 있어서, 정보 제공 서버(400)의 동작을 설명하기 위한 순서도이다.
도 5를 참조하면, 본 발명에 따른 증강 현실 기반의 정보 제공 서비스는, 정보 제공 서버(400)가 전자 상거래 서버(200) 및/또는 배송 서비스 서버(300)들과의 연동을 통해서 제공하는 것으로서, 이하에서 설명하는 정보 제공 서버(400)의 동작 설명을 통해서 더 쉽게 이해될 수 있다.
도 5를 참조하면, 정보 제공 서버(400)는 제1 단말 장치(100) 또는 전자 상거래 서버(200) 또는 배송 서비스 서버(300)로부터 증강현실 기반 정보 제공 서비스 요청을 수신할 수 있다(S201).
요청된 증강현실 기반의 정보 제공 서비스를 수행하기 위해서는, 증강현실로 제공할 정보, 즉, 물품 관련 정보가 필요하다.
따라서, 정보 제공 서버(400)는 증강현실로 제공할 물품 관련 정보를 획득하여 하는데, 이를 위하여, 상기 서비스를 요청한 제1 단말 장치(100) 또는 전자 상거래 서버(200) 또는 배송 서비스 서버(300)로 증강 현실로 제공 가능한 정보 목록을 제공하고(S204), 상기 목록 중에서 선택된 정보를 상기 1 단말 장치(100) 또는 전자 상거래 서버(200) 또는 배송 서비스 서버(300)로부터 수신할 수 있다(S205). 더하여, 상기 정보 제공 서버(400)는 상기 정보 목록을 제공하기 위하여, 전자상거래 서버(200) 또는 배송 서비스 서버(300) 및 그 외의 다른 서버 장치와 연동할 수 있다. 즉, 상기 전자상거래 서버(200) 또는 배송 서비스 서버(300) 및 그 외의 다른 서버 장치로부터 해당 물품과 관련된 정보를 제공받아, 상기 정보 목록을 생성할 수 있다.
그리고 상기 증강 현실로 제공 가능한 정보는 배송되는 물품의 이미지, 물품의 이력을 포함하는 물품의 생산, 유통, 사용과 관련된 모든 정보와, 수취인 정보를 포함하는 배송과 관련된 정보, 및 발송인 메시지 등을 포함 할 수 있다.
이와 같이 증강 현실로 제공할 물품 관련 정보를 수신하여 저장하면, 상기 정보 제공 서버(400)는, 상기 저장한 물품 관련 정보를 기반으로 정보 식별 코드를 생성하고, 생성된 정보 식별 코드를 해당 물품의 배송을 처리하는 측, 예를 들어, 전자상거래 서버(200) 또는 배송 서비스 서버(300)로 제공한다(s206). 상기 전자상거래 서버(200)는 수신한 정보 식별 코드를 기 설정된 배송 절차에 따라서 판매자에게 제공하거나 지정된 배송 서비스 서버(300)로 다시 전송할 수 있다.
그리고, 정보 식별 코드를 수신한 판매자, 또는 배송 서비스 업자 또는 전자 상거래 업자는 상기 정보 식별 코드를 인쇄물 형태로 출력하여 해당 물품에 부착하여 배송을 수행한다.
상술한 바와 같이 정보 식별 코드의 생성 및 배포가 완료된 후, 정보 제공 서버(400)는 배포된 정보 식별 코드를 이용한 정보 요청을 처리하기 위해 대기한다.
상기와 같이 대기 중, 물품을 배송 받은 수취인이 제2 단말 장치(500)를 이용하여 배송된 물품에 부착된 정보 식별 코드를 촬영하고 인식하여, 상기 정보 식별 코드에서 추출된 정보를 기반으로 정보를 요청하면(S207), 상기 정보 제공 서버(400)는 기 등록된 수취인의 식별정보와 상기 정보를 요청한 제2 단말 장치(500)로부터 수신된 수취인 식별 정보를 비교하여 정당한 사용자인지를 판단하는 사용자 인증하는 과정을 수행한다(S208). 상기 제2 단말 장치(500)는 정보 요청과 함께 상기 수취인 식별 정보를 정보 제공 서버(400)로 전송하거나, 정보 제공 서버(400)의 요청에 따라서 상기 수취인 식별 정보를 정보 제공 서버(400)로 전송할 수 있다.
S208단계에서 정보 제공 서버(400)는, 예를 들어, 제2 단말 장치(500)로부터 이동통신번호를 수신할 수 있으며, 수신된 이동통신번호의 사용자가 기 등록된 수취인인지를 확인할 수 있다. 다른 실시 예에서, 정보 제공 서버(400)는 수취인의 얼굴 이미지를 기 저장하고, 제2 단말 장치(500)는 카메라를 활성화시켜 사용자, 즉, 수취인의 얼굴을 촬영하고, 촬영된 얼굴 이미지를 정보 제공 서버(400)로 전송할 수 있다. 이때, 정보 제공 서버(400)는 수신된 얼굴 이미지의 특징 정보를 추출하여, 기 저장된 얼굴 이미지의 특징 정보와 일치하는 지 비교함으로써 동일 사용자인지를 판단할 수 있다.
이외에, 수취인을 식별하기 위한 정보로서, 지문, 정맥, 홍채, 음성 등과 같은 생체 정보를 이용할 수 있다.
상기 S208단계는 정보 제공 서버(400)가 정당한 수취인의 식별 정보를 제2 단말 장치(500)로 전송함에 의해, 제2 단말 장치(500)에서 이루어질 수도 있다. 이때, 사용자 인증의 수행 주체만 달라질 뿐 수행 방법은 동일하다.
참고로, 정당한 수취인은 전자상거래 서비스의 물품 구매자가 되거나, 물품 배송을 요청한 발송인에서 지정한 수취인이 될 수 있다.
이러한 과정을 통해 정당한 수취인인 것으로 판단되면(S209), 정보 제공 서버(400)는 제2 단말 장치(500)에서 인식한 정보 식별 코드에 대응하는 물품과 관련된 정보를 제2 단말 장치(500)로 전송하고(S211), 정당한 수취인이 아닌 것으로 판단되면, 정보 제공이 불가함을 알리는 안내 메시지를 제2 단말 장치(500)로 전송한다(S210).
도 6 은 제1,2 단말 장치(100,500)의 구성의 일 예를 나타내는 도면이다.
도 6을 참조하면, 단말 장치는 제어부(510), 통신부(520), 카메라부(530), 생체 정보 인식부(540), 저장부(550), 입력부(560), 출력부(570)를 포함 할 수 있다. 도 6는 본 발명에 따른 제1,2 단말 장치(100, 500)의 기본적인 구성 요소를 개략적으로 나타낸 것으로서, 제1,2 단말 장치(100, 500)는 필요에 따라서 도시된 구성 이외에 다른 구성을 더 포함할 수 있다.
통신부(520)은 네트워크(600)를 통해서 데이터를 송수신하는 수단으로서, 특히 제1,2 단말 장치(100,500)의 통신부520)는 네트워크(600)를 통해 정보 제공 서버와 통신하여 촬영된 정보 식별 코드의 인식 결과 또는 상품 이미지의 전송, 판독 또는 분석된 정보의 전송 등과 같은 택배 내 관련 정보를 제공하기 위한 데이터를 송수신하기 위한 기능을 수행한다.
여기서, 통신부(520)는 무선통신 모듈(미도시) 및 유선통신 모듈(미도시) 중 적어도 하나를 포함할 수 있다.
그리고, 무선통신 모듈은 무선통신 방법에 따라 데이터를 송수신하기 위한 구성이며, 제1,2 단말 장치(100, 500)가 무선통신을 하는 경우, 무선망 통신 모듈, 무선랜 통신 모듈 및 무선팬 통신 모듈 중 어느 하나를 이용하여 데이터를 전자상거래 서버(200)로 송수신할 수 있다.
또한, 유선통신 모듈은 유선으로 데이터를 송수신하기 위한 것이다. 유선통신 모듈은 유선을 통해 네트워크(600)에 접속하여, 전자상거래 서버(200)에 데이터를 송수신할 수 있다.
상기 제어부(510)는 운영 체제(OS, Operation System) 및 각 구성을 구동시키는 프로세스 장치가 될 수 있다.
특히 본 발명의 실시 예에 따른 제어부(510)는 제1,2 단말 장치(100, 500)의 전반적인 제어를 수행하며, 전자상거래 서버(200)와의 연동을 통해 사용자에게 전자상거래 서비스를 제공하는 것을 제어할 수 있다.
더하여, 정보 식별 코드 또는 택배 상자의 이미지인 것을 특징으로 하는 마커를 기준으로, 카메라의 이동에 따라 변화하는 마커의 위치에 맞추어 출력하는 정보의 종류, 위치, 크기, 색상, 형상, 방향, 상태 중 어느 하나 이상을 변화 시키는 기능을 포함 할 수 있다.
특히, 제2 단말 장치(500)에서 제어부(510)는 영상에서 식별 코드의 마커를 확인하고, 마커의 위치를 어플리케이션의 제어에 따라 수신된 물품 관련 데이터가 중첩되어 표시되도록 제어하는 과정을 수행 할 수 있다. 이 때, 사용자가 단말장치를 이동시켜 카메라를 통해 현재 촬영되는 영상에서 식별 코드의 마커가 인식되지 않을 경우, 이를 사용자에게 안내할 수 있으며, 물품 관련 데이터가 현재 촬영되고 있는 영상과 중첩되어 출력되도록 필요한 과정을 수행 할 수 있게 된다.
또한 본 발명의 제어부(510)는 증강 현실 기반으로 출력시, 기 설정된 마커를 기준으로 물품 관련 정보를 회전하거나 이동시키거나 변형시켜 출력되도록 제어 할 수 있다.
카메라부(530)는 어플리케이션에 의해 카메라가 활성화 될 수 있고, 실시간으로 촬영되는 영상에서 정보 식별 코드가 존재하는 지 판단하기 위해, 프레임 내로 식별 코드가 위치하도록 가이드를 제공할 수 있으며, 프레임 내에 식별 코드가 위치하게 되면 식별 코드를 인식 할 수 있다. 이 때 제1,2 단말 장치(100,500)는 전면부 카메라와 후면부 카메라를 포함하여 구성 될 수 있으며, 후면부 카메라를 통해 식별 코드를 촬영하여 인식할 수 있으며 전면부 카메라를 통해 사용자의 얼굴을 인식하는 과정을 수행 할 수도 있다.
생체 정보 인식부(540)는 사용자를 구분하기 위해 수취인의 생체 정보를 인식하기 위한 것이고, 이 때 생체 정보 인식부(540)에서 인식 가능한 생체 정보는 홍채인식, 지문인식 등이 될 수 있다.
아울러, 사용자 식별 과정은 제 2 단말 장치(500)에 의해 이루어 질 수 있고, 정보 제공 서버(400)에 의해 이루어질 수도 있는데, 제 2 단말 장치(500)에서 이루어지는 경우, 본 발명의 식별 코드에서 지정된 사용자 식별 코드를 추출하고 자신의 사용자 식별 정보와 비교하여 허가된 사용자인지 여부를 판단 할 수 있다.
저장부(550)은 제 1 단말 장치로부터 수신한 물품과 관련된 정보를 저장하기 위한 것으로, 전자상거래 서버(200)가 배포하여 어플리케이션 스토어 서버(미도시)로부터 다운로드 받은 어플리케이션인 상품 구매 어플리케이션이 저장될 수 있다.
이 때, 저장부(550)는, 램(RAM, Read Access Memory), 롬(ROM, Read Only Memory), 하드디스크(HDD, Hard Disk Drive, 플래시 메모리, CD-ROM, DVD 뿐만 아니라, 네트워크 접근 스토리지(NAS, Network Access Storage)와 같이 모든 종류의 저장 매체를 포함할 수 있다.
상기 입력부(560)는 사용자의 조작에 따라 사용자 입력 신호를 발생한다. 이러한 입력부(560)는 다양한 방식의 입력 수단으로 구현될 수 있다. 예를 들면, 입력부(560)는 키 입력 수단, 터치 입력 수단, 제스처 입력 수단, 음성 입력 수단 중에서 하나 이상을 포함할 수 있다. 키 입력 수단은, 키 조작에 따라서 해당 키에 대응하는 신호를 발생시키는 것으로서, 키패드, 키보드가 해당된다. 터치 입력 수단은, 사용자가 특정 부분을 터치하는 동작을 감지하여 입력 동작을 인식하는 것으로서, 터치 패드, 터치 스크린, 터치 센서를 들 수 있다. 제스처 입력 수단은, 사용자의 동작, 예를 들어, 단말 장치를 흔들거나 움직이는 동작, 단말 장치에 접근하는 동작, 눈을 깜빡이는 동작 등 지정된 특정 동작을 특정 입력 신호로 인식하는 것으로서, 지자기 센서, 가속도 센서, 카메라, 고도계, 자이로 센서, 근접 센서 중에서 하나 이상을 포함하여 이루어질 수 있다.
다음으로, 출력부(570)는 상기 제어부(510)의 제어에 따라 제 2 단말 장치(500)의 동작 상태 및 동작 결과를 사용자에게 출력하는 부분으로서, 특히, 본 발명에 있어서, 정보 식별 코드에 대응하는 물품 정보를 증강현실로 제공하여 사용자가 인식할 수 있도록 출력한다.
이러한 출력부(570)는 디스플레이 수단으로 구현될 수 있는데, 예를 들어, LCD((Liquid Crystal Display), TFT-LCD(Thin Film Transistor-Liquid Crystal Display), LED(Light Emitting Diodes), OLED(Organic Light Emitting Diodes), AMOLED(Active Matrix Organic Light Emitting Diodes), 플렉시블 디스플레이(flexible display), 3차원 디스플레이 중에서 어느 하나가 될 수 있다.
이 때, 출력부(570)가 터치스크린(Touch screen)형태로 구성된 경우, 출력부(570)는 입력부(560)의 기능 중 일부 또는 전부를 수행 할 수 있다.
상술한 구성을 통해서 제 2 단말 장치(500)는 정보 식별 코드를 촬영한 후, 수취인 인증 과정을 거쳐 서버로부터 물품에 대한 정보를 수신하여 사용자에게 증강현실로 제공한다. 이 때, 제 2 단말 장치(500)는 정보 식별 코드를 촬영하고 정보를 수신하는데 있어 필요한 데이터를 상기 통신부(520)을 통해서 정보 제공 서버로부터 전송 받아 저장부(550)에 저장할 수 있다.
도 7 은 본 발명의 실시예에 따른 제2 단말 장치(500)에서 수취인에게 증강 현실 기반의 정보 제공 방법을 설명 하기 위한 순서도 이다.
도 7을 참조하면, 먼저 수취인이 제2 단말 장치(500)를 통해, 정보 식별 코드를 촬영하고(s501), 제2 단말 장치(500)가 촬영한 정보 식별 코드를 정보 제공 서버(400)에 전송할 수 있도록 적절히 변환된 정보 식별 코드 인식 결과, 예를 들면 문자화 처리된 정보 코드 또는 정보 코드의 이미지가 정보 제공 서버(400)에 송신된다(S502).
이 때, 정보 제공 서버(400)에서는 정보 식별 코드에 대응하는 물품에 관한 정보가 복수 개 존재할 경우, 사용자 식별 정보에 따라 특정 데이터를 선택 한 후 선택한 데이터를 제2 단말 장치(500)로 전송 할 수도 있으나, 구현 방식에 따라 데이터 목록을 전송 할 수도 있다. 정보 제공 서버(400)로부터 정보 식별 코드에 대응하는 데이터 목록이 수신되면, 제2 단말 장치(500)는 수신된 목록을 활성화된 카메라가 촬영하고 있는 영상과 실시간 결합하여 출력할 수 있다. 이러한 과정을 수행하기 위해 제2 단말 장치(500)에 저장된 어플리케이션을 이용할 수 있다.
이 후, 서버에 정보 식별 코드 기반 정보 제공을 요청하고(S503), 정보 제공 서버(400)로부터 정보 제공 요청자, 즉 정당한 수취인의 식별 정보와 제2 단말 장치(500)의 사용자 정보를 비교한다(S506).
판단 결과 일치하면(S507), 정보 제공 서버(400)로부터 물품 관련 정보를 수신하여 증강현실로 출력하고(S508), 일치하지 않는 경우, 정보 제공 불가 안내 메시지를 표시한다(S509).
도 8의 (a) 내지 (c)는 본 발명의 실시 예에 따른 증강현실을 이용한 배송 물품 관련 정보 제공 방법에 있어서, 정보 식별 코드 인식에 따라 제공되는 제2 단말 장치(500) 화면의 예시도이다.
도 8의 (a)는 제2 단말 장치(500)의 사용자가 카메라를 실행시켜 배송된 물품에 부착된 정보 식별 코드를 촬영하는 상태를 나타낸 예시도이다. 이 때, 식별 코드가 존재하는 지 판단하기 위해, 프레임 내로 식별 코드가 위치하도록 가이드를 제공할 수 있으며, 프레임 내에 식별 코드가 위치하게 되면 식별 코드를 인식 할 수 있다.
도 8의 (b)는 도 8의 (a)에서 배송 물품에 부착된 정보 식별 코드 촬영을 통해 수신된 배송 물품에 대한 정보를 증강현실로 출력한 상태를 나타낸 예시도이다. 이 때 배송 물품에 대한 정보로서, 브랜드명, 주문한 상품, 색상, 사이즈, 주변 매장 등에 관한 정보를 획득하여 표시할 수 있다. 이외에, 발송인의 메시지나 물품 이력 등 더 다양한 정보가 포함될 수 도 있다.
상기 정보는 카메라 촬영된 배송된 물품의 영상과 결합되어 나타날 수 있는데, 이때, 다양한 애니메이션 효과(예, 물품의 포장이 제거되는 애니메이션 효과)와 함께 정보가 표시될 수 도 있다.
또한, 사용자가 카메라를 이동(회전, 틸팅, 확대/축소)시킬 경우, 상기 표시되는 정보의 종류가 변경되도록 할 수 도 있다.
도 8의 (c)는 배송 서비스 서버(400)에서 관리되는 배송 물품과 관련된 정보를 예시한 테이블이다. 배송 물품과 관련된 정보는, 도시된 바와 같이, 발송인 정보(user A), 배송 물품의 상세 정보(발송인 메시지, 물품 이미지, 색상 등), 수취인 정보(전화번호 등)등이 상호 연관되어 관리된다.
이러한 본 발명에 따른 배송 물품 관련 정보 제공 서비스, 정보 제공 서버(400) 및 제2 단말 장치(500)의 연동을 통해 이루어지는 것으로, 상기 정보 제공 서버(400) 및 제2 단말 장치(500)는 도 9와 같은 컴퓨팅 환경을 통해 이상에서 설명한 서비스 절차를 수행시키도록 구현된 프로그램을 실행함으로써 본 발명에 따른 서비스를 실행할 수 있다.
도 9는 본 발명의 실시 예에 따른 증강 현실 기반의 배송 물품 정보 제공 방법을 실행시키는 컴퓨팅 환경을 도시한 도면이다.
도 9 및 이하의 설명은 본 발명이 구현될 수 있는 적절한 컴퓨팅 환경의 간단하고, 일반적인 설명을 제공하고자 한다. 요구사항은 아니지만, 본 발명에 따른 정보 제공 방법은 컴퓨터 시스템에 의해 실행되고 있는 프로그램 모듈과 같은 컴퓨터 실행가능 명령어와 관련하여 기술될 수 있다. 일반적으로, 프로그램 모듈은 특정 태스크를 수행하거나 특정 추상 데이터 유형을 구현하는 루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포함한다. 컴퓨터 실행가능 명령어, 관련 데이터 구조, 및 프로그램 모듈은 본 명세서에 개시된 발명의 행위를 실행하는 프로그램 코드 수단의 예를 나타낸다.
도 9를 참조하면, 본 발명에 따른 정보 제공 방법을 실행시키는 컴퓨팅 시스템은 프로세싱 유닛(11), 시스템 메모리(12), 및 상기 시스템 메모리(12)를 포함하는 다양한 시스템 컴포넌트를 상기 프로세싱 유닛(11)에 연결시키는 시스템 버스(10)를 포함하는 형태로 된 컴퓨팅 장치를 포함한다.
프로세싱 유닛(11)은 본 발명의 특징을 구현하도록 설계된 컴퓨터-실행가능 명령어를 실행시킬 수 있다.
시스템 버스(10)는 다양한 버스 아키텍처 중의 임의의 것을 사용하는 로컬 버스, 주변 버스, 및 메모리 버스 또는 메모리 컨트롤러를 포함하는 몇 가지 유형의 버스 구조 중의 임의의 것일 수 있다. 시스템 메모리(12)는 ROM(Read Only Memory)(12a) 및 RAM(Random Access Memory)(12b)을 포함한다. 시동중과 같은 때에 컴퓨팅 시스템 내의 구성요소들 간에 정보를 전송하는 것을 돕는 기본 루틴을 포함하는 기본 입출력 시스템(BIOS)(13a)은 일반적으로 ROM(12a)에 저장될 수 있다.
컴퓨팅 시스템은 저장 수단을 포함할 수 있는데, 예를 들어, 하드 하드 디스크로부터 정보를 판독하거나 그 하드 디스크에 정보를 기록하는 하드 디스크 드라이브(15), 자기 디스크로부터 정보를 판독하거나 그 자기 디스크에 정보를 기록하는 자기 디스크 드라이브(16), 및 예를 들면, CD-ROM 또는 기타 광 매체 등의 광 디스크로부터 정보를 판독하거나 그 광 디스크에 정보를 기록하는 광 디스크 드라이브(17)를 포함할 수 있다. 하드 디스크 드라이브(15), 자기 디스크 드라이브(16), 및 광 디스크 드라이브(17)는 각각 하드 디스크 드라이브 인터페이스(18), 자기 디스크 드라이브-인터페이스(19), 및 광 드라이브 인터페이스(20)에 의해 시스템 버스(10)에 접속된다.
또한, 컴퓨팅 시스템은, 저장 수단으로서 외장 메모리(21)를 더 구비할 수 있다. 상기 외장 메모리(21)는 입출력 인터페이스(24)를 통해서 시스템 버스(10)에 접속될 수 있다.
상술한 드라이브 및 그 드라이브에 의해 판독 및 기록되는 관련 컴퓨터 판독가능 매체는 컴퓨터 실행가능 명령어, 데이터 구조, 프로그램 모듈 및 기타 데이터의 비휘발성 저장을 제공한다. 본 명세서에서 기술된 예시적인 환경은 하드 디스크(15), 자기 디스크(16) 및 광 디스크(17)를 예시하고 있으나, 이외에 자기 카세트, 플래쉬 메모리 카드, DVD, 베루누이 카트리지(Bernoulli cartridge), RAM, ROM, 등을 포함하는, 데이터를 저장하는 다른 유형의 컴퓨터 판독가능 매체가 이용될 수 있다.
상기 프로세싱 유닛(11)에 의해 로딩되어 실행되는, 오퍼레이팅 시스템(13b), 하나 이상의 애플리케이션 프로그램(13c), 기타 프로그램 모듈(13d), 및 프로그램 데이터(13c)를 포함하는 하나 이상의 프로그램 모듈을 포함하는 프로그램 코드 수단은 하드 디스크(15), 자기 디스크(16), 광 디스크(17), ROM(12a) 또는 RAM(12b)에 저장될 수 있다.
아울러, 상기 컴퓨팅 시스템은, 키보드, 포인팅 장치, 마이크로폰, 조이 스틱, 게임 패드, 스캐너, 등과 같은 기타 입력 장치(22)를 통해 사용자로부터 명령 및 정보를 입력 받을 수 있다. 또한 카메라 모듈과 같은 이미지 입력 센서를 통해 촬영되고 있는 이미지를 입력 받을 수 있다. 이들 입력 장치(22)는 시스템 버스(10)에 연결된 입출력 인터페이스(24)를 통해 프로세싱 유닛(11)에 접속될 수 있다. 입출력 인터페이스(24)는 예를 들면, 직렬 포트 인터페이스, PS/2 인터페이스, 병렬 포트 인터페이스, USB 인터페이스, IEEE(Institute of Electrical and Electronics Engineers) 1394 인터페이스(즉, 파이어와이어(FireWire) 인터페이스)와 같은 매우 다양한 서로 다른 인터페이스 중 임의의 것을 논리적으로 나타내거나, 다른 인터페이스의 조합까지도 논리적으로 나타낼 수 있다.
더하여, 본 발명이 적용되는 컴퓨팅 시스템은, 모니터 혹은 LCD와 같은 디스플레이 장치(26) 또는 스피커나 마이크로폰과 같은 오디오 장치(27)를 더 포함할 수 있으며, 이들은, 비디오/오디오 인터페이스(25)를 통해서 시스템 버스(10)에 접속된다. 예를 들면, 스피커 및 프린터 등의 (도시되지 않은) 기타 주변 출력 장치가 컴퓨터 시스템(420)에 또한 접속될 수 있다. 상기 비디오/오디오 인터페이스부(25)는 HDMI(High Definition Multimedia Interface), GDI(Graphics Device Interface) 등을 포함할 수 있다.
또한, 본 발명을 실행하는 컴퓨팅 시스템은, 예를 들면, 사무실-광역 또는 기업-광역 컴퓨터 네트워크, 홈 네트워크, 인트라넷, 및/또는 인터넷과 같은 네트워크에 접속 가능하다. 컴퓨터 시스템은 이러한 네트워크를 통해, 예를 들면, 원격 컴퓨터 시스템, 원격 애플리케이션, 및/또는 원격 데이터베이스와 같은 외부 소스들과의 데이터를 교환할 수 있다.
이를 위해 본 발명이 적용되는 컴퓨팅 시스템은 외부 소스로부터 데이터를 수신하고/거나 외부 소스로 데이터를 전송하는 네트워크 인터페이스(27)를 포함한다.
본 발명에 있어서, 이러한 컴퓨팅 시스템은, 네트워크 인터페이스(27)를 통해서 원격지에 위치한 장치와 정보를 송수신할 수 있다. 예컨대, 컴퓨팅 시스템이 제1,2 단말(100, 500)을 의미하는 경우, 네트워크 인터페이스(27)를 통해 전자상거래 서버(200)와 송수신할 수 있다. 반면, 컴퓨팅 시스템이 전자상거래 서버(200)를 의미하는 경우, 네트워크 인터페이스(27)를 통해 단말(100, 500)과 정보를 송수신할 수 있다. 네트워크 인터페이스(27)는, 예를 들면, 네트워크 인터페이스 카드 및 대응하는 네트워크 드라이버 인터페이스 사양(Network Driver Interface Specification: "NDIS") 스택과 같은 하나 이상의 소프트웨어 및/또는 하드웨어 모듈의 논리적 조합으로 나타낼 수 있다.
마찬가지로, 컴퓨터 시스템은 입출력 인터페이스(24)를 통해 외부 소스로부터 데이터를 수신하거나 외부 소스로 데이터를 전송한다. 입출력 인터페이스(24)는 모뎀(23)(예를 들면, 표준 모뎀, 케이블 모뎀, 또는 디지털 가입자선(digital subscriber line: “DSL”) 모뎀)에 연결될 수 있으며, 이러한 모뎀(23)을 통해 외부 소스로부터 데이터를 수신하고/거나 외부 소스로 데이터를 전송할 수 있다.
도 9은 본 발명에 적절한 오퍼레이팅 환경을 나타내지만, 본 발명의 원리는, 필요하다면 적절한 수정으로, 본 발명의 원리를 구현할 수 있는 임의의 시스템에 채용될 수 있다. 도 9에 도시된 환경은 단지 예시적이며 본 발명의 원리가 구현될 수 있는 매우 다양한 환경의 작은 일부도 나타내지 못한다.
아울러, 본 발명의 메신저 프로그램 및 메신저 프로그램 실행 시 발생되는 다양한 정보는 컴퓨팅 시스템에 관련된 임의의 컴퓨터 판독가능 매체에 저장되고 액세스될 수 있다. 예를 들면, 이러한 프로그램 모듈들의 일부 및 관련 프로그램 데이터의 일부는, 시스템 메모리(12)에 저장하기 위해, 오퍼레이팅 시스템(13b), 애플리케이션 프로그램(13c), 프로그램 모듈(13d), 및/또는 프로그램 데이터(13e)에 포함될 수 있다.
또한, 하드 디스크와 같은 대용량(mass) 저장 장치가 컴퓨팅 시스템에 연결되면, 이러한 프로그램 모듈 및 관련 프로그램 데이터는 대용량 저장 장치에 저장될 수 있다. 네트워크 환경에서, 본 발명과 관련된 프로그램 모듈 또는 그 일부는 입출력 인터페이스(24)의 모뎀(23) 또는 네트워크 인터페이스(25)를 통해 연결된 원격 컴퓨터 시스템, 예를 들어, 사용자 단말 및 가맹점 단말(200)의 컴퓨팅 시스템에 관련된 시스템 메모리 및/또는 대용량 저장 장치와 같은 원격 메모리 저장 장치에 저장될 수 있다. 이러한 모듈의 실행은 전술한 바와 같이 분산형 환경에서 수행될 수 있다.
이상에서 설명한 바와 같이, 본 명세서는 다수의 특정한 구현물의 세부사항들을 포함하지만, 이들은 어떠한 발명이나 청구 가능한 것의 범위에 대해서도 제한적인 것으로서 이해되어서는 안되며, 오히려 특정한 발명의 특정한 실시형태에 특유할 수 있는 특징들에 대한 설명으로서 이해되어야 한다. 개별적인 실시형태의 문맥에서 본 명세서에 기술된 특정한 특징들은 단일 실시형태에서 조합하여 구현될 수도 있다. 반대로, 단일 실시형태의 문맥에서 기술한 다양한 특징들 역시 개별적으로 혹은 어떠한 적절한 하위 조합으로도 복수의 실시형태에서 구현 가능하다. 나아가, 특징들이 특정한 조합으로 동작하고 초기에 그와 같이 청구된 바와 같이 묘사될 수 있지만, 청구된 조합으로부터의 하나 이상의 특징들은 일부 경우에 그 조합으로부터 배제될 수 있으며, 그 청구된 조합은 하위 조합이나 하위 조합의 변형물로 변경될 수 있다.
마찬가지로, 특정한 순서로 도면에서 동작들을 묘사하고 있지만, 이는 바람직한 결과를 얻기 위하여 도시된 그 특정한 순서나 순차적인 순서대로 그러한 동작들을 수행하여야 한다거나 모든 도시된 동작들이 수행되어야 하는 것으로 이해되어서는 안 된다. 특정한 경우, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다. 또한, 상술한 실시형태의 다양한 시스템 컴포넌트의 분리는 그러한 분리를 모든 실시형태에서 요구하는 것으로 이해되어서는 안되며, 설명한 프로그램 컴포넌트와 시스템들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 다중 소프트웨어 제품에 패키징 될 수 있다는 점을 이해하여야 한다.
본 명세서에서 설명한 주제의 특정한 실시형태를 설명하였다. 기타의 실시형태들은 이하의 청구항의 범위 내에 속한다. 예컨대, 청구항에서 인용된 동작들은 상이한 순서로 수행되면서도 여전히 바람직한 결과를 성취할 수 있다. 일 예로서, 첨부도면에 도시한 프로세스는 바람직한 결과를 얻기 위하여 반드시 그 특정한 도시된 순서나 순차적인 순서를 요구하지 않는다. 특정한 구현예에서, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다.
본 기술한 설명은 본 발명의 최상의 모드를 제시하고 있으며, 본 발명을 설명하기 위하여, 그리고 당업자가 본 발명을 제작 및 이용할 수 있도록 하기 위한 예를 제공하고 있다. 이렇게 작성된 명세서는 그 제시된 구체적인 용어에 본 발명을 제한하는 것이 아니다. 따라서, 상술한 예를 참조하여 본 발명을 상세하게 설명하였지만, 당업자라면 본 발명의 범위를 벗어나지 않으면서도 본 예들에 대한 개조, 변경 및 변형을 가할 수 있다.
상술한 바와 같이 본 발명에 따른 정보 식별 코드를 통해 상품 정보 확인하기 위한 방법은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.
따라서 본 발명에 기재된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상이 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의해서 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명은 증강현실을 이용해 배송된 물품에 관련된 정보를 직관적으로 확인 할 수 있는 발명으로, 배송된 물품의 수취 시 포장을 제거하지 않고도, 배송된 물품의 정보를 파악 할 수 있다. 특히, 배송된 물품 정보를 증강현실로 제공함으로써 수취인이 상품 정보를 보다 사실적으로 파악할 수 있고, 배송된 물품의 정보에 따라 수취 여부를 배송 시점에서 즉시 선택하도록 할 수 있다.
100: 제 1 단말 장치 200: 전자 상거래 서버
300: 배송 서비스 서버 400: 정보 제공 서버
410: 네트워크 통신부 420: 제어부
430: 저장부 500: 제 2 단말 장치
510: 제어부 520: 통신부
530: 카메라부 540: 생채 정보 인식부
550: 저장부 560: 입력부
570: 출력부 600: 네트워크

Claims (18)

  1. 단말 장치의 카메라를 통해 정보 식별 코드가 부착된 택배 상자를 촬영하는 단계;
    촬영된 이미지로부터 상기 정보 식별 코드를 인식하는 단계;
    인식된 정보 식별 코드를 기반으로 정보 제공 서버에 접근하여, 상기 택배 상자에 포함된 물품과 관련된 정보를 요청하는 단계;
    상기 정보 제공 서버로부터 상기 물품과 관련된 정보를 수신하는 단계; 및
    상기 수신한 물품과 관련된 정보를 촬영 화면의 실사 이미지와 결합하여 증강현실로 출력하는 단계
    를 포함하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  2. 제1항에 있어서,
    상기 물품과 관련된 정보는,
    상기 물품의 물품 이미지, 상기 배송 물품의 제조 또는 생산 정보, 상기 배송 물품의 구매처 정보, 상기 배송 물품의 사용 설명서, 상기 배송 물품의 이력정보, 발송인 정보, 수취인 정보, 상기 발송인이 수취인에게 전달하는 메시지 중 적어도 하나를 포함하는 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  3. 제1항에 있어서,
    상기 증강 현실로 출력하는 단계는,
    상기 촬영 화면에 표시되어 있는 마커를 기준으로 상기 택배 상자의 이미지와 결합하여 상기 물품과 관련된 정보를 표시하는 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  4. 제3항에 있어서, 상기 마커는
    상기 정보 식별 코드 또는 상기 택배 상자의 이미지인 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  5. 제1항에 있어서,
    상기 증강 현실로 출력하는 단계는,
    상기 카메라의 이동에 따라 변화되는 마커의 위치에 맞추어 출력하는 정보의 종류, 위치, 크기, 색상, 형상, 방향, 상태 중 하나 이상을 변화시키는 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  6. 제2항에 있어서,
    상기 발송인이 수취인에게 전달하는 메시지는, 이미지, 동영상, 텍스트, 음성 중 하나 이상을 포함하여 이루어지는 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  7. 제2항에 있어서,
    상기 발송인이 수취인에게 전달하는 메시지는 SNS(Social Network Service), 인스턴트 메신저(Instant Messenger), 전자 메일, SMS(Short Message Service), MMS(Multimedia Message Service) 중 하나 이상을 포함하는 네트워크 기반 커뮤니케이션 서비스와 연동하는 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  8. 제1항에 있어서, 상기 정보를 요청하는 단계는,
    상기 정보 제공 서버에서 수취인 인증을 수행할 수 있도록,
    상기 단말 장치에 할당된 IP 주소, MAC 주소, 이동통신번호, 수취인의 얼굴 이미지, 수취인의 생체 정보 중 하나 이상을 포함하는 수취인을 식별할 수 있는 수취인 식별 정보를 수집하는 단계;
    추출한 수취인 식별 정보를 상기 정보 제공 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  9. 제8항에 있어서,
    상기 수취인 식별 정보의 수집을 위하여,
    상기 단말 장치의 카메라를 통해 수취인의 얼굴을 촬영하는 단계; 및
    상기 단말 장치의 지문 인식 센서를 통해 상기 수취인의 지문을 인식하는 단계
    중 하나 이상을 더 포함하는 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  10. 제1항에 있어서, 상기 정보 식별 코드는
    QR(Quick Response) 코드, 2차원 바코드, 컬러 바코드 중 하나 이상을 포함하는 매트릭스 코드인 것을 특징으로 하는 단말 장치에 의한 증강 현실 기반의 정보 제공 방법.
  11. 제1 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나로부터 발송인의 증강현실 기반 정보 서비스 요청을 수신하는 단계;
    상기 발송인이 구매하거나 발송하는 물품과 관련된 하나 이상의 정보를 수집하여 저장하는 단계;
    상기 수집하여 저장한 하나 이상의 정보에 접근할 수 있는 정보 식별 코드를 생성하는 단계;
    상기 정보 식별 코드를 상기 제1 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나로 전송하는 단계;
    상기 정보 식별 코드를 인식하여 접근한 제2 단말 장치로부터 정보 제공 요청을 수신하는 단계;
    상기 정보 식별 코드에 대응하여 저장된 상기 물품과 관련된 하나 이상의 정보를 상기 제2 단말 장치로 전송하는 단계를 포함하는 정보 제공 서버에 의한 증강 현실 기반의 정보 제공 방법.
  12. 제11항에 있어서,
    상기 서비스를 요청한 제2 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나로부터 수취인 정보를 수신하여 저장하는 단계;
    상기 정보 식별 코드를 인식하여 접근한 제2 단말 장치로부터 상기 제2 단말 장치에 할당된 IP 주소, MAC 주소, 이동통신번호, 수취인의 얼굴 이미지, 수취인의 생체 정보 중 하나 이상을 포함하는 수취인을 식별할 수 있는 수취인 식별 정보를 수신하는 단계; 및
    상기 저장한 수취인 정보와 상기 수신한 수취인 식별 정보를 비교하여 수취인 인증을 수행하는 단계를 더 포함하고,
    인증에 성공한 경우, 상기 하나 이상의 정보를 상기 제2 단말 장치로 전송하도록 하는 것을 특징으로 하는 정보 제공 서버에 의한 증강 현실 기반의 정보 제공 방법.
  13. 제1항 내지 제12항 중 어느 한 항에 기재된 증강 현실 기반의 정보 제공 방법을 실행시키는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
  14. 제1항 내지 제12항 중 어느 한 항에 기재된 증강 현실 기반의 정보 제공 방법을 실행시키도록 구현되어 컴퓨터 판독 가능한 기록 매체에 저장된 프로그램.
  15. 제 1 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나와 통신을 수행하는 서버통신부;
    물품 발송인이 제공한 택배 상자에 포함된 물품과 관련된 정보를 저장하는 저장부;
    상기 저장한 물품과 관련된 정보에 접근할 수 있는 정보 식별 코드를 생성하는 식별 코드 생성부;
    상기 정보 식별 코드를 상기 제 1 단말 장치, 전자상거래 서버, 배송 서비스 서버 중 어느 하나로 전송하고, 제 2 단말 장치로부터 정보 식별 코드를 통한 정보 제공 요청을 수신하며, 수신된 식별 코드에 해당하는 택배 상자에 포함된 물품과 관련된 정보를 제 2 단말 장치로 전송하는 서버 제어부;
    를 포함하는 것을 특징으로 하는 정보 제공 서버.
  16. 제15항에 있어서,
    상기 저장부는,
    증강 현실 기반 물품 정보를 제공받을 수취인을 수신하여 저장하고,
    상기 제어부는,
    상기 저장한 수취인 정보와 택배를 수신한 수취인 식별 정보를 비교하여 일치하는 경우에만 택배 상자에 포함된 물품과 관련된 정보를 단말 장치로 전송하는
    것을 특징으로 하는 정보 제공 서버.
  17. 정보 제공 서버와 통신하기 위한 통신부;
    정보 식별 코드 촬영 및 수취인 식별 정보 수집을 위한 수취인 얼굴을 촬영하는 카메라부;
    수취인의 생체 정보를 인식할 수 있는 생체 정보 인식부;
    상기 정보제공 서버로부터 물품과 관련된 정보를 요청하고, 요청한 정보를 수신하여 촬영 화면의 실사 이미지와 결합하여 증강현실로 출력하는 제어부;
    상기 수신한 물품과 관련된 정보를 저장하는 저장부;
    를 포함하는 것을 특징으로 하는 사용자 단말 장치.
  18. 제17항에 있어서,
    상기 증강현실로 출력하는 제어부는,
    정보 식별 코드 또는 택배 상자의 이미지인 것을 특징으로 하는 마커를 기준으로, 카메라의 이동에 따라 변화되는 마커의 위치에 맞추어 출력하는 정보의 종류, 위치, 크기, 색상, 형상, 방향, 상태 중 하나 이상을 변화시키는 것을 특징으로 사용자 단말 장치.
KR1020170085660A 2017-07-05 2017-07-05 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템 KR20190005081A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020170085660A KR20190005081A (ko) 2017-07-05 2017-07-05 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템
CN201810730105.0A CN109214743A (zh) 2017-07-05 2018-07-05 用于使用增强现实来提供递送物品信息的方法和系统
US16/027,827 US20190012756A1 (en) 2017-07-05 2018-07-05 Method and system for providing information regarding with delivery article using augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170085660A KR20190005081A (ko) 2017-07-05 2017-07-05 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템

Publications (1)

Publication Number Publication Date
KR20190005081A true KR20190005081A (ko) 2019-01-15

Family

ID=64903301

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170085660A KR20190005081A (ko) 2017-07-05 2017-07-05 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템

Country Status (3)

Country Link
US (1) US20190012756A1 (ko)
KR (1) KR20190005081A (ko)
CN (1) CN109214743A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110276579A (zh) * 2019-06-19 2019-09-24 深圳市丰巢科技有限公司 一种滞留件处理方法、装置、设备及存储介质
KR102211540B1 (ko) * 2020-08-05 2021-02-04 (주)샐러디 스마트 오더 시스템
KR20230054230A (ko) * 2021-10-15 2023-04-24 알비언 주식회사 사물의 이미지 정보에 대응하는 코멘트 정보를 제공하기 위한 장치 및 방법

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7279341B2 (ja) * 2018-11-06 2023-05-23 富士フイルムビジネスイノベーション株式会社 識別システム、識別装置、データ取得システム及びデータ取得装置
US11089161B2 (en) * 2019-01-14 2021-08-10 Carl N. Jensen Automated message generation to a subject matter expert in response to a phone call
CN113454011B (zh) * 2019-02-22 2023-08-15 松下电器(美国)知识产权公司 通知系统的控制方法以及通知系统
CN112055034B (zh) * 2019-06-05 2022-03-29 北京外号信息技术有限公司 基于光通信装置的交互方法和系统
US11386622B1 (en) * 2019-08-23 2022-07-12 Amazon Technologies, Inc. Physical items as basis for augmented reality applications
US11194983B1 (en) * 2019-09-05 2021-12-07 Amazon Technologies, Inc. Profile based augmented reality applications based on information tags
US20220321351A1 (en) * 2021-03-31 2022-10-06 Capital One Services, Llc Systems and methods for selectively decrypting an encrypted code using augmented reality
IT202100014753A1 (it) * 2021-06-07 2022-12-07 Matteo Sozzi Metodo e sistema per l’assistenza alla distribuzione di prodotti alimentari
IT202100014759A1 (it) * 2021-06-07 2022-12-07 Matteo Sozzi Metodo e sistema per ottimizare l’efficienza di un servizio di distribuzione di prodotti alimentari
GB202111974D0 (en) * 2021-08-20 2021-10-06 Andrews & Wykeham Ltd Optical authentication structure with augmented reality feature

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110276579A (zh) * 2019-06-19 2019-09-24 深圳市丰巢科技有限公司 一种滞留件处理方法、装置、设备及存储介质
KR102211540B1 (ko) * 2020-08-05 2021-02-04 (주)샐러디 스마트 오더 시스템
KR102361489B1 (ko) * 2020-08-05 2022-02-15 (주)샐러디 2차원 영상 정합에 기반한 상품 수령 인증을 지원하는 스마트 오더 시스템
KR20230054230A (ko) * 2021-10-15 2023-04-24 알비언 주식회사 사물의 이미지 정보에 대응하는 코멘트 정보를 제공하기 위한 장치 및 방법

Also Published As

Publication number Publication date
US20190012756A1 (en) 2019-01-10
CN109214743A (zh) 2019-01-15

Similar Documents

Publication Publication Date Title
KR20190005081A (ko) 증강현실을 이용한 배송 물품 관련 정보 제공 방법 및 시스템
KR101662048B1 (ko) 맞춤형 운송 서비스 제공 방법 및 시스템
JP6735311B2 (ja) 機密情報の管理
KR20180132313A (ko) 정보 코드를 이용한 전자상거래 방법 및 이를 위한 장치
US11017345B2 (en) Method for providing delivery item information and apparatus therefor
CN110097429A (zh) 电子订单生成方法、装置、终端及存储介质
KR20160146254A (ko) 무인 택배함을 이용한 관심상품 선행 배송 서비스 제공 장치 및 그 방법, 그리고 컴퓨터 프로그램이 기록된 기록매체
KR102144509B1 (ko) 근접 통신 방법 및 장치
US20150058161A1 (en) Automatically filling item information for selling
KR20120132179A (ko) 촬영 이미지를 이용한 의사 전달 방법 및 장치
CN111614924A (zh) 计算机系统、资源发送方法、装置、设备及介质
KR102464379B1 (ko) 스마트 물류 모니터링을 수행하는 장치 및 시스템
WO2019096200A1 (zh) 一种基于电子标签的无人售货方法和设备
KR101890635B1 (ko) 식별 코드를 이용한 제품 재구매 방법 및 시스템
KR101978362B1 (ko) 문자 메시지 서비스를 이용한 배송 알림 시스템, 그 방법 및 컴퓨터 프로그램이 기록된 비휘발성 기록매체
KR101967269B1 (ko) 문자 메시지 서비스를 이용한 배송 알림 시스템, 그 방법 및 컴퓨터 프로그램이 기록된 비휘발성 기록매체
KR102550027B1 (ko) 물류 상태 관리 서비스를 제공하는 시스템, 장치 및 방법
JP2020154445A (ja) プログラム、情報処理方法、及び情報処理装置
WO2018179665A1 (ja) 販売システム、サーバ、販売システムの処理方法、サーバの処理方法及びプログラム
US11934990B2 (en) Apparatus and method for outputting a continuously changed QR code by reflecting a monitored logistics status
KR102604765B1 (ko) 물류 유통과정에 이용되는 이종 데이터베이스 연동 장치 및 이의 동작방법
KR102558508B1 (ko) 전자출하증명서를 제공하기 위한 물류 통합 관리 서비스 시스템, 장치 및 방법
KR20160117395A (ko) 맞춤형 운송 서비스 제공 방법 및 시스템
JP2014139842A (ja) 電子商店システム
KR101796313B1 (ko) 이동통신 단말기 및 그 제어방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant