KR102005907B1 - 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템 - Google Patents

증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템 Download PDF

Info

Publication number
KR102005907B1
KR102005907B1 KR1020180168609A KR20180168609A KR102005907B1 KR 102005907 B1 KR102005907 B1 KR 102005907B1 KR 1020180168609 A KR1020180168609 A KR 1020180168609A KR 20180168609 A KR20180168609 A KR 20180168609A KR 102005907 B1 KR102005907 B1 KR 102005907B1
Authority
KR
South Korea
Prior art keywords
signboard
information
information provider
marker
server
Prior art date
Application number
KR1020180168609A
Other languages
English (en)
Other versions
KR20190000360A (ko
Inventor
송현우
Original Assignee
주식회사 펀웨이브
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 펀웨이브 filed Critical 주식회사 펀웨이브
Priority to KR1020180168609A priority Critical patent/KR102005907B1/ko
Publication of KR20190000360A publication Critical patent/KR20190000360A/ko
Application granted granted Critical
Publication of KR102005907B1 publication Critical patent/KR102005907B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/14—Travel agencies
    • G06F17/28—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services

Landscapes

  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 외국인 관광객 유치를 위해 발명된 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템에 있어서, 증강현실 마커를 포함하는 표지판 및 간판; 상기 표지판 및 간판의 정보를 제공받는 사용자가 이용하는 사용자 단말기; 상기 표지판 및 간판의 정보를 제공하는 정보제공자가 이용하는 정보제공자 단말기; 상기 사용자 단말기 및 정보제공자 단말기에 의해 인식된 표지판 및 간판 마커를 매칭하여 상기 사용자 단말기 및 정보제공자 단말기로 정보를 전송하는 서버 및 상기 사용자 단말기 및 정보제공자 단말기와 상기 서버간의 데이터 송수신이 이루어지는 통신부를 포함할 수 있다.
또한, 상기 서버는, 상기 표지판 및 간판 마커와 마커에 부여되는 고유번호를 저장하고, 데이터가 입력된 고유번호와 상호 매칭 시키는 매칭 데이터부를 포함하고, 상기 표지판 및 간판 마커에 부여된 고유번호와 데이터가 입력된 고유번호를 매칭하여 사용자 단말기로 상기 표지판 및 간판의 정보를 외국어로 번역하여 제공하는 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템에 관한 것이다.

Description

증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템 {System sign language and sign language translation service using augmented reality translation application}
본 발명은 증강현실 번역 어플리케이션을 이용한 표지판 번역 서비스 시스템에 관한 것으로, 외국인 관광객을 상대로 한글로 표시된 간판이나 표지판 등을 증강현실 마커로 등록한 어플리케이션을 제작하여 외국인 관광객이 간판이나 표지판 등을 휴대용 단말의 장착된 카메라로 비추면 외국어로 번역되어 안내를 제공하는 증강현실 번역 어플리케이션을 이용한 표지판 번역 서비스 시스템에 관한 것이다.
최근 국내 외국인 방문자 수가 증대되고 있는 시점에서 관광객을 유치하기 위해서는 다양한 편의 시설이 개선되어야 한다.
K-pop을 선두로, 드라마 영화 등 각종 문화 컨텐츠들이 지구촌 젊은 층의 호응을 유도하면서 국내 외국인 관광객 수가 급증 했다.
2000년대에 들어서면서 외국인 관광객 수는 매년 증가추세를 보여 왔다.
외국인은 국적이 매우 다양화되어 있기 때문에 공통어인 영어로 대화하는 것은 약간의 무리가 있었다.
전통 시장이나 전통적인 문화유산이 위치한 곳에서는 아무래도 젊은 상인들 보다는 영어를 잘 접하지 않았던 상인들이 대부분이기 때문에 의사소통에 항상 어려움을 겪었다.
비록 스마트폰을 이용하여 서로 의사소통은 할 수 있게 되었지만, 그래도 기성세대가 스마트폰을 활용하는 것은 한계가 있다.
이동 단말기는 최근 휴대용 단말기, PDA 등 모바일 기기의 컴퓨팅 능력 향상 및 무선 네트워크 장치의 발달로 증강현실 시스템이 가능해 졌다.
이와 같은 휴대용 단말기는 기능이 다양화됨에 따라 사진이나 동영상의 촬영, 음악이나 동영상 파일 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기 형태로 구현되고 있다. 이러한 휴대용 단말기의 기능 지지 및 증대를 위해 단말기의 구조적인 부분 및 또는 소프트웨어적인 부분을 개량하는 것이 고려될 수 있다.
또한, 상기 내용을 참고하여 문제점을 보완하기 위해서는 표지판이나 간판의 정보가 번역되어 외국인 관광객 스스로 표지판이나 간판을 도움없이 손쉽게 읽을 수 있는 증강현실을 이용한 방식의 도입이 시급한 실정이다.
상기와 같은 문제를 해결하고자, 본 발명은 외국인 관광객을 상대로 한글로 표시된 간판이나 표지판 등을 증강현실 마커로 등록한 어플리케이션을 제작하여 외국인 관광객이 간판이나 표지판 등을 휴대용 단말의 장착된 카메라로 비추면 외국어로 번역되어 안내를 하는 증강현실 번역 어플리케이션을 이용한 표지판 번역 서비스 시스템을 제공하는 데 있다.
상기 과제를 해결하기 위하여, 본 발명의 실시예에 따른 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템에 있어서 증강현실 마커를 포함하는 표지판 및 간판; 상기 표지판 및 간판의 정보를 제공받는 사용자가 이용하는 사용자 단말기; 상기 표지판 및 간판의 정보를 제공하는 정보제공자가 이용하는 정보제공자 단말기; 상기 사용자 단말기 및 정보제공자 단말기에 의해 인식된 표지판 및 간판의 마커에 부여된 고유번호를 매칭하여 상기 사용자 단말기 및 정보제공자 단말기로 정보를 전송하는 서버 및 상기 사용자 단말기 및 정보제공자 단말기와 상기 서버간의 데이터 송수신이 이루어지는 통신부를 포함하고, 상기 서버는, 상기 표지판 및 간판의 마커와 마커에 부여되는 고유번호를 저장하고, 데이터가 입력된 고유번호와 상호 매칭 시키는 매칭 데이터부를 포함하고, 상기 표지판 및 간판 마커에 부여된 고유번호와 데이터가 입력된 고유번호를 매칭하여 사용자 단말기로 상기 표지판 및 간판의 정보를 외국어로 번역하여 제공하는 것을 특징으로 한다.
또한, 상기 서버는, 정보제공자 단말기에 의해 추가적으로 입력된 상기 표지판 및 간판의 정보를 저장하는 추가 설명 데이터부를 더 포함할 수 있다.
또한, 상기 사용자 단말기는 사용자 카메라모듈; 증강현실을 이용해 표지판 및 간판 마커를 인식하는 사용자 증강현실 모듈을 포함하는 사용자 제어부를 포함하고, 상기 정보제공자 단말기는 정보제공자 카메라모듈; 증강현실을 이용해 표지판 및 간판 마커를 인식하는 정보제공자 증강현실 모듈을 포함하는 정보제공자 제어부를 포함할 수 있다.
또한, 상기 정보제공자 단말기는, 상기 표지판 및 간판 마커에 부여된 고유번호로 접속하여 설명이나 수정 내용을 입력할 수 있는 입력부를 더 포함하고, 상기 서버로 전송하는 것을 특징으로 한다.
또한, 상기 고유번호는, 바코드, 2차원 바코드, 읽을 수 있는 심볼 중 어느 하나로 형성되는 것을 특징으로 한다.
또한, (a) 사용자 단말기로부터 증강현실을 이용한 표지판 및 간판 번역 어플리케이션을 실행하는 단계; (b) 사용자 단말기의 카메라 모듈로부터 상기 표지판 및 간판 마커를 인식하는 단계; (c) 인식된 상기 표지판 및 간판 마커를 서버로 전송하는 단계; (d) 상기 서버에서 상기 표지판 및 간판 마커를 인식하고 마커에 부여된 고유번호와 데이터가 입력된 고유번호를 상호 매칭하는 단계; (e) 상기 서버에서 매칭된 상기 표지판 및 간판의 번역 정보 및 관련 정보를 사용자 단말기로 송신하는 단계; (f) 사용자 단말기로 상기 표지판 및 간판의 번역 정보 및 관련 정보가 수신되고 디스플레이 되는 단계를 포함할 수 있다.
또한, (1) 정보제공자 단말기로부터 증강현실을 이용한 표지판 및 간판 번역 어플리케이션을 실행하는 단계; (2) 정보제공자 단말기의 카메라 모듈로부터 상기 표지판 및 간판 마커를 인식하는 단계; (3) 인식된 상기 표지판 및 간판 마커와 고유번호를 서버로 전송하는 단계 및 (4) 정보제공자 단말기는 상기 서버로부터 매칭되어 전송된 고유번호로 접속하여 추가 설명 및 수정내용을 입력하고 서버로 전송하는 단계 및 (5) 상기 서버에서 상기 표지판 및 간판 마커, 마커에 부여된 고유번호에 추가 설명 및 수정 내용이 저장되는 단계를 포함할 수 있다.
또한, 서버와 통신하여 제6항 내지 제7 항 중 어느 한 항의 제공방법을 실행하기 위하여 매체에 저장된 증강현실 번역 어플리케이션을 제공할 수 있다.
본 발명의 실시예에 따른 증강현실을 이용한 표지판 번역 어플리케이션은 외국인 관광객 스스로 현지인 도움을 받지 않고도 손 쉽게 안내 받을 수 있다.
또한, 현지인이나 외국인 관광객의 시간 소비를 줄일 수 있으며 원하는 명소를 직접 찾아 성취감을 높여줄 수 있다.
또한, 외국인 관광객은 간판이나 표지판 번역 외에도 관련된 설명을 제공 받을 수 있다.
도 1 은 본 발명의 실시예에 따른 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템의 구성을 나타내는 구성도이다.
도 2는 본 발명의 실시예에 따른 서버의 구성을 나타낸 블록도이다.
도 3은 본 발명의 실시예에 따른 사용자 단말기의 구성을 나타낸 블록도이다.
도 4는 본 발명의 실시예에 따른 정보제공자 단말기의 구성을 나타낸 블록도이다.
도 5는 본 발명의 실시예에 따른 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 제공방법을 나타낸 흐름도이다.
도 6은 본 발명의 실시예에 따른 정보제공자의 표지판 및 간판의 정보 추가 및 수정 방법을 나타낸 흐름도이다.
이하, 도면을 참조한 본 발명의 설명은 특정한 실시 형태에 대해 한정되지 않으며, 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있다. 또한, 이하에서 설명하는 내용은 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
이하의 설명에서 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용되는 용어로서, 그 자체에 의미가 한정되지 아니하며, 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 명세서 전체에 걸쳐 사용되는 동일한 참조번호는 동일한 구성요소를 나타낸다.
본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한, 이하에서 기재되는 "포함하다", "구비하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것으로 해석되어야 하며, 하나 또는 그 이상의 다른 특징들이나, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 갖고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 갖는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
이하, 본 발명의 실시예를 첨부한 도 1 내지 6을 참조하여 상세히 설명하기로 한다.
도 1은 본 발명의 실시예에 따른 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 시스템의 구성을 나타내는 구성도이다.
도 1을 참조하면, 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스는 표지판 및 간판(10), 서버(20), 사용자 단말기(100), 정보제공자 단말기(200)를 포함할 수 있다.
또한, 사용자 단말기(100) 및 정보제공자 단말기(200)와 서버(20) 간의 데이터 송수신이 이루어지는 통신부(미도시)를 포함할 수 있다.
우선 본 발명의 실시예 따른 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 시스템의 핵심 기술인 증강현실을 설명하면, 인기 만화인 [드래곤볼]에는 안경처럼 눈에 착용하고 상대를 바라보면 그의 전투력 정보와 상대 거리, 위치 등을 실시간으로 보여주는 '스카우터'라는 기기가 등장한다. 이것이 증강현실 기술의 대표적인 사용 예다.
많은 대중들이 증강현실(Augmented Reality)과 가상현실(Virture Reality)을 혼동하고 있다. 가상현실은 자신(객체)과 배경 및 환경 모두 현실이 아닌 가상의 이미지를 사용하는데 반해, 증강현실은 현실의 이미지나 배경에 3차원 가상 이미지를 겹쳐서 하나의 영상으로 보여주는 기술이다.
증강현실은 또한 혼합현실(Mixed Reality)이라고도 하는데, 비행기 제조사인 '보잉' 사에서 1990년경 비행기 조립과정에 가상의 이미지를 첨가하면서 '증강현실'이 처음으로 세상에 소개되었다.
이렇듯, 증강현실과 가상현실은 서로 비슷한 듯 하지만 그 주체가 허상이냐 실상이냐에 따라 명확히 구분된다. 컴퓨터 게임으로 예를 들면, 가상현실 격투 게임은 '나를 대신하는 캐릭터'가 '가상의 공간'에서 '가상의 적'과 대결하지만, 증강현실 격투 게임은 '현실의 내'가 '현실의 공간'에서 가상의 적과 대결을 벌이는 형태가 된다. 때문에 증강현실이 가상현실에 비해 현실감이 뛰어나다는 특징이 있다.
다음으로 본 발명의 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 시스템의 앞서 말한 구성들에 대해 상세히 기술하면, 통신부(미도시)는 사용자 단말기(100) 및 정보제공자 단말기(200)와 서버(20) 간의 정보 송수신을 위한 통로를 제공하는 역할을 한다.
표지판 및 간판(10)에 증강현실 서비스를 제공하기 위하여 사용자 단말기(100) 및 정보제공자 단말기(200)와 서버(20)간의 데이터 송수신이 이루어질 수 있도록 하는 데이터망에 해당될 수 있다.
예를 들어, 통신부(미도시)는 인터넷 프로토콜을 통하여 대용량 데이터의 송수신 서비스를 제공하는 IP망으로 IP를 기반으로 서로 다른 망을 통합한 IP망 구조인 ALL IP망일 수 있다. 또는 유선통신망, 무선통신망에 속하는 와이브로, 와이파이 중 하나일 수 있다.
다음으로 표지판 및 간판(10)은 증강현실 마커를 포함할 수 있으며, 마커에는 고유번호가 부여되어 포함하고 있다.
고유번호는 표지판 및 간판(10)의 번역 정보를 저장하고 있으며, 그 외에 표지판 및 간판(10)에서 관련 정보를 모두 번역하여 관광객에게 제공할 수 있도록 저장될 수 있다.
즉 고유번호는 서버(20)에 저장되므로 번역 정보 및 관련 정보도 서버에 저장되며, 서버는 상기 번역 정보 및 관련 정보를 포함하는 데이터베이스부(미도시)를 포함할 수 있다.
따라서 마커에 부여된 고유번호를 통해 표지판 및 간판(10)의 정보를 외국인 관광객이 쉽게 읽을 수 있도록 번역될 수 있고, 더 나아가 현지인의 도움을 빌리지 않고도 스스로 찾을 수 있어 소요되는 시간이 감소하고, 성격에 따른 이로운 점도 있을 수 있다.
도 2를 참조하여 서버(20)에 대한 구성을 자세히 설명하기로 하면, 서버(20)는 매칭 데이터부(21) 및 추가 설명 데이터부(22)를 포함할 수 있다.
또한, 서버는 상기 번역 정보 및 관련 정보를 포함하는 데이터베이스부(미도시)를 포함할 수 있다.
표지판 및 간판(10)은 증강현실 마커를 포함할 수 있는 데, 증강현실 마커에 대해 설명하면, 마커는 타겟을 두고 그 타겟에서 증강현실이 이뤄지는 것을 말한다.
예를 들면, 일반사물에는 아무런 반응을 보이지 않다가, 증강현실 어플리케이션에서 코딩 시에 특정 컵 이미지를 넣어두고 그 이미지를 카메라가 비추면 어플리케이션 내에서 그 이미지를 인식하고 그 이미지에 따로 넣어둔 행동들을 작동하는 것이다.
다시 말해, 본원 발명에서는 행동이 아니라 번역된 내용의 이미지가 나타나는 것이다.
여기서 매칭 데이터부(21)의 역할은 사용자 단말기(100) 및 정보제공자 단말기(200)에 구성된 카메라모듈(110,210)을 통해서 표지판 및 간판(10)에 있는 마커를 인식하면 마커에 부여된 고유번호와 데이터가 입력된 데이터의 고유번호를 매칭시켜 번역정보 및 관련 정보를 사용자 단말기(100)로 전송 되도록 한다.
또한, 정보제공자 단말기(200)에의해 표지판 및 간판(10)에 있는 마커를 인식하면 마커에 부여된 고유번호와 데이터가 입력된 데이터의 고유번호를 매칭시켜 설명 및 수정내용을 입력할 수 있도록 고유번호를 제공한다.
고유번호를 제공하는 방법은 정보제공자 단말기(200)에서 인증과정을 걸쳐 고유번호로 접속할 수 있도록 하여 설명 및 수정내용을 입력할 수 있도록 할 수 있다.
인증방법은 표지판 및 간판(10) 정보에 저장되어 있는 정보제공자 관련 정보 중 하나를 선택하여 인증할 수 있으며, 정보제공자 관련 정보는 이름, 주민등록번호, 사업자등록증 등 입력하여 인증할 수 있다.
따라서, 서버(20)는 정보제공자 인증부(미도시)를 더 포함할 수 있다.
최종적으로, 매칭 데이터부(21)전송된 고유번호가 서로 매칭되도록 하여 번역정보 및 그 외 정보를 사용자 단말기(100)에 제공할 수 있도록 하는 역할을 할 수 있다.
또한, 서버(20)는 매칭된 데이터를 저장하는 저장부를 더 포함할 수 있다.
저장부는 플래시 저장형, 하드디스크형, 멀티미디어 카드 마이크로형, USB형, RAM형, ROM형, SRAM형, 광 디스크형 중 하나의 형태로 이루어진 저장매체가 이용될 수 있다.
추가 설명 데이터부(22)에 대한 설명은 추후에 정보제공자 단말기(200)와 연계하여 후술하기로 한다.
사용자 단말기(100)는 외국인 관광객 또는 일반 관광객을 주체로 하며, 표지판 및 간판(10)의 정보를 제공 받기 위해 사용된다.
도 3을 참조하면, 사용자 단말기(100)는 사용자 카메라모듈(110), 사용자 제어부(120)로 구성될 수 있으며, 사용자 제어부(120)는 사용자 증강현실 모듈(123)로 구성될 수 있다.
도 3을 참조하여 사용자 단말기(100)의 각 구성에 대해 구체적으로 설명하도록 한다.
사용자 카메라모듈(110)은 렌즈, VCM Actuator, IR Cut Filter, Sensor, ISP, PCB로 구성될 수 있다.
상기 구성은 일반적인 모바일 기기에 내재 된 카메라 모듈의 구성을 나타내므로 상세한 설명은 생략하도록 한다.
사용자 카메라모듈(110)은 표지판 및 간판(10)에 포함된 마커를 인식하는 데 있어서 중요한 역할을 하는 것으로, 예를 들면, 일반적인 QR코드 인식과 같은 원리처럼, 증강현실 어플리케이션을 실행시키면 카메라로 인식할 수 있는 창이 뜨는 형식으로 진행되는 것으로, 표지판 및 간판(10)의 마커를 사용자 카메라모듈(110)로 인식하여 현실 이미지에 번역정보 및 그 외 정보를 3차원 방식으로 디스플레이 되는 방식이 적용될 수 있다.
또한, 서버(20)는 외국어 종류 버튼을 도 포함할 수 있다.
외국어 종류 버튼은 사용자 단말기(100)에 제공되는 것으로 카메라 인식하기 전이나 후에 사용자(외국인 관광객) 자신의 모국어를 선택하면 한글로 표기된 표지판 및 간판(10)이 번역되어 사용자에게 제공될 수 있도록 하는 것이다.
다음으로, 사용자 및 정보제공자 제어부(120,220)는 사용자 및 정보제공자 증강현실 모듈(123,223)로 구성될 수 있다.
사용자 및 정보제공자 제어부(120,220)는 상기 구성 외에도 방송 수신모듈, 이동 통신 모듈, 무선 인터넷 모듈, 근거리 통신 모듈 및 위치 정보 모듈 등 중 어느 하나 이상을 포함할 수 있고 증강현실 구현을 통한 각종 데이터를 사용자 단말기(100) 및 정보제공자 단말기(200)에서 서버(20)에 요청하거나 전송받을 수 있도록 하는 전반적인 제어 역할을 한다.
사용자 및 정보제공자 증강현실 모듈(123,223)은 사용자 단말기(100) 및 정보제공자 단말기(200)에 구성될 수 있으며, 앞서 말한 증강현실 원리를 적용할 수 있는 필요한 구성을 집약해 놓은 모듈일 수 있다.
즉, 실제 환경에 가상의 물체를 정합하여 실제 환경의 현실감을 강화 시키는 증강현실 시스템은 영상 및 가상물체의 처리를 위한 증강현실 브라우저와 관련장치들의 인터페이스로 구성된다.
카메라를 통해 인식된 영상은 증강현실 브라우저에서 영상처리를 통해 가상물체와 정합이 이루어진다.
정합된 영상 정보는 사용자 단말기(100) 및 정보제공자 단말기(200)와 같은 디스플레이 장치를 통해서 사용자 및 정보제공자에게 제공된다.
또한, 사용자 및 정보제공자 증강현실 모듈(123,223)은 인식된 영상 정보를 기반으로 번역된 언어를 생성하기 위한 영상처리를 수행하는 증강현실 브라우저는 크게 번역된 언어를 제공하는 마커를 인식하고 추적하기 위한 트래킹 모듈, 번역된 언어의 생성/제거/이동을 위한 렌더링 모듈과 번역된 언어와 표지판 및 간판(10) 사이의 거리 측정 및 간섭을 검사하기 위한 측정 모듈로 구성될 수 있다.
상기와 같은 구성들로 인하여 증강현실 어플리케이션이 구동될 수 있다.
서버(20)의 데이터베이스부(미도시)는 국내 관광지에 설치된 표지판 및 간판(10)의 다양한 언어로 번역될 수 있는 정보를 포함할 수 있다.
그 외에도 표지판 및 간판(10)과 관련된 위치 정보, 이미지 정보, 음성 정보 중 하나이상으로 구성될 수 있으며, 중복이 없는 데이터의 집합을 유지할 수 있다.
또한, 저장을 관리하는 데이터일 수 있다.
데이터베이스부(미도시)는 실시간 접근성, 계속적인 진화, 동시 공유, 내용에 의한 참조, 데이터 논리적 독립성을 갖출 수 있다.
정보제공자 단말기(200)의 구성을 나타낸 도 4를 참고하면, 상기 구성 및 구성 관련 내용은 사용자 단말기(100)에 한하지 않고, 정보제공자 단말기(200)에도 같은 구성을 포함할 수 있다. 그러므로 정보제공자 단말기(200)의 구성인 정보제공자 카메라모듈(210) 및 정보제공자 제어부(220)의 구성에 관련한 설명은 생략하도록 한다.
그러나, 정보제공자 단말기(200)는 입력부(227)를 포함할 수 있다.
입력부(227)는 정보제공자인 표지판 및 간판(10)의 주인이 직접 표지판 및 간판(10)의 주요 내용에 대한 정보를 갱신하거나 수정할 수 있도록 하는 것이다.
입력방식은 정보제공자 단말기(200)에 구성된 키보드나 터치 방식을 이용하여 입력할 수 있으며, 이미지나 음성으로 입력되거나 저장될 수 있다.
서버(20)에 구성되는 추가 설명 데이터와 연계되어 구동되는 것으로 입력부(227)로 입력된 추가 설명 및 수정 내용을 서버(20)로 전송하여 추가 설명 데이터부(22)로 저장되고, 기존의 표지판 및 간판(10) 정보 데이터의 고유번호를 통해 계속적으로 갱신되어 저장될 수 있다.
본 발명의 실시예에 따른 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 제공방법은 도 5 및 6을 참조하여 설명할 수 있다.
도 5를 참조하면, 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 제공방법은 사용자 단말기로부터 증강현실을 이용한 표지판 및 간판 번역 어플리케이션을 실행하는 단계(S10), 사용자 단말기의 카메라 모듈로부터 상기 표지판 및 간판 마커를 인식하는 단계(S20), 인식된 상기 표지판 및 간판 마커를 서버로 전송하는 단계(S30), 상기 서버에서 상기 표지판 및 간판 마커를 인식하고 마커에 부여된 고유번호와 데이터가 입력된 고유번호를 상호 매칭하는 단계(S40), 상기 서버에서 매칭된 상기 표지판 및 간판의 번역 정보 및 관련 정보를 사용자 단말기로 송신하는 단계(S50) 및 사용자 단말기로 상기 표지판 및 간판의 번역 정보 및 관련 정보가 수신되고 디스플레이 되는 단계(S60)을 포함하여 구성될 수 있다.
또한, S20단계 이전에 사용자는 자신의 모국어를 선택하는 단계를 더 포함할 수 있다.
각 단계의 구성은 사용자 단말기(100)에서 증강현실 번역 어플리케이션 실행 방법을 나열한 것이다.
도 6을 참조하면, 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 제공방법은 정보제공자 단말기로부터 증강현실을 이용한 표지판 및 간판 번역 어플리케이션을 실행하는 단계(S100), 정보제공자 단말기의 카메라 모듈로부터 상기 표지판 및 간판 마커를 인식하는 단계(S200), 인식된 상기 표지판 및 간판 마커와 고유번호를 서버로 전송하는 단계(S300), 정보제공자 단말기는 상기 서버로부터 매칭되어 전송된 고유번호로 접속하여 추가 설명 및 수정내용을 입력하고 서버로 전송하는 단계(S400) 및 상기 서버에서 상기 표지판 및 간판 마커, 마커에 부여된 고유번호에 추가 설명 및 수정 내용이 저장되는 단계(S500)를 포함할 수 있다.
상기 단계의 구성은 정보제공자의 단말기를 주체로 하는 증강현실 번역 어플리케이션 방법을 나열한 것이다.
증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 제공방법을 통해서 사용자 및 정보제공자가 손쉽게 증강현실 번역 어플리케이션 실행할 수 있도록 한다.
S400단계는 정보제공자 단말기(200)로 고유번호로 접속하기 이전에 정보제공자 인증 단계를 더 포함할 수 있다.
인증 방법은 앞서 구성을 설명하면서 했으므로 생략하도록 한다.
또한, 상기 표지판 및 간판(10) 및 데이터에 부여되는 고유번호는 바코드, 2차원 바코드, 읽을 수 있는 심볼 중 어느 하나로 형성될 수 있다.
S500단계는
또한, 본 발명의 실시예에 따른 증강현실 번역 어플리케이션을 이용한 표지판 및 간판(10) 번역 서비스 시스템 및 제공방법의 구성 및 단계는 증강현실 번역 어플리케이션을 실행하는 것을 서술한 것이다.
이상에서 설명한 본 발명의 실시예는 장치 및/또는 방법을 통해서만 구현이 되는 것은 아니며, 본 발명의 실시예의 구성에 대응하는 기능을 실현하기 위한 프로그램, 그 프로그램이 기록된 기록 매체 등을 통해 구현될 수도 있으며, 이러한 구현은 앞서 설명한 실시예의 기재로부터 본 발명이 속하는 기술분야의 전문가라면 쉽게 구현할 수 있는 것이다.
이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
10 : 표지판 및 간판
20 : 서버
21 : 매칭 데이터부
22 : 추가 설명 데이터부
100 : 사용자 단말기
110 : 사용자 카메라모듈
210 : 정보제공자 카메라모듈
120 : 사용자 제어부
220 : 정보제공자 제어부
123 : 사용자 증강현실 모듈
223 : 정보제공자 증강현실 모듈
200 : 정보제공자 단말기
227 : 입력부

Claims (2)

  1. 증강현실 마커를 포함하는 표지판 및 간판;
    상기 표지판 및 간판의 정보를 제공받는 사용자가 이용하는 사용자 단말기;
    상기 표지판 및 간판의 정보를 제공하는 정보제공자가 이용하는 정보제공자 단말기;
    상기 사용자 단말기 및 정보제공자 단말기에 의해 인식된 표지판 및 간판의 마커에 부여된 고유번호를 매칭하여 상기 사용자 단말기 및 정보제공자 단말기로 정보를 전송하는 서버 및
    상기 사용자 단말기 및 정보제공자 단말기와 상기 서버간의 데이터 송수신이 이루어지는 통신부를 포함하고,
    상기 서버는, 상기 표지판 및 간판의 마커와 마커에 부여되는 고유번호를 저장하고, 데이터가 입력된 고유번호와 상호 매칭 시키는 매칭 데이터부를 포함하되,
    상기 사용자 단말기는
    사용자 카메라모듈;
    증강현실을 이용해 표지판 및 간판 마커를 인식하는 사용자 증강현실 모듈을 포함하는 사용자 제어부를 포함하고,
    상기 정보제공자 단말기는
    정보제공자 카메라모듈;
    증강현실을 이용해 표지판 및 간판 마커를 인식하는 정보제공자 증강현실 모듈을 포함하는 정보제공자 제어부를 포함하되,
    상기 정보제공자 제어부는 방송 수신모듈, 이동 통신 모듈, 무선 인터넷 모듈, 근거리 통신 모듈 및 위치 정보 모듈 중 하나 이상을 더 포함하고,
    상기 서버는, 표지판 및 간판 정보에 저장되어 있는 정보제공자 관련 정보 중 하나를 선택하여 인증할 수 있으며, 정보제공자 관련 정보는 이름, 주민등록번호, 사업자등록증 중 하나이상을 입력하여 인증할 수 있는 정보제공자 인증부를 더 포함하고,
    상기 표지판 및 간판 마커에 부여된 고유번호와 데이터가 입력된 고유번호를 매칭하여 사용자 단말기로 상기 표지판 및 간판의 정보를 외국어로 번역하여 제공하고,
    상기 서버는 외국어 종류 버튼을 더 포함하고,
    상기 표지판 및 간판의 정보는 국내 관광지에 설치된 표지판 및 간판의 다양한 언어로 번역될 수 있는 정보이며, 표지판 및 간판과 관련된 위치 정보, 이미지 정보, 음성 정보 중 하나이상을 더 포함하며, 중복이 없는 데이터의 집합을 유지하고,
    상기 정보제공자 단말기는,
    상기 표지판 및 간판에 있는 마커가 인식되고, 인증과정을 걸쳐 인증되면, 상기 표지판 및 간판 마커에 부여된 고유번호로 접속하여 설명이나 수정 내용을 정보제공자 단말기에 구성된 키보드나 터치 방식을 이용하여 입력하거나 이미지나 음성으로 입력할 수 있는 입력부를 더 포함하고,
    상기 서버는,
    상기 정보제공자 단말기에 의해 추가적으로 입력된 설명 및 수정내용은 상기 표지판 및 간판 정보 데이터의 고유번호를 통해 저장하는 추가 설명 데이터부를 더 포함하고,
    상기 고유번호는,
    바코드, 2차원 바코드, 읽을 수 있는 심볼 중 어느 하나로 형성되며,
    표지판 및 간판의 번역 정보, 관련 정보를 저장하고 있는 것을 특징으로 하는 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템.
  2. 하드웨어와 결합되어 사용자 단말기의 카메라 모듈로부터 표지판 및 간판 마커를 인식하는 단계, 인식된 상기 표지판 및 간판 마커를 서버로 전송하는 단계, 상기 서버에서 상기 표지판 및 간판 마커를 인식하고 마커에 부여된 고유번호와 데이터가 입력된 고유번호를 상호 매칭하는 단계, 상기 서버에서 매칭된 상기 표지판 및 간판의 번역 정보 및 관련 정보를 사용자 단말기로 송신하는 단계 및 사용자 단말기로 상기 표지판 및 간판의 번역 정보 및 관련 정보가 수신되고 디스플레이 되는 단계를 포함하고,
    상기 서버에서 매칭된 상기 표지판 및 간판의 번역 정보 및 관련 정보를 사용자 단말기로 송신하는 단계이전에,
    사용자 단말기로 외국어 종류 버튼을 통해 외국어 종류를 입력받는 단계를 더 포함하고,
    상기 표지판 및 간판의 정보는 국내 관광지에 설치된 표지판 및 간판의 다양한 언어로 번역될 수 있는 정보이며, 표지판 및 간판 관련 정보는 위치 정보, 이미지 정보, 음성 정보 중 하나이상을 더 포함하며, 중복이 없는 데이터의 집합을 유지하며,
    상기 서버에서 상기 표지판 및 간판 마커를 인식하고 마커에 부여된 고유번호와 데이터가 입력된 고유번호를 상호 매칭하는 단계 이후에,
    표지판 및 간판 정보에 저장되어 있는 정보제공자 관련 정보 중 하나를 선택하여 인증할 수 있으며, 정보제공자 관련 정보는 이름, 주민등록번호, 사업자등록증 중 하나이상을 입력하여 인증할 수 있는 정보제공자 인증하는 단계;
    상기 정보제공자 단말기는 상기 표지판 및 간판 마커에 부여된 고유번호로 접속하여 설명 및 수정내용을 입력하고 서버로 전송하는 단계 및
    서버가 정보제공자 단말기에 의해 추가적으로 입력된 설명 및 수정내용을 상기 표지판 및 간판 정보 데이터의 고유번호를 통해 저장하는 추가 하는 단계를 더 포함하고,
    상기 고유번호는,
    바코드, 2차원 바코드, 읽을 수 있는 심볼 중 어느 하나로 형성되며,
    표지판 및 간판의 번역 정보, 관련 정보를 저장하고 있고,
    정보제공자 단말기로 상기 표지판 및 간판 마커에 부여된 고유번호로 접속하여 설명이나 수정 내용을 정보제공자 단말기에 구성된 키보드나 터치 방식을 이용하여 입력받거나 이미지나 음성으로 입력받으면 상기 서버로 전송하는 단계를 실행시키기 위하여 매체에 저장된 증강현실 번역 어플리케이션.
KR1020180168609A 2018-12-24 2018-12-24 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템 KR102005907B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180168609A KR102005907B1 (ko) 2018-12-24 2018-12-24 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180168609A KR102005907B1 (ko) 2018-12-24 2018-12-24 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020170012394A Division KR20180087961A (ko) 2017-01-26 2017-01-26 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템

Publications (2)

Publication Number Publication Date
KR20190000360A KR20190000360A (ko) 2019-01-02
KR102005907B1 true KR102005907B1 (ko) 2019-07-31

Family

ID=65021757

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180168609A KR102005907B1 (ko) 2018-12-24 2018-12-24 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템

Country Status (1)

Country Link
KR (1) KR102005907B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220168693A (ko) 2021-06-17 2022-12-26 김규한 증강 현실 기반의 번역 방법 및 시스템

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110891162B (zh) * 2019-11-12 2021-04-20 杭州当虹科技股份有限公司 基于5g与lbs的超高清城市景点实时宣传系统及方法
KR102230352B1 (ko) * 2019-11-22 2021-03-22 (주)에스유지 Ar 및 gps를 적용한 옥외광고물 측정기기
KR102308193B1 (ko) * 2019-11-22 2021-10-01 (주)에스유지 Ocr기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100138863A (ko) * 2010-12-14 2010-12-31 에스케이씨앤씨 주식회사 카메라 탑재 단말기에서 코드에 대응하는 증강현실과 개인화된 콘텐츠를 제공하는 방법
KR101843585B1 (ko) * 2011-12-16 2018-03-30 주식회사 엘지유플러스 사물 인식을 통한 서비스 서버 및 방법
KR20140068332A (ko) * 2012-11-27 2014-06-09 (주) 씨이랩 증강현실 마커 인식을 이용한 메뉴판광고 서비스시스템 및 그 방법
KR101597017B1 (ko) * 2014-02-12 2016-03-08 원혁 광학 인식 코드를 이용한 다국어 지원 서비스

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220168693A (ko) 2021-06-17 2022-12-26 김규한 증강 현실 기반의 번역 방법 및 시스템

Also Published As

Publication number Publication date
KR20190000360A (ko) 2019-01-02

Similar Documents

Publication Publication Date Title
KR102005907B1 (ko) 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템
US20200334906A9 (en) Sharing links in an augmented reality environment
US8510348B2 (en) Systems and methods for creating and using imbedded shortcodes and shortened physical and internet addresses
Butchart Augmented reality for smartphones
US20160041981A1 (en) Enhanced cascaded object-related content provision system and method
US20140294234A1 (en) System and Method for Initiating Actions and Providing Feedback by Pointing at Object of Interest
CN103064512A (zh) 用虚拟数据使静态打印内容成为动态
CN108681393A (zh) 基于增强现实的翻译显示方法、装置、计算设备及介质
CN110442813A (zh) 一种基于ar的旅游纪念信息处理系统及方法
KR20180087961A (ko) 증강현실 번역 어플리케이션을 이용한 표지판 및 간판 번역 서비스 시스템
CN106130886A (zh) 扩展信息的展示方法及装置
US10079888B2 (en) Generation and use of numeric identifiers for locating objects and navigating in spatial maps
Alshattnawi Effective use of QR codes in religious tourism
Pawade et al. Augmented reality based campus guide application using feature points object detection
WO2012070708A1 (ko) 범세계적으로 고유한 문자열 정보식별아이디의 카메라 영상 입력 및 문자인식에 의한 온라인 정보 공유 방법 및 그 시스템
CN111078982A (zh) 一种电子页面的检索方法、电子设备及存储介质
KR102175519B1 (ko) 실제 사물의 사용성을 증강하는 가상 콘텐츠 제공 장치 및 방법
JP5876180B1 (ja) 情報リンクシステム、情報リンクプログラム、及び情報リンクシステムの運用方法
CN114049467A (zh) 显示方法、装置、设备、存储介质及程序产品
KR20220026067A (ko) 증강현실을 이용한 유아학습 방법
KR102167588B1 (ko) 복수의 사용자 장치를 기반으로 동영상을 생성하는 컨텐츠 생성 서비스 장치, 복수의 사용자 장치를 기반으로 동영상을 생성하는 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR102428862B1 (ko) 증강현실을 이용한 맞춤형 마케팅 콘텐츠 제공 플랫폼 시스템
KR20180060706A (ko) 증강 현실 게임을 위한 이벤트 제공 서버 및 방법
Daraghmi et al. PseduoEye: An Interactive Augmented Reality Assistant App for Electronic Engineering Students
Han et al. Implementation of new services to support ubiquitous computing for town life

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant