KR101118010B1 - 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체 - Google Patents

증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체 Download PDF

Info

Publication number
KR101118010B1
KR101118010B1 KR1020100069228A KR20100069228A KR101118010B1 KR 101118010 B1 KR101118010 B1 KR 101118010B1 KR 1020100069228 A KR1020100069228 A KR 1020100069228A KR 20100069228 A KR20100069228 A KR 20100069228A KR 101118010 B1 KR101118010 B1 KR 101118010B1
Authority
KR
South Korea
Prior art keywords
user terminal
terminal
information
video call
augmented reality
Prior art date
Application number
KR1020100069228A
Other languages
English (en)
Other versions
KR20120008400A (ko
Inventor
오주석
Original Assignee
텔코웨어 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 텔코웨어 주식회사 filed Critical 텔코웨어 주식회사
Priority to KR1020100069228A priority Critical patent/KR101118010B1/ko
Publication of KR20120008400A publication Critical patent/KR20120008400A/ko
Application granted granted Critical
Publication of KR101118010B1 publication Critical patent/KR101118010B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/023Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13Receivers
    • G01S19/14Receivers specially adapted for specific applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/12Use of codes for handling textual entities
    • G06F40/14Tree-structured documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/16Communication-related supplementary services, e.g. call-transfer or call-hold
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/60Subscription-based services using application servers or record carriers, e.g. SIM application toolkits

Abstract

본 발명에 따른 제1사용자 단말기가 제2사용자 단말기의 단말 위치 정보를 수신하는 단계; 상기 제1사용자 단말기가 상기 단말 위치 정보를 AR 서버로 전송하는 단계; 및 상기 제1사용자 단말기가 AR 서버에서 상기 단말 위치 정보가 가공된 AR 정보를 수신하고, 상기 제1사용자 단말기 및 상기 제2사용자 단말기의 영상 통화 화면에 상기 AR 정보를 출력하는 단계를 포함하고, 상기 AR 정보는 상기 증강 현실 정보를 포함한다.

Description

증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체{METHOD AND SYSTEM FOR VIDEO CALL SERVICE USING AUGMENTED REALITY, AND RECORDING MEDIUM}
본 발명은 영상 통화 서비스 방법 및 그 시스템, 및 기록매체에 관한 것으로 보다 구체적으로는 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체에 대한 것이다.
최근 이동 통신 관련 기술이 발달하면서, 통화 상대방의 얼굴을 보면서 통화할 수 있는 영상통화가 널리 사용되고 있다. 영상 통화 시 사용자는 자신의 이동 통신 단말기상에 표시된 영상 통화 이미지를 통하여 통화 상대방의 얼굴을 바라보면서 통화하기 때문에, 통화 상대방의 얼굴과 상대방이 위치한 배경만을 볼 수 있다. 즉, 현재의 영상 통화는 영상 통화 자체에만 포커스가 맞추어져 있어 기타 별도의 서비스가 제공될 수 없다.
예컨대, 사용자는 통화 상대방이 전송하는 영상을 수신하기만 하여 사용자는 통화 상대방이 보고 있는 영상을 볼 수도 없고, 통화 상대방이 전송하는 영상에 대해 통화 상대방이 확인할 수 있는 영상 응답을 할 수도 없다.
따라서, 위와 같은 서비스를 제공하는 방법 및 시스템이 제공될 필요가 있다.
따라서, 본 발명이 이루고자 하는 과제는 발신자와 수신자가 서로 단순 영상 통화뿐 아니라 증강 현실이 포함된 다양한 영상 통화 서비스를 주고 받도록 하기 위한 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체를 제공하는 것이다.
본 발명에 따른 증강 현실을 이용한 영상 통화 서비스 방법은 제1사용자 단말기가 제2사용자 단말기의 단말 위치 정보를 수신하는 단계; 상기 제1사용자 단말기가 상기 단말 위치 정보를 AR 서버로 전송하는 단계; 및 상기 제1사용자 단말기가 AR 서버에서 상기 단말 위치 정보가 가공된 AR 정보를 수신하고, 상기 제1사용자 단말기 및 상기 제2사용자 단말기의 영상 통화 화면에 상기 AR 정보를 출력하는 단계를 포함할 수 있다.
또한, 상기 AR 정보는 상기 증강 현실 정보를 포함할 수 있다.
또한, 상기 증강 현실을 이용한 영상 통화 서비스 방법은 상기 제1사용자 단말기가 제2사용자 단말기의 단말 위치 정보를 수신하는 단계 이전에, 상기 제1사용자 단말기와 상기 제2사용자 단말기가 영상 통화가 연결되는 단계; 및 상기 제1사용자 단말기 및 상기 제2사용자 단말기가 AR 어플리케이션이 실행가능한 단말기인지 여부를 판단하는 단계를 더 포함할 수 있다.
또한, 상기 제1사용자 단말기 및 상기 제2사용자 단말기가 AR 어플리케이션이 실행가능한 단말기에 해당하는 경우, 상기 제1사용자 단말기가 제2사용자 단말기의 단말 위치 정보를 수신할 수 있다.
또한, 상기 단말 위치 정보는 GPS 정보 및 중력/조도/가속도 센서 등에 따른 정보를 포함할 수 있다.
또한, 상기 단말 위치 정보는 상기 제2사용자 단말기에 의해 XML 코드로 작성될 수 있다.
또한, 상기 제2사용자 단말기의 영상 통화 화면에 상기 AR 정보가 출력되는 경우, 제2사용자가 상기 AR 정보를 수정하는 경우, 수정된 AR 정보가 상기 제1사용자 단말기에 출력될 수 있다.
본 발명에 따른 증강 현실을 이용한 영상 통화 서비스 시스템은 증강현실을 이용한 영상 통화를 수행하는 제1사용자 단말기; 증강현실을 이용한 영상 통화를 수행하는 제2사용자 단말기; 및 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기의 단말 위치 정보를 수신받고, 이를 가공하여 AR 정보를 생성하는 AR 서버를 포함할 수 있다.
또한, 상기 AR 서버는 상기 단말 위치 정보를 전송한 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기에, 상기 AR 정보를 출력할 수 있고, 상기 AR 정보는 상기 증강 현실 정보를 포함할 수 있다.
본 발명에 따른 증강 현실을 이용한 영상 통화 서비스 방법은 AR 서버가 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기의 단말 위치 정보를 수신하는 단계; 상기 AR 서버가 상기 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기의 단말 위치 정보를 가공하여 AR 정보를 생성하는 단계; 및 상기 AR 서버가 상기 단말 위치 정보를 전송한 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기에, 상기 AR 정보를 출력하는 단계를 포함할 수 있다.
본 발명에 따른 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체에 의하면, 발신자와 수신자가 서로 단순 영상 통화뿐 아니라 증강 현실이 포함된 다양한 영상 통화 서비스를 주고 받을 수 있다.
또한, 본 발명에 따른 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체에 의하면, 발신자 및 수신자가 서로 증강 현실이 포함된 영상 통화를 주고 받을 수 있고, 수정도 가할 수 있다.
도 1은 본 발명의 일 실시예에 따른 증강 현실을 이용한 영상 통화 서비스 시스템을 나타낸다.
도 2는 본 발명의 일 실시예에 따른 증강 현실을 이용한 영상 통화 서비스 플로우를 나타낸다.
도 3은 도 2의 증강 현실을 이용한 영상 통화 서비스에서의 수신자 단말기에 대한 플로우를 나타낸다.
도 4는 도 2의 증강 현실을 이용한 영상 통화 서비스에서의 발신자 단말기에 대한 플로우를 나타낸다.
본 명세서 또는 출원에 개시되어 있는 본 발명의 실시 예들에 대해서 특정한 구조적 내지 기능적 설명들은 단지 본 발명에 따른 실시 예를 설명하기 위한 목적으로 예시된 것으로, 본 발명에 따른 실시 예들은 다양한 형태로 실시될 수 있으며 본 명세서 또는 출원에 설명된 실시예들에 한정되는 것으로 해석되어서는 아니 된다.
본 발명에 따른 실시예는 다양한 변경을 가할 수 있고 여러가지 형태를 가질 수 있으므로 특정실시 예들을 도면에 예시하고 본 명세서 또는 출원에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예를 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1 및/또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기구성 요소들은 상기용어들에 의해 한정되어서는 안된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일 실시예에 따른 증강 현실을 이용한 영상 통화 서비스 시스템을 나타낸다. 상기 영상 통화 서비스 시스템(1)은 발신자 단말기(10), 수신자 단말기(20) 및 AR(Augmented Reality) 서버(30)를 포함한다.
상기 발신자 단말기(10) 또는 수신자 단말기(20)는 디지털 카메라, 휴대용단말기, MP3, MP4, PMP(Portable Multimedia Player), CCTV, 노트북 컴퓨터, 또는 PC(personal computer), 휴대전화(cellular phone), 또는 PDA(personal digital assistants)와 같은 각종 전자기기 등이 될 수 있다.
상기 발신자 단말기(10) 및 수신자 단말기(20)는 이동 통신망(40)을 통해 통신하고, 상기 발신자 단말기(10) 및 수신자 단말기(20)는 AR 서버(30)와 WiFi 또는 3G 통신망(50)으로 통신한다.
상기 발신자 단말기(10)는 상기 수신자 단말기(20)에 상기 이동 통신망(40)을 거쳐 영상 통화를 요청하고, 상기 수신자 단말기(20)는 상기 발신자 단말기(10)의 영상 통화 요청을 수락하는 경우 영상 통화를 할 수 있다.
이때, 상기 발신자 단말기(10) 및 상기 수신자 단말기(20)는 영상 통화 시에 서로 증강 현실(AR:Augmented Reality)을 구현할 수 있으며, 증강 현실을 구현하기 위하여 AR 어플리케이션을 실행할 수 있다.
상기 발신자 단말기(10) 및 상기 수신자 단말기(20)는 상기 AR 어플리케이션을 실행한 후 상대 단말기에 대한 카메라 영상 정보 및 증강 현실 영상 정보를 수신할 수 있다. 상기 카메라 영상 정보 및 증강 현실 영상 정보는 GPS 정보, 중력/조도/가속도 센서 등에 따른 정보를 포함한다.
상기 카메라 영상 정보 및 증강 현실 영상 정보는 WiFi 또는 3G 통신망(50)을 거쳐 AR 서버(30)로 전송될 수 있고, 상기 AR 서버(30)는 이를 수신하여 상대 단말기의 증강 현실 영상 정보에 대한 증강 현실 데이터를 조회/가공하여 다시 해당 단말기로 전송함으로써 단말기 간의 영상 통화시 상대방 단말기의 화면에 영상과 증강 현실 정보를 모두 출력할 수 있도록 한다.
도 2는 본 발명의 일 실시예에 따른 증강 현실을 이용한 영상 통화 서비스 플로우를 나타낸다. 도 2의 증강 현실을 이용한 영상 통화 서비스 플로우는 도 1의 증강 현실을 이용한 영상 통화 서비스 시스템을 통해 이루어진다.
도 2를 참고하면, 상기 발신자 단말기(10)는 수신자 단말기(20)에 이동 통신망(40)을 통해 영상 통화연결을 요청하고(S10), 수신자 단말기는 영상 통화 요청을 수락하여 발신자와 수신자는 이동 통신망(40)을 통해 영상 통화를 할 수가 있다.
이때, 발신자와 수신자는 증강 현실을 이용한 영상 통화를 위하여 각자의 단말기에 해당하는 발신자 단말기(10)와 수신자 단말기(20)에서 AR 어플리케이션을 실행할 수 있다(S30 및 S40).
AR 어플리케이션이 실행되고, 상기 발신자 단말기(10)는 상기 수신자 단말기(20)로부터 상기 수신자 단말기(20)의 GPS 정보 및 중력/조도/가속도 센서 등에 따른 단말 위치 정보를 수신한다(S50). 이때, GPS 정보 및 상기 중력/조도/가속도 센서 등에 따른 단말 위치 정보는 예컨대, 수신자가 위치한 지점의 정보 및 수신자 단말기(20)의 카메라가 촬영하고 있는 방향/지역 등의 정보를 포함한다. 상기 단말 위치 정보는 상기 수신자 단말기(20)에서 XML 코드로 작성되어 상기 발신자 단말기(10)로 전송된다.
다음으로, 상기 발신자 단말기(10)는 상기 수신한 각종 정보를 WiFi 또는 3G 통신망(50)을 통해 AR 서버(30)로 전송한다(S60). 이때, 상기 발신자 단말기(10)는 XML 코드의 상기 각종 정보를 수신하여 상기 AR 서버(30)로 전송한다.
상기 AR 서버(30)는 상기 수신된 각종 정보를 이용하여 증강 현실 데이터를 조회/가공한 AR 정보를 상기 발신자 단말기(10)로 다시 전송할 수 있다(S70).
상기 발신자 단말기(10)는 AR 서버(30)로부터 수신받은 AR 정보를 영상 통화 영상에 포함하여 상기 수신자 단말기(20)에 디스플레이할 수 있다(S80). 이때, 수신자가 상기 AR 정보를 수정을 가하는 경우, 수정된 AR 정보가 상기 발신자 단말기(10)에 출력될 수 있다. 즉, 발신자와 수신자는 증강 현실을 포함하는 영상 통화를 함께 볼 수 있고, 수정이 가해진 증강 현실 정보를 공유할 수 있다.
도 3은 도 2의 증강 현실을 이용한 영상 통화 서비스에서의 수신자 단말기에 대한 플로우를 나타낸다. 도 3의 플로우는 도 1의 발신자 수말기(20)와 관련해 수행될 수 있다.
도 3을 참고하면, 상기 수신자 단말기(20)와 발신자 단말기(10)는 영상 통화가 연결되고(S110), 상기 수신자 단말기(20)가 AR 어플리케이션이 실행가능한 단말인지를 검토한다(S120).
검토결과, 상기 수신자 단말기(20)가 AR 어플리케이션이 실행가능한 단말이 아니라면, 영상 통화 연결을 종료하고(S160), 상기 수신자 단말기(20)가 AR 어플리케이션이 실행가능한 단말에 해당한다면, 상기 수신자 단말기(20)는 상기 수신자 단말기(20)의 GPS 정보 및 중력/조도/가속도 센서 등에 따른 정보를 수집하고(S130), 상기 정보를 이용하여 XML 코드를 작성하여 저장한다(S140).
- 아래 - 는 상기 XML 코드의 일 예를 나타낸다.
- 아래 -
<?xml version="1.0"encoding="utf-8"?>
<arsensor>
<GPS>51.503171,-1.1264770</GPS>
<orientation>30.05, 11.28, 0.09</orientation>
<accelerometer>23.0, </accelerometer>
<proximity>73.147536, 0.510638, 100.0</proximity>
<ambient-sound>12.0</ambient-sound>
<moisture>20.0</moisture>
</arsensor>
상기 - 아래 -는 상기 XML 코드 포맷의 일 예로, "<GPS>51.503171,-1.1264770</GPS>"는 GPS 정보를 나타내고, "<orientation>30.05, 11.28, 0.09</orientation>"는 수신자 단말기(20)의 방향 정보를 나타내고, "<accelerometer>23.0, </accelerometer>"는 가속도 정보를 나타내고, "<proximity>73.147536, 0.510638, 100.0</proximity>"는 근접 센서에 따른 정보를 나타내고, "<ambient-sound>12.0</ambient-sound>"는 주변 음향 값을 나타내며, "<moisture>20.0</moisture>"는 주변 습도 값을 나타낸다.
상기 수신자 단말기(20)는 작성된 XML 코드를 실시간 영상 프로토콜에 삽입해 전송하여(S150), 발신자 단말기(10)와 영상 통화하는 경우 이를 영상에 출력하여 증강 현실이 포함된 영상 통화를 수행할 수 있도록 한다(S160).
도 4는 도 2의 증강 현실을 이용한 영상 통화 서비스에서의 발신자 단말기에 대한 플로우를 나타낸다. 도 4의 플로우는 도 1의 발신자 단말기(10)에서 수행될 수 있다.
도 4를 참고하면, 상기 발신자 단말기(10)와 수신자 단말기(20)는 영상 통화가 연결되고(S210), 상기 발신자 단말기(10)가 AR 어플리케이션이 실행가능한 단말인지를 검토한다(S220).
검토결과, 상기 발신자 단말기(10)가 AR 어플리케이션이 실행가능한 단말이 아니라면, 영상 통화 연결을 종료하고(S280), 상기 발신자 단말기(10)가 AR 어플리케이션이 실행가능한 단말에 해당한다면, 상기 발신자 단말기(10)는 AR 어플리케이션 실행 버튼을 영상 통화 화면에 출력하여(S230), 상기 AR 어플리케이션을 실행할 수 있도록 한다. AR 어플리케이션을 실행할지를 검토하여(S240), 실행하지 않는 경우 영상 통화 연결을 종료하고(S280), 실행하는 경우 수신자 단말기(20)에서의 데이터를 추출한다(S250). 이때, 상기 데이터는 GPS 정보 및 중력/조도/가속도 센서 등에 따른 데이터를 포함하고, XML 코드로 작성되어 있을 수 있다.
상기 발신자 단말기(10)는 AR 서버(30)에 접속하고 상기 XML 코드로 작성된 데이터를 전송하여 상기 데이터를 이용하여 증강 현실 데이터를 조회/가공한 AR 정보를 조회한다(S260). 이후, 상기 발신자 단말기(10)는 상기 AR 서버(30)에 의해 화면에 AR 정보를 출력할 수 있어 증강 현실이 포함된 영상통화를 수행할 수 있다.
도 2 내지 도 4에서 설명의 편의상 발신자 단말기(10) 및 수신자 단말기(20)로 구분하여 플로우로 설명하였으나, 영상 통화는 양방향 통신이기 때문에 상기 두 단말기는 어느 한쪽의 플로우에 따르는 것이 아니고, 다른 한쪽의 플로우를 따를 수 있다. 예컨대, 수신자 단말기(20)가 도 4의 플로우를 따를 수 있고, 발신자 단말기(10)가 도 3의 플로우를 따를 수도 있다.
상기 설명된 본 발명에 의한다면 다음과 같은 새로운 기능들이 가능할 수 있다. 예컨대, 제1사용자가 자신의 주변을 영상 통화로 제2사용자로 하여금 볼 수 있도록 할 수 있고, 제2사용자는 상기 제1사용자의 GPS 정보 및 중력/조도/가속도 센서 등에 따른 정보를 수신하고, AR 서버가 상기 정보를 조회/가공하여 제1사용자에게 전송할 수 있으며, 상기 제1사용자에게 위치 또는 원하는 경로를 증강 현실을 통해 볼 수 있도록 하여 길을 안내할 수 있다.
또한, 제1사용자가 자신 주변의 상품을 영상 통화로 제2사용자로 하여금 볼 수 있도록 할 수 있고, 제2사용자는 AR 서버를 통해 상기 영상의 상품에 대한 AR 정보를 검색할 수 있고, 이에 따라 상기 상품의 가격 및 다른 유사 상품과의 가격 비교 등을 할 수 있다.
또한, 민원인이 영상 통화로 치안 사고 또는 화재 사고 등에 대한 신고를 경찰청 또는 소방서 등으로 할 수 있으며, 해당 영상이 상기 경찰청 또는 소방서 등에 전송되어, 상기 경찰청 또는 소방서는 사고 장소, 민원인의 현 위치 등을 별도 설명을 듣지 않고 바로 알 수 있게 된다.
또한, 사용자는 교통 CCTV와 연결하여 상기 교통 CCTV에서 제공하는 영상 화면에 사용자가 필요한 증강 현실 AR 정보를 추가하여 사용하거나 제공할 수도 있게 된다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.
컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 본 발명에 따른 객체 정보 추정 방법을 수행하기 위한 프로그램 코드는 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 전송될 수도 있다.
또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
본 발명은 도면에 도시된 일 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.
10: 발신자 단말기
20: 수신자 단말기
30: AR 서버
40: 이동 통신망
50: WiFi 또는 3G 통신망

Claims (13)

  1. 제1사용자 단말기가 제2사용자 단말기의 단말 위치 정보를 수신하는 단계;
    상기 제1사용자 단말기가 상기 단말 위치 정보를 AR 서버로 전송하는 단계; 및
    상기 제1사용자 단말기가 AR 서버에서 상기 단말 위치 정보가 가공된 AR 정보를 수신하고, 상기 제1사용자 단말기 및 상기 제2사용자 단말기의 영상 통화 화면에 상기 AR 정보를 출력하는 단계를 포함하고,
    상기 AR 정보는 증강 현실 정보를 포함하는 증강 현실을 이용한 영상 통화 서비스 방법.
  2. 제1항에 있어서, 상기 제1사용자 단말기가 제2사용자 단말기의 단말 위치 정보를 수신하는 단계 이전에,
    상기 제1사용자 단말기와 상기 제2사용자 단말기가 영상 통화가 연결되는 단계; 및
    상기 제1사용자 단말기 및 상기 제2사용자 단말기가 AR 어플리케이션이 실행가능한 단말기인지 여부를 판단하는 단계를 더 포함하는 증강 현실을 이용한 영상 통화 서비스 방법.
  3. 제2항에 있어서,
    상기 제1사용자 단말기 및 상기 제2사용자 단말기가 AR 어플리케이션이 실행가능한 단말기에 해당하는 경우, 상기 제1사용자 단말기가 제2사용자 단말기의 단말 위치 정보를 수신하는 증강 현실을 이용한 영상 통화 서비스 방법.
  4. 제3항에 있어서,
    상기 단말 위치 정보는 GPS 정보 및 중력/조도/가속도 센서 등에 따른 정보를 포함하는 증강 현실을 이용한 영상 통화 서비스 방법.
  5. 제4항에 있어서,
    상기 단말 위치 정보는 상기 제2사용자 단말기에 의해 XML 코드로 작성되는 증강 현실을 이용한 영상 통화 서비스 방법.
  6. 제1항에 있어서,
    상기 제2사용자 단말기의 영상 통화 화면에 상기 AR 정보가 출력되는 경우, 제2사용자가 상기 AR 정보를 수정하는 경우, 수정된 AR 정보가 상기 제1사용자 단말기에 출력되는 증강 현실을 이용한 영상 통화 서비스 방법.
  7. 제1항 내지 제6항 중 어느 한 항의 증강 현실을 이용한 영상 통화 서비스 방법을 실현시키기 위한 프로그램이 저장된 기록 매체.
  8. 증강현실을 이용한 영상 통화를 수행하는 제1사용자 단말기;
    증강현실을 이용한 영상 통화를 수행하는 제2사용자 단말기; 및
    상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기의 단말 위치 정보를 수신받고, 이를 가공하여 AR 정보를 생성하는 AR 서버를 포함하고,
    상기 AR 서버는 상기 단말 위치 정보를 전송한 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기에, 상기 AR 정보를 출력하며,
    상기 AR 정보는 증강 현실 정보를 포함하는 증강 현실을 이용한 영상 통화 서비스 시스템.
  9. 제8항에 있어서,
    상기 단말 위치 정보는 GPS 정보 및 중력/조도/가속도 센서 등에 따른 정보를 포함하는 증강 현실을 이용한 영상 통화 서비스 시스템.
  10. 제8항에 있어서,
    상기 단말 위치 정보는 상기 제2사용자 단말기에 의해 XML 코드로 작성되는 증강 현실을 이용한 영상 통화 서비스 시스템.
  11. AR 서버가 제1사용자 단말기 및/또는 제2사용자 단말기의 단말 위치 정보를 수신하는 단계;
    상기 AR 서버가 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기의 단말 위치 정보를 가공하여 AR 정보를 생성하는 단계; 및
    상기 AR 서버가 상기 단말 위치 정보를 전송한 상기 제1사용자 단말기 및/또는 상기 제2사용자 단말기에, 상기 AR 정보를 출력하는 단계를 포함하는 증강 현실을 이용한 영상 통화 서비스 방법.
  12. 제11항에 있어서,
    상기 단말 위치 정보는 GPS 정보 및 중력/조도/가속도 센서 등에 따른 정보를 포함하는 증강 현실을 이용한 영상 통화 서비스 방법.
  13. 제11항에 있어서,
    상기 단말 위치 정보는 상기 제2사용자 단말기에 의해 XML 코드로 작성되는 증강 현실을 이용한 영상 통화 서비스 방법.
KR1020100069228A 2010-07-16 2010-07-16 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체 KR101118010B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100069228A KR101118010B1 (ko) 2010-07-16 2010-07-16 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100069228A KR101118010B1 (ko) 2010-07-16 2010-07-16 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체

Publications (2)

Publication Number Publication Date
KR20120008400A KR20120008400A (ko) 2012-01-30
KR101118010B1 true KR101118010B1 (ko) 2012-06-12

Family

ID=45613418

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100069228A KR101118010B1 (ko) 2010-07-16 2010-07-16 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체

Country Status (1)

Country Link
KR (1) KR101118010B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021088691A1 (zh) * 2019-11-08 2021-05-14 华为技术有限公司 一种增强现实ar通信系统及基于ar的通信方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102413074B1 (ko) 2015-09-21 2022-06-24 삼성전자주식회사 사용자 단말, 전자 장치 및 이들의 제어 방법
KR101768532B1 (ko) 2016-06-08 2017-08-30 주식회사 맥스트 증강 현실을 이용한 화상 통화 시스템 및 방법
KR102651793B1 (ko) 2017-01-10 2024-03-28 삼성전자주식회사 영상 통화를 수행하기 위한 전자 장치 및 컴퓨터 판독 가능한 기록매체
KR20190018243A (ko) 2017-08-14 2019-02-22 라인 가부시키가이샤 영상 통화를 이용한 길안내 방법 및 시스템
KR102225175B1 (ko) * 2019-10-15 2021-03-09 라인 가부시키가이샤 영상 통화를 이용한 길안내 방법 및 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050055506A (ko) * 2003-12-08 2005-06-13 한국전자통신연구원 증강현실을 이용한 휴대단말기 사용자의 위치정보제공시스템 및 방법
KR20050078136A (ko) * 2004-01-30 2005-08-04 삼성전자주식회사 증강현실을 이용한 지역 정보 제공 방법 및 이를 위한지역 정보 서비스 시스템
KR20070019849A (ko) * 2005-08-11 2007-02-15 삼성전자주식회사 이동 통신 단말의 사용자 입력 방법 및 장치
KR20090062748A (ko) * 2007-12-13 2009-06-17 한국전자통신연구원 현장 체험 안내 서비스 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050055506A (ko) * 2003-12-08 2005-06-13 한국전자통신연구원 증강현실을 이용한 휴대단말기 사용자의 위치정보제공시스템 및 방법
KR20050078136A (ko) * 2004-01-30 2005-08-04 삼성전자주식회사 증강현실을 이용한 지역 정보 제공 방법 및 이를 위한지역 정보 서비스 시스템
KR20070019849A (ko) * 2005-08-11 2007-02-15 삼성전자주식회사 이동 통신 단말의 사용자 입력 방법 및 장치
KR20090062748A (ko) * 2007-12-13 2009-06-17 한국전자통신연구원 현장 체험 안내 서비스 시스템 및 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021088691A1 (zh) * 2019-11-08 2021-05-14 华为技术有限公司 一种增强现实ar通信系统及基于ar的通信方法

Also Published As

Publication number Publication date
KR20120008400A (ko) 2012-01-30

Similar Documents

Publication Publication Date Title
KR101118010B1 (ko) 증강 현실을 이용한 영상 통화 서비스 방법 및 그 시스템, 및 기록매체
KR101612390B1 (ko) 호스트 디바이스의 능력들의 증강
CN108833585B (zh) 信息交互方法、装置及存储介质
KR101166651B1 (ko) 위치정보 제공방법 및 위치정보 제공시스템
KR101362921B1 (ko) 스마트폰을 이용한 긴급 메시지 송출 방법
CN112420217B (zh) 消息推送方法、装置、设备及存储介质
KR20150044830A (ko) 휴대용 장치가 웨어러블 장치를 통하여 정보를 표시하는 방법 및 그 장치
US11570745B2 (en) Positioning method and apparatus
KR20120067071A (ko) 이동 통신 단말의 원격제어 장치 및 방법
KR20140029740A (ko) 전자장치에서 영상통화중 파일 전송 방법 및 장치
JP2009528765A (ja) 位置情報通信
CN106597502B (zh) 海拔确定方法及装置
CN111131392A (zh) 处理消息的方法、装置、电子设备及介质
CN104572230B (zh) 脚本文件的加载方法、脚本文件生成方法及装置
CN116418795A (zh) 用户访问请求的处理方法、电子装置、电子设备以及介质
CN113420338A (zh) 一种数据处理方法、装置和用于数据处理的装置
US20240098045A1 (en) Chat interaction method, electronic device, and server
CN114422472A (zh) 网络地址转换方法、装置及电子设备
CN112486617A (zh) 密文数据处理架构、方法、装置及机器可读介质
CN109032583B (zh) 数据交互方法及装置
JP2008104080A (ja) データ情報と音声情報とを結びつけるための方法及びシステム
US10824491B2 (en) System information transmitting method and apparatus, and computer-readable storage medium
CN111143184B (zh) 数据处理方法、装置及系统
CN115348262B (zh) 基于跨链协议的跨链操作执行方法及网络系统
WO2023216256A1 (zh) 提供无线感知服务的方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150211

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160205

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170125

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180124

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190213

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20200311

Year of fee payment: 9