KR20190090786A - 증강 현실에 기초한 오프라인 상호작용을 위한 방법 및 장치 - Google Patents

증강 현실에 기초한 오프라인 상호작용을 위한 방법 및 장치 Download PDF

Info

Publication number
KR20190090786A
KR20190090786A KR1020197012670A KR20197012670A KR20190090786A KR 20190090786 A KR20190090786 A KR 20190090786A KR 1020197012670 A KR1020197012670 A KR 1020197012670A KR 20197012670 A KR20197012670 A KR 20197012670A KR 20190090786 A KR20190090786 A KR 20190090786A
Authority
KR
South Korea
Prior art keywords
virtual
virtual resource
user
augmented reality
amount
Prior art date
Application number
KR1020197012670A
Other languages
English (en)
Other versions
KR102272119B1 (ko
Inventor
종정 예
홍 장
Original Assignee
알리바바 그룹 홀딩 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알리바바 그룹 홀딩 리미티드 filed Critical 알리바바 그룹 홀딩 리미티드
Publication of KR20190090786A publication Critical patent/KR20190090786A/ko
Application granted granted Critical
Publication of KR102272119B1 publication Critical patent/KR102272119B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/04Payment circuits
    • G06Q20/06Private payment circuits, e.g. involving electronic currency used among participants of a common payment scheme
    • G06Q20/065Private payment circuits, e.g. involving electronic currency used among participants of a common payment scheme using e-cash
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201Market modelling; Market analysis; Collecting market data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0226Incentive systems for frequent usage, e.g. frequent flyer miles programs or point systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • H04L67/38
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/09Recognition of logos
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 출원은 오프라인 타겟 장소에서 사용자의 소비 및 이미지 스캐닝 동작과 온라인 가상 자원 할당 및 관리를 조합하는 증강 현실 기술 기반 상호 작용 모드를 제공한다. 증강 현실 서버는 소비량을 포함하는 사용자의 소비된 데이터를 타겟 장소에서 얻고; 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하고; 타겟 장소의 오프라인 환경에서 증강 현실 클라이언트 디바이스에 의해 수행되는 이미지 스캐닝 동작에 응답하여, 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되는지 여부를 결정하고; 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되었다는 결정에 응답하여, 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 증강 현실 클라이언트 디바이스에 전달하여, 증강 현실 클라이언트 디바이스가 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 관련된 가상 데이터에 대한 증강된 디스플레이를 수행하게 한다.

Description

증강 현실에 기초한 오프라인 상호작용을 위한 방법 및 장치
본 출원은 증강 현실의 분야에 관한 것으로서, 특히 증강 현실에 기초하는 오프라인 상호 작용(interaction) 방법 및 장치에 관한 것이다.
증강 현실(augmented reality: AR) 기술은 이미지의 위치와 각도를 실시간으로 계산함으로써 대응하는 화상, 비디오 및 3D 모델이 이미지에 조합되어, 가상 세계와 현실 세계를 통합하여, 이에 의해 새로운 상호 작용 경험을 사용자에게 제공하는 기술이다. AR 기술의 지속적인 개발로, AR 기술이 더 광범위하게 적용된다. 따라서, AR 기술을 사용하여 어떻게 오프라인 서비스와 온라인 서비스를 더 양호하게 조합하는지가 사용자 경험을 개선시키는 데 중요하다.
본 출원은 증강 현실에 기초하는 오프라인 상호 작용 방법을 제공한다. 방법은 증강 현실 서버에 적용되고, 이하의 단계: 소비량을 포함하는 사용자의 소비 데이터를 타겟 장소에서 얻는 단계; 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하는 단계; 타겟 장소의 오프라인 환경에서 증강 현실 클라이언트 디바이스에 의해 수행되는 이미지 스캐닝 동작에 응답하여, 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되는지 여부를 결정하는 단계; 및 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되었다는 결정에 응답하여, 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 증강 현실 클라이언트 디바이스에 전달하여, 증강 현실 클라이언트 디바이스가 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 관련된 가상 데이터에 대한 증강된 디스플레이를 수행하게 하는 단계를 포함한다.
본 출원은 증강 현실에 기초하는 오프라인 상호 작용 방법을 또한 제공한다. 방법은 증강 현실 클라이언트 디바이스에 적용되고, 이하의 단계: 타겟 장소에서 사용자의 소비 데이터를 증강 현실 서버에 업로드하는 단계로서, 소비 데이터는 소비량을 포함하여, 증강 현실 서버가 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하게 하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하는 것인, 업로드 단계; 타겟 장소의 오프라인 환경에서 사용자에 의해 수행된 이미지 스캐닝 동작에 응답하여 타겟 장소의 오프라인 환경에서 이미지 스캐닝을 수행하는 단계; 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시하고, 타겟 장소에 대응하는 미리 결정된 식별자가 이미지 정보로부터 식별될 때, 증강 현실 서버에 의해 전달되고 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 수신하는 단계; 및 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 수신된 가상 데이터에 대한 증강된 디스플레이를 수행하는 단계를 포함한다.
본 출원은 증강 현실에 기초하는 오프라인 상호 작용 장치를 또한 제공한다. 장치는 증강 현실 서버에 적용되고, 이하의 것: 타겟 장소에서 소비 데이터를 얻도록 구성된 취득 모듈로서, 소비 데이터는 소비량을 포함하는 것인, 취득 모듈; 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하도록 구성된 할당 모듈; 타겟 장소의 오프라인 환경에서 증강 현실 클라이언트 디바이스에 의해 수행되는 이미지 스캐닝 동작에 응답하여, 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되는지 여부를 결정하도록 구성된 결정 모듈; 및 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되었다는 결정에 응답하여, 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 증강 현실 클라이언트 디바이스에 전달하여, 증강 현실 클라이언트 디바이스가 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 관련된 가상 데이터에 대한 증강된 디스플레이를 수행하게 하도록 구성된 전달 모듈을 포함한다.
본 출원은 증강 현실에 기초하는 오프라인 상호 작용 장치를 또한 제공한다. 장치는 증강 현실 클라이언트 디바이스에 적용되고, 이하의 것: 타겟 장소에서 사용자의 소비 데이터를 증강 현실 서버에 업로드하도록 구성된 업로드 모듈로서, 소비 데이터는 소비량을 포함하여, 증강 현실 서버가 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하게 하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하는 것인, 업로드 모듈; 타겟 장소의 오프라인 환경에서 사용자에 의해 수행되는 이미지 스캐닝 동작에 응답하여 타겟 장소의 오프라인 환경에서 이미지 스캐닝을 수행하도록 구성된 스캐닝 모듈; 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시하고, 타겟 장소에 대응하는 미리 결정된 식별자가 이미지 정보로부터 식별될 때, 증강 현실 서버에 의해 전달되고 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 수신하도록 구성된 수신 모듈; 및 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 수신된 가상 데이터에 대한 증강된 디스플레이를 수행하도록 구성된 디스플레이 모듈을 포함한다.
본 출원은 오프라인 타겟 장소에서 사용자의 소비 및 이미지 스캐닝 동작과 온라인 가상 자원 할당 및 관리를 조합하는 증강 현실 기술 기반 상호 작용 모드를 제공한다.
증강 현실 클라이언트 디바이스는 오프라인 타겟 장소에서 사용자의 소비 데이터를 증강 현실 서버에 업로드할 수 있고, 증강 현실 서버는 소비 데이터의 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하여 오프라인 타겟 장소에서의 사용자의 소비 데이터를 대응하는 양의 가상 자원으로 변환하고, 상이한 사용자에게 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하여, 이에 의해 상이한 타겟 장소의 가상 자원 풀에 축적된 가상 자원의 총량을 수평적으로 비교 및 분석하여 양호한 오프라인 타겟 장소를 선택할 수 있다.
게다가, 오프라인 타겟 장소에 도달할 때, 타겟 장소에서 규칙적인 소비에 추가하여, 사용자는 증강 현실 클라이언트 디바이스를 사용하여 타겟 장소의 오프라인 환경을 스캔할 수 있다. 증강 현실 클라이언트 디바이스는 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시할 수 있고; 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별될 때, 증강 현실 서버에 의해 전달되고 타겟 장소의 가상 자원에 관련되는 가상 데이터를 수신하고; 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응되는 위치에서 수신된 가상 데이터에 대해 증강된 디스플레이를 수행하여, 이에 의해 증강 현실 이미지 인식 기술을 사용하여 사용자의 오프라인 이미지 스캐닝 동작과 온라인 가상 자원 관리를 조합할 수 있다. 이와 같이, 사용자는 사용자에게 할당된 가상 자원을 더 편리하게 관리하기 위해 타겟 장소의 가상 자원 풀에 있는 가상 자원의 관련 정보를 뷰잉할 수 있다.
도 1은 본 출원의 구현예에 따른, 증강 현실에 기초하는 오프라인 상호 작용 방법을 도시하고 있는 흐름도이다.
도 2는 본 출원의 구현예에 따른, AR 시나리오에서의 가상 데이터 출력을 도시하고 있는 개략도이다.
도 3은 본 출원의 구현예에 따른, 증강 현실에 기초하는 오프라인 상호 작용 장치를 도시하고 있는 논리 블록도이다.
도 4는 본 출원의 구현예에 따른, 증강 현실에 기초하는 오프라인 상호 작용 장치를 포함하는 증강 현실 서버의 하드웨어 구조를 도시하고 있는 도면이다.
도 5는 본 출원의 구현예에 따른, 증강 현실에 기초하는 다른 오프라인 상호 작용 장치를 도시하고 있는 논리 블록도이다.
도 6은 본 출원의 구현예에 따른, 증강 현실에 기초하는 다른 오프라인 상호 작용 장치를 포함하는 증강 현실 클라이언트 디바이스의 하드웨어 구조를 도시하고 있는 도면이다.
본 출원은 오프라인 타겟 장소에서 사용자의 소비 및 이미지 스캐닝 동작과 온라인 가상 자원 할당 및 관리를 조합하는 AR 기술 기반 상호 작용 모드를 제공한다. 상호 작용 모드는 가상 자원 할당 및 관리의 온라인 상호 작용과, 타겟 장소에서 사용자의 소비 및 이미지 스캐닝의 오프라인 상호 작용으로 분류될 수 있다.
온라인 상호 작용 중에, AR 클라이언트 디바이스는 오프라인 타겟 장소에서 사용자의 소비 데이터를 AR 서버에 업로드할 수 있고, AR 서버는 소비 데이터의 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당할 수 있고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하여 오프라인 타겟 장소에서의 사용자의 소비 데이터를 대응하는 양의 가상 자원으로 변환하고, 상이한 사용자에게 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하여, 이에 의해 상이한 타겟 장소의 가상 자원 풀에 축적된 가상 자원의 총량을 수평적으로 비교 및 분석하여 양호한 오프라인 타겟 장소를 선택할 수 있다.
오프라인 상호 작용 중에, 오프라인 타겟 장소에 도달할 때, 타겟 장소에서 규칙적인 소비에 추가하여, 사용자는 AR 클라이언트 디바이스를 사용하여 타겟 장소의 오프라인 환경을 스캔할 수 있다. AR 클라이언트 디바이스는 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시할 수 있고; 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별될 때, AR 서버에 의해 전달되고 타겟 장소의 가상 자원에 관련되는 가상 데이터를 수신하고; 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응되는 위치에서 수신된 가상 데이터에 대해 증강된 디스플레이를 수행하여, 이에 의해 AR 이미지 인식 기술을 사용하여 온라인 가상 자원 관리와 사용자의 오프라인 이미지 스캐닝 동작을 조합할 수 있다. 이와 같이, 사용자는 사용자에게 할당된 가상 자원을 더 편리하게 관리하기 위해 타겟 장소의 가상 자원 풀에 있는 가상 자원의 관련 정보를 뷰잉할 수 있다.
예를 들어, 애플리케이션 시나리오에서, 타겟 장소는 임의의 유형의 오프라인 상점일 수 있고, 가상 자원은 오프라인 상점에 대응하는 가상 자산(가상 주식 또는 가상 채권과 같은)일 수 있다.
현재 시나리오에서, 사용자가 오프라인 상점에서 오프라인 소비를 수행한 후(예를 들어, APP를 사용하여 오프라인 지불을 완료한 후) AR 클라이언트 디바이스는 AR 서버와 상호 작용하고 관련 소비 데이터를 AR 서버에 업로드할 수 있고, AR 서버는 사용자의 현재 소비량에 기초하여 오프라인 상점의 가상 자산의 특정 수량을 사용자에게 할당하고, 할당된 가상 자산을 오프라인 상점의 가상 자산 풀에 축적할 수 있다. 할당이 완료된 후, 사용자는 사용자가 가상 자산을 거래하는 것을 허용하는 가상 자산의 소유권을 얻는다.
게다가, 사용자는 AR 클라이언트 디바이스를 사용하여 오프라인 상점의 특정 식별자(상점 로고와 같은)를 스캔할 수 있고; AR 클라이언트 디바이스는 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시할 수 있고; 특정 식별자가 이미지 정보로부터 성공적으로 식별될 때, AR 서버는 오프라인 상점의 가상 자산 풀에 축적된 가상 자원의 관련 정보(가상 자산의 합계 값, 단위 값, 단위 값의 변경 데이터와 같은)를 AR 클라이언트 디바이스에 전달할 수 있고; AR 클라이언트 디바이스는 스캐닝된 실세계 이미지의 특정 식별자에 대응하는 위치에서 관련 정보에 대해 디스플레이 중첩을 수행한다. 이와 같이, 사용자는 실세계 이미지에 디스플레이된 정보를 사용하여 오프라인 상점의 가상 자산의 관련 상황을 인지할 수 있어, 사용자에 의해 보유된 오프라인 상점의 가상 자산을 더 양호하게 관리할 수 있다.
특정 애플리케이션 시나리오를 참조하여, 이하에 특정 구현예를 사용하여 본 출원을 설명한다.
도 1은 본 출원의 구현예에 따른, 증강 현실에 기초하는 오프라인 상호 작용 방법을 도시하고 있다. 이 방법은 이하의 단계를 포함한다.
단계 101: AR 클라이언트 디바이스는 타겟 장소에 있는 사용자의 소비 데이터를 AR 서버에 업로드하고, 소비 데이터는 소비량을 포함한다.
AR 클라이언트 디바이스는 AR 기술에 기초하여 개발되거나 AR 기능을 통합한다. 예를 들어, AR 클라이언트 디바이스는 AR 서비스 기능을 통합하는 알리페이(ALIPAY)일 수 있다. AR 클라이언트 디바이스는 오프라인 환경에서 실세계 시나리오에 이미지 스캐닝을 수행하고; 스캐닝을 통해 얻어진 이미지 데이터를 실시간으로 AR 서버로 전송하고; AR 클라이언트 디바이스의 프론트 엔드에서 AR 엔진을 사용하여, 백엔드에서 AR 서버에 의해 푸시된 가상 데이터를 시각적으로 렌더링하고; 실세계 시나리오에서 스캐닝을 통해 얻은 이미지 데이터(실세계 이미지와 같은)와 가상 데이터를 중첩하고 조합하도록 구성된다.
AR 서버는 AR 클라이언트 디바이스, 서버 클러스터 또는 서버 클러스터를 기반으로 구축된 클라우드 플랫폼을 제공하는 서버가 포함된다. 예를 들어, AR 서버는 AR 서비스 기능을 통합하는 알리페이용 상호연동 서비스를 제공하는 지불 플랫폼일 수 있다. AR 서버는 백엔드의 AR 엔진에 기초하여, AR 클라이언트 디바이스에 의해 스캐닝된 이미지를 인식하고(확실히, 이미지는 또한 프론트 엔드의 AR 엔진에 기초하여 AR 클라이언트 디바이스에 의해 인식될 수도 있음); 오프라인 서비스에 관련된 가상 데이터를 관리하고; 이미지 인식 결과에 기초하여 관련 가상 데이터를 AR 클라이언트 디바이스로 푸시할 수 있다. 예를 들어, AR 서버는 이미지 인식 결과에 기초하여 사용자에게 가상 객체를 할당하고, 가상 객체의 할당 결과를 AR 클라이언트 디바이스에 푸시하도록 구성될 수 있다.
타겟 장소는 예를 들어, 오프라인 상점과 같은 임의의 유형의 오프라인 소비 장소를 포함할 수 있다.
실제로, AR 클라이언트 디바이스는 오프라인 지불 기능을 가질 수 있고, 사용자는 AR 클라이언트 디바이스가 설치되어 있는 사용자 단말 디바이스(스마트폰과 같은)로 타겟 장소에 도달할 때 AR 클라이언트 디바이스의 오프라인 지불 기능을 사용함으로써 대응하는 소비재(상품과 같은)를 오프라인으로 지불할 수 있다.
본 예에서, 사용자가 타겟 장소에서 관련된 소비를 완료한 후, AR 클라이언트 디바이스는 추가의 처리를 위해 AR 서버에 사용자의 현재 소비 데이터를 업로드할 수 있다. 소비 데이터는 사용자의 현재 소비량을 포함할 수 있다.
예를 들어, 사용자가 AR 클라이언트 디바이스의 지불 기능을 사용함으로써 오프라인 상점에서 소비를 완료할 때, 사용자는 AR 클라이언트 디바이스를 사용하여 상점 주인에 의해 제공된 2차원 지불 코드 등을 스캔하여, 상점 소유자에게 지불을 개시하고 지불 금액을 입력할 수 있다. 게다가, AR 클라이언트 디바이스에 구비된 관련 지불 기능 모듈은 관련된 지불 플랫폼과 상호 작용하여 추가 지불을 완료할 수 있다. 지불이 완료된 후, AR 클라이언트 디바이스는 완료된 주문과 같은 현재 소비에 관련된 소비 데이터를 AR 서버에 업로드할 수 있다.
단계 102: AR 서버는 소비량에 기초하여 사용자에게 대응하는 양의 가상 자원을 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적한다.
가상 자원은 사용자의 소비량과 연관될 수 있는 임의의 형태의 온라인 가상 자원을 포함할 수 있다. AR 서버는 사용자의 소비량에 기초하여 사전 구성된 가상 자원 할당 규칙 하에서 대응하는 양의 가상 자원을 사용자에게 할당할 수 있다.
구현예에서, 가상 자원은 타겟 장소에 대응하는 가상 자산일 수 있다. 특정 형태의 가상 자산은 본 출원에서 한정되지 않는다. 예를 들어, 가상 자산은 실제로, 가상 주식, 가상 채권, 가상 옵션, 다른 형태의 가상 자산 등일 수 있다.
가상 자원 풀은 타겟 장소에 대해 생성된 가상 자산 풀일 수 있다. 상이한 소비자에게 할당된 가상 자원이 가상 자원 풀에 축적될 수 있다.
예를 들어, 구현예에서, AR 서버는 시스템의 각각의 협력된 오프라인 상점에 고유한 상점 ID를 할당할 수 있고, 동일한 브랜드의 체인점은 상이한 상점 ID를 사용하여 구별될 수 있다(또는 확실하게 구별될 수 없음). 게다가, 각각의 오프라인 상점의 상점 ID는 가상 자산 ID에 고유하게 대응할 수 있고, 가상 자산 ID는 오프라인 상점을 위해 생성된 가상 자산 계정의 ID일 수 있다. 매회 소비 데이터를 수신한 후, AR 서버는 소비 데이터의 소비량에 기초하여 대응하는 양의 가상 자산을 즉시 사용자에게 할당하고, 이어서 할당된 가상 자산을 축적을 위해 가상 자산 계정에 추가할 수 있다.
본 예에서, AR 서버는 AR 클라이언트 디바이스에 의해 업로드된 소비 데이터를 실시간으로 얻을 수 있다. AR 클라이언트 디바이스에 의해 업로드된 소비 데이터를 수신한 후, AR 서버는 대응적으로 소비 데이터를 즉시 처리하고, 소비량과 같은 관련 정보를 소비 데이터에서 추출하고, 이어서 사전 구성된 가상 자원 할당 규칙 하에서 대응 사용자에게 대응하는 양의 가상 자원을 할당할 수 있다.
가상 자원 할당 규칙에 포함되는 특정 할당 로직은 본 출원에서 한정되지 않는다. 본 출원의 기술적 해결책을 구현할 때, 당 기술 분야의 숙련자는 필요에 따라 유연한 구성을 수행할 수 있다.
예를 들어, 구현예에서, 가상 자원 할당 규칙은 이하의 것: 소비량에 기초하여 사용자에게 동일한 양의 가상 자산을 할당하는 것을 포함할 수 있다. 구체적으로는, 소비량에 대응하는 값과 동일한 양의 가상 자산이 소비량에 대응하는 값에 기초하여 사용자에게 할당될 수 있다.
다른 예를 들면, 다른 구현예에서, 소비량과 할당될 가상 자산의 양 사이에 특정 선형 관계가 존재할 수 있다. 가상 자원 할당 규칙은 선형 관계에 기초하여 구성된 선형 함수일 수 있다. 이와 같이, 사용자의 소비량은 계산을 위한 입력 파라미터로서 선형 함수에 입력될 수 있고, 소비량은 할당될 대응하는 양의 가상 자산으로 변환된다. 확실히, 실제로, 선형 관계는 필요에 따라 설정될 수 있고, 선형 함수를 사용하여 계산되는 할당될 가상 자산의 양은 소비량에 대응하는 값보다 크거나 작을 수 있다.
할당이 완료된 후, AR 서버는 할당된 가상 자원을 소비자에 대응하는 가상 자원 계정에 추가하고, 가상 자원 계정 내의 가상 자원의 총량을 업데이트하고, 업데이트된 결과를 메시지의 형태로 AR 클라이언트 디바이스에 푸시할 수 있어, AR 클라이언트 디바이스가 동기식 업데이트를 수행하도록 한다.
예를 들어, 가상 자원이 타겟 장소에 대응하는 가상 자산이라고 가정한다. AR 서버는 각각의 사용자에 대한 대응 가상 자산 계정을 생성하고, 가상 자산을 할당한 후 할당된 가상 자산을 관련 사용자의 가상 자산 계정으로 실시간으로 업데이트하고, AR 클라이언트 디바이스를 트리거링하여 사용자의 가상 자원 계정 내의 디스플레이된 가상 자산의 양을 동기적으로 업데이트하기 위해 대응 업데이트 메시지를 AR 클라이언트 디바이스에게 전달할 수 있다.
게다가, AR 서버는 할당된 가상 자원을 타겟 장소의 가상 자원에 더 축적할 수 있다.
사용자에게 할당된 가상 자원의 양은 사용자의 실제 소비량에 관련되기 때문에, 가상 자원 풀에 축적된 가상 자원의 총량 및 합계 값이 본 방법에서 타겟 장소의 수익 상태를 측정하기 위한 중요한 지시기로서 최종적으로 사용될 수 있다. 구체적으로, 가상 자원 풀 내의 가상 자원의 더 큰 총량은 소비를 위해 타겟 장소로 이동하는 더 많은 양의 사용자 및 더 많은 양의 소비 시간을 지시한다. 이와 같이, 실제로, 우수한 수익을 가진 양호한 오프라인 타겟 장소는 다른 타겟 장소의 가상 자원 풀에 축적된 가상 자원의 총량 및 합계 값을 수평적으로 비교 및 분석함으로써 "식별"될 수 있다. 예를 들어, 가상 자원이 가상 자산이고 가상 자원 풀이 가상 자산 풀일 때, 기본적으로 일관된 자산 조건을 갖는 복수의 오프라인 상점의 가상 자산 풀 내의 가상 자산의 총량 및 합계 값이 비교 및 분석되어, 이러한 유형의 오프라인 상점으로부터 더 많은 소비자와 더 많은 양의 소비 시간을 가진 양호한 상점을 선택한다.
단계 103: AR 클라이언트 디바이스는 타겟 장소의 오프라인 환경에서 사용자에 의해 수행된 이미지 스캐닝 동작에 응답하여 타겟 장소의 오프라인 환경에서 이미지 스캐닝을 수행한다.
본 예에서, 오프라인 타겟 장소에 도달할 때, AR 클라이언트 디바이스의 지불 기능을 사용함으로써 오프라인 소비를 완료하고 AR 서버에 의해 할당된 특정 양의 가상 자원을 얻는 것에 추가하여, 사용자는 AR 클라이언트 디바이스의 이미지 스캐닝 기능을 사용함으로써 타겟 장소의 미리 결정된 오프라인 식별자에 대해 이미지 스캐닝을 수행할 수 있다.
오프라인 식별자는 백엔드에서 AR 서버에 의해 설명되고 타겟 장소와 결합되는 임의의 유형의 식별 정보일 수 있다. 예를 들어, 타겟 장소가 오프라인 상점일 때, 오프라인 식별자는 오프라인 상점의 로고일 수 있다.
단계 104: AR 클라이언트 디바이스는 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시한다.
본 예에서, 스캐닝을 통해 타겟 장소의 오프라인 환경으로부터 대응하는 이미지 정보를 얻은 후에, AR 클라이언트 디바이스는 실시간으로 이미지 정보에 대한 이미지 인식을 개시하여, 스캐닝을 통해 얻어진 이미지 정보가 타겟 장소에 대응하는 오프라인 식별자를 포함하는지 여부를 결정할 수 있다.
이미지 인식은 AR 클라이언트 디바이스에 구비된 이미지 인식 모델에 기초하는 스캐닝을 통해 얻어진 이미지 정보에 대해 수행될 수 있거나, 또는 AR 클라이언트 디바이스가 스캐닝을 통해 얻은 이미지 정보를 실시간으로 AR 서버에 업로드한 후에 AR 서버에 로컬에 구비된 이미지 인식 모델에 기초하여 AR 서버에 의해 수행될 수 있다.
구현예에서, AR 클라이언트 디바이스는 이미지 인식 모델을 로컬에 구비할 수 있다. AR 단말 디바이스의 카메라를 호출함으로써 스캐닝을 통해 타겟 장소의 오프라인 환경의 이미지 정보를 얻은 후, AR 클라이언트 디바이스는 이미지 인식 모델을 계속 호출하여 이미지 정보에 대한 이미지 인식을 수행하고 인식 결과를 AR 서버에 업로드할 수 있다. AR 서버는 인식 결과를 추가로 확인한다.
다른 구현예에서, AR 클라이언트 디바이스는 로컬에 구비된 이미지 인식 모델 없이 스캐닝을 통해 얻어진 이미지 정보를 AR 서버에 실시간으로 업로드할 수 있고, AR 서버는 AR 서버에서 로컬에 구비된 이미지 인식 모델에 기초하여 이미지 정보에 이미지 인식을 수행하고, 이어서 인식 결과를 AR 클라이언트 디바이스에 반환한다.
본 예에서 이미지 인식 모델에 포함된 이미지 인식 알고리즘은 한정되지 않는다는 것을 주목할 가치가 있다. 당 기술 분야의 숙련자는 본 출원의 기술적 해결책을 구현할 때 관련된 기술의 기록을 참조할 수 있다. 예를 들어, 구현예에서, 이미지 인식 모델은 신경망 및 많은 양의 이미지 인식 샘플에 기초하여 학습된 심층적인 학습 모델일 수 있다.
단계 105: AR 서버는 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되는지 여부를 결정한다.
단계 106: 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되었다는 결정에 응답하여, AR 서버는 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 AR 클라이언트 디바이스에 전달한다.
본 예에서, AR 클라이언트 디바이스에 의해 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 수행한 후에, AR 서버는 이미지 인식 결과에 기초하여, 타겟 장소에 대응하는 오프라인 식별자가 이미지 정보로부터 성공적으로 식별되는지 여부를 추가로 결정할 수 있다. 타겟 장소에 대응하는 오프라인 식별자가 이미지 정보로부터 성공적으로 식별되었다는 결정에 응답하여, AR 서버는 타겟 장소의 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터에 대한 타겟 장소의 가상 자원 풀에 관련된 데이터베이스를 로컬하게 검색할 수 있다.
구현예에서, 타겟 장소의 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터는 가상 자원 풀 내의 가상 자원의 합계 값, 가상 자원 풀 내의 가상 자원의 단위 값, 단위 값의 변경 데이터 등을 포함할 수 있다.
예를 들어, 가상 자원이 가상 주식일 때, 가상 데이터는 타겟 장소의 가상 주식 자금 풀에 축적된 가상 주식의 총 가격, 가상 주식 자금 풀 내의 가상 주식의 주당 가격, 특정 기간의 주당 가격 변경 데이터 등을 포함할 수 있다.
확실히, 실제로, 예를 들어 상점 위치, 상점의 판촉 정보 및 상점 소개와 같은 상기에 나타낸 여러 가지 유형의 데이터에 추가하여, 타겟 장소에 관련된 다른 형태의 가상 데이터가 가상 데이터에 도입될 수 있고, 본 출원에서 하나씩 열거되지 않는다.
타겟 장소의 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터는 가상 자원 풀 내의 가상 자원의 실제 상황에 기초하여 백엔드에서 AR 서버에 의한 실시간 계산을 통해 얻어질 수 있다는 것을 주목할 가치가 있다.
AR 서버가 사용자에게 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적한 후, 가상 자원 풀 내의 현재 가상 자원의 총량이 변경되기 때문에, AR 서버는 즉시 트리거링되어 가상 데이터를 재계산할 수 있다.
AR 서버는 가상 자원 풀 내의 가상 자원의 총량 및 타겟 장소에 대응하는 할당될 합계 값에 기초하여 가상 자원 풀 내의 가상 자원의 단위 값을 계산할 수 있다. 예를 들어, 가상 자원이 가상 자산일 때, 할당할 합계 값이 각각의 단위 주식 내의 가상 자산의 단위 값을 얻기 위해 가상 자원 풀 내의 총량의 가상 자산으로 나누어질 수 있다.
단위 값의 변경 데이터는 변경된 단위 값 및 변경 순간을 포함할 수 있어, AR 서버가 변경 순간 및 변경된 단위 값에 기초하여 단위 값 변경에 대한 시간 시퀀스 데이터를 생성할 수 있게 된다.
할당될 합계 값은 타겟 장소에 대응하는 할당될 가상 자원의 합계 값을 반영할 수 있는 인덱스일 수 있다.
예를 들어, 구현예에서, 가상 자원이 가상 자산일 때, 할당할 합계 값은 타겟 장소의 총 수익일 수 있다. 달리 말하면, 가상 자산 풀 내의 가상 자산의 단위 값이 계산될 때, 타겟 장소의 총 수익은 가상 자산 풀 내의 총량의 가상 자산으로 나눠져서 가상 자산의 단위 값을 얻을 수 있다.
확실히, 타겟 장소의 총 수익에 추가하여, 할당할 합계 값은 타겟 장소의 자산 상태를 반영할 수 있는 다른 인덱스, 예를 들어 타겟 장소의 총 순이익, 타겟 장소 상의 써드파티 평가 기관 또는 플랫폼에 의해 평가된 총 자산, 또는 자산 상태에 기초하여 타겟 장소에 대해 맞춤화된 할당될 총 가상 자산일 수 있다.
실제로 단위 값은 일반적으로 타겟 장소의 동작 조건에 따라 동적으로 변경될 수 있다는 것을 주목할 가치가 있다. 이와 같이, AR 서버는 가상 자원 풀 내의 가상 자원의 단위 값이 변경되면 계산을 통해 단위 값의 변경 데이터를 또한 즉시 기록할 수 있다.
게다가, 가상 자원 풀 내의 가상 자원의 단위 값을 계산한 후에, AR 서버는 계산된 단위 값에 기초하여 가상 자원 풀 내의 가상 자원의 합계 값 및 가상 자원 풀 내의 가상 자원의 총량 을 추가로 계산할 수 있다.
본 예에서, AR 서버는 타겟 장소의 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 얻은 후에 AR 클라이언트 디바이스에 가상 데이터를 전달할 수 있고, AR 클라이언트 디바이스는 스캐닝된 실세계 이미지에서 오프라인 식별자에 대응하는 위치에서 관련된 가상 데이터에 대한 증강된 디스플레이를 수행한다.
단계 107: AR 클라이언트 디바이스는 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 수신된 가상 데이터에 대한 증강된 디스플레이를 수행한다.
본 예에서, AR 서버에 의해 전달된 가상 데이터를 수신한 후, AR 클라이언트 디바이스는 프론트 엔드에서 AR 엔진을 사용함으로써 가상 데이터를 시각적으로 렌더링하고; 실세계 시나리오에서 스캐닝을 통해 얻어진 이미지 데이터와 가상 데이터를 중첩하고 조합하고; 스캐닝된 실세계 이미지에서 오프라인 식별자에 대응하는 위치에서 증강된 디스플레이를 수행할 수 있다.
구현예에서, 가상 데이터가 가상 자원 풀 내의 가상 자원의 합계 값, 가상 자원 풀 내의 가상 자원의 단위 값 및 단위 값의 변경 데이터를 포함한다고 가정한다.
첫째로, AR 서버에 의해 전달된 가상 데이터를 수신한 후, AR 클라이언트 디바이스는 단위 값의 변경 데이터에 기초하여 단위 값의 변경 규칙에 대응하는 시각적 그래프를 생성할 수 있다. 예를 들어, 단위 값의 변경 데이터는 변경된 단위 값 및 단위 값이 변경될 때의 순간에 기초하여 생성된 시간 시퀀스 데이터일 수 있고, 시각 그래프는 시간 시퀀스 데이터에 기초하여 생성된 2차원 곡선일 수 있다.
둘째로, 시각적 그래프를 생성한 후, AR 클라이언트 디바이스는 프론트 엔드에서 AR 엔진을 사용하여, 시각적 그래프, 가상 자원 풀 내의 가상 자원의 합계 값 및 가상 자원 풀 내의 가상 자원의 단위 값을 시각적으로 렌더링하고, 스캐닝된 실세계 이미지에서 오프라인 식별자에 대응하는 위치에서 증강된 디스플레이를 수행할 수 있다.
예를 들어, 도 2를 참조하면, 타겟 장소가 오프라인 상점이고 가상 자원이 오프라인 상점의 가상 주식일 때, 가상 데이터는 상점의 가상 주식 자금 풀에 축적된 가상 주식의 총 가격, 가상 주식 자금 풀 내의 가상 주식의 주당 가격, 및 특정 기간의 주당 가격의 변경 데이터를 포함할 수 있다.
사용자가 AR 클라이언트 디바이스를 사용하여 타겟 장소의 로고를 스캔한 후, AR 서버는 가상 데이터를 AR 클라이언트 디바이스에 전달할 수 있다. 가상 데이터를 수신한 후에, AR 클라이언트 디바이스는 특정 기간의 주당 가격의 변경 데이터를 먼저 시각적으로 렌더링하고, 특정 기간의 주당 가격의 변경 데이터를 가격 변경을 반영할 수 있는 2차원 곡선으로 변환하고, 이어서 2차원 곡선, 상점의 가상 주식 자금 풀에 축적된 가상 주식의 총 가격, 및 스캐닝된 실세계 이미지에서 상점의 로고에 대응하는 위치에서 가상 주식 자금 풀 내의 가상 주식의 주당 가격과 같은 데이터에 대해 증강된 디스플레이를 수행할 수 있다.
본 방법에서, 온라인 가상 자원 관리는 AR 이미지 인식 기술을 이용하여 사용자에 의해 수행된 오프라인 이미지 스캐닝 동작과 조합되어, AR 클라이언트 디바이스를 사용함으로써 타겟 장소에 대응하는 오프라인 식별자를 스캐닝하여 타겟 장소의 가상 자원 풀 내의 가상 자원의 관련 정보를 뷰잉하여, 사용자에게 할당된 가상 자원을 더욱 편리하게 관리할 수 있게 된다는 것을 알 수 있다.
본 예에서, AR 클라이언트 디바이스의 사용자 인터페이스는 사용자에게 할당된 가상 자원을 관리하기 위한 사용자 엔트리를 더 제공할 수 있다.
구현예에서, 사용자 엔트리는 제1 교환 엔트리 및 제2 교환 엔트리를 포함할 수 있다. 제1 교환 엔트리는 사용자에게 할당된 가상 자원을 대응하는 가상 바우처와 교환하는 데 사용될 수 있고, 제2 교환 엔트리는 사용자에 의해 보유된 가상 바우처를 가상 자원과 교환하는 데 사용될 수 있다.
예를 들어, 가상 자원이 가상 자산일 때, 제1 교환 엔트리는 가상 자산 구매 엔트리일 수 있고, 제2 교환 엔트리는 가상 자산 판매 엔트리일 수 있다. AR 클라이언트 디바이스가 제1 교환 엔트리에서 사용자에 의해 트리거링될 때 송신된 가상 자원 교환 요청은 가상 자원 구매 요청일 수 있고, AR 클라이언트 디바이스가 제2 교환 엔트리에서 사용자에 의해 트리거링될 때 송신된 가상 자원 교환 요청은 가상 자원 판매 요청일 수 있다. 가상 바우처는 가상 자산 구매 및 판매를 정산하는 데 사용되는 가상 통화일 수 있다. 초기 상태에서, AR 서버는 보유된 가상 통화를 관리하기 위해 각각의 사용자에 대한 가상 통화 계정을 더 생성할 수 있다. 이와 같이, 사용자는 판매 엔트리를 트리거링하여 보유된 가상 자산을 판매할 수 있고, 보유된 가상 자산을 가상 통화로 정산할 수 있다. 또는 사용자는 구매 엔트리를 트리거링하여 가상 자원을 구매하고 보유된 가상 통화를 가상 자산으로서 정산할 수 있다.
제1 교환 엔트리에서 사용자에 의해 수행된 트리거 동작(탭 동작과 같은)을 검출할 때, AR 클라이언트 디바이스는 사용자 인터페이스를 사용하여 사용자에게 가상 자원 교환 인터페이스를 입력할 수 있고, 가상 자원 교환 인터페이스에서 사용자에 의해 현재 보유된 가상 자원을 출력할 수 있다. 사용자는 교환될 가상 자원으로서 인터페이스에서 대응 가상 자원을 선택하고, 교환될 가상 자원의 양을 입력할 수 있다.
AR 클라이언트 디바이스는 백엔드에서, 사용자에 의해 선택된 교환될 가상 자원의 식별 정보(가상 자원 ID와 같은) 및 교환될 가상 자원의 입력된 양을 얻고; 얻어진 정보에 기초하여 가상 자원 교환 요청(즉, 제1 가상 자원 교환 요청)을 구성하고; 이어서 가상 자원 교환 요청을 AR 서버에 송신할 수 있다.
가상 자원 교환 요청을 수신한 후, AR 서버는 가상 자원 교환 요청에 포함된 교환될 가상 자원의 식별 정보 및 양을 얻고, 교환될 가상 자원의 합계 값을 계산할 수 있다. 계산이 완료된 후, AR 서버는 교환될 가상 자원과 동일한 합계 값을 갖는 가상 바우처를 사용자에게 할당하고, 할당된 가상 바우처를 사용자를 위해 생성된 가상 바우처 계정에 추가하고, 교환 결과를 메시지의 형태로 AR 클라이언트 디바이스에 푸시하여, 사용자 인터페이스를 사용하여 결과를 사용자에게 디스플레이할 수 있다.
대응적으로, 제2 교환 엔트리 상에서 사용자에 의해 수행된 트리거 동작을 검출할 때, AR 클라이언트 디바이스는 사용자 인터페이스를 사용하여 사용자에게 가상 자원 교환 인터페이스를 입력할 수 있고, 가상 자원 교환 인터페이스 상에서 현재 사용자에 의해 교환될 가상 자원을 출력할 수 있다. 사용자는 교환될 가상 자원으로서 인터페이스 상에서 대응 가상 자원을 선택하고, 교환될 가상 바우처의 양을 입력할 수 있다.
AR 클라이언트 디바이스는 백엔드에서, 사용자에 의해 선택된 교환될 가상 자원의 식별 정보 및 교환될 가상 바우처의 입력된 양을 얻을 수 있고; 얻어진 정보에 기초하여 가상 자원 교환 요청(즉, 제2 가상 자원 교환 요청)을 구성하고; 이어서 가상 자원 교환 요청을 AR 서버에 송신할 수 있다.
가상 자원 교환 요청을 수신한 후, AR 서버는 가상 자원 교환 요청에 포함된 교환될 가상 자원의 식별 정보 및 양을 얻고, 교환될 가상 바우처와 동일한 합계 값을 갖는 가상 자원의 양을 계산할 수 있다. 계산이 완료된 후, AR 서버는 대응하는 양의 가상 자원을 사용자에게 할당하고, 할당된 가상 자원을 사용자를 위해 생성된 가상 자원 계정에 추가하고, 교환 결과를 메시지의 형태로 AR 클라이언트 디바이스에 푸시하여, 사용자 인터페이스를 사용하여 교환 결과를 사용자에게 디스플레이할 수 있다.
본 방법에서, 사용자는 타겟 장소의 가상 자원 풀 내의 가상 자원의 관련 정보를 뷰잉함으로써 실시간으로 타겟 장소의 가상 자원 풀 내의 가상 자원의 관련 조건을 인지한 후에 필요에 따라 보유 가상 자원 및 가상 바우처를 편리하게 교환할 수 있다는 것을 알 수 있다.
전술된 방법 구현예에 대응하여, 본 출원은 장치 구현예를 또한 제공한다.
도 3을 참조하면, 본 출원은 증강 현실에 기초하는 오프라인 상호 작용 장치(30)를 제공하고, 장치는 AR 서버에 적용된다. 도 4를 참조하면, 증강 현실에 기초하는 오프라인 상호 작용 장치(30)를 포함하는 AR 서버의 하드웨어 아키텍처는 일반적으로 CPU, 메모리, 비휘발성 메모리, 네트워크 인터페이스, 내부 버스 등을 포함한다. 증강 현실에 기초하는 오프라인 상호 작용 장치(30)가 소프트웨어에 의해 구현되는 예에서, 증강 현실에 기초하는 오프라인 상호 작용 장치(30)는 일반적으로 메모리에 로딩된 컴퓨터 프로그램으로서 이해될 수 있고, CPU에 의한 실행 후에 논리 소프트웨어 및 하드웨어 조합 장치를 형성한다. 장치(30)는 이하의 것: 소비량을 포함하는 사용자의 소비 데이터를 타겟 장소에서 얻도록 구성된 취득 모듈(301); 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하도록 구성된 할당 모듈(302); 타겟 장소의 오프라인 환경에서 증강 현실 클라이언트 디바이스에 의해 수행되는 이미지 스캐닝 동작에 응답하여, 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되는지 여부를 결정하도록 구성된 결정 모듈(303); 및 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되었다는 결정에 응답하여, 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 증강 현실 클라이언트 디바이스에 전달하여, 증강 현실 클라이언트 디바이스가 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 관련된 가상 데이터에 대한 증강된 디스플레이를 수행하게 하도록 구성된 전달 모듈(304)을 포함한다.
본 예에서, 가상 데이터는 가상 자원 풀 내의 가상 자원의 합계 값, 가상 자원 풀 내의 가상 자원의 단위 값 및 단위 값의 변경 데이터를 포함한다.
장치(30)는 이하의 것: 가상 자원 풀 내의 가상 자원의 양 및 타겟 장소에 대응하는 할당될 합계 값에 기초하여 가상 자원 풀 내의 가상 자원의 단위 값을 계산하고; 가상 자원 풀 내의 가상 자원의 단위 값이 변경될 때 단위 값의 변경 데이터를 기록하고; 계산된 단위 값 및 가상 자원 풀 내의 가상 자원의 양에 기초하여 가상 자원 풀 내의 가상 자원의 합계 값을 계산하도록 구성된 계산 모듈(305)(도 3에 도시되지 않음)을 더 포함한다.
본 예에서, 할당 모듈(302)은 또한, 증강 현실 클라이언트 디바이스를 사용하여 사용자에 의해 송신된 제1 가상 자원 교환 요청을 수신하고 - 여기서 제1 가상 자원 교환 요청은 교환될 가상 자원의 양 및 사용자에 의해 교환될 가상 자원의 식별 정보를 포함함 -; 제1 가상 자원 교환 요청에 기초하여 교환될 가상 자원의 합계 값을 계산하고; 교환될 가상 자원과 동일한 합계 값을 갖는 가상 바우처를 사용자에게 할당하고; 증강 현실 클라이언트 디바이스를 사용하여 사용자에 의해 송신된 제2 가상 자원 교환 요청을 수신하고 - 여기서 제2 가상 자원 교환 요청은 사용자에 의해 교환될 가상 바우처의 양을 포함함 -; 제2 가상 자원 교환 요청에 기초하여 교환될 가상 바우처와 동일한 합계 값을 갖는 가상 자원의 양을 계산하고; 대응하는 양의 가상 자원을 사용자에게 할당하도록 또한 구성된다.
본 예에서, 가상 자원은 타겟 장소에 대응하는 가상 자산이고, 할당될 합계 값은 타겟 장소의 총 수익이고, 가상 바우처는 가상 통화이고, 제1 가상 자원 교환 요청은 가상 자산 구매 요청이고, 제2 가상 자원 교환 요청은 가상 자산 판매 요청이다.
도 5를 참조하면, 본 출원은 증강 현실에 기초하는 오프라인 상호 작용 장치(50)를 제공하고, 장치는 AR 클라이언트 디바이스에 적용된다. 도 6을 참조하면, 증강 현실에 기초하는 오프라인 상호 작용 장치(50)를 포함하는 AR 클라이언트 디바이스의 하드웨어 아키텍처는 일반적으로 CPU, 메모리, 비휘발성 메모리, 네트워크 인터페이스, 내부 버스 등을 포함한다. 증강 현실에 기초하는 오프라인 상호 작용 장치(50)가 소프트웨어에 의해 구현되는 예에서, 증강 현실에 기초하는 오프라인 상호 작용 장치(50)는 일반적으로 메모리에 로딩된 컴퓨터 프로그램으로서 이해될 수 있고, CPU에 의한 실행 후에 논리 소프트웨어 및 하드웨어 조합 장치를 형성한다. 장치(50)는 이하의 것: 타겟 장소에서 사용자의 소비 데이터를 증강 현실 서버에 업로드하도록 구성된 업로드 모듈(501)로서, 여기서 소비 데이터는 소비량을 포함하여, 증강 현실 서버가 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하게 하는 것인, 업로드 모듈(501); 타겟 장소의 오프라인 환경에서 사용자에 의해 수행되는 이미지 스캐닝 동작에 응답하여 타겟 장소의 오프라인 환경에서 이미지 스캐닝을 수행하도록 구성된 스캐닝 모듈(502); 스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시하고, 타겟 장소에 대응하는 미리 결정된 식별자가 이미지 정보로부터 식별될 때, 증강 현실 서버에 의해 전달되고 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 수신하도록 구성된 수신 모듈(503); 및 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 수신된 가상 데이터에 대한 증강된 디스플레이를 수행하도록 구성된 디스플레이 모듈(504)을 포함한다.
본 예에서, 가상 데이터는 가상 자원 풀 내의 가상 자원의 합계 값, 가상 자원 풀 내의 가상 자원의 단위 값 및 단위 값의 변경 데이터를 포함한다.
디스플레이 모듈(504)은 단위 값의 수신된 변경 데이터에 기초하여 단위 값의 변경 규칙에 대응하는 시각적 그래프를 생성하고; 가상 자원 풀 내의 가상 자원의 수신된 합계 값, 가상 자원 풀 내의 가상 자원의 단위 값, 및 스캐닝된 실세계 이미지 내의 미리 결정된 식별자에 대응하는 위치에서 생성된 시각적 그래프에 대해 증강된 디스플레이를 수행하도록 구성된다.
본 예에서, 증강 현실 클라이언트 디바이스의 사용자 인터페이스는 가상 자원에 대응하는 제1 교환 엔트리 및 제2 교환 엔트리를 포함한다.
장치는 이하의 것: 제1 교환 엔트리에 대해 사용자에 의해 수행되는 트리거 동작에 응답하여 제1 가상 자원 교환 요청을 증강 현실 서버로 송신하고 - 여기서, 제1 가상 자원 교환 요청은 교환될 가상 자원의 양 및 사용자에 의해 교환될 가상 자원의 식별 정보를 포함하여, 증강 현실 서버가 제1 가상 자원 교환 요청에 기초하여 교환될 가상 자원의 합계 값을 계산하고, 교환될 가상 자원과 동일한 합계 값을 갖는 가상 바우처를 사용자에게 할당하게 함 -; 제2 교환 엔트리에 대해 사용자에 의해 수행되는 트리거 동작에 응답하여 제2 가상 자원 교환 요청을 증강 현실 서버에 송신하도록 - 제2 가상 자원 교환 요청은 사용자에 의해 교환될 가상 바우처의 양을 포함하여, 증강 현실 서버가 제2 가상 자원 교환 요청에 기초하여 교환될 가상 바우처와 동일한 합계 값을 갖는 가상 자원의 양을 계산하고, 대응하는 양의 가상 자원을 사용자에게 할당하게 함 - 구성된 송신 모듈(505)을 더 포함한다.
본 예에서, 가상 자원은 타겟 장소에 대응하는 가상 자산이고, 가상 바우처는 가상 통화이고, 제1 가상 자원 교환 요청은 가상 자산 구매 요청이고, 제2 가상 자원 교환 요청은 가상 자산 판매 요청이다.
장치 구현예는 기본적으로 방법 구현예에 대응하기 때문에, 관련 부분들에 대해서는, 방법 구현예에서의 관련 설명을 참조할 수 있다. 전술된 장치 구현예는 단지 예일 뿐이다. 개별 부분으로서 설명된 유닛은 물리적으로 분리될 수 있거나 분리될 수 없고, 유닛으로서 표시된 부분은 물리적 유닛일 수 있거나 아닐 수 있고, 하나의 위치에 배치될 수 있고, 복수의 네트워크 유닛에 분산될 수 있다. 본 출원의 해결책의 목적을 달성하기 위해 필요에 따라 일부 또는 모든 모듈이 선택될 수 있다. 당 기술 분야의 숙련자는 창조적인 노력 없이 본 출원의 구현예를 이해하고 구현할 수 있다.
이전의 구현예에서 설명된 시스템, 장치, 모듈 또는 유닛은 컴퓨터 칩 또는 엔티티를 사용함으로써 구현될 수 있고, 또는 특정 기능을 갖는 제품에 의해 구현될 수 있다. 일반적인 구현 디바이스는 컴퓨터이다. 컴퓨터는 예를 들어, 퍼스널 컴퓨터, 랩탑 컴퓨터, 휴대전화, 카메라 폰, 스마트폰, 개인 휴대 정보 단말, 미디어 플레이어, 내비게이션 디바이스, 이메일 디바이스, 게임 콘솔, 태블릿 컴퓨터 또는 웨어러블 디바이스 또는 임의의 이들의 디바이스의 조합일 수 있다.
당 기술 분야의 숙련자는 본 명세서를 고려하고 본 개시내용을 실시한 후에 본 출원의 다른 구현예를 용이하게 이해할 수 있다. 본 출원은 본 출원의 임의의 변형, 기능 또는 적응적인 변경을 커버하도록 의도된다. 이들 변형, 기능 또는 적응적 변경은 본 출원의 일반적인 원리를 따르며, 본 출원에 개시되지 않은, 당 기술 분야의 통상의 지식 또는 통상적으로 사용되는 기술 수단을 포함한다. 본 출원 및 구현예는 단지 예시로서 고려된다. 본 출원의 실제 범주 및 사상은 이하의 청구범위에 의해 설명된다.
본 출원은 첨부 도면에 도시되어 있는 전술된 정확한 구조에 한정되지 않으며, 본 출원의 범주를 벗어나지 않고 수정 및 변경이 이루어질 수 있다는 것이 이해되어야 한다. 본 출원의 범주는 첨부된 청구범위에 의해서만 한정된다.
상기 설명은 단지 본 출원의 구현예일 뿐이며, 본 출원을 한정하도록 의도된 것은 아니다. 본 출원의 사상 및 원리로부터 벗어나지 않고 이루어지는 임의의 수정, 등가의 대체 또는 개선은 본 출원의 보호 범주 내에 있어야 한다.

Claims (16)

  1. 증강 현실에 기초하는 오프라인 상호 작용 방법으로서, 상기 방법은 증강 현실 서버에 적용되고, 상기 방법은
    타겟 장소에서의 사용자의 소비 데이터를 얻는 단계로서, 상기 소비 데이터는 소비량을 포함하는 것인, 사용자의 소비 데이터를 얻는 단계;
    상기 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하는 단계;
    상기 할당된 가상 자원을 상기 타겟 장소의 가상 자원 풀에 축적하는 단계;
    타겟 장소의 오프라인 환경에서 증강 현실 클라이언트 디바이스에 의해 수행되는 이미지 스캐닝 동작에 응답하여, 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되는지 여부를 결정하는 단계; 및
    상기 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되었다는 결정에 응답하여, 상기 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 상기 증강 현실 클라이언트 디바이스에 전달하여, 상기 증강 현실 클라이언트 디바이스가 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 관련된 가상 데이터에 대한 증강된 디스플레이를 수행하게 하는 단계를 포함하는 오프라인 상호 작용 방법.
  2. 제1항에 있어서, 상기 가상 데이터는 상기 가상 자원 풀 내의 상기 가상 자원의 합계 값, 상기 가상 자원 풀 내의 상기 가상 자원의 단위 값 및 상기 단위 값의 변경 데이터를 포함하고;
    상기 방법은,
    상기 가상 자원 풀 내의 상기 가상 자원의 양 및 상기 타겟 장소에 대응하는 할당될 합계 값에 기초하여 상기 가상 자원 풀 내의 상기 가상 자원의 단위 값을 계산하는 단계;
    상기 가상 자원 풀 내의 상기 가상 자원의 단위 값이 변경될 때 상기 단위 값의 변경 데이터를 기록하는 단계; 및
    상기 계산된 단위 값 및 상기 가상 자원 풀 내의 상기 가상 자원의 양에 기초하여 상기 가상 자원 풀 내의 상기 가상 자원의 합계 값을 계산하는 단계를 더 포함하는 오프라인 상호 작용 방법.
  3. 제2항에 있어서, 상기 방법은,
    상기 증강 현실 클라이언트 디바이스를 사용하여 사용자에 의해 송신된 제1 가상 자원 교환 요청을 수신하는 단계로서, 상기 제1 가상 자원 교환 요청은 교환될 가상 자원의 양 및 사용자에 의해 교환될 가상 자원의 식별 정보를 포함하는 것인, 제1 가상 자원 교환 요청을 수신하는 단계;
    상기 제1 가상 자원 교환 요청에 기초하여 교환될 가상 자원의 합계 값을 계산하는 단계;
    교환될 가상 자원과 동일한 합계 값을 갖는 가상 바우처를 사용자에게 할당하는 단계;
    상기 증강 현실 클라이언트 디바이스를 사용하여 사용자에 의해 송신된 제2 가상 자원 교환 요청을 수신하는 단계로서, 상기 제2 가상 자원 교환 요청은 사용자에 의해 교환될 가상 바우처의 양을 포함하는 것인, 제2 가상 자원 교환 요청을 수신하는 단계;
    상기 제2 가상 자원 교환 요청에 기초하여 교환될 가상 바우처와 동일한 합계 값을 갖는 가상 자원의 양을 계산하는 단계; 및
    대응하는 양의 가상 자원을 사용자에게 할당하는 단계를 더 포함하는 오프라인 상호 작용 방법.
  4. 제2항에 있어서,
    상기 가상 자원은 상기 타겟 장소에 대응하는 가상 자산이고,
    할당될 합계 값은 상기 타겟 장소의 총 수익이고,
    가상 바우처는 가상 통화이고,
    제1 가상 자원 교환 요청은 가상 자산 구매 요청이고,
    제2 가상 자원 교환 요청은 가상 자산 판매 요청인 것인 오프라인 상호 작용 방법.
  5. 증강 현실에 기초하는 오프라인 상호 작용 방법으로서, 상기 방법은 증강 현실 클라이언트 디바이스에 적용되고, 상기 방법은,
    타겟 장소에서 사용자의 소비 데이터를 증강 현실 서버에 업로드하는 단계로서, 상기 소비 데이터는 소비량을 포함하여, 상기 증강 현실 서버가 상기 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하게 하는 것인, 업로드 단계;
    상기 할당된 가상 자원을 상기 타겟 장소의 가상 자원 풀에 축적하는 단계;
    상기 타겟 장소의 오프라인 환경에서 사용자에 의해 수행된 이미지 스캐닝 동작에 응답하여 상기 타겟 장소의 오프라인 환경에서 이미지 스캐닝을 수행하는 단계;
    스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시하는 단계;
    상기 타겟 장소에 대응하는 미리 결정된 식별자가 상기 이미지 정보로부터 식별되었다는 결정에 응답하여, 상기 증강 현실 서버에 의해 전달되고 상기 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 수신하는 단계; 및
    스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 상기 수신된 가상 데이터에 대한 증강된 디스플레이를 수행하는 단계를 포함하는 오프라인 상호 작용 방법.
  6. 제5항에 있어서, 상기 가상 데이터는 상기 가상 자원 풀 내의 상기 가상 자원의 합계 값, 상기 가상 자원 풀 내의 상기 가상 자원의 단위 값 및 상기 단위 값의 변경 데이터를 포함하고;
    상기 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 상기 수신된 가상 데이터에 대한 증강된 디스플레이를 수행하는 단계는,
    상기 단위 값의 수신된 변경 데이터에 기초하여 상기 단위 값의 변경 규칙에 대응하는 시각적 그래프를 생성하는 단계; 및
    상기 가상 자원 풀 내의 가상 자원의 수신된 합계 값, 상기 가상 자원 풀 내의 가상 자원의 단위 값 및 스캐닝된 실세계 이미지 내의 미리 결정된 식별자에 대응하는 위치에서 생성된 시각적 그래프에 대해 증강된 디스플레이를 수행하는 단계를 포함하는 것인 오프라인 상호 작용 방법.
  7. 제5항에 있어서, 상기 증강 현실 클라이언트 디바이스의 사용자 인터페이스는 가상 자원에 대응하는 제1 교환 엔트리 및 제2 교환 엔트리를 포함하고,
    상기 방법은,
    상기 제1 교환 엔트리에 대해 사용자에 의해 수행된 트리거 동작에 응답하여 상기 증강 현실 서버에 제1 가상 자원 교환 요청을 송신하는 단계로서, 상기 제1 가상 자원 교환 요청은 교환될 가상 자원의 양 및 사용자에 의해 교환될 가상 자원의 식별 정보를 포함하여, 상기 증강 현실 서버가 상기 제1 가상 자원 교환 요청에 기초하여 교환될 가상 자원의 합계 값을 계산하게 하는 것인, 제1 가상 자원 교환 요청을 송신하는 단계;
    교환될 가상 자원과 동일한 합계 값을 갖는 가상 바우처를 사용자에게 할당하는 단계;
    상기 제2 교환 엔트리에 대해 사용자에 의해 수행되는 트리거 동작에 응답하여 상기 증강 현실 서버에 제2 가상 자원 교환 요청을 송신하는 단계로서, 상기 제2 가상 자원 교환 요청은 사용자에 의해 교환될 가상 바우처의 양을 포함하여, 상기 증강 현실 서버가 상기 제2 가상 자원 교환 요청에 기초하여 교환될 가상 바우처와 동일한 합계 값을 갖는 가상 자원의 양을 계산하게 하는 것인, 제2 가상 자원 교환 요청을 송신하는 단계; 및
    대응하는 양의 가상 자원을 사용자에게 할당하는 단계를 더 포함하는 오프라인 상호 작용 방법.
  8. 제5항에 있어서,
    상기 가상 자원은 상기 타겟 장소에 대응하는 가상 자산이고,
    가상 바우처는 가상 통화이고,
    제1 가상 자원 교환 요청은 가상 자산 구매 요청이고,
    제2 가상 자원 교환 요청은 가상 자산 판매 요청인 것인 오프라인 상호 작용 방법.
  9. 증강 현실에 기초하는 오프라인 상호 작용 장치로서, 상기 장치는 증강 현실 서버에 적용되고, 상기 장치는
    타겟 장소에서의 사용자의 소비 데이터를 얻도록 구성되는 취득 모듈로서, 상기 소비 데이터는 소비량을 포함하는 것인, 취득 모듈;
    상기 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에게 할당하고, 상기 할당된 가상 자원을 상기 타겟 장소의 가상 자원 풀에 축적하도록 구성된 할당 모듈;
    상기 타겟 장소의 오프라인 환경에서 증강 현실 클라이언트 디바이스에 의해 수행되는 이미지 스캐닝 동작에 응답하여, 상기 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되는지 여부를 결정하도록 구성된 결정 모듈; 및
    상기 타겟 장소에 대응하는 미리 결정된 식별자가 스캐닝을 통해 얻어진 이미지 정보로부터 식별되었다는 결정에 응답하여, 상기 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 상기 증강 현실 클라이언트 디바이스에 전달하여, 상기 증강 현실 클라이언트 디바이스가 스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 관련된 가상 데이터에 대한 증강된 디스플레이를 수행하게 하도록 구성된 전달 모듈을 포함하는 오프라인 상호 작용 장치.
  10. 제9항에 있어서, 상기 가상 데이터는 상기 가상 자원 풀 내의 상기 가상 자원의 합계 값, 상기 가상 자원 풀 내의 상기 가상 자원의 단위 값 및 상기 단위 값의 변경 데이터를 포함하고;
    상기 장치는 계산 모듈을 더 포함하고, 상기 계산 모듈은,
    상기 가상 자원 풀 내의 상기 가상 자원의 양 및 상기 타겟 장소에 대응하는 할당될 합계 값에 기초하여 상기 가상 자원 풀 내의 상기 가상 자원의 단위 값을 계산하고;
    상기 가상 자원 풀 내의 가상 자원의 단위 값이 변경될 때 상기 단위 값의 변경 데이터를 기록하고;
    상기 계산된 단위 값 및 상기 가상 자원 풀 내의 상기 가상 자원의 양에 기초하여 상기 가상 자원 풀 내의 상기 가상 자원의 합계 값을 계산하도록 구성되는 것인 오프라인 상호 작용 장치.
  11. 제10항에 있어서, 상기 할당 모듈은 또한,
    상기 증강 현실 클라이언트 디바이스를 사용하여 사용자에 의해 송신된 제1 가상 자원 교환 요청을 수신하고 - 상기 제1 가상 자원 교환 요청은 교환될 가상 자원의 양 및 사용자에 의해 교환될 가상 자원의 식별 정보를 포함함 -;
    상기 제1 가상 자원 교환 요청에 기초하여 교환될 가상 자원의 합계 값을 계산하고;
    교환될 가상 자원과 동일한 합계 값을 갖는 가상 바우처를 사용자에게 할당하고;
    상기 증강 현실 클라이언트 디바이스를 사용하여 사용자에 의해 송신된 제2 가상 자원 교환 요청을 수신하고 - 상기 제2 가상 자원 교환 요청은 사용자에 의해 교환될 가상 바우처의 양을 포함함 -;
    상기 제2 가상 자원 교환 요청에 기초하여 교환될 가상 바우처와 동일한 합계 값을 갖는 가상 자원의 양을 계산하고;
    대응하는 양의 가상 자원을 사용자에게 할당하도록 구성되는 것인 오프라인 상호 작용 장치.
  12. 제10항에 있어서,
    상기 가상 자원은 상기 타겟 장소에 대응하는 가상 자산이고,
    할당될 합계 값은 상기 타겟 장소의 총 수익이고,
    가상 바우처는 가상 통화이고,
    제1 가상 자원 교환 요청은 가상 자산 구매 요청이고,
    제2 가상 자원 교환 요청은 가상 자산 판매 요청인 것인 오프라인 상호 작용 장치.
  13. 증강 현실에 기초하는 오프라인 상호 작용 장치로서, 상기 장치는 증강 현실 클라이언트 디바이스에 적용되고, 상기 장치는,
    상기 타겟 장소에서 사용자의 소비 데이터를 증강 현실 서버에 업로드하도록 구성된 업로드 모듈로서, 상기 소비 데이터는 소비량을 포함하여, 상기 증강 현실 서버가 소비량에 기초하여 대응하는 양의 가상 자원을 사용자에 할당하고, 할당된 가상 자원을 타겟 장소의 가상 자원 풀에 축적하게 하는 것인, 업로드 모듈;
    상기 타겟 장소의 오프라인 환경에서 사용자에 의해 수행되는 이미지 스캐닝 동작에 응답하여 상기 타겟 장소의 오프라인 환경에서 이미지 스캐닝을 수행하도록 구성된 스캐닝 모듈;
    스캐닝을 통해 얻어진 이미지 정보에 대한 이미지 인식을 개시하고, 상기 타겟 장소에 대응하는 미리 결정된 식별자가 상기 이미지 정보로부터 식별될 때, 상기 증강 현실 서버에 의해 전달되고 상기 가상 자원 풀 내의 가상 자원에 관련된 가상 데이터를 수신하도록 구성된 수신 모듈; 및
    스캐닝된 실세계 이미지에서 미리 결정된 식별자에 대응하는 위치에서 상기 수신된 가상 데이터에 대한 증강된 디스플레이를 수행하도록 구성된 디스플레이 모듈을 포함하는 오프라인 상호 작용 장치.
  14. 제13항에 있어서, 상기 가상 데이터는 상기 가상 자원 풀 내의 상기 가상 자원의 합계 값, 상기 가상 자원 풀 내의 상기 가상 자원의 단위 값 및 상기 단위 값의 변경 데이터를 포함하고;
    상기 디스플레이 모듈은,
    상기 단위 값의 수신된 변경 데이터에 기초하여 상기 단위 값의 변경 규칙에 대응하는 시각적 그래프를 생성하고;
    상기 가상 자원 풀 내의 가상 자원의 수신된 합계 값, 상기 가상 자원 풀 내의 가상 자원의 단위 값 및 스캐닝된 실세계 이미지 내의 미리 결정된 식별자에 대응하는 위치에서 생성된 시각적 그래프에 대해 증강된 디스플레이를 수행하도록 구성되는 것인 오프라인 상호 작용 장치.
  15. 제13항에 있어서, 상기 증강 현실 클라이언트 디바이스의 사용자 인터페이스는 가상 자원에 대응하는 제1 교환 엔트리 및 제2 교환 엔트리를 포함하고,
    상기 장치는 송신 모듈을 더 포함하고, 상기 송신 모듈은,
    상기 제1 교환 엔트리에 대해 사용자에 의해 수행되는 트리거 동작에 응답하여 제1 가상 자원 교환 요청을 상기 증강 현실 서버로 송신하고 - 상기 제1 가상 자원 교환 요청은 교환될 가상 자원의 양 및 사용자에 의해 교환될 가상 자원의 식별 정보를 포함하여, 상기 증강 현실 서버가 상기 제1 가상 자원 교환 요청에 기초하여 교환될 가상 자원의 합계 값을 계산하고, 교환될 가상 자원과 동일한 합계 값을 갖는 가상 바우처를 사용자에게 할당하게 함 -;
    상기 제2 교환 엔트리에 대해 사용자에 의해 수행되는 트리거 동작에 응답하여 제2 가상 자원 교환 요청을 상기 증강 현실 서버에 송신하도록 - 상기 제2 가상 자원 교환 요청은 사용자에 의해 교환될 가상 바우처의 양을 포함하여, 상기 증강 현실 서버가 상기 제2 가상 자원 교환 요청에 기초하여 교환될 가상 바우처와 동일한 합계 값을 갖는 가상 자원의 양을 계산하고, 대응하는 양의 가상 자원을 사용자에게 할당하게 함 - 구성되는 것인 오프라인 상호 작용 장치.
  16. 제13항에 있어서,
    상기 가상 자원은 상기 타겟 장소에 대응하는 가상 자산이고,
    가상 바우처는 가상 통화이고,
    제1 가상 자원 교환 요청은 가상 자산 구매 요청이고,
    제2 가상 자원 교환 요청은 가상 자산 판매 요청인 것인 오프라인 상호 작용 장치.
KR1020197012670A 2017-03-01 2018-02-28 증강 현실에 기초한 오프라인 상호작용을 위한 방법 및 장치 KR102272119B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710119872.3 2017-03-01
CN201710119872.3A CN107123013B (zh) 2017-03-01 2017-03-01 基于增强现实的线下交互方法及装置
PCT/CN2018/077550 WO2018157816A1 (zh) 2017-03-01 2018-02-28 基于增强现实的线下交互方法及装置

Publications (2)

Publication Number Publication Date
KR20190090786A true KR20190090786A (ko) 2019-08-02
KR102272119B1 KR102272119B1 (ko) 2021-07-06

Family

ID=59717392

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197012670A KR102272119B1 (ko) 2017-03-01 2018-02-28 증강 현실에 기초한 오프라인 상호작용을 위한 방법 및 장치

Country Status (9)

Country Link
US (1) US10997651B2 (ko)
EP (1) EP3522096A4 (ko)
JP (1) JP6865821B2 (ko)
KR (1) KR102272119B1 (ko)
CN (1) CN107123013B (ko)
MY (1) MY197834A (ko)
PH (1) PH12019500973A1 (ko)
TW (1) TWI718348B (ko)
WO (1) WO2018157816A1 (ko)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107123013B (zh) 2017-03-01 2020-09-01 阿里巴巴集团控股有限公司 基于增强现实的线下交互方法及装置
CN108280641B (zh) * 2018-01-29 2021-01-08 口碑(上海)信息技术有限公司 基于ar技术的支付方法以及装置
CN108596971B (zh) * 2018-04-27 2024-03-19 北京小米移动软件有限公司 图像显示方法及装置
CN109274575B (zh) * 2018-08-08 2020-07-24 阿里巴巴集团控股有限公司 消息发送方法及装置和电子设备
US10979908B2 (en) 2018-08-17 2021-04-13 Charter Communications Operating, Llc Monitoring and switchover of shared spectrum allocation manager to provide improved wireless service
US10932143B2 (en) * 2018-08-17 2021-02-23 Charter Communications Operating, Llc Monitoring and switchover of shared spectrum allocation manager in a wireless network
US10573057B1 (en) * 2018-09-05 2020-02-25 Citrix Systems, Inc. Two-part context-based rendering solution for high-fidelity augmented reality in virtualized environment
US11430216B2 (en) * 2018-10-22 2022-08-30 Hewlett-Packard Development Company, L.P. Displaying data related to objects in images
CN109785091A (zh) * 2018-12-10 2019-05-21 大象慧云信息技术有限公司 一种基于ar技术的发票管理方法及系统
CN112055034B (zh) * 2019-06-05 2022-03-29 北京外号信息技术有限公司 基于光通信装置的交互方法和系统
CN110415096A (zh) * 2019-07-30 2019-11-05 广州虎牙信息科技有限公司 一种虚拟财产结算方法、装置及计算机设备
CN110502353A (zh) * 2019-08-28 2019-11-26 行吟信息科技(上海)有限公司 一种虚拟道具下发方法及系统
CN112437090B (zh) * 2020-11-27 2022-11-04 深圳市商汤科技有限公司 资源加载方法及装置、电子设备和存储介质
CN112506387B (zh) * 2020-11-30 2023-02-17 北京达佳互联信息技术有限公司 虚拟资源的分配显示方法、装置和存储介质
CN112684893A (zh) * 2020-12-31 2021-04-20 上海电气集团股份有限公司 信息展示方法、装置、电子设备及存储介质
US11838141B2 (en) 2021-10-29 2023-12-05 International Business Machines Corporation Augmentation of contextual timeline markers on a virtual video conversation
CN113824746B (zh) * 2021-11-25 2022-02-18 山东信息职业技术学院 一种虚拟现实信息传输方法及虚拟现实系统
CN116700478A (zh) * 2023-05-23 2023-09-05 星徒(上海)科技发展有限公司 基于增强现实的文本内容增强交互系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11250132A (ja) * 1998-02-27 1999-09-17 Toshiba Tec Corp 店舗売上管理システム
JP2014127118A (ja) * 2012-12-27 2014-07-07 Pam:Kk 予約業務支援サーバ、予約業務支援プログラム及び予約業務の支援方法
CN104463623A (zh) * 2014-11-29 2015-03-25 深圳市无微不至数字技术有限公司 积分奖励方法、装置及系统
KR101693631B1 (ko) * 2015-09-01 2017-01-06 김진열 증강현실을 이용한 부동산 정보 제공시스템

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7749089B1 (en) * 1999-02-26 2010-07-06 Creative Kingdoms, Llc Multi-media interactive play system
US6871140B1 (en) * 2000-02-25 2005-03-22 Costar Group, Inc. System and method for collection, distribution, and use of information in connection with commercial real estate
JP2002073988A (ja) * 2000-06-16 2002-03-12 Hiroko Matsuzawa 株価表示システム、株価表示システムのプログラムを記憶した記憶媒体
JP2002073878A (ja) * 2000-08-29 2002-03-12 Kyoji Tajima 仮想株の取引方法、仮想株取引システムおよびコンピュータ読み取り可能な記録媒体
AU2002225824A1 (en) * 2000-11-16 2002-05-27 Milepoint, Inc. Loyalty program tracking and conversion system
JP2004220426A (ja) * 2003-01-16 2004-08-05 Itfor Inc 特典付与管理システム
CN1898664A (zh) * 2003-09-24 2007-01-17 弗莱森信息录有限公司 信息分配系统
US8306921B2 (en) * 2008-02-13 2012-11-06 Toyota Motor Engineering & Manufacturing North America, Inc. Mobile recommendation and reservation system
US7707073B2 (en) * 2008-05-15 2010-04-27 Sony Ericsson Mobile Communications, Ab Systems methods and computer program products for providing augmented shopping information
US20090300101A1 (en) * 2008-05-30 2009-12-03 Carl Johan Freer Augmented reality platform and method using letters, numbers, and/or math symbols recognition
MY173040A (en) * 2010-03-30 2019-12-20 Ns Solutions Corp Information processing apparatus, system, vacant space guidance method and program
KR101429250B1 (ko) * 2010-08-20 2014-09-25 주식회사 팬택 단계별 객체 정보 제공이 가능한 단말 장치 및 방법
US8743145B1 (en) * 2010-08-26 2014-06-03 Amazon Technologies, Inc. Visual overlay for augmenting reality
JP4914528B1 (ja) * 2010-08-31 2012-04-11 新日鉄ソリューションズ株式会社 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム
US9317133B2 (en) * 2010-10-08 2016-04-19 Nokia Technologies Oy Method and apparatus for generating augmented reality content
US8890896B1 (en) * 2010-11-02 2014-11-18 Google Inc. Image recognition in an augmented reality application
US9317835B2 (en) * 2011-03-08 2016-04-19 Bank Of America Corporation Populating budgets and/or wish lists using real-time video image analysis
KR101764251B1 (ko) * 2011-04-19 2017-08-04 삼성전자주식회사 전력 사용 상태 표시 방법 및 이를 적용한 휴대기기
JP5047378B1 (ja) * 2011-04-28 2012-10-10 楽天株式会社 情報処理システム、情報処理方法、プログラム及び情報記録媒体
WO2013049855A2 (en) * 2011-09-30 2013-04-04 Ioculi, Inc. Location based augmented reality system for exchange of items based on location sensing and methods and devices related thereto
US9606992B2 (en) * 2011-09-30 2017-03-28 Microsoft Technology Licensing, Llc Personal audio/visual apparatus providing resource management
US9449342B2 (en) * 2011-10-27 2016-09-20 Ebay Inc. System and method for visualization of items in an environment using augmented reality
US20130263016A1 (en) * 2012-03-27 2013-10-03 Nokia Corporation Method and apparatus for location tagged user interface for media sharing
US8803916B1 (en) * 2012-05-03 2014-08-12 Sprint Communications Company L.P. Methods and systems for an augmented reality service delivery platform
US9430876B1 (en) * 2012-05-10 2016-08-30 Aurasma Limited Intelligent method of determining trigger items in augmented reality environments
US20140129328A1 (en) * 2012-11-07 2014-05-08 Microsoft Corporation Providing augmented purchase schemes
JP6286123B2 (ja) * 2012-12-27 2018-02-28 サターン ライセンシング エルエルシーSaturn Licensing LLC 情報処理装置、コンテンツ提供方法及びコンピュータプログラム
US9031328B2 (en) * 2013-01-18 2015-05-12 Disney Enterprises, Inc. Landmark triggered image augmentation
US20140214547A1 (en) * 2013-01-25 2014-07-31 R4 Technologies, Llc Systems and methods for augmented retail reality
CN103246988A (zh) * 2013-05-04 2013-08-14 丁国成 一种基于现实生活的网络游戏方法、装置和系统
US20150046284A1 (en) * 2013-08-12 2015-02-12 Airvirtise Method of Using an Augmented Reality Device
US20150095456A1 (en) * 2013-09-30 2015-04-02 Ashok Deepak Shah Realtime status data display with push advertising
JP2015079371A (ja) * 2013-10-17 2015-04-23 大日本印刷株式会社 キャンペーン応募システム、キャンペーン応募方法、キャンペーン管理サーバ、キャンペーン管理方法、及び、プログラム
TW201546739A (zh) * 2014-06-10 2015-12-16 zhi-rong Peng 以電信整合iBeacon室內定位技術與資訊物流雲端平台的消費服務系統及其方法
WO2015195413A1 (en) 2014-06-16 2015-12-23 Aisle411, Inc. Systems and methods for presenting information associated with a three-dimensional location on a two-dimensional display
JP6476643B2 (ja) * 2014-08-11 2019-03-06 セイコーエプソン株式会社 頭部装着型表示装置、情報システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム
CN105354203A (zh) * 2014-08-21 2016-02-24 阿里巴巴集团控股有限公司 一种信息展示方法及装置
US20160071140A1 (en) * 2014-09-05 2016-03-10 Ebay Inc. Systems and methods for managing loyalty reward programs
CN104408647A (zh) * 2014-11-29 2015-03-11 深圳市无微不至数字技术有限公司 积分兑换方法、装置及系统
CN105809459A (zh) * 2014-12-30 2016-07-27 深圳富泰宏精密工业有限公司 数据处理系统及方法
EP3314564A4 (en) * 2015-06-24 2018-05-02 Magic Leap, Inc. Augmented reality devices, systems and methods for purchasing
CN105096180A (zh) * 2015-07-20 2015-11-25 北京易讯理想科技有限公司 基于增强现实的商品信息显示方法及装置
KR101613278B1 (ko) * 2015-08-18 2016-04-19 김영덕 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법
US10346924B1 (en) * 2015-10-13 2019-07-09 State Farm Mutual Automobile Insurance Company Systems and method for analyzing property related information
CN105787757A (zh) * 2016-02-22 2016-07-20 中国石油天然气股份有限公司安徽销售分公司 一种用于加油站的闭环积分商城消费方法及系统
CN106097003A (zh) * 2016-06-07 2016-11-09 腾讯科技(深圳)有限公司 一种虚拟币重分配的方法、设备及系统
CN106228400A (zh) * 2016-07-20 2016-12-14 大辅科技(北京)有限公司 一种应用增强现实技术的广告推送方法和系统
CN106326454A (zh) * 2016-08-27 2017-01-11 知产在线(北京)科技有限公司 一种图像识别方法
CN106372965A (zh) * 2016-08-31 2017-02-01 无锡雅座在线科技发展有限公司 虚拟资源信息的分析方法和装置
US10600111B2 (en) * 2016-11-30 2020-03-24 Bank Of America Corporation Geolocation notifications using augmented reality user devices
CN107123013B (zh) * 2017-03-01 2020-09-01 阿里巴巴集团控股有限公司 基于增强现实的线下交互方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11250132A (ja) * 1998-02-27 1999-09-17 Toshiba Tec Corp 店舗売上管理システム
JP2014127118A (ja) * 2012-12-27 2014-07-07 Pam:Kk 予約業務支援サーバ、予約業務支援プログラム及び予約業務の支援方法
CN104463623A (zh) * 2014-11-29 2015-03-25 深圳市无微不至数字技术有限公司 积分奖励方法、装置及系统
KR101693631B1 (ko) * 2015-09-01 2017-01-06 김진열 증강현실을 이용한 부동산 정보 제공시스템

Also Published As

Publication number Publication date
US20190272588A1 (en) 2019-09-05
TW201833840A (zh) 2018-09-16
JP2020503591A (ja) 2020-01-30
US10997651B2 (en) 2021-05-04
MY197834A (en) 2023-07-20
EP3522096A1 (en) 2019-08-07
WO2018157816A1 (zh) 2018-09-07
PH12019500973A1 (en) 2019-11-11
CN107123013A (zh) 2017-09-01
TWI718348B (zh) 2021-02-11
EP3522096A4 (en) 2019-12-11
CN107123013B (zh) 2020-09-01
JP6865821B2 (ja) 2021-04-28
KR102272119B1 (ko) 2021-07-06

Similar Documents

Publication Publication Date Title
KR102272119B1 (ko) 증강 현실에 기초한 오프라인 상호작용을 위한 방법 및 장치
EP3531649B1 (en) Method and device for allocating augmented reality-based virtual objects
TWI669634B (zh) 基於擴增實境的虛擬對象分配方法及裝置
US20200211025A1 (en) Augmented reality-based virtual object allocation method and apparatus
US20210248604A1 (en) Electronic-certificate-based interaction methods and apparatuses, and electronic devices
CN110830735B (zh) 一种视频生成方法、装置、计算机设备和存储介质
CN107464102B (zh) 一种ar设备支付系统及方法、移动vr支付方法和系统
CN107230121B (zh) 交易处理方法、装置及服务器
KR20120052258A (ko) 위치 기반 작업을 위한 중개 시스템
KR20160077131A (ko) 인스턴트 메시징 또는 소셜 애플리케이션들에 기반하는 데이터 프로세싱 방법 및 그의 디바이스
KR20180030514A (ko) 서비스 프로세싱을 위한 방법 및 디바이스
CN104811461B (zh) 数据推送方法和装置
CN110415008B (zh) 信用数据管理方法、装置、节点设备、存储介质以及系统
JP7479017B2 (ja) コンピュータプログラム、方法、及び、サーバ装置
KR101645083B1 (ko) 프로젝트 관리 방법 및 서버
CN111126975A (zh) 电子红包的处理方法、装置、电子设备及可读存储介质
TWI748441B (zh) 用於實現像素頁面的像素占領的方法、裝置、計算設備及機器可讀儲存媒體
CN109960909A (zh) 基于三维地图的社交方法、服务器及计算机可读存储介质
KR102584189B1 (ko) 온/오프라인 쇼핑 경험을 공유하는 메타버스 기반 이커머스 플랫폼 운영시스템
US20190370822A1 (en) Computer-Implemented System And Method For Cloud-Based Industrial Equipment Acquisition
CN115208901A (zh) 一种资源分配方法、系统、装置、计算机设备及存储介质
CN117541339A (zh) 商品推荐、提供用户权益资源方法及电子设备
CN111861769A (zh) 资源处理方法、系统和计算机可读存储介质
KR20230166552A (ko) 메타버스에서 가상의 쇼호스트가 상품을 판매하는 방법 및 장치
KR20220136030A (ko) 실시간 스트리밍 서비스를 이용한 부동산 중개 서버

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant