KR102298793B1 - 가상현실 장면-기반 비즈니스 검증 방법 및 디바이스 - Google Patents

가상현실 장면-기반 비즈니스 검증 방법 및 디바이스 Download PDF

Info

Publication number
KR102298793B1
KR102298793B1 KR1020197025471A KR20197025471A KR102298793B1 KR 102298793 B1 KR102298793 B1 KR 102298793B1 KR 1020197025471 A KR1020197025471 A KR 1020197025471A KR 20197025471 A KR20197025471 A KR 20197025471A KR 102298793 B1 KR102298793 B1 KR 102298793B1
Authority
KR
South Korea
Prior art keywords
user
eye
scene
service
target service
Prior art date
Application number
KR1020197025471A
Other languages
English (en)
Other versions
KR20190113880A (ko
Inventor
준 우
Original Assignee
어드밴스드 뉴 테크놀로지스 씨오., 엘티디.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 어드밴스드 뉴 테크놀로지스 씨오., 엘티디. filed Critical 어드밴스드 뉴 테크놀로지스 씨오., 엘티디.
Publication of KR20190113880A publication Critical patent/KR20190113880A/ko
Application granted granted Critical
Publication of KR102298793B1 publication Critical patent/KR102298793B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/38Payment protocols; Details thereof
    • G06Q20/40Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401Transaction verification
    • G06Q20/4014Identity check for transactions
    • G06Q20/40145Biometric identity checks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • H04L67/38

Abstract

본 출원은 가상현실(VR) 장면-기반 비즈니스 검증 방법을 개시한다. 방법은 VR 클라이언트에 채용될 수 있다. 방법은, VR 장면에서 사용자의 시각 초점이 트리거링하는 타깃 비즈니스를 검출하는 단계로서, 타깃 비즈니스는 보안 검증을 요구하는 사용자 비즈니스인, 타깃 비즈니스를 검출하는 단계; 사전에 구성된 눈 인식 하드웨어를 사용하여 사용자로부터 복수의 눈의 생리학적 특징을 수집하는 단계; 복수의 눈의 생리학적 특징 중 하나를 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교하고, 그리고 비교 결과에 기초하여, 타깃 비즈니스 보안 검증이 성공했는지를 결정하는 단계; 타깃 비즈니스 보안 검증이 실패했다고 결정된다면, 복수의 눈의 생리학적 특징 중 다른 눈의 생리학적 특징을 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교하고, 그리고 비교 결과에 기초하여, 타깃 비즈니스 보안 검증이 성공했는지를 결정하는 단계를 포함한다. 본 출원은 눈의 생리학적 특징에 기초하여 비즈니스 보안 검증의 정확성을 개선시킬 수 있다.

Description

가상현실 장면-기반 비즈니스 검증 방법 및 디바이스
본 출원은 컴퓨터 응용 분야, 구체적으로, 가상현실 장면-기반 서비스 검증 방법 및 디바이스에 관한 것이다.
가상현실(Virtual Reality: VR) 기술은 컴퓨터 그래픽 시스템 및 다양한 제어 인터페이스를 포괄적으로 활용하여 컴퓨터에서 대화형 3차원 환경을 생성하여 사용자에게 몰입 감각을 제공하는 기술이다. VR 기술 및 관련된 하드웨어의 발전은 VR 기술이 사용될 수 있는 시나리오의 수를 상당히 증가시킨다.
그러나, VR 기술이 사용자에게 생생한 몰입 감각을 제공할 수 있을지라도, 보안 검증을 요구하는 타깃 서비스(예를 들어, 지불 서비스)가 VR 장면에서 실행된다면, 사용자가 VR 단말기를 착용하여 몰입 경험을 즐기는 동안, 타깃 서비스의 보안을 신속하게 검증하는 방법이 사용자 경험을 개선시키기 위해 매우 중요하다.
본 출원은 VR 클라이언트에 적용 가능한, 가상현실(VR) 장면-기반 서비스 검증 방법을 제안하고, 방법은,
VR 장면에서 사용자의 시각 초점이 트리거링하는(trigger) 타깃 서비스를 검출하는 단계로서, 타깃 서비스는 보안 검증을 요구하는 사용자 서비스인, 타깃 서비스를 검출하는 단계;
사전에 구성된 눈 인식 하드웨어를 사용하여 복수의 눈의 생리학적 특징을 사용자로부터 획득하는 단계;
복수의 눈의 생리학적 특징 중 하나를 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하는 단계; 및
비교 결과에 기초하여 타깃 서비스의 보안 검증이 실패했다고 결정된다면, 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징을 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하는 단계를 포함한다.
본 출원은 VR 클라이언트에 적용 가능한, 가상현실(VR) 장면-기반 서비스 검증 디바이스를 더 제안하고, 디바이스는,
VR 장면에서 사용자의 시각 초점이 트리거링하는 타깃 서비스를 검출하도록 구성된 검출 모듈로서, 타깃 서비스는 보안 검증을 요구하는 사용자 서비스인, 검출 모듈;
사전에 구성된 눈 인식 하드웨어를 사용하여 복수의 눈의 생리학적 특징을 사용자로부터 획득하도록 구성된 획득 모듈; 및
복수의 눈의 생리학적 특징 중 하나를 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하고; 그리고
비교 결과에 기초하여 타깃 서비스의 보안 검증이 실패했다고 결정된다면, 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징을 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하도록 구성된 검증 모듈을 포함한다.
본 출원에서, VR 클라이언트가 VR 장면에서 사용자의 시각 초점이 트리거링하는 보안 검증을 요구하는 타깃 서비스를 검출한 후, 사전에 구성된 눈 인식 하드웨어가 사용되어 사용자로부터 복수의 눈의 생리학적 특징을 획득할 수도 있고, 복수의 눈의 생리학적 특징 중 하나가 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교될 수도 있고, 그리고 타깃 서비스의 보안 검증이 성공했는지가 비교 결과에 기초하여 결정될 수도 있고; 비교 결과에 기초하여 타깃 서비스의 보안 검증이 실패했다고 결정된다면, 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징이 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교될 수도 있고, 그리고 타깃 서비스의 보안 검증이 성공했는지가 비교 결과에 기초하여 다시 결정될 수도 있다. 따라서, 사용자가 VR 장면에서 시각 초점을 통해 보안 검증을 요구하는 타깃 서비스를 트리거링할 때, VR 단말기에 구성된 눈 인식 하드웨어가 사용되어 사용자로부터 복수의 눈의 생리학적 특징을 획득할 수 있고, 복수의 눈의 생리학적 특징이 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 각각 매칭되고, 그리고 타깃 서비스의 보안 검증이 VR 장면에서 신속하게 완료될 수도 있어서, VR 장면에서 사용자가 실행하는 서비스의 보안을 보장하고, 그리고 서비스 보안 검증의 상호작용 복잡성을 감소시킨다. 동시에, 복수의 상호 보완적인 눈의 생리학적 특징은 획득된 눈의 생리학적 특징의 왜곡이 유발하는 보안 검증 실패의 확률을 최소화할 수 있고, 그리고 이어서 눈의 생리학적 특징에 기초하여 서비스 보안 검증의 정확성을 개선시킬 수 있다.
도 1은 본 출원의 실시형태에 따른, VR 장면-기반 서비스 검증 방법의 흐름도;
도 2는 본 출원의 실시형태에 따른, VR 장면-기반 서비스 검증 방법의 논리 블록도;
도 3은 본 출원의 실시형태에 따른, VR 장면-기반 서비스 검증 디바이스를 포함하는 VR 단말기의 하드웨어 구조도.
본 출원은 사용자가, VR 단말기를 착용하여 몰입 경험을 즐기는 동안, 직관적인 상호작용 모드, 예컨대, 시각 초점 제어를 사용하여, 보안 검증을 요구하는 타깃 서비스를 신속하게 트리거링하는 기술적 해결책을 제공하는 것에 관한 것이다. 사용자의 복수의 상호 보완적인 눈의 생리학적 특징은 VR 클라이언트에 구성되는 눈 인식 하드웨어에 의해 획득되고, 그리고 타깃 서비스의 보안은 VR 장면에서 신속하게 검증된다.
VR 클라이언트가 VR 장면에서 사용자의 시각 초점에 의해 트리거링되는 보안 검증을 요구하는 타깃 서비스를 검출한 후, 사전에 구성된 눈 인식 하드웨어가 사용자로부터 복수의 눈의 생리학적 특징을 획득하도록 사용되고, 복수의 눈의 생리학적 특징 중 하나의 특징이 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교되고, 그리고 타깃 서비스의 보안 검증이 성공적인지가 비교 결과에 기초하여 결정되고; 비교 결과에 기초하여 타깃 서비스의 보안 검증이 실패했다고 결정된다면, 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징이 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교되고, 그리고 타깃 서비스의 보안 검증이 성공했는지가 비교 결과에 기초하여 다시 결정된다. 따라서, 사용자가 VR 장면에서 시각 초점을 통해 보안 검증을 요구하는 타깃 서비스를 트리거링할 때, VR 단말기에 구성되는 눈 인식 하드웨어가 사용자로부터 복수의 눈의 생리학적 특징을 획득하도록 사용될 수 있고, 복수의 눈의 생리학적 특징이 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 각각 매칭되고, 그리고 타깃 서비스의 보안 검증이 VR 장면에서 신속하게 완료되어, VR 장면에서 사용자가 실행하는 서비스의 보안을 보장하고, 그리고 서비스 보안 검증의 상호작용 복잡성을 감소시킨다. 동시에, 복수의 상호 보완적인 눈의 생리학적 특징은 획득된 눈의 생리학적 특징의 왜곡이 유발하는 보안 검증 실패의 확률을 최소화할 수 있고, 그리고 이어서 눈의 생리학적 특징에 기초하여 서비스 보안 검증의 정확성을 개선시킬 수 있다.
예를 들어, 본 출원의 기술적 해결책이 VR 장면 내 빠른 지불 장면에 적용될 때, 사용자는 직관적인 상호작용 모드인 안구를 회전시킴으로써 VR 장면에서 시각 초점의 위치를 제어하여 빠른 지불 서비스를 트리거링할 수 있고; 사용자가 VR 장면에서 빠른 지불 서비스를 트리거링한 후, VR 클라이언트가 VR 단말기에 구성되는 눈 인식 하드웨어를 통해 사용자의 복수의 상호 보완적인 눈의 생리학적 특징(예를 들어, 안문 특징 + 홍채 특징)을 획득할 수 있고, 복수의 획득된 눈의 생리학적 특징을 사용자에 의해 보존되는 사전에 저장된 눈의 생리학적 특징 샘플과 비교할 수 있고, 그리고 지불 서비스를 위한 보안 검증을 신속하게 완료할 수 있어서, 사용자가 더 이상 지불 서비스의 보안을 검증하도록 VR 장면에서 복잡한 상호작용 모드에 의해 지불 패스워드를 입력할 필요가 없고, 그리고 지불 서비스를 트리거링하고 그리고 지불 서비스의 보안을 검증하기 위한 사용자의 복잡성이 감소될 수 있고 반면에 지불 보안이 보장된다. 동시에, 복수의 상호 보완적인 눈의 생리학적 특징은 또한 눈의 생리학적 특징에 기초하여 서비스 보안 검증의 정확성을 개선시킬 수 있다.
이 기술적 해결책은 특정한 실시형태 및 특정한 적용 장면을 참조하여 아래에 설명된다.
도 1은 VR 클라이언트에 적용 가능한, 본 출원의 실시형태가 제공하는 VR 장면-기반 서비스 검증 방법을 도시한다. 도 1을 참조하면, 이 방법은 다음의 단계를 포함한다:
단계(101), VR 장면에서 사용자의 시각 초점이 트리거링하는 타깃 서비스를 검출(타깃 서비스는 보안 검증을 요구하는 사용자 서비스임);
단계(102), 사전에 구성된 눈 인식 하드웨어를 사용하여 사용자로부터 복수의 눈의 생리학적 특징을 획득; 및
단계(103), 복수의 눈의 생리학적 특징 중 하나의 특징을 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하고; 타깃 서비스의 보안 검증이 실패했다고 결정된다면, 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징을 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정.
VR 클라이언트는 사용자에게 3차원 몰입 경험을 제공하기 위해 VR 기술에 기초하여 개발된 클라이언트 소프트웨어, 예를 들어, VR-기반 앱과 관련된다. VR 클라이언트는 개발업자가 개발한 VR 장면 모델을 VR 클라이언트와 연결된 VR 단말기를 통해 사용자에게 출력하여, VR 단말기를 착용한 사용자가 VR에서 3차원 몰입 경험을 얻는다.
타깃 서비스는 VR 장면에서 사용자가 실행하고 그리고 보안 검증을 요구하는 사용자 서비스일 수도 있고, VR 장면에서 사용자가 개시시키고 그리고 보안 검증을 요구하는 로컬 태스크 또는 온라인 태스크를 포함한다.
예를 들어, 실제 적용에서, 타깃 서비스는 특정한 구체적인 VR 장면에서 빠른 지불 서비스, 예를 들어, VR 쇼핑에서 주문서 지불, VR 생방송에서 팁 지불, VR 게임에서 잔고 충전, VR 비디오에서 주문형 비디오 시스템(video-on-demand) 지불, 또는 빠른 지불 서비스 이외의 보안 검증을 요구하는 다른 로컬 서비스, 예를 들어, 사용자의 VR 단말기 잠금 해제 서비스일 수도 있다.
본 출원의 기술적 해결책은 4개의 단계를 통해 아래에 상세히 설명된다: VR 장면 모델 생성, 타깃 서비스의 트리거링, 타깃 서비스의 보안 검증, 및 타깃 서비스의 실행.
1) VR 장면 모델 생성
이 실시형태에서, 개발업자는 특정한 모델링 툴을 사용하여 VR 장면 모델을 생성할 수도 있다. 모델링 툴은 특히 이 실시형태에서 제한되지 않는다. 예를 들어, 개발업자는 VR 장면 모델을 유명한 모델링 툴, 예컨대, 유니티(Unity), 3dsMax, 포토샵(Photoshop) 등을 사용하여 생성할 수도 있다.
개발업자가 모델링 툴을 사용하여 VR 장면 모델을 생성할 때, VR 장면 모델 및 VR 장면의 질감 맵핑은 실생활에서의 실제 장면으로부터 도출될 수도 있다. 예를 들어, 직물 질감 맵, 및 실제 장면의 평면 모델이 사전에 카메라에 의해 획득될 수도 있고, 이어서 모델링 툴, 예컨대, 포토샵 또는 3dmax가 사용될 수도 있어서 질감을 처리하고 그리고 실제 장면의 3차원(3D) 모델을 구성한다. 질감 및 3D 모델이 유니티3D 플랫폼(unity3D platform: U3D)에 넣어지고, 이미지가 U3D 플랫폼에서, 음향 효과, 그래픽 인터페이스, 플러그-인, 조명 등과 함께 렌더링된다(rendered). 그래서 대화형 특징이 구현되고, 그리고 VR 장면 모델의 모델링이 최종적으로 완료된다.
이 실시형태에서, VR 장면 모델 이외에, 개발업자가 또한 VR 장면 모델에서 모델링 툴을 사용하여 타깃 서비스에 대응하는 2D 또는 3D 서비스 인터페이스를 생성해야 해서 사용자가 VR 장면에서 타깃 서비스를 실행할 수 있다.
예를 들어, 개시된 실시형태에서, 서비스 인터페이스는 모델링 툴을 사용하여 생성되는 빠른 지불 인터페이스(예를 들어, 가상의 체크아웃 인터페이스)일 수도 있다. 사용자가 특정한 상호작용 작동(예를 들어, 작동 초점을 지불 인터페이스에 배치시킴)을 통해 지불 인터페이스와 상호작용할 수도 있어서 VR 장면에서 빠른 지불을 완료한다.
2) 타깃 서비스의 트리거링
이 실시형태에서, 개발업자가 서비스 인터페이스 및 VR 장면 모델의 모델링을 완료한 후, VR 클라이언트는 VR 장면 모델 및 서비스 인터페이스를 VR 클라이언트와 연결된 VR 단말기(예를 들어, VR 헬멧)를 통해 사용자에게 출력할 수도 있다.
디폴트에 의해, VR 클라이언트는 오직 VR 장면 모델을 사용자에게 출력할 수도 있다는 것에 유의해야 한다. VR 장면에 몰입하는 동안, 사용자가 VR 클라이언트를 트리거링하여 VR 클라이언트와 상호작용함으로써 타깃 서비스를 실행시킬 수도 있고, 그리고 VR 클라이언트가 VR 장면에서 서비스 인터페이스를 출력한다.
본 출원에서, 사용자가 타깃 서비스를 더 직관적인 상호작용 모드로 신속하게 트리거링할 수도 있는 것을 보장하기 위해서, 시각 초점 제어 방식이 VR 클라이언트에 도입될 수도 있다. VR 단말기를 착용하여 몰입 경험을 즐기는 동안, 사용자는 안구를 회전시킴으로써 VR 장면에서 시각 초점의 위치를 제어할 수도 있고, 이는 빠른 지불 서비스를 트리거링하는 더 직관적인 상호작용 모드이다. 개시된 실시형태에서, VR 클라이언트는 눈 추적 하드웨어 및 대응하는 눈 추적 알고리즘을 포함할 수도 있다. 사용자가 VR 단말기를 착용하여 몰입 경험을 즐기는 동안, 눈 추적이 눈 추적 하드웨어를 사용하여 그리고 수반된 눈 추적 알고리즘을 통해 사용자에 대해 실행될 수 있고, 이어서 VR 장면에서 사용자의 시각 초점이 눈 추적의 결과에 기초하여 결정되고, 그리고 대응하는 프롬프트가 VR 장면에서 시각 초점에 대응하는 위치에서 사용자에게 출력된다.
눈 추적 하드웨어는 구체적으로 사용자로부터 눈의 생리학적 특징을 획득하기 위한 시각 모듈을 포함할 수도 있다. 실시형태에서, 시각 모듈은 구체적으로 카메라, 및 사용자로부터 눈의 생리학적 특징을 획득할 때 광 보상을 위해 카메라와 매칭되는 LED 광원을 포함할 수도 있다.
예를 들어, VR 클라이언트가 사용자에 대한 눈 추적을 실시할 때, 시각 모듈은 먼저, 사용자의 눈의 이미지를 캡처하고, 눈 추적 알고리즘에 기초하여 사용자의 눈을 사전에 배치하고, 그리고 사용자의 눈을 이미지에 위치시키도록 사용될 수도 있다. 이어서 사용자의 안구의 정확한 위치가 사용자의 특정한 눈의 생리학적 특징에 기초하여 결정된다(예를 들어, 사용자의 안구의 정확한 위치는 사용자의 안문 특징 또는 홍채 특징에 기초하여 결정된다).
사용자의 안구의 정확한 위치 설정 후, 사용자의 시야의 방향은 대응하는 알고리즘에 기초하여 더 계산될 수도 있다. VR 단말기의 스크린에서 사용자의 시각 초점의 맵핑 위치 좌표가 사용자의 시야의 방향에 기초하여 계산되고, 이어서 VR 단말기의 스크린에서 시각 초점의 맵핑 위치 좌표가 VR 단말기의 스크린의 좌표계와 VR 장면 모델의 좌표계 간의 변환 관계에 기초하여 VR 장면 모델에 대응하는 맵핑 위치 좌표로 변환되고, 그리고 변환된 맵핑 위치 좌표가 VR 장면에서 사용자의 시각 초점이다.
시각 모듈 내 카메라의 유형은 일반적으로 사용자의 안구를 정확하게 배치시키도록 눈 추적 알고리즘이 사용하는 눈의 생리학적 특징의 유형에 의존적임에 유의해야 한다. 예를 들어, 홍채 특징이 사용자의 안구를 정확하게 배치시키도록 눈 추적 알고리즘에 의해 사용될 때, 홍채 획득이 적외선 조명 조건하에서 완료되기 때문에, 시각 모듈 내 카메라는 적외선 카메라일 수도 있고, 그리고 LED 램프는 적외선 LED 램프일 수도 있다.
유사하게, 안문 특징이 사용자의 안구를 정확하게 배치시키도록 눈 추적 알고리즘에 의해 사용될 때, 안문 획득이 규칙적인 조명 환경에서 완료되기 때문에, 시각 모듈 내 카메라는 규칙적인 RGB 카메라일 수도 있고, 그리고 LED 램프는 규칙적인 LED 램프일 수도 있다.
이 실시형태에서, 눈 추적이 인간의 실제 시각적 경험을 완전히 시뮬레이션하기 때문에, VR 장면에서 사용자의 시각 초점이 위에서 설명된 눈 추적 과정에 의해 최종적으로 결정될 때, VR 장면 모델에서 이미지 렌더링 비용을 사용자의 시각적 경험에 영향을 주는 일없이 가능한 한 많이 감소시키기 위해서, VR 장면에서 상이한 영역의 렌더링 범위가 사용자의 시각 초점의 결정된 위치 좌표에 기초하여 상이하게 구성될 수도 있다.
구체적으로, VR 장면에서 사용자의 시각 초점이 결정된 후, VR 클라이언트는 VR 장면에서 시각 초점에 중심을 둔 미리 설정된 크기의 타깃 가시 영역을 식별할 수도 있고, 미리 설정된 크기는 실제 요구에 기초하여 맞춤 설정된다. 예를 들어, 타깃 가시 영역은 중심으로서 시각 초점 그리고 반경으로서 미리 설정된 크기를 가진 원형 영역일 수도 있다.
타깃 가시 영역이 결정된 후, VR 클라이언트는 비교적 높은 제1 렌더링 정밀도(rendering precision)(예를 들어, 100% 렌더링)로 타깃 가시 영역에 대응하는 시각 이미지를 시각적으로 렌더링할 수도 있다. 동시에, VR 클라이언트는 제1 렌더링 정밀도보다 더 낮은 제2 렌더링 정밀도로 타깃 가시 영역 외부의 다른 가시 영역의 시각 이미지를 시각적으로 렌더링할 수도 있다.
부가적으로, VR 장면 모델에서 이미지 렌더링 비용을 더 감소시키기 위해서, 타깃 가시 영역 외부의 다른 가시 영역은 변화도가 감소되는 정밀도로 렌더링될 수도 있다. 실시형태에서, VR 클라이언트는 시각 초점에 대한 거리에 따라 가시 영역을 복수의 하위영역으로 더 분할할 수도 있고, 그리고 각각의 하위영역과 시각 초점 사이의 거리에 기초하여 상이한 렌더링 정밀도를 설정할 수도 있다. 구체적으로, 각각의 분할된 하위영역의 렌더링 정밀도는 시각 초점에 대한 거리가 증가될 때 점진적으로 감소될 수도 있다. 즉, 시각 초점으로부터 분할된 하위영역이 더 이격될수록, 분할된 하위영역의 렌더링 정밀도가 더 낮아진다.
이 실시형태에서, VR 장면 모델은 타깃 서비스를 트리거링하기 위해 미리 설정된 가상 컴포넌트를 제공할 수도 있다. VR 장면에서 몰입 경험을 즐기는 동안, 사용자는 가상 컴포넌트가 위치되는 영역에 있도록 시각 초점의 이동을 제어함으로써, 그리고 타깃 서비스를 트리거링하도록 체류 타임아웃 방식에 의해 가상 컴포넌트를 선택함으로써 타깃 서비스를 실행시킬 수도 있다.
하나의 실시형태에서, VR 장면에서 사용자의 시각 초점을 결정하도록 사용자에 관한 눈 추적을 실시한 후, VR 클라이언트는 시각 초점의 이동을 더 추적할 수도 있고 그리고 시각 초점이 가상 컴포넌트가 위치되는 영역에 있는지를 결정할 수도 있다. 시각 초점이 가상 컴포넌트가 위치되는 영역에 있는 동안, VR 클라이언트는 가상 컴포넌트를 작동 가능한 상태로 전환(예를 들어, 가상 컴포넌트를 하이라이트(highlight))할 수도 있고, 시각 초점의 체류 시간을 계수하기 위한 타이머를 작동시킬 수도 있고, 그리고 체류 시간이 미리 설정된 문턱값(미리 설정된 문턱값은 필요조건에 기초하여 맞춤 설정 가능함)에 도달하는지를 결정할 수도 있다. 체류 시간이 미리 설정된 문턱값에 도달한다면, 가상 컴포넌트는 타깃 서비스를 트리거링하도록 선택될 수도 있다.
예를 들어, VR 장면에서, 가상 컴포넌트는 VR 클라이언트가 제공하는 미리 설정된 가상 버튼일 수도 있고, 그리고 가상 버튼은 타깃 서비스를 트리거링하여 VR 장면에서 실행되도록 사용될 수도 있다. 사용자가, VR 장면에서 몰입 경험을 즐기는 동안, 타깃 서비스를 실행시켜야 할 때, 사용자는 가상 컴포넌트가 위치되는 영역에서 N초(즉, 위의 미리 설정된 문턱값) 동안 있도록 사용자의 안구를 회전시킴으로써 시각 초점의 이동을 제어하여 가상 컴포넌트를 선택해서 VR 장면에서 타깃 서비스를 트리거링할 수도 있다.
분명히, 위에서 설명된 바와 같이 타깃 서비스를 트리거링하도록 시각 초점을 사용하는 것 이외에, 타깃 서비스는 또한 실제 적용에서 다른 형태에 의해 트리거링될 수도 있다. 예를 들어, 사용자가 3차원 제스처 또는 머리 제스처를 통해 가상 컴포넌트와 직접적으로 상호작용(예를 들어, 클릭)하여 가상 컴포넌트를 선택해서 타깃 서비스를 트리거링할 수도 있다. 타깃 서비스가 VR 단말기에 연결되는 제어 디바이스(예를 들어, 핸들, 조이스틱 등)를 사용함으로써 트리거링되어 작동 초점의 이동을 제어하여 가상 컴포넌트를 선택해서 타깃 서비스를 트리거링할 수도 있다. 대안적으로, VR 단말기가 포함하는 음성 인식 모듈을 통해, 타깃 서비스는 음성 명령에 의해 트리거링될 수도 있다. 상세한 구현예는 본 출원에서 생략된다.
3) 타깃 서비스의 보안 검증
이 실시형태에서, 사용자가 VR 장면에서 타깃 서비스를 실행시킬 때 타깃 서비스의 보안 검증을 진척시키기 위해서, 서비스를 개시시키는 사용자의 복수의 눈의 생리학적 특징은 눈의 생리학적 특징을 위한 특정한 획득 알고리즘과 결합하여 VR 단말기에 구성된 눈 인식 하드웨어를 사용하여 획득될 수도 있다. 복수의 눈의 생리학적 특징은 타깃 서비스의 보안 검증을 진척시키도록 서로 보완할 수도 있다.
복수의 눈의 생리학적 특징은 사용자의 안문 특징 및 홍채 특징을 포함할 수도 있다. 눈의 생리학적 특징을 위한 획득 알고리즘은 VR 클라이언트가 미리 설정한 홍채 획득 알고리즘 및 안문 획득 알고리즘을 포함할 수도 있다. 눈 인식 하드웨어는 VR 단말기가 포함하고 그리고 사용자의 눈에 대응하는 렌즈, 안문 특징을 획득하기 위한 시각 모듈, 및 홍채 특징을 획득하기 위한 시각 모듈을 포함할 수도 있다.
안문 특징을 획득하기 위한 시각 모듈은 렌즈와 결합하여 사용되는 RGB 카메라, 및 RGB 카메라의 광 보상을 위해 RGB 카메라와 결합하여 사용되는 LED 광원을 포함할 수도 있다. 홍채 특징을 획득하기 위한 시각 모듈은 렌즈와 결합하여 사용되는 적외선 카메라, 및 적외선 카메라의 광 보상을 위해 적외선 카메라와 결합하여 사용되는 적외선 LED 광원을 포함할 수도 있다. 즉, 본 출원에서, VR 단말기는 안문 특징을 획득하기 위한 RGB 카메라 및 홍채 특징을 획득하기 위한 적외선 카메라를 동시에 포함할 수도 있다(예를 들어, RGB 카메라와 적외선 카메라는 VR 단말기에서 사용자의 눈 중 하나의 눈에 대응하는 위치에 각각 실장될 수도 있음).
VR 단말기에서 가상 모듈의 RGB 카메라 및 적외선 카메라의 특정한 실장 위치는 본 출원에서 특별히 제한되지 않는다. 개시된 실시형태에서, 카메라는 사용자의 눈에 대응하는 렌즈의 외부면에 배치될 수도 있고(즉, 렌즈는 사용자의 눈과 카메라 사이에 위치되도록 보장됨), 사용자의 안구와 마주볼 수도 있고, 그리고 특정한 각도(예를 들어, 60도, 또는 다른 각도)만큼 상향으로 경사질 수도 있다. VR 단말기의 하드웨어 비용을 절약하기 위해서, 동일한 시각 모듈이 눈 추적 하드웨어를 위해 그리고 사용자의 눈의 생리학적 특징을 획득하기 위해 사용될 수도 있다는 것에 유의해야 한다. 예를 들어, 사용자를 위한 눈 추적이 사용자의 안문 특징에 기초할 때, 안문 특징을 획득하기 위한 시각 모듈은 눈 추적을 위해 사용될 수도 있다. 이에 대응하여, 사용자를 위한 눈 추적이 사용자의 홍채 특징에 기초할 때, 홍채 특징을 획득하기 위한 시각 모듈은 눈 추적을 위해 사용될 수도 있다.
또한, VR 단말기에 포함되는 눈 인식 하드웨어 및 눈 추적 하드웨어는 VR 단말기의 하드웨어 아키텍처 내 내부 하드웨어, 또는 외부 하드웨어, 또는 VR 단말기에 연결되는 제3자 모바일 단말기(예를 들어, 스마트 폰) 내 내부 하드웨어일 수도 있고, 이는 본 출원에서 특별히 제한되지 않는 것에 유의해야 한다.
이 실시형태에서, VR 클라이언트가 눈 인식 하드웨어를 사용하여 사용자의 눈의 생리학적 특징을 획득할 때, VR 클라이언트가 사전에 구성된 휘도 검출 하드웨어(예를 들어, 광센서)를 사용할 수도 있어서 VR 단말기의 내부 획득 환경의 휘도를 검출하여 휘도값을 획득하고, 그리고 검출된 휘도값이 미리 설정된 문턱값보다 낮은지를 결정한다. 검출된 휘도값이 미리 설정된 문턱값보다 낮다면, VR 단말기의 내부 획득 환경의 휘도값이 낮고, 이는 획득 정확성에 영향을 줄 수도 있다. 이 경우에, VR 클라이언트가 LED 광원을 즉시 켜서 광으로 카메라를 보상할 수 있다.
복수의 눈의 생리학적 특징이 안문 특징 및 홍채 특징인 예를 사용하여, 사용자의 획득된 안문 특징 및 홍채 특징에 기초하여 사용자가 개시시키는 타깃 서비스에 관한 보안 검증의 과정이 아래에 상술된다.
이 실시형태에서, 초기 단계에서, 사용자가 사용자 자신의 안문 특징 및 홍채 특징을 VR 클라이언트를 통해 사전에 등록할 수도 있어서, 비즈니스 서버에서 사용자의 계정 정보와 사용자의 안문 특징 및 홍채 특징 사이의 묶임 관계를 확립한다.
사용자의 계정 정보는 구체적으로 타깃 서비스를 실행하도록 사용되는 사용자의 서비스 계정을 포함할 수도 있다. 예를 들어, 타깃 서비스가 지불 서비스일 때, 사용자의 계정 정보는 사용자의 지불 계정일 수도 있고, 그리고 사용자는 안문 및 홍채 등록에 의한 사용자의 안문 특징 및 홍채 특징과 지불 계정을 묶을 수도 있다.
안문 및 홍채 등록을 완료하자마자, 사용자는 개시된 타깃 서비스에서 빠른 보안 검증을 수행하도록 사용자 자신의 안문 특징 및 홍채 특징을 VR 장면에서 나중에 사용할 수도 있고, 그리고 더 이상 타깃 서비스를 검증하도록 정보, 예컨대, 서비스 패스워드를 입력하지 않아도 된다.
개시된 실시형태에서, 사용자가 안문 및 홍채를 등록할 때, 사용자가 먼저 계정 정보를 사용함으로써 VR 클라이언트에 로그인할 수도 있고, 그리고 이어서 VR 클라이언트가 출력한 VR 장면의 프롬프트하에서 안문 및 홍채 획득을 완료할 수도 있다. VR 클라이언트는 획득된 안문 특징, 홍채 특징 및 사용자가 사용하는 로그인 계정을 등록 메시지의 형태로 비즈니스 서버로 전송할 수도 있다. VR 클라이언트가 전송한 등록 메시지를 수신하자마자, 비즈니스 서버는 안문 특징 샘플 및 홍채 특징 샘플로서 각각 기능하는, 사용자의 안문 특징 및 홍채 특징을 사용자의 로그인 계정과 묶을 수도 있고 그리고 맵핑 관계를 확립할 수도 있고, 그리고 이어서 확립된 맵핑 관계를 미리 설정된 특징 데이터베이스에 저장할 수도 있다.
개시된 실시형태에서, 안문 및 홍채 등록 과정의 보안을 개선시키기 위해서, VR 클라이언트는 등록 메시지를 비즈니스 서버로 전송하기 전에 레지스터를 위한 식별 검증을 실시할 수도 있다.
예를 들어, 사용자가 프롬프트되어 사용자를 식별할 수 있는 로그인 패스워드 또는 다른 정보를 제공하여 현재의 레지스터의 신원을 검증할 수도 있다. 성공적인 검증 시, VR 클라이언트가 등록 메시지를 비즈니스 서버로 전송하여 안문 및 홍채 등록을 완료할 수도 있다.
이 방식으로, 승인되지 않은 사용자가 승인된 사용자의 로그인 계정과의 묶임을 완료하도록 사용자 자신의 안문 또는 홍채 특징을 사용하는 것으로부터 방지될 수도 있어서, 안문 및 홍채 등록의 보안을 개선시킨다.
사용자가 안문 특징 및 홍채 특징의 등록을 완료한 후, 사용자가 VR 장면에서 시각 초점을 제어함으로써 타깃 서비스를 트리거링할 때, VR 클라이언트는 등록된 사용자의 안문 특징 및 홍채 특징에 기초하여 타깃 서비스에 관한 보안 검증 과정을 시작할 수도 있다.
종래의 보안 검증 과정은 보통 단 하나의 눈의 생리학적 특징에 의존하여 사용자 신원을 검증한다. 이 실시형태에서, 눈의 생리학적 특징에 기초하여 사용자 신원의 보안 검증의 정확성을 더 개선시키기 위해서, 본 출원은 사용자 신원 검증을 위해 사용자의 복수의 눈의 생리학적 특징을 고려하는 기술적 해결책을 제안한다.
복수의 눈의 생리학적 특징이 안문 특징 및 홍채 특징인 실시예에서, 안문 특징 및 홍채 특징은, 안문 특징 및 홍채 특징이 사용자 신원 보안 검증에 관한 상호 보완적인 효과를 달성할 수 있기 때문에 동시에 사용될 수도 있다.
한편으로는, 사용자에 관한 안문 인식을 위해 안문 특징을 사용하는 것은, 사용자가 칼라 콘택트 렌즈를 착용하거나 또는 눈 질병, 예컨대, 백내장을 겪고 있는 결과인 홍채 특징의 왜곡에 기인하여 사용자 신원 검증 결과가 부정확하게 되는 문제를 방지할 수 있다. 그러나, 안문 특징에 기초한 사용자에 관한 안문 인식은, 안문 특징 획득이 충분한 가시광선을 요구하지만, VR 단말기 내부의 조명 조건이 제어하기 어렵고, 그리고 광 보상 모듈이 추가될지라도, 안문 특징의 획득을 위한 광 조건을 충족하는 것이 완전히 보장될 수 없다는 결점을 갖는다.
다른 한편으로는, 안문 특징이 사용자에 관한 홍채 인식을 위해 사용될 때, 홍채 특징의 획득이 적외선에 기초하고 따라서 안문 특징 획득을 위한 조건으로서 엄격한 조명 조건을 요구하지 않는다. 홍채 특징은 또한 안문 특징보다 훨씬 더 높은 생물학적 고유성을 갖는다. 그러나, 홍채-기반 인식은 사용자가 칼라 콘택트 렌즈를 착용하거나 또는 눈 질병, 예컨대, 백내장을 겪는다면 홍채 특징이 쉽게 왜곡될 수도 있다는 결점을 가져서, 부정확한 사용자 신원 검증 결과를 유발한다.
따라서, 홍채 인식과 안문 인식을 결합하는 것은 상호 보완적인 효과를 달성할 수 있어서, 사용자 신원 검증의 정확성을 상당히 개선시킨다.
이 실시형태에서, VR 단말기를 착용한 사용자가 VR 장면에서 타깃 서비스를 성공적으로 트리거링할 때, VR 클라이언트가 포함된 눈 인식 하드웨어를 사용하여 사용자의 안문 특징 및 홍채 특징을 획득할 수도 있다.
개시된 실시형태에서, VR 클라이언트는 사용자의 안문 특징 및 홍채 특징을 획득하기 전에 VR 단말기를 착용한 사용자에 대한 수명 검출을 실시할 수도 있다.
이 경우에, VR 단말기는 VR 단말기를 사용하는 실제 사용자가 있는지를 결정하도록 안문 특징 및 홍채 특징을 획득하기 전에 VR 단말기를 착용한 사용자에 관한 수명 검출을 실시할 수도 있다. 이 방식으로, 사용자의 가짜 안문 특징 및 홍채 특징을 사용하여(예를 들어, 눈의 그림을 사용하여) 보안 검증을 우회하려는 시도가 효과적으로 방지될 수 있다.
이 실시형태에서, VR 클라이언트가 VR 단말기를 착용한 사용자에 관한 수명 검출을 실시하도록 사용할 수 있는 방법은 제한되지 않는다. 예를 들어, 사용자에 관한 수명 검출은 눈 깜빡임 인식, 심박동 인식 등에 의해 완료될 수도 있다.
사용자에 관한 수명 검출이 완료된 후, VR 클라이언트가 VR 장면에서 사용자의 관점에서 사용자의 눈의 생리학적 특징을 획득하는 프롬프트를 출력하여, 사용자에게 타깃 서비스의 보안 검증을 위한 눈의 생리학적 특징(예를 들어, 안문 특징)의 획득을 통지할 수도 있다.
예를 들어, 타깃 서비스가 VR 장면-기반 빠른 지불 서비스일 때, VR 클라이언트는 VR 장면에서 사용자의 관점에서 "지불 검증의 완료를 위하여 안문과 홍채를 스캔하십시오"의 문자 프롬프트 메시지를 출력할 수도 있다.
이 실시형태에서, VR 단말기가 안문 특징 및 홍채 특징을 사용자로부터 눈 인식 하드웨어를 통해 성공적으로 획득할 때, VR 단말기가 획득된 안문 특징에 기초하여 비즈니스 서버와 통신하여 타깃 서비스의 보안 검증을 완료할 수도 있다.
개시된 실시형태에서, 비즈니스 서버는 안문 및 홍채 인식 서비스를 작동시킬 수도 있고, 그리고 인식 인터페이스를 VR 클라이언트에게 제공할 수도 있다.
예를 들어, 비즈니스 서버가 서버 클러스터에 기초하여 구축된 비즈니스 플랫폼일 때, 안문 및 홍채 인식 서비스를 VR 클라이언트에게 제공하기 위한 인식 서버가 제공될 수도 있고, 그리고 액세스 인터페이스가 VR 클라이언트에게 제공될 수도 있다.
사용자의 안문 특징 및 홍채 특징을 성공적으로 획득한 후, VR 클라이언트는 VR 클라이언트에 로그인하도록 사용자가 현재 사용하는 계정 정보 및 사용자의 획득된 안문 특징 및 홍채 특징에 기초하여 안문 검증 요청을 구성할 수도 있고, 이어서 비즈니스 서버가 제공하는 안문 인식 인터페이스에 액세스할 수도 있고, 그리고 안문 인식 요청을 비즈니스 서버에 제출할 수도 있다.
VR 클라이언트로부터 안문 검증 요청을 수신하자마자, 비즈니스 서버가 안문 검증 요청을 분석하여 요청 내 사용자의 안문 특징, 홍채 특징 및 계정 정보를 획득할 수도 있고, 이어서 계정 정보에 기초하여, 특징 데이터베이스에서 사용자가 등록한 안문 특징 샘플 및 홍채 특징 샘플을 검색할 수도 있고, 그리고 안문 특징 및 홍채 특징을 사용자가 등록하고 그리고 특징 데이터베이스에 저장된 안문 특징 샘플 및 홍채 특징 샘플과 비교할 수도 있다.
이 실시형태에서, 비즈니스 서버가 디폴트에 의해 사용자의 안문 특징 및 홍채 특징 중 단 하나를 획득하여 특징 데이터베이스 내 대응하는 특징 샘플과 비교할 수도 있고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공적인지를 결정할 수도 있다.
실제 적용에서, 디폴트에 의해 비즈니스 서버가 사용하는 눈의 생리학적 특징의 유형 및 비교 순서는 특별히 제한되지 않는다. 디폴트에 의해, 비즈니스 서버는 오직 안문 특징을 특징 데이터베이스 내 사용자가 등록한 안문 특징 샘플과 비교할 수도 있거나, 또는 오직 홍채 특징을 특징 데이터베이스 내 사용자가 등록한 홍채 특징 샘플과 비교할 수도 있다.
비즈니스 서버가 사용자의 안문 특징 및 홍채 특징 중 하나를 특징 데이터베이스 내 대응하는 특징 샘플과 비교한 후, 비즈니스 서버는 눈의 생리학적 특징 중 하나가 사용자가 등록한 대응하는 눈의 생리학적 특징 샘플과 완전히 동일하다면 타깃 서비스의 보안 검증이 성공적이었다고 결정할 수도 있고 이어서 검증 결과를 VR 클라이언트에게 복귀시킬 수도 있다.
대조적으로, 비즈니스 서버가 사용자의 안문 특징 및 홍채 특징 중 하나를 특징 데이터베이스 내 대응하는 특징 샘플과 비교한 후, 눈의 생리학적 특징 중 하나가 사용자가 등록한 대응하는 눈의 생리학적 특징 샘플과 상이하다면(획득된 눈의 생리학적 특징의 왜곡에 의해 유발될 수도 있음) 타깃 서비스의 보안 검증이 실패했다고 결정할 수도 있다. 이 경우에, 비즈니스 서버는 사용자의 안문 특징 및 홍채 특징의 다른 눈의 생리학적 특징을 계속해서 사용하여 특징 데이터베이스 내 대응하는 특징 샘플과 비교할 수도 있고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공적이었는지를 다시 결정할 수도 있다.
비교 후에, 다른 눈의 생리학적 특징이 사용자가 등록한 대응하는 눈의 생리학적 특징 샘플과 동일하다고 결정된다면, 비즈니스 서버는 타깃 서비스의 보안 검증이 성공적이었다고 결정할 수도 있고, 그리고 이어서 대응하는 검증 결과를 VR 클라이언트에게 복귀시킬 수도 있다. 그렇지 않으면, 다른 눈의 생리학적 특징이 사용자가 등록한 대응하는 눈의 생리학적 특징 샘플과 상이하다면, 비즈니스 서버는 타깃 서비스의 보안 검증이 실패했다고 결정할 수도 있고, 그리고 또한 대응하는 검증 결과를 VR 클라이언트에게 복귀시킬 수도 있다.
VR 클라이언트에게 비즈니스 서버가 복귀시키는 검증 결과가 구체적으로 불린 복귀값(Boolean return value)(즉, 거짓 및 참)일 수도 있다는 것에 유의해야 한다. 예를 들어, 보안 검증이 성공적이었을 때, 비즈니스 서버는 참값을 VR 클라이언트에게 복귀시킬 수도 있고; 그렇지 않으면, 보안 검증이 실패했을 때, 비즈니스 서버는 거짓값을 VR 클라이언트에게 복귀시킬 수도 있다.
개시된 실시형태에서, 오로지 타깃 서비스의 보안 검증이 성공적이었는지를 결정하도록 복수의 획득된 눈의 생리학적 특징과 사용자가 등록한 대응하는 눈의 생리학적 특징 샘플의 비교 결과에 따르는 것 외에, 비교 결과는 또한 향상된 보안 필요조건을 가진 적용에서 보안 검증의 적어도 부분적인 참조로서 사용될 수도 있다.
이 실시형태에서, "적어도 부분적인 참조"는 보안 검증이 성공했는지를 결정할 때, 비교 결과가 타깃 서비스의 보안 검증이 성공적이었는지를 결정하기 위한 유일한 요인 또는 복수의 요인 중 하나일 수 있다는 것을 의미한다.
하나의 경우에서, 비교 결과가 타깃 서비스의 보안 검증이 성공적이었는지를 결정하기 위한 유일한 요인으로서 사용된다면, 타깃 서비스의 보안 검증은 비교 결과가 참이라면(즉, 2개가 동일함) 성공적인 것으로 결정될 수도 있다.
또 다른 경우에서, 비교 결과가 타깃 서비스의 보안 검증이 성공적이었는지를 결정하기 위한 복수의 요인 중 하나로서 사용되고, 그리고 비교 결과가 참이라면, 다른 요인에 기초한 타깃 서비스의 추가의 보안 검증이 여전히 필요할 수도 있다. 보안 검증은 추가의 보안 검증을 통과한다면 성공적인 것으로 결정될 수도 있다.
타깃 서비스에 관한 추가의 보안 검증의 특정한 방법은 특별히 이 실시형태에서 제한되지 않고, 그리고 실제 서비스 필요조건에 기초하여 당업자에 의해 맞춤 설정될 수 있다.
예를 들어, 타깃 서비스가 VR 장면에서 빠른 지불 서비스라면, 사용자의 획득된 안문 특징이 사용자가 등록한 안문 샘플과 완전히 동일할 때, VR 클라이언트는 또한 보안 위험의 임의의 다른 유형이 VR 클라이언트에 현재 로그인한 사용자와 연관되는지(예를 들어, 사용자가 사용하는 로그인 계정이 VR 클라이언트가 흔히 사용하는 묶인 계정인지, 또는 VR 클라이언트가 위치되는 VR 단말기가 사용자가 자주 사용하는 VR 단말기인지 등)를 고려할 수도 있다. 이어서 VR 클라이언트는 사용자가 사용자 신원 또는 VR 단말기의 승인을 신속하게 검증하기 위해 정보, 예컨대, 패스워드 또는 검증 코드를 입력하게 요청할 수도 있어서, 빠른 지불 서비스에 관한 추가의 보안 검증을 실행시킨다. 보안 검증을 성공한 후, VR 클라이언트는 빠른 지불 서비스가 보안 검증을 통과했는지를 결정할 수도 있고, 그리고 빠른 지불을 성공적으로 완료할 수도 있다.
전술한 실시형태에서, 사용자의 획득된 안문 특징 및 홍채 특징이 비즈니스 서버로 업데이트될 수도 있어서 안문 특징 및 홍채 특징에 기초하여 사용자가 개시하는 타깃 서비스에 관한 보안 검증을 수행하고, 타깃 서비스의 보안 검증이 또한 실제 적용에서 VR 클라이언트에 의해 국부적으로 완료될 수 있다는 것에 유의해야 한다.
이 경우에, 사용자는 안문 특징 및 홍채 특징을 VR 클라이언트에 국부적으로 남길 수도 있다. 안문 특징 및 홍채 특징을 사용자로부터 수신하자마자, VR 클라이언트는 안문 특징 및 홍채 특징을 사용자의 계정 정보와 국부적으로 묶을 수도 있다.
사용자가 VR 장면에서 타깃 서비스를 트리거링한 후, VR 클라이언트는 사용자의 안문 특징 및 홍채 특징을 획득할 수도 있고, 그리고 타깃 서비스의 보안 검증이 비즈니스 서버가 실시하는 과정과 동일한 과정을 사용하여 성공적이었는지를 검증할 수도 있고, 이는 여기서 반복되지 않는다.
4) 타깃 서비스의 실행
이 실시형태에서, 타깃 서비스의 보안 검증이 성공한 후, VR 클라이언트는 타깃 서비스를 실행시킬 수도 있다.
타깃 서비스가 온라인 서비스일 때, VR 클라이언트는 비즈니스 서버와의 추가의 비즈니스 상호작용을 통해 서비스를 실행시킬 수도 있다.
이 경우에, VR 클라이언트는 비즈니스 서버가 복귀시키는 타깃 서비스의 보안 검증 결과를 수신할 수도 있다. 보안 검증이 성공했다면(예를 들어, 참값이 복귀됨), VR 클라이언트는 VR 장면에서 타깃 서비스에 대응하는 서비스 인터페이스를 제공할 수도 있고 그리고 서비스 인터페이스를 통해 타깃 서비스와 관련된 서비스 매개변수를 획득함으로써 서비스 요청을 구성할 수도 있다. VR 클라이언트에게 비즈니스 서버가 제공하는 비즈니스 액세스 인터페이스를 통해, VR 클라이언트는 서비스 요청을 비즈니스 서버에 제출할 수도 있고, 그리고 비즈니스 서버와 더 상호작용하여 타깃 서비스를 실행시킬 수도 있다.
예를 들어, 타깃 서비스가 VR 장면에서 빠른 지불 서비스일 때, VR 클라이언트는 지불 인터페이스를 출력할 수도 있고, 지불 서비스와 관련된 서비스 매개변수, 예컨대, 사용자 정보, 주문 정보 및 가격 정보를 지불 인터페이스를 통해 획득할 수도 있고, 이어서 대응하는 지불 요청을 구성할 수도 있다. 이어서 VR 클라이언트는 비즈니스 서버가 지불 요청을 처리하여 지불 과정을 완료하도록 지불 요청을 비즈니스 서버로 전송할 수도 있다.
분명히, 타깃 서비스가 VR 클라이언트의 로컬 서비스라면, 서비스는 로컬 서비스 보안 검증이 성공적이라는 결과에 응답하여 국부적으로 실행될 수도 있다.
예를 들어, 타깃 서비스가 VR 단말기를 위한 로컬 잠금 해제 서비스일 때, VR 단말기에 설치되는 VR 클라이언트가 사용자의 획득된 안문 특징을 사용자가 등록한 안문 특징 샘플과 비교하고 그리고 2개가 완전히 동일하다는 것을 발견한다면, VR 단말기는 바로 잠금 해제될 수도 있다.
사용자가 사용자의 안문 특징 및 홍채 특징을 스캔하도록 VR 단말기의 눈 인식 하드웨어를 사용함으로써 VR 쇼핑 적용에서 빠른 그리고 안전한 지불을 행하는 예에서, 본 출원의 기술적 구현예가 아래에 설명된다. 분명히, 이 예는 단지 예시적이고 그리고 본 출원을 제한하지 않는 것에 유의해야 한다. 실제 적용에서, 본 출원의 기술적 해결책은 또한 다른 유사한 서비스 장면에 적용될 수도 있다.
예를 들어, 안문 또는 홍채 특징을 통해, 사용자는 VR 게임에서 게임 화폐를 신속하게 충전할 수도 있고, VR 생방송에서 팁 지불을 신속하게 전송할 수도 있고, VR 비디오에서 주문형 비디오 시스템 비용을 신속하게 지불할 수도 있거나 또는 VR 단말기를 신속하게 잠금 해제할 수도 있는 등할 수도 있다. 가능한 서비스 장면이 이 실시형태에서 완전히 열거되진 않는다.
이 경우에, 타깃 서비스는 VR 장면에 기초한 빠른 지불 서비스일 수도 있고, VR 클라이언트는 VR 기술(예를 들어, 알리페이의 VR 페이)에 기초하여 개발된 지불 클라이언트일 수도 있고, 그리고 비즈니스 서버는 지불 서버(예를 들어, 서버 클러스터에 기초하여 구성되는 알리페이(Alipay) 플랫폼)일 수도 있다.
초기 상태에서, 사용자는 지불 계정을 사용하여 VR 클라이언트에 로그인할 수도 있고, VR 클라이언트를 통해 안문 특징 및 홍채 특징의 등록을 완료할 수도 있고, 안문 특징 및 홍채 특징을 지불 계정과 묶을 수도 있고, 그리고 묶임 관계를 클라우드 내 지불 서버 내 특징 데이터베이스에 저장할 수도 있다. 특정한 등록 과정이 본 명세서에서 반복되지 않는다. 등록이 완료될 때, 사용자는 VR 장면에서 안문 특징 및 홍채 특징을 통해 빠른 보안 지불을 완료할 수도 있다.
VR 단말기를 착용하여 VR 쇼핑 경험을 즐기는 동안, 사용자는 VR 장면에서 복수의 입수 가능한 상품을 볼 수도 있다. 사용자는 VR 장면에 제공된 물품 목록을 열람할 수도 있고 그리고 구매를 위해 사용자의 선택 상품을 선택할 수도 있다.
사용자가 물품 목록으로부터 사용자의 선택 상품을 선택한 후, VR 장면에서 시각 초점의 위치가 정상적인 상호작용 모드, 예컨대, 안구 회전을 통해 제어될 수도 있어서 N초 동안 VR 장면에서 사전에 제공된 "지불 버튼"의 영역에 걸쳐 있어서 VR 클라이언트를 트리거링하여 상품 지불 과정을 시작한다.
상품 지불 과정이 시작된 후, VR 클라이언트는 먼저 사용자에 관한 수명 검출을 실행할 수도 있다. 성공적인 수명 검출 시, "지불 검증의 완료를 위하여 안문과 홍채를 스캔하십시오"의 프롬프트 메시지가 VR 장면에서 사용자의 관점에서 사용자에게 디스플레이될 수도 있다.
사용자의 안문 및 홍채 획득이 완료된 후, VR 클라이언트가 획득된 안문 특징, 홍채 특징, 및 VR 클라이언트에 로그인하도록 사용자가 사용하는 로그인 계정에 기초하여 검증 요청을 구성할 수도 있고, 그리고 검증 요청을 지불 서버에 제출할 수도 있다. 지불 서버는 사용자의 안문 특징 및 홍채 특징 중 하나를 사용자가 등록하는 대응하는 눈의 생리학적 특징 샘플과 비교할 수도 있다. 비교되는 특징이 동일하다면, 지불 서비스의 보안 검증이 성공적이고, 그리고 지불 서버가 불린 참값을 VR 클라이언트에게 복귀시킬 수도 있다.
비교되는 특징이 상이하다면, 지불 서버는 안문 특징 및 홍채 특징의 다른 눈의 생리학적 특징을 사용자가 등록한 대응하는 눈의 생리학적 특징 샘플과 더 비교할 수도 있다. 이들이 동일하다면, 지불 서비스의 보안 검증이 성공적이고, 그리고 지불 서버가 불린 참값을 VR 클라이언트에게 복귀시킬 수도 있다.
보안 검증이 성공했다는 지불 서버가 복귀시킨 결과를 수신하자마자, VR 클라이언트가 지불 인터페이스를 출력할 수도 있고, 지불 서비스와 관련된 매개변수, 예컨대, 사용자 정보, 주문 정보 및 가격 정보를 지불 인터페이스를 통해 획득할 수도 있고, 이어서 대응하는 지불 요청을 구성할 수도 있고, 그리고 지불 요청을 지불 서버에게 전송할 수도 있다. 지불 서버는 지불 요청을 처리하여 상품에 대한 빠른 지불을 완료할 수도 있다.
실제 적용에서, "검증-없는 소규모 거래"의 지불 과정은 지불 속도를 진척시키도록 도입될 수도 있다. 이 경우에, 사용자가 음성 명령을 통해 선택된 상품에 대한 지불 과정을 트리거링할 때, VR 클라이언트는 지불 금액을 더 체크할 수도 있고, 그리고 지불 금액이 미리 설정된 금액(예를 들어, RMB 200)보다 더 낮은지를 검증할 수도 있다. 지불 금액이 미리 설정된 금액보다 더 낮다면, VR 클라이언트가 지불 요청을 바로 구성할 수도 있고 그리고 지불 요청을 지불 서버로 전송할 수도 있고, 그리고 지불 서버가 지불 요청을 처리하여 상품에 대한 빠른 지불을 완료할 수도 있다. 지불 금액이 미리 설정된 금액보다 더 낮지 않다면, VR 클라이언트는 사용자의 안문 특징 및 홍채 특징을 사용하여 지불 서비스의 보안 검증을 완료할 수도 있다. 상세한 과정은 여기서 반복되지 않는다.
본 출원의 실시형태에서 지불에 수반되는 기법이 예를 들어, 근거리 통신(Near Field Communication: NFC), 와이파이(WIFI), 3G/4G/5G, 포스 카드 스와이핑(POS card swiping) 기술, 2차원 코드 스캐닝 기술, 바코드 스캐닝 기술, 블루투스(Bluetooth), 적외선 이미징, 단문 메시지 서비스(Short Message Service: SMS), 멀티미디어 메시지 서비스(Multimedia Message Service: MMS) 등을 포함할 수도 있다는 것은 주목할 만하다.
전술한 방법의 실시형태에 대응하여, 본 출원은 디바이스에 대한 실시형태를 더 제공한다.
도 2를 참조하면, 본 출원은 VR 클라이언트에 적용 가능한, VR 장면-기반 서비스 검증 디바이스(20)를 제공한다.
도 3을 참조하면, VR 장면-기반 서비스 검증 디바이스(20)를 가진 VR 단말기 장비의 하드웨어 아키텍처는 일반적으로 CPU, 메모리, 비휘발성 기억장치, 네트워크 인터페이스, 내부 버스 등을 포함할 수도 있다. 실시예로써 소프트웨어 구현예를 고려하면, VR 장면-기반 서비스 검증 디바이스(20)는 일반적으로 메모리에 저장된 컴퓨터 프로그램을 실행시키는 CPU가 형성하는, 하드웨어와 소프트웨어를 결합한 논리 디바이스로 여겨질 수도 있다. 디바이스(20)는,
VR 장면에서 사용자의 시각 초점이 트리거링하는 타깃 서비스를 검출하도록 구성된 검출 모듈(201)(타깃 서비스는 보안 검증을 요구하는 사용자 서비스임);
사전에 구성된 눈 인식 하드웨어를 사용하여 복수의 눈의 생리학적 특징을 사용자로부터 획득하도록 구성된 획득 모듈(202); 및
복수의 눈의 생리학적 특징 중 하나를 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하고; 그리고 비교 결과에 기초하여 타깃 서비스의 보안 검증이 실패했다고 결정된다면, 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징을 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교하고, 그리고 비교 결과에 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하도록 구성된 검증 모듈(203)을 포함할 수도 있다.
이 실시형태에서, 디바이스(20)는,
사전에 구성된 눈 추적 하드웨어를 사용하여 사용자에 대한 눈 추적을 실행하고; 눈 추적의 결과에 기초하여, VR 장면에서 사용자의 시각 초점을 결정하고; 시각 초점이 미리 설정된 가상 컴포넌트가 VR 장면에 위치되는 영역에 있는지를 판단하고(미리 설정된 가상 컴포넌트는 타깃 서비스를 트리거링하기 위해 사용됨); 미리 설정된 가상 컴포넌트를 선택하고, 그리고 맵핑 위치가 미리 설정된 가상 컴포넌트가 위치되는 영역에 미리 설정된 문턱값 시간보다 더 길게 있다면, 타깃 서비스를 트리거링하도록 구성된 트리거 모듈(204)(도 2에 미도시)를 더 포함할 수도 있다.
이 실시형태에서, 디바이스(20)는,
VR 장면에서 시각 초점에 중심을 둔 미리 설정된 크기의 타깃 가시 영역을 식별하고; 제1 렌더링 정밀도에 기초하여 식별된 타깃 가시 영역에 대응하는 시각 이미지를 시각적으로 렌더링하고; 그리고 제2 렌더링 정밀도에 기초하여 타깃 가시 영역 외부의 다른 가시 영역에 대응하는 시각 이미지를 시각적으로 렌더링하도록 구성된 렌더링 모듈(205)(제2 렌더링 정밀도는 제1 렌더링 정밀도보다 더 낮음)을 더 포함할 수도 있다.
이 실시형태에서, 타깃 가시 영역 외부의 다른 가시 영역의 렌더링 정밀도는 시각 초점에 대한 거리의 증가에 따라 점진적으로 감소될 수도 있다.
이 실시형태에서, 검증 모듈(203)은,
획득된 눈의 생리학적 특징을 눈의 생리학적 특징 샘플과 비교하는 결과에 적어도 부분적으로 기초하여, 타깃 서비스의 보안 검증이 성공했는지를 결정하도록 구성될 수도 있다.
이 실시형태에서, 복수의 눈의 생리학적 특징은 안문 특징 및 홍채 특징을 포함할 수도 있다. 눈 인식 하드웨어는 안문 특징을 획득하기 위한 RGB 카메라, 및 홍채 특징을 획득하기 위한 적외선 카메라를 포함할 수도 있다.
이 실시형태에서, 타깃 서비스는 지불 서비스를 포함할 수도 있다.
본 출원의 다른 실시형태는 명세서의 설명 및 개시된 실시형태의 실험에 기초하여 당업자에게 분명할 것이다. 본 출원은 본 출원의 일반적인 원리를 따르고 그리고 기술의 공지된 또는 관습적인 관행 내에 있는 것으로서 본 출원으로부터의 이러한 벗어남을 포함하는 본 출원의 임의의 변형, 용도, 또는 변경을 포함하는 것으로 의도된다. 명세서 및 실시예가 오직 예시적인 것으로 간주되고, 본 출원의 참된 범위 및 정신이 다음의 청구항에 의해 나타나는 것으로 의도된다.
본 출원이 위에서 설명되고 그리고 첨부 도면에 예시되는 정확한 구성으로 제한되지 않고, 그리고 다양한 변경 및 변화가 본 출원의 범위로부터 벗어나는 일없이 행해질 수 있다는 것을 이해할 것이다. 본 출원의 범위가 첨부된 청구항에 의해서만 제한되는 것으로 의도된다.
전술한 설명은 단지 본 출원의 예시적인 실시형태이지만, 본 출원을 제한하도록 의도되지 않는다. 본 출원의 정신 및 원리로부터 벗어나는 일없이 행해지는 임의의 변경, 등가 대체, 또는 개선은 본 출원의 보호 범위 내에 속해야 한다.

Claims (14)

  1. 가상현실(virtual reality: VR) 장면-기반 서비스 검증 방법으로서, VR 클라이언트에 적용 가능하되,
    검출 모듈이 VR 장면에서 사용자의 시각 초점이 트리거링하는(trigger) 타깃 서비스를 검출하는 단계로서, 상기 타깃 서비스는 보안 검증을 요구하는 사용자 서비스인, 상기 타깃 서비스를 검출하는 단계;
    상기 검출 모듈이 눈 깜빡임 인식 또는 심박동 인식을 통해 상기 사용자의 라이프 검출을 수행하는 단계;
    획득 모듈이 사전에 구성된 눈 인식 하드웨어를 사용하여 복수의 눈의 생리학적 특징을 상기 사용자로부터 획득하는 단계로서, 상기 복수의 눈의 생리학적 특징은 안문 특징 및 홍채 특징을 포함하고, 상기 눈 인식 하드웨어는 상기 안문 특징을 획득하기 위한 RGB 카메라, 및 상기 홍채 특징을 획득하기 위한 적외선 카메라를 포함하는, 상기 복수의 눈의 생리학적 특징을 상기 사용자로부터 획득하는 단계;
    검증 모듈이 상기 복수의 눈의 생리학적 특징의 상기 안문 특징 및 상기 홍채 특징을 각각 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교하고, 그리고 비교 결과에 기초하여, 상기 타깃 서비스의 상기 보안 검증이 성공했는지를 결정하는 단계; 및
    상기 타깃 서비스의 상기 보안 검증이 실패했다고 결정된다면, 상기 검증 모듈이 상기 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징을 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교하고, 그리고 비교 결과에 기초하여, 상기 타깃 서비스의 상기 보안 검증이 성공했는지를 결정하는 단계를 포함하는, VR 장면-기반 서비스 검증 방법.
  2. 제1항에 있어서,
    트리거 모듈이 사전에 구성된 눈 추적 하드웨어를 사용하여 상기 사용자에 대한 눈 추적을 실행하는 단계;
    상기 트리거 모듈이 상기 눈 추적의 결과에 기초하여, 상기 VR 장면에서 상기 사용자의 상기 시각 초점을 결정하는 단계;
    상기 트리거 모듈이 상기 시각 초점이 미리 설정된 가상 컴포넌트가 상기 VR 장면에 위치되는 영역에 있는지를 판단하는 단계로서, 상기 미리 설정된 가상 컴포넌트는 상기 타깃 서비스를 트리거링하기 위해 사용되는, 상기 판단하는 단계; 및
    상기 트리거 모듈이 상기 미리 설정된 가상 컴포넌트를 선택하고, 그리고 맵핑 위치가 상기 미리 설정된 가상 컴포넌트가 위치되는 영역에 있고 그리고 체류 시간이 미리 설정된 문턱값에 도달한다면 상기 타깃 서비스를 트리거링하는 단계를 더 포함하는, VR 장면-기반 서비스 검증 방법.
  3. 제1항에 있어서,
    렌더링 모듈이 상기 VR 장면에서 상기 시각 초점에 중심을 둔 미리 설정된 크기의 타깃 가시 영역을 식별하는 단계;
    상기 렌더링 모듈이 제1 렌더링 정밀도(rendering precision)에 기초하여 식별된 타깃 가시 영역에 대응하는 시각 이미지를 시각적으로 렌더링하는 단계; 및
    상기 렌더링 모듈이 제2 렌더링 정밀도에 기초하여 상기 타깃 가시 영역 외부의 다른 가시 영역에 대응하는 시각 이미지를 시각적으로 렌더링하는 단계를 더 포함하되, 상기 제2 렌더링 정밀도는 상기 제1 렌더링 정밀도보다 더 낮은, VR 장면-기반 서비스 검증 방법.
  4. 제3항에 있어서, 상기 타깃 가시 영역 외부의 상기 다른 가시 영역의 상기 렌더링 정밀도는 상기 시각 초점으로부터 거리의 증가에 따라 점진적으로 감소되는, VR 장면-기반 서비스 검증 방법.
  5. 제1항에 있어서, 비교 결과에 기초하여, 상기 타깃 서비스의 상기 보안 검증이 성공했는지를 결정하는 단계는,
    상기 검증 모듈이 획득된 눈의 생리학적 특징을 상기 눈의 생리학적 특징 샘플과 비교한 결과에 적어도 부분적으로 기초하여, 상기 타깃 서비스의 상기 보안 검증이 성공했는지를 결정하는 것을 포함하는, VR 장면-기반 서비스 검증 방법.
  6. 삭제
  7. 제1항에 있어서, 상기 타깃 서비스는 지불 서비스를 포함하는, VR 장면-기반 서비스 검증 방법.
  8. VR 클라이언트에 적용 가능한, VR 장면-기반 서비스 검증 디바이스로서,
    VR 장면에서 사용자의 시각 초점이 트리거링하는 타깃 서비스를 검출하고, 눈 깜빡임 인식 또는 심박동 인식을 통해 상기 사용자의 라이프 검출을 실행하도록 구성된 검출 모듈로서, 상기 타깃 서비스는 보안 검증을 요구하는 사용자 서비스인, 상기 검출 모듈;
    사전에 구성된 눈 인식 하드웨어를 사용하여 복수의 눈의 생리학적 특징을 상기 사용자로부터 획득하도록 구성된 획득 모듈로서, 상기 복수의 눈의 생리학적 특징은 안문 특징 및 홍채 특징을 포함하고, 상기 눈 인식 하드웨어는 상기 안문 특징을 획득하기 위한 RGB 카메라, 및 상기 홍채 특징을 획득하기 위한 적외선 카메라를 포함하는, 상기 획득 모듈; 및
    상기 복수의 눈의 생리학적 특징의 상기 안문 특징 및 상기 홍채 특징을 각각 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 비교하고, 그리고 비교 결과에 기초하여, 상기 타깃 서비스의 상기 보안 검증이 성공했는지를 결정하고; 그리고
    상기 비교 결과에 기초하여 상기 타깃 서비스의 상기 보안 검증이 실패했다고 결정된다면, 상기 복수의 눈의 생리학적 특징 중 하나 이상의 다른 눈의 생리학적 특징을 하나 이상의 대응하는 사전에 저장된 눈의 생리학적 특징 샘플과 계속해서 비교하고, 그리고 상기 비교 결과에 기초하여, 상기 타깃 서비스의 상기 보안 검증이 성공했는지를 결정하도록 구성된 검증 모듈을 포함하는, VR 장면-기반 서비스 검증 디바이스.
  9. 제8항에 있어서,
    사전에 구성된 눈 추적 하드웨어를 사용하여 상기 사용자에 대한 눈 추적을 실행하고; 상기 눈 추적의 결과에 기초하여, 상기 VR 장면에서 상기 사용자의 상기 시각 초점을 결정하고; 상기 시각 초점이 미리 설정된 가상 컴포넌트가 상기 VR 장면에 위치되는 영역에 있는지를 판단하고, 상기 미리 설정된 가상 컴포넌트는 상기 타깃 서비스를 트리거링하기 위해 사용되고; 상기 미리 설정된 가상 컴포넌트를 선택하고, 그리고 맵핑 위치가 상기 미리 설정된 가상 컴포넌트가 위치되는 상기 영역에 있고 그리고 체류 시간이 미리 설정된 문턱값에 도달한다면 상기 타깃 서비스를 트리거링하도록 구성된 트리거 모듈를 더 포함하는, VR 장면-기반 서비스 검증 디바이스.
  10. 제8항에 있어서,
    상기 VR 장면에서 상기 시각 초점에 중심을 둔 미리 설정된 크기의 타깃 가시 영역을 식별하고; 제1 렌더링 정밀도에 기초하여 식별된 타깃 가시 영역에 대응하는 시각 이미지를 시각적으로 렌더링하고; 그리고 제2 렌더링 정밀도에 기초하여 상기 타깃 가시 영역 외부의 다른 가시 영역에 대응하는 시각 이미지를 시각적으로 렌더링하도록 구성된 렌더링 모듈을 더 포함하되, 상기 제2 렌더링 정밀도는 상기 제1 렌더링 정밀도보다 더 낮은, VR 장면-기반 서비스 검증 디바이스.
  11. 제10항에 있어서, 상기 타깃 가시 영역 외부의 상기 다른 가시 영역의 상기 렌더링 정밀도는 상기 시각 초점으로부터 거리의 증가에 따라 점진적으로 감소되는, VR 장면-기반 서비스 검증 디바이스.
  12. 제8항에 있어서, 상기 검증 모듈은,
    획득된 눈의 생리학적 특징을 상기 눈의 생리학적 특징 샘플과 비교하는 결과에 적어도 부분적으로 기초하여, 상기 타깃 서비스의 상기 보안 검증이 성공했는지를 결정하도록 구성되는, VR 장면-기반 서비스 검증 디바이스.
  13. 삭제
  14. 제8항에 있어서, 상기 타깃 서비스는 지불 서비스를 포함하는, VR 장면-기반 서비스 검증 디바이스.
KR1020197025471A 2017-02-23 2018-02-12 가상현실 장면-기반 비즈니스 검증 방법 및 디바이스 KR102298793B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710100962.8A CN106980983A (zh) 2017-02-23 2017-02-23 基于虚拟现实场景的业务认证方法及装置
CN201710100962.8 2017-02-23
PCT/CN2018/076532 WO2018153311A1 (zh) 2017-02-23 2018-02-12 基于虚拟现实场景的业务认证方法及装置

Publications (2)

Publication Number Publication Date
KR20190113880A KR20190113880A (ko) 2019-10-08
KR102298793B1 true KR102298793B1 (ko) 2021-09-07

Family

ID=59338623

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197025471A KR102298793B1 (ko) 2017-02-23 2018-02-12 가상현실 장면-기반 비즈니스 검증 방법 및 디바이스

Country Status (8)

Country Link
US (1) US11170087B2 (ko)
EP (1) EP3567535A1 (ko)
JP (1) JP6880214B2 (ko)
KR (1) KR102298793B1 (ko)
CN (1) CN106980983A (ko)
SG (1) SG11201907456PA (ko)
TW (1) TWI697799B (ko)
WO (1) WO2018153311A1 (ko)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10303865B2 (en) * 2016-08-31 2019-05-28 Redrock Biometrics, Inc. Blue/violet light touchless palm print identification
CN106980983A (zh) * 2017-02-23 2017-07-25 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务认证方法及装置
CN107368184B (zh) 2017-05-12 2020-04-14 阿里巴巴集团控股有限公司 一种虚拟现实场景中的密码输入方法和装置
CN107657446A (zh) * 2017-08-03 2018-02-02 广东小天才科技有限公司 一种基于地理位置的支付控制方法及终端
CN109388448B (zh) 2017-08-09 2020-08-04 京东方科技集团股份有限公司 图像显示方法、显示系统以及计算机可读存储介质
CN108510378B (zh) * 2018-02-27 2021-08-06 吉林省行氏动漫科技有限公司 一种虚拟自助办税系统及办税方法
CN108596614A (zh) * 2018-03-30 2018-09-28 维沃移动通信有限公司 一种支付方法及终端
CN109271853B (zh) * 2018-08-07 2022-05-06 信利光电股份有限公司 一种提高支付安全的识别方法及装置
CN110287687A (zh) * 2019-06-26 2019-09-27 Oppo广东移动通信有限公司 注册方法、注册装置、头戴设备和存储介质
EP4073689A4 (en) 2019-12-09 2022-12-14 Magic Leap, Inc. SYSTEMS AND PROCEDURES FOR THE OPERATION OF A USER IDENTIFICATION-BASED HEAD-MOUNTED DISPLAY
CN113177434A (zh) 2021-03-30 2021-07-27 青岛小鸟看看科技有限公司 基于单眼球追踪的虚拟现实系统注视渲染方法、系统
CA3179809A1 (en) * 2021-07-06 2024-01-05 Charles FALLAHA System and method for determining an orthodontic occlusion class
CN113656761B (zh) * 2021-08-10 2024-04-05 深圳壹账通智能科技有限公司 基于生物识别技术的业务处理方法、装置和计算机设备
CN113641246A (zh) * 2021-08-25 2021-11-12 兰州乐智教育科技有限责任公司 用户专注度的确定方法、装置、vr设备及存储介质
CN114006749B (zh) * 2021-10-29 2023-07-21 平安银行股份有限公司 安全验证方法、装置、设备及存储介质
EP4207036A1 (en) * 2021-12-30 2023-07-05 Supertab AG A computer-implemented method for enabling purchases related to an augmented reality environment, a computer readable medium, an ar device, and a system for enabling purchases related to an augmented reality environment
CN114917590B (zh) * 2022-07-21 2022-12-09 广州华立科技股份有限公司 一种虚拟现实的游戏系统
CN115456607B (zh) * 2022-09-21 2023-05-23 深圳乐点创想科技有限公司 一种娱乐数字化智能支付系统及其使用方法
CN115657861A (zh) * 2022-12-26 2023-01-31 北京万里红科技有限公司 一种交互方法及终端设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140337634A1 (en) 2013-05-08 2014-11-13 Google Inc. Biometric Authentication Substitute For Passwords On A Wearable Computing Device
WO2016183541A1 (en) * 2015-05-14 2016-11-17 Magic Leap, Inc. Augmented reality systems and methods for tracking biometric data
CN106407772A (zh) 2016-08-25 2017-02-15 北京中科虹霸科技有限公司 适于虚拟现实设备的人机交互与身份认证装置及其方法

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09251342A (ja) * 1996-03-15 1997-09-22 Toshiba Corp 注視箇所推定装置とその方法及びそれを使用した情報表示装置とその方法
JP3452297B2 (ja) * 1996-07-24 2003-09-29 日本電信電話株式会社 3次元仮想空間表示方法
KR100244764B1 (ko) * 1997-05-23 2000-03-02 전주범 홍채패턴 식별에 의한 가상현실 서비스 제공장치 및 방법
JP2003167855A (ja) * 2001-11-29 2003-06-13 Mitsubishi Electric Corp 情報端末システム
US20090295683A1 (en) 2008-05-27 2009-12-03 Randall Pugh Head mounted display with variable focal length lens
US9292973B2 (en) 2010-11-08 2016-03-22 Microsoft Technology Licensing, Llc Automatic variable virtual focus for augmented reality displays
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
CN103426195B (zh) * 2013-09-09 2016-01-27 天津常青藤文化传播有限公司 生成裸眼观看三维虚拟动画场景的方法
CN107300769B (zh) 2013-11-27 2019-12-13 奇跃公司 虚拟和增强现实系统与方法
CN104809380B (zh) * 2014-01-24 2018-10-30 北京奇虎科技有限公司 头戴式智能设备及其使用者的身份一致性的判断方法
WO2015164807A1 (en) 2014-04-25 2015-10-29 Texas State University Detection of brain injury and subject state with eye movement biometrics
KR102173699B1 (ko) 2014-05-09 2020-11-03 아이플루언스, 인크. 안구 신호들의 인식 및 지속적인 생체 인증을 위한 시스템과 방법들
CN104036586B (zh) * 2014-06-09 2017-01-18 京东方科技集团股份有限公司 一种眼控显示设备及其显示方法、atm机系统
US20160187976A1 (en) * 2014-12-29 2016-06-30 Immersion Corporation Systems and methods for generating haptic effects based on eye tracking
CA2983749C (en) 2015-05-11 2021-12-28 Magic Leap, Inc. Devices, methods and systems for biometric user recognition utilizing neural networks
US20160358181A1 (en) * 2015-05-14 2016-12-08 Magic Leap, Inc. Augmented reality systems and methods for tracking biometric data
CN105117627A (zh) * 2015-07-30 2015-12-02 努比亚技术有限公司 一种隐藏信息的方法及装置
JP2019506017A (ja) * 2015-11-06 2019-02-28 フェイスブック・テクノロジーズ・リミテッド・ライアビリティ・カンパニーFacebook Technologies, Llc オプティカル・フローを用いる眼球追跡
WO2017119908A1 (en) 2016-01-08 2017-07-13 Visa International Service Association Secure authentication using biometric input
US10218968B2 (en) 2016-03-05 2019-02-26 Maximilian Ralph Peter von und zu Liechtenstein Gaze-contingent display technique
CN105847540A (zh) 2016-03-16 2016-08-10 惠州Tcl移动通信有限公司 基于眼球跟踪控制vr眼镜画面移动的方法、手机及vr眼镜
CN105930816A (zh) * 2016-05-05 2016-09-07 上海聚虹光电科技有限公司 基于虚拟现实设备的虹膜识别系统
CN106056405A (zh) 2016-05-27 2016-10-26 上海青研科技有限公司 基于虚拟现实视觉兴趣区域的广告定向推送技术
CA3025936A1 (en) 2016-06-03 2017-12-07 Magic Leap, Inc. Augmented reality identity verification
CN105955491B (zh) * 2016-06-30 2020-07-10 北京上古视觉科技有限公司 一种具有眼控及虹膜识别功能的vr眼镜
CN106354251B (zh) * 2016-08-17 2019-04-02 深圳前海小橙网科技有限公司 一种虚拟场景与真实场景融合的模型系统与方法
CN106502384A (zh) 2016-09-21 2017-03-15 奇酷互联网络科技(深圳)有限公司 头戴式虚拟现实设备及其操作方法
CN106203410B (zh) 2016-09-21 2023-10-17 上海星寰投资有限公司 一种身份验证方法及系统
CN106412563A (zh) 2016-09-30 2017-02-15 珠海市魅族科技有限公司 一种图像显示方法以及装置
CN107066079A (zh) * 2016-11-29 2017-08-18 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务实现方法及装置
CN106534836A (zh) 2016-11-30 2017-03-22 珠海市魅族科技有限公司 一种图像调整方法及装置
US10223573B2 (en) * 2016-12-13 2019-03-05 Adobe Inc. User identification and identification-based processing for a virtual reality device
US10564720B2 (en) 2016-12-31 2020-02-18 Daqri, Llc User input validation and verification for augmented and mixed reality experiences
CN106980983A (zh) * 2017-02-23 2017-07-25 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务认证方法及装置
CN106873159A (zh) * 2017-02-27 2017-06-20 阿里巴巴集团控股有限公司 虚拟现实头戴设备
US10171858B2 (en) * 2017-03-02 2019-01-01 Adobe Systems Incorporated Utilizing biometric data to enhance virtual reality content and user response
CN107122642A (zh) * 2017-03-15 2017-09-01 阿里巴巴集团控股有限公司 基于虚拟现实环境的身份认证方法及装置
US20200089855A1 (en) * 2018-09-19 2020-03-19 XRSpace CO., LTD. Method of Password Authentication by Eye Tracking in Virtual Reality System

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140337634A1 (en) 2013-05-08 2014-11-13 Google Inc. Biometric Authentication Substitute For Passwords On A Wearable Computing Device
WO2016183541A1 (en) * 2015-05-14 2016-11-17 Magic Leap, Inc. Augmented reality systems and methods for tracking biometric data
CN106407772A (zh) 2016-08-25 2017-02-15 北京中科虹霸科技有限公司 适于虚拟现实设备的人机交互与身份认证装置及其方法

Also Published As

Publication number Publication date
US11170087B2 (en) 2021-11-09
JP2020515945A (ja) 2020-05-28
KR20190113880A (ko) 2019-10-08
TW201832125A (zh) 2018-09-01
TWI697799B (zh) 2020-07-01
US20190362063A1 (en) 2019-11-28
EP3567535A4 (en) 2019-11-13
JP6880214B2 (ja) 2021-06-02
CN106980983A (zh) 2017-07-25
SG11201907456PA (en) 2019-09-27
EP3567535A1 (en) 2019-11-13
WO2018153311A1 (zh) 2018-08-30

Similar Documents

Publication Publication Date Title
KR102298793B1 (ko) 가상현실 장면-기반 비즈니스 검증 방법 및 디바이스
JP2020515945A5 (ko)
JP6727631B2 (ja) 仮想現実環境ベースのid認証方法および装置
TWI683236B (zh) 基於虛擬實境場景的業務實現方法及裝置
TW201820223A (zh) 基於虛擬實境場景的業務實現方法及裝置
CN107018121B (zh) 用户身份验证的方法及装置
CN107038361B (zh) 基于虚拟现实场景的业务实现方法及装置
US9539500B2 (en) Biometric recognition
KR101495430B1 (ko) 바이오메트릭 인증을 위한 품질 메트릭
US20150186708A1 (en) Biometric identification system
KR102393271B1 (ko) 생체 인증 데이터를 추적하기 위한 증강 현실 시스템들 및 방법들
JP2015170099A (ja) 情報処理装置、情報処理方法、アイウェア端末および認証システム
KR20190089912A (ko) 사용자 신원 인증을 위해 안구 생리 특징을 사용하는 가상 현실 디바이스
CN108958573B (zh) 基于虚拟现实场景的身份认证方法及装置
CN110570185B (zh) 资源转移方法、装置、存储介质及电子设备
CN114331449B (zh) 人脸支付方法、装置和设备及计算机存储介质
WO2024078187A1 (zh) 数值转移方法、装置及设备
CN117456619A (zh) 掌部图像的识别方法、装置、设备、存储介质及程序产品
WO2024021251A1 (zh) 身份校验方法、装置、电子设备以及存储介质
EP4168908A1 (fr) Dispositif et procede d'authentification d'un utilisateur d'un premier dispositif electronique connecte a un deuxieme dispositif electronique

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant