KR20210137126A - Ar/vr 애플리케이션들을 위한 2차 링크 - Google Patents

Ar/vr 애플리케이션들을 위한 2차 링크 Download PDF

Info

Publication number
KR20210137126A
KR20210137126A KR1020217032088A KR20217032088A KR20210137126A KR 20210137126 A KR20210137126 A KR 20210137126A KR 1020217032088 A KR1020217032088 A KR 1020217032088A KR 20217032088 A KR20217032088 A KR 20217032088A KR 20210137126 A KR20210137126 A KR 20210137126A
Authority
KR
South Korea
Prior art keywords
console
threshold
link
primary link
head worn
Prior art date
Application number
KR1020217032088A
Other languages
English (en)
Inventor
갱 루
유팅 팬
윌리암 루이스 애보트
동 정
치 구
Original Assignee
페이스북 테크놀로지스, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 페이스북 테크놀로지스, 엘엘씨 filed Critical 페이스북 테크놀로지스, 엘엘씨
Publication of KR20210137126A publication Critical patent/KR20210137126A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W36/00Hand-off or reselection arrangements
    • H04W36/03Reselecting a link using a direct mode connection
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/22Alternate routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/14Multichannel or multilink protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W24/00Supervisory, monitoring or testing arrangements
    • H04W24/08Testing, supervising or monitoring using real traffic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W24/00Supervisory, monitoring or testing arrangements
    • H04W24/10Scheduling measurement reports ; Arrangements for measurement reports
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/08Load balancing or load distribution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W36/00Hand-off or reselection arrangements
    • H04W36/24Reselection being triggered by specific parameters
    • H04W36/30Reselection being triggered by specific parameters by measured or perceived connection quality data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W40/00Communication routing or communication path finding
    • H04W40/02Communication route or path selection, e.g. power-based or shortest path routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W40/00Communication routing or communication path finding
    • H04W40/02Communication route or path selection, e.g. power-based or shortest path routing
    • H04W40/12Communication route or path selection, e.g. power-based or shortest path routing based on transmission quality or channel quality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W40/00Communication routing or communication path finding
    • H04W40/02Communication route or path selection, e.g. power-based or shortest path routing
    • H04W40/12Communication route or path selection, e.g. power-based or shortest path routing based on transmission quality or channel quality
    • H04W40/16Communication route or path selection, e.g. power-based or shortest path routing based on transmission quality or channel quality based on interference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W40/00Communication routing or communication path finding
    • H04W40/02Communication route or path selection, e.g. power-based or shortest path routing
    • H04W40/22Communication route or path selection, e.g. power-based or shortest path routing using selective relaying for reaching a BTS [Base Transceiver Station] or an access point
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W48/00Access restriction; Network selection; Access point selection
    • H04W48/18Selecting a network or a communication service
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/15Setup of multiple wireless link connections
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/30Connection release
    • H04W76/34Selective release of ongoing connections
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/011Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00Solving problems of bandwidth in display systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W36/00Hand-off or reselection arrangements
    • H04W36/0005Control or signalling for completing the hand-off
    • H04W36/0083Determination of parameters used for hand-off, e.g. generation or modification of neighbour cell lists
    • H04W36/0085Hand-off measurements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W36/00Hand-off or reselection arrangements
    • H04W36/14Reselecting a network or an air interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W36/00Hand-off or reselection arrangements
    • H04W36/24Reselection being triggered by specific parameters
    • H04W36/30Reselection being triggered by specific parameters by measured or perceived connection quality data
    • H04W36/302Reselection being triggered by specific parameters by measured or perceived connection quality data due to low signal strength

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

AR/VR 애플리케이션들을 위한 1차 링크와 2차 링크를 선택하기 위한 시스템, 방법 및 디바이스가 본 명세서에 개시된다. 콘솔은 머리 착용 디스플레이를 통해 사용자에게 VR/AR 세션을 제공할 수 있다. 콘솔은 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 1 측정값이 제 1 임계값 미만임을 결정할 수 있다. 제 1 측정은 1차 링크의 품질 메트릭을 포함할 수 있다. 콘솔은 콘솔과 머리 착용 디스플레이 간의 2차 링크를 활성화할 수 있다. 콘솔은 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 2 측정값이 제 2 임계값보다 작은지 여부를 결정할 수 있다. 제 2 측정값이 제 2 임계값 미만인 경우 콘솔은 1차 링크의 트래픽은 활성화된 2차 링크로 전환시킬 수 있다.

Description

AR/VR 애플리케이션들을 위한 2차 링크
본 개시사항은 일반적으로 가상 현실(VR) 또는 증강 현실(AR) 애플리케이션들을 위한 2차 링크를 제공하기 위한 시스템들 및 방법들을 포함하지만 이에 제한되지 않는 디스플레이 시스템들 및 방법들에 관한 것이다.
웨어러블 디스플레이 기술들은 각각의 디스플레이 디바이스를 착용한 사용자에게 가상 현실 또는 증강 현실 경험을 제공할 수 있다. 이들은 사용자가 각 이미지들과 상호작용하는 것을 허용하는 일련의 컴퓨터 생성 이미지들을 제공할 수 있다. 예를 들어, 디스플레이 디바이스들은 디스플레이 디바이스의 시야가 사용자의 자연스러운 시야를 대체하도록 사용자의 시야 위에 또는 내에 위치된 머리 착용 디바이스들을 포함할 수 있다.
VR 또는 AR 애플리케이션을 위해 1차 링크 또는 2차 링크를 사용할지 여부를 결정하기 위한 디바이스들, 시스템들 및 방법들의 실시예들이 본 명세서에 개시된다. 머리 착용 디스플레이는 콘솔과 연결되어 머리 착용 디스플레이의 사용자에게 VR 또는 AR 애플리케이션(예를 들어, VR/AR 경험)을 제공할 수 있다. 콘솔과 머리 착용 디스플레이는 적어도 하나의 1차 링크 및/또는 2차 링크를 통해 연결될 수 있다. 일부 실시예들에서, 1차 링크는 완전한 VR/AR 경험을 제공하거나 지원할 수 있고, 2차 링크는 1차 링크에 대한 보충 또는 백업 커버리지를 제공할 수 있거나, 제한적/최소 사용 사례들을 지원할 수 있다. 예를 들어, 2차 링크는 1차 링크의 저하된 품질(예를 들어, 지연들, 실패들, 감지/경험되는 차단)에 대한 응답으로 콘솔과 머리 착용 디스플레이 간의 트래픽을 지원하도록 활성화될 수 있다. 콘솔은 1차 링크의 사용 유형 및/또는 링크 품질에 부분적으로 기초하여 1차 링크 또는 2차 링크를 사용할지를 결정할 수 있다.
적어도 하나의 양상에서, 방법이 제공된다. 방법은 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 1 측정값이 제 1 임계값 미만임을 콘솔을 통해 결정하는 단계를 포함할 수 있다. 제 1 측정값은 1차 링크의 품질 메트릭을 포함하거나 이에 대응할 수 있다. 방법은 제 1 측정값이 제 1 임계값 미만인 것에 응답하여 콘솔을 통해 콘솔과 머리 착용 디스플레이 사이의 2차 링크를 활성화하는 단계를 포함할 수 있다. 방법은 콘솔을 통해, 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 2 측정값이 제 2 임계값보다 작은지 여부를 결정하는 단계를 포함할 수 있다. 제 2 임계값은 제 1 임계값보다 작을 수 있다. 방법은 제 2 측정값이 제 2 임계값보다 작을 때 콘솔을 통해 1차 링크의 트래픽을 활성화된 2차 링크로 전환시키는(transitioning) 단계를 포함할 수 있다.
일부 실시예들에서, 품질 메트릭은 1차 링크의 신호 대 잡음비를 포함하거나 구성할 수 있다. 방법은 콘솔을 통해 제 2 측정값이 제 2 임계값보다 클 때 1차 링크의 트래픽을 유지하는 단계를 포함할 수 있다. 방법은 제 2 측정값이 제 2 임계값 미만인 것에 응답하여 콘솔을 통해, 제 1 결정된 간격으로 1차 링크의 측정들을 수행하는 단계를 포함할 수 있다. 방법은 제 2 측정값이 제 2 임계값 미만인 후 제 3 측정값에 응답하여 콘솔을 통해 제 2 결정된 간격에서 1차 링크의 추가 측정을 수행하는 단계를 포함할 수 있다. 일부 실시예들에서, 제 2 결정된 간격들의 각각은 제 1 결정된 간격들의 각각보다 클 수 있다.
이 방법은 1차 링크의 제 3 측정값이 제 3 임계값보다 크다는 것을 콘솔을 통해 결정하는 단계를 포함할 수 있다. 제 3 임계값은 제 2 임계값보다 크고 제 1 임계값보다 작을 수 있다. 방법은 콘솔을 통해 1차 링크에 대한 제 1 후보 빔을 식별하는 단계를 포함할 수 있다. 방법은 콘솔을 통해 제 1 후보 빔의 실패를 결정하는 단계를 포함할 수 있다. 방법은 콘솔을 통해 1차 링크에 대한 제 2 후보 빔에 대한 검색을 중지하기 위해 결정된 기간을 개시하는 단계를 포함할 수 있다. 방법은 콘솔에 의해, 제 3 측정값이 제 3 임계값보다 큰 것에 응답하여, 제 1 후보 빔을 사용하여 2차 링크 상의 트래픽을 1차 링크로 전환시키는 단계를 포함할 수 있다. 방법은 콘솔에 의해, 제 4 측정값이 제 4 임계값보다 큰 것에 응답하여 2차 링크를 비활성화하는 단계를 포함할 수 있다. 제 4 임계값은 제 1 임계값보다 클 수 있다. 방법은, 콘솔과 머리 착용 디스플레이 사이의 트래픽의 유형에 따라 콘솔과 머리 착용 디스플레이 사이의 트래픽에 대한 1차 링크 또는 2차 링크를 콘솔을 통해 선택하는 단계를 포함할 수 있다.
적어도 하나의 양상에서, 콘솔이 제공된다. 콘솔에는 하나 이상의 프로세서들을 포함할 수 있다. 하나 이상의 프로세서들은 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 1 임계값 미만인 제 1 측정값을 결정하도록 구성될 수 있다. 제 1 측정값은 1차 링크의 품질 메트릭에 해당할 수 있다. 하나 이상의 프로세서들은 제 1 측정값이 제 1 임계값 미만인 것에 응답하여 콘솔과 머리 착용 디스플레이 사이의 2차 링크를 활성화하도록 구성될 수 있다. 하나 이상의 프로세서들은 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 2 측정값이 제 2 임계값 미만인지 여부를 결정하도록 구성될 수 있다. 제 2 임계값은 제 1 임계값 미만일 수 있다. 하나 이상의 프로세서들은 제 2 측정값이 제 2 임계값보다 작을 때 1차 링크의 트래픽을 활성화된 2차 링크로 전환시키도록 구성될 수 있다.
일부 실시예들에서, 품질 메트릭은 1차 링크의 신호 대 잡음비를 포함하거나 구성할 수 있다.
일부 실시예들에서, 콘솔, 또는 하나 이상의 프로세서들은 제 2 측정값이 제 2 임계값보다 클 때 1차 링크 상의 트래픽을 유지하도록 구성될 수 있다. 콘솔, 또는 하나 이상의 프로세서들은, 제 2 측정값이 제 2 임계값 미만인 것에 응답하여, 제 1 결정된 간격에서 1차 링크의 측정을 수행하도록 구성될 수 있다. 콘솔, 또는 하나 이상의 프로세서들은, 제 2 측정값이 제 2 임계값 미만인 후의 제 3 측정에 응답하여, 제 2 결정된 간격에서 1차 링크의 추가 측정들을 수행하도록 구성될 수 있다. 일부 실시예들에서, 제 2 결정된 간격들의 각각은 제 1 결정된 간격들의 각각보다 클 수 있다.
콘솔, 또는 하나 이상의 프로세서들은 1차 링크의 제 3 측정값이 제 3 임계값보다 크다고 결정하도록 구성될 수 있다. 제 3 임계값은 제 2 임계값보다 크고 제 1 임계값보다 작을 수 있다. 콘솔, 또는 하나 이상의 프로세서들은 1차 링크에 대한 제 1 후보 빔을 식별하도록 구성될 수 있다. 콘솔, 또는 하나 이상의 프로세서들은 후보 빔의 실패를 결정하도록 구성될 수 있다. 콘솔, 또는 하나 이상의 프로세서들은 1차 링크에 대한 제 2 후보 빔에 대한 검색을 중지하기 위해 결정된 기간을 개시하도록 구성될 수 있다. 콘솔, 또는 하나 이상의 프로세서들은 제 3 측정값이 제 3 임계값보다 큰 것에 응답하여 제 1 후보 빔을 사용하여 2차 링크 상의 트래픽을 1차 링크로 전환시키도록 구성될 수 있다.
적어도 하나의 양상에서, 명령들을 저장하는 비일시적 컴퓨터 판독가능 매체가 제공된다. 하나 이상의 프로세서들에 의해 실행될 때 명령들은 하나 이상의 프로세서들이 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 1 측정값이 제 1 임계값 미만임을 결정하게 할 수 있다. 제 1 측정값은 1차 링크의 품질 메트릭에 해당할 수 있다. 하나 이상의 프로세서들에 의해 실행될 때 명령들은 하나 이상의 프로세서들이 제 1 측정값이 제 1 임계값 미만인 것에 응답하여 콘솔과 머리 착용 디스플레이 사이의 2차 링크를 활성화하게 할 수 있다. 하나 이상의 프로세서들에 의해 실행될 때 명령들은 하나 이상의 프로세서들이 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 제 2 측정값이 제 2 임계값 미만인지 여부를 결정하게 할 수 있다. 제 2 임계값은 제 1 임계값보다 작을 수 있다. 하나 이상의 프로세서들에 의해 실행될 때 명령들은 하나 이상의 프로세서들이 제 2 측정값이 제 2 임계값보다 작을 때 1차 링크의 트래픽을 활성화된 2차 링크로 전환시키도록 할 수 있다.
일부 실시예들에서, 하나 이상의 프로세서들에 의해 실행될 때 명령들은 하나 이상의 프로세서들로 하여금 콘솔과 머리 착용 디스플레이 사이의 트래픽 유형에 따라 콘솔과 머리 착용 디스플레이 사이의 트래픽에 대한 1차 링크 또는 2차 링크를 선택하게 할 수 있다.
본 명세서에 기술된 양상들 중 임의의 것에 포함하기에 적합한 것으로 논의된 임의의 특징들은 또한 다른 양상들 중 임의의 것에 임의의 조합으로 포함하기에 적합할 것이라는 것이 이해될 것이다.
이들 및 다른 양상들 및 구현들은 아래에서 상세히 논의된다. 전술한 정보 및 다음의 상세한 설명은 다양한 양상들 및 구현들의 예시적인 예들을 포함하고, 청구된 양상들 및 구현들의 성질 및 특성을 이해하기 위한 개요 또는 프레임워크를 제공한다. 도면들은 다양한 양상들 및 구현들에 대한 예시 및 추가 이해를 제공하고, 본 명세서에 통합되고 본 명세서의 일부를 구성한다.
첨부된 도면들은 축척에 맞게 그려진 것이 아니다. 다양한 도면들에서 유사한 참조 번호들 및 명칭들은 유사한 요소들을 나타낸다. 명확성을 위해 모든 도면에서 모든 구성요소에 레이블이 지정되는 것은 아니다.
도 1a는 본 개시사항의 예시적인 구현에 따른, 인공 현실 애플리케이션들을 위한 1차 링크와 2차 링크 사이에서 선택하기 위한 시스템의 실시예의 블록도.
도 1b는 본 개시사항의 예시적인 구현에 따른 머리 착용 디스플레이의 도면.
도 2a는 본 개시사항의 예시적인 구현에 따른, AR/VR 애플리케이션들을 위한 1차 링크와 2차 링크 사이를 선택하기 위한 인터-스케줄링 알고리즘의 도면.
도 2b는 본 개시사항의 예시적인 구현에 따른, 링크 품질 AR/VR 애플리케이션들을 사용하여 1차 링크와 2차 링크 사이에서 선택하기 위한 내부 결정 루프의 도면.
도 3a 내지 도 3e는 본 개시사항의 예시적인 구현에 따른, AR/VR 애플리케이션들을 위한 1차 링크와 2차 링크 사이에서 선택하기 위한 프로세스 또는 방법을 예시하는 흐름도.
도 4는 본 개시사항의 예시적인 구현에 따른 컴퓨팅 환경의 블록도.
특정 실시예들을 상세히 예시하는 도면들로 돌아가기 전에, 본 개시사항은 설명에 제시되거나 도면들에 예시된 세부사항들 또는 방법론으로 제한되지 않는다는 것을 이해해야 한다. 본 명세서에서 사용된 용어가 단지 설명의 목적을 위한 것이며 제한하는 것으로 간주되어서는 안된다는 것을 이해해야 한다.
아래에서 본 발명의 다양한 실시예들의 설명을 읽을 목적으로, 명세서의 섹션들 및 각각의 콘텐츠에 대한 다음 설명이 도움이 될 수 있다.
- 섹션 A는 AR/VR 애플리케이션들을 위한 1차 링크와 2차 링크 사이에서 선택하기 위한 디바이스들, 시스템들 및 방법들의 실시예들을 설명한다.
- 섹션 B는 컴퓨팅 시스템의 실시예들을 설명한다.
A. AR/VR 애플리케이션들을 위한 2차 링크들
본 개시사항의 요지는 인공 현실(예를 들어, AR, VR, 혼합 현실(MR)) 애플리케이션들을 위한 2차 링크들에 관한 것이다. 일부 실시예들에서, 애플리케이션은 퍽(또는 콘솔)과 쌍을 이루는 고글/안경(또는 머리 착용 디스플레이)의 무선 AR/VR/MR 구성을 처리하며, 여기서 전송들은 주로 60GHz 무선 링크(예를 들어, 1차 링크)를 사용하여 고글과 퍽 사이에서 이루어진다. 심각한 차단(예를 들어, 신체 유발 손실, 편파 불일치로 인한)과 관련된 조건들 하에서, 60GHz 링크가 손실되거나 심각하게 저하될 수 있다. 이러한 조건들을 지원하기 위해 2차 링크가 활성화되고 도입되어 주요 60GHz 링크에 대한 백업으로 특정 수준의 최소 적용범위를 제공할 수 있다. 최소 적용범위는 예를 들어 시간 확인, 문자 메시지 또는 이메일 수신, 음성 호출 걸기/받기, 음성 안내/제어의 수행, 온라인 음악 청취, 날씨/주식 정보 확인에 대한 지원을 포함할 수 있다.
일부 양상들에서, 2차 링크는 높은 가용성 및 신뢰성을 제공하도록 구성될 수 있고(예를 들어, 너무 많은 가시선을 필요로 하지 않음), 충분한 범위를 제공할 수 있고(예를 들어, 16m×16m), 항상 턴온되어 있을 수 있거나(예를 들어, 대기), 또는 빠르게 턴온되어 설정될 수 있다. 2차 링크는 저전력, 저비용일 수 있고, 예를 들어 기본 텍스트들 및 렌더링, 제어 명령들, 오디오를 지원하고, 응답, 오디오, 등을 제어하기 위해, 양호한 대기 시간으로 적당한-낮은 처리량을 지원할 수 있다. 다양한 실시예들에서, 2차 링크는, 블루투스 클래식, 블루투스 저-에너지(BLE) 또는 저전력 WiFi를 포함할 수 있다. 송신율에 기반하여, 최적의 전력 효율을 갖는 옵션이 구현될 수 있다. 솔루션의 일 실시예는, 1차 링크와 2차 링크 사이의 트래픽 대역폭에 대해 제한적이거나 허용 가능한 수준의 경쟁이 있다고 가정할 때, 퍽에서 단일 WiFi/BT 칩/디바이스를 공유하는 1차 링크와 2차 링크 모두를 수반한다. 다른 실시예는 2차 링크를 지원하기 위해 별도의 무선 칩/디바이스를 갖는 것을 수반할 수 있으며, BT는 주요 WiFi 링크로부터 양호한 격리를 보장하기 위해 선호되는 옵션이다.
일부 실시예들에서, 본 명세서에 설명된 시스템들, 디바이스들 및 방법들은 1차 및 2차 링크들을 활성화시키고, 이들 링크들 사이에서 스위칭하기 위한 인터-스케줄링 알고리즘을 포함할 수 있다. 일 실시예에서, 인터-스케줄링 알고리즘은, 링크가 사용 사례에 기초하여 선택되거나 결정되는 외부(또는 제 1) 결정 루프를 포함하는 2 단계 인터-링크 스위칭 및/또는 스케줄링 프로세스를 포함하거나 수반할 수 있고, 예컨대 (예를 들어, 전체 AR 경험을 지원하는) 전체 사용 사례가 필요한 경우 1차 링크를 선택할 수 있고, 오로지 최소 사용 사례가 필요한 경우 2차 링크를 선택할 수 있다. 내부(또는 제 2) 결정 루프에서, 인터-링크 스케줄링은 링크 품질을 기반으로 할 수 있다. 예를 들어, 1차 링크 품질이 특정 임계값 미만인 경우, 시스템(머리 착용 디스플레이 및/또는 콘솔)은 1차 링크 품질이 여전히 낮은 경우 2차 링크를 불러올 수 있고, 트래픽을 감소된 사용자 경험을 갖는 2차 링크로 이동시킬 수 있다. 주기적인 측정은 1차 링크에서 수행될 수 있고, 1 차 링크의 링크 상태가 특정 허용 가능한 수준으로 되돌아가면, 다시 1차 링크로의 스위칭이 발생할 수 있다.
이제 도 1a를 참조하면, AR/VR 애플리케이션들을 위한 1차 링크와 2차 링크 사이에서 선택하기 위한 예시적인 인공 현실 시스템(100)이 제공된다. 간략한 개요에서, 시스템(100)은 콘솔(102) 및 머리 착용 디스플레이(130)를 포함할 수 있다. 머리 착용 디스플레이(130)(예를 들어, 고글, 안경, 머리 장착 디바이스)는 예를 들어, 머리 착용 디스플레이(130)의 사용자를 위한 적어도 하나의 사용자 세션에 대한 머리 착용 디스플레이(130)와 콘솔(102) 사이에서 데이터를 통신 또는 전달하기 위해 콘솔(102)(예를 들어, 퍽)과 쌍을 이룰 수 있다. 사용자 세션은 머리 착용 디스플레이(130)를 통한 VR 경험, AR 경험 또는 MR 경험을 포함할 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 사용 유형(예를 들어, 트래픽 유형, 트래픽의 우선순위) 및/또는 또는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 링크 품질에 부분적으로 기초하여, 1차 링크(108) 및/또는 2차 링크(110)를 통해 통신을 하도록 결정할 수 있다.
일부 실시예들에서, 인공 현실 시스템 환경(100)은 사용자가 착용하는 머리 착용 디스플레이(130), 및 인공 현실의 콘텐츠를 머리 착용 디스플레이(130)에 제공하는 콘솔(102)을 포함한다. 머리 착용 디스플레이(130)는 머리 착용 디스플레이(130)의 그 위치 및/또는 방향을 검출할 수 있고, 머리 착용 디스플레이(130)의 검출된 위치 및/또는 방향을 콘솔(102)에 제공할 수 있다. 콘솔(102)은 머리 착용 디스플레이(130)의 검출된 위치 및/또는 방향뿐만 아니라 인공 현실에 대한 사용자 입력에 따라 인공 현실의 이미지를 나타내는 이미지 데이터를 생성할 수 있고, 이미지 데이터를 프레젠테이션을 위해 머리 착용 디스플레이(130)로 전송할 수 있다. 일부 실시예들에서, 인공 현실 시스템 환경(100)은 도 1a에 도시된 것보다 더 많거나, 더 적거나, 또는 상이한 구성요소들을 포함한다. 일부 실시예들에서, 인공 현실 시스템 환경(100)의 하나 이상의 구성요소들의 기능은 본 명세서에 설명된 것과 다른 방식으로 구성요소들 사이에 분산될 수 있다. 예를 들어, 콘솔(102)의 기능 중 일부는 머리 착용 디스플레이(130)에 의해 수행될 수 있다. 예를 들어, 머리 착용 디스플레이(130)의 기능 중 일부는 콘솔(102)에 의해 수행될 수 있다. 일부 실시예들에서, 콘솔(102)은 머리 착용 디스플레이(130)의 일부로서 통합된다.
인공 현실 시스템(100)의 다양한 구성요소들 및 요소들은 도 4에 도시되고 후속적으로 설명되는 컴퓨팅 환경의 구성요소들 또는 요소들을 사용하여 구현될 수 있다. 예를 들어, 콘솔(102) 및 머리 착용 디스플레이(130)는 도 4에 도시되고 후속적으로 설명되는 컴퓨팅 시스템(414)과 유사한 컴퓨팅 시스템을 포함하거나 통합할 수 있다. 콘솔(102) 및 머리 착용 디스플레이(130)는 하나 이상의 처리 유닛(들)(416), 스토리지(418), 네트워크 인터페이스(420), 사용자 입력 디바이스(422), 및/또는 사용자 출력 디바이스(424)를 포함할 수 있다.
콘솔(102)은 컴퓨팅 시스템 또는 WiFi 디바이스를 포함할 수 있다. 일부 실시예들에서, 콘솔(102)은, 예를 들어, 웨어러블 컴퓨팅 디바이스(예를 들어, 스마트 워치, 스마트 안경, 머리 착용 디스플레이), 스마트폰, 다른 모바일 폰, 디바이스(예를 들어, 소비자 디바이스), 데스크톱 컴퓨터, 랩톱 컴퓨터, 가상 현실(VR) 퍽, VR 개인용 컴퓨터(PC), VR 컴퓨팅 디바이스, 머리 착용 디바이스로서 구현될 수 있거나, 또는 분산 컴퓨팅 디바이스들로 구현될 수 있다. 콘솔(102)은 VR, 증강 현실(AR), 및/또는 혼합 현실(MR) 경험을 제공하도록 구현될 수 있다. 일부 실시예들에서, 콘솔(102)은 프로세서(104), 저장 디바이스(106), 네트워크 인터페이스, 사용자 입력 디바이스, 및/또는 사용자 출력 디바이스와 같은 통상적인, 특수화된 또는 맞춤형 컴퓨터 구성요소들을 포함할 수 있다. 실시예들에서, 콘솔(102)은 도 4에 도시되고 후속적으로 설명되는 디바이스의 일부 요소들을 포함할 수 있다.
머리 착용 디스플레이(130)는 컴퓨팅 시스템 또는 WiFi 디바이스를 포함할 수 있다. 머리 착용 디스플레이(HWD)는 머리 착용 디스플레이(HMD), 머리 착용 디바이스(HMD), 머리 착용 디바이스(HWD), 머리 착용 디스플레이(HWD) 또는 머리 착용 디바이스(HWD)를 포함하거나 이들의 일부인 것으로 지칭될 수 있다. 일부 실시예들에서, 머리 착용 디스플레이(130)는 예를 들어, 웨어러블 컴퓨팅 디바이스(예를 들어, 스마트 워치, 스마트 안경, 머리 착용 디스플레이), 스마트폰, 다른 모바일 폰, 디바이스(예를 들어, 소비자 디바이스), 데스크톱 컴퓨터, 랩톱 컴퓨터, 가상 현실(VR) 퍽, VR 개인용 컴퓨터(PC), VR 컴퓨팅 디바이스, 머리 착용 디바이스로서 구현될 수 있거나, 또는 분산 컴퓨팅 디바이스들로 구현될 수 있다. 머리 착용 디스플레이(130)는 VR, 증강 현실(AR), 및/또는 혼합 현실(MR) 경험을 머리 착용 디스플레이(130)의 사용자(예를 들어, 디스플레이를 착용하는 사용자)에게 제공하도록 구현될 수 있다. 일부 실시예들에서, 머리 착용 디스플레이(130)는 프로세서(104), 저장 디바이스(106), 네트워크 인터페이스, 사용자 입력 디바이스, 및/또는 사용자 출력 디바이스와 같은 통상적인, 특수화된 또는 맞춤형 컴퓨터 구성요소들을 포함할 수 있다. 실시예들에서, 머리 착용 디스플레이(130)는 도 4에 도시되고 후속적으로 설명되는 디바이스의 일부 요소들을 포함할 수 있다.
콘솔(102) 및 머리 착용 디스플레이(130)는 하나 이상의 프로세서들(104)을 포함할 수 있다. 하나 이상의 프로세서들(104)은 콘솔(102) 및/또는 머리 착용 디스플레이(130)에 대한 입력 데이터를 사전 처리하기 위한, 및/또는 콘솔(102) 및/또는 머리 착용 디스플레이(130)에 대한 출력 데이터를 후처리하기 위한 임의의 로직, 회로 및/또는 처리 구성요소(예를 들어, 마이크로프로세서)를 포함할 수 있다. 하나 이상의 프로세서들(104)은 콘솔(102) 및/또는 머리 착용 디스플레이(130)의 하나 이상의 동작들을 구성, 제어 및/또는 관리하기 위한 로직, 회로, 처리 구성요소 및/또는 기능을 제공한다. 예를 들어, 프로세서(104)는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 1차 링크(108) 및/또는 2차 링크(110)의 하나 이상의 측정값들(112)을 포함하지만 이에 제한되지 않는 데이터 및 메트릭들을 수신할 수 있다.
콘솔(102) 및 머리 착용 디스플레이(130)는 저장 디바이스(106)를 포함할 수 있다. 저장 디바이스(106)는 콘솔(102) 및 머리 착용 디스플레이(130)와 연관된 임의의 유형 또는 형태의 데이터를 저장, 보관 또는 유지하도록 설계 또는 구현될 수 있다. 예를 들어, 콘솔(102) 및 머리 착용 디스플레이(130)는 하나 이상의 측정값들(112), 임계값들(120) 및 품질 메트릭들(124)을 저장할 수 있다. 저장 디바이스(106)는 콘솔(102) 내부에 정적 랜덤 액세스 메모리(SRAM) 또는 내부 SRAM을 포함할 수 있다. 실시예들에서, 저장 디바이스(106)는 콘솔(102)의 집적 회로 내에 포함될 수 있다. 저장 디바이스(106)는 메모리(예를 들어, 메모리, 메모리 유닛, 저장 디바이스, 등)를 포함할 수 있다. 메모리는 본 개시사항에 설명된 다양한 프로세스들, 계층들 및 모듈들을 완료하거나 촉진하기 위한 데이터 및/또는 컴퓨터 코드를 저장하기 위한 하나 이상의 디바이스들(예를 들어, RAM, ROM, 플래시 메모리, 하드 디스크 저장 장치, 등)을 포함할 수 있다. 메모리는 휘발성 메모리 또는 비휘발성 메모리이거나 이를 포함할 수 있고, 본 개시사항에서 설명된 다양한 활동 및 정보 구조를 지원하기 위한 데이터베이스 구성요소들, 목적 코드 구성요소들, 스크립트 구성요소들, 또는 임의의 다른 유형의 정보 구조를 포함할 수 있다. 예시적인 실시예에 따르면, 메모리는 처리 회로를 통해 프로세서(104)에 통신 가능하게 연결되고, 본 개시사항에 설명된 하나 이상의 프로세스들 또는 방법들(예를 들어, 방법(300))을 (예를 들어, 처리 회로 및/또는 프로세서에 의해) 실행하기 위한 컴퓨터 코드를 포함한다.
콘솔(102)은 머리 착용 디스플레이(130)에 대한 하나 이상의 1차 링크들(108)을 설정할 수 있다. 일부 실시예들에서, 머리 착용 디스플레이(130)는 콘솔(102)에 대한 하나 이상의 1차 링크들(108)을 설정할 수 있다. 1차 링크(108)는 연결(예를 들어, , 무선 연결), 세션(예를 들어, 사용자 및/또는 애플리케이션 세션) 및/또는 콘솔(102)과 머리 착용 디스플레이(130) 사이에 설정된 채널을 포함할 수 있다. 1차 링크(108)는 콘솔(102)과 머리 착용 디스플레이(130) 사이에 설정된 고용량, 낮은 대기 시간 및 절전 연결을 포함할 수 있다. 일부 실시예들에서, 1차 링크는 밀리미터파 스펙트럼 또는 30GHz 내지 100GHz 범위의 주파수를 사용하는 링크를 포함할 수 있지만 이에 제한되지 않는다. 일부 실시예들에서, 1차 링크(108)는 60GHz 주파수 연결(예를 들어, 60GHz WiFi, IEEE 802.11ay/ad)을 포함할 수 있지만 이에 제한되지 않는다. 1차 링크(108)는 머리 착용 디스플레이(130)의 사용자에게 완전한 VR 경험, AR 경험 또는 MR 경험을 제공하거나 지원하기 위해 사용될 수 있다.
콘솔(102)은 머리 착용 디스플레이(130)에 대한 하나 이상의 2차 링크들을 설정할 수 있다. 일부 실시예들에서, 머리 착용 디스플레이(130)는 콘솔(102)에 대한 하나 이상의 2차 링크들(110)을 설정할 수 있다. 2차 링크(110)는 콘솔(102)과 머리 착용 디스플레이(130) 사이에 설정된 연결(예를 들어, 무선 연결), 세션 및/또는 채널을 포함할 수 있다. 2차 링크(110)는 콘솔(102)과 머리 착용 디스플레이(130) 사이에 설정된 높은 가용성, 높은 신뢰성 및/또는 저전력 소비 연결을 포함할 수 있다. 일부 실시예들에서, 2차 링크(110)는 충분한 범위(예를 들어, 16m×16m)를 제공하도록 구성될 수 있고, 상시 온일 수 있거나(예를 들어, 적어도 대기 모드에서), 턴온되어 신속하게 설정될 수 있다. 2차 링크(110)는 양호한 레이턴시로 적당히-낮은 낮은 처리량을 지원하도록 구성될 수 있다. 예를 들어, 2차 링크(110)는 시간 확인, 문자 메시지들 또는 이메일들의 수신, 음성 통화의 걸기/받기, 음성 안내/제어의 수행, 온라인 음악의 듣기, 날씨/주식 정보의 확인과 같은, 하지만 이들에 국한되지 않는, 최소 사용 사례를 지원하기 위해 활성화되거나 사용될 수 있다.
2차 링크(110)는 블루투스(BT), 블루투스 저에너지(BLE), 및/또는 저전력 WiFi를 포함하지만 이에 국한되지 않는 상이한 형태들의 근거리 무선 통신 기술들을 사용하여 설정될 수 있다. 일부 실시예들에서, 2차 링크(110)는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 연결 또는 채널의 속성에 부분적으로 기초한다. 예컨대, 2차 링크(110)는 1Mbps(초당 메가비트) 내지 2Mbps 범위의 연결 속도를 위해 BT를 사용하여 설정될 수 있다. 2차 링크(110)는 2Mbps 내지 10Mbps 범위의 연결 속도를 위해 저전력 WiFi를 사용하여 설정될 수 있다. 일부 실시예들에서, 2차 링크(110)는 24Mbps 이상의 연결 속도를 위해 802.11ax 표준들을 사용하여 설정될 수 있다.
콘솔(102) 및/또는 머리 착용 디스플레이(130)는 링크들의 다양한 특성들 또는 속성들(예를 들어, 상태, 품질, 트래픽 레벨)을 결정하기 위해 1차 링크(108) 및/또는 2차 링크(110)에 대한 측정들(112)을 취하거나 수행할 수 있다. 측정들(112)은 상태 측정(예를 들어, 턴온, 턴오프, 활성화됨), 각 링크의 가용성, 연결 속도, 신호 대 잡음비, 대기시간 값, 전력 소비 값 및/또는 각 링크의 신뢰성을 포함할 수 있다. 일부 실시예들에서, 측정들(112)은 각 링크의 품질 측정을 포함할 수 있다. 예를 들어, 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 1차 링크(108) 및/또는 2차 링크(110)에 대한 하나 이상의 품질 메트릭들(124)을 결정하기 위해 1차 링크(108) 및/또는 2차 링크(110)에 대한 측정들(112)을 취하거나 수행할 수 있다. 품질 메트릭(124)은 각 링크의 품질이 특정 임계값(120)보다 큰지를 결정하기 위하여 1차 링크(108) 및/또는 2차 링크(110)의 신호 대 잡음비 및/또는 변조 및 코딩 방식(MCS) 값을 포함할 수 있다.
콘솔(102) 및/또는 머리 착용 디스플레이(130)는 링크가 특정 유형의 사용을 지원할 수 있는지 결정하고 및/또는 링크의 품질을 검증하기 위해 하나 이상의 임계값들(120)을 생성하거나 설정할 수 있다. 예를 들어, 일부 실시예들에서, 1차 링크의 측정값(112)이 임계값(120) 미만인 것에 응답하여, 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽은 1차 링크(108)에서 2차 링크(110)로 전환될 수 있다. 일부 실시예들에서, 1차 링크의 측정값(112)이 임계값(120)보다 큰 것에 응답하여, 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽은 2차 링크(110)에서 1차 링크(108)로 전환될 수 있다. 임계값들(120)은, 각 링크가 머리 착용 디스플레이(130)의 사용자에게 하나 이상의 상이한 유형들의 사용들 또는 서비스 레벨들을 제공하거나 지원할 수 있는지를 결정하기 위하여, 1차 링크(108) 또는 2차 링크(110)의 상이한 품질 메트릭들(예를 들어, 신호 대 잡음비 값들)을 포함하거나 이들에 대응할 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 단일 임계값(120) 또는 복수의 임계값들(120)을 생성하거나 설정할 수 있다.
콘솔(102) 및/또는 머리 착용 디스플레이(130)는 하나 이상의 간격들(122)을 생성하거나 설정할 수 있다. 간격들(122)은 1차 링크(108) 및/또는 2차 링크(110)의 측정들(112)을 취하거나 수행하기 위한 특정 시간 기간을 포함하거나 이에 대응할 수 있다. 간격들(122)은 시간 기간, 시간 범위, 및/또는 시간 값을 포함할 수 있다. 일부 실시예들에서, 간격들(122)은 상이한 측정들(112) 사이의 시간 길이 또는 지속기간을 포함하거나 이에 대응할 수 있고, 간격들은 상이한 시간 값들을 가질 수 있다. 예를 들어, 제 1 결정된 간격(122)은 제 2 결정된 간격(122)과 상이할 수 있다(예를 들어, 더 짧은 시간 기간, 더 긴 시간 기간).
1차 링크(108) 및/또는 2차 링크(110)는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 통신 경로(예를 들어, 전송 경로, 신호 경로)에 대응하는 하나 이상의 빔들(114)(예를 들어, 후보 빔들(114))을 포함할 수 있다. 일부 실시예들에서, 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 콘솔(102) 및/또는 머리 착용 디스플레이(130) 사이의 1차 링크(108) 또는 2차 링크(110)를 지원하기 위해 복수의 이용 가능한 빔들(114)로부터 적어도 하나의 빔(114) 또는 후보 빔(114)을 선택할 수 있다. 일부 실시예들에서, 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 적어도 하나의 빔(114) 또는 후보 빔(114)을 선택하여 콘솔(102) 및/또는 머리 착용 디스플레이(130) 사이의 1차 링크(108) 또는 2차 링크(110)를 지원하기 위해, 빔성형을 수행하거나 사용할 수 있다.
콘솔(102)은 1차 링크(108) 및 2차 링크(110)를 지원하기 위한 하나 이상의 칩들(116)을 포함할 수 있다. 칩들(116)은 1차 링크(108) 및 2차 링크(110)를 지원하기 위해 콘솔(102) 내에 삽입되거나 배치된 집적 회로 또는 무선 주파수 통합 회로를 포함할 수 있지만, 이에 국한되는 것은 아니다. 일부 실시예들에서, 1차 링크(108) 및 2차 링크(110)는 단일 칩(116)의 기능 및/또는 프로세스들을 공유할 수 있다. 예를 들어, 일 실시예에서, 콘솔(102)은 1차 링크(108) 및 2차 링크(110) 각각에 대해 콘솔(102)에서 WiFi 연결 및 BT 연결을 지원하도록 구성된 제 1 칩(116)을 포함할 수 있다. 제 1 칩은 콘솔(102)로부터의 인터넷 링크 및 2차 링크(110)(예를 들어, 인트라-링크 연결)를 지원할 수 있다. 일부 실시예들에서, 콘솔(102)은 1차 링크(108)를 지원하기 위한 제 1 칩(116) 및 2차 링크(110)를 지원하기 위한 제 2 상이한 칩(116)을 포함할 수 있다. 예를 들어, 콘솔(102)은 1차 링크(108)에 대한 WiFi 연결을 지원하도록 구성된 제 1 칩(116) 및 2차 링크(110)에 대한 BT 연결을 지원하기 위한 제 2 칩(116)을 포함할 수 있다.
일부 실시예들에서, 머리 착용 디스플레이(130)는 사용자에 의해 착용될 수 있고 사용자에게 인공 현실 경험을 제시하거나 제공할 수 있는 전자 구성요소이다. 머리 착용 디스플레이(130)는 사용자에게 인공 현실 경험을 제공하기 위해 하나 이상의 이미지들, 비디오, 오디오, 또는 이들의 일부 조합을 렌더링할 수 있다. 일부 실시예들에서, 오디오는 머리 착용 디스플레이(130), 콘솔(102), 또는 둘 모두로부터 오디오 정보를 수신하고 오디오 정보에 기초하여 오디오를 제공하는 외부 디바이스(예를 들어, 스피커 및/또는 헤드폰)를 통해 제공된다. 일부 실시예들에서, 머리 착용 디스플레이(130)는 센서들(142), 안구 추적기(144), 손 추적기(146), 통신 인터페이스(148), 이미지 렌더러(150), 전자 디스플레이(152), 렌즈(154), 및 보상기(156)를 포함한다. 이들 구성요소들은 함께 동작하여, 머리 착용 디스플레이(130)의 위치 및 머리 착용 디스플레이(130)를 착용한 사용자의 응시 방향을 검출하고, 머리 착용 디스플레이(130)의 검출된 위치 및/또는 방향에 대응하는 인공 현실 내의 뷰의 이미지를 렌더링한다. 다른 실시예들에서, 머리 착용 디스플레이(130)는 도 1a에 도시된 것보다 더 많거나, 더 적거나, 또는 상이한 구성요소들을 포함한다.
일부 실시예들에서, 센서들(142)은 머리 착용 디스플레이(130)의 위치 및 배향을 검출하는 전자 구성요소들 또는 전자 구성요소들 및 소프트웨어 구성요소들의 조합을 포함한다. 센서들(142)의 예들은 하나 이상의 이미지 처리 센서들, 하나 이상의 가속도계들, 하나 이상의 자이로스코프들, 하나 이상의 자력계들, 또는 움직임 및/또는 위치를 검출하는 다른 적절한 유형의 센서를 포함할 수 있다. 예를 들어, 하나 이상의 가속도계들은 병진 운동(예를 들어, 앞/뒤, 위/아래, 왼쪽/오른쪽)을 측정할 수 있고, 하나 이상의 자이로스코프들은 회전 운동(예를 들어, 피치, 요, 롤)을 측정할 수 있다. 일부 실시예들에서, 센서(142)는 병진 운동 및 회전 운동을 검출하고, 머리 착용 디스플레이(130)의 배향 및 위치를 결정한다. 일 양상에서, 센서들(142)은 머리 착용 디스플레이(130)의 이전 방향 및 위치에 대한 병진 운동 및 회전 운동을 검출하고, 검출된 병진 운동 및/또는 회전 운동을 누적 또는 적분함으로써 머리 착용 디스플레이(130)의 새로운 방향 및/또는 위치를 결정할 수 있다. 예를 들어 머리 착용 디스플레이(130)가 기준 방향에서 25도 방향을 향하고 있다고 가정하면, 머리 착용 디스플레이(130)가 20도 회전한 것을 검출하는 것에 응답하여, 센서들(142)은 머리 착용 디스플레이(130)가 기준 방향으로부터 현재 45도 방향을 향하거나 배향되었다고 결정할 수 있다. 다른 예로서, 머리 착용 디스플레이(130)가 제 1 방향의 기준점으로부터 2피트(60cm) 떨어져 위치해 있었다고 가정하면, 머리 착용 디스플레이(130)가 제 2 방향으로 3피트 이동한 것을 검출한 것에 응답하여, 센서(142)는 머리 착용 디스플레이(130)가 이제 제 1 방향의 2피트와 제 2 방향의 3피트의 벡터 곱에 위치한다고 결정할 수 있다.
일부 실시예들에서, 안구 추적기들(144)은 머리 착용 디스플레이(130)의 사용자의 응시 방향을 결정하는 전자 구성요소들 또는 전자 구성요소들 및 소프트웨어 구성요소들의 조합을 포함한다. 일부 실시예들에서, 머리 착용 디스플레이(130), 콘솔(102) 또는 이들의 조합은 머리 착용 디스플레이(130)의 사용자의 응시 방향을 통합하여 인공 현실에 대한 이미지 데이터를 생성할 수 있다. 일부 실시예들에서, 안구 추적기들(144)은 2개의 안구 추적기들을 포함하고, 여기서 각각의 안구 추적기(144)는 대응하는 안구의 이미지를 캡처하고, 안구의 응시 방향을 결정한다. 일 예에서, 안구 추적기(144)는 안구의 캡처된 이미지에 따라 안구의 각도 회전, 안구의 병진운동, 안구의 비틀림 변화, 및/또는 안구 모양의 변화를 결정하고, 안구의 결정된 각도 회전, 병진운동 및 눈의 비틀림의 변화에 따라 머리 착용 디스플레이(130)에 대한 상대적 응시 방향을 결정한다. 하나의 접근법에서, 안구 추적기(144)는 안구의 일부에 미리 결정된 기준 또는 구조화된 패턴을 비추거나 투영하고, 안구의 이미지를 캡처하여, 머리 착용 디스플레이(130)에 대한 안구의 상대적인 응시 방향을 결정하기 위해 안구의 일부분에 투영된 패턴을 분석할 수 있다. 일부 실시예들에서, 안구 추적기들(144)은 머리 착용 디스플레이(130)의 방향 및 머리 착용 디스플레이(130)에 대한 상대적 응시 방향을 통합하여 사용자의 응시 방향을 결정한다. 일 예로서, 머리 착용 디스플레이(130)가 기준 방향으로부터 30도 방향을 향하고 있고, 머리 착용 디스플레이(130)의 상대 응시 방향이 머리 착용 디스플레이(130)에 대해 -10도(또는 350도)인 것을 가정하면, 안구 추적기들(144)은 사용자의 응시 방향이 기준 방향으로부터 20도인 것으로 결정할 수 있다. 일부 실시예들에서, 머리 착용 디스플레이(130)의 사용자는 안구 추적기(144)를 인에이블 또는 디스에이블하도록 머리 착용 디스플레이(130)를 구성할 수 있다(예를 들어, 사용자 설정을 통해). 일부 실시예들에서, 머리 착용 디스플레이(130)의 사용자는 안구 추적기들(144)을 인에이블 또는 디스에이블하도록 촉구될 수 있다.
일부 실시예들에서, 손 추적기(146)는 사용자의 손을 추적하는 전자 구성요소 또는 전자 구성요소와 소프트웨어 구성요소의 조합을 포함한다. 일부 실시예들에서, 손 추적기(146)는 손의 형상, 위치 및 방향을 검출할 수 있는 이미지 처리 센서(예를 들어, 카메라) 및 이미지 프로세서를 포함하거나 이에 결합된다. 손 추적기(146)는 손의 검출된 형상, 위치 및 방향을 나타내는 손 추적 측정값들을 생성할 수 있다.
일부 실시예들에서, 통신 인터페이스(148)는 콘솔(102)과 통신하는 전자 구성요소 또는 전자 구성요소와 소프트웨어 구성요소의 조합을 포함한다. 통신 인터페이스(148)는 통신 링크를 통해 콘솔(102)의 통신 인터페이스(118)와 통신할 수 있다. 통신 링크는 무선 링크일 수 있다. 무선 링크의 예들은 셀룰러 통신 링크, 근거리 통신 링크, Wi-Fi, 블루투스, 60GHz 무선 링크, 또는 임의의 통신 무선 통신 링크를 포함할 수 있다. 통신 링크를 통해, 통신 인터페이스(148)는 머리 착용 디스플레이(130)의 결정된 위치 및/또는 방향, 사용자의 결정된 응시 방향, 및/또는 손 추적 측정을 나타내는 데이터를 콘솔(102)에 전송할 수 있다. 더욱이, 통신 링크를 통해, 통신 인터페이스(148)는 렌더링될 이미지를 나타내거나 그에 대응하는 이미지 데이터 및 이미지와 연관된 추가 데이터를 콘솔(102)로부터 수신할 수 있다.
일부 실시예들에서, 이미지 렌더러(150)는, 예를 들어, 인공 현실 공간의 관점에서 변화에 따라, 디스플레이를 위한 하나 이상의 이미지들을 생성하는 전자 구성요소 또는 전자 구성요소와 소프트웨어 구성요소의 조합을 포함한다. 일부 실시예들에서, 이미지 렌더러(150)는 본 명세서에 설명된 다양한 기능들을 수행하기 위한 명령들을 실행하는 프로세서(또는 그래픽 처리 유닛(GPU))로서 구현된다. 이미지 렌더러(150)는 통신 인터페이스(148)를 통해 렌더링될 인공 현실의 이미지를 설명하는 이미지 데이터 및 이미지와 연관된 추가 데이터를 수신할 수 있고, 전자 디스플레이(152)를 통해 이미지를 렌더링할 수 있다. 일부 실시예들에서, 콘솔(102)로부터의 이미지 데이터는 인코딩될 수 있고, 이미지 렌더러(150)는 이미지를 렌더링하기 위해 이미지 데이터를 디코딩할 수 있다. 일부 실시예들에서, 이미지 렌더러(150)는 추가 데이터에서 콘솔(102)로부터 인공 현실 공간의 가상 물체들을 나타내는 물체 정보 및 가상 물체의 깊이(또는 머리 착용 디스플레이(130)로부터의 거리)를 나타내는 깊이 정보를 수신한다. 일 양상에서, 인공 현실의 이미지, 콘솔(102)로부터의 물체 정보, 깊이 정보, 및/또는 센서들(142)로부터의 업데이트된 센서 측정값들에 따라, 이미지 렌더러(150)는 머리 착용 디스플레이(130)의 업데이트된 위치 및/또는 방향에 대응하도록 인공 현실의 이미지를 업데이트하기 위해 쉐이딩, 재투영, 및/또는 블렌딩을 수행할 수 있다. 사용자가 초기 센서 측정 후 머리를 회전했다고 가정하면, 업데이트된 센서 측정들에 응답하여 전체 이미지를 재생성하기 보다는, 이미지 렌더러(150)는 업데이트된 센서 측정에 따라 인공 현실 내의 업데이트된 뷰에 대응하는 이미지의 작은 부분(예를 들어, 10%)을 생성할 수 있고, 재투영을 통해 콘솔(102)로부터의 이미지 데이터의 이미지에 그 부분을 추가할 수 있다. 이미지 렌더러(150)는 첨부된 에지들에 쉐이딩 및/또는 블렌딩을 수행할 수 있다. 따라서, 업데이트된 센서 측정에 따라 인공 현실의 이미지를 재생성하지 않고, 이미지 렌더러(150)는 인공 현실의 이미지를 생성할 수 있다. 일부 실시예들에서, 이미지 렌더러(150)는 사용자의 손에 대응하는 손 모델의 형태, 위치 및 방향을 나타내는 손 모델 데이터를 수신하고, 손 모델을 인공 현실의 이미지에 중첩시킬 수 있다. 이러한 손 모델은 사용자가 인공 현실 내에서 다양한 상호 작용을 제공할 수 있도록 시각적 피드백으로 제공될 수 있다.
일부 실시예들에서, 전자 디스플레이(152)는 이미지를 디스플레이하는 전자 구성요소이다. 전자 디스플레이(152)는, 예를 들면, 액정 디스플레이 또는 유기 발광 다이오드 디스플레이일 수 있다. 전자 디스플레이(152)는 사용자가 투시할 수 있게 하는 투명 디스플레이일 수 있다. 일부 실시예들에서, 머리 착용 디스플레이(130)가 사용자에 의해 착용될 때, 전자 디스플레이(152)는 사용자의 안구들에 근접하게(예를 들어, 3인치(7.62cm) 미만) 위치된다. 일 양상에서, 전자 디스플레이(152)는 이미지 렌더러(150)에 의해 생성된 이미지에 따라 사용자의 안구들을 향해 빛을 방출하거나 투사한다.
일부 실시예들에서, 렌즈(154)는 전자 디스플레이(152)로부터 수신된 광을 변경하는 기계적 구성요소이다. 렌즈(154)는 전자 디스플레이(152)로부터의 광을 확대할 수 있고, 광과 관련된 광학적 오류를 정정할 수 있다. 렌즈(154)는 프레넬 렌즈, 볼록 렌즈, 오목 렌즈, 필터, 또는 전자 디스플레이(152)로부터의 광을 변경하는 임의의 적절한 광학 구성요소일 수 있다. 렌즈(154)를 통해, 전자 디스플레이(152)로부터의 광은, 전자 디스플레이(152)가 눈에 매우 근접함에도 불구하고 사용자가 전자 디스플레이(152)에 의해 디스플레이되는 이미지를 볼 수 있도록, 동공들에 도달할 수 있다.
일부 실시예들에서, 보상기(156)는 임의의 왜곡들 또는 수차들을 보상하기 위해 보상을 수행하는 전자 구성요소 또는 전자 구성요소와 소프트웨어 구성요소의 조합을 포함한다. 일 양상에서, 렌즈(154)는 색수차, 핀-쿠션 왜곡, 배럴 왜곡, 등과 같은 광학 수차를 초래한다. 보상기(156)는 이미지 렌더러(150)로부터 렌더링될 이미지에 적용하여 렌즈(154)에 의해 야기된 왜곡들을 보상하기 위한 보상(예를 들어, 전치왜곡)을 결정할 수 있고, 결정된 보상을 이미지 렌더러(150)로부터의 이미지에 적용할 수 있다. 보상기(156)는 사전 왜곡된 이미지를 전자 디스플레이(152)에 제공할 수 있다.
일부 실시예들에서, 콘솔(102)은 머리 착용 디스플레이(130)에 렌더링될 콘텐츠를 제공하는 전자 구성요소 또는 전자 구성요소와 소프트웨어 구성요소의 조합이다. 일 양상에서, 콘솔(102)은 통신 인터페이스(118) 및 콘텐츠 제공자(128)를 포함한다. 이들 구성요소들은, 머리 착용 디스플레이(130)의 위치 및 머리 착용 디스플레이(130)의 사용자의 응시 방향에 대응하는 인공 현실의 뷰(예를 들어, 사용자의 FOV)를 결정하기 위하여 함께 동작할 수 있고, 결정된 뷰에 대응하는 인공 현실의 이미지를 나타내는 이미지 데이터를 생성할 수 있다. 또한 이들 구성요소들은 이미지와 관련된 추가 데이터를 생성하기 위하여 함께 동작할 수 있다. 추가 데이터는 인공 현실의 이미지가 아닌 인공 현실을 제시하거나 렌더링하는 것과 관련된 정보일 수 있다. 추가 데이터의 예들은, 손 모델 데이터, 물리적 공간에서 머리 착용 디스플레이(130)의 위치 및 방향을 가상 공간으로 변환하기 위한 매핑 정보(또는 SLAM(동시 위치설정 및 매핑) 데이터), 모션 벡터 정보, 깊이 정보, 에지 정보, 물체 정보, 등을 포함한다. 콘솔(102)은 인공 현실의 표현을 위해 이미지 데이터 및 추가 데이터를 머리 착용 디스플레이(130)에 제공할 수 있다. 다른 실시예들에서, 콘솔(102)은 도 1a에 도시된 것보다 더 많거나, 더 적거나, 또는 상이한 구성요소들을 포함한다. 일부 실시예들에서, 콘솔(102)은 머리 착용 디스플레이(130)의 일부로서 통합된다.
일부 실시예들에서, 통신 인터페이스(118)는 머리 착용 디스플레이(130)와 통신하는 전자 구성요소 또는 전자 구성요소 및 소프트웨어 구성요소의 조합이다. 통신 인터페이스(118)는 통신 링크(예를 들어, 무선 링크)를 통해 콘솔(102)의 통신 인터페이스(148)와 통신하기 위한, 통신 인터페이스(118)의 대응 구성요소일 수 있다. 통신 링크를 통해, 통신 인터페이스(118)는 머리 착용 디스플레이(130)의 결정된 위치 및/또는 방향, 사용자의 결정된 응시 방향, 및 손 추적 측정을 나타내는 데이터를 머리 착용 디스플레이(130)로부터 수신할 수 있다. 또한, 통신 링크를 통해, 통신 인터페이스(118)는 렌더링될 이미지를 설명하는 이미지 데이터 및 인공 현실의 이미지와 연관된 추가 데이터를 머리 착용 디스플레이(130)에 전송할 수 있다.
콘텐츠 제공자(128)는 머리 착용 디스플레이(130)의 위치 및/또는 방향에 따라 렌더링될 콘텐츠를 생성하는 구성요소를 포함하거나 이에 대응할 수 있다. 일부 실시예들에서, 콘텐츠 제공자(128)는 렌더링될 콘텐츠를 생성하기 위해, 머리 착용 디스플레이(130)의 사용자의 응시 방향, 및 손 추적 측정들에 기초한 인공 현실에서의 사용자 상호작용을 통합할 수 있다. 일 양상에서, 콘텐츠 제공자(128)는 머리 착용 디스플레이(130)의 위치 및/또는 방향에 따라 인공 현실의 뷰를 결정한다. 예를 들어, 콘텐츠 제공자(128)는 물리적 공간에서 머리 착용 디스플레이(130)의 위치를 인공 현실 공간 내의 위치로 매핑하고, 인공 현실 공간 내의 매핑된 위치로부터 매핑된 방향에 대응하는 방향을 따라 인공 현실 공간의 뷰를 결정한다. 콘텐츠 제공자(128)는 인공 현실 공간의 결정된 뷰의 이미지를 설명하는 이미지 데이터를 생성할 수 있고, 이미지 데이터를 통신 인터페이스(118)를 통해 머리 착용 디스플레이(130)로 전송할 수 있다. 또한, 콘텐츠 제공자(128)는 손 추적 측정에 따라 머리 착용 디스플레이(130) 사용자의 손에 대응하는 손 모델을 생성할 수 있고, 인공 현실 공간에서 손 모델의 모양, 위치 및 방향을 나타내는 손 모델 데이터를 생성할 수 있다. 일부 실시예들에서, 콘텐츠 제공자(128)는 이미지와 관련된 움직임 벡터 정보, 깊이 정보, 에지 정보, 물체 정보, 손 모델 데이터, 등을 포함하는 추가 데이터를 생성할 수 있고, 추가 데이터를 이미지 데이터와 함께 통신 인터페이스(118)를 통해 머리 착용 디스플레이(130)로 전송할 수 있다. 콘텐츠 제공자(128)는 이미지를 설명하는 이미지 데이터를 인코딩할 수 있고, 인코딩된 데이터를 머리 착용 디스플레이(130)에 전송할 수 있다. 일부 실시예들에서, 콘텐츠 제공자(128)는 이미지 데이터를 생성하고 이를 주기적으로(예를 들어, 11ms마다) 머리 착용 디스플레이(130)에 제공한다. 일 양상에서, 통신 인터페이스(118)는 도 2a 내지 도 4와 관련하여 후술되는 바와 같이 추가 데이터를 머리 착용 디스플레이(130)에 적응적으로 전송할 수 있다.
도 1b는 예시적인 실시예에 따른 머리 착용 디스플레이(130)의 도면(160)이다. 일부 실시예들에서, 머리 착용 디스플레이(130)는 전면 강성 몸체(162) 및 밴드(164)를 포함한다. 전면 강성 몸체(162)는 전자 디스플레이(152)(도 1b에 미도시), 렌즈(154)(도 1b에 미도시), 센서들(142), 안구 추적기들(144A, 144B), 통신 인터페이스(148), 및 이미지 렌더러(150)를 포함한다. 도 1b에 도시된 실시예에서, 통신 인터페이스(148), 이미지 렌더러(150) 및 센서들(142)은 전면 강성 몸체(162) 내에 위치하며, 사용자에게 보이지 않을 수 있다. 다른 실시예들에서, 머리 착용 디스플레이(130)는 도 1b에 도시된 것과 상이한 구성을 갖는다. 예를 들어, 통신 인터페이스(148), 이미지 렌더러(150), 안구 추적기들(144A, 144B) 및/또는 센서들(142)은 도 1b에 도시된 것과 상이한 위치들에 있을 수 있다.
이제 도 2a를 참조하면, 인터-스케줄링 알고리즘(126)의 도면(200)이 도시된다. 콘솔(102)은 콘솔(102)과 머리 착용 디스플레이(130) 사이의 세션에 대해 1차 링크(108) 또는 2차 링크(110)를 사용할지 여부를 결정하기 위해 인터-스케줄링 알고리즘(126)을 포함하거나 실행할 수 있다. 콘솔(102)은 1차 링크(108)의 링크 품질에 응답하여 1차 링크(108)와 2차 링크(110) 사이를 활성화 및/또는 스위칭할지 여부를 결정하기 위한 인터-스케줄링 알고리즘(126)을 포함하거나 실행할 수 있다.
인터-스케줄링 알고리즘(126)은 외부/제 1 결정 루프(202) 및 내부/제 2 결정 루프(204)를 갖는 2-단계 인터-링크 스위칭 및 스케줄링 프로세스를 포함할 수 있다. 외부/제 1 결정 루프(202)는 예를 들어 사용 사례 또는 사용 유형에 부분적으로 기초하여 1차 링크(108)와 2차 링크(110) 사이에서 결정을 내릴 수 있다. 일 실시예에서, 콘솔(102)은 전체 AR 경험을 위해 1차 링크(108)를 선택하고 최소 사용 사례를 위해 2차 링크(110)를 선택하기 위해 인터-스케줄링 알고리즘(126)의 외부 결정 루프(202)를 실행할 수 있다. 내부 결정 루프(204)는 1차 링크(108)와 2차 링크(110) 사이에서, 예를 들어 1차 링크(108)의 링크 품질(예를 들어, 신호 대 잡음비 레벨)에 부분적으로 기초하여 어느 링크를 사용하거나 어느 링크로 스위칭할지를 결정할 수 있다. 일 실시예에서, 콘솔(102)은 인터-스케줄링 알고리즘(126)의 내부 결정 루프(204)를 실행하여, 1차 링크(108)의 링크 품질을 나타내는 1차 링크(108)의 하나 이상의 측정값들에 응답하여, 2차 링크(110)를 활성화할지 및/또는 트래픽을 1차 링크(108)에서 2차 링크(110)로 전환시킬지 여부를 결정할 수 있다.
이제 도 2b를 참조하면, 인터-스케줄링 알고리즘(126)의 내부 결정 루프(204)의 하나의 예시적인 실시예 도중에 사용된 다수의 임계값들의 도면(250)이 도시된다. 일부 실시예들에서, 내부 결정 루프(204)는 1차 링크(108)의 품질을 모니터링하고 검증하기 위해 다수의 임계값들(120)(예를 들어, 품질 임계값들, 신호 대 잡음비 임계값들)을 사용하거나 적용할 수 있다. 콘솔(102)은, 1차 링크(108)의 하나 이상의 측정값들(112)을 기반으로 및/또는 포함하는 명령(들) 또는 메시지(들)를 인터-스케줄링 알고리즘(126)에 제공하거나 통신함으로써, 내부 결정 루프(204)를 실행할 수 있다. 일부 실시예들에서, 인터-스케줄링 알고리즘(126)은 1차 링크(108)의 측정값들(112)에 하나 이상의 임계값들(120)을 적용함으로써 1차 링크(108)가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 현재 세션을 지원할 수 있는지 여부를 결정할 수 있다.
일부 실시예들에서, 내부 결정 루프(204)는 4개의 임계값들(120)을 포함할 수 있다. 예를 들어, 내부 결정 루프(204)는 제 1 임계값(120)(C1), 제 2 임계값(120)(C2), 제 3 임계값(120)(C3) 및 제 4 임계값(120)(C4)을 포함할 수 있다. 일부 실시예들에서, 제 1 임계값(120a)은 제 2 임계값(120) 및 제 3 임계값(120)보다 크고 제 4 임계값(120)보다 작은 품질 메트릭 또는 값/레벨에 대응할 수 있다. 콘솔(102)은 1차 링크(108)의 제 1 측정값(112)을 제 1 시간 기간에서 제 1 임계값(120)과 비교하여, 2차 링크(110)을 활성하할지의 여부를 결정할 수 있다. 제 2 임계값(120)은 제 1 임계값(120), 제 3 임계값(120) 및 제 4 임계값(120)보다 작은 품질 메트릭에 대응할 수 있다. 콘솔(102)은 1차 링크(108)의 제 2 측정값(112)을 제 2 시간 기간에 제 2 임계값(120)과 비교하여, 트래픽을 1차 링크(108)에서 2차 링크(110)로 전환시킬지 여부를 결정할 수 있다. 제 3 임계값(120)은 제 2 임계값(120)보다 크고 제 1 임계값(120) 및 제 4 임계값(120)보다 작은 품질 메트릭에 대응할 수 있다. 콘솔(102)은 1차 링크(108)의 제 3 측정값을 제 3 시간 기간에 제 3 임계값(120)과 비교하여, 트래픽을 2차 링크(110)에서 1차 링크(108)로 전환시킬지 여부를 결정할 수 있다. 제 4 임계값(120)은 제 1 임계값(120), 제 2 임계값(120) 및 제 3 임계값(120)보다 큰 품질 메트릭에 대응할 수 있다. 콘솔(102)은 1차 링크(108)의 제 4 측정값(112)을 제 4 시간 기간에 제 4 임계값(120)과 비교하여, 모든 트래픽을 1차 링크(108)로 전환시킬지 여부 및/또는 2차 링크(110)를 비활성화할지의 여부를 결정할 수 있다. 일부 실시예들에서, 내부 결정 루프(204)의 임계값들(120)의 수는 변할 수 있다. 예컨대, 내부 결정 루프(204)는 4개 미만의 임계값들(120) 또는 4개 초과의 임계값들(120)을 포함할 수 있다.
이제 도 3a 내지 도 3e를 참조하면, AR/VR 애플리케이션들을 위한 2차 링크를 위한 방법(300)이 도시되어 있다. 간략한 개요에서, 방법(300)은 1차 링크를 설정하는 단계(302), 사용 유형을 결정하는 단계(304), 링크 유형을 선택하는 단계(306), 링크 측정들을 수행하는 단계(310), 측정값을 제 1 임계값과 비교하는 단계(312), 1차 링크 상의 트래픽을 유지하는 단계(314), 2차 링크를 활성화하는 단계(316), 링크 측정을 수행하는 단계(318), 측정값을 제 2 임계값과 비교하는 단계(320), 1차 링크 상의 트래픽을 유지하는 단계(322), 트래픽을 2차 링크로 전환시키는 단계(324), 주기적인 측정을 수행하는 단계(326), 측정값을 제 3 임계값과 비교하는 단계(328), 2차 링크 상의 트래픽을 유지하는 단계(330), 결정된 간격으로 측정을 수행하는 단계(332), 후보 빔을 식별하는 단계(334), 결정된 시간 기간을 대기하는 단계(336), 링크의 측정을 수행하는 단계(338), 측정값을 제 4 임계값과 비교하는 단계(340), 1차 링크 상의 트래픽 유지하는 단계(342), 트래픽을 1차 링크로 전환시키는 단계(344), 및 2차 링크를 비활성화하는 단계(346) 중 하나 이상의 단계를 포함할 수 있다. 전술한 동작들 중 임의의 것은 본 명세서에 설명된 구성요소들 또는 디바이스들, 예를 들어 콘솔(102) 및/또는 머리 착용 디스플레이(130) 중 임의의 하나 이상에 의해 수행될 수 있다.
302를 참조하면, 일부 실시예들에서, 1차 링크(108)는 콘솔(102)과 머리 착용 디스플레이(130) 사이에 설정될 수 있다. 1차 링크(108)는 예를 들어 VR, AR, MR 경험 중 적어도 하나를 머리 착용 디스플레이(130)의 사용자에 제공하기 위해 콘솔(102) 또는 머리 착용 디스플레이(130)에 의해 설정될 수 있다. 1차 링크(108)는 콘솔(102)과 머리 착용 디스플레이(130) 사이에 설정된 하나 이상의 연결들, 세션들 또는 채널들을 포함할 수 있다. 1차 링크(108)는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 60GHz 주파수 연결(예를 들어, 60GHz WiFi, IEEE 802.11ay/ad)을 포함할 수 있지만 이에 국한되는 것은 아니다.
304를 참조하면, 일부 실시예들에서 사용 유형이 결정될 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 링크에 대한 사용 유형을 결정할 수 있다. 예를 들어, 콘솔(102)은 송신될 콘텐츠의 유형, 트래픽의 유형, 사용 사례 및/또는 사용자에게 제공될 VR/AR 경험의 유형을 결정할 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 1차 링크(108) 및/또는 2차 링크(110)의 속성들을 수집할 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 머리 착용 디스플레이(130)의 사용자의 특성들을 수집할 수 있다. 일부 실시예들에서, 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 특정 유형의 사용 또는 VR/AR 경험의 유형을 요청하는 사용자로부터 입력을 수신할 수 있다. 예를 들어, 사용자는 완전한 VR/AR 경험 또는 애플리케이션을 요청할 수 있거나, 사용자는 제한된 유형의 사용(예를 들어, 메시징, 시간 확인, 음성 통화 걸기/받기)을 요청할 수 있다.
306을 참조하면, 일부 실시예들에서 링크가 선택될 수 있다. 콘솔(102)은 예를 들어 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽 유형에 따라 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽에 대한 1차 링크(108) 또는 2차 링크(110)를 선택할 수 있다. 일부 실시예들에서, 사용 또는 트래픽 유형이 완전한 VR/AR 경험에 대응하거나 이를 포함하는 경우, 1차 링크(108)는 콘솔(102)과 머리 착용 디스플레이(130) 사이에서 트래픽을 운반하도록 선택될 수 있다. 사용 또는 트래픽의 유형이 최소 사용, 부분 VR/AR 경험 또는 전체 미만의 VR/AR 경험에 대응하거나 이를 포함하는 경우, 2차 링크(110)는 콘솔(102)과 머리 착용 디스플레이(130) 사이에서 트래픽을 운반하도록 선택될 수 있다. 일부 실시예들에서, 콘솔(102)은 인터-스케줄링 알고리즘(126)을 실행하여, 콘솔(102)과 머리 착용 디스플레이(130) 사이에서 트래픽(예를 들어, 데이터, 정보)을 송신하기 위해 1차 링크(108) 또는 2차 링크(110)를 사용할지 여부를 결정할 수 있다. 예를 들어, 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 하나 이상의 입력들(예를 들어, 사용 유형, 사용자, 트래픽 유형)을 인터-스케줄링 알고리즘에 제공할 수 있고, 인터-스케줄링 알고리즘을 실행하여, 사용의 특정 유형 및/또는 트래픽 유형에 대한 1차 링크(108) 또는 2차 링크(110)를 사용할지 여부를 결정할 수 있다. 예를 들어, 일부 실시예들에서, 방법(300)의 302 및 304는 인터-스케줄링 알고리즘(126)의 외부/제 1 결정 루프(202)에 대응할 수 있고, 방법(300)의 310-348은 인터-스케줄링 알고리즘(126)의 내부/제 2 결정 루프(204)에 대응할 수 있다.
콘솔(102) 및/또는 머리 착용 디스플레이(130)는 인터-스케줄링 알고리즘(126)의 외부 결정 루프(202)에 하나 이상의 입력들(예를 들어, 사용 유형, 사용자, 트래픽 유형)을 제공할 수 있고, 인터-스케줄링 알고리즘(126)을 실행하여 사용의 특정 유형을 위해 1차 링크(108) 또는 2차 링크(110)를 사용할지를 결정할 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 인터-스케줄링 알고리즘(126)의 내부/제 2 결정 루프(204)에 하나 이상의 입력들(예를 들어, 사용 유형, 사용자, 트래픽 유형)을 제공할 수 있고, 인터-스케줄링 알고리즘(126)을 실행하여, 1차 링크(108)의 링크 품질에 부분적으로 기초하여 1차 링크(108) 또는 2차 링크(110)를 사용할지를 결정할 수 있다. 일부 실시예들에서, 콘솔(102)은 인터-스케줄링 알고리즘(126)을 실행할 수 있고, 인터-스케줄링 알고리즘(126)의 실행에 응답하여 콘솔(102)과 머리 착용 디스플레이(130) 사이에서 트래픽(예를 들어, 데이터, 정보)을 전송하기 위해 1차 링크(108) 또는 2차 링크(110)를 선택할 수 있다.
310을 참조하면, 일부 실시예들에서 링크의 측정들이 수행될 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 1차 링크(108)의 측정들(112)을 수행할 수 있고, 콘솔(102)과 머리 착용 디스플레이(130) 사이의 1차 링크(108)의 메트릭(예를 들어, 품질 메트릭(124))을 결정할 수 있다. 측정들(112)은 1차 링크(108)의 상태 및/또는 품질을 모니터링하기 위해 제 1 시간 기간 또는 초기 시간 기간에 수행될 수 있다. 콘솔(102)은 1차 링크(108)가 활성(예를 들어, 턴온, 턴오프)인지를 결정하고/하거나, 1차 링크(108) 상의 트래픽의 현재 레벨을 결정하기 위하여, 1차 링크(108) 상에서 측정들(112)을 수행한다. 일부 실시예들에서, 콘솔(102)은 1차 링크(108) 상에서 측정들(112)을 수행하여, 1차 링크(108)의 신호 대 잡음비와 같은 하지만 이에 국한되지 않는 1차 링크(108)의 링크 품질을 결정할 수 있다.
312를 참조하면, 일부 실시예들에서, 측정값들(예를 들어, 측정된 품질 메트릭(들)의 값(들))은 제 1 임계값과 비교될 수 있다. 콘솔(102)은 1차 링크(108)의 측정값들(112)을 제 1 임계값(120)과 비교할 수 있다. 제 1 임계값(120)은 1차 링크(108)의 품질 메트릭(124)을 포함하거나 이에 대응할 수 있다. 예를 들어, 콘솔(102)은 1차 링크(108)의 품질이 임계값(120)보다 크거나 작은지를 결정할 수 있다. 제 1 임계값(120)은 2차 링크가 활성화되어야 하는지, 또는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽이 1차 링크(108)에 의해 지원될 수 있는지를 결정하는데 사용될 수 있다.
314를 참조하면, 일부 실시예들에서 트래픽은 1차 링크 상에서 유지될 수 있다. 콘솔(102)은 1차 링크(108)의 측정값들이 제 1 임계값(120)보다 크거나 높다고 결정할 수 있고, 1차 링크(108)의 품질이 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 지원하기에 충분히 강하다(예를 들어, 안정적이거나 양호)고 결정할 수 있다. 일부 실시예들에서, 콘솔(102)은 비교에 응답하여 신호 대 잡음비가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽(예를 들어, 현재 트래픽, 사용의 현재 유형)을 지원하기에 충분히 높거나 충분히 강하다고 결정할 수 있고, 1차 링크(108) 상의 트래픽을 유지할 수 있다. 일부 실시예들에서, 콘솔(102)은 2차 링크(110)를 비활성화되거나 턴오프된 상태로 유지할 수 있다. 예를 들어, 콘솔(102)은 1차 링크(108)의 측정값들(112)이 제 1 임계값(120)보다 클 때 2차 링크를 턴오프하거나 유지하지 않을 수 있다. 방법(300)은 (310)으로 복귀/진행할 수 있고, 콘솔(102)은 1차 링크(108)의 품질 또는 상태를 계속 모니터링하기 위해 1차 링크(108)의 후속 또는 추가 측정들을 수행할 수 있다.
316을 참조하면, 일부 실시예들에서, 2차 링크가 활성화될 수 있다. 콘솔(102)은 제 1 측정값(112)이 제 1 임계값(120) 미만인 것에 응답하여 콘솔(102)과 머리 착용 디스플레이(130) 사이의 2차 링크(110)를 활성화할 수 있다. 콘솔(102)은 1차 링크(108)의 측정값이 더 작다고 결정할 수 있고, 1차 링크(108)의 품질이 감소하고 있어 1차 링크(108)가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 지원하기에 충분히 강하지 않을 수 있다고 결정할 수 있다. 예를 들어, 콘솔(102)은 1차 링크(108)가 머리 착용 디스플레이(130)의 사용자에 대한 지연들, 서비스 중지들 및/또는 실패들을 겪거나 야기하고 있다고 결정할 수 있다. 일부 실시예들에서, 콘솔(102)은 비교에 응답하여, 신호 대 잡음비가 제 1 임계값(또는 제 4 임계값(120)) 미만이고, 1차 링크(108)가 어려움을 겪고 있거나 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽(예를 들어, 현재 트래픽, 사용의 현재 유형)을 지원할 수 없다는 것을 결정할 수 있다. 콘솔(102)은 콘솔(102)과 머리 착용 디스플레이(130) 사이의 2차 링크(110)를 활성화할 수 있다. 일부 실시예들에서, 콘솔(102)은 2차 링크(110)를 구성할 수 있고, 2차 링크(110)가 활성화(예를 들어, 설정)되어 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 전달하거나 지원하지 않도록, 2차 링크(110)를 대기 상태로 배치시킬 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 2차 링크(110)가 활성화되었다는 표시 또는 메시지를 생성할 수 있거나/있고, 머리 착용 디스플레이(130)의 사용자에게 제공할 수 있다.
318을 참조하면, 일부 실시예들에서, 링크의 측정들이 수행될 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 1차 링크(108)의 상태 또는 품질을 계속 모니터링하기 위해 1차 링크(108)의 측정들(112)을 수행할 수 있다. 일부 실시예들에서, 콘솔(102)은 제 2 시간 기간에 또는 1차 링크(108)의 제 1 또는 초기 측정들(112)에 후속하여 측정들(112)을 수행할 수 있다. 콘솔(102)은 1차 링크(108)의 품질이 제 2 임계값(120)보다 크거나 작은지를 결정하기 위해 1차 링크(108) 상의 측정들(112)을 수행할 수 있다.
320을 참조하면, 일부 실시예들에서, 측정들은 제 2 임계값과 비교될 수 있다. 콘솔(102)은 콘솔(102)과 머리 착용 디스플레이(130) 사이의 1차 링크(108)의 제 2 측정값(112)(예를 들어, 측정된 품질 메트릭(들)의 값(들))이 제 2 임계값(120)보다 작은지 여부를 결정할 수 있다. 제 2 임계값(120)은 제 1 임계값(120)보다 작을 수 있다. 제 2 임계값(120)은 제 1 임계값(120)보다 작은 값 또는 레벨(예를 들어, 1차 링크(108)의 품질 메트릭(124))을 포함하거나 이에 대응할 수 있다. 예를 들어, 콘솔(102)은 제 2 임계값(120)을 사용하여 1차 링크(108)의 품질이 제 1 측정값로부터 감소했는지를 결정할 수 있다. 일부 실시예들에서, 제 2 임계값(120)은 트래픽이 1차 링크(108)에서 2차 링크(110)로 전환되어야 하는지를 결정하는데 사용될 수 있다.
322를 참조하면, 일부 실시예들에서 트래픽은 1차 링크 상에서 유지될 수 있다. 콘솔(102)은 제 2 측정값(112)이 제 2 임계값(120)보다 클 때 일차 링크(108) 상의 트래픽을 유지할 수 있다. 예를 들어, 콘솔(102)은 1차 링크(108)의 제 2 또는 후속 측정들(112)이 제 2 임계값(120)보다 크다고 결정할 수 있고, 1차 링크(108)의 품질이 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 지원할 수 있다고 결정할 수 있다. 콘솔(102)은 1차 링크(108) 상의 트래픽을 유지할 수 있고, 2차 링크(110)를 대기 상태(예를 들어, 활성, 트래픽 없음)로 유지할 수 있다. 일부 실시예들에서, 콘솔(102)은 비교에 응답하여, 신호 대 잡음비가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽(예를 들어, 현재 트래픽, 사용의 현재 유형)을 지원하기에 충분히 높거나 강하다고 결정할 수 있고, 2차 링크(110)를 대기 상태로 유지할 수 있다. 방법(300)은 (318)로 복귀할 수 있고, 콘솔(102)은 1차 링크(108)의 품질 또는 상태를 계속 모니터링하기 위해 1차 링크(108)의 후속 또는 추가 측정들을 수행할 수 있다.
324를 참조하면, 일부 실시예들에서 트래픽은 2차 링크로 전환될 수 있다. 콘솔(102)은 제 2 측정값(112)이 제 2 임계값(120)보다 작을 때 1차 링크(108) 상의 트래픽을 활성화된 2차 링크(110)로 전환시킬 수 있다. 콘솔(102)은 1차 링크(108)의 측정값들이 제 2 임계치(120)보다 작다고 결정할 수 있고, 1차 링크(108)의 품질이 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 지원하기에 충분히 강하지 않다(예를 들어, 안정적이고 양호함)고 결정할 수 있다. 일부 실시예들에서, 콘솔(102)은 비교에 응답하여, 신호 대 잡음비가 제 2 임계값(120) 미만이라고 결정할 수 있고, 1차 링크(108)가 어려움을 겪고 있거나, 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽(예를 들어, 현재 트래픽, 사용의 현재 유형)을 지원할 수 없다고 결정할 수 있다. 콘솔(102)은 콘솔(102)과 머리 착용 디스플레이(130) 사이에서 1차 링크(108)에서 2차 링크(110)로 트래픽의 전환 또는 이동을 시작할 수 있다. 콘솔(102)은 일부 실시예들에서 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽의 일부 또는 전부를 2차 링크로 전환시킬 수 있다. 예를 들어, 콘솔(102)은 2차 링크(110)를 사용하여, 비교 이후 수신된 콘솔(102)과 2차 링크(110) 사이의 후속 데이터 및 정보를 송신할 수 있다. 콘솔(102)은 예를 들어 트래픽의 일부(예를 들어, 절반, 결정된 백분율)를 2차 링크(110)로 전환 또는 이동시켜, 비교 후에 수신된 콘솔(102)과 머리 착용 디스플레이(130) 사이의 후속 데이터 및 정보를 송신할 수 있다. 일부 실시예들에서, 콘솔(102)은 제 2 측정값(112)이 제 2 임계값(120)보다 작은 것에 응답하여 콘솔(102)과 머리 착용 디스플레이(130) 사이의 모든 트래픽을 2차 링크(110)로 전환시킬 수 있다. 콘솔(102)은 머리 착용 디스플레이(130)로 하여금 2차 링크(110)를 사용하여 데이터를 송신하도록 알리거나 지시하기 위해, 표시, 메시지 또는 명령을 머리 착용 디스플레이(130)에 제공할 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 트래픽이 1차 링크(108)로부터 2차 링크(110)로 이동되었거나, 전환되고 있거나, 전환될 것이라는 표시 또는 메시지를 생성하여 머리 착용 디스플레이(130)의 사용자에게 제공할 수 있다.
이제 326을 참조하면, 일부 실시예들에서, 1차 링크의 주기적 측정들이 수행될 수 있다. 콘솔(102)은 제 2 측정값(112)이 제 2 임계값(120) 미만인 것에 응답하여, 제 1 결정된 간격들(122)로 1차 링크(108)의 측정들(112)을 수행하거나 주기적 측정들(112)을 수행할 수 있다. 일부 실시예들에서, 콘솔(102)은 1차 링크(108)의 품질이 증가할 때를 결정하기 위해 1차 링크(108)에 대한 주기적인 측정들을 수행함으로써, 1차 링크(108)를 모니터링할 수 있다. 측정들(112)은 결정된 간격들 또는 시간 기간들로 수행될 수 있다. 주기적 측정들(112)은 처음 2개의 측정들과 후속 측정들 사이의 시간 길이가 동일하도록 균일하게 이격되거나 규칙적으로 발생하는 간격들에서 수행될 수 있다. 일부 실시예들에서, 콘솔(102)은 이전 측정(112)에서 1차 링크(108)의 신호 대 잡음비에 부분적으로 기초하여 측정들(112) 사이의 길이 또는 시간(예를 들어, 제 1 측정과 제 2 측정 사이의 시간)을 결정할 수 있다. 예를 들어, 콘솔(102)이 1차 링크(108)의 품질이 증가하고 있거나/있고 임계값(120)으로부터 결정된 거리 내에 있다고 결정하는 경우, 콘솔(102)은 빈도를 증가시키거나(예를 들어, 더 자주), 측정들(112) 사이의 시간 길이를 감소시킬 수 있다. 일부 실시예들에서, 콘솔(102)이 1차 링크(108)의 품질이 감소하고 있거나/있고, 임계값(120)으로부터 결정된 거리 밖에 있다고 결정하는 경우, 콘솔(102)은 빈도를 감소시키거나(예를 들어, 덜 자주), 측정들(112) 사이의 시간 길이를 증가시킬 수 있다.
이제 328을 참조하면, 일부 실시예들에서, 측정들(112)은 제 3 임계값(120)과 비교될 수 있다. 콘솔(102)은 1차 링크(108)의 제 3 또는 후속 측정(112)이 제 3 임계값(120)보다 크거나 작은지를 결정할 수 있다. 일부 실시예들에서, 제 3 임계값(120)은 제 1 임계값(120)보다 작을 수 있고, 제 2 임계값(120)보다 클 수 있다. 제 3 임계값(120)은 1차 링크(108)의 품질이 증가하고 있거나(예를 들어, 제 3 임계값(120)보다 작을 때), 감소하고 있음(예를 들어, 제 3 임계값(120)보다 클 때)을 나타내는 1차 링크(108)의 품질 메트릭(124)을 포함하거나 이에 대응할 수 있다. 일부 실시예들에서, 콘솔(102)은 트래픽이 1차 링크(108)로 다시 전환될 수 있는지 또는 트래픽이 2차 링크(110) 상에서 유지되어야 하는지를 결정하기 위해 제 3 임계값(120)을 사용할 수 있다.
330을 참조하면, 일부 실시예들에서, 트래픽은 2차 링크 상에서 유지될 수 있다. 콘솔(102)은 1차 링크(108)의 제 3 또는 후속 측정들(112)이 제 3 임계값(120)보다 작다고 결정할 수 있고, 1차 링크(108)의 품질이 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 지원할 수 없다고 결정할 수 있다. 콘솔(102)은 예를 들어 결정에 응답하여 2차 링크(110) 상의 트래픽을 유지할 수 있다. 일부 실시예들에서, 콘솔(102)은 비교에 응답하여 1차 링크(108)의 신호 대 잡음비가 제 3 임계값(120)보다 작다고 결정할 수 있다. 콘솔(102)은 제 2 측정값이 제 2 임계값보다 작은 후 제 3 측정(112)에 응답하여, 제 2 결정된 간격들(122)로 1차 링크(108)의 추가 측정들을 수행할 수 있다. 제 2 결정된 간격들(122)은 제 1 결정된 간격들(122) 각각보다 클 수 있다(예컨대, 측정들 사이의 긴 지속시간). 예를 들어, 방법(300)은 (326)으로 복귀/진행할 수 있고, 콘솔(102)은 1차 링크(108)의 품질 또는 상태를 계속 모니터링하기 위해 1차 링크(108)의 후속 또는 추가 측정들을 수행할 수 있다.
이제 332를 참조하면, 일부 실시예들에서, 1차 링크의 측정들은 결정된 간격들에서 수행될 수 있다. 콘솔(102)은 1차 링크(108)의 제 3 측정값(112)이 제 3 임계값(120)보다 크다고 결정할 수 있다. 제 3 임계값(120)은 제 2 임계값(120)보다 크고 제 1 임계값(120)보다 작을 수 있다. 예를 들어, 콘솔(102)은 비교에 응답하여, 1차 링크(108)의 제 3 또는 후속 측정(112)이 제 3 임계값보다 크다는 것과, 1차 링크(108)의 품질이 제 2 또는 이전 측정(112) 이후 개선 또는 증가되었다는 것을 결정할 수 있다. 콘솔(102)은 결정된 간격들(122)로 1차 링크(108)의 측정들(112)의 수행을 시작할 수 있다. 예를 들어, 일부 실시예들에서 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 결정된 간격들에서 깨어나서, 1차 링크(108)의 측정을 수행할 수 있다.
결정된 간격들(122)은 동일하거나 수정될 수 있다. 일부 실시예들에서, 결정된 간격들(122)은 처음 2개의 측정들(112)과 후속 측정들(122) 사이의 시간 길이가 동일하도록 동일할 수 있다. 일부 실시예들에서, 콘솔(102)은 제 1 시간 기간 동안 제 1 결정된 간격들(122)로, 제 2 또는 후속 시간 기간 동안 제 2 결정된 간격들(122)로 측정들을 수행할 수 있다. 제 1 결정된 간격들(122)은 제 2 결정된 간격들(122)과 상이할 수 있다(예를 들어, 더 적은 시간, 더 많은 시간). 콘솔(102)은 이전 측정(112)의 1차 링크(108)의 신호 대 잡음비에 부분적으로 기초하여 결정된 간격(122)의 길이를 결정할 수 있다. 예를 들어, 콘솔(102)이 1차 링크(108)의 품질이 증가하고 있거나/있고, 임계값(120)을부터 결저왼 거리 내에 있다고 결정하는 경우, 콘솔(102)은 측정들(112) 사이의 빈도를 증가시키거나(예를 들어, 더 자주), 시간 길이를 감소시킬 수 있다. 일부 실시예들에서, 콘솔(102)이 1차 링크(108)의 품질이 감소하고 있거나/있고, 임계값(120)으로부터 결정된 거리 밖에 있다고 결정하는 경우, 콘솔(102)은 측정들(112) 사이의 빈도를 감소시키거나(예, 덜 자주), 시간 길이를 증가시킬 수 있다. 콘솔(102)은 결정된 간격들(122)에 대한 시간 길이를 결정하기 위해 지수 백오프를 사용하거나 적용할 수 있다. 예를 들어, 콘솔(102)은 제 1 결정된 간격(122)이 제 2의 후속 간격들(122)과 상이하도록, 1차 링크(108)의 측정들(112)이 발생하는 속도 또는 빈도를 배수적으로 감소(또는 증가)시킬 수 있다. 콘솔(102)은 1차 링크(108)의 신호 대 잡음비가 결정된 간격들(122)에서 측정들(112) 동안 제 3 임계값(120)보다 큰 지의 여부를 결정할 수 있다. 콘솔(102)은 1차 링크(108)가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 세션을 지원할 준비가 되었는지, 또는 제 3 임계값(120)보다 큰 제 3 측정값(112)이 잘못된 또는 부정확한 측정값(112)에 대응하는지를 결정하기 위해, 결정된 간격들(122)로 측정들(112)을 행함으로써 1차 링크(108)를 모니터링할 수 있다.
334를 참조하면, 일부 실시예들에서 후보 빔이 식별될 수 있다. 콘솔(102)은 1차 링크(108)의 제 3 또는 후속 측정(112)이 제 3 임계값(120)보다 크다고 결정할 수 있고, 1차 링크(108)에 대해 설정하거나 사용할 후보 빔(114)을 식별할 수 있다. 후보 빔(114)은 적어도 제 3 임계값(120)보다 큰 신호 대 잡음비를 갖는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 적어도 하나의 빔 또는 신호 경로에 대응할 수 있다. 일부 실시예들에서, 콘솔(102)은 제 3 임계값(120)보다 큰 신호 대 잡음 비를 갖는 복수의 빔들(114) 중 가장 높은 신호 대 잡음비를 갖는 적어도 하나의 빔(114)을 선택할 수 있다. 콘솔(102)은 후보 빔(114)을 사용하여 연결의 설정을 시도할 수 있다.
336을 참조하면, 일부 실시예들에서 후보 빔을 사용한 연결은 (예를 들어, 불안정한 연결, 변경된 조건들, 이탈된 패킷들 및/또는 기타로 인해 트래픽을 적절히 지원하는데) 실패할 수 있다. 콘솔(102)은 후보 빔(114)의 실패를 결정할 수 있고, 1차 링크(108)에 대한 제 2 후보 빔(114)에 대한 검색을 중지하기 위해 결정된 기간을 개시할 수 있다. 예를 들어, 콘솔(102)은 후보 빔(114)을 사용하여 연결을 설정하려고 시도할 수 있고, 연결이 실패하거나, 빔(114)이 1차 링크(108)를 지원하지 못할 수 있다. 콘솔(102)은 후보 빔(114)이 1차 링크(108)를 지원할 수 없다는 것, 및/또는 제 3 임계값(120)보다 큰 제 3 측정값(112)이 잘못된 또는 부정확한 측정(112)에 대응한다는 것을 결정할 수 있다. 콘솔(102)은 (예를 들어, 금지된 시간 기간에 대응하는) 후속 측정들(112)을 수행하기 위해 결정된 시간 기간을 결정할 수 있거나, 이를 대기하도록 구성될 수 있다. 결정된 시간 기간 또는 대기 기간의 길이는 변경될 수 있고, 1차 링크(108)의 하나 이상의 측정값들(112)에 부분적으로 기초하여 선택될 수 있다. 콘솔(102)은 결정된 시간 기간(예를 들어, 대기 기간) 동안의 시간 길이 또는 지속 시간을 선택할 수 있고, 결정된 시간 기간 동안 1차 링크(108)의 측정들(112)의 수행을 중지할 수 있다. 결정된 시간 기간이 끝나거나 완료될 때, 콘솔(102)은 (332)로 복귀/진행할 수 있고, 결정된 간격들(122)로 측정들(112)을 수행할 수 있다.
콘솔(102)은 1차 링크(108)에 대한 후보 빔(114)을 사용하여 연결을 설정할 수 있다. 일부 실시예들에서, 콘솔(102)은, 콘솔(102)과 머리 착용 디스플레이(130) 사이의 1차 링크(108)를 재시작 및/또는 재구성(예를 들어, 속성을 재구성)하기 위하여, 빔(114) 또는 신호 경로를 사용할 수 있다. 예를 들어, 콘솔(102)은 빔(114) 또는 신호 경로를 사용하여 콘솔(102)과 머리 착용 디스플레이(130) 사이의 1차 링크(108)를 재설정 또는 재연결하기 위하여 1차 링크(108)의 하나 이상의 속성들을 수정할 수 있다.
콘솔(102)은 제 3 측정값(112)이 제 3 임계값(120)보다 큰 것에 응답하여 2차 링크(110) 상의 트래픽을 1차 링크(108)로 전환시킬 수 있다. 예를 들어, 콘솔(102)은 1차 링크(108)가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 사용자 세션을 지원할 수 있다고 결정할 수 있고, 2차 링크(110)로부터 1차 링크(108)로 트래픽의 전환을 시작할 수 있다. 제 3 또는 후속 측정값(112)이 제 3 임계값(120)보다 클 때, 콘솔(102)은 2차 링크(110) 상의 트래픽을 1차 링크(108)로 전환시킬 수 있다. 콘솔(102)은 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽의 일부 또는 전부를 1차 링크(108)로 이동시킬 수 있다. 예를 들어, 콘솔(102)은 1차 링크(108)를 사용하여 콘솔(102)과 머리 착용 디스플레이(130) 사이의 후속 데이터 및 정보를 이동시킬 수 있다. 콘솔(102)은 트래픽의 일부(예를 들어, 절반, 결정된 백분율)를 1차 링크(108)로 전환 또는 이동시켜, 콘솔(102)과 머리 착용 디스플레이(130) 사이의 후속 데이터 및 정보를 송신할 수 있다.
338을 참조하면, 일부 실시예들에서, 링크의 측정들이 수행될 수 있다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 1차 링크(108)의 상태 또는 품질을 계속 모니터링하기 위해 1차 링크(108)의 측정들(112)을 수행할 수 있다. 일부 실시예들에서, 콘솔(102)은 제 4 시간 기간에, 또는 1차 링크(108)의 제 3 또는 이전 측정들(112)에 후속하여, 측정들(112)을 수행할 수 있다. 콘솔(102)은 1차 링크(108)의 품질이 제 4 임계값(120)보다 크거나 작은지를 결정하기 위해, 1차 링크(108)에 대한 측정들(112)을 수행할 수 있다.
340을 참조하면, 일부 실시예들에서, 측정값들은 제 4 임계값과 비교될 수 있다. 콘솔(102)은 콘솔(102)과 머리 착용 디스플레이(130) 사이의 1차 링크(108)의 제 4 또는 후속 측정값(112)이 제 4 임계값(120)보다 크거나 작은지를 결정할 수 있다. 일부 실시예들에서, 제 4 임계값(120)은 제 1, 제 2 및 제 3 임계값들(120)보다 클 수 있다. 제 4 임계값(120)은 제 1 임계값(120)보다 큰 값 또는 레벨(예를 들어, 1차 링크(108)의 품질 메트릭(124))을 포함하거나 이에 대응할 수 있다. 일부 실시예들에서, 제 4 임계값(120)은 2차 링크(110)가 비활성화되거나 턴오프될 수 있는지를 결정하는데 사용될 수 있다.
342를 참조하면, 일부 실시예들에서 트래픽은 2차 링크(108) 상에서 유지될 수 있다. 콘솔(102)은 1차 링크(108)의 제 4 또는 후속 측정값(112)이 제 4 임계값(120)보다 작다고 결정할 수 있다. 일부 실시예들에서, 콘솔(102)은 제 4 시간 기간에서 1차 링크(108)의 신호 대 잡음비가 제 4 임계값(120)보다 작다고 결정할 수 있다. 콘솔(102)은 (예를 들어, 결정에 응답하여) 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 2차 링크(110) 상에서 유지할 수 있다. 일부 실시예들에서, 콘솔(102)은 (예를 들어, 결정에 응답하여) 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽의 일부를 1차 링크(108) 상에서 유지할 수 있고, 2차 링크(110)를 대기 상태로 유지할 수 있다.
344를 참조하면, 일부 실시예들에서 트래픽은 1차 링크(108)로 전환될 수 있다. 콘솔(102)은 1차 링크(108)의 제 4 또는 후속 측정값(112)이 제 4 임계값(120)보다 크다고 결정할 수 있다. 일부 실시예들에서, 콘솔(102)은 제 4 시간 기간에서 1차 링크(108)의 신호 대 잡음비가 제 4 임계값(120)보다 크다고 결정할 수 있다. 콘솔(102)은 임의의 트래픽이 2차 링크(110)에 의해 여전히 지원되고 있는지를 결정할 수 있고, 1차 링크(108)가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 하나 이상의 사용자 세션을 완전히 지원하도록, 모든 트래픽을 1차 링크(108)로 전환시킬 수 있다. 콘솔(102)은 1차 링크(108)의 사용을 중지하라는 지시, 메시지 또는 명령을 머리 착용 디스플레이(130)에 전송할 수 있다.
346을 참조하면, 일부 실시예들에서, 2차 링크가 비활성화될 수 있다. 콘솔(102)은 제 4 측정값(112)이 제 4 임계값(120)보다 큰 것에 응답하여 2차 링크(110)를 비활성화할 수 있다. 제 4 임계값(120)은 제 1 임계값(120)보다 클 수 있다. 일부 실시예들에서, 콘솔(102)은 콘솔(102)과 머리 착용 디스플레이(130) 사이의 2차 링크(110)를 턴-오프 또는 비활성화(예를 들어, 연결해제, 설정해제)시킬 수 있다. 콘솔(102)은 2차 링크(110)가 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 더 이상 지원하지 않는지 확인 또는 검증할 수 있고, 2차 링크(110)를 턴-오프시킬 수 있다. 일부 실시예들에서, 콘솔(102)은 2차 링크(110)의 상태를 대기 상태에서 비활성화 상태로 변경할 수 있고, 2차 링크(110)는 콘솔(102)과 머리 착용 디스플레이(130) 사이의 트래픽을 송신하는 것이 더 이상 가능하지 않게 된다. 콘솔(102) 및/또는 머리 착용 디스플레이(130)는 2차 링크(110)가 비활성화 또는 턴-오프된 것에 대한 표시 또는 메시지를 생성하여, 머리 착용 디스플레이(130)의 사용자에게 제공할 수 있다. 방법(300)은 콘솔(102)과 머리 착용 디스플레이(130) 사이의 하나 이상의 사용자 세션들 동안 1차 링크(108)의 품질을 계속 모니터링하기 위해 (304)로 복귀할 수 있다.
B. 컴퓨팅 시스템
본 명세서에 설명된 다양한 동작들은 컴퓨터 시스템들 상에서 구현될 수 있다. 도 4는 본 개시사항을 구현하는데 사용 가능한 대표적인 컴퓨팅 시스템(414)의 블록도를 도시한다. 일부 실시예들에서, 도 1a 및 도 1b의 콘솔(102) 및 머리 착용 디스플레이(130)는 컴퓨팅 시스템(414)에 의해 구현된다. 컴퓨팅 시스템(414)은 예를 들어 스마트폰, 다른 모바일 폰, 태블릿 컴퓨터, 웨어러블 컴퓨팅 디바이스(예를 들어, 스마트 워치, 안경, 머리 착용 디스플레이), 데스크톱 컴퓨터, 랩톱 컴퓨터와 같은 소비자 디바이스로서 구현될 수 있거나, 또는 분산 컴퓨팅 디바이스들로 구현된다. 컴퓨팅 시스템(414)은 VR, AR, MR 경험을 제공하도록 구현될 수 있다. 일부 실시예들에서, 컴퓨팅 시스템(414)은 프로세서들(416), 저장 디바이스(418), 네트워크 인터페이스(420), 사용자 입력 디바이스(422), 및 사용자 출력 디바이스(424)와 같은 종래의 컴퓨터 구성요소들을 포함할 수 있다.
네트워크 인터페이스(420)는 원격 서버 시스템의 WAN 인터페이스가 또한 연결되는 광역 네트워크(예를 들어, 인터넷)에 대한 연결을 제공할 수 있다. 네트워크 인터페이스(420)는 유선 인터페이스(예를 들어, 이더넷) 및/또는 Wi-Fi, 블루투스, 또는 셀룰러 데이터 네트워크 표준들(예를 들어, 3G, 4G, 5G, 60GHz, LTE, 등)과 같은 다양한 RF 데이터 통신 표준들을 구현하는 무선 인터페이스를 포함할 수 있다.
사용자 입력 디바이스(422)는 사용자가 컴퓨팅 시스템(414)에 신호들을 제공할 수 있게 하는 임의의 디바이스(또는 디바이스들)를 포함할 수 있고; 컴퓨팅 시스템(414)은 신호들을 특정 사용자 요청들 또는 정보를 나타내는 것으로 해석할 수 있다. 사용자 입력 디바이스(422)는 키보드, 터치 패드, 터치 스크린, 마우스 또는 다른 포인팅 디바이스, 스크롤 휠, 클릭 휠, 다이얼, 버튼, 스위치, 키패드, 마이크, 센서들(예를 들어, 모션 센서, 안구 추적 센서, 등), 등 중 임의의 것 또는 모두를 포함할 수 있다.
사용자 출력 디바이스(424)는 컴퓨팅 시스템(414)이 사용자에게 정보를 제공할 수 있는 임의의 디바이스를 포함할 수 있다. 예를 들어, 사용자 출력 디바이스(424)는 컴퓨팅 시스템(414)에 의해 생성되거나 컴퓨팅 시스템(414)에 전달된 이미지를 표시하기 위한 디스플레이를 포함할 수 있다. 디스플레이는 다양한 이미지 생성 기술들, 예를 들어 액정 디스플레이(LCD), 유기 발광 다이오드(OLED)를 포함하는 발광 다이오드(LED), 프로젝션 시스템, 음극선관(CRT), 등을 지원 전자기기들(예를 들어, 디지털-아날로그 또는 아날로그-디지털 변환기들, 신호 프로세서들, 등)과 함께 통합할 수 있다. 입력 및 출력 디바이스로 기능하는 터치스크린과 같은 디바이스가 사용될 수 있다. 출력 디바이스(424)는 디스플레이에 추가하여 또는 디스플레이 대신에 제공될 수 있다. 예들은, 표시 등들, 스피커들, 촉각 "디스플레이" 디바이스들, 프린터들, 등을 포함한다.
일부 구현들은 컴퓨터 판독 가능한 저장 매체에 컴퓨터 프로그램 명령들을 저장하는 마이크로프로세서들, 저장 장치 및 메모리와 같은 전자 구성요소들을 포함한다. 본 명세서에 기술된 많은 특징들은 컴퓨터 판독 가능한 저장 매체에 인코딩된 프로그램 명령들의 세트로 지정된 프로세스들로 구현될 수 있다. 이들 프로그램 명령들이 하나 이상의 프로세서들에 의해 실행될 때, 이들은 프로세서들이 프로그램 명령들에 표시된 다양한 동작을 수행하게 한다. 프로그램 명령들 또는 컴퓨터 코드의 예들은, 컴파일러에 의해 생성된 것과 같은 기계 코드, 및 인터프리터를 사용하여 컴퓨터, 전자 구성요소 또는 마이크로프로세서에 의해 실행되는 상위-레벨의 코드를 포함하는 파일을 포함한다. 적절한 프로그래밍을 통해, 프로세서(416)는 서버 또는 클라이언트에 의해 수행되는 것으로 본 명세서에 설명된 임의의 기능, 또는 메시지 관리 서비스들과 연관된 다른 기능을 포함하여, 컴퓨팅 시스템(414)을 위한 다양한 기능을 제공할 수 있다.
컴퓨팅 시스템(414)은 예시적이라는 것, 및 변형들 및 수정들이 가능하다는 것이 이해될 것이다. 본 개시사항과 관련하여 사용되는 컴퓨터 시스템들은 본 명세서에 구체적으로 설명되지 않은 다른 능력들을 가질 수 있다. 또한, 컴퓨팅 시스템(414)이 특정 블록들을 참조하여 설명되지만, 이들 블록들은 설명의 편의를 위해 정의되고, 구성요소 부분들의 특정 물리적 배열을 의미하도록 의도되지 않음을 이해해야 한다. 예를 들어, 상이한 블록들은 동일한 시설, 동일한 서버 랙 또는 동일한 마더보드에 있을 수 있다. 또한, 블록들은 물리적으로 구별되는 구성요소들에 대응할 필요가 없다. 블록들은 예를 들어 프로세서를 프로그래밍하거나 적절한 제어 회로를 제공함으로써 다양한 동작들을 수행하도록 구성할 수 있고, 다양한 블록들은 초기 구성이 얻어지는 방법에 따라 재구성될 수도 있거나, 그렇지 않을 수도 있다. 본 개시사항의 구현들은 회로 및 소프트웨어의 임의의 조합을 사용하여 구현된 전자 디바이스들을 포함하는 다양한 장치에서 실현될 수 있다.
현재 일부 예시적인 구현들을 설명했지만, 전술한 내용은 예시적인 것이며 제한적이지 않고, 예로서 제공되었음이 명백하다. 특히, 본 명세서에 제공된 많은 예들이 방법 행위들 또는 시스템 요소들의 특정 조합들을 수반하지만, 그러한 행위들 및 그러한 요소들은 동일한 목적을 달성하기 위해 다른 방식으로 결합될 수 있다. 하나의 구현과 관련하여 논의된 행위들, 요소들 및 특징들은 다른 구현들 또는 구현들에서 유사한 역할로부터 제외되도록 의도되는 것은 아니다.
본 명세서에 개시된 실시예들과 관련하여 설명된 다양한 프로세스들, 동작들, 예시적인 로직들, 로직 블록들, 모듈들 및 회로들을 구현하기 위해 사용되는 하드웨어 및 데이터 처리 구성요소들은 범용 단일- 또는 다중-칩 프로세서로, 디지털 신호 프로세서(DSP), 주문형 집적 회로(ASIC), 필드 프로그램 가능 게이트 어레이(FPGA) 또는 다른 프로그램 가능 로직 디바이스, 이산 게이트 또는 트랜지스터 로직, 이산 하드웨어 구성요소들 또는 본 명세서에 기술된 기능들을 수행하도록 설계된 이들의 임의의 조합으로 구현되거나 수행될 수 있다. 범용 프로세서는 마이크로프로세서, 또는 임의의 기존 프로세서, 컨트롤러, 마이크로컨트롤러 또는 상태 머신일 수 있다. 프로세서는 또한 DSP와 마이크로프로세서의 조합, 복수의 마이크로프로세서들, DSP 코어와 결합된 하나 이상의 마이크로프로세서들, 또는 임의의 다른 그러한 구성과 같은 컴퓨팅 디바이스들의 조합으로서 구현될 수 있다. 일부 실시예들에서, 특정 프로세스들 및 방법들은 주어진 기능에 특정한 회로에 의해 수행될 수 있다. 메모리(예를 들어, 메모리, 메모리 유닛, 저장 디바이스, 등)는 데이터 및/또는 컴퓨터 코드를 저장하여, 본 개시사항에 기술된 다양한 프로세스들, 계층들 및 모듈들을 완료 또는 용이하게 하기 위한 하나 이상의 디바이스들(예를 들어, RAM, ROM, 플래시 메모리, 하드 디스크 스토리지, 등)을 포함할 수 있다. 메모리는 휘발성 메모리 또는 비휘발성 메모리일 수 있거나, 이를 포함할 수 있고, 본 개시사항에 설명된 다양한 활동들 및 정보 구조들을 지원하기 위한 데이터베이스 구성요소들, 목적 코드 구성요소들, 스크립트 구성요소들, 또는 임의의 다른 유형의 정보 구조를 포함할 수 있다. 예시적인 실시예에 따르면, 메모리는 처리 회로를 통해 프로세서에 통신 가능하게 연결되고, 본 명세서에 설명된 하나 이상의 프로세스들을 (예를 들어, 처리 회로 및/또는 프로세서에 의해) 실행하기 위한 컴퓨터 코드를 포함한다.
본 개시사항은 다양한 동작들을 달성하기 위한 임의의 기계-판독가능 매체 상의 방법들, 시스템들 및 프로그램 제품들을 고려한다. 본 개시사항의 실시예들은 기존의 컴퓨터 프로세서를 사용하여, 또는 이러한 목적 또는 다른 목적을 위해 통합된 적절한 시스템을 위한 특수 목적 컴퓨터 프로세서에 의해, 또는 하드와이어드 시스템에 의해 구현될 수 있다. 본 개시사항의 범위 내의 실시예들은 기계-실행가능 명령들 또는 데이터 구조들을 운반하거나 저장하기 위한 기계-판독가능 매체를 포함하는 프로그램 제품을 포함한다. 이러한 기계-판독가능 매체는 범용 또는 특수 목적 컴퓨터 또는 프로세서를 갖는 다른 기계에서 액세스될 수 있는 임의의 사용 가능한 매체일 수 있다. 예를 들어, 그러한 기계-판독가능 매체는 RAM, ROM, EPROM, EEPROM, 또는 다른 광 디스크 저장 장치, 자기 디스크 저장 장치 또는 다른 자기 저장 디바이스들, 또는 원하는 프로그램 코드를 기계-실행가능 명령들 또는 데이터 구조들의 형태로 운반 또는 저장하는데 사용될 수 있고, 범용 컴퓨터 또는 특수 목적 컴퓨터 또는 프로세서를 갖는 다른 기계에서 액세스될 수 있는 임의의 다른 매체를 포함할 수 있다. 위의 조합들 또한 기계-판독가능 매체의 범위에 포함된다. 기계-실행가능 명령들은 예를 들어 범용 컴퓨터, 특수 목적 컴퓨터, 또는 특수 목적 처리 기계들이 특정 기능 또는 기능들의 그룹을 수행하게 하는 명령들 및 데이터를 포함한다.
본 명세서에 사용된 어구 및 용어는 설명을 위한 것이며 제한하는 것으로 간주되어서는 안 된다. 본 명세서에서 "포함하다", "포함하는", "갖는", "함유하는", "수반하는", "~에 의해 특징지어지는", "~을 특징으로 하는", 및 그 변형들의 사용은 이후에 나열된 항목들, 그 등가물들 및 추가 항목들뿐만 아니라 그 이후에 독점적으로 나열된 항목들로 구성된 대체 구현들을 포함하는 것을 의미한다. 일 구현에서, 본 명세서에 설명된 시스템들 및 방법들은 설명된 요소들, 행위들 또는 구성요소들 중 하나를 초과하는, 또는 모두의 각 조합으로 구성된다.
본 명세서에서 단수로 언급된 시스템들 및 방법들의 구현들 또는 요소들 또는 행위들에 대한 임의의 언급들은 또한 복수의 이러한 요소들을 포함하는 구현들을 포함할 수 있으며, 본 명세서에서 임의의 구현 또는 요소 또는 행위에 대한 복수의 언급들은 또한 오로지 단일 요소만을 포함하는 구현들을 포함할 수 있다. 단수 또는 복수 형태의 언급들은 현재 개시된 시스템들 또는 방법들, 그들의 구성요소들, 행위들 또는 요소들을 단일 또는 복수 구성들로 제한하도록 의도하는 것은 아니다. 임의의 정보, 행위 또는 요소를 기반으로 하는 임의의 행위 또는 요소에 대한 언급들은 행위 또는 요소가 임의의 정보, 행위 또는 요소에 적어도 부분적으로 기반하는 구현들을 포함할 수 있다.
본 명세서에 개시된 임의의 구현은 임의의 다른 구현 또는 실시예와 결합될 수 있으며, "일 구현", "일부 구현들", "하나의 구현", 등에 대한 언급은 반드시 상호 배타적이지 않으며, 구현과 관련하여 기술된 특정 특징, 구조 또는 특성은 적어도 하나의 구현 또는 실시예에 포함될 수 있다는 것을 나타내도록 의도된다. 본 명세서에 사용된 그러한 용어들은 반드시 모두 동일한 구현을 지칭하는 것은 아니다. 임의의 구현은 본 명세서 개시된 양상들 및 구현들과 일치하는 임의의 방식으로 포괄적으로 또는 배타적으로 임의의 다른 구현과 결합될 수 있다.
도면, 상세한 설명 또는 임의의 청구항의 기술적 특징들에 참조 부호들이 있뒤따르는 경우, 참조 부호들은 도면들, 상세한 설명 및 청구항들의 명료성을 높이기 위해 포함되었다. 따라서, 참조 부호들의 존재 또는 부재는 임의의 청구항의 요소들의 범위를 제한하는 효과를 갖지 않는다.
본 명세서에 기술된 시스템들 및 방법들은 그 특성들을 벗어나지 않고 다른 특정 형태들로 구현될 수 있다. "대략", "약", "실질적으로" 또는 정도의 다른 용어들에 대한 언급들은 달리 명시적으로 표시되지 않는 한, 주어진 측정, 단위 또는 범위로부터 +/-10%의 변동들을 포함한다. 결합된 요소들은 전기적으로, 기계적으로 또는 물리적으로 서로 직접 결합되거나, 요소들을 개재하여 결합될 수 있다. 따라서, 본 명세서에 기술된 시스템들 및 방법들의 범위는 전술한 설명보다는 첨부된 청구하들에 의해 표시되며, 청구항들의 등가의 의미 및 범위 내에 있는 변경들은 여기에 포함된다.
"결합된"이라는 용어 및 그 변형들은 두 부재들을 서로 직접 또는 간접적으로 연결하는 것을 포함한다. 이러한 연결은 고정식(예를 들어, 영구적 또는 고정된)이거나 이동식(예를 들어, 이동 가능하거나 해제 가능한)일 수 있다. 이러한 연결은, 직접 결합되거나 서로 결합된 2개의 부재를 통해, 별도의 중간 부재 및 서로 결합된 임의의 추가적인 중간 부재들을 사용하여 서로 결합된 2개의 부재를 통해, 또는 2개의 부재들 중 하나와 함께 단일 일체형 본체로 일체로 형성되는 중간 부재를 사용하여 서로 결합된 2개의 부재들을 통해 달성될 수 있다. 만약 "결합된" 또는 그 변형들이 추가 용어(예를 들어, 직접 결합됨)에 의해 수정되는 경우, 위에 제공된 "결합된"의 일반적인 정의는 추가 용어의 일반 언어 의미로 수정되어(예를 들어, "직접 결합된"은 임의의 별도 중간 부재 없이 2개 부재들의 결합을 의미한다), 위에서 제공된 "결합된"의 일반적인 정의보다 더 좁은 정의를 초래한다. 이러한 결합은 기계적, 전기적 또는 유체적일 수 있다.
"또는"에 대한 언급은 "또는"을 사용하여 기술된 임의의 용어들이 기술된 용어들 중 단일, 하나 초과 및 모두 중 임의의 것을 나타낼 수 있도록 포괄적인 것으로 해석될 수 있다. "'A'와 'B' 중 적어도 하나"에 대한 언급은 오로지 'A'만, 오로지 'B'만, 그리고 'A'와 'B' 모두를 포함할 수 있다. "포함하는" 또는 다른 공개 용어와 함께 사용되는 이러한 언급은 추가 항목들을 포함할 수 있다.
다양한 요소들의 크기들, 치수들, 구조들, 형태들 및 비율들의 변동들, 파라미터의 값들, 장착 배열들, 재료들의 사용, 컬러들, 방향들과 같은 기술된 요소들 및 행위들의 수정들은 본 명세서에 기술된 요지의 가르침들 및 이점들을 실질적으로 벗어나지 않고 발생할 수 있다. 예를 들어, 일체로 형성된 것으로 도시된 요소들은 다수의 부분들 또는 요소들로 구성될 수 있고, 요소들의 위치는 역전되거나 달리 변경될 수 있고, 개별 요소들 또는 위치들의 성질 또는 수는 변형 또는 변경될 수 있다. 다른 대체들, 수정들, 변경들 및 생략들이 또한 본 개시사항의 범위를 벗어나지 않고 개시된 요소들 및 동작들의 설계, 동작 조건들 및 배열에서 이루어질 수 있다.
요소들의 위치들(예를 들어, "상부", "하부", "위", "아래")에 대한 본 명세서의 언급은 단지 도면들에서 다양한 요소들의 방향을 설명하는데 사용된다. 다양한 요소들의 방향은 다른 예시적인 실시예들에 따라 상이할 수 있으며, 이러한 변경들은 본 개시사항에 포함되도록 의도된다.

Claims (15)

  1. 방법에 있어서,
    콘솔에 의해, 상기 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 품질 메트릭에 대응하는 제 1 측정값이 제 1 임계값보다 작다고 결정하는 단계;
    상기 제 1 측정값이 상기 제 1 임계값 미만인 것에 응답하여 상기 콘솔에 의해, 상기 콘솔과 상기 머리 착용 디스플레이 사이의 2차 링크를 활성화하는 단계;
    상기 콘솔에 의해, 상기 콘솔과 상기 머리 착용 디스플레이 사이의 상기 1차 링크의 제 2 측정값이 상기 제 1 임계값보다 작은 제 2 임계값보다 작은지 여부를 결정하는 단계; 및
    상기 제 2 측정값이 상기 제 2 임계값보다 작을 때 상기 콘솔에 의해, 상기 1차 링크 상의 트래픽을 활성화된 2차 링크로 전환시키는(transitioning) 단계를 포함하는 방법.
  2. 제 1 항에 있어서, 상기 품질 메트릭은 상기 1차 링크의 신호 대 잡음비를 포함하는, 방법.
  3. 제 1 항 또는 제 2 항에 있어서, 상기 제 2 측정값이 상기 제 2 임계값보다 클 때 콘솔을 통해 상기 1차 링크 상의 트래픽을 유지하는 단계를 더 포함하는, 방법.
  4. 제 1 항, 제 2 항 또는 제 3 항에 있어서, 상기 제 2 측정값이 상기 제 2 임계값 미만인 것에 응답하여, 상기 콘솔에 의해, 제 1 결정된 간격들에서 상기 1차 링크의 측정들을 수행하는 단계를 더 포함하고,
    바람직하게는, 상기 제 2 측정값이 상기 제 2 임계값 미만인 이후의 제 3 측정에 응답하여 상기 콘솔에 의해, 각각이 상기 제 1 결정된 간격들 각각보다 큰 제 2 결정된 간격들에서 상기 1차 링크의 추가 측정들을 수행하는 단계를 더 포함하는, 방법.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 콘솔에 의해, 상기 1차 링크의 제 3 측정값이, 상기 제 2 임계값보다 크고 상기 제 1 임계값보다 작은 제 3 임계값보다 크다고 결정하는 단계; 및
    상기 콘솔에 의해, 상기 1차 링크에 대한 제 1 후보 빔을 식별하는 단계를 더 포함하고,
    바람직하게는,
    상기 콘솔에 의해, 상기 제 1 후보 빔의 실패를 결정하는 단계; 및
    상기 콘솔에 의해, 상기 1차 링크에 대한 제 2 후보 빔에 대한 검색을 중지하는 결정된 기간을 개시하는 단계를 더 포함하는, 방법.
  6. 제 1 항 내지 제 5 항 중 어느 한 항에 있어서,
    상기 제 3 측정값이 상기 제 3 임계값보다 큰 것에 응답하여, 상기 콘솔에 의해, 상기 제 1 후보 빔을 사용하여 상기 2차 링크 상의 트래픽을 상기 1차 링크로 전환시키는 단계를 더 포함하고,
    바람직하게는: 상기 콘솔에 의해, 제 4 측정값이 상기 제 1 임계값보다 큰 제 4 임계값보다 큰 것에 응답하여 상기 2차 링크를 비활성화하는 단계를 더 포함하는, 방법.
  7. 제 1 항 내지 제 6 항 중 어느 한 항에 있어서,
    상기 콘솔에 의해, 상기 콘솔과 상기 머리 착용 디스플레이 간의 상기 트래픽 유형에 따라 상기 콘솔과 상기 머리 착용 디스플레이 간의 상기 트래픽에 대한 상기 1차 링크 또는 상기 2차 링크를 선택하는 단계를 더 포함하는, 방법.
  8. 콘솔에 있어서,
    하나 이상의 프로세서들로서,
    상기 콘솔과 머리 착용 디스플레이 사이의 1차 링크의 품질 메트릭에 대응하는 제 1 측정값이 제 1 임계값보다 작다고 결정하고;
    상기 제 1 측정값이 상기 제 1 임계값 미만인 것에 응답하여, 상기 콘솔과 상기 머리 착용 디스플레이 사이의 2차 링크를 활성화하고;
    상기 콘솔과 상기 머리 착용 디스플레이 사이의 상기 1차 링크의 제 2 측정값이 상기 제 1 임계값보다 작은 제 2 임계값보다 작은지 여부를 결정하고;
    상기 제 2 측정값이 상기 제 2 임계값 미만인 경우, 상기 1차 링크의 트래픽을 상기 활성화된 2차 링크로 전환시키도록 구성된, 하나 이상의 프로세서들을 포함하는, 콘솔.
  9. 제 8 항에 있어서, 상기 품질 메트릭은 상기 1차 링크의 신호 대 잡음비를 포함하는, 콘솔.
  10. 제 8 항 또는 제 9 항에 있어서, 상기 콘솔은: 상기 제 2 측정값이 상기 제 2 임계값보다 클 때 상기 1차 링크 상의 트래픽을 유지하도록 추가로 구성되는, 콘솔.
  11. 제 8 항, 제 9 항 또는 제 10 항에 있어서, 상기 콘솔은: 상기 제 2 측정값이 상기 제 2 임계값 미만인 것에 응답하여, 제 1 결정된 간격들에서 상기 1차 링크의 측정들을 수행하도록 추가로 구성되고;
    바람직하게는, 상기 제 2 측정이 상기 제 2 임계값 미만인 이후 제 3 측정에 응답하여, 각각이 상기 제 1 결정된 간격들의 각각보다 큰 제 2 결정된 간격들에서 상기 1차 링크의 추가 측정들을 수행하도록 추가로 구성되는, 콘솔.
  12. 제 8 항 내지 제 11 항 중 어느 한 항에 있어서, 상기 콘솔은:
    상기 1차 링크의 제 3 측정값이, 상기 제 2 임계값보다 크고 상기 제 1 임계값보다 작은 제 3 임계값보다 크다고 결정하고,
    상기 1차 링크에 대한 제 1 후보 빔을 식별하도록 구성되고;
    바람직하게는,
    상기 후보 빔의 실패를 결정하고;
    상기 1차 링크에 대한 제 2 후보 빔에 대한 검색을 중지하는 결정된 기간을 개시하도록 추가로 구성되는, 콘솔.
  13. 제 8 항 내지 제 12 항 중 어느 한 항에 있어서, 상기 콘솔은:
    상기 제 3 측정값이 상기 제 3 임계값보다 큰 것에 응답하여, 상기 제 1 후보 빔을 사용하여 상기 2차 링크 상의 트래픽을 상기 1차 링크로 전환시키도록 구성되는, 콘솔.
  14. 명령들을 저장하는 비일시적 컴퓨터 판독 가능 매체에 있어서,
    상기 명령들은 하나 이상의 프로세서들에 의해 실행될 때 상기 하나 이상의 프로세서들로 하여금:
    콘솔과 머리 착용 디스플레이 사이의 1차 링크의 품질 메트릭에 대응하는 제 1 측정값이 제 1 임계값보다 작다고 결정하고;
    상기 제 1 측정값이 상기 제 1 임계값 미만인 것에 응답하여, 상기 콘솔과 상기 머리 착용 디스플레이 사이의 2차 링크를 활성화하고;
    상기 콘솔과 상기 머리 착용 디스플레이 사이의 상기 1차 링크의 제 2 측정값이 상기 제 1 임계값보다 작은 제 2 임계값보다 작은지 여부를 결정하고;
    상기 제 2 측정값이 상기 제 2 임계값 미만인 경우, 상기 1차 링크의 트래픽을 상기 활성화된 2차 링크로 전환시키게 하는, 비일시적 컴퓨터 판독 가능 매체.
  15. 제 14 항에 있어서, 상기 하나 이상의 프로세서들에 의해 실행될 때 상기 하나 이상의 프로세서들이 추가로:
    상기 콘솔과 상기 머리 착용 디스플레이 사이의 상기 트래픽 유형에 따라 상기 콘솔과 상기 머리 착용 디스플레이 사이의 트래픽에 대한 상기 1차 링크 또는 상기 2차 링크를 선택하게 하는 명령들을 더 포함하는, 비일시적 컴퓨터 판독 가능 매체.
KR1020217032088A 2019-03-08 2020-02-27 Ar/vr 애플리케이션들을 위한 2차 링크 KR20210137126A (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962815849P 2019-03-08 2019-03-08
US62/815,849 2019-03-08
US16/773,515 2020-01-27
US16/773,515 US11452014B2 (en) 2019-03-08 2020-01-27 Secondary link for AR/VR applications
PCT/US2020/020017 WO2020185410A1 (en) 2019-03-08 2020-02-27 Secondary link for ar/vr applications

Publications (1)

Publication Number Publication Date
KR20210137126A true KR20210137126A (ko) 2021-11-17

Family

ID=72335815

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020217032088A KR20210137126A (ko) 2019-03-08 2020-02-27 Ar/vr 애플리케이션들을 위한 2차 링크

Country Status (6)

Country Link
US (2) US11452014B2 (ko)
EP (1) EP3935877A1 (ko)
JP (1) JP2022522583A (ko)
KR (1) KR20210137126A (ko)
CN (1) CN113545112A (ko)
WO (1) WO2020185410A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024032906A1 (en) * 2022-08-12 2024-02-15 Telefonaktiebolaget Lm Ericsson (Publ) Application aware dynamic topology update

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10139155C2 (de) * 2001-08-09 2003-07-24 Siemens Ag Signalisierungs-Proxy-Einrichtung zum automatischen Aufbau von Ersatzpfaden in optischen Netzen
JP2006527519A (ja) * 2003-06-06 2006-11-30 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 短距離無線技術と長距離無線技術とを切り替えることにより無線データ伝送を制御する方法
US8897152B1 (en) * 2011-08-30 2014-11-25 Amazon Technologies, Inc. System and method for minimizing network transition latencies while minimizing power consumption
GB2500410A (en) * 2012-03-21 2013-09-25 Renesas Mobile Corp Swapping an actual channel on a secondary link with a shadow channel on a primary link with when the secondary link is no longer available
US9521601B2 (en) * 2013-02-01 2016-12-13 Apple Inc. Management of multiple radio links for wireless peer-to-peer communication
US9063330B2 (en) * 2013-05-30 2015-06-23 Oculus Vr, Llc Perception based predictive tracking for head mounted displays
US9591497B2 (en) * 2014-05-30 2017-03-07 Apple Inc. Wireless link quality monitoring
KR20160003450A (ko) * 2014-07-01 2016-01-11 삼성전자주식회사 전자장치의 데이터를 공유하기 위한 방법 및 장치
US10098016B2 (en) * 2015-01-22 2018-10-09 Qualcomm Incorporated Adaptive scanning with multi-radio device
US9787579B2 (en) * 2015-04-06 2017-10-10 Verizon Digital Media Services Inc. Application controlled path selection based on type-of-service
KR20160141560A (ko) 2015-06-01 2016-12-09 삼성전기주식회사 무선 통신 장치 및 이를 이용한 운용 방법
US9832716B2 (en) * 2015-08-12 2017-11-28 Google Llc Switching between networks based on quality of available networks
US10129919B2 (en) 2016-10-20 2018-11-13 Plantronics, Inc. Video headset
US9866286B1 (en) * 2017-02-15 2018-01-09 Oculus Vr, Llc Positional tracking assisted beam forming in wireless virtual reality systems
KR102606976B1 (ko) * 2017-02-15 2023-11-29 삼성전자주식회사 전자 장치 및 전자 장치의 이미지 데이터 송수신 방법
US10433307B2 (en) * 2017-04-20 2019-10-01 Facebook Technologies, Llc Diversity based relay for wireless communications between a head-mounted display and a console
CN109246732B (zh) * 2017-04-28 2020-05-15 维沃移动通信有限公司 波束失败恢复方法和终端
US10531344B2 (en) * 2018-05-24 2020-01-07 Verizon Patent And Licensing Inc. Radio access technology change reporting

Also Published As

Publication number Publication date
CN113545112A (zh) 2021-10-22
WO2020185410A1 (en) 2020-09-17
US20230016201A1 (en) 2023-01-19
EP3935877A1 (en) 2022-01-12
US11452014B2 (en) 2022-09-20
US11930411B2 (en) 2024-03-12
JP2022522583A (ja) 2022-04-20
US20200288360A1 (en) 2020-09-10

Similar Documents

Publication Publication Date Title
US11882552B2 (en) Switching between different communication protocols
US11678324B2 (en) Systems and methods for dynamic scheduling
US11723003B2 (en) Latency reduction for artificial reality
KR20230118114A (ko) 무선 통신에서의 twt의 콰이어트 엘리먼트를 위한 시스템 및 방법
US11930411B2 (en) Secondary link for AR/VR applications
US20220247513A1 (en) Systems and methods for beamforming
US20230254768A1 (en) Power management of receiver chain circuits based on traffic awareness
US20230261770A1 (en) Systems and methods for managing energy detection thresholds
US11497028B2 (en) Interference mitigation through SINR-based iterative distributed beam selection
WO2023154300A1 (en) Power management of receiver chain circuits based on traffic awareness
TW202415111A (zh) 在動態頻率選擇(dfs)頻道中的子群組無線操作
WO2022159343A1 (en) Methods and systems for low power reconnection

Legal Events

Date Code Title Description
E902 Notification of reason for refusal