KR20230053143A - 가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템 - Google Patents

가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템 Download PDF

Info

Publication number
KR20230053143A
KR20230053143A KR1020210136350A KR20210136350A KR20230053143A KR 20230053143 A KR20230053143 A KR 20230053143A KR 1020210136350 A KR1020210136350 A KR 1020210136350A KR 20210136350 A KR20210136350 A KR 20210136350A KR 20230053143 A KR20230053143 A KR 20230053143A
Authority
KR
South Korea
Prior art keywords
space
user
computer device
agent
web
Prior art date
Application number
KR1020210136350A
Other languages
English (en)
Inventor
황두건
Original Assignee
주식회사 피아몬드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 피아몬드 filed Critical 주식회사 피아몬드
Priority to KR1020210136350A priority Critical patent/KR20230053143A/ko
Publication of KR20230053143A publication Critical patent/KR20230053143A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Architecture (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Geometry (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

유형 오브젝트(tangible object)가 포함된 웹 페이지를 VR(virtual reality) 공간 상에 렌더링함에 있어, 웹 페이지의 브라우징 창에 유형 오브젝트 각각에 대하여 해당 오브젝트에 대응되는 영역으로서 사용자 입력을 위한 영역을 표시하고, 유형 오브젝트 중 사용자 입력에 따른 관심 오브젝트를 웹 페이지에서 분리하여 VR 공간 상의 다른 브라우징 창으로 표시한다.

Description

가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템{METHOD AND SYSTEM FOR PROVIDING WEB CONTENT IN VIRTUAL REALITY ENVIRONMENT}
아래의 설명은 가상현실 환경에서 웹 콘텐츠를 제공하는 기술에 관한 것이다.
기존 브라우징 환경에서는 서비스를 제공하는 매체를 운영하는 사업자와 외부 사업자인 제3자 사업자가 각각 자신의 쿠키를 활용하여 사용자에 대한 정보를 기록 및 활용하였다. 예를 들어, 제3자 사업자는 쿠키를 통해 얻어지는 정보에 기반한 프로그래매틱 비딩(Programmatic Bidding)이나 RTB(real time bidding)등을 이용하여 사업자의 매체를 통해 실시간으로 사용자에게 알맞은 정보를 노출하였다.
그러나 가상공간의 경우, 특정 가상공간의 공급자 중심의 환경에서 사용자의 모든 경험이 이루어지기 때문에 제3자 사업자의 입장에서 사용자의 경험 정보를 효과적으로 수집 및 확인하기 어렵다는 문제점이 있다. 이에, 종래기술에서 제3자 사업자는 단순히 가상공간 상에서의 사용자의 활동과 무관하게 일반적인 정보를 불특정 다수의 사용자들에게 노출하거나 또는 사용자의 프로파일 등과 같이 가상공간 상에서의 사용자의 활동 외적인 정보에 기반하여 사용자에게 관련 정보를 제공할 수밖에 없는 한계가 있다.
[선행문헌번호]
한국공개특허 제10-2002-0007892호
가상현실(VR) 환경에서 웹 콘텐츠를 제공할 수 있는 방법 및 시스템을 제공한다.
가상현실 환경에서 웹 콘텐츠를 창(window)의 개념이 아닌, 개별 오브젝트 형태로 활용할 수 있는 방법 및 시스템을 제공한다.
가상현실 및 메타버스 환경에서 웹 브라우징 시 하이퍼링크를 이용한 콘텐츠 탐색 경험을 개선할 수 있는 방법 및 시스템을 제공한다.
컴퓨터 장치가 수행하는 방법에 있어서, 상기 컴퓨터 장치가 포함하는 적어도 하나의 프로세서의 의해, 유형 오브젝트(tangible object)가 포함된 웹 페이지를 VR(virtual reality) 공간 상에 렌더링하는 단계를 포함하고, 상기 렌더링하는 단계는, 상기 웹 페이지의 브라우징 창에 상기 유형 오브젝트 각각에 대하여 해당 오브젝트에 대응되는 영역으로서 사용자 입력을 위한 영역을 표시하는 단계; 및 상기 유형 오브젝트 중 상기 사용자 입력에 따른 관심 오브젝트를 상기 웹 페이지에서 분리하여 상기 VR 공간 상의 다른 브라우징 창으로 표시하는 단계를 포함하는 방법을 제공한다.
일 측면에 따르면, 상기 렌더링하는 단계는, 상기 웹 페이지의 브라우징 창과 상기 관심 오브젝트의 브라우징 창을 상기 VR 공간 상의 개별 브라우징 창으로 각각 배치하는 단계를 포함할 수 있다.
다른 측면에 따르면, 상기 렌더링하는 단계는, 상기 VR 공간 상에서 사용자 에이전트의 위치를 새로운 브라우징 창 앞으로 이동시키는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 렌더링하는 단계는, 상기 VR 공간 상에서 사용자 에이전트의 위치를 고정한 상태에서 이전 브라우징 창을 이동시키고 새로운 브라우징 창을 상기 사용자 에이전트의 앞에 배치하는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 렌더링하는 단계는, 상기 VR 공간에서의 웹 탐색 경로로서 상기 개별 브라우징 창 간의 탐색 링크 관계를 추적하여 시각화하는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 렌더링하는 단계는, 상기 웹 탐색 경로에 포함된 적어도 일부 탐색 경로에 해당하는 정보를 저장하는 기능, 상기 웹 탐색 경로에 포함된 탐색 링크 관계를 편집하는 기능, 및 상기 웹 탐색 경로에 포함된 적어도 일부 탐색 경로의 브라우징 창을 닫는 기능 중 적어도 하나를 제공하는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 방법은, 상기 적어도 하나의 프로세서의 의해, 상기 VR 공간을 통한 에이전트 간의 커뮤니케이션 환경에서 상기 관심 오브젝트에 대한 고유 URL을 획득하여 상기 관심 오브젝트를 상대 에이전트로 전달하는 단계를 더 포함할 수 있다.
또 다른 측면에 따르면, 상기 방법은, 상기 적어도 하나의 프로세서의 의해, 상기 VR 공간을 통한 에이전트 간의 커뮤니케이션 환경에서 상대 에이전트에 대한 출력 결과물을 상기 상대 에이전트가 원하는 형태의 포맷으로 변환하여 제공하는 단계를 더 포함할 수 있다.
또 다른 측면에 따르면, 상기 사용자 입력을 위한 영역을 표시하는 단계는, 개별 오브젝트 단위를 위한 태그 구분점을 이용하여 상기 웹 페이지에서 상기 유형 오브젝트를 선정하는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 방법은, 상기 적어도 하나의 프로세서의 의해, 상기 유형 오브젝트에 대응되는 영역 내에서 사용자의 입력 포커스의 이동에 따라 오토 포커싱(auto focusing)을 통해 상기 입력 포커스에 대응되는 위치로 포커스를 이동시키는 포커싱 이동 기능을 제공하는 단계를 더 포함할 수 있다.
또 다른 측면에 따르면, 상기 제공하는 단계는, 사용자 입력이 가능한 태그에 대한 입력의 우선 순위가 포함된 메타데이터 태그(metadata tag)를 이용하여 오토 포커싱을 수행하는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 제공하는 단계는, 상기 입력 포커스에 따른 입력 정보에 대한 자동 완성(auto complete) 기능을 제공하는 단계를 포함할 수 있다.
상기 방법을 컴퓨터 장치에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램을 제공한다.
컴퓨터 장치에 있어서, 메모리에 포함된 컴퓨터 판독가능한 명령들을 실행하도록 구성된 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 유형 오브젝트(tangible object)가 포함된 웹 페이지를 VR(virtual reality) 공간 상에 렌더링하는 것으로, 상기 웹 페이지의 브라우징 창에 상기 유형 오브젝트 각각에 대하여 해당 오브젝트에 대응되는 영역으로서 사용자 입력을 위한 영역을 표시하고, 상기 유형 오브젝트 중 상기 사용자 입력에 따른 관심 오브젝트를 상기 웹 페이지에서 분리하여 상기 VR 공간 상의 다른 브라우징 창으로 표시하는 것을 특징으로 하는 컴퓨터 장치를 제공한다.
본 발명의 실시예들에 따르면, 가상현실 환경에서 웹 상의 콘텐츠를 개별 오브젝트 형태로 제공할 수 있다.
본 발명의 실시예들에 따르면, 가상현실 및 메타버스 환경에서 웹 브라우징 시 하이퍼링크를 이용한 콘텐츠 탐색 경험을 개선할 수 있다.
도 1은 본 발명의 일실시예에 따른 네트워크 환경의 예를 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 컴퓨터 장치의 예를 도시한 블록도이다.
도 3은 본 발명의 일실시예에 따른 공간들을 설명하기 위한 도면이다.
도 4는 본 발명의 일실시예에 있어서, 가상세계의 공간들간의 이동의 예를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 가상세계의 공간을 구성하는 요소들간의 관계를 나타낸 도면이다.
도 6은 본 발명의 일실시예에 따른 가상세계의 공간 상에 디지털 오브젝트가 구성된 예를 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 가상공간 구성 시스템의 개괄적인 모습을 도시한 도면이다.
도 8은 본 발명의 일실시예에 따른 가상공간 관리 시스템의 내부 구성의 예를 도시한 블록도이다.
도 9는 본 발명의 일실시예에 있어서 웹 콘텐츠의 예시를 도시한 것이다.
도 10은 본 발명의 일실시예에 있어서 웹 콘텐츠에 대한 유형 오브젝트 인식 과정의 예를 도시한 순서도이다.
도 11은 본 발명의 일실시예에 있어서 웹 콘텐츠의 유형 오브젝트의 예시를 도시한 것이다.
도 12는 본 발명의 일실시예에 있어서 유형 오브젝트 상에서의 포커싱 이동 과정의 예를 도시한 순서도이다.
도 13은 본 발명의 일실시예에 있어서 자동 포커싱과 자동 완성 과정의 예를 도시한 순서도이다.
도 14 내지 도 16은 본 발명의 일실시예에 있어서 사용자의 입력 포커스 이동에 따른 자동 포커싱 예시를 도시한 것이다.
도 17은 본 발명의 일실시예에 있어서 웹 기반 VR 환경에서 에이전트 간 커뮤니케이션을 진행하는 과정의 예를 도시한 것이다.
도 18 내지 도 22는 본 발명의 일실시예에 있어서 웹 기반 콘텐츠 탐색 경험을 설명하기 위한 예시 도면들이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 네트워크 환경의 예를 도시한 도면이다. 도 1의 네트워크 환경은 복수의 전자 기기들(110, 120, 130, 140), 복수의 서버들(150, 160) 및 네트워크(170)를 포함하는 예를 나타내고 있다. 이러한 도 1은 발명의 설명을 위한 일례로 전자 기기의 수나 서버의 수가 도 1과 같이 한정되는 것은 아니다. 또한, 도 1의 네트워크 환경은 본 실시예들에 적용 가능한 환경들 중 하나의 예를 설명하는 것일 뿐, 본 실시예들에 적용 가능한 환경이 도 1의 네트워크 환경으로 한정되는 것은 아니다.
복수의 전자 기기들(110, 120, 130, 140)은 컴퓨터 장치로 구현되는 고정형 단말이거나 이동형 단말일 수 있다. 복수의 전자 기기들(110, 120, 130, 140)의 예를 들면, 스마트폰(smart phone), 휴대폰, 내비게이션, 컴퓨터, 노트북, 디지털방송용 단말, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 태블릿 PC 등이 있다. 일례로 도 1에서는 전자 기기(110)의 예로 스마트폰의 형상을 나타내고 있으나, 본 발명의 실시예들에서 전자 기기(110)는 실질적으로 무선 또는 유선 통신 방식을 이용하여 네트워크(170)를 통해 다른 전자 기기들(120, 130, 140) 및/또는 서버(150, 160)와 통신할 수 있는 다양한 물리적인 컴퓨터 장치들 중 하나를 의미할 수 있다.
통신 방식은 제한되지 않으며, 네트워크(170)가 포함할 수 있는 통신망(일례로, 이동통신망, 유선 인터넷, 무선 인터넷, 방송망)을 활용하는 통신 방식뿐만 아니라 기기들간의 근거리 무선 통신 역시 포함될 수 있다. 예를 들어, 네트워크(170)는, PAN(personal area network), LAN(local area network), CAN(campus area network), MAN(metropolitan area network), WAN(wide area network), BBN(broadband network), 인터넷 등의 네트워크 중 하나 이상의 임의의 네트워크를 포함할 수 있다. 또한, 네트워크(170)는 버스 네트워크, 스타 네트워크, 링 네트워크, 메쉬 네트워크, 스타-버스 네트워크, 트리 또는 계층적(hierarchical) 네트워크 등을 포함하는 네트워크 토폴로지 중 임의의 하나 이상을 포함할 수 있으나, 이에 제한되지 않는다.
서버(150, 160) 각각은 복수의 전자 기기들(110, 120, 130, 140)과 네트워크(170)를 통해 통신하여 명령, 코드, 파일, 콘텐츠, 서비스 등을 제공하는 컴퓨터 장치 또는 복수의 컴퓨터 장치들로 구현될 수 있다. 예를 들어, 서버(150)는 네트워크(170)를 통해 접속한 복수의 전자 기기들(110, 120, 130, 140)로 서비스(일례로, 가상공간에 기반한 서비스, 인스턴트 메시징 서비스, 게임 서비스, 그룹 통화 서비스(또는 음성 컨퍼런스 서비스), 메시징 서비스, 메일 서비스, 소셜 네트워크 서비스, 지도 서비스, 번역 서비스, 금융 서비스, 결제 서비스, 검색 서비스, 콘텐츠 제공 서비스 등)를 제공하는 시스템일 수 있다.
도 2는 본 발명의 일실시예에 따른 컴퓨터 장치의 예를 도시한 블록도이다. 앞서 설명한 복수의 전자 기기들(110, 120, 130, 140) 각각이나 서버들(150, 160) 각각은 도 2를 통해 도시된 컴퓨터 장치(200)에 의해 구현될 수 있다.
이러한 컴퓨터 장치(200)는 도 2에 도시된 바와 같이, 메모리(210), 프로세서(220), 통신 인터페이스(230) 그리고 입출력 인터페이스(240)를 포함할 수 있다. 메모리(210)는 컴퓨터에서 판독 가능한 기록매체로서, RAM(random access memory), ROM(read only memory) 및 디스크 드라이브와 같은 비소멸성 대용량 기록장치(permanent mass storage device)를 포함할 수 있다. 여기서 ROM과 디스크 드라이브와 같은 비소멸성 대용량 기록장치는 메모리(210)와는 구분되는 별도의 영구 저장 장치로서 컴퓨터 장치(200)에 포함될 수도 있다. 또한, 메모리(210)에는 운영체제와 적어도 하나의 프로그램 코드가 저장될 수 있다. 이러한 소프트웨어 구성요소들은 메모리(210)와는 별도의 컴퓨터에서 판독 가능한 기록매체로부터 메모리(210)로 로딩될 수 있다. 이러한 별도의 컴퓨터에서 판독 가능한 기록매체는 플로피 드라이브, 디스크, 테이프, DVD/CD-ROM 드라이브, 메모리 카드 등의 컴퓨터에서 판독 가능한 기록매체를 포함할 수 있다. 다른 실시예에서 소프트웨어 구성요소들은 컴퓨터에서 판독 가능한 기록매체가 아닌 통신 인터페이스(230)를 통해 메모리(210)에 로딩될 수도 있다. 예를 들어, 소프트웨어 구성요소들은 네트워크(170)를 통해 수신되는 파일들에 의해 설치되는 컴퓨터 프로그램에 기반하여 컴퓨터 장치(200)의 메모리(210)에 로딩될 수 있다.
프로세서(220)는 기본적인 산술, 로직 및 입출력 연산을 수행함으로써, 컴퓨터 프로그램의 명령을 처리하도록 구성될 수 있다. 명령은 메모리(210) 또는 통신 인터페이스(230)에 의해 프로세서(220)로 제공될 수 있다. 예를 들어 프로세서(220)는 메모리(210)와 같은 기록 장치에 저장된 프로그램 코드에 따라 수신되는 명령을 실행하도록 구성될 수 있다.
통신 인터페이스(230)는 네트워크(170)를 통해 컴퓨터 장치(200)가 다른 장치와 서로 통신하기 위한 기능을 제공할 수 있다. 일례로, 컴퓨터 장치(200)의 프로세서(220)가 메모리(210)와 같은 기록 장치에 저장된 프로그램 코드에 따라 생성한 요청이나 명령, 데이터, 파일 등이 통신 인터페이스(230)의 제어에 따라 네트워크(170)를 통해 다른 장치들로 전달될 수 있다. 역으로, 다른 장치로부터의 신호나 명령, 데이터, 파일 등이 네트워크(170)를 거쳐 컴퓨터 장치(200)의 통신 인터페이스(230)를 통해 컴퓨터 장치(200)로 수신될 수 있다. 통신 인터페이스(230)를 통해 수신된 신호나 명령, 데이터 등은 프로세서(220)나 메모리(210)로 전달될 수 있고, 파일 등은 컴퓨터 장치(200)가 더 포함할 수 있는 저장 매체(상술한 영구 저장 장치)로 저장될 수 있다.
입출력 인터페이스(240)는 입출력 장치(250)와의 인터페이스를 위한 수단일 수 있다. 예를 들어, 입력 장치는 마이크, 키보드 또는 마우스 등의 장치를, 그리고 출력 장치는 디스플레이, 스피커와 같은 장치를 포함할 수 있다. 다른 예로 입출력 인터페이스(240)는 터치스크린과 같이 입력과 출력을 위한 기능이 하나로 통합된 장치와의 인터페이스를 위한 수단일 수도 있다. 입출력 장치(250) 중 적어도 하나는 컴퓨터 장치(200)와 하나의 장치로 구성될 수도 있다. 예를 들어, 스마트폰과 같이 터치스크린, 마이크, 스피커 등이 컴퓨터 장치(200)에 포함된 형태로 구현될 수 있다.
또한, 다른 실시예들에서 컴퓨터 장치(200)는 도 2의 구성요소들보다 더 적은 혹은 더 많은 구성요소들을 포함할 수도 있다. 그러나, 대부분의 종래기술적 구성요소들을 명확하게 도시할 필요성은 없다. 예를 들어, 컴퓨터 장치(200)는 상술한 입출력 장치(250) 중 적어도 일부를 포함하도록 구현되거나 또는 트랜시버(transceiver), 데이터베이스 등과 같은 다른 구성요소들을 더 포함할 수도 있다.
도 3은 본 발명의 일실시예에 따른 공간을 설명하기 위한 도면이다. 도 3은 실세계의 공간인 PS(Physical Space, 310)와 가상세계의 공간인 VS(Virtual Space, 320), MS(Mixed Space, 330) 및 DTS(Digital Twin Space, 340)를 나타내고 있다.
가상세계의 공간은 해당 가상세계의 공급자(사업자)가 디자인하거나, 사용자 또는 외부 사업자인 제3자 사업자가 구성할 수 있다. 이러한 가상세계의 공간은 공간의 특징에 따라 VS(320), MS(330) 및/또는 DTS(340)의 형태로 구성될 수 있다. VS(320)는 CPS(Cyber Physical System)와 연동될 수 있는 순수 디지털 기반의 공간일 수 있으며, DTS(340)는 실세계 기반의 가상의 공간으로서 CPS와 연동된 공간일 수 있으며, MS(330)는 VS(320)와 DTS(340)가 혼합된 공간일 수 있다. MS(330)의 경우, 실세계의 환경에 사용자의 객체인 에이전트(Agent)가 적응하는 형태로 제공되거나 또는 실세계의 환경을 가상세계상에서 렌더링하는 형태로 제공될 수 있다.
가상세계의 공간은 사용자의 에이전트가 활동할 수 있는 기본 가상공간의 개념으로, 공간별로 에이전트의 활동과 정보 활용 및/또는 노출 등에 대한 정책이 존재할 수 있다. 사용자는 자신의 에이전트가 특정 가상세계의 공간 상에서 서비스를 이용할 경우 서비스 제공의 주체에 따라 각각의 개인정보 및 이용약관(Privacy & Terms)이 존재함을 인지할 수 있어야 한다.
가상세계의 공간은 공급자 또는 사용자에 따라 다양하게 생성 및 활용될 수 있다. 이를 위해, 각각의 가상세계의 공간들간의 에이전트의 이동을 위해 별도의 게이트(gate)가 인터페이스로 제공될 수 있다.
도 4는 본 발명의 일실시예에 있어서, 가상세계의 공간들간의 이동의 예를 도시한 도면이다. 도 4는 두 개의 가상공간들인 VS #1(410)과 VS #2(420)간의 이동을 위한 게이트 #1(430)를 나타내고 있다. 여기서, '게이트'는 가상세계의 공간들간의 이동을 제공하는 기본 인터페이스일 수 있다. 이러한 '게이트'는 가상세계의 공간들간의 이동뿐 아니라 가상세계의 공간과 비-가상세계의 공간간의 이동도 제어할 수 있다. 예를 들어, 도 4에서는 VS#1(410)의 에이전트가 웹페이지(web page), 스트리밍 채널, 스트리밍 콘텐츠, 게임 환경, 실제 오프라인의 비디오 콜 등과 같은 비-가상세계의 공간으로서의 이동 대상으로도 이동할 수 있음을 나타내고 있다. 가상세계의 공간을 구분 짓는 방법은 해당 가상세계의 공간의 공급자에 의해 결정될 수 있다.
에이전트는 가상세계의 공간 상에서의 사용자 또는 프로그램을 의미할 수 있다. 여기서, 프로그램으로서의 에이전트는 인공지능 에이전트의 형태로, 제3자 사업자를 대신하여 존재하는 가상의 아바타 또는 페르소나(persona)일 수 있다. 이러한 에이전트에는 해당 에이전트가 속한 가상세계의 공간의 물리적 특징이 적용될 수 있으며, 해당 가상세계의 공간에 설정된 서비스 규약(service profile)이 적용될 수 있다. 또한, 에이전트는 사용자가 이용하는 물리적인 장치의 정보에 기반한 특징을 가질 수 있다. 예를 들어, 에이전트는 사용자가 이용하는 물리적인 장치의 디스플레이의 특징에 따른 시야각을 갖거나 또는 해당 물리적인 장치의 컨트롤러에 따른 제어 특징을 가질 수 있다.
또한, 이후 설명될 디지털 오브젝트(digital object)는 가상세계의 공간 상에서 세계정보를 구성하는 핵심 요소로서 에이전트와의 상호 인터랙션 기능을 제공하는 오브젝트들을 총칭할 수 있다.
도 5는 본 발명의 일실시예에 따른 가상세계의 공간을 구성하는 요소들간의 관계를 나타낸 도면이고, 도 6은 본 발명의 일실시예에 따른 가상세계의 공간 상에 디지털 오브젝트가 구성된 예를 도시한 도면이다.
도 5는 앞서 도 3을 통해 설명한 VS(320), MS(330) 및/또는 DTS(340)와 같은 가상세계의 공간(500)이 디지털 오브젝트(Digital Object, 510)를 포함할 수 있음을 나타내고 있다. 이때, 디지털 오브젝트(510)는 가상세계의 공간(500)이 포함하는 에어리어인 오브젝트 에어리어(Object Area, OA)에 형성될 수 있다. 또한, 디지털 오브젝트(510)는 디스플레이 오브젝트(Display Object, DO, 511), 인터랙션 오브젝트(Interaction Object, IO, 512), 웹 오브젝트(Web Object, WO, 513) 및 스트리밍 오브젝트(Streaming Object, SO, 514)를 포함할 수 있다. 이때, 디스플레이 오브젝트(511), 인터랙션 오브젝트(512), 웹 오브젝트(513) 및 스트리밍 오브젝트(514) 각각은 콘텐츠의 표시를 위한 디스플레이 에어리어(Display Area)를 선택적으로 포함할 수 있다.
도 6은 가상세계의 공간(600)상에 형성된 오브젝트 에어리어(610 내지 640)에 디지털 오브젝트들이 배치된 예를 나타내고 있다. 이때, 디지털 오브젝트들은 디스플레이 오브젝트인 DO(651 내지 654), 인터랙션 오브젝트인 IO(661 내지 663), 웹 오브젝트인 WO(671) 및/또는 스트리밍 오브젝트인 SO(681)를 포함할 수 있다. 도 6에 나타난 점선 화살표들(691 및 692)은 에이전트의 이동 가능 동선의 예를 나타내고 있다.
도 6의 예시에서와 같이, 본 발명의 일실시예에 따른 가상세계의 공간 상에는 다양한 형태의 디지털 오브젝트들이 존재할 수 있다. 각각의 디지털 오브젝트들은 정해진 조건에 의해 에이전트를 중심으로 생성될 수 있으며, 이때 디지털 오브젝트는 오브젝트 에어리어 상에 생성될 수 있다. 가상세계의 공간이 DTS(일례로, 도 3의 DTS(340))와 같이 실세계를 모사한 경우, 정해진 실세계의 물리적 위치에 기반하여 오브젝트 에어리어의 위치가 정해질 수 있다. 예를 들어, 실세계의 특정 쇼핑몰 또는 유적지 등을 가상화하는 경우, 실제의 위치 구성과 동일한 구성을 갖도록 오브젝트 에어리어의 위치가 정해질 수 있다.
DO(Display Object)는 가상세계의 공간에 공간적 형태(구조물적 형태)로 노출되는 오브젝트일 수 있으며, 단순한 제어 기능을 에이전트에게 제공할 수 있다. IO(Interactive Object)는 가상세계의 공간에 공간적 형태를 가지고 노출될 수 있으며 에이전트와의 인터랙션이 가능한 인터렉티브 특징을 가진 오브젝트일 수 있다. 예를 들어, IO는 에이전트와의 다양한 인터랙션 특징들을 제공할 수 있다. 또한, WO(Web Object)는 웹 상의 콘텐츠를 가상세계의 공간을 통해 노출하는 형태의 오브젝트일 수 있다. 또한, SO(Streaming Object)는 비디오, 오디오 등의 스트리밍 콘텐츠가 지속적으로 노출 가능한 형태의 오브젝트일 수 있다.
OA는 가상세계의 공간 상에서 가상의 오브젝트인 디지털 오브젝트를 생성할 수 있는 공간의 특징을 가질 수 있다. OA 상에 존재하는 디지털 오브젝트는 기본적으로 다음과 같은 특징을 가질 수 있다. 각각의 기능은 디지털 오브젝트의 소유주와 가상세계의 공간의 공급자간의 계약을 기반으로 제공 여부가 결정될 수 있다.
1. 에이전트 연동 관련 기능
1) 인터랙션 기능: 에이전트가 직접 제어할 수 있는 인터페이스를 제공하는 기능
2) 히스토리 기능: 에이전트의 방문 및 인터랙션 관련 정보 추적(tracking)하고 저장할 수 있는 기능
3) 관심 정보 저장(Favorite/Like) 기능: 에이전트가 디지털 오브젝트에 대해 관심 정보를 저장할 수 있는 기능
4) 팔로우미(follow me) 기능: OA 상의 디지털 오브젝트를 스몰 윈도우(small windows)화 또는 아이콘(icon)화 하여 에이전트 주변을 따라다니게 하는 기능
2. 외부 API 연동 관련 기능
1) 가상세계의 공간 상에 디지털 오브젝트의 생성 시점 및 종료 시점에 대한 정보를 공유할 수 있는 기능
2) OA상에서의 디지털 오브젝트들이 수집한 에이전트 관련 정보를 외부로 제공하기 위한 인터페이스 기능
3) 실세계 정보를 반영하여 DO 또는 IO상에 표현하기 위한 인터페이스 기능(일례로, 실제 상점의 주문 대기(order waiting), 매장 내 혼잡도, 주차 상황 등의 정보를 표현하기 위한 기능)
3. 게이트 연동 관련 기능
1) 게이트 연결 기능: OA 상에 존재하는 디지털 오브젝트에서 에이전트를 다른 VS나 PS로 연결하기 위한 기능
4. 디스플레이 에어리어(Display Area, DA) 관련 기능
1) DA 기능: 디지털 오브젝트의 소유주가 자신의 의사에 따라 콘텐츠를 노출할 수 있는 영역으로, 에이전트에게 노출될 수 있다.
2) 디스플레이 콘텐츠 요청 기능: 실세계 콘텐츠 제어 모듈(Real Time Content Control Module)을 통해 외부 콘텐츠를 공급 받을 수 있는 기능
한편, DO와 IO는 가상세계의 공간을 구성하는 요소 중 일부로 OA 상에 존재할 수 있다. DO와 IO는 기본적으로 사용자의 화면상에 디스플레이되는 형태로 나타나게 되며, 일정한 규격을 가진 구조물의 특징을 가질 수 있다. DO의 외형적 정보는 DO의 소유주가 가상세계의 공간의 공급자측에게 제공하거나 공급자측에서 제공하는 템플릿을 활용하거나 또는 기설정된 툴을 이용하여 직접 설계할 수 있다. 또한, 각각의 DO 및 IO는 소유주가 직접 제어 가능한 DA를 가질 수 있다. DA 상에서 노출되는 콘텐츠는 DO 및/또는 IO의 소유주와 공간의 공급자간의 정책에 기반한 적정 범위 내에서 DO 및/또는 IO의 소유주의 선택에 따라 제공될 수 있다. DA는 에이전트의 시야각에 따른 노출 특징(원근감, 또는 원근감을 무시하고 강조하기 위한 특징 등) 및 인터랙션 특징을 개별적으로 가질 수 있다. 또한, 각각의 IO는 IO의 소유주가 직접 제어 가능한 인터렉티브한 특징들을 가질 수 있다. IO는 에이전트의 인터랙션 특징 활성화 정보를 기반으로 에이전트의 상황에 알맞은 인터랙션을 제공할 수 있다. 예를 들어 사용자가 HMD(Head Mounted Display)만 착용한 경우 IO는 DO와 동일한 형태의 동작 기능을 제공할 수 있다. 반면, 사용자가 HDM와 결합된 컨트롤러를 가진 경우, 해당 가상세계의 공간 상에서 제공하는 에이전트와의 인터랙션 피처(일례로, 잡기(grabbing), 당기기(pulling, drawing) 등)를 제공할 수 있다. 다른 예로, 사용자가 추가적인 모션인식 컨트롤러 등이 있는 경우에는 해당 특징을 활용할 수 있다. DO의 경우에는 기본적인 제어 특징들을 가질 수 있다. 이러한 기본적인 제어 특징들은 공급자측이 설정한 가상세계의 공간의 기본 제어 기능을 포함할 수 있다. 예를 들어, 기본 제어 기능은 히스토리 설정 및/또는 관심 정보 설정 등을 포함할 수 있다.
도 7은 본 발명의 일실시예에 따른 가상공간 구성 시스템의 개괄적인 모습을 도시한 도면이다. 도 7의 가상공간 구성 시스템(700)은 VR 클라이언트 디바이스(VR(Virtual Reality) Client Device, 710), 모바일 엣지 컴퓨팅 디바이스(Mobile Edge Computing Device, 720), 엣지 컴퓨팅 디바이스(Edge Computing Device, 730) 및 클라우드 컴퓨팅 시스템(Cloud Computing System, 740)을 포함할 수 있다. 이러한 VR 클라이언트 디바이스(710), 모바일 엣지 컴퓨팅 디바이스(720), 엣지 컴퓨팅 디바이스(730) 및 클라우드 컴퓨팅 시스템(740) 각각은 앞서 도 2를 통해 설명한 컴퓨터 장치(200)를 통해 구현될 수 있다. 클라우드 컴퓨팅 시스템(740)이 둘 이상의 컴퓨터 장치(200)에 의해 구현될 수도 있음을 쉽게 이해할 것이다.
VR 클라이언트 디바이스(710)는 사용자에게 가상세계의 공간을 표시하기 위한 물리적인 장치일 수 있으며, 도 7에 도시된 바와 같이, 렌더링 머신(Rendering Machine, 711), 렌더링 머신(711)이 포함할 수 있는 가상공간 컨트롤러(Virtual Space Controller, 이하 "VSC", 712), 헤드 마운트 디스플레이(Head Mount Display, 이하 "HMD", 713) 및 컨트롤러 및 센서(Controllers & Sensors, 714)를 포함할 수 있다. 렌더링 머신(711)은 VSC(712)를 통해 가상세계의 공간을 헤드 마운트 디스플레이(713)에 표시할 수 있으며, 컨트롤러 및 센서(714)의 출력값은 가상세계의 공간 상에서의 사용자의 에이전트를 제어하거나 및/또는 가상세계의 공간에 배치된 디지털 객체와 인터랙션하기 위해 활용될 수 있다.
실시예에 따라 VSC(712)는 VR 클라이언트 디바이스(710)나 렌더링 머신(711)이 직접 포함하지 않고, 모바일 엣지 컴퓨팅 디바이스(720) 또는 엣지 컴퓨팅 디바이스(730)에 포함될 수도 있다. 예를 들어, 사용자의 VR 클라이언트 디바이스(710)가 가상세계의 공간을 직접 렌더링할 수 있는 수준의 장치인 경우에는 VR 클라이언트 디바이스(710)의 VSC(712)를 이용하여 가상세계의 공간이 렌더링될 수 있다. 반면, 사용자의 VR 클라이언트 디바이스(710)가 가상세계의 공간을 직접 렌더링할 수 없는 경우, VR 클라이언트 디바이스(710)는 액세스 포인트(722)를 통해 무선으로 연결되는 모바일 엣지 컴퓨팅 디바이스(720)의 VSC(721)를 통해 또는 유선으로 연결되는 엣지 컴퓨팅 디바이스(730)의 VSC(731)를 통해 가상세계의 공간을 렌더링하여 HMD(713)에 표시할 수 있다. 모바일 엣지 컴퓨팅 디바이스(720)와 엣지 컴퓨팅 디바이스(730)가 모두 지원되지 않는 경우에는 이후 설명하는 바와 같이, 클라우드 컴퓨팅 시스템(740)이 포함하는 가상공간 컨트롤러 팜(Virtual Space Controller farm, 742)을 이용하여 가상세계의 공간을 렌더링할 수 있다. 가상공간 컨트롤러 팜(742)은 사용자를 위한 VSC의 인스턴스(instance)를 생성하여 사용자가 렌더링된 가상세계의 공간을 HMD(713)에 표시할 수 있도록 지원할 수 있다. 여기서, VSC들(712, 721 및 731)은 클라우드 컴퓨팅 시스템(740)이 가상공간 컨트롤러 팜(742)을 통해 생성 및 제공하는 VSC 인스턴스들일 수 있다.
VSC들(712, 721 및 731)은 에이전트를 위한 가상세계의 공간에 디지털 오브젝트의 디스플레이 에어리어와 관련하여 전달된 콘텐츠가 표시될 수 있도록 가상세계의 공간을 렌더링할 수 있다. VSC들(712, 721 및 731)은 가상세계의 공간을 구성하여 서비스를 제공하는 클라우드 컴퓨팅 시스템(740)에 의해 에이전트에 대응하는 사용자의 VR 클라이언트 디바이스(710)를 위해 생성될 수 있으며, VR 클라이언트 디바이스(710), 모바일 엣지 컴퓨팅 디바이스(720), 엣지 컴퓨팅 디바이스(730) 또는 클라우드 컴퓨팅 시스템(740) 중 적어도 하나에 런칭되어 VR 클라이언트 디바이스(710)를 위한 가상세계의 공간의 렌더링을 지원할 수 있다.
한편, VR 클라이언트 디바이스(710)는 직접 클라우드 컴퓨팅 시스템(740)에 연결되거나 또는 모바일 엣지 컴퓨팅 디바이스(720) 또는 엣지 컴퓨팅 디바이스(730)를 통해 클라우드 컴퓨팅 시스템(740)에 연결되어 가상세계의 공간과 관련된 서비스를 제공받을 수 있다.
이러한 클라우드 컴퓨팅 시스템(740)은 가상세계의 공간을 구성하고, 가상세계의 공간과 관련된 서비스를 사용자에게 제공하기 위한 사업자의 시스템일 수 있다. 이러한 클라우드 컴퓨팅 시스템(740)은 도 7에 도시된 바와 같이, 가상공간 관리 시스템(741) 및 가상공간 컨트롤러 팜(742)을 포함할 수 있다. 가상공간 컨트롤러 팜(742)은 가상공간 관리 시스템(741)에 포함되는 형태로 구현될 수도 있다. 가상공간 관리 시스템(741)에 대해서는 이후 도 8를 통해 더욱 자세히 설명한다.
도 8은 본 발명의 일실시예에 따른 가상공간 관리 시스템(741)의 내부 구성의 예를 도시한 블록도이다. 본 실시예에 따른 가상공간 관리 시스템(741)은 도 8에 도시된 바와 같이, 클라이언트 인터페이스(Client I/F, 810), 에이전트 추적 관리 모듈(Agent Tracking Management Module, 820), 에이전트 정보 관리 모듈(Agent Information Management Module, 830), 가상세계 정보 관리 모듈(Virtual World Information Management Module, 840), 실시간 콘텐츠 제어 모듈(Real Time Content Control Module, 850), 물리세계 인터페이스 모듈(Physical World Interface Module, 860) 및 가상공간 컨트롤러 팜(742)을 포함할 수 있다. 이러한 가상공간 관리 시스템(741)의 구성요소들은 클라우드 컴퓨팅 시스템(740)을 구현하는 적어도 하나의 컴퓨터 장치(200)가 포함하는 프로세서(220)의 기능적 표현(functional expression)들일 수 있다.
클라이언트 인터페이스(810)는 VR 클라이언트 디바이스(710)를 위한 사용자 인터페이스를 제공할 수 있다. 예를 들어, 클라이언트 인터페이스(810)는 사용자가 VR 클라이언트 디바이스(710)를 이용하여 클라우드 컴퓨팅 시스템(740)이 제공하는 가상세계의 공간을 위한 서비스를 제공받는 과정에서 사용자가 가상세계의 공간과 상호작용할 수 있는 다양한 사용자 인터페이스들을 제공할 수 있다.
에이전트 추적 관리 모듈(820)은 가상세계의 공간 상에 배치 및 이동하는 에이전트를 추적할 수 있다. 에이전트를 추적함에 따라 얻어지는 정보는 추적 데이터베이스(Tracking DB)에 해당 에이전트의 식별자와 연관하여 실시간으로 저장될 수 있으며, 에이전트에 대한 추적 이력 정보가 추적 이력 데이터베이스(Tracking History DB)에 해당 에이전트의 식별자와 연관하여 저장될 수 있다.
에이전트 정보 관리 모듈(830)은 에이전트의 프로파일 및 에이전트의 동의를 저장할 수 있다. 예를 들어, 에이전트 정보 관리 모듈(830)은 에이전트의 프로파일을 해당 에이전트의 식별자와 연관하여 에이전트 프로파일 데이터베이스(Agent Profile DB)에 저장할 수 있으며, 에이전트의 동의 내용을 을 해당 에이전트의 식별자와 연관하여 에이전트 동의 데이터베이스(Agent Consent DB)에 저장할 수 있다. 여기서, 동의는 개인정보 및 이용약관에 대한 동의를 포함할 수 있다.
가상세계 정보 관리 모듈(840)은 가상세계의 공간에 대한 정보를 관리할 수 있다. 예를 들어, 가상세계 정보 관리 모듈(840)은 가상세계의 공간의 정책(Policy)에 대한 정보, 가상 맵 정보(Virtual Map Information), 가상세계의 공간의 위치 정보(일례로, 가상세계의 공간에 대한 GPS 정보), 가상세계의 공간에 배치된 디지털 오브젝트의 정보 등을 저장할 수 있으며, 다른 모듈로부터의 요청에 따라 해당 정보를 제공할 수 있다.
실시간 콘텐츠 제어 모듈(850)은 가상세계의 공간 내에서 표시될 콘텐츠를 선정할 수 있다. 예를 들어, 실시간 콘텐츠 제어 모듈(850)은 가상세계 공간 내에 구성된 디지털 오브젝트의 디스플레이 에어리어를 통해 표시될 콘텐츠를 선정할 수 있다. 이를 위해, 실시간 콘텐츠 제어 모듈(850)은 콘텐츠 비딩(bidding)을 위한 기능과 표시할 콘텐츠를 선택하기 위한 기능을 포함할 수 있다. 예를 들어, 실시간 콘텐츠 제어 모듈(850)은 제3자 디스플레이 콘텐츠 제공자(870)에 대한 비딩에 기반하여 디스플레이 에어리어를 통해 표시할 콘텐츠를 선택할 수 있다.
물리세계 인터페이스 모듈(860)은 물리 리소스를 제어하기 위한 기능 및 물리 리소스를 위한 인터페이스를 제공할 수 있다.
가상공간 컨트롤러 팜(742)은 앞서 설명한 바와 같이, VR 클라이언트 디바이스(710)의 렌더링을 돕기 위해, VSC의 인스턴스를 생성, 제공 및 관리할 수 있다.
이러한 가상공간 관리 시스템(741)은 VR 클라이언트 디바이스(710)로부터 HMD 정보 및 제어/센서 정보를 수신할 수 있다. HMD 정보는 3-DoF(Degrees of Freedom) 또는 6-DoF의 디바이스 모션 추적 정보를 포함할 수 있다. 여기서, 디바이스 모션 추적 정보는 VR 클라이언트 디바이스(710)에 대한 모션 추적 정보를 포함할 수 있다. 또한, HMD 정보는 VR 클라이언트 디바이스(710)로부터의 사용자 정보를 포함할 수 있다. 예를 들어, 사용자 정보는 사용자의 머리의 회전, 사용자의 몸의 이동, 사용자의 시선정보(eye-gaze information)를 포함할 수 있다. 또한, HMD 정보는 렌더링 지연, 온도 등과 같은 렌더링 관련 정보를 포함할 수 있다. 한편, 제어/센서 정보는 사용자의 몸의 이동에 대한 정보나, 키 이벤트, 이동 등과 같은 실시간 컨트롤러 정보를 포함할 수 있다.
이하에서는 VR 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템의 구체적인 실시예를 설명하기로 한다.
VR 환경에서 사용자들이 개별적으로 혹은 여러 사용자들이 동시에 웹 상의 콘텐츠를 소비하는 상황이 발생하게 되는데, 이때 콘텐츠를 창의 개념이 아닌 개별 오브젝트의 형태로 활용하기 위한 방법이 필요하다. 특히, VR 및 메타버스 환경에서 웹 브라우징 시 하이퍼링크를 이용한 콘텐츠 탐색 경험의 개선이 필요하다.
웹 오브젝트(WO, 513 또는 671)는 웹 상의 콘텐츠를 가상세계의 공간을 통해 노출하는 형태의 오브젝트일 수 있다. 이러한 웹 오브젝트는 기존의 웹 콘텐츠를 기준으로 구분될 수 있는 객체로서, 텍스트(text), 이미지(image), 재생 가능한 콘텐츠(Playable Content)(예컨대, 비디오, 오디오 등)로 구성될 수 있다. 에이전트 또는 아바타, 디지털 오브젝트, AI 등이 커뮤니케이션을 목적으로 자연어를 발화하는 경우 보이스(voice)가 더 포함될 수 있다.
웹 오브젝트의 분류 기준(Classification Criteria)은 개별 오브젝트 단위를 위한 태그 구분점이 활용될 수 있다. <div>와 같은 스타일, 혹은 <img>, <video>, <table>, <canvas> 등과 같은 HTML 태그를 기반으로 개별 오브젝트를 구분할 수 있다. 또한, <audio> 태그를 사용하는 것 이외에도 보이스를 개별 오브젝트로 구분하기 위해 별도의 사운드 관련 태그가 신규 정의될 수 있다. 자연어 발화에 의한 보이스는 물론이고, 배경음(background sound), 특정 지점의 웅성거림과 같은 공간음(space sound) 등이 사운드 관련 태그로 구분될 수 있다.
개별 오브젝트에 해당하는 태그는 유형의(tangible) 특성을 가지며, VR 서비스에서 제공하는 기본 인터페이스(일례로, 오브젝트 에어리어)를 이용하거나 콘텐츠 생성자가 의도한 제3자 유형의 특성을 이용할 수 있다. 개별 오브젝트 별로 각 오브젝트의 특성에 따라서 제어 인터페이스나 출력 또는 재생에 따른 인터페이스 등이 제공될 수 있다. 또한, 서비스 상에서 콘텐츠 또는 메시지가 AI 등을 통해 소프트웨어를 기반으로 동적으로 생성되는 경우 이를 처리하기 위해 원 출력 형태 이외에도 유형 형태로의 출력을 지원할 수 있다. 예를 들어, 가상의 에이전트 봇이 보이스를 출력하는 경우 사용자가 해당 메시지를 놓치지 않도록 사운드가 아닌 텍스트 등의 메시지 형태로 요청할 수 있는 기능을 제공한다.
도 9는 HTML 태그로 작성된 콘텐츠 등 웹 콘텐츠(700)의 한 가지 예시를 도시한 것이다.
웹 콘텐츠(700)는 CSS(cascading style sheets) 적용이 용이하도록 <div> 태그를 이용하여 개별 오브젝트로 분류될 수 있으며, 도 9에 도시한 바와 같이 <tag> 기준으로 분류되는 사용자 입력 오브젝트(901), 입력 버튼 오브젝트(902), 하이퍼링크(903) 등이 포함될 수 있고, <div id> 또는 <class> 기준으로 분류되는 콘텐츠 오브젝트(904) 등이 포함될 수 있다.
도 10은 본 발명의 일실시예에 있어서 웹 콘텐츠에 대한 유형 오브젝트 인식 과정의 예를 도시한 순서도이다. 본 실시예에 따른 유형 오브젝트 인식 과정은 가상세계의 공간을 렌더링할 수 있는 디바이스(도 7을 통해 설명한 VR 클라이언트 디바이스(710)나 모바일 엣지 컴퓨팅 디바이스(720) 또는 엣지 컴퓨팅 디바이스(730)와 대응됨)를 구현하는 컴퓨터 장치(200)에 의해 수행될 수 있다.
단계(1010)에서 컴퓨터 장치(200)는 퍼블리셔(publisher)(일례로, 서버(150, 160) 등)로부터 VR 공간을 통해 노출하고자 하는 웹 콘텐츠를 로딩한다.
단계(1020)에서 컴퓨터 장치(200)는 단계(1010)에서 로딩된 웹 콘텐츠의 파싱(parsing)을 통해 유형의 특성을 가진 오브젝트, 즉 유형 오브젝트를 선정한다.
도 11을 참조하면, 컴퓨터 장치(200)는 웹 콘텐츠(1100)를 파싱하여 <div> 태그를 기준으로 유형 오브젝트(1101 내지 1105)로 인식할 개별 오브젝트를 선정할 수 있다. 사용자 입력 오브젝트(901)나 입력 버튼 오브젝트(902)와 같이 사용자 입력을 위한 <tag>가 인접한 영역 내에서 연속적으로 존재하는 경우 상위의 분류 기준인 <div> 태그를 이용하여 연속된 오브젝트들을 하나의 유형 오브젝트(1101)로 그룹핑할 수 있다.
단계(1030)에서 컴퓨터 장치(200)는 단계(1010)에서 로딩된 웹 콘텐츠에 대해 단계(1020)에서 선정된 유형 오브젝트 별로 사용자 입력에 대응할 영역 정보를 생성한다. 다시 말해, 컴퓨터 장치(200)는 웹 콘텐츠에 포함된 각각의 유형 오브젝트에 대응되는 영역 정보로서 해당 유형 오브젝트에 대한 사용자 입력을 위한 영역 정보를 별도로 생성한다.
단계(1040)에서 컴퓨터 장치(200)는 단계(1010)에서 로딩된 웹 콘텐츠를 VR 공간을 통해 노출함에 있어 유형 오브젝트에 대한 시각적 하이라이팅(highlighting)을 적용할 수 있다. 컴퓨터 장치(200)는 유형 오브젝트 각각에 대해 생성된 영역을 개별 오브젝트 영역으로서 하이라이팅할 수 있다.
컴퓨터 장치(200)는 VR 공간 상에 웹 콘텐츠를 렌더링하는 과정에서 웹 콘텐츠 내 유형 오브젝트를 인식하여 각 유형 오브젝트 별로 생성된, 사용자 입력을 위한 영역을 시각적으로 강조하여 표시할 수 있다.
도 12는 본 발명의 일실시예에 있어서 유형 오브젝트 상에서의 포커싱 이동 과정의 예를 도시한 순서도이다. 본 실시예에 따른 포커싱 이동 과정은 가상세계의 공간을 렌더링할 수 있는 디바이스(도 7을 통해 설명한 VR 클라이언트 디바이스(710)나 모바일 엣지 컴퓨팅 디바이스(720) 또는 엣지 컴퓨팅 디바이스(730)와 대응됨)를 구현하는 컴퓨터 장치(200)에 의해 수행될 수 있다.
컴퓨터 장치(200)는 VR 공간 상에 렌더링된 웹 콘텐츠에 대한 사용자 입력 환경을 제공할 수 있다. 유형 오브젝트 중 입력(input), 텍스트(text), 선택 태그(select tag)와 같이 사용자의 입력을 받아들일 수 있는 요소가 존재하는 경우 해당 오브젝트 상에서의 포커싱 이동 기술이 필요하다.
단계(1210)에서 컴퓨터 장치(200)는 VR 공간 상에 렌더링된 웹 콘텐츠에 대하여 사용자의 입력 수단을 통한 입력 포커스를 수신한다. 컴퓨터 장치(200)는 웹 콘텐츠에 대해 사용자의 입력 포커스로서 사용자가 포커싱하는 위치를 인식할 수 있다.
단계(1220)에서 컴퓨터 장치(200)는 사용자의 입력 포커스가 웹 콘텐츠의 유형 오브젝트 영역 이내에 위치하는지 여부를 판단한다. 컴퓨터 장치(200)는 사용자가 VR 공간 상의 렌더링된 웹 콘텐츠 내에서 어떤 유형 오브젝트를 포커싱하는지 인식할 수 있다.
단계(1230)에서 컴퓨터 장치(200)는 사용자의 입력 포커스가 유형 오브젝트 영역을 벗어나는 경우 해당 입력 포커스를 일반 웹 콘텐츠의 화면에 대한 반응으로 처리할 수 있다.
단계(1240)에서 컴퓨터 장치(200)는 사용자의 입력 포커스가 유형 오브젝트 영역 이내에 위치하는 경우 해당 입력 포커스가 위치한 유형 오브젝트 영역을 다른 유형 오브젝트와 구별되도록 시각적으로 강조 표시할 수 있다.
단계(1250)에서 컴퓨터 장치(200)는 사용자의 입력 포커스가 위치한 유형 오브젝트 영역 이내에서 입력 포커스에 대한 사용자의 입력 이동에 따라 자동 포커싱(auto focusing)을 통해 해당 유형 오브젝트의 입력 창 위치로 포커스를 이동할 수 있다.
컴퓨터 장치(200)는 유형 오브젝트 상에서의 포커싱 이동은 물론이고 자동 포커싱과 자동 완성(auto complete) 기능을 지원할 수 있다.
유형 오브젝트에 대한 포커싱이 이루어질 경우 포커싱은 제스처(gesture), 시선 추적(eye tracking), 자동 포커싱 등의 형태가 가능하다. 컴퓨터 장치(200)는 포커싱된 데이터를 파싱하여 가상 환경의 사용자 정보를 관리하는 에이전트로 전달할 수 있다. 이때, 사용자가 설정한 기본 정보 또는 플랫폼 상에서의 사용자의 행위 등을 통해 수집된 사용자 정보를 NLP(자연어 처리) 기반으로 자동 입력을 진행할 수 있다.
유형 오브젝트 중 사용자 입력과 관련된 부분은 궁극적으로 가상 환경에서 제공하는 사용자 에이전트를 이용한 AI 기반 데이터 입력으로 대체 가능하다. 따라서, VS(320)의 사용자 에이전트가 유형 오브젝트 또는 입력 양식(form) 등을 판단하고 해당 대상을 사용자 에이전트와 인접한 환경(예를 들어, 공간 또는 포커싱, 서비스 플로우나 컨텍스트 등)에서 발견할 경우 입력 정보 생성을 요청할 수 있다. 기존의 W3C 양식 관련 엘리먼트 중 'auto complete'가 활성화(on)되어 있는 경우 해당 기능을 동작할 수 있다. 이때, 사용자 에이전트, 즉 브라우저 기반 에이전트 또는 VR 환경(메타버스) 플랫폼 상에서 제공하는 사용자 에이전트는 자동 입력에 대한 기능을 백그라운드 프로세스로 처리한 후 사용자에게 UI적으로 알림(notification)을 제공하고, 이후 사용자가 동의하는 경우 입력 정보를 서버 측으로 전달할 수 있다.
도 13은 본 발명의 일실시예에 있어서 자동 포커싱과 자동 완성 과정의 예를 도시한 순서도이다.
도 13을 참조하면, 단계(1301)에서 컴퓨터 장치(200)는 VR 공간을 통해 노출하고자 하는 웹 페이지를 로딩한다.
단계(1302)에서 컴퓨터 장치(200)는 로딩한 웹 페이지에서 유형 오브젝트를 감지한다.
단계(1303)에서 컴퓨터 장치(200)는 유형 오브젝트 중 입력과 관련된 양식, 사용자 입력/선택 등을 감지할 수 있다. 다시 말해, 컴퓨터 장치(200)는 사용자의 입력 포커스가 유형 오브젝트 영역에 있거나 자동 완성이 활성화된 태그인지 판단할 수 있다. VS 플랫폼과 계약된 사업자의 경우 웹 사이트의 도메인 또는 인증서 등을 기반으로 하여 사용자 에이전트의 자동 완성을 자동 지원하기 위한 기능을 활성화할 수 있다.
단계(1304)에서 컴퓨터 장치(200)는 사용자 입력에 따른 웹 소스로부터 메타데이터를 추출할 수 있다. 컴퓨터 장치(200)는 양식 관련 레이블(label) 정보 또는 추가 정의한 메타데이터에 기반하여 필요 데이터의 추출이 가능하다.
단계(1305)에서 컴퓨터 장치(200)는 단계(1304)에서 추출된 메타데이터를 VS 플랫폼 상의 사용자 에이전트로 전송할 수 있다. 유형 오브젝트를 생성하는 에이전트는 사용자와의 사전 허락된 정보(permission)에 기반하여 메타데이터를 해당 사용자의 VS 플랫폼 에이전트로 전달할 수 있다. 이때, 사용자의 VS 상의 정보(예를 들어, ID 또는 식별 가능한 구분자)를 함께 전달함으로써 식별자 기반의 정보 노출 설정에 따라 자동 생성되는 응답 값이 달라질 수 있다. VS 정보의 특성 및 사업자 등에 기반하여 상호 계약 기반으로 연계할 수 있으며, 디도스(DDoS)와 같은 공격을 예방하기 위해 도메인 또는 페이지 등의 단위 별로 서비스 요청 횟수가 제한될 수 있다.
단계(1306)에서 컴퓨터 장치(200)는 입력 양식이나 사용자 입력/선택을 통한 입력 데이터를 분석 및 생성할 수 있다.
단계(1307)에서 컴퓨터 장치(200)는 입력 데이터에 대해 프라이버시를 체크한 후 로깅을 진행할 수 있다.
단계(1308)에서 컴퓨터 장치(200)는 프라이버스 체크 및 로깅을 거친 데이터를 반환할 수 있다.
단계(1309)에서 컴퓨터 장치(200)는 반환 데이터를 이용하여 자동 완성 기능을 준비할 수 있다.
단계(1310 내지 1311)에서 컴퓨터 장치(200)는 사용자 확인을 거친 후 유형 오브젝트 내에서 자동 완성을 수행할 수 있다. 컴퓨터 장치(200)는 자동 입력된 정보 중 사용자 프라이버시 관련 내용 또는 선택적인 정보(결제나 주문과 같이 사용자 확인이 반드시 필요한 정보)에 대해 사용자 확인 단계를 명시적으로 생성하여 이를 VS 환경에 노출할 수 있다.
도 14를 참조하면, 컴퓨터 장치(200)는 VR 공간 상에 렌더링된 웹 콘텐츠(1100)에 대한 사용자의 입력 포커스(1410)가 어느 하나의 유형 오브젝트(1101) 상에 위치하는 경우 해당 유형 오브젝트(1101)의 영역을 다른 유형 오브젝트(1102 내지 1105)와 구별되도록 하이라이팅할 수 있다.
도 15와 도 16에 도시한 바와 같이, 컴퓨터 장치(200)는 사용자의 입력 포커스(1410)의 이동에 따라 자동 포커싱 방식을 통해 유형 오브젝트(1101) 내의 입력 창 중에서 사용자의 입력 포커스(1410)에 대응되는 위치로 커서 등의 포커스(1520)를 이동시킬 수 있다.
유형 오브젝트 영역 내에 입력, 텍스트, 선택 태그와 같이 사용자의 입력을 받아 들일 수 있는 요소가 다수 존재하는 경우 코드 상의 개별 오브젝트 순서 및 CSS 상의 개별 오브젝트 위치를 기준으로 좌측 위에서부터 자동 포커싱할 수 있다.
사용자의 입력 포커스에 대한 오토 포커싱의 순서를 콘텐츠 제작 시점에 결정하기 위해서 별도의 메타데이터 태그(metadata tag)를 활용할 수 있다. 메타데이터 태그는 <div> 태그나 <class> 태그 별로 사용자 입력이 가능한 태그에 대해 입력의 우선 순위를 정수(integer) 값 형태로 지정하거나 상대적 정보로 기술할 수 있다.
그리고, 유형 오브젝트 상에서 사용자의 입력이 필요한 경우 VR 환경에서는 키보드와 같은 사용자 입력 방식이 불편하기 때문에 사용자의 입력 방식에 대한 추가 기능을 제공할 수 있다.
컴퓨터 장치(200)는 기본 입력 방식으로서 가상 키보드 등의 시스템 제공 방식을 활용할 수 있다. 컴퓨터 장치(200)는 가상 키보드 이외에도 음성 입력 방식, 뇌파 입력 방식 등을 활용할 수 있다. 실시예에 따라서는 컴퓨터 장치(200)가 제3자 디바이스와 연동하는 경우 제3자 입력도구를 이용한 입력 방식을 활용하는 것 또한 가능하다.
웹 콘텐츠를 제공하는 퍼블리셔 입장에서는 VR 환경을 통해 제공되는 콘텐츠가 사용자 클라이언트 단 환경에서 세그먼팅(segmenting), 즉 오브젝트화되는 경우 퍼블리셔가 원하는 조판(publication format)이나 부가 콘텐츠(예컨대, 광고 등)를 노출할 수 있는 기회를 박탈당할 수 있다.
이에, 퍼블리셔는 콘텐츠를 오브젝트화하는 것에 대해 선택적으로 거부할 수 있거나 관련된 콘텐츠를 순차적으로 노출하기 위한 방법을 제공할 수 있다. 퍼블리셔는 <vr rendering-option="segment">, <vr rendering-option="no_segment"> 등과 같이 HTML 상에 콘텐츠 노출 방법에 대한 정보를 제공하여 세그먼트 지원 여부를 미리 제시할 수 있다.
더 나아가, 퍼블리셔는 오브젝트화 가능한 콘텐츠에 대해 조판, 콘텐츠 노출 방법, 부가 콘텐츠 등에 대한 요구사항을 오브젝트 단위로 기획하여 제공하는 것 또한 가능하다.
도 17은 본 발명의 일실시예에 있어서 웹 기반 VR 환경에서 에이전트 간 커뮤니케이션을 진행하는 과정의 예를 도시한 것이다.
도 17을 참조하면, 컴퓨터 장치(200)는 에이전트 간(사용자 대 사용자, 사용자 대 가상 봇 등)에 VR 기반 VS 상에서의 커뮤니케이션을 지원할 수 있다.
사용자가 상대 에이전트가 언급한 내용을 듣다가 특정 내용에 대해 음성 기반이 아닌, 사용자가 원하는 형태, 예를 들어 텍스트 또는 웹 객체 형태로 콘텐츠를 요청하여 제공받을 수 있다. 상대 에이전트는 텍스트나 스크립트가 매뉴얼 형태로 제공될 때 음성 발화로 사용자에게 전달할 수 있고, 혹은 사용자가 웹 페이지 등의 형태로 요청할 수도 있다. 일반 사용자가 에이전트를 통해 VS 상의 다른 사용자에게 발화하는 경우 또한 발화 내용을 STT 엔진 등을 통해 텍스트 메시지 형태로 전달할 수 있다.
이때, 봇 에이전트가 언급하는 내용은 NLP 기반 자연어 처리 결과로 제공되거나 혹은 웹 페이지나 매뉴얼 데이터 등과 같이 사전 배정된(pre assign) 텍스트 형태로 제공될 수 있다. 또한, 사용자 에이전트가 언급하는 내용은 보이스 형태로 전달될 수 있다.
다시 말해, VS에 참여하는 에이전트는 자신의 출력 결과물에 대해 상대 에이전트가 원하는 형태의 포맷으로 변환하여 제공할 수 있다.
컴퓨터 장치(200)는 VR 환경에서 웹 페이지를 윈도우 단위의 브라우징이 아닌, 사용자가 원하는 오브젝트를 중심으로 웹 렌더링을 진행할 수 있다. 사용자가 손쉽게 원하는 웹 오브젝트를 선택할 수 있고 선택된 영역에 대해 다음의 기능이 지원한다. 첫째, VR 공간 상에 위치시키는 기능, 둘째, 선택 영역에 대한 별도의 URL을 획득하는 기능, 셋째, 선택 영역만을 타 사용자에게 전달하는 기능.
도 11을 참조하면, 컴퓨터 장치(200)는 VR 공간 상에 노출된 웹 콘텐츠(1100)의 유형 오브젝트(1101 내지 1105) 중에서 사용자가 관심 영역을 선택하는 경우 사용자 관심 영역에 대한 분리를 통해 해당 영역의 활용이 가능하도록 고유의 접근 URL을 생성하는 방식을 적용할 수 있다.
컴퓨터 장치(200)는 웹 콘텐츠(1100)의 유형 오브젝트(1101 내지 1105) 중 사용자 관심 영역에 대응되는 오브젝트를 웹 콘텐츠(1100)에서 분리하여 고유 주소를 가진 새 창으로 표시할 수 있다.
웹 기반 콘텐츠 탐색 환경을 개선하기 위해서는 기존 웹 브라우징 시 하이퍼링크를 이용한 콘텐츠 탐색 경험의 개선이 필요하다.
일반적인 스크린 환경에서의 웹 브라우징은 탭 브라우징으로 탭이 추가되는 형태나 새로운 윈도우로 브라우징되는 형태로, 이전 탐색 내용이 가려짐에 따라 확인이 어렵고 다단으로 탐색 시 탐색 히스토리에 대한 추적이 어렵다.
또한, 웹 페이지에 렌더링되는 정보는 공급자가 제공한 전체 페이지 정보가 렌더링되어 실제 사용자가 관심을 가진 부분, 예를 들어 콘텐츠가 긴 영역의 경우 어느 지점에서 선택해서 다음 페이지로 전환되었는지를 설명(복기)하기 어려운 경우가 발생한다.
컴퓨터 장치(200)는 하이퍼링크의 연결 관계 및 브라우저를 공간 기반으로 배치함으로써 웹 기반 콘텐츠 탐색 경험을 개선할 수 있다. 컴퓨터 장치(200)는 일반 윈도우 환경과 대비하여 넓은 공간에서의 유형의 경험을 극대화하기 위한 배치 기능을 제공할 수 있다.
도 18을 참조하면, 컴퓨터 장치(200)는 웹 콘텐츠(1800)를 새 창으로 브라우징하여 VR 공간 상에 각각 배치할 수 있고, 이때 사용자 설정에 따라 새 창 생성 시 에이전트(1801)의 위치를 새 창으로 브라우징된 웹 콘텐츠(1800) 앞으로 자동 이동시킬 수 있다.
특히, 컴퓨터 장치(200)는 사용자의 탐색 히스토리를 시각화하고 이를 빠르게 추적할 수 있는 환경을 함께 제공할 수 있다. 사용자가 탐색한 웹 콘텐츠(1800)에 대한 펼쳐 보기 기능을 지원하여 사용자가 원하는 시점에 탐색 히스토리를 추적할 수 있다. 펼쳐 보기 방식은 사용자가 탐색한 웹 콘텐츠(1800)가 사용자 시점을 기준으로 일렬로 수평 혹은 수직 배치하는 방식, 혹은 사용자 에이전트(1801)의 위치를 중심으로 주위를 둘러싸는 배치 형태로 제공될 수 있다.
VR 공간 상에 노출된 웹 콘텐츠(1800)를 보는 시점의 이동이 필요하며, 사용자 에이전트(1801)가 이동하는 것 이외에 웹 콘텐츠(1800)의 브라우징 창이 이동하는 것 또한 가능하다.
도 19와 도 20을 참조하면, 사용자가 VR 공간 상의 브라우징 창(1910)에서 특정 하이퍼링크를 클릭하는 경우 사용자 에이전트(1801)의 위치가 고정된 상태에서 애니메이션 등의 형태로 기존 브라우징 창(1910)이 옆으로 이동하고 사용자가 클릭한 하이퍼링크에 대한 새로운 브라우징 창(1920)이 사용자 에이전트(1801) 앞에 노출될 수 있다.
그리고, 컴퓨터 장치(200)는 풀 콘텐츠가 아닌 사용자가 관심을 가진 콘텐츠 영역에 대해서만 취사 선택하여 노트 등의 형태로 VR 공간 상에 배치하여 노출할 수 있다. 이때, 컴퓨터 장치(200)는 VR 상에서 사용자의 취사 선택에 따라 웹 콘텐츠(1800)에 대한 사용자의 탐색 경로 중 적어도 일부를 저장할 수 있다.
도 21을 참조하면, 컴퓨터 장치(200)는 사용자의 탐색 경로에 대한 저장 여부 질의(2100)를 통해 탐색 경로에 해당하는 정보를 저장할 수 있다. 탐색 경로의 저장은 VS와 관련된 스토리지 등을 이용할 수 있으며, 저장에 따른 비용이 발생할 수 있다.
컴퓨터 장치(200)는 사용자의 탐색 경로에 대해 사용자 모션 등의 입력을 통해 탐색 경로에 포함된 탐색 링크 관계를 편집할 수 있고, 이후 특정 탐색 경로에 해당하는 정보만을 저장할 수 있다.
예를 들어, 도 22에 도시한 바와 사용자가 탐색 경로 중 일부 관계를 자르는 제스처를 입력한 경우 사용자 확인 질의(2200)를 통해 탐색 링크 연결을 끊을 수 있다. 이때, 탐색 링크 중 일부 연결 관계가 잘린 경우 잘린 지점을 기준으로 이전 탐색 경로와 이후 탐색 경로 중 선택된 경로에 대해 창 닫기 기능을 함께 실행할 수 있다.
본 실시예들은 기존 어플리케이션과 달리 VR 및 메타버스 환경에서 사용자 탐색 기록을 추적할 수 있는 기능을 위해 사용자 이벤트로 발생되는 새 창 생성 및 페이지 전환 등에 대해 인지하고 이를 개별적인 창 모드로 생성할 수 있다.
브라우저의 경우 DOM 이벤트 상에서 하이퍼링크와 같이 사용자 이벤트 발생에 대한 감지 및 새 창으로의 이벤트 전환을 제공할 수 있다. 기타 어플리케이션에서 추적 기능을 제공하는 경우 별도의 설정을 통해 사용자의 탐색 경로에 대한 추적 기능이 제공 가능하도록 새 창으로 브라우징하는 기능을 제공할 수 있다. 또한, 탐색된 일련의 창에 대한 ID를 별도로 추적하고 사용자 선택에 따른 중간 지점에서 창 닫기를 요청하는 경우 해당 지점 이전 또는 이후의 창을 닫는 기능을 제공할 수 있다.
이처럼 본 발명의 실시예들에 따르면, 가상현실 환경에서 웹 상의 콘텐츠를 창의 개념이 아닌 개별 오브젝트 형태로 제공할 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 컴퓨터 저장 매체 또는 장치에 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 이때, 매체는 컴퓨터로 실행 가능한 프로그램을 계속 저장하거나, 실행 또는 다운로드를 위해 임시 저장하는 것일 수도 있다. 또한, 매체는 단일 또는 수 개의 하드웨어가 결합된 형태의 다양한 기록수단 또는 저장수단일 수 있는데, 어떤 컴퓨터 시스템에 직접 접속되는 매체에 한정되지 않고, 네트워크 상에 분산 존재하는 것일 수도 있다. 매체의 예시로는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등을 포함하여 프로그램 명령어가 저장되도록 구성된 것이 있을 수 있다. 또한, 다른 매체의 예시로, 어플리케이션을 유통하는 앱 스토어나 기타 다양한 소프트웨어를 공급 내지 유통하는 사이트, 서버 등에서 관리하는 기록매체 내지 저장매체도 들 수 있다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (20)

  1. 컴퓨터 장치가 수행하는 방법에 있어서,
    상기 컴퓨터 장치가 포함하는 적어도 하나의 프로세서의 의해, 유형 오브젝트(tangible object)가 포함된 웹 페이지를 VR(virtual reality) 공간 상에 렌더링하는 단계
    를 포함하고,
    상기 렌더링하는 단계는,
    상기 웹 페이지의 브라우징 창에 상기 유형 오브젝트 각각에 대하여 해당 오브젝트에 대응되는 영역으로서 사용자 입력을 위한 영역을 표시하는 단계; 및
    상기 유형 오브젝트 중 상기 사용자 입력에 따른 관심 오브젝트를 상기 웹 페이지에서 분리하여 상기 VR 공간 상의 다른 브라우징 창으로 표시하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 렌더링하는 단계는,
    상기 웹 페이지의 브라우징 창과 상기 관심 오브젝트의 브라우징 창을 상기 VR 공간 상의 개별 브라우징 창으로 각각 배치하는 단계
    를 포함하는 방법.
  3. 제2항에 있어서,
    상기 렌더링하는 단계는,
    상기 VR 공간 상에서 사용자 에이전트의 위치를 새로운 브라우징 창 앞으로 이동시키는 단계
    를 포함하는 방법.
  4. 제2항에 있어서,
    상기 렌더링하는 단계는,
    상기 VR 공간 상에서 사용자 에이전트의 위치를 고정한 상태에서 이전 브라우징 창을 이동시키고 새로운 브라우징 창을 상기 사용자 에이전트의 앞에 배치하는 단계
    를 포함하는 방법.
  5. 제2항에 있어서,
    상기 렌더링하는 단계는,
    상기 VR 공간에서의 웹 탐색 경로로서 상기 개별 브라우징 창 간의 탐색 링크 관계를 추적하여 시각화하는 단계
    를 포함하는 방법.
  6. 제5항에 있어서,
    상기 렌더링하는 단계는,
    상기 웹 탐색 경로에 포함된 적어도 일부 탐색 경로에 해당하는 정보를 저장하는 기능, 상기 웹 탐색 경로에 포함된 탐색 링크 관계를 편집하는 기능, 및 상기 웹 탐색 경로에 포함된 적어도 일부 탐색 경로의 브라우징 창을 닫는 기능 중 적어도 하나를 제공하는 단계
    를 포함하는 방법.
  7. 제1항에 있어서,
    상기 방법은,
    상기 적어도 하나의 프로세서의 의해, 상기 VR 공간을 통한 에이전트 간의 커뮤니케이션 환경에서 상기 관심 오브젝트에 대한 고유 URL을 획득하여 상기 관심 오브젝트를 상대 에이전트로 전달하는 단계
    를 더 포함하는 방법.
  8. 제1항에 있어서,
    상기 방법은,
    상기 적어도 하나의 프로세서의 의해, 상기 VR 공간을 통한 에이전트 간의 커뮤니케이션 환경에서 상대 에이전트에 대한 출력 결과물을 상기 상대 에이전트가 원하는 형태의 포맷으로 변환하여 제공하는 단계
    를 더 포함하는 방법.
  9. 제1항에 있어서,
    상기 사용자 입력을 위한 영역을 표시하는 단계는,
    개별 오브젝트 단위를 위한 태그 구분점을 이용하여 상기 웹 페이지에서 상기 유형 오브젝트를 선정하는 단계
    를 포함하는 방법.
  10. 제1항에 있어서,
    상기 방법은,
    상기 적어도 하나의 프로세서의 의해, 상기 유형 오브젝트에 대응되는 영역 내에서 사용자의 입력 포커스의 이동에 따라 오토 포커싱(auto focusing)을 통해 상기 입력 포커스에 대응되는 위치로 포커스를 이동시키는 포커싱 이동 기능을 제공하는 단계
    를 더 포함하는 방법.
  11. 제10항에 있어서,
    상기 제공하는 단계는,
    사용자 입력이 가능한 태그에 대한 입력의 우선 순위가 포함된 메타데이터 태그(metadata tag)를 이용하여 오토 포커싱을 수행하는 단계
    를 포함하는 방법.
  12. 제10항에 있어서,
    상기 제공하는 단계는,
    상기 입력 포커스에 따른 입력 정보에 대한 자동 완성(auto complete) 기능을 제공하는 단계
    를 포함하는 방법.
  13. 제1항 내지 제12항 중 어느 한 항의 방법을 컴퓨터 장치에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램.
  14. 컴퓨터 장치에 있어서,
    메모리에 포함된 컴퓨터 판독가능한 명령들을 실행하도록 구성된 적어도 하나의 프로세서
    를 포함하고,
    상기 적어도 하나의 프로세서는,
    유형 오브젝트(tangible object)가 포함된 웹 페이지를 VR(virtual reality) 공간 상에 렌더링하는 것으로,
    상기 웹 페이지의 브라우징 창에 상기 유형 오브젝트 각각에 대하여 해당 오브젝트에 대응되는 영역으로서 사용자 입력을 위한 영역을 표시하고,
    상기 유형 오브젝트 중 상기 사용자 입력에 따른 관심 오브젝트를 상기 웹 페이지에서 분리하여 상기 VR 공간 상의 다른 브라우징 창으로 표시하는 것
    을 특징으로 하는 컴퓨터 장치.
  15. 제14항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 웹 페이지의 브라우징 창과 상기 관심 오브젝트의 브라우징 창을 상기 VR 공간 상의 개별 브라우징 창으로 각각 배치하는 것
    을 특징으로 하는 컴퓨터 장치.
  16. 제15항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 VR 공간 상에서 사용자 에이전트의 위치를 새로운 브라우징 창 앞으로 이동시키거나, 또는 사용자 에이전트의 위치를 고정한 상태에서 이전 브라우징 창을 이동시키고 새로운 브라우징 창을 상기 사용자 에이전트의 앞에 배치하는 것
    을 특징으로 하는 컴퓨터 장치.
  17. 제15항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 VR 공간에서의 웹 탐색 경로로서 상기 개별 브라우징 창 간의 탐색 링크 관계를 추적하여 시각화하는 것
    을 특징으로 하는 컴퓨터 장치.
  18. 제17항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 웹 탐색 경로에 포함된 적어도 일부 탐색 경로에 해당하는 정보를 저장하는 기능, 상기 웹 탐색 경로에 포함된 탐색 링크 관계를 편집하는 기능, 및 상기 웹 탐색 경로에 포함된 적어도 일부 탐색 경로의 브라우징 창을 닫는 기능 중 적어도 하나를 제공하는 것
    을 특징으로 하는 컴퓨터 장치.
  19. 제14항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 VR 공간을 통한 에이전트 간의 커뮤니케이션 환경에서 상기 관심 오브젝트에 대한 고유 URL을 획득하여 상기 관심 오브젝트를 상대 에이전트로 전달하는 것
    을 특징으로 하는 컴퓨터 장치.
  20. 제14항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 VR 공간을 통한 에이전트 간의 커뮤니케이션 환경에서 상대 에이전트에 대한 출력 결과물을 상기 상대 에이전트가 원하는 형태의 포맷으로 변환하여 제공하는 것
    을 특징으로 하는 컴퓨터 장치.
KR1020210136350A 2021-10-14 2021-10-14 가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템 KR20230053143A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210136350A KR20230053143A (ko) 2021-10-14 2021-10-14 가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210136350A KR20230053143A (ko) 2021-10-14 2021-10-14 가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템

Publications (1)

Publication Number Publication Date
KR20230053143A true KR20230053143A (ko) 2023-04-21

Family

ID=86098457

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210136350A KR20230053143A (ko) 2021-10-14 2021-10-14 가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR20230053143A (ko)

Similar Documents

Publication Publication Date Title
US10547571B2 (en) Message service providing method for message service linked to search service and message server and user terminal to perform the method
KR102111194B1 (ko) 통신 세션에서의 가상 어시스턴트
JP5939525B2 (ja) 共有サービス
US20080250327A1 (en) Content commenting and monetization
US11321640B2 (en) Distributing a user interface for accessing files
TW201508639A (zh) 透過捕捉服務捕捉網站內容
WO2022205772A1 (zh) 直播间的页面元素展示方法及装置
KR102277300B1 (ko) 검색 서비스와 연결된 메시지 서비스를 위한 메시지 서비스 제공 방법 및 상기 메시지 서비스 제공 방법을 수행하는 메시지 서버 및 사용자 단말
JP2017191601A (ja) メッセンジャーサービスを利用したキーワード検索方法及びシステム
US11720376B2 (en) Methods and systems for content generation via templates with rules and/or triggers
CN103562908A (zh) 利用不同文件宿主的文件访问
CN104601672A (zh) 基于不同应用客户端的分享网络资源的方法和装置
US20240022633A1 (en) Method and system for providing web content in virtual reality environment
KR102127336B1 (ko) Vip의 메시지를 관리하는 기능을 제공하는 방법 및 단말
US11182959B1 (en) Method and system for providing web content in virtual reality environment
CN113076499A (zh) 一种页面互动方法、装置、设备、介质及程序产品
US9342386B1 (en) Messaging channel for web pages, extensions, and applications to communicate
KR101519856B1 (ko) 컨텐츠 공유를 위한 장치 및 방법, 이를 위한 통신 서비스 시스템
US20190258666A1 (en) Resource accessibility services
US9588969B2 (en) Retargeting content segments to multiple devices
KR20230053143A (ko) 가상현실 환경에서 웹 콘텐츠를 제공하기 위한 방법 및 시스템
JP2022083404A (ja) 検索方法、コンピュータプログラム、およびコンピュータ装置
US11902223B2 (en) Intelligent assistant content generation
US20230334170A1 (en) Method and system for providing privacy in virtual space
KR102353797B1 (ko) 영상 컨텐츠에 대한 합성음 실시간 생성에 기반한 컨텐츠 편집 지원 방법 및 시스템