WO2020189816A1 - 360 vr 인터랙티브 중계를 위한 사용자 인터페이스 및 방법 - Google Patents

360 vr 인터랙티브 중계를 위한 사용자 인터페이스 및 방법 Download PDF

Info

Publication number
WO2020189816A1
WO2020189816A1 PCT/KR2019/003177 KR2019003177W WO2020189816A1 WO 2020189816 A1 WO2020189816 A1 WO 2020189816A1 KR 2019003177 W KR2019003177 W KR 2019003177W WO 2020189816 A1 WO2020189816 A1 WO 2020189816A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
resolution image
resolution
region
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2019/003177
Other languages
English (en)
French (fr)
Inventor
장준환
박우출
양진욱
김용화
이준석
윤상필
최민수
김현욱
조은경
양재영
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Korea Electronics Technology Institute
Original Assignee
Korea Electronics Technology Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Korea Electronics Technology Institute filed Critical Korea Electronics Technology Institute
Publication of WO2020189816A1 publication Critical patent/WO2020189816A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Definitions

  • the present invention relates to a user interface and method, and more particularly, to a user interface and method for 360 VR interactive relay.
  • Virtual or augmented reality technologies wearing HMDs are advancing very rapidly.
  • Such virtual reality is a technology in which a user enters a virtual space, and representative devices to which it is applied include Oculus Rift and Vibe, and a dedicated controller is used as an input device for content manipulation.
  • Watching a 360VR image and a panoramic image while wearing such an HMD is not viewing the entire area at once, but viewing only a partial area (Field of View) at one moment.
  • the display screen can be controlled by recognizing the user's voice recognition and viewpoint.
  • tile-based streaming service technology which is a method of adaptively streaming only the viewing area, has been developed, but there is no user interface for selectively viewing multiple images or playing within a single screen using this technology, resulting in inconvenience. .
  • the present invention has been conceived to solve the above problems, and an object of the present invention is a user interface for 360 VR relaying to which tile-based streaming service technology is applied and 360 VR interactive relaying capable of playing multiple images in one screen And to provide a method.
  • Another object of the present invention is to provide a user interface and method for a 360 VR interactive broadcast in which a specific sub media is selected from a plurality of added sub media and a screen being played is switched when viewing a 360 VR video.
  • a user interface method for 360 VR interactive relaying includes receiving a low-resolution image, a super-resolution image, or a high-resolution image for a specific video, and sub-images for a plurality of videos. step; Generating a screen image in which a user's region of interest is composed of an ultra-high resolution or high-resolution image, a peripheral region of the region of interest is composed of a low-resolution image, and a sub-image is added to the peripheral region; And outputting the generated screen image.
  • the user interface method for 360 VR interactive relay further includes: setting a user's region of interest according to the user's viewpoint, and setting an area other than the set region of interest as a peripheral region; can do.
  • the sub-image may include advertisement information having a commercial purpose or information on a recommended image related to the video.
  • the video is a tile-based MPEG image
  • the sub-image may have a resolution of 1920X1080 when the resolution of a tile-by-tile split image or a low-resolution image constituting a screen image is 1024X1024.
  • the region within a preset range from the set region of interest is set as the first peripheral region, and the region other than the region of interest and the first peripheral region is set to the second peripheral region. If the region of interest is set as a region and the region of interest is composed of an ultra-high resolution image, a screen image in which the first peripheral region is composed of a high-resolution image and the second peripheral region is composed of a low-resolution image may be output.
  • the displayed screen when a viewpoint of a screen moves while a screen image is displayed or a user moves a cursor and selects a specific object, the displayed screen
  • the image is updated; may further include.
  • the viewpoint of the screen or the cursor may be moved according to the movement of the wearable device worn on the body other than the user's head.
  • a super high resolution image or a high resolution image generated based on the same video as the selected sub image is output to the region of interest. Then, a low-resolution image generated based on the same video as the selected sub-image may be output to the surrounding area.
  • a super high resolution image or a high resolution image generated based on the same video as the selected sub image is placed in the region of interest.
  • a low-resolution image that is output and generated based on the same video as the selected sub-image is output to the surrounding area, but the sub-image generated based on the same video as the super-high-resolution image or high-resolution image that was output to the region of interest is selected. It can be added to the place of the surrounding area to be output.
  • a user interface for 360 VR interactive relay includes: a communication unit for receiving a low-resolution image, a super-resolution image, or a high-resolution image for a specific video, and sub-images for a plurality of videos; A processor for generating a screen image in which the user's region of interest is composed of an ultra-high resolution or high-resolution image, a peripheral region of the region of interest is composed of a low-resolution image, and a sub-image is added to the peripheral region; And a display that outputs a screen image.
  • a user interface method for 360 VR interactive relay includes generating a low-resolution image, a super-resolution image or a high-resolution image, and a sub-image for each video; And by selecting a low-resolution image, a super-resolution image, or a high-resolution image for a specific video, the user's region of interest is composed of an ultra-high resolution or high-resolution image, and the peripheral region of the region of interest is composed of a low-resolution image, but sub-images for other videos And outputting a screen image added to the surrounding area.
  • a user interface for 360 VR interactive relay includes a processor that generates a low-resolution image, a super-resolution image or a high-resolution image, and a sub-image for each video; And by selecting a low-resolution image, a super-resolution image, or a high-resolution image for a specific video, the user's region of interest is composed of an ultra-high resolution or high-resolution image, and the peripheral region of the region of interest is composed of a low-resolution image, but sub-images for other videos And a display that outputs a screen image added to the surrounding area.
  • 360 VR relaying and multiple images to which tile-based streaming service technology is applied can be played in one screen, and when viewing 360 VR images and audio, additional sub media Convenience can be provided to a user by selecting a specific sub media from among them and switching the screen being played.
  • FIG. 1 is a diagram provided to explain a user interface system for 360 VR interactive relay according to an embodiment of the present invention
  • FIG. 2 is a diagram illustrating a user interface for playing a 360 VR image
  • FIG. 3 is a diagram illustrating a user interface for controlling a 360 VR image being played
  • FIG. 4 is a diagram illustrating a user interface for controlling a 360 VR image being played through an HMD
  • FIG. 5 is a diagram illustrating a screen image in which a 360 VR image is being played.
  • FIG. 6 is a diagram illustrating a user interface for converting a 360 VR image being played back into a sub media.
  • a user interface system for 360 VR interactive relay includes a processor 100, a display 200, a communication unit 300, and a storage unit 400.
  • 360 VR broadcast and multiple videos to which the based streaming service technology is applied can be played within one screen, and when viewing 360 VR videos, a specific sub media can be selected from a plurality of added sub media to switch the playing screen.
  • the processor 100 may generate a screen image in which the user's region of interest is composed of an ultra-high resolution or high-resolution image, and the peripheral region of the region of interest is composed of a low-resolution image, and a sub-image is added to the peripheral region.
  • the processor 100 when the processor 100 receives data for a low-resolution image, an ultra-high-resolution image, a high-resolution image, and a sub-image from the server through the communication unit 300, the processor 100 sets the user's region of interest according to the user's viewpoint, By setting a region other than the set region of interest as a peripheral region, the user's region of interest may be composed of an ultra-high resolution or high-resolution image, and a screen image with sub-images added to the peripheral region of the region of interest may be generated.
  • the sub-image may include a video that relays a relay video output through a screen image from a different viewpoint, advertisement information having a commercial purpose, or information on a recommended video related to the video.
  • the video is a tile-based MPEG image
  • a resolution of a split image for each tile or a low-resolution image of an ultra-high or high-resolution image constituting a screen image is 1024X1024, the resolution may be 1920X1080.
  • the processor 100 receives data on a low-resolution image, an ultra-high-resolution image, a high-resolution image, and a sub-image from the server through the communication unit 300, and then, when the user's region of interest is set, the set interest If an area within a preset range from the area is set as the first surrounding area, and an area other than the area of interest and the first surrounding area is set as the second surrounding area, and the area of interest is composed of an ultra-high resolution image, the first surrounding area is A first image composed of a high-resolution image and a second peripheral region composed of a low-resolution image may be generated.
  • the processor 100 generates a low-resolution image, an ultra-high-resolution image, or a high-resolution image, and a sub-image for each video, sets a user's region of interest according to the user's viewpoint, and sets an area other than the set region of interest.
  • a low-resolution image, a super-resolution image, or a high-resolution image for a specific video is selected, and the user's region of interest is composed of an ultra-high resolution or high-resolution image, and the peripheral region of the region of interest is composed of a low-resolution image.
  • a screen image in which a sub-image for another video is added to the surrounding area may be generated.
  • the processor 100 may generate a new screen image and update the displayed screen image when the viewpoint of the screen moves while the screen image is being output or the user moves the cursor to select a specific object. have.
  • the processor 100 is separately provided through the communication unit 300 and wirelessly connected to a wearable device worn on a body other than the user's head, the screen is displayed according to the movement of the wearable device worn on the body other than the user's head.
  • the viewpoint moves or the cursor moves, convenience may be provided to the user.
  • the processor 100 calculates the user's viewpoint in a state in which the screen image is output, and when the specific object selected by the cursor is a sub-image, an ultra-high resolution image or high-resolution image generated based on the same video as the selected sub-image An image may be output to the ROI, and a low-resolution image generated based on the same video as the selected sub-image may be output to the surrounding area.
  • the processor 100 may allow the sub-image generated based on the same video as the ultra-high resolution image or the high-resolution image to be output to the region of interest to be added to a position in the peripheral region where the selected sub-image was output to be output.
  • the display 200 is implemented as a HMD (Head Mounted Display) worn on the user's head or a display 200 capable of outputting a 360 VR image, and is created to relay 360 VR and reproduce multiple images in one screen. You can print the screen image.
  • HMD Head Mounted Display
  • the communication unit 300 in a module wirelessly connected to the server, receives data for a 360 VR image from the server, is separately provided, and is wirelessly connected to a wearable device worn on a body other than the user's head to receive data. It is a means, and the storage unit 400 is a storage medium that provides a storage space necessary for the processor 100 to operate.
  • the communication unit 300 may receive a low-resolution image, an ultra-high-resolution image, or a high-resolution image for a specific video, and sub-images for a plurality of videos.
  • FIG. 2 is a diagram illustrating a user interface for playing a 360 VR image.
  • the user interface system for 360 VR interactive relay may provide a user interface through the display 200.
  • the display 200 may provide a user interface for playing a 360 VR image as illustrated in FIG. 2.
  • the user interface provided by the display 200 to play a 360 VR image includes an area A-1 211 for inputting a server URL, area A-2 212 for inputting a server port number, and a specific image.
  • the A-3 area 213 can be input, the A-4 area 214 can select the TV output mode, and the HMD output mode can be selected.
  • A-5 area 215 and A-6 area 216 capable of reproducing the selected 360 VR image may be included.
  • FIG. 3 is a diagram illustrating a user interface for controlling a 360 VR image being played
  • FIG. 4 is a diagram illustrating a user interface for controlling a 360 VR image being played through an HMD
  • FIG. 5 This is a diagram illustrating a screen image being played.
  • the display 200 may provide a user interface for controlling a 360 VR image being played as illustrated in FIGS. 3 to 5.
  • the user interface provided by the display 200 outputs a sub-image for playback by selecting one or more sub-media, so that a sub-image to be converted into a screen image can be selected.
  • FIG. 6 is a diagram illustrating a user interface for converting a 360 VR image being played back into a sub media.
  • the display 200 may provide a user interface for converting a 360 VR image to a sub-media as illustrated in FIG. 6.
  • an image of super high resolution or high resolution and an image of low resolution are played around the region of interest.
  • the user interface provided by the display 200 includes a C-1 area 231 where the video being played can be terminated, and a low-resolution video composed of a low-resolution image among 360 VR videos is played.
  • C-4 region 234 may be included.
  • the generated video is the same as the selected sub-image.
  • An ultra-high resolution image or a high-resolution image may be output to the ROI, and a low-resolution image generated based on the same video as the selected sub-image may be output to the surrounding area.
  • the sub-image generated based on the video identical to the super-resolution image or the high-resolution image that was output to the ROI may be added and output in a position of the surrounding area where the selected sub-image was output.
  • a specific sub-media may be selected from among a plurality of added sub-media, and a screen being played may be switched.
  • a computer-readable recording medium containing a computer program that performs functions of the apparatus and method according to the present embodiment.
  • the technical idea according to various embodiments of the present disclosure may be implemented in the form of a computer-readable code recorded on a computer-readable recording medium.
  • the computer-readable recording medium can be any data storage device that can be read by a computer and can store data.
  • a computer-readable recording medium may be a ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical disk, hard disk drive, or the like.
  • a computer-readable code or program stored in a computer-readable recording medium may be transmitted through a network connected between computers.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Analytical Chemistry (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurosurgery (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

360 VR 인터랙티브 중계를 위한 사용자 인터페이스 및 방법이 제공된다. 본 발명의 실시예에 따른 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법은 특정 비디오에 대한 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지 및 복수의 비디오에 대한 서브 이미지를 수신하는 단계; 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 서브 이미지가 주변영역에 부가된 화면 이미지를 생성하는 단계; 및 생성된 화면 이미지를 출력하는 단계;를 포함한다. 이에 의해, 타일 기반 스트리밍 서비스 기술이 적용된 360 VR 중계 및 다수 영상을 하나의 화면 안에서 재생할 수 있으며, 360 VR 영상 시청 시, 부가된 다수의 서브 미디어 중에서 특정 서브 미디어를 선택하여, 재생 중인 화면을 전환하도록 함으로써, 사용자에게 편의를 제공할 수 있다.

Description

360 VR 인터랙티브 중계를 위한 사용자 인터페이스 및 방법
본 발명은 사용자 인터페이스 및 방법에 관한 것으로, 더욱 상세하게는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 및 방법에 관한 것이다.
HMD를 착용하는 가상 혹은 증강현실 기술들은 매우 빠르게 발전하고 있다. 이러한 가상현실은 사용자가 가상의 공간에 들어가게 되는 기술로써, 이를 적용한 대표적인 기기로는 오큘러스 리프트, 바이브 등이 있으며, 콘텐츠 조작을 위한 입력장치로써 전용 컨트롤러를 사용한다.
이러한 HMD 등을 착용하여 360VR 영상과 파노라마 영상을 시청하는 것은 전체 영역을 한번에 보는 것이 아니라, 한 순간에는 일부 영역(Field of View; FOV)만을 보는 것이다.
즉, 전체영역을 보기 위해서는 일부 영역을 상하좌우로 조금씩 움직이면서 보게 되는데, 사용자의 음성 인식, 시점 등을 인식하여, 표시화면을 제어할 수 있다.
한편, 8K(7680x4320)/16K(15360x8640)급 360VR 및 파노라마 영상과 같은 초대용량 비디오를 스트리밍 서비스하기 위해서, 초대용량 영상 데이터를 한번에 스트리밍하기보다는 영상을 미리 분할 영상(타일)로 분할하여 사용자가 현재 보고 있는 영역만을 적응적으로 스트리밍하는 방법인 타일 기반 스트리밍 서비스 기술이 개발되었으나, 이를 이용하여 다수 영상을 선택적으로 시청하거나 하나의 화면 안에서 재생되도록 하기 위한 사용자 인터페이스는 마련되어 있지 않아, 불편함이 존재한다.
따라서, 타일 기반 스트리밍 서비스 기술이 적용된 360 VR 영상 시청 시, 다수 영상을 선택적으로 시청하거나 하나의 화면 안에서 재생할 수 있는 방안의 모색이 요구된다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 타일 기반 스트리밍 서비스 기술이 적용된 360 VR 중계 및 다수 영상을 하나의 화면 안에서 재생할 수 있는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 및 방법을 제공함에 있다.
본 발명의 다른 목적은, 360 VR 영상 시청 시, 부가된 다수의 서브 미디어 중에서 특정 서브 미디어를 선택하여, 재생 중인 화면을 전환하도록 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 및 방법을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법은, 특정 비디오에 대한 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지 및 복수의 비디오에 대한 서브 이미지를 수신하는 단계; 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 서브 이미지가 주변영역에 부가된 화면 이미지를 생성하는 단계; 및 생성된 화면 이미지를 출력하는 단계를 포함한다.
그리고 본 발명의 일 실시예에 따른, 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법은, 사용자의 시점에 따라 사용자의 관심영역을 설정하고, 설정된 관심영역 이외에 영역을 주변영역으로 설정하는 단계;를 더 포함할 수 있다.
또한, 서브 이미지는, 상업적인 목적을 갖는 광고정보 또는 해당 영상과 관련된 추천영상에 대한 정보가 포함될 수 있다.
그리고 비디오는, 타일 기반 MPEG 영상이며, 서브 이미지는, 화면 이미지를 구성하는 초고해상도 또는 고해상도 이미지의 타일별 분할영상 또는 저해상도 이미지의 해상도가 1024X1024인 경우, 해상도가 1920X1080일 수 있다.
또한, 화면 이미지를 출력하는 단계는, 사용자의 관심영역이 설정되면, 설정된 관심영역으로부터 기설정된 범위 이내의 영역을 제1 주변영역으로 설정하고, 관심영역 및 제1 주변영역 이외에 영역을 제2 주변영역으로 설정하여, 관심영역이 초고해상도 이미지로 구성되면, 제1 주변영역이 고해상도 이미지로 구성되고, 제2 주변영역이 저해상도 이미지로 구성되는 화면 이미지를 출력할 수 있다.
그리고 본 발명의 일 실시예에 따른, 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법은, 화면 이미지가 출력되는 상태에서 화면의 시점이 이동하거나 또는 사용자가 커서를 이동하여 특정 객체를 선택하면, 출력되는 화면 이미지가 갱신되는 단계;를 더 포함할 수 있다.
또한, 화면 이미지가 갱신되는 단계는, 사용자의 머리 이외의 신체에 착용된 웨어러블 기기의 움직임에 따라 화면의 시점이 이동하거나 커서가 이동될 수 있다.
그리고 화면 이미지가 갱신되는 단계는, 화면 이미지가 출력되는 상태에서, 커서가 선택한 특정 객체가 서브 이미지인 경우, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 초고해상도 이미지 또는 고해상도 이미지가 관심영역에 출력되고, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 저해상도 이미지가 주변영역에 출력되도록 할 수 있다.
또한, 화면 이미지가 갱신되는 단계는, 화면 이미지가 출력되는 상태에서, 커서가 선택한 특정 객체가 서브 이미지인 경우, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 초고해상도 이미지 또는 고해상도 이미지가 관심영역에 출력되고, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 저해상도 이미지가 주변영역에 출력되도록 하되, 관심영역에 출력되던 초고해상도 이미지 또는 고해상도 이미지와 동일한 비디오를 기반으로 생성된 서브 이미지가 선택된 서브 이미지가 출력되던 주변영역의 자리에 부가되어 출력되도록 할 수 있다.
한편, 본 발명의 다른 실시예에 따른, 360 VR 인터랙티브 중계를 위한 사용자 인터페이스는 특정 비디오에 대한 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지 및 복수의 비디오에 대한 서브 이미지가 수신하는 통신부; 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 서브 이미지가 주변영역에 부가된 화면 이미지를 생성하는 프로세서; 및 화면 이미지를 출력하는 디스플레이;를 포함할 수 있다.
한편, 본 발명의 다른 실시예에 따른 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법은 비디오별로 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지, 그리고 서브 이미지를 생성하는 단계; 및 특정 비디오에 대한 저해상도 이미지 및 초고해상도 이미지 또는 고해상도 이미지를 선택하여, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 다른 비디오에 대한 서브 이미지가 주변영역에 부가된 화면 이미지를 출력하는 단계;를 포함하는 단계;를 포함한다.
한편, 본 발명의 다른 실시예에 따른, 360 VR 인터랙티브 중계를 위한 사용자 인터페이스는 비디오별로 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지, 그리고 서브 이미지를 생성하는 프로세서; 및 특정 비디오에 대한 저해상도 이미지 및 초고해상도 이미지 또는 고해상도 이미지를 선택하여, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 다른 비디오에 대한 서브 이미지가 주변영역에 부가된 화면 이미지를 출력하는 디스플레이;를 포함한다.
이상 설명한 바와 같이, 본 발명의 실시예들에 따르면, 타일 기반 스트리밍 서비스 기술이 적용된 360 VR 중계 및 다수 영상을 하나의 화면 안에서 재생할 수 있으며, 360 VR 영상 및 음성 시청 시, 부가된 다수의 서브 미디어 중에서 특정 서브 미디어를 선택하여, 재생 중인 화면을 전환하도록 함으로써, 사용자에게 편의를 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 시스템의 설명에 제공된 도면,
도 2는 360 VR 영상을 재생하기 위한 사용자 인터페이스를 예시한 도면,
도 3은 재생 중인 360 VR 영상을 제어하기 위한 사용자 인터페이스를 예시한 도면,
도 4는 HMD를 통해 재생 중인 360 VR 영상을 제어하기 위한 사용자 인터페이스를 예시한 도면,
도 5는 360 VR 영상이 재생 중인 화면 이미지를 예시한 도면, 그리고
도 6은 재생 중인 360 VR 영상을 서브 미디어로 전환하기 위한 사용자 인터페이스를 예시한 도면이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 시스템의 설명에 제공된 도면이다. 도 1에 도시된 바와 같이 본 발명의 일 실시예에 따른 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 시스템은 프로세서(100), 디스플레이(200), 통신부(300) 및 저장부(400)를 포함하여, 타일 기반 스트리밍 서비스 기술이 적용된 360 VR 중계 및 다수 영상을 하나의 화면 안에서 재생할 수 있으며, 360 VR 영상 시청 시, 부가된 다수의 서브 미디어 중에서 특정 서브 미디어를 선택하여, 재생 중인 화면을 전환할 수 있다.
프로세서(100)는, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 서브 이미지가 주변영역에 부가된 화면 이미지를 생성할 수 있다.
예를 들면, 프로세서(100)는 통신부(300)를 통해, 서버로부터 저해상도 이미지, 초고해상도 이미지, 고해상도 이미지 및 서브 이미지에 대한 데이터를 수신하면, 사용자의 시점에 따라 사용자의 관심영역을 설정하고, 설정된 관심영역 이외에 영역을 주변영역으로 설정하여, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되는 동시에 관심영역의 주변영역에 서브 이미지가 부가된 화면 이미지가 생성될 수 있다.
이때, 서브 이미지는, 화면 이미지를 통해 출력되는 중계 영상을 다른 시점에서 중계하는 영상, 상업적인 목적을 갖는 광고정보 또는 해당 영상과 관련된 추천영상에 대한 정보가 포함될 수 있다.
그리고 비디오는 타일 기반 MPEG 영상이며, 화면 이미지를 구성하는 초고해상도 또는 고해상도 이미지의 타일별 분할영상 또는 저해상도 이미지의 해상도가 1024X1024인 경우, 해상도가 1920X1080일 수 있다.
다른 예를 들면, 프로세서(100)는, 통신부(300)를 통해, 서버로부터 저해상도 이미지, 초고해상도 이미지, 고해상도 이미지 및 서브 이미지에 대한 데이터를 수신한 이후, 사용자의 관심영역이 설정되면, 설정된 관심영역으로부터 기설정된 범위 이내의 영역을 제1 주변영역으로 설정하고, 관심영역 및 제1 주변영역 이외에 영역을 제2 주변영역으로 설정하여, 관심영역이 초고해상도 이미지로 구성되면, 제1 주변영역이 고해상도 이미지로 구성되고, 제2 주변영역이 저해상도 이미지로 구성되는 제1 이미지를 생성할 수 있다.
또 다른 예를 들면, 프로세서(100)는, 비디오별로 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지, 그리고 서브 이미지를 생성하고, 사용자의 시점에 따라 사용자의 관심영역을 설정하고, 설정된 관심영역 이외에 영역을 주변영역으로 설정한 이후, 특정 비디오에 대한 저해상도 이미지 및 초고해상도 이미지 또는 고해상도 이미지를 선택하여, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 다른 비디오에 대한 서브 이미지가 주변영역에 부가된 화면 이미지를 생성할 수 있다.
또한, 프로세서(100)는, 화면 이미지가 출력되는 상태에서 화면의 시점이 이동하거나 또는 사용자가 커서를 이동하여 특정 객체를 선택하면, 새로운 화면 이미지를 생성하여, 출력되는 화면 이미지가 갱신되도록 할 수 있다.
이때, 프로세서(100)는 통신부(300)를 통해, 별도로 마련되어 사용자의 머리 이외의 신체에 착용된 웨어러블 기기와 무선으로 연결되면, 사용자의 머리 이외의 신체에 착용된 웨어러블 기기의 움직임에 따라 화면의 시점이 이동하거나 커서가 이동함으로써, 사용자에게 편의를 제공할 수 있다.
또한, 프로세서(100)는, 화면 이미지가 출력되는 상태에서, 사용자의 시점을 계산하고, 커서가 선택한 특정 객체가 서브 이미지인 경우, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 초고해상도 이미지 또는 고해상도 이미지가 관심영역에 출력되고, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 저해상도 이미지가 주변영역에 출력되도록 할 수 있다.
그리고 프로세서(100)는, 관심영역에 출력되던 초고해상도 이미지 또는 고해상도 이미지와 동일한 비디오를 기반으로 생성된 서브 이미지가 선택된 서브 이미지가 출력되던 주변영역의 자리에 부가되어 출력되도록 할 수 있다.
디스플레이(200)는, 사용자의 머리에 착용되는 HMD(Head Mounted Display) 또는 360 VR 영상의 출력이 가능한 디스플레이(200)로 구현되어, 360 VR 중계 및 다수 영상을 하나의 화면 안에서 재생하기 위해, 생성된 화면 이미지를 출력할 수 있다.
통신부(300)는, 서버에 무선으로 연결된 모듈에서, 서버로부터 360 VR 영상에 대한 데이터를 수신하고, 별도로 마련되어 사용자의 머리 이외의 신체에 착용된 웨어러블 기기와 무선으로 연결되어, 데이터를 수신하는 통신 수단이고, 저장부(400)는, 프로세서(100)가 동작함에 있어 필요한 저장 공간을 제공하는 저장매체이다.
구체적으로 통신부(300)는, 특정 비디오에 대한 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지 및 복수의 비디오에 대한 서브 이미지를 수신할 수 있다.
도 2는 360 VR 영상을 재생하기 위한 사용자 인터페이스를 예시한 도면이다.
본 발명의 일 실시예에 따른 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 시스템은 디스플레이(200)를 통해, 사용자 인터페이스를 제공할 수 있다.
구체적으로, 본 발명의 일 실시예에 따른 디스플레이(200)는 도 2에 예시된 바와 같이 360 VR 영상을 재생하기 위한 사용자 인터페이스를 제공할 수 있다.
360 VR 영상을 재생하기 위해 디스플레이(200)가 제공하는 사용자 인터페이스는, 서버 URL 입력할 수 있는 A-1 영역(211), 서버 포트 넘버의 입력할 수 있는 A-2 영역(212), 특정 영상의 재생 시작 지점(time)을 선택하기 위해, 새그먼트 인덱스의 입력할 수 있는 A-3 영역(213), TV 출력 모드를 선택할 수 있는 A-4 영역(214), HMD 출력 모드를 선택할 수 있는 A-5 영역(215), 그리고 선택된 360 VR 영상을 재생할 수 있는 A-6 영역(216)을 포함할 수 있다.
도 3은 재생 중인 360 VR 영상을 제어하기 위한 사용자 인터페이스를 예시한 도면이며, 도 4는 HMD를 통해 재생 중인 360 VR 영상을 제어하기 위한 사용자 인터페이스를 예시한 도면이고, 도 5는 360 VR 영상이 재생 중인 화면 이미지를 예시한 도면이다.
본 발명의 일 실시예에 따른 디스플레이(200)는 도 3 내지 도 5에 예시된 바와 같이 재생 중인 360 VR 영상을 제어하기 위한 사용자 인터페이스를 제공할 수 있다.
재생 중인 360 VR 영상을 제어하기 위해, 디스플레이(200)가 제공하는 사용자 인터페이스는, 하나 이상의 서브 미디어를 선택하여 재생하기 위한 서브 이미지가 출력되어, 화면 이미지로 전환하고자 하는 서브 이미지를 선택할 수 있는 B-1 영역(221), 360 VR 영상을 구성하는 화면 이미지가 출력되는 B-2 영역(222), 메뉴 그룹을 on/off 할 수 있는 B-3 영역(223), 사운드 볼륨을 제어할 수 있는 B-4 영역(224), 360 VR 영상을 관심영역 및 주변영역으로 설정하지 않고, 동일한 화질의 영상으로 재생하는 FULL 모드를 선택할 수 있는 B-5 영역(225), 360 VR 영상을 관심영역 및 주변영역으로 설정하여, 설정된 관심영역 이외에 영역을 주변영역으로 설정하여, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되는 영상을 재생하는 VR 모드를 선택할 수 있는 B-6 영역(226), 화면 이미지에 부가되는 서브 이미지의 수를 조절할 수 있는 B-7 영역(227)을 포함할 수 있다.
도 6은 재생 중인 360 VR 영상을 서브 미디어로 전환하기 위한 사용자 인터페이스를 예시한 도면이다.
본 발명의 일 실시예에 따른 디스플레이(200)는 도 6에 예시된 바와 같이 360 VR 영상을 서브 미디어로 전환하기 위한 사용자 인터페이스를 제공할 수 있다.
기본적으로 사용자의 시점(관심영역)에 따라 초고해상도 또는 고해상도의 이미지와 저해상도의 이미지가 관심영역을 중심으로 재생된다.
360 VR 영상을 서브 미디어로 전환하기 위해, 디스플레이(200)가 제공하는 사용자 인터페이스는, 재생 중인 영상을 종료할 수 있는 C-1 영역(231), 360 VR 영상 중 저해상도 이미지로 구성된 저해상도 영상이 재생 중인 C-2 영역(232), 서브 미디어를 선택하여 재생하기 위한 서브 이미지를 선택할 수 있는 C-3 영역(233), 360 VR 영상 중 초고해상도 또는 고해상도 이미지로 구성된 초고해상도 또는 고해상도 영상이 재생 중인 C-4 영역(234)을 포함할 수 있다.
즉, 사용자는 360 VR 영상을 서브 미디어로 전환하기 위한 사용자 인터페이스를 이용하여, 화면 이미지가 출력되는 상태에서, 커서가 선택한 특정 객체가 서브 이미지인 경우, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 초고해상도 이미지 또는 고해상도 이미지가 관심영역에 출력되고, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 저해상도 이미지가 주변영역에 출력되도록 할 수 있다.
이때, 관심영역에 출력되던 초고해상도 이미지 또는 고해상도 이미지와 동일한 비디오를 기반으로 생성된 서브 이미지는 선택된 서브 이미지가 출력되던 주변영역의 자리에 부가되어 출력될 수 있다.
이를 통해, 360 VR 영상 시청 시, 부가된 다수의 서브 미디어 중에서 특정 서브 미디어를 선택하여, 재생 중인 화면을 전환하도록 할 수 있다.
한편, 본 실시예에 따른 장치와 방법의 기능을 수행하게 하는 컴퓨터 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체에도 본 발명의 기술적 사상이 적용될 수 있음은 물론이다. 또한, 본 발명의 다양한 실시예에 따른 기술적 사상은 컴퓨터로 읽을 수 있는 기록매체에 기록된 컴퓨터로 읽을 수 있는 코드 형태로 구현될 수도 있다. 컴퓨터로 읽을 수 있는 기록매체는 컴퓨터에 의해 읽을 수 있고 데이터를 저장할 수 있는 어떤 데이터 저장 장치이더라도 가능하다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광디스크, 하드 디스크 드라이브, 등이 될 수 있음은 물론이다. 또한, 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터로 읽을 수 있는 코드 또는 프로그램은 컴퓨터간에 연결된 네트워크를 통해 전송될 수도 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (12)

  1. 특정 비디오에 대한 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지 및 복수의 비디오에 대한 서브 이미지를 수신하는 단계;
    사용자의 시점을 계산하여, 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 서브 이미지가 주변영역에 부가된 화면 이미지를 생성하는 단계; 및
    생성된 화면 이미지를 출력하는 단계;를 포함하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  2. 청구항 1에 있어서,
    사용자의 시점에 따라 사용자의 관심영역을 설정하고, 설정된 관심영역 이외에 영역을 주변영역으로 설정하는 단계;를 더 포함하는 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  3. 청구항 2에 있어서,
    서브 이미지는,
    상업적인 목적을 갖는 광고정보 또는 해당 영상과 관련된 추천영상에 대한 정보가 포함되는 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  4. 청구항 2에 있어서,
    비디오는,
    타일 기반 MPEG 영상이며,
    서브 이미지는,
    화면 이미지를 구성하는 초고해상도 또는 고해상도 이미지의 타일별 분할영상 또는 저해상도 이미지의 해상도가 1024X1024인 경우, 해상도가 1920X1080인 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  5. 청구항 1에 있어서,
    화면 이미지를 출력하는 단계는,
    사용자의 관심영역이 설정되면, 설정된 관심영역으로부터 기설정된 범위 이내의 영역을 제1 주변영역으로 설정하고, 관심영역 및 제1 주변영역 이외에 영역을 제2 주변영역으로 설정하여, 관심영역이 초고해상도 이미지로 구성되면, 제1 주변영역이 고해상도 이미지로 구성되고, 제2 주변영역이 저해상도 이미지로 구성되는 화면 이미지를 출력하는 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  6. 청구항 1에 있어서,
    화면 이미지가 출력되는 상태에서 화면의 시점이 이동하거나 또는 사용자가 커서를 이동하여 특정 객체를 선택하면, 출력되는 화면 이미지가 갱신되는 단계;를 더 포함하는 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  7. 청구항 6에 있어서,
    화면 이미지가 갱신되는 단계는,
    사용자의 머리 이외의 신체에 착용된 웨어러블 기기의 움직임에 따라 화면의 시점이 이동하거나 커서가 이동하는 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  8. 청구항 6에 있어서,
    화면 이미지가 갱신되는 단계는,
    화면 이미지가 출력되는 상태에서, 커서가 선택한 특정 객체가 서브 이미지인 경우, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 초고해상도 이미지 또는 고해상도 이미지가 관심영역에 출력되고, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 저해상도 이미지가 주변영역에 출력되도록 하는 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  9. 청구항 8에 있어서,
    화면 이미지가 갱신되는 단계는,
    화면 이미지가 출력되는 상태에서, 커서가 선택한 특정 객체가 서브 이미지인 경우, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 초고해상도 이미지 또는 고해상도 이미지가 관심영역에 출력되고, 선택된 서브 이미지와 동일한 비디오를 기반으로 생성된 저해상도 이미지가 주변영역에 출력되도록 하되,
    관심영역에 출력되던 초고해상도 이미지 또는 고해상도 이미지와 동일한 비디오를 기반으로 생성된 서브 이미지가 선택된 서브 이미지가 출력되던 주변영역의 자리에 부가되어 출력되도록 하는 것을 특징으로 하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  10. 특정 비디오에 대한 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지 및 복수의 비디오에 대한 서브 이미지가 수신하는 통신부;
    사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 서브 이미지가 주변영역에 부가된 화면 이미지를 생성하는 프로세서; 및
    화면 이미지를 출력하는 디스플레이;를 포함하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스.
  11. 비디오별로 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지, 그리고 서브 이미지를 생성하는 단계; 및
    특정 비디오에 대한 저해상도 이미지 및 초고해상도 이미지 또는 고해상도 이미지를 선택하여, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 다른 비디오에 대한 서브 이미지가 주변영역에 부가된 화면 이미지를 출력하는 단계;를 포함하는 단계;를 포함하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스 방법.
  12. 비디오별로 저해상도 이미지, 초고해상도 이미지 또는 고해상도 이미지, 그리고 서브 이미지를 생성하는 프로세서; 및
    특정 비디오에 대한 저해상도 이미지 및 초고해상도 이미지 또는 고해상도 이미지를 선택하여, 사용자의 관심영역이 초고해상도 또는 고해상도 이미지로 구성되고, 관심영역의 주변영역이 저해상도 이미지로 구성되되, 다른 비디오에 대한 서브 이미지가 주변영역에 부가된 화면 이미지를 출력하는 디스플레이;를 포함하는 360 VR 인터랙티브 중계를 위한 사용자 인터페이스.
PCT/KR2019/003177 2019-03-19 2019-03-19 360 vr 인터랙티브 중계를 위한 사용자 인터페이스 및 방법 Ceased WO2020189816A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190031044A KR102278748B1 (ko) 2019-03-19 2019-03-19 360 vr 인터랙티브 중계를 위한 사용자 인터페이스 및 방법
KR10-2019-0031044 2019-03-19

Publications (1)

Publication Number Publication Date
WO2020189816A1 true WO2020189816A1 (ko) 2020-09-24

Family

ID=72520906

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/003177 Ceased WO2020189816A1 (ko) 2019-03-19 2019-03-19 360 vr 인터랙티브 중계를 위한 사용자 인터페이스 및 방법

Country Status (2)

Country Link
KR (1) KR102278748B1 (ko)
WO (1) WO2020189816A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118175434A (zh) * 2024-05-11 2024-06-11 成都索贝数码科技股份有限公司 一种分布式视频实时拼接方法、设备及系统

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230027950A (ko) 2021-08-20 2023-02-28 선문대학교 산학협력단 터치식 사용자 인터페이스를 가지는 가상현실 시스템
JP7676353B2 (ja) * 2022-12-28 2025-05-14 キヤノン株式会社 撮像装置及び移動体

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140058553A (ko) * 2011-07-07 2014-05-14 에이티아이 테크놀로지스 유엘씨 뷰잉-포커스 지향식 이미지 프로세싱
KR20180028299A (ko) * 2016-09-08 2018-03-16 가온미디어 주식회사 공간적 구조 정보를 이용한 동기화된 다시점 영상의 선택적 복호화 방법, 부호화 방법 및 그 장치
US20180096494A1 (en) * 2016-09-30 2018-04-05 Visbit Inc. View-optimized light field image and video streaming
KR20180039170A (ko) * 2015-09-16 2018-04-17 (주)바텍이우홀딩스 다중 해상도 3차원 엑스선 영상 재구성 장치 및 방법
WO2018182144A1 (ko) * 2017-03-29 2018-10-04 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101995958B1 (ko) * 2012-11-28 2019-07-03 한국전자통신연구원 스마트 글래스 기반 영상 처리 장치 및 방법
KR20170088654A (ko) * 2016-01-25 2017-08-02 한국기술교육대학교 산학협력단 레이싱 영상 서비스를 제공하기 위한 방법 및 그 시스템
KR101861929B1 (ko) * 2016-09-28 2018-05-28 가천대학교 산학협력단 관심 영역을 고려한 가상 현실 서비스 제공

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140058553A (ko) * 2011-07-07 2014-05-14 에이티아이 테크놀로지스 유엘씨 뷰잉-포커스 지향식 이미지 프로세싱
KR20180039170A (ko) * 2015-09-16 2018-04-17 (주)바텍이우홀딩스 다중 해상도 3차원 엑스선 영상 재구성 장치 및 방법
KR20180028299A (ko) * 2016-09-08 2018-03-16 가온미디어 주식회사 공간적 구조 정보를 이용한 동기화된 다시점 영상의 선택적 복호화 방법, 부호화 방법 및 그 장치
US20180096494A1 (en) * 2016-09-30 2018-04-05 Visbit Inc. View-optimized light field image and video streaming
WO2018182144A1 (ko) * 2017-03-29 2018-10-04 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118175434A (zh) * 2024-05-11 2024-06-11 成都索贝数码科技股份有限公司 一种分布式视频实时拼接方法、设备及系统

Also Published As

Publication number Publication date
KR20200111408A (ko) 2020-09-29
KR102278748B1 (ko) 2021-07-19

Similar Documents

Publication Publication Date Title
WO2018182321A1 (en) Method and apparatus for rendering timed text and graphics in virtual reality video
WO2010013892A2 (en) Apparatus and method for displaying an enlarged target region of a reproduced image
WO2011005025A2 (en) Signal processing method and apparatus therefor using screen size of display device
WO2018169367A1 (en) Method and apparatus for packaging and streaming of virtual reality media content
WO2020235886A1 (en) Bitstream merger and extractor
US8683067B2 (en) Video perspective navigation system and method
WO2019027202A1 (en) SYNCHRONIZATION OF HOLOGRAPHIC DISPLAYS AND 3D OBJECTS WITH PHYSICAL VIDEO PANELS
CN113115110B (zh) 视频合成方法、装置、存储介质与电子设备
US20210092466A1 (en) Information processing apparatus, information processing method, and program
WO2018186646A1 (ko) 고화질 360도 vr 영상 처리 장치 및 방법
WO2012134016A1 (ko) 특수 효과 동기 장치 및 4d 상영 시스템
CN110505450A (zh) 一种模拟机dcs多画面可视化录播管理装置
US12166947B2 (en) Video processing device and video generating system for virtual reality
WO2016126044A1 (ko) 게임 플레이 동영상에 광고 컨텐츠를 추가 적용하여 제공하는 서비스 방법
WO2020004967A1 (ko) 특정 영역의 화질을 개선하기 위해 복수의 가상현실영상을 재생하는 가상현실영상재생장치 및 가상현실영상생성방법
CN102547313A (zh) 一种立体视频播放系统及其方法
WO2023279793A1 (zh) 视频的播放方法及装置
KR102278748B1 (ko) 360 vr 인터랙티브 중계를 위한 사용자 인터페이스 및 방법
WO2011062319A1 (ko) 초고화질 영상을 위한 실시간 입출력 모듈 시스템
JP2002351438A (ja) 映像監視システム
WO2018124794A1 (ko) 카메라워크 기반 영상합성 시스템 및 영상합성방법
CN201887871U (zh) 一种用于大屏幕投影显示的控制系统
WO2020231215A1 (ko) 복수의 디바이스를 이용하여 증강 현실 객체가 포함된 콘텐츠를 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
WO2019004498A1 (ko) 다채널 영상 생성 방법, 다채널 영상 재생 방법 및 다채널 영상 재생 프로그램
CN208796481U (zh) 一种便携移动式多媒体系统

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19919653

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19919653

Country of ref document: EP

Kind code of ref document: A1