KR101367458B1 - System for providing multi-angle broardcasting service - Google Patents

System for providing multi-angle broardcasting service Download PDF

Info

Publication number
KR101367458B1
KR101367458B1 KR1020100060555A KR20100060555A KR101367458B1 KR 101367458 B1 KR101367458 B1 KR 101367458B1 KR 1020100060555 A KR1020100060555 A KR 1020100060555A KR 20100060555 A KR20100060555 A KR 20100060555A KR 101367458 B1 KR101367458 B1 KR 101367458B1
Authority
KR
South Korea
Prior art keywords
image
source
screen
source image
size
Prior art date
Application number
KR1020100060555A
Other languages
Korean (ko)
Other versions
KR20110037824A (en
Inventor
김낙우
박일균
윤심권
김경훈
이병탁
고재상
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to FR1058058A priority Critical patent/FR2951041A1/en
Priority to JP2010226030A priority patent/JP2011082982A/en
Priority to US12/898,438 priority patent/US20110080425A1/en
Priority to CN2010102997350A priority patent/CN102036053A/en
Publication of KR20110037824A publication Critical patent/KR20110037824A/en
Application granted granted Critical
Publication of KR101367458B1 publication Critical patent/KR101367458B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection

Abstract

본 발명은 멀티 앵글 방송 서비스 제공 시스템을 제공한다. 전송 장치는 하나의 이벤트를 다양한 각도에서 촬영한 소스 영상들뿐만 아니라 소스 영상들을 포함하는 멀티 화면 영상을 수신 장치로 전송한다. 수신 장치는 멀티 화면 영상을 수신하고, 사용자의 선택에 따라서 소스 영상을 디코딩할 수 있다.The present invention provides a multi-angle broadcast service providing system. The transmission device transmits the multi-screen image including the source images as well as the source images photographed at various angles to the receiving device. The receiving device may receive a multi-screen image and decode the source image according to a user's selection.

Description

멀티 앵글 방송 서비스 제공 시스템{SYSTEM FOR PROVIDING MULTI-ANGLE BROARDCASTING SERVICE}Multi-angle broadcasting service providing system {SYSTEM FOR PROVIDING MULTI-ANGLE BROARDCASTING SERVICE}

본 발명은 방송 서비스를 제공하는 시스템에 관한 것으로, 좀더 구체적으로는 하나의 이벤트를 다양한 각도에서 촬영한 영상을 전송하는 멀티 앵글 방송 서비스 제공 시스템에 관한 것이다.The present invention relates to a system for providing a broadcast service, and more particularly, to a multi-angle broadcast service providing system for transmitting an image photographed from various angles of an event.

멀티 앵글 방송 서비스는 하나의 이벤트를 다양한 각도에서 촬영하여 사용자에게 서비스 하는 것이다.Multi-angle broadcasting service is to service a user by photographing one event from various angles.

도 1은 본 발명에 따른 멀티 앵글 방송 서비스의 개념을 도시한 도면이다.1 is a diagram illustrating the concept of a multi-angle broadcast service according to the present invention.

도 1에서는 야구장(110)에서 수행되는 야구 경기가 하나의 이벤트가 될 수 있다. 야구 경기를 중계하기 위해서는 외야 방향(121, 122, 123), 내야 방향(124, 125, 126)등 여러 방향에서 야구장 구석 구석의 모습을 촬영해야 한다. 일반적으로 방송국은 야구 경기의 진행에 따라 가장 중요한 장면을 촬영한 영상을 선택하여 사용자에게 전송한다.In FIG. 1, a baseball game performed at the baseball field 110 may be one event. In order to relay a baseball game, the corner of the baseball field must be photographed in various directions such as the outfield direction (121, 122, 123) and the infield direction (124, 125, 126). In general, the broadcasting station selects an image of the most important scene and transmits it to the user as the baseball game progresses.

멀티 앵글 방송 서비스는 야구 경기를 서로 다른 위치에서 촬영한 복수의 소스 영상들 중에서 사용자가 선택한 하나의 소스 영상을 사용자에게 제공하는 방송 서비스이다. 사용자는 방송국이 선택한 소스 영상이 아니라, 사용자가 직접 선택한 소스 영상을 시청할 수 있다. 사용자가 원하는 각도에서 촬영한 소스 영상을 시청할 수 있으므로, 사용자 만족도가 향상된다.The multi-angle broadcasting service is a broadcasting service that provides a user with one source image selected by a user from among a plurality of source images photographed at different positions of a baseball game. The user may watch the source image selected by the user, not the source image selected by the broadcasting station. Since the user can watch the source image photographed from the desired angle, the user satisfaction is improved.

사용자는 디스플레이 장치(130)를 이용해 복수의 소스 영상들(131, 132, 133, 134, 135, 136)들 동시에 시청할 수 있다. 사용자는 복수의 소스 영상들(131, 132, 133, 134, 135, 136)중에서 사용자가 원하는 시점에서 촬영한 하나의 소스 영상을 선택한다. 사용자는 선택한 소스 영상을 시청할 수 있다.The user may simultaneously view the plurality of source images 131, 132, 133, 134, 135, and 136 using the display device 130. The user selects one source image photographed at a desired time point from among the plurality of source images 131, 132, 133, 134, 135, and 136. The user can watch the selected source image.

본 발명의 목적은 수신기의 변화를 최소화하여 멀티 앵글 방송 서비스를 제공하는 것이다.An object of the present invention is to provide a multi-angle broadcast service by minimizing the change of the receiver.

본 발명의 목적은 멀티 앵글 방송 서비스를 수신할 수 있는 저렴한 수신기를 제공하는 것이다.An object of the present invention is to provide a low-cost receiver capable of receiving a multi-angle broadcast service.

본 발명은 상기의 목적을 달성하기 위하여, 복수의 시점으로부터 촬영된 소스 영상들을 수신하는 수신부, 상기 복수의 소스 영상을 포함하는 멀티 화면 영상을 생성하는 멀티 화면 영상 생성부 및 상기 멀티 화면 영상을 수신 장치로 전송하는 전송부를 포함하는 전송 장치를 제공한다.In order to achieve the above object, the present invention provides a receiver for receiving source images photographed from a plurality of viewpoints, a multi-screen image generator for generating a multi-screen image including the plurality of source images, and the multi-screen image. It provides a transmission device including a transmission unit for transmitting to the device.

본 발명의 일측면에 따르면, 복수의 시점으로부터 촬영된 소스 영상들과 상기 복수의 소스 영상을 포함하는 멀티 화면 영상을 수신하는 영상 수신부, 상기 멀티 화면 영상에 기반하여 상기 소스 영상들 중에서 어느 하나의 소스 영상에 대한 사용자의 선택을 수신하는 사용자 선택 수신부 및 상기 사용자의 선택에 따른 소스 영상을 디코딩하는 영상 디코딩부를 포함하는 수신 장치가 제공된다.According to an aspect of the present invention, an image receiving unit for receiving a multi-screen image including a plurality of source images and the source image photographed from a plurality of viewpoints, any one of the source image based on the multi-screen image There is provided a receiving apparatus including a user selection receiving unit receiving a user selection for a source image and an image decoding unit decoding a source image according to the user's selection.

본 발명의 또 다른 측면에 따르면, 복수의 시점으로부터 촬영된 소스 영상들과 상기 복수의 소스 영상을 포함하는 멀티 화면 영상을 수신하는 영상 수신부, 상기 멀티 화면 영상에 대한 메타 데이터를 수신하는 메타 데이터 수신부 및 상기 멀티 화면 영상에 기반하여 선택된 상기 소스 영상을 메타 데이터에 기반하여 디코딩하는 영상 디코딩부를 포함하는 수신 장치가 제공된다.According to another aspect of the invention, the image receiving unit for receiving the multi-screen image including the plurality of source images and the source image photographed from a plurality of viewpoints, metadata receiving unit for receiving the metadata for the multi-screen image And an image decoder to decode the source image selected based on the multi-screen image based on metadata.

본 발명에 따르면 수신기의 변화를 최소화하여 멀티 앵글 방송 서비스를 제공할 수 있다.According to the present invention, it is possible to provide a multi-angle broadcasting service by minimizing the change of the receiver.

본 발명에 따르면 멀티 앵글 방송 서비스를 수신할 수 있는 저렴한 수신기를 제공할 수 있다.According to the present invention, a low-cost receiver capable of receiving a multi-angle broadcast service can be provided.

도 1은 본 발명에 따른 멀티 앵글 방송 서비스의 개념을 도시한 도면이다.
도 2는 사용자의 선택에 따라서 멀티 화면 영상과 소스 화면 영상을 전환하여 디코딩하는 개념을 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 전송 장치의 구조를 도시한 블록도이다.
도 4는 본 발명의 일실시예에 따른 수신 장치의 구조를 도시한 블록도이다.
도 5는 본 발명의 다른 실시예에 따른 수신 장치의 구조를 도시한 블록도이다.1 is a diagram illustrating the concept of a multi-angle broadcast service according to the present invention.
2 is a diagram illustrating a concept of switching and decoding a multi-screen image and a source screen image according to a user's selection.
3 is a block diagram illustrating a structure of a transmission apparatus according to an embodiment of the present invention.
4 is a block diagram showing the structure of a receiving apparatus according to an embodiment of the present invention.
5 is a block diagram showing the structure of a receiving apparatus according to another embodiment of the present invention.

도 2는 사용자의 선택에 따라서 멀티 화면 영상과 소스 화면 영상을 전환하여 디코딩하는 개념을 도시한 도면이다.2 is a diagram illustrating a concept of switching and decoding a multi-screen image and a source screen image according to a user's selection.

본 발명에 따른 전송 장치는 소스 영상(210, 220, 230, 240)뿐만 아니라, 소스 영상들을 포함하는 멀티 화면 영상(250, 260, 270, 280)들을 수신 장치로 전송하고, 수신 장치는 멀티 화면 영상(250, 260, 270, 280)에 기반하여 사용자의 선택을 수신한다.The transmission device according to the present invention transmits not only the source images 210, 220, 230, and 240, but also the multi-screen images 250, 260, 270, and 280 including the source images to the receiving apparatus, and the receiving apparatus transmits the multi-screen. The user's selection is received based on the images 250, 260, 270, and 280.

사용자는 복수의 소스 영상(251, 252, 253, 254)들을 포함하는 제1 멀티 화면 영상(250)을 시청한다. 제1 멀티 화면 영상(250)에서 제1 소스 영상(251)은 다른 소스 영상(252, 253. 254)들 보다 크기가 크다.The user views the first multi-screen image 250 including a plurality of source images 251, 252, 253, and 254. In the first multi-screen image 250, the first source image 251 is larger than other source images 252 and 253. 254.

사용자가 만약 제1 멀티 화면 영상(250)에 포함된 제1 소스 영상(251)을 선택한 경우에, 수신 장치는 제1 소스 영상(210)을 선택하여 디코딩한다.If the user selects the first source image 251 included in the first multi-screen image 250, the receiving apparatus selects and decodes the first source image 210.

만약 사용자가 제1 멀티 화면 영상(250)에 포함된 다른 소스 영상(252, 253, 254)을 선택한 경우에, 수신 장치는 다른 멀티 화면 영상(260, 270, 280)들 중에서 사용자가 선택한 소스 영상의 크기가 가장 큰 멀티 화면 영상을 디코딩한다. 예를 들어, 사용자가 제1 멀티 화면 영상(250)에 포함된 제2 소스 영상(252)을 선택한 경우에, 수신 장치는 제2 소스 영상(262)의 크기가 가장 큰 제2 멀티 화면 영상(260)을 선택하고, 선택된 제2 멀티 화면 영상(260)을 디코딩한다.If the user selects other source images 252, 253, and 254 included in the first multi-screen image 250, the receiving device selects a source image selected by the user from among other multi-screen images 260, 270, and 280. Decode the largest multi-screen video in size. For example, when the user selects the second source image 252 included in the first multi-screen image 250, the receiving device may display the second multi-screen image having the largest size of the second source image 262. 260, and decodes the selected second multi-screen image 260.

사용자가 제2 멀티 화면 영상(260)에 포함된 제2 소스 영상(262)을 선택한다면, 수신 장치는 제2 소스 영상(220)을 선택하여 디코딩할 수 있다. 그러나 사용자가 제2 멀티 화면 영상(260)에 포함된 제3 소스 영상(263) 또는 제4 소스 영상(264)을 선택한다면, 수신 장치는 제3 멀티 화면 영상(270) 또는 제4 멀티 화면 영상(280)을 디코딩 할 수 있다. 제3 멀티 화면 영상(270)은 복수의 소스 영상(271, 272, 273, 274)들 중에서 제3 소스 영상(273)의 크기가 가장 큰 멀티 화면 영상이고, 제4 멀티 화면 영상(280)은 복수의 소스 영상(281, 282, 283, 284)들 중에서 제4 소스 영상(284)의 크기가 가장 큰 멀티 화면 영상이다.If the user selects the second source image 262 included in the second multi-screen image 260, the receiving device may select and decode the second source image 220. However, if the user selects the third source image 263 or the fourth source image 264 included in the second multi-screen image 260, the receiving device may select the third multi-screen image 270 or the fourth multi-screen image. 280 may be decoded. The third multi-screen image 270 is a multi-screen image having the largest size of the third source image 273 among the plurality of source images 271, 272, 273, and 274, and the fourth multi-screen image 280 is The fourth source image 284 has the largest size of the multi-screen image among the plurality of source images 281, 282, 283, and 284.

즉, 도 2에 도시된 실시예에 따르면, 사용자는 복수의 소스 영상이 동시에 재생되는 멀티 화면 영상에 기반하여 어느 하나의 소스 영상을 선택할 수 있다. 수신 장치는 사용자가 선택한 소스 영상에 따라서 사용자가 선택한 소스 영상의 크기가 크게 표현된 다른 멀티 화면 영상을 디코딩하거나, 사용자가 선택한 소스 영상을 디코딩할 수 있다.That is, according to the embodiment shown in FIG. 2, the user may select one source image based on the multi-screen image in which a plurality of source images are simultaneously reproduced. The receiving device may decode another multi-screen image in which the size of the source image selected by the user is greatly expressed or the source image selected by the user according to the source image selected by the user.

도 3은 본 발명의 일실시예에 따른 전송 장치의 구조를 도시한 블록도이다. 전송 장치(300)는 수신부(310), 멀티 화면 영상 생성부(320) 및 전송부(330)를 포함한다.3 is a block diagram illustrating a structure of a transmission apparatus according to an embodiment of the present invention. The transmitter 300 includes a receiver 310, a multi-screen image generator 320, and a transmitter 330.

수신부(310)는 복수의 소스 영상들을 수신한다. 각 소스 영상들은 동일한 이벤트를 복수의 시점으로부터 촬영하여 생성된 것이다. 예를 들어 제1 소스 영상은 야구 경기를 1루 방향에서 촬영하여 생성된 것이고, 제2 소스 영상은 야구 경기를 3루 방향에서 촬영하여 생성된 것일 수 있다.The receiver 310 receives a plurality of source images. Each source image is generated by capturing the same event from a plurality of viewpoints. For example, the first source image may be generated by photographing a baseball game in the first base direction, and the second source image may be generated by photographing a baseball game in the third base direction.

멀티 화면 영상 생성부(320)는 복수의 소스 영상을 포함하는 멀티 화면 영상을 생성한다. 멀티 화면 영상은 하나의 화면에 복수의 소스 영상을 포함하는 영상으로서, 예를 들면, 제1 소스 영상은 좌측에, 제2 소스 영상은 우측에 위치하는 영상일 수 있다. 사용자는 멀티 화면 영상을 이용하여 이벤트를 여러 가지 시점으로 동시에 관찰할 수 있다. 예를 들어, 사용자는 멀티 화면 영상 중에서 제1 소스 영상 및 제2 소스 영상을 참고하여 야구 경기를 1루 방향에서 촬영한 장면과 3루 방향에서 촬영한 장면을 동시에 시청할 수도 있다.The multi-screen image generator 320 generates a multi-screen image including a plurality of source images. The multi-screen image may be an image including a plurality of source images on one screen. For example, the first source image may be an image on the left side and the second source image on the right side. The user may simultaneously observe the event from various viewpoints using the multi-screen image. For example, the user may simultaneously view a scene taken in the first base direction and a scene shot in the third base direction by referring to the first source image and the second source image among the multi-screen images.

일실시예에 따르면, 멀티 화면 영상 생성부(320)는 멀티 화면 영상에 포함된 복수의 소스 화면 영상들 중에서 특정 소스 영상의 크기가 다른 소스 영상들의 크기보다 더 크도록 멀티 화면 영상을 생성할 수 있다.According to an embodiment, the multi-screen image generator 320 may generate a multi-screen image such that a size of a specific source image is larger than that of other source images among the plurality of source screen images included in the multi-screen image. have.

또한 멀티 화면 영상 생성부(320)는 복수의 멀티 화면 영상을 생성할 수 있다. 이 경우에, 멀티 화면 영상 생성부(320)는 제1 소스 영상의 크기가 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 생성하고, 제2 소스 영상의 크기가 제1 소스 영상의 크기보다 더 큰 제2 멀티 화면 영상을 생성할 수 있다. 제1 멀티 화면 영상과 제2 멀티 화면 영상은 모두 제1 소스 영상과 제2 소스 영상을 포함하나, 각 멀티 화면 영상에 포함된 소스 화면의 크기는 상이할 수 있다.In addition, the multi-screen image generator 320 may generate a plurality of multi-screen images. In this case, the multi-screen image generator 320 generates a first multi-screen image having a size of the first source image larger than that of the second source image, and the size of the second source image is larger than that of the first source image. A second multi-screen image larger than the size may be generated. The first multi-screen image and the second multi-screen image both include a first source image and a second source image, but the size of the source screen included in each multi-screen image may be different.

또한 각 멀티 화면 영상에 포함된 소스 화면의 위치는 상이할 수 있다. 즉, 제1 멀티 화면 영상에서는 제1 소스 영상이 화면 상단에 위치할 수 있으나, 제2 멀티 화면 영상에서는 제2 소스 영상이 화면 상단에 위치할 수도 있다.In addition, the position of the source screen included in each multi-screen image may be different. That is, in the first multi-screen image, the first source image may be located at the top of the screen, but in the second multi-screen image, the second source image may be located at the top of the screen.

전송부(330)는 네트워크(340)를 이용하여 멀티 화면 영상을 수신 장치(350)로 전송한다. 일실시예에 따르면 전송부(330)는 멀티 화면 영상뿐만 아니라, 소스 영상들을 추가적으로 수신 장치(350)로 전송할 수 있다.The transmitter 330 transmits the multi-screen image to the receiver 350 using the network 340. According to an embodiment, the transmitter 330 may additionally transmit not only a multi-screen image but also source images to the receiving apparatus 350.

일실시예에 따르면 전송부(330)는 소스 영상과 멀티 화면 영상을 동일한 채널을 이용하여 수신 장치(350)로 전송할 수 있다. 또는 전송부(330)는 소스 영상과 멀티 화면 영상을 상이한 채널을 이용하여 수신 장치(350)로 전송할 수 있다.According to an embodiment, the transmitter 330 may transmit the source image and the multi-screen image to the receiving apparatus 350 using the same channel. Alternatively, the transmitter 330 may transmit the source image and the multi screen image to the receiving apparatus 350 using different channels.

수신 장치(350)는 멀티 화면 영상을 디코딩한다. 디코딩된 멀티 화면 영상은 디스플레이 장치(360)를 이용하여 사용자에게 제공될 수 있다. 일실시예에 따르면, 사용자는 디코딩된 멀티 화면 영상에 기반하여 특정 소스 영상을 선택할 수 있다. 이 경우에, 수신 장치(350)는 전송 장치(300)로부터 수신한 소스 영상들 중에서 사용자가 선택한 소스 영상을 디코딩할 수 있다.The receiving device 350 decodes the multi screen image. The decoded multi-screen image may be provided to the user using the display apparatus 360. According to an embodiment, the user may select a specific source image based on the decoded multi-screen image. In this case, the reception device 350 may decode the source image selected by the user among the source images received from the transmission device 300.

다른 실시에에 따르면, 사용자는 디코딩된 멀티 화면 영상에 기반하여 다른 멀티 화면 영상을 디코딩할 수 있다.
According to another embodiment, the user may decode another multi-screen image based on the decoded multi-screen image.

도 4는 본 발명의 일실시예에 따른 수신 장치의 구조를 도시한 블록도이다. 수신 장치(400)는 영상 수신부(410), 사용자 선택 수신부(420) 및 영상 디코딩부(430)를 포함한다.4 is a block diagram showing the structure of a receiving apparatus according to an embodiment of the present invention. The reception apparatus 400 includes an image receiver 410, a user selection receiver 420, and an image decoder 430.

영상 수신부(410)는 복수의 시점으로부터 촬영된 소스 영상들과 각 소스 영상을 포함하는 멀티 화면 영상을 네트워크(450)를 이용하여 전송 장치(440)로부터 수신한다.The image receiving unit 410 receives source images captured from a plurality of viewpoints and a multi-screen image including each source image from the transmission device 440 using the network 450.

멀티 화면 영상은 복수의 소스 영상을 포함하나, 복수의 소스 영상들 중에서 특정 영상의 크기는 다른 영상의 크기보다 더 클 수 있다.The multi-screen image includes a plurality of source images, but the size of a specific image among the plurality of source images may be larger than that of other images.

일실시예에 따르면 영상 수신부(410)는 복수의 멀티 화면 영상을 수신할 수 있다. 영상 수신부(410)가 제1 소스 영상과 제2 소스 영상을 포함하는 제1 멀티 화면 영상과 제2 멀티 화면 영상을 수신한 경우에, 제1 멀티 화면 영상에서는 제1 소스 영상의 크기가 제2 소스 영상의 크기보다 더 클 수 있고, 제2 멀티 화면 영상에서는 제2 소스 영상의 크기가 제1 소스 영상의 크기보다 더 클 수 있다.According to an embodiment, the image receiver 410 may receive a plurality of multi-screen images. When the image receiver 410 receives the first multi-screen image and the second multi-screen image including the first source image and the second source image, the size of the first source image is the second in the first multi-screen image. The size of the source image may be larger than that of the source image, and in the second multi-screen image, the size of the second source image may be larger than that of the first source image.

또한 제1 멀티 화면 영상에서는 제1 소스 영상이 화면 상단에 위치할 수 있고, 제2 멀티 화면 영상에서는 제2 소스 영상이 화면 상단에 위치할 수도 있다.In addition, in the first multi-screen image, the first source image may be located at the top of the screen, and in the second multi-screen image, the second source image may be located at the top of the screen.

일실시예에 따르면 영상 수신부(410)는 소스 영상과 멀티 화면 영상을 동일한 채널을 이용하여 전송 장치(440)로부터 수신할 수 있다. 또는 영상 수신부(410)는 소스 영상과 멀티 화면 영상을 상이한 채널을 이용하여 전송 장치(440)로부터 전송할 수 있다.According to an embodiment, the image receiver 410 may receive the source image and the multi-screen image from the transmission device 440 using the same channel. Alternatively, the image receiver 410 may transmit the source image and the multi-screen image from the transmission device 440 using different channels.

사용자는 디스플레이 장치(460)에 디스플레이된 멀티 화면 영상을 시청하고, 어느 하나의 소스 영상을 선택할 수 있다. 사용자 선택 수신부(420)는 멀티 화면 영상에 포함된 소스 영상들 중에서 어느 하나의 소스 영상에 대한 사용자의 선택을 수신한다.The user may watch the multi-screen image displayed on the display device 460 and select one source image. The user selection receiver 420 receives a user's selection of one source image among the source images included in the multi-screen image.

영상 디코딩부(430)는 사용자가 선택한 소스 영상을 디코딩하거나, 사용자가 선택한 소스 영상의 크기가 크게 표현된 다른 멀티 화면 영상을 디코딩할 수 있다.The image decoding unit 430 may decode the source image selected by the user or decode another multi-screen image in which the size of the source image selected by the user is large.

일실시예에 따르면, 디스플레이 장치(460)가 제1 소스 영상의 크기가 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 디스플레이 하는 경우에, 사용자는 제1 소스 영상을 선택할 수 있다. 사용자 선택 수신부(420)는 사용자로부터 제1 소스 영상에 대한 선택을 수신하고, 영상 디코딩부(430)는 제1 소스 영상을 디코딩할 수 있다.According to an embodiment, when the display apparatus 460 displays the first multi-screen image in which the size of the first source image is larger than the size of the second source image, the user may select the first source image. The user selection receiver 420 may receive a selection of the first source image from the user, and the image decoder 430 may decode the first source image.

다른 실시예에 따르면, 디스플레이 장치(460)가 제1 소스 영상의 크기가 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 디스플레이 하는 경우에, 사용자는 제2 소스 영상을 선택할 수 있다. 사용자 선택 수신부(420)는 사용자로부터 제2 소스 영상에 대한 선택을 수신하고, 영상 디코딩부(430)는 제2 소스 영상의 크기가 크게 표현된 제2 멀티 화면 영상을 디코딩할 수 있다. 만약 사용자가 제2 멀티 화면 영상에 기반하여 제2 소스 영상을 선택한다면, 사용자 선택 수신부(420)는 사용자로부터 제2 소스 영상에 대한 선택을 수신하고, 영상 디코딩부(430)는 제2 소스 영상을 디코딩할 수 있다.
According to another embodiment, when the display apparatus 460 displays the first multi-screen image in which the size of the first source image is larger than the size of the second source image, the user may select the second source image. The user selection receiver 420 may receive a selection of the second source image from the user, and the image decoder 430 may decode the second multi-screen image in which the size of the second source image is large. If the user selects the second source image based on the second multi-screen image, the user selection receiver 420 receives a selection for the second source image from the user, and the image decoder 430 receives the second source image. Can be decoded.

도 5는 본 발명의 다른 실시예에 따른 수신 장치의 구조를 도시한 블록도이다. 수신 장치(500)는 영상 수신부(510), 메타 데이터 수신부(520) 및 영상 디코딩부(530)를 포함한다.5 is a block diagram showing the structure of a receiving apparatus according to another embodiment of the present invention. The reception apparatus 500 includes an image receiver 510, a metadata receiver 520, and an image decoder 530.

영상 수신부(510)는 복수의 시점으로부터 촬영된 소스 영상들과 각 소스 영상을 포함하는 멀티 화면 영상을 네트워크(550)를 이용하여 전송 장치(540)로부터 수신한다.The image receiving unit 510 receives source images photographed from a plurality of viewpoints and a multi-screen image including each source image from the transmission device 540 using the network 550.

일실시예에 따르면 영상 수신부(510)는 복수의 멀티 화면 영상을 수신할 수 있다. 영상 수신부(510)가 제1 소스 영상과 제2 소스 영상을 포함하는 제1 멀티 화면 영상과 제2 멀티 화면 영상을 수신한 경우에, 제1 멀티 화면 영상에서는 제1 소스 영상의 크기가 제2 소스 영상의 크기보다 더 클 수 있고, 제2 멀티 화면 영상에서는 제2 소스 영상의 크기가 제1 소스 영상의 크기보다 더 클 수 있다.According to an embodiment, the image receiver 510 may receive a plurality of multi-screen images. When the image receiving unit 510 receives the first multi-screen image and the second multi-screen image including the first source image and the second source image, the size of the first source image is the second in the first multi-screen image. The size of the source image may be larger than that of the source image, and in the second multi-screen image, the size of the second source image may be larger than that of the first source image.

또한 제1 멀티 화면 영상에서는 제1 소스 영상이 화면 상단에 위치할 수 있고, 제2 멀티 화면 영상에서는 제2 소스 영상이 화면 상단에 위치할 수도 있다.In addition, in the first multi-screen image, the first source image may be located at the top of the screen, and in the second multi-screen image, the second source image may be located at the top of the screen.

메타 데이터 수신부(520)는 멀티 화면 영상에 대한 메타 데이터를 수신한다. 메타 데이터는 멀티 화면 영상의 특성에 대한 정보를 포함하는 데이터로서, 예를 들어 전송 장치(540)로부터 수신한 소스 영상의 개수, 각 멀티 화면 영상이 포함하는 소스 영상의 개수 및 각 멀티 화면 영상이 포함하는 소스 영상들의 식별자, 각 멀티 화면 영상에 포함된 소스 영상들 중에서 크기가 가장 큰 소스 영상에 대한 정보 등을 포함할 수 있다.The meta data receiver 520 receives meta data about the multi-screen image. The meta data is data including information on characteristics of the multi-screen image. For example, the number of source images received from the transmission apparatus 540, the number of source images included in each multi-screen image, and each multi-screen image are displayed. It may include an identifier of the source images to include, information on the source image having the largest size among the source images included in each multi-screen image.

사용자는 디스플레이 장치(560)에 디스플레이된 멀티 화면 영상을 시청하고, 멀티 화면 영상에 포함된 소스 영상들 중에서 어느 하나의 영상을 선택할 수 있다.The user may watch the multi-screen image displayed on the display device 560 and select one of the source images included in the multi-screen image.

영상 디코딩부(530)는 멀티 화면 영상에 기반하여 선택된 소스 영상을 메타 데이터에 기반하여 디코딩한다.The image decoding unit 530 decodes the source image selected based on the multi-screen image based on metadata.

일실시예에 따르면, 디스플레이 장치(560)가 제1 소스 영상의 크기가 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 디스플레이 하는 경우에, 사용자는 제1 소스 영상을 선택할 수 있다. 메타 데이터 수신부(520)는 제1 멀티 화면 영상에 대한 메타 데이터를 참조하여 제1 멀티 화면 영상에 제1 소스 영상과 제2 소스 영상이 포함되었음을 알 수 있다. 또한, 메타 데이터 수신부(520)는 제1 멀티 화면 영상에 대한 메타 데이터를 참조하여 제1 멀티 화면 영상에 포함된 제1 소스 영상과 제2 소스 영상의 크기를 판단할 수 있다. 메타 데이터 수신부(520)는 제1 멀티 화면 영상에서 제일 크기가 큰 화면을 가지는 소스 영상이 선택되었는지 판단한다. 제1 멀티 화면 영상에서 제일 크기가 큰 화면을 가지는 제1 소스 영상이 선택된 것으로 판단된 경우에, 영상 디코딩부(530)는 메타 데이터 수신부(520)의 판단에 따라서 제1 소스 영상을 디코딩할 수 있다.According to an embodiment, when the display apparatus 560 displays the first multi-screen image having a size of the first source image larger than that of the second source image, the user may select the first source image. The meta data receiver 520 may recognize that the first multi-screen image includes the first source image and the second source image by referring to the metadata of the first multi-screen image. In addition, the metadata receiver 520 may determine the sizes of the first source image and the second source image included in the first multi-screen image by referring to the metadata of the first multi-screen image. The metadata receiver 520 determines whether a source image having the largest screen is selected in the first multi-screen image. If it is determined that the first source image having the largest screen is selected from the first multi-screen image, the image decoding unit 530 may decode the first source image according to the determination of the metadata receiving unit 520. have.

다른 실시예에 따르면 디스플레이 장치(560)가 제1 소스 영상의 크기가 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 디스플레이 하는 경우에, 사용자는 제2 소스 영상을 선택할 수 있다. 사용자가 선택한 제2 소스 영상의 크기가 제1 멀티 화면 영상에 포함된 제1 소스 영상의 크기보다 작은 것으로 판단된 경우에, 메타 데이터 수신부(520)는 멀티 화면 영상에 대한 메타 데이터를 참조하여 제2 소스 영상의 크기가 가장 큰 멀티 화면 영상은 무엇인지 판단한다. 영상 디코딩부는 메타 데이터 수신부(520)의 판단에 따라서 제2 소스 영상의 크기가 가장 큰 제2 멀티 화면 영상을 디코딩할 수 있다.According to another exemplary embodiment, when the display apparatus 560 displays the first multi-screen image in which the size of the first source image is larger than the size of the second source image, the user may select the second source image. When it is determined that the size of the second source image selected by the user is smaller than the size of the first source image included in the first multi-screen image, the metadata receiving unit 520 refers to the metadata for the multi-screen image. 2 Determine which multi-screen image has the largest source image size. The image decoding unit may decode the second multi-screen image having the largest size of the second source image according to the determination of the metadata receiving unit 520.

300: 전송 장치
310: 수신부
320: 멀티 화면 영상 생성부
330: 전송부
340: 네트워크
350: 수신 장치
360: 디스플레이 장치300: transmission device
310:
320: multi-screen image generation unit
330:
340: Network
350: receiving device
360: Display device

Claims (18)

복수의 시점으로부터 촬영된 소스 영상들을 수신하는 수신부;
상기 복수의 소스 영상을 포함하는 멀티 화면 영상을 생성하는 멀티 화면 영상 생성부; 및
상기 복수의 소스 영상과 상기 멀티 화면 영상을 동일한 채널을 통해서 수신 장치로 전송하는 전송부
를 포함하는 전송 장치.A receiver configured to receive source images photographed from a plurality of viewpoints;
A multi-screen image generator which generates a multi-screen image including the plurality of source images; And
Transmitter for transmitting the plurality of source images and the multi-screen image to the receiving device through the same channel
Transmission device comprising a. 제1항에 있어서,
상기 멀티 화면 영상 생성부는 상기 복수의 소스 영상들 중에서 특정 소스 영상의 크기가 다른 소스 영상들의 크기보다 더 크도록 상기 멀티 화면 영상을 생성하는 전송 장치.The method of claim 1,
The multi-screen image generator is configured to generate the multi-screen image such that a size of a specific source image is larger than that of other source images among the plurality of source images. 제2항에 있어서,
상기 복수의 소스 영상들은 제1 소스 영상과 제2 소스 영상을 포함하고,
상기 멀티 화면 영상 생성부는 상기 제1 소스 영상의 크기가 상기 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 생성하고, 상기 제2 소스 영상의 크기가 상기 제1 소스 영상의 크기보다 더 큰 제2 멀티 화면 영상을 생성하는 전송 장치.3. The method of claim 2,
The plurality of source images include a first source image and a second source image.
The multi-screen image generator generates a first multi-screen image in which the size of the first source image is larger than the size of the second source image, and the size of the second source image is larger than the size of the first source image. A transmission device for generating a large second multi-screen image. 삭제delete 삭제delete 삭제delete 복수의 시점으로부터 촬영된 소스 영상들과 상기 복수의 소스 영상을 포함하는 멀티 화면 영상을 동일한 채널을 통해서 수신하는 영상 수신부;
상기 멀티 화면 영상에 포함된 소스 영상들 중에서 어느 하나의 소스 영상에 대한 사용자의 선택을 수신하는 사용자 선택 수신부; 및
상기 사용자의 선택에 따른 소스 영상을 디코딩하는 영상 디코딩부
를 포함하는 수신 장치.An image receiver configured to receive source images photographed from a plurality of viewpoints and a multi-screen image including the plurality of source images through the same channel;
A user selection receiver configured to receive a user's selection of any one of the source images included in the multi-screen image; And
Image decoding unit for decoding the source image according to the user's selection
Receiving device comprising a. 제7항에 있어서,
상기 멀티 화면 영상은 상기 소스 영상들 중에서 특정 소스 영상의 크기가 다른 소스 영상들의 크기보다 더 큰 수신 장치.The method of claim 7, wherein
And the multi-screen image has a larger size of a specific source image than that of other source images among the source images. 제8항에 있어서,
상기 소스 영상들은 제1 소스 영상과 제2 소스 영상을 포함하고,
상기 영상 수신부는 상기 제1 소스 영상의 크기가 상기 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 수신하고, 상기 제2 소스 영상의 크기가 상기 제1 소스 영상의 크기보다 더 큰 제2 멀티 화면 영상을 수신하는 수신 장치.9. The method of claim 8,
The source images include a first source image and a second source image,
The image receiver receives a first multi-screen image having a size of the first source image larger than that of the second source image, and wherein the size of the second source image is larger than the size of the first source image. 2 Receiver for receiving multi-screen video. 제9항에 있어서,
상기 사용자 선택 수신부는 상기 제1 멀티 화면 영상에 포함된 제1 소스 영상에 대한 사용자의 선택을 수신한 경우에,
상기 영상 디코딩부는 상기 제1 소스 영상을 디코딩하는 수신 장치.10. The method of claim 9,
When the user selection receiver receives a user selection for a first source image included in the first multi-screen image,
And the image decoding unit decodes the first source image. 제9항에 있어서,
상기 사용자 선택 수신부는 상기 제1 멀티 화면 영상에 포함된 제2 소스 영상에 대한 사용자의 선택을 수신한 경우에,
상기 영상 디코딩부는 상기 제2 멀티 화면 영상을 디코딩하는 수신 장치.10. The method of claim 9,
When the user selection receiver receives a user selection for a second source image included in the first multi-screen image,
And the image decoding unit decodes the second multi-screen image. 삭제delete 삭제delete 복수의 시점으로부터 촬영된 소스 영상들과 상기 복수의 소스 영상을 포함하는 멀티 화면 영상을 수신하는 영상 수신부;
상기 멀티 화면 영상에 대한 메타 데이터를 수신하는 메타 데이터 수신부;
상기 멀티 화면 영상에 기반하여 선택된 상기 소스 영상을 상기 메타 데이터에 기반하여 디코딩하는 영상 디코딩부
를 포함하는 수신 장치.An image receiver configured to receive source images photographed from a plurality of viewpoints and a multi-screen image including the plurality of source images;
A metadata receiver configured to receive metadata about the multi-screen image;
An image decoding unit to decode the source image selected based on the multi-screen image based on the metadata.
Receiving device comprising a. 제14항에 있어서,
상기 소스 영상들은 제1 소스 영상과 제2 소스 영상을 포함하고,
상기 영상 수신부는 상기 제1 소스 영상의 크기가 상기 제2 소스 영상의 크기보다 더 큰 제1 멀티 화면 영상을 수신하고, 상기 제2 소스 영상의 크기가 상기 제1 소스 영상의 크기보다 더 큰 제2 멀티 화면 영상을 수신하는 수신 장치.15. The method of claim 14,
The source images include a first source image and a second source image,
The image receiver receives a first multi-screen image having a size of the first source image larger than that of the second source image, and wherein the size of the second source image is larger than the size of the first source image. 2 Receiver for receiving multi-screen video. 제15항에 있어서,
상기 메타 데이터는 상기 소스 영상의 개수에 대한 정보, 상기 각 멀티 화면 영상에 포함된 소스 영상들 중에서 가장 큰 소스 영상에 대한 정보 중에서 적어도 하나 이상을 포함하는 수신 장치.16. The method of claim 15,
The metadata includes at least one of information on the number of source images and information on the largest source image among source images included in each of the multi-screen images. 제15항에 있어서,
상기 제1 멀티 화면 영상에 기반하여 상기 제1 소스 영상이 선택된 경우에,
상기 메타 데이터 수신부는 상기 메타 데이터를 참조하여 상기 멀티 화면 영상 중에서 상기 제1 소스 영상의 크기와 상기 제2 소스 영상의 크기를 판단하고,
상기 영상 디코딩부는 상기 판단에 따라서 상기 제1 소스 영상을 디코딩하는 수신 장치.16. The method of claim 15,
When the first source image is selected based on the first multi-screen image,
The metadata receiver determines the size of the first source image and the size of the second source image among the multi-screen images by referring to the metadata.
And the image decoding unit decodes the first source image according to the determination. 제15항에 있어서,
상기 제1 멀티 화면 영상에 기반하여 상기 제1 소스 영상이 선택된 경우에,
상기 메타 데이터 수신부는 상기 메타 데이터를 참조하여 상기 멀티 화면 영상 중에서 상기 제1 소스 영상의 크기와 상기 제2 소스 영상의 크기를 판단하고,
상기 영상 디코딩부는 상기 판단에 따라서 상기 제2 멀티 화면 영상을 디코딩하는 수신 장치.16. The method of claim 15,
When the first source image is selected based on the first multi-screen image,
The metadata receiver determines the size of the first source image and the size of the second source image among the multi-screen images by referring to the metadata.
And the image decoding unit decodes the second multi-screen image according to the determination.
KR1020100060555A 2009-10-05 2010-06-25 System for providing multi-angle broardcasting service KR101367458B1 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
FR1058058A FR2951041A1 (en) 2009-10-05 2010-10-05 SYSTEM FOR PROVIDING A MULTI-ANGLE BROADCAST SERVICE
JP2010226030A JP2011082982A (en) 2009-10-05 2010-10-05 System for providing multi-angle broadcasting service
US12/898,438 US20110080425A1 (en) 2009-10-05 2010-10-05 System for providing multi-angle broadcasting service
CN2010102997350A CN102036053A (en) 2009-10-05 2010-10-08 System for providing multi-angle broadcasting service

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020090094289 2009-10-05
KR20090094289 2009-10-05

Publications (2)

Publication Number Publication Date
KR20110037824A KR20110037824A (en) 2011-04-13
KR101367458B1 true KR101367458B1 (en) 2014-02-26

Family

ID=44045243

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100060555A KR101367458B1 (en) 2009-10-05 2010-06-25 System for providing multi-angle broardcasting service

Country Status (2)

Country Link
JP (1) JP2011082982A (en)
KR (1) KR101367458B1 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101529139B1 (en) * 2013-11-01 2015-06-17 주식회사 모브릭 Method and apparatus for providing user interface menu of multi-angle video capturing
KR101700626B1 (en) * 2013-12-18 2017-01-31 한국전자통신연구원 Multi angle view processing apparatus
KR20150089529A (en) * 2014-01-28 2015-08-05 주식회사 모브릭 Apparatus and method for transmitting video of mobile terminal
JP6336309B2 (en) * 2014-03-26 2018-06-06 株式会社ドワンゴ Terminal device, video distribution device, program
KR101634558B1 (en) * 2015-05-20 2016-06-29 네오컨버전스 주식회사 Method and apparatus for playing multi-angle video
JP6078673B1 (en) * 2016-02-29 2017-02-08 三菱日立パワーシステムズ株式会社 Video playback device, video playback method, and program
KR20180020043A (en) 2016-08-17 2018-02-27 삼성전자주식회사 Method for multi view image control and electronic device supporting the same
JP6684306B2 (en) * 2018-05-01 2020-04-22 株式会社ドワンゴ Terminal device, video distribution device, program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000028488A (en) * 1998-10-31 2000-05-25 전주범 System for selecting multi image signals
JP2004040351A (en) * 2002-07-02 2004-02-05 Ricoh Co Ltd Image distribution system and image distribution reproducing system
KR20050057748A (en) * 2003-12-11 2005-06-16 (주)포니코 Video selector
JP2006222942A (en) * 2005-01-17 2006-08-24 Toshiba Corp Image synthesizer, and method and program for synthesizing image

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2309459A1 (en) * 1999-06-10 2000-12-10 International Business Machines Corporation System for personalized field of view in a broadcast environment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000028488A (en) * 1998-10-31 2000-05-25 전주범 System for selecting multi image signals
JP2004040351A (en) * 2002-07-02 2004-02-05 Ricoh Co Ltd Image distribution system and image distribution reproducing system
KR20050057748A (en) * 2003-12-11 2005-06-16 (주)포니코 Video selector
JP2006222942A (en) * 2005-01-17 2006-08-24 Toshiba Corp Image synthesizer, and method and program for synthesizing image

Also Published As

Publication number Publication date
KR20110037824A (en) 2011-04-13
JP2011082982A (en) 2011-04-21

Similar Documents

Publication Publication Date Title
KR101367458B1 (en) System for providing multi-angle broardcasting service
CN109565605B (en) Imaging technology generation method and image processing device
US10271082B2 (en) Video distribution method, video reception method, server, terminal apparatus, and video distribution system
US8836694B2 (en) Terminal device including a three-dimensional capable display
US20110080425A1 (en) System for providing multi-angle broadcasting service
JP5495855B2 (en) Video processing apparatus and video processing method
KR101128848B1 (en) Server, System and Method for Providing Multi Angle Mobile Broadcasting Service
EP3266199A1 (en) Methods and apparatus for supporting content generation, transmission and/or playback
CN104335243B (en) A kind of method and device for handling panorama
CN110035316B (en) Method and apparatus for processing media data
US20130010060A1 (en) IM Client And Method For Implementing 3D Video Communication
US20180338093A1 (en) Eye-tracking-based image transmission method, device and system
US20090201992A1 (en) Method and apparatus for encoding and decoding hopping default view for multiple cameras system
JP2007295572A (en) Apparatus and method for transmitting and receiving broadcast signal and data structure thereof
WO2019048733A1 (en) Transmission of video content based on feedback
CN107231564B (en) Video live broadcast method, live broadcast system and live broadcast server
KR20170081517A (en) Server and method for providing interactive broadcast
KR101005015B1 (en) A method and apparatus for an 3d broadcasting service by using region of interest depth information
JP5235492B2 (en) Video receiver, video distribution system, and program
US20170188007A1 (en) Multi-view image transmitter and receiver and method of multiplexing multi-view image
KR100328482B1 (en) System for broadcasting using internet
US11457053B2 (en) Method and system for transmitting video
JP2012004991A (en) Broadcast receiving apparatus and control method for the same
WO2023029252A1 (en) Multi-viewpoint video data processing method, device, and storage medium
US20120154383A1 (en) Image processing apparatus and image processing method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161110

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171211

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20181211

Year of fee payment: 6