KR20230068852A - Vertical mode streaming method, and portable vertical mode streaming system - Google Patents

Vertical mode streaming method, and portable vertical mode streaming system Download PDF

Info

Publication number
KR20230068852A
KR20230068852A KR1020210155058A KR20210155058A KR20230068852A KR 20230068852 A KR20230068852 A KR 20230068852A KR 1020210155058 A KR1020210155058 A KR 1020210155058A KR 20210155058 A KR20210155058 A KR 20210155058A KR 20230068852 A KR20230068852 A KR 20230068852A
Authority
KR
South Korea
Prior art keywords
images
streaming
image
camera
broadcasting
Prior art date
Application number
KR1020210155058A
Other languages
Korean (ko)
Other versions
KR102637147B1 (en
Inventor
정재훈
최영훈
이수동
Original Assignee
주식회사 엠비씨플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엠비씨플러스 filed Critical 주식회사 엠비씨플러스
Priority to KR1020210155058A priority Critical patent/KR102637147B1/en
Publication of KR20230068852A publication Critical patent/KR20230068852A/en
Application granted granted Critical
Publication of KR102637147B1 publication Critical patent/KR102637147B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/0122Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/44029Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/617Upgrading or updating of programs or applications for camera control

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

In accordance with a technical concept of the present invention, provided are a streaming method capable of providing an optimal image on the whole screen of a smartphone, and a mobile streaming system. The streaming method includes the following steps of: rotating each of at least two broadcast cameras by 90° clockwise or counterclockwise to photograph a target in a longitudinal form; rotating photographed images by 90° clockwise or counterclockwise; and streaming the images in a vertical mode, wherein in the streaming step, the images of the at least two broadcast cameras are all streamed or the image of at least one selected broadcast camera is streamed.

Description

세로 모드 스트리밍 방법, 및 이동형 세로 모드 스트리밍 시스템{Vertical mode streaming method, and portable vertical mode streaming system}Vertical mode streaming method, and portable vertical mode streaming system

본 발명의 기술적 사상은 스트리밍 방법 및 시스템에 관한 것으로, 특히, 스마트 폰의 화면에 적합한 영상을 제공할 수 있는 스트리밍 방법 및 시스템에 관한 것이다.The technical idea of the present invention relates to a streaming method and system, and in particular, to a streaming method and system capable of providing an image suitable for a screen of a smart phone.

최근, 디지털 카메라와 비디오 카메라뿐만 아니라, 휴대전화나 음악 플레이어 등에 카메라부나 LCD(liquid crystal display) 모니터 등의 표시부를 구비함으로써, 유저가 정지 화상이나 동영상을 촬영하거나 감상할 수 있게 되어 있다. 또한, 자택에서 녹화한 TV 프로그램 등의 동화상 데이터를 전술한 기기에 로딩하여, 외지에서 감상하는 것도 널리 보급되었다. 한편, 디지털 카메라 등의 촬상장치는, 종래의 TV 모니터 등의 표시 환경을 고려하여, 4:3 또는 16:9의 종횡비를 갖는 가로로 긴 화상을 취급하는 것을 기준으로 설계되어 있다. 그 때문에, LCD 등으로 구성되는 모니터부도 보통 4:3 또는 16:9의 종횡비를 갖는 직사각형의 화면이다. 촬상 장치로 영상을 촬영하여 스트리밍 할 때, 촬상 장치의 직사각형의 화면에 기인하여, 유저가 4:3 또는 16:9의 종횡비를 갖는 스마트폰으로 해당 영상을 볼 때, 스마트폰을 회전해야 되거나, 또는 회전해도 전체 화면으로 볼 수 없는 경우가 종종 발생할 수 있다. BACKGROUND ART [0002] In recent years, not only digital cameras and video cameras, but also mobile phones and music players are provided with a camera unit and a display unit such as an LCD (liquid crystal display) monitor so that users can capture or view still images or moving pictures. In addition, it has become widespread to load moving image data such as a TV program recorded at home into the above-mentioned apparatus and enjoy it in a remote location. On the other hand, an imaging device such as a digital camera is designed to handle a horizontally long image having an aspect ratio of 4:3 or 16:9 in consideration of a display environment such as a conventional TV monitor. Therefore, the monitor unit composed of an LCD or the like is also a rectangular screen having an aspect ratio of 4:3 or 16:9. When shooting and streaming a video with an imaging device, due to the rectangular screen of the imaging device, when the user views the video on a smartphone with an aspect ratio of 4:3 or 16:9, the smartphone must be rotated, Or, it can sometimes happen that you cannot view it in full screen even if you rotate it.

본 발명의 기술적 사상은, 스마트 폰의 전체 화면에 최적의 영상을 제공할 수 있는 스트리밍 방법 및 이동형 스트리밍 시스템을 제공하는 데에 있다.The technical idea of the present invention is to provide a streaming method and a mobile streaming system capable of providing optimal images to the entire screen of a smart phone.

또한, 본 발명의 기술적 사상이 해결하고자 하는 과제는, 이상에서 언급한 과제에 제한되지 않으며, 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있다.In addition, the problem to be solved by the technical spirit of the present invention is not limited to the above-mentioned problems, and other problems can be clearly understood by those skilled in the art from the description below.

상기 과제를 해결하기 위하여, 본 발명의 기술적 사상은, 적어도 2개의 방송용 카메라들 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로가 길게 나오도록 대상을 촬영하는 단계; 촬영된 영상들을 상기 시계 방향 또는 반시계 방향의 반대로 90° 회전시키는 단계; 및 상기 영상들을 세로 모드로 스트리밍(streaming) 하는 단계;를 포함하고, 상기 스트리밍 하는 단계에서, 상기 적어도 2개의 방송용 카메라들의 상기 영상들을 모두 스트리밍 하거나, 또는 선택된 적어도 1개의 상기 방송용 카메라의 상기 영상을 스트리밍 하는, 세로 모드 스트리밍 방법을 제공한다.In order to solve the above problems, the technical idea of the present invention is to rotate each of at least two broadcasting cameras clockwise or counterclockwise by 90 ° to photograph the subject so that the subject comes out vertically; rotating the captured images 90° in the clockwise or counterclockwise direction; and streaming the images in a vertical mode, wherein in the streaming step, all of the images of the at least two broadcasting cameras are streamed, or the images of the selected at least one broadcasting camera are captured. Streaming, vertical mode streaming method is provided.

본 발명의 일 실시예에 있어서, 상기 적어도 2개의 방송용 카메라들 각각은, HD(High Definition) 카메라이고, 상기 90°로 회전하기 전에는 16:9의 가로:세로의 화면 비율을 가지며, 상기 90°로 회전한 후에 16:9의 세로:가로의 화면 비율을 가질 수 있다.In one embodiment of the present invention, each of the at least two broadcasting cameras is a High Definition (HD) camera, and has a horizontal:vertical aspect ratio of 16:9 before rotating to the 90°, and the 90° After being rotated to , it can have a vertical:horizontal aspect ratio of 16:9.

본 발명의 일 실시예에 있어서, 상기 반대로 90° 회전시키는 단계에서, 영상 회전 소프트웨어 프로그램을 이용하여 상기 영상들을 회전하며, 상기 영상들은 세로가 긴 스마트 폰의 화면에 동일 방향으로 대응할 수 있다.In one embodiment of the present invention, in the opposite step of rotating 90 °, the images are rotated using an image rotation software program, and the images may correspond to the screen of a vertically long smartphone in the same direction.

본 발명의 일 실시예에 있어서, 상기 대상을 촬영하는 단계에서, UHD(Ultra HD) 카메라로 상기 대상을 촬영하고, 상기 반대로 90° 회전시키는 단계에서, 촬영된 영상을 세로가 길게 나오는 여러 개의 소영상들로 분할하거나, 또는 세로가 길게 나오는 소영상으로 특정 부분을 추출하며, 상기 스트리밍 하는 단계에서, 상기 소영상들을 세로 모드로 스트리밍 할 수 있다.In one embodiment of the present invention, in the step of photographing the object, in the step of photographing the object with a UHD (Ultra HD) camera, and in the step of rotating 90° conversely, the photographed image is divided into several elements that are vertically long. Splitting into images, or extracting a specific part as a small image with a long length, and in the step of streaming, the small images may be streamed in a vertical mode.

본 발명의 일 실시예에 있어서, 상기 적어도 2개의 방송용 카메라들 각각은 HD 캠코더(camcorder)이고, 상기 반대로 90° 회전시키는 단계 전에, 캡쳐 장비를 통해 상기 적어도 2개의 방송용 카메라들로의 영상들을 캡쳐하는 단계를 더 포함할 수 있다.In one embodiment of the present invention, each of the at least two broadcasting cameras is an HD camcorder, and before the step of rotating 90° in reverse, images are captured by the at least two broadcasting cameras through a capture device. It may further include steps to do.

또한, 본 발명의 기술적 사상은, 상기 과제를 해결하기 위하여, 적어도 2개의 방송용 카메라들; 상기 적어도 2개의 방송용 카메라들의 영상들을 캡쳐하는 캡쳐 장비; 및 상기 영상들을 처리하는 이동형 컴퓨터;를 포함하고, 상기 적어도 2개의 방송용 카메라들 각각은, 시계 방향 또는 반시계 방향으로 90°로 회전하여 세로가 길게 나오도록 대상을 촬영하고, 상기 이동형 컴퓨터는, 제1 소프트웨어를 통해 상기 영상들을 상기 시계 방향 또는 반시계 방향의 반대로 90° 회전시키고, 제2 소프트웨어를 통해 상기 영상들을 세로 모드로 스트리밍 하는, 이동형 세로 모드 스트리밍 시스템을 제공한다.In addition, the technical spirit of the present invention, in order to solve the above problems, at least two cameras for broadcasting; a capture device for capturing images of the at least two broadcasting cameras; and a mobile computer that processes the images, wherein each of the at least two broadcasting cameras rotates clockwise or counterclockwise by 90° to photograph an object so that the subject is elongated, and the mobile computer, Provided is a mobile vertical mode streaming system in which the images are rotated 90° clockwise or counterclockwise through the first software and the images are streamed in portrait mode through the second software.

본 발명의 일 실시예에 있어서, 상기 적어도 2개의 방송용 카메라들 각각은, HD 캠코더이고, 상기 90°로 회전하기 전에는 16:9의 가로:세로의 화면 비율을 가지며, 상기 90°로 회전한 후에 16:9의 세로:가로의 화면 비율을 가질 수 있다.In one embodiment of the present invention, each of the at least two broadcasting cameras is a HD camcorder, and has a horizontal:vertical aspect ratio of 16:9 before rotating by 90°, and after rotating by 90° It can have a vertical:horizontal aspect ratio of 16:9.

본 발명의 일 실시예에 있어서, 상기 이동형 컴퓨터는 노트북이고, 상기 이동형 컴퓨터는, 상기 제2 소프트웨어를 통해 상기 적어도 2개의 방송용 카메라들의 상기 영상들을 모두 스트리밍 하거나, 또는 선택된 적어도 1개의 상기 방송용 카메라의 상기 영상을 스트리밍 할 수 있다.In one embodiment of the present invention, the mobile computer is a notebook computer, and the mobile computer streams all of the images of the at least two broadcasting cameras through the second software, or of the selected at least one broadcasting camera. The video can be streamed.

본 발명의 일 실시예에 있어서, UHD 카메라를 더 포함하고, 상기 UHD 카메라의 영상은 상기 캡쳐 장비에 의해 함께 캡쳐되며, 상기 이동형 컴퓨터는, 제3 소프트웨어를 통해 상기 UHD 카메라의 영상을 세로가 길게 나오는 여러 개의 소영상들로 분할할 수 있다.In one embodiment of the present invention, a UHD camera is further included, an image of the UHD camera is captured together by the capture device, and the mobile computer captures an image of the UHD camera vertically through third software. It can be divided into several small images that come out.

본 발명의 기술적 사상에 의한 세로 모드 스트리밍 방법, 및 이동형 세로 모드 스트리밍 시스템은, 복수의 방송용 카메라들을 이용한 촬영에서, 방송용 카메라들 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로 모드로 촬영하고, 이후에 영상 회전을 반대로 회전하여 비트스트림 포맷하여 전송함으로써, 영상 재생 장치, 예컨대, 스마트폰에서, 해당 영상을 화면 비율에 맞춰 세로 모드로 바로 디스플레이하도록 할 수 있다. 따라서, 본 실시예의 세로 모드 스트리밍 방법은, 스마트 폰의 전체 화면에 최적의 영상을 제공할 수 있다.A portrait mode streaming method and a mobile portrait mode streaming system according to the technical idea of the present invention, in shooting using a plurality of broadcast cameras, rotate each of the broadcast cameras clockwise or counterclockwise by 90 ° to shoot in portrait mode, , Afterwards, the image rotation is rotated in reverse and transmitted in a bitstream format, so that the image reproducing device, for example, a smartphone, can directly display the corresponding image in portrait mode according to the aspect ratio. Therefore, the portrait mode streaming method of this embodiment can provide an optimal image to the entire screen of a smart phone.

도 1은 본 발명의 일 실시예에 따른 세로 모드 스트리밍 방법의 과정을 개략적으로 보여주는 흐름도이다.
도 2a 및 도 2b는 도 1의 세로 모드 스트리밍 방법과 관련하여, 스마트폰에 적용한 모습을 보여주는 사진들이다.
도 3a 내지 도 3d는 방송용 카메라에서 일반적인 세로 모드 스트리밍 방법의 적용에 따른 문제점들을 설명하기 위한 보여주는 사진들 및 평면도이다.
도 4a 및 도 4b는 도 1의 세로 모드 스트리밍 방법에서, 촬영 방법과 그에 따른 영상을 보여주는 사진들이다.
도 5a 및 도 5b는 도 1의 세로 모드 스트리밍 방법에서 다른 활용 방법들을 설명하기 위한 사진들이다.
도 6은 본 발명의 일 실시예에 따른 세로 모드 스트리밍 방법의 과정을 개략적으로 보여주는 흐름도이다.
도 7은 도 6의 세로 모드 스트리밍 방법과 관련하여, UHD 카메라를 설명하기 위한 사진이다.
도 8은 도 6의 세로 모드 스트리밍 방법에서, UHD 카메라의 영상에서 획득한 소영상들을 보여주는 사진들이다.
도 9는 본 발명의 일 실시예에 따른 세로 모드 스트리밍 방법의 과정을 개략적으로 보여주는 흐름도이다.
도 10은 본 발명의 일 실시예에 따른 이동형 세로 모드 스트리밍 시스템에 대한 블록 구성도이다.
1 is a flowchart schematically illustrating a process of a vertical mode streaming method according to an embodiment of the present invention.
2a and 2b are pictures showing how the vertical mode streaming method of FIG. 1 is applied to a smartphone.
3A to 3D are photographs and plan views illustrating problems caused by application of a general portrait mode streaming method in a broadcasting camera.
4A and 4B are photographs showing a method of capturing and resulting images in the portrait mode streaming method of FIG. 1 .
5A and 5B are pictures for explaining other utilization methods in the vertical mode streaming method of FIG. 1 .
6 is a flowchart schematically illustrating a process of a vertical mode streaming method according to an embodiment of the present invention.
FIG. 7 is a picture for explaining a UHD camera in relation to the portrait mode streaming method of FIG. 6 .
FIG. 8 is pictures showing small images acquired from images of a UHD camera in the vertical mode streaming method of FIG. 6 .
9 is a flowchart schematically illustrating a process of a vertical mode streaming method according to an embodiment of the present invention.
10 is a block diagram of a mobile vertical mode streaming system according to an embodiment of the present invention.

이하에서는 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명한다. 도면 상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고, 이들에 대한 중복된 설명은 생략한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The same reference numerals are used for the same components in the drawings, and duplicate descriptions thereof are omitted.

도 1은 본 발명의 일 실시예에 따른 세로 모드 스트리밍 방법의 과정을 개략적으로 보여주는 흐름도이이고, 도 2a 및 도 2b는 도 1의 세로 모드 스트리밍 방법과 관련하여, 스마트폰에 적용한 모습을 보여주는 사진들이다. 도 3a 내지 도 3d는 방송용 카메라에서 일반적인 세로 모드 스트리밍 방법의 적용에 따른 문제점들을 설명하기 위한 보여주는 사진들 및 평면도이며, 도 4a 및 도 4b는 도 1의 세로 모드 스트리밍 방법에서, 촬영 방법과 그에 따른 영상을 보여주는 사진들이다.1 is a flowchart schematically illustrating a process of a vertical mode streaming method according to an embodiment of the present invention, and FIGS. 2a and 2b are pictures showing the vertical mode streaming method of FIG. 1 applied to a smartphone. . 3a to 3d are photographs and plan views for explaining problems caused by the application of a general vertical mode streaming method in a broadcast camera, and FIGS. 4a and 4b are a photographing method and its corresponding These are the pictures that show the video.

도 1을 참조하면, 본 실시예의 세로 모드 스트리밍 방법은, 먼저 적어도 2개의 방송용 카메라들 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로가 길게 나오도록 대상을 촬영한다(S110). 여기서, 방송용 카메라(도 3a의 100, 또는 도 4a의 100R 참조)는 방송국에서 이용하는 일반적인 카메라를 의미할 수 있다. 방송용 카메라(100, 100R)는, 예컨대, HD(High Definition) 카메라일 수 있다. 실시예에 따라, 방송용 카메라(100, 100R)는 이동이 자유로운 HD 캠코더(camcorder)로 대체될 수 있다. 보통 방송용 카메라(100, 100R)는 가로가 길게 나오도록 대상을 촬영할 수 있다. 예컨대, 방송용 카메라(100, 100R)는 16:9의 가로:세로 화면 비율이 되도록 대상을 촬영할 수 있다. 여기서, 가로는 x축을 의미하고 세로는 y축을 의미할 수 있다. 따라서, 가로가 길게 나오도록 대상을 촬영한다는 것은 영상의 x축이 길게 나오도록 촬영하는 것을 의미하고, 세로가 길게 나오도록 대상을 촬영한다는 것은 영상의 y축이 길게 나오도록 촬영하는 것을 의미할 수 있다. 이하의 설명에서 편의상, '가로가 길게 나오도록 대상을 촬영'한다는 것을 '가로 모드로 촬영'한다고 하고, '세로가 길게 나오도록 대상을 촬영'한다는 것을 '세로 모드로 촬영'한다고 한다. 한편, 세로 모드로 촬영하는 단계(S110)와 관련하여, 이하 도 4a 및 도 4b의 설명 부분에서 좀더 상세히 설명한다.Referring to FIG. 1 , in the vertical mode streaming method according to the present embodiment, each of at least two broadcasting cameras is rotated clockwise or counterclockwise by 90° to photograph an object in a vertical direction (S110). Here, a camera for broadcasting (refer to 100 in FIG. 3A or 100R in FIG. 4A) may mean a general camera used by a broadcasting station. The cameras 100 and 100R for broadcasting may be, for example, high definition (HD) cameras. Depending on the embodiment, the broadcasting cameras 100 and 100R may be replaced with a freely movable HD camcorder. Normally, the broadcasting cameras 100 and 100R may photograph an object so that the horizontal length is long. For example, the cameras 100 and 100R for broadcasting may photograph an object in a horizontal:vertical aspect ratio of 16:9. Here, horizontal may mean the x-axis and vertical may mean the y-axis. Therefore, photographing an object so that the horizontal length is long means that the x-axis of the image is photographed long, and photographing the subject so that the vertical length is long means that the y-axis of the image is long. there is. In the following description, for convenience, 'photographing an object in a long horizontal direction' is referred to as 'photographing in a horizontal mode', and 'photographing an object in a vertical direction' is referred to as 'photographing in a vertical mode'. Meanwhile, with respect to the step of photographing in portrait mode (S110), it will be described in more detail in the description of FIGS. 4A and 4B below.

다음, 촬영된 영상들을 시계 방향 또는 반시계 방향의 반대로 90° 회전시킨다(S120). 예컨대, 시계 방향으로 90°로 회전하여 대상을 촬영한 경우는, 촬영된 영상을 반시계 방향으로 90° 회전시키고, 반시계 방향으로 90°로 회전하여 대상을 촬영한 경우는, 촬영된 영상을 시계 방향으로 90° 회전시킨다. 이와 같이, 촬영된 영상들을 원래 위치대로 회전시키는 것은 다음 단계에서의 스트리밍을 하기 위함일 수 있다. 또한, 촬영한 영상의 회전은 영상 처리용 소프트웨어를 통해 수행될 수 있다. 좀더 구체적으로 설명하면, 세로 모드로 촬영하게 되면, 영상 처리용 소프트웨어는 촬영한 영상, 즉 세로로 찍힌 영상을 고정된 가로 세로 비율로 저장하고, 그 고정된 가로 세로 비율의 영상을 90° 회전시키며, 그 회전된 영상을 부가 정보와 함께 인코딩 처리하여 비트스트림으로 포맷팅할 수 있다.Next, the captured images are rotated 90° clockwise or counterclockwise (S120). For example, when the object is photographed by rotating it clockwise by 90°, the captured image is rotated by 90° counterclockwise, and when the object is photographed by rotating it by 90° counterclockwise, the captured image is captured. Rotate 90° clockwise. In this way, rotating the captured images to their original positions may be for streaming in the next step. Also, rotation of the captured image may be performed through image processing software. More specifically, when shooting in portrait mode, the image processing software stores the captured image, that is, the image captured vertically, with a fixed aspect ratio, rotates the image of the fixed aspect ratio by 90°, , the rotated image can be encoded with additional information and formatted into a bitstream.

이후, 영상들을 세로 모드로 스트리밍(streaming) 한다(S130). 여기서, 스트리밍은 인터넷에서 음성이나 영상, 애니메이션 등을 따로 저장하지 않고 실시간으로 재생하는 기술을 의미할 수 있다. 예컨대, 본 실시예의 세로 모드 스트리밍 방법에서, 스마트폰에서 앞서 촬영한 영상을 세로 모드로 재생하는 것을 의미할 수 있다. 좀더 구체적으로, 앞서 세로 모드로 찍힌 영상에 대한 비트스트림은, 네트워크를 통해, 영상 재생 장치로 전송될 수 있다. 또한, 영상 재생 장치는 수신된 비트스트림을 디코딩 처리하여 영상을 재생할 수 있다. 여기서, 영상 재생 장치는 스마트폰일 수 있고, 영상은 스마트폰의 화면 비율에 맞춰 세로 모드로 바로 디스플레이 될 수 있다.Thereafter, images are streamed in portrait mode (S130). Here, streaming may refer to a technology of reproducing audio, video, animation, etc. in real time without separately storing them on the Internet. For example, in the portrait mode streaming method of the present embodiment, it may mean playing a previously captured video on a smartphone in portrait mode. More specifically, a bitstream of an image previously captured in portrait mode may be transmitted to an image reproducing apparatus through a network. In addition, the image reproducing apparatus may play an image by decoding the received bitstream. Here, the video reproducing device may be a smart phone, and the video may be directly displayed in a portrait mode according to the aspect ratio of the smart phone.

도 2a 및 도 2b를 참조하면, 도 2a는 스마트폰에 세로 모드 스트리밍을 적용한 모습을 보여주고 있다. 최근 라이브커머스(live commerce)에서 이러한 세로 모드가 대세로 자리잡고 있다. 여기서, 라이브커머스는 실시간 동영상 스트리밍을 통해 상품을 판매하는 온라인 채널을 의미하며, 비대면 비접촉을 추구하는 언택트 경제가 부상하면서 최근 활발하게 활용되고 있다. 그러나 현재의 세로 모드 스트리밍 방법은 대부분 스마트폰으로 제작/송출하는 방식으로 이루어지고 있다. 다시 말해서, 도 2b에 도시된 바와 같이, 스마트폰을 이용하여 세로로 영상을 촬영하여 비트스트림 포맷팅하여 송출하면, 유저들이 자신의 스마트폰에서 디코딩 처리하여 해당 영상을 세로 모드로 감상할 수 있다.Referring to FIGS. 2A and 2B , FIG. 2A illustrates application of vertical mode streaming to a smartphone. In recent live commerce (live commerce), such a vertical mode has become a trend. Here, live commerce means an online channel that sells products through real-time video streaming, and has recently been actively used as the untact economy that pursues non-face-to-face contact has emerged. However, most of the current vertical mode streaming methods are produced/transmitted using a smartphone. In other words, as shown in FIG. 2B, when a video is photographed vertically using a smartphone, bitstream formatted, and transmitted, users can decode the video on their smartphone and enjoy the video in portrait mode.

도 3a 내지 도 3d를 참조하면, 도 3a는 일반 방송용 카메라의 외형을 보여주고 있다. 방송용 카메라(100)는 카메라 본체(110)와 디스플레이부(120)를 포함할 수 있다. 카메라 본체(110)는 렌즈 및 이미지 센서를 이용하여 대상을 갭쳐하고 영상을 처리하여 대상 영상을 촬영하는 카메라의 핵심 부분이고, 디스플레이부(120)는 카메라 본체(110)에서 촬영된 영상을 실시간으로 디스플레이 하는 부분일 수 있다. 방송용 카메라(100)로 영상을 촬영하게 되면, 도 3b의 디스플레이부(120)의 화면을 통해 알 수 있듯이, 16:9의 가로:세로 비율로 대상의 영상이 촬영되고 디스플레이될 수 있다. 여기서, 디스플레이부(120)에서의 영상의 디스플레이는 영상의 스트리밍에 해당할 수 있다.Referring to FIGS. 3A to 3D , FIG. 3A shows the appearance of a camera for general broadcasting. The camera 100 for broadcasting may include a camera body 110 and a display unit 120 . The camera body 110 is a key part of a camera that captures an object using a lens and an image sensor, processes the image, and captures a target image, and the display unit 120 displays the image captured by the camera body 110 in real time. It may be a display part. When an image is captured by the camera 100 for broadcasting, as can be seen through the screen of the display unit 120 in FIG. 3B , the image of the subject can be captured and displayed at a horizontal:vertical ratio of 16:9. Here, the display of an image on the display unit 120 may correspond to image streaming.

만약, 방송용 카메라(100)를 이용하여 일반적으로 촬영하고, 세로 모드 스트리밍을 위하여, 해당 영상을 90° 회전시켜 비트스트림 포맷을 수행한다고 하자. 예컨대, 방송용 카메라(100)를 이용하여 일반적으로 촬영하게 되면, 도 3c와 같이 가로 모드로 촬영되고, 촬영된 영상을 90° 회전시키면 도 3d와 같이 눕혀진 영상이 될 수 있다. 다시 말해서, 화면 속의 사람이 옆으로 눕혀지게 된다. 이러한 영상을 비트스트림 포맷팅하여 송출하면, 유저의 스마트폰에서도 동일한 영상이 디스플레이 될 수 있다. 사람을 똑바로 보기 위하여, 유저가 스마트폰을 회전시키면, 해당 영상은 작아지면서 스마트폰의 일부 화면에만 나타나게 된다. 따라서, 방송용 카메라(100)를 이용한 일반적인 촬영의 경우, 세로 모드 스트리밍을 통해 스마트 폰의 전체 화면을 최적화하여 활용하려는 의도와 맞지 않을 수 있다.Suppose that a video is generally photographed using the broadcasting camera 100 and a bitstream format is performed by rotating the corresponding video by 90° for portrait mode streaming. For example, when generally photographed using the broadcasting camera 100, the photograph is taken in a landscape mode as shown in FIG. 3c, and when the photographed image is rotated by 90°, the image may be laid down as shown in FIG. 3d. In other words, the person on the screen is laid on its side. If such an image is transmitted after bitstream formatting, the same image can be displayed on a user's smart phone. When the user rotates the smartphone to see the person straight, the corresponding image becomes smaller and appears only on a part of the screen of the smartphone. Therefore, in the case of general shooting using the broadcasting camera 100, it may not match the intention of optimizing and utilizing the entire screen of the smart phone through portrait mode streaming.

도 4a 및 도 4b를 참조하면, 도 4a는 세로 모드 촬영 및 스트리밍을 위해 방송용 카메라(100R)를 일반적인 위치에서 반시계 방향으로 90° 회전시킨 상태를 보여준다. 실시예에 따라, 방송용 카메라(100R)를 일반적인 위치에서 시계 방향으로 90° 회전해도 크게 문제는 없다. 다시 말해서, 디스플레이부(120)가 아래쪽으로 가도록 회전시켜도 된다. 도 4b는 회전된 방송용 카메라(100R)로 촬영한 영상을 보여준다. 도 4b의 영상에서 대상의 세로가 길게 나오고 있음을 알 수 있다. 즉, 도 4b의 영상은 세로 모드로 촬영된 영상에 해당할 수 있다. 이후의 과정은 전술한 바와 같다. 즉, 세로 모드로 촬영된 영상을 90° 회전시키고, 그 회전된 영상을 비트스트림으로 포맷팅한 후, 네트워크를 통해 송출하게 된다. 이후, 세로 모드 스트리밍을 통해 유저는 자신의 스마트폰에서 도 4b에 도시된 영상과 동일한 영상이 풀 화면으로 그대로 디스플레이 되도록 할 수 있다.Referring to FIGS. 4A and 4B , FIG. 4A shows a state in which the broadcasting camera 100R is rotated 90° counterclockwise from a normal position for portrait mode shooting and streaming. Depending on the embodiment, there is no problem even if the broadcasting camera 100R is rotated clockwise by 90° from a general position. In other words, the display unit 120 may be rotated downward. 4B shows an image captured by a rotated broadcasting camera 100R. In the image of FIG. 4B , it can be seen that the vertical length of the subject is long. That is, the image of FIG. 4B may correspond to an image captured in portrait mode. Subsequent processes are the same as described above. That is, an image photographed in portrait mode is rotated by 90°, and the rotated image is formatted as a bitstream and transmitted through a network. Thereafter, through vertical mode streaming, the user can display the same image as the image shown in FIG. 4B in full screen on his or her smartphone.

본 실시예의 세로 모드 스트리밍 방법은, 복수의 방송용 카메라들을 이용한 촬영에서, 방송용 카메라들 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로 모드로 촬영하고, 이후에 영상 회전을 반대로 회전하여 비트스트림 포맷하여 전송함으로써, 영상 재생 장치, 예컨대, 스마트폰에서, 해당 영상을 화면 비율에 맞춰 세로 모드로 바로 디스플레이하도록 할 수 있다. 따라서, 본 실시예의 세로 모드 스트리밍 방법은, 스마트 폰의 전체 화면에 최적의 영상을 제공할 수 있다.In the portrait mode streaming method of the present embodiment, in shooting using a plurality of broadcast cameras, each of the broadcast cameras is rotated clockwise or counterclockwise by 90° to shoot in portrait mode, and then the image rotation is reversed to produce a bit stream. By formatting and transmitting, an image reproducing device, for example, a smartphone, can directly display the corresponding image in portrait mode according to the aspect ratio. Therefore, the portrait mode streaming method of this embodiment can provide an optimal image to the entire screen of a smart phone.

도 5a 및 도 5b는 도 1의 세로 모드 스트리밍 방법에서 다른 활용 방법들을 설명하기 위한 사진들이다.5A and 5B are pictures for explaining other utilization methods in the vertical mode streaming method of FIG. 1 .

도 5a를 참조하면, 본 실시예의 세로 모드 스트리밍 방법에서, 적어도 2개의 방송용 카메라들(100) 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로 모드로 촬영하고, 촬영된 영상들을 반대로 90° 회전 후, 스트리밍을 하되, 적어도 2개의 방송용 카메라들(100)의 영상들 모두를 스트리밍 하거나, 또는 선택된 적어도 1개의 방송용 카메라들(100)의 영상만을 스트리밍 할 수 있다. Referring to FIG. 5A, in the vertical mode streaming method of the present embodiment, each of the at least two broadcasting cameras 100 is rotated clockwise or counterclockwise by 90° to take pictures in portrait mode, and the captured images are rotated 90° in the opposite direction. After rotation, streaming may be performed, but all of the images of at least two broadcasting cameras 100 may be streamed, or only the images of the selected at least one broadcasting camera 100 may be streamed.

예컨대, 도 5a에 도시된 바와 같이, 4개의 방송용 카메라들(100-1, 100-2, 100-3, 100-4) 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로 모드로 촬영하고, 촬영된 영상들을 반대로 90° 회전 후, 4개의 방송용 카메라들(100-1, 100-2, 100-3, 100-4)의 영상들 모두를 스트리밍 할 수 있다. 또한, 실시예에 따라, 4개의 방송용 카메라들(100-1, 100-2, 100-3, 100-4)의 영상들 중 선택된 1개 또는 2개만을 스트리밍 할 수 있다. 방송 용어로 여러 개의 영상들 중 일부만 선택하여 스트리밍 하는 기술을 컷팅(cutting)이라고 한다. 한편, 채널의 개념으로 설명하면, 4개의 방송용 카메라들(100-1, 100-2, 100-3, 100-4)의 영상들 모두를 스트리밍 하는 경우는 4채널 방송에 해당하고, 선택된 1개 또는 2개만을 스트리밍 하는 경우는 1채널 방송 또는 2채널 방송에 해당할 수 있다. 또한, 본 실시예의 세로 모드 스트리밍 방법은, 복수의 채널들에서 서로 스위칭하는, 비디오 스위칭 기능을 포함할 수 있다.For example, as shown in FIG. 5A, each of the four broadcasting cameras 100-1, 100-2, 100-3, and 100-4 is rotated clockwise or counterclockwise by 90° to shoot in portrait mode, , After rotating the captured images by 90°, all of the images of the four broadcasting cameras 100-1, 100-2, 100-3, and 100-4 can be streamed. Also, depending on the embodiment, only one or two selected images of the four broadcasting cameras 100-1, 100-2, 100-3, and 100-4 may be streamed. In broadcasting terms, a technique of selecting and streaming only a part of several images is called cutting. On the other hand, in terms of the concept of a channel, streaming all the images of the four broadcasting cameras (100-1, 100-2, 100-3, 100-4) corresponds to 4-channel broadcasting, and the selected one Alternatively, when only two are streamed, it may correspond to one-channel broadcasting or two-channel broadcasting. In addition, the vertical mode streaming method of this embodiment may include a video switching function that switches each other in a plurality of channels.

도 5b를 참조하면, 본 실시예의 세로 모드 스트리밍 방법에서는, 도 5b의 왼쪽에 도시된 바와 같이, 방송용 카메라의 영상이 아닌 파일 플레이어 또는 전면 자막 등과 같은 영상이 세로 모드로 스트리밍 되도록 할 수 있다. 또한, 도 5b의 오른쪽에 도시된 바와 같이, 제1 방송용 카메라(100-1)의 영상에 로고나 텍스트 자막 등이 함께 디스플레이 되도록 세로 모드로 스트리밍 될 수 있다.Referring to FIG. 5B, in the vertical mode streaming method of this embodiment, as shown on the left side of FIG. In addition, as shown on the right side of FIG. 5B, the image of the first broadcasting camera 100-1 may be streamed in portrait mode so that a logo or text subtitle is displayed together.

덧붙여, 본 실시예의 세로 모드 스트리밍 방법은, PIP(Picture In Picture)/크로마키 기능을 포함할 수 있다. 또한, 본 실시예의 세로 모드 스트리밍 방법은, 3개 플랫폼에 동시 전송 가능하고(동일 프로토콜 사용), 가변 비트레이트 스트림 전송 가능하며, 레코딩시 코덱/해상도/압축률 지정 가능하며, 4채널 개별 레코딩도 가능(PGM 별도)할 수 있다. 한편, 플래폼 동시 전송의 경우, 3개에 한하지 않고 4개 이상의 플랫폼들에 동시 전송 할 수 있음은 물론이다.Additionally, the portrait mode streaming method of this embodiment may include a Picture In Picture (PIP)/chroma key function. In addition, the vertical mode streaming method of this embodiment can simultaneously transmit to three platforms (using the same protocol), transmit variable bitrate streams, specify codec/resolution/compression rate during recording, and individually record 4 channels. (PGM separate) can be done. Meanwhile, in the case of simultaneous transmission of platforms, it is of course possible to simultaneously transmit to four or more platforms without being limited to three.

도 6은 본 발명의 일 실시예에 따른 세로 모드 스트리밍 방법의 과정을 개략적으로 보여주는 흐름도이고, 도 7은 도 6의 세로 모드 스트리밍 방법과 관련하여, UHD 카메라를 설명하기 위한 사진이며, 도 8은 도 6의 세로 모드 스트리밍 방법에서, UHD 카메라의 영상에서 획득한 소영상들을 보여주는 사진들이다. 도 1 내지 도 5b의 설명 부분에서 이미 설명한 내용은 간단히 설명하거나 생략한다.6 is a flowchart schematically illustrating a process of a vertical mode streaming method according to an embodiment of the present invention, FIG. 7 is a picture for explaining a UHD camera in relation to the vertical mode streaming method of FIG. 6, and FIG. In the portrait mode streaming method of FIG. 6 , these are pictures showing small images obtained from images of a UHD camera. The contents already described in the description of FIGS. 1 to 5B are briefly described or omitted.

도 6, 및 도 7을 참조하면, 본 실시예의 세로 모드 스트리밍 방법은, 먼저, UHD(Ultra HD) 카메라로 대상을 촬영한다(S110a). UHD 카메라는 UHD 영상을 촬영할 수 있는 카메라를 의미할 수 있다. 참고로, UHD는 HD 이후의 차세대 표준을 제정하기 직전에 다양한 이름으로 불리었고, 먼저, 이름을 날린 것은 4K이다. 4K는 정확하게 정해진 것이 아니라, 가로 해상도가 대략 4000 픽셀 정도의 해상도를 갖는다는 의미이다. 영화 쪽에서 먼저 4K DCI라는 이름으로 4096 x 2160 해상도를 사용하였고, 그 외에도 여러 4K 스펙이 존재하였다. 여러 규격이 경쟁하다가 HD(1280x720)의 9배(가로3배x세로3배)이고, 동시에 FHD(1920x1080)의 4배(가로2배x세로2배)인 3840x2160 해상도가 대세가 되었고, 결국 4K UHD라는 이름으로 결정되었다.Referring to FIGS. 6 and 7 , in the vertical mode streaming method of this embodiment, first, an object is photographed with a UHD (Ultra HD) camera (S110a). A UHD camera may refer to a camera capable of capturing UHD images. For reference, UHD was called various names right before the next-generation standard after HD was enacted, and 4K was first named. 4K is not defined precisely, but means that the horizontal resolution has a resolution of about 4000 pixels. In the movie side, 4096 x 2160 resolution was used under the name of 4K DCI first, and there were several other 4K specifications. While several standards competed, the resolution of 3840x2160, which is 9 times (3 times the width x 3 times the height) of HD (1280x720) and 4 times (2 times the width x 2 times the height) of FHD (1920x1080), became the mainstream, and eventually 4K It was decided to name it UHD.

도 7에서, x축으로 1280으로 표시된 화면이 HD 화면에 해당하고, x축으로 3840으로 표시된 화면이 UHD 화면에 해당할 수 있다. 도 7을 통해 알 수 있듯이, 동일 해상도를 기준으로 할 때, UHD 화면은 HD 화면과 비교할 때, 가로로 3배 및 세로로 3배 클 수 있다. 참고로, x축으로 640으로 표시된 화면은 VGA(Video Graphics Array) 화면에 대응하며, x축으로 1920으로 표시된 화면은 FHD(Full HD) 화면에 해당할 수 있다.In FIG. 7 , a screen indicated by 1280 on the x-axis may correspond to an HD screen, and a screen indicated by 3840 on the x-axis may correspond to a UHD screen. As can be seen from FIG. 7 , a UHD screen can be 3 times larger horizontally and 3 times vertically when compared to an HD screen, based on the same resolution. For reference, a screen marked with 640 on the x-axis corresponds to a Video Graphics Array (VGA) screen, and a screen marked with 1920 on the x-axis may correspond to a Full HD (FHD) screen.

다음, UHD 카메라로 촬영된 영상을 세로가 길게 나오는 여러 개의 소영상들로 분할하거나, 또는 세로가 길게 나오는 소영상으로 특정 부분을 추출한다(S120a). 이하, 편의상, '세로가 길게 나오는 소영상'을 '세로 모드 소영상'이라 한다. 도 8은 UHD 카메라로 촬영한 영상(이하, 'UHD 영상'이라 한다)의 일부를 세로 모드 형태로 추출한 소영상들, 즉, 세로 모드 소영상들을 보여주고 있다. 도 7에서 알 수 있듯이, UHD 영상은 일반 방송용 카메라인 HD 카메라로 촬영한 영상보다 9배 정도 크므로, 일부를 잘라서 세로 모드 소영상으로 추출할 수 있다. 참고로, 방송 용어로 큰 영상을 잘라서 소영상으로 추출하는 기술을 크롭(crop)이라고 한다. Next, the image captured by the UHD camera is divided into several small images with a long vertical image, or a specific part is extracted from a small image with a long vertical image (S120a). Hereinafter, for convenience, a 'long vertical small video' is referred to as a 'portrait mode small video'. 8 shows small images obtained by extracting a part of an image captured by a UHD camera (hereinafter referred to as 'UHD image') in a vertical mode form, that is, small images in a vertical mode. As can be seen from FIG. 7 , since UHD video is about 9 times larger than an image captured by an HD camera, which is a camera for general broadcasting, a portion of the UHD video can be cut and extracted as a small video in portrait mode. For reference, in broadcasting terms, a technique of cutting a large image and extracting it into a small image is called crop.

한편, UHD 영상을 9개의 세로 모드의 소영상들로 분할하는 경우는, UHD 영상이 세로 모드여야 가능할 수 있다. 따라서, 앞서, UHD 카메라로 대상을 촬영하는 단계(S110a)에서, 방송용 카메라와 유사하게 UHD 카메라를 시계 방향 또는 반시계 방향으로 90° 회전하여 세로 모드로 촬영할 수 있다. 이후, 소영상들로 분할하거나, 소영상으로 특정 부분을 추출하는 단계(S120a)에서, 세로 모드의 UHD 영상을 9개의 세로 모드 소영상들로 분할할 수 있다.On the other hand, when dividing a UHD image into 9 small images in vertical mode, the UHD image may be possible only in vertical mode. Accordingly, in the step of photographing the subject with the UHD camera (S110a), the UHD camera may be photographed in portrait mode by rotating the UHD camera clockwise or counterclockwise by 90°, similar to a broadcasting camera. Thereafter, in the step of dividing into small images or extracting a specific part from the small images (S120a), the portrait mode UHD image may be divided into 9 vertical mode small images.

계속해서, 영상들을 세로 모드로 스트리밍 한다(S130). 세로 모드의 스트리밍에 대해서는 도 1의 설명 부분에서 설명한 바와 같다. 다만, 여기서, 영상들은 UHD 영상에서 분할한 소영상들이거나 또는 특정 부분에서 추출한 소영상에 해당할 수 있다.Subsequently, images are streamed in portrait mode (S130). Streaming in vertical mode is as described in the description of FIG. 1 . However, here, the images may correspond to small images divided from a UHD image or small images extracted from a specific part.

도 9는 본 발명의 일 실시예에 따른 세로 모드 스트리밍 방법의 과정을 개략적으로 보여주는 흐름도이다. 도 1 내지 도 8의 설명 부분에서 이미 설명한 내용은 간단히 설명하거나 생략한다.9 is a flowchart schematically illustrating a process of a vertical mode streaming method according to an embodiment of the present invention. The contents already described in the description of FIGS. 1 to 8 are briefly described or omitted.

도 9를 참조하면, 본 실시예에 따른 세로 모드 스트리밍 방법은, 먼저, 적어도 1개의 방송용 카메라를 시계 방향 또는 반시계 방향으로 90° 회전하여 세로가 길게 나오도록 대상을 촬영, 및 UHD 카메라로 대상을 촬영한다(S110b). 방송용 카메라를 시계 방향 또는 반시계 방향으로 90° 회전하여 세로가 길게 나오도록 대상을 촬영하는 것에 대해서는 도 1의 설명 부분에서 설명한 바와 같다. 또한, UHD 카메라로 대상을 촬영하는 것에 대해서는 도 6의 설명 부분에서 설명한 바와 같다.9, in the portrait mode streaming method according to the present embodiment, first, at least one broadcasting camera is rotated clockwise or counterclockwise by 90° to photograph an object so that it is vertically long, and the object is photographed with a UHD camera. is photographed (S110b). Rotating the broadcasting camera clockwise or counterclockwise by 90° to photograph the subject so that the subject appears long is the same as described in the description of FIG. 1 . In addition, photographing an object with a UHD camera is the same as described in the description of FIG. 6 .

다음, 방송용 카메라의 영상들을 시계 방향 또는 반시계 방향으로 반대로 90°반대로 회전, 및 UHD 카메라의 영상을 세로가 길게 나오는 여러 개의 소영상들로 분할하거나, 또는 세로가 길게 나오는 소영상으로 특정 부분을 추출한다(S120b). 방송용 카메라의 영상들을 반시계 방향 또는 반시계 방향으로 반대로 90°반대로 회전하는 것에 대해서는 도 1의 설명 부분에서 설명한 바와 같다. 또한, HD 카메라의 영상을 세로가 길게 나오는 여러 개의 소영상들로 분할하거나, 또는 세로가 길게 나오는 소영상으로 특정 부분을 추출하는 것에 대해서는 도 6의 설명 부분에서 설명한 바와 같다.Next, the images of the broadcast camera are rotated 90° counterclockwise or counterclockwise, and the image of the UHD camera is divided into several small images that are vertically long, or a specific part is divided into small images that are vertically long. Extract (S120b). Rotating the images of the broadcast camera counterclockwise or counterclockwise by 90° is the same as described in the description of FIG. 1 . In addition, dividing the image of the HD camera into several small images with a long vertical image or extracting a specific part from a small image with a long vertical image is the same as described in the description of FIG. 6 .

이후, 영상들을 모두 스트리밍 하거나, 또는 선택된 적어도 1개의 영상을 스트리밍 한다(S130a). 영상들을 모두 스트리밍 하거나, 또는 선택된 적어도 1개의 영상을 스트리밍 하는 것에 대해서는, 도 5a의 설명 부분에서 설명한 바와 같다. 한편, 여기서, 영상들은 방송용 카메라의 영상들 및/또는 UHD 영상에서 분할되거나 추출된 소영상들일 수 있다.Thereafter, all images are streamed or at least one selected image is streamed (S130a). Streaming of all images or streaming of at least one selected image is the same as described in the description of FIG. 5A. Meanwhile, here, the images may be small images segmented or extracted from images of broadcasting cameras and/or UHD images.

도 10은 본 발명의 일 실시예에 따른 이동형 세로 모드 스트리밍 시스템에 대한 블록 구성도이다. 도 1을 함께 참조하여 설명하고, 도 1 내지 도 9의 설명 부분에서 이미 설명한 내용은 간단히 설명하거나 생략한다.10 is a block diagram of a mobile vertical mode streaming system according to an embodiment of the present invention. It will be described with reference to FIG. 1 , and the contents already described in the description of FIGS. 1 to 9 will be briefly described or omitted.

도 10을 참조하면, 본 실시예의 이동형 세로 모드 스트리밍 시스템(1000)은, 적어도 2개의 방송용 카메라들(100), 캡쳐 장비(200), 및 이동형 컴퓨터(300)를 포함할 수 있다. 적어도 2개의 방송용 카메라들(100) 각각은 HD 카메라일 수 있다. 도 10에서, 3개의 방송용 카메라들(100)이 도시되고 있지만, 그에 한하지 않고, 본 실시예의 이동형 세로 모드 스트리밍 시스템(1000)은 2개 또는 4개 이상의 방송용 카메라들(100)을 포함할 수 있다. 또한, 실시예에 따라, 이동형 세로 모드 스트리밍 시스템(1000)은, UHD 카메라를 포함할 수도 있다. 그러한 경우, 적어도 2개의 방송용 카메라들(100) 중 하나가 UHD 카메라로 대체될 수 있다. Referring to FIG. 10 , a mobile vertical mode streaming system 1000 of this embodiment may include at least two broadcasting cameras 100 , a capture device 200 , and a mobile computer 300 . Each of the at least two broadcasting cameras 100 may be a HD camera. In FIG. 10, three broadcasting cameras 100 are shown, but it is not limited thereto, and the mobile portrait mode streaming system 1000 of this embodiment may include two or four or more broadcasting cameras 100. there is. Also, according to an embodiment, the mobile portrait mode streaming system 1000 may include a UHD camera. In such a case, one of the at least two broadcasting cameras 100 may be replaced with a UHD camera.

한편, 본 실시예의 이동형 세로 모드 스트리밍 시스템(1000)에서, 적어도 2개의 방송용 카메라들(100) 각각은 이동이 자유로운 HD 캠코더일 수 있다. 그에 따라서, 야외에서 대상을 세로 모드로 자유롭게 촬영할 수 있다. 여기서, 세로 모드 촬영은 앞서 도 1의 설명 부분에서 설명한 바와 같이, 적어도 2개의 방송용 카메라들(100) 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로 모드로 촬영함으로써 이루어질 수 있다. 덧붙여, 본 실시예의 이동형 세로 모드 스트리밍 시스템(1000)은 적어도 2개의 방송용 카메라들(100) 각각에 대응하거나, 또는 선택된 몇 개에 대응하여 무선 마이크(150)를 더 포함할 수도 있다. 또한, 필요시 오디오 믹서 기능을 사용할 수도 있다.Meanwhile, in the mobile portrait mode streaming system 1000 of this embodiment, each of the at least two broadcasting cameras 100 may be a freely movable HD camcorder. Accordingly, it is possible to freely photograph an object outdoors in portrait mode. Here, as described above in the description of FIG. 1 , vertical mode shooting may be performed by rotating each of the at least two broadcasting cameras 100 clockwise or counterclockwise by 90° to shoot in portrait mode. In addition, the mobile portrait mode streaming system 1000 of this embodiment may further include a wireless microphone 150 corresponding to each of at least two broadcast cameras 100 or selected several. Also, if necessary, the audio mixer function can be used.

캡쳐 장비(200)는 적어도 2개의 방송용 카메라들(100)로부터의 영상들을 캡쳐할 수 있다. 캡쳐 장비(200)는, 예컨대, 4채널 캡쳐 장비로서, 4개의 방송용 카메라들(100)로부터의 영상들에 대한 신호를 SDI 또는 HDMI 케이블을 통해 받아 해당 영상들을 캡쳐할 수 있다. 구체적인 예로, 캡쳐 장치(200)는 Thunderbolt 3 지원 외장 PCI(Peripheral Component Interconnect) 박스, DeckLink Duo 2 (SDI(Serial Digital Interface)), 또는 DeckLink Quad HDMI(High Definition Multimedia) Interface Recorder 등을 포함할 수 있다. 이러한 갭쳐 장치(200)는 외장 캡쳐 장비로서 구비될 수 있다. 물론, 캡쳐 장치(200)가 전술한 장치들에 한정되는 것은 아니다. The capture device 200 may capture images from at least two broadcasting cameras 100 . The capture device 200 is, for example, a 4-channel capture device, and may receive signals for images from the four broadcasting cameras 100 through an SDI or HDMI cable and capture the corresponding images. As a specific example, the capture device 200 may include a Thunderbolt 3 supported external PCI (Peripheral Component Interconnect) box, DeckLink Duo 2 (SDI (Serial Digital Interface)), or DeckLink Quad HDMI (High Definition Multimedia) Interface Recorder. . Such a capture device 200 may be provided as an external capture device. Of course, the capture device 200 is not limited to the aforementioned devices.

이동형 컴퓨터(300)는 예컨대, 노트북일 수 있다. 그러나 그에 한하지 않고, 이동형 컴퓨터(300)는 이동 가능한 다양한 컴퓨터 장치를 포함할 수 있다. 예컨대, 이동형 컴퓨터(300)는 일정 사양 이상의 모바일 워크스테이션을 포함할 수도 있다. 한편, 이동형 컴퓨터(300)가 노트북인 경우, 노트북은 인텔 i7 또는 AMD 라이젠 5000시리즈 프로세서, Nvidia/AMD 모바일 GPU, Thunderbolt 3 인터페이스, 16GB RAM, 및 512GB OS용 SSD을 포함할 수 있다. 그러나 노트북이 전술한 사향들의 부품들을 반드시 포함할 필요는 없다. 다만, 본 실시예의 이동형 세로 모드 스트리밍 시스템(1000) 구현을 위해, 이동형 컴퓨터(300)로서의 노트북은 전술한 GPU와 인터페이스를 필수적으로 포함할 수도 있다.The mobile computer 300 may be, for example, a notebook computer. However, the mobile computer 300 is not limited thereto and may include various mobile computer devices. For example, the mobile computer 300 may include a mobile workstation having a certain specification or higher. Meanwhile, if the mobile computer 300 is a notebook, the notebook may include an Intel i7 or AMD Ryzen 5000 series processor, an Nvidia/AMD mobile GPU, a Thunderbolt 3 interface, 16 GB of RAM, and a 512 GB OS SSD. However, a notebook does not necessarily have to include the parts of the above-mentioned musk. However, in order to implement the mobile vertical mode streaming system 1000 of this embodiment, a notebook computer as a mobile computer 300 may necessarily include the aforementioned GPU and interface.

또한, 이동형 컴퓨터(300)는 다양한 영상 처리용 소프트웨어를 포함할 수 있다. 그에 따라, 이동형 컴퓨터(300)는 영상 처리용 소프트웨어들을 이용하여 촬영된 영상을 회전하고, 또한, 영상에 대한 인코딩 처리 및 비트스트림 포맷팅을 수행할 수 있다. 한편, 본 실시예의 이동형 세로 모드 스트리밍 시스템(1000)에서, 이동형 컴퓨터(300)는 별도의 이동형 컴퓨터로 구현되는 것이 아니고, 기존에 이용되던 이동형 컴퓨터에 세로 모드 스트리밍을 위한 소프트웨어만 별도로 공급하여 구현될 수 있다.In addition, the mobile computer 300 may include various image processing software. Accordingly, the mobile computer 300 can rotate a captured image using image processing software, and also perform encoding processing and bitstream formatting on the image. On the other hand, in the mobile portrait mode streaming system 1000 of this embodiment, the mobile computer 300 is not implemented as a separate mobile computer, but is implemented by separately supplying only software for portrait mode streaming to the existing mobile computer. can

본 실시예의 이동형 세로 모드 스트리밍 시스템(1000)은 전술한 구성요소들을 이용하여, 야외에서 세로 모드로 촬영을 수행하고, 또한, 촬영된 영상을 회전하여 세로 모드 스트리밍을 수행할 수 있다. 그에 따라, 본 실시예의 이동형 세로 모드 스트리밍 시스템(1000)은 스마트 폰의 전체 화면에 세로 모드로 최적의 영상을 제공할 수 있다.The mobile portrait mode streaming system 1000 according to the present embodiment can perform shooting outdoors in portrait mode using the above-described components, and also perform portrait mode streaming by rotating the captured image. Accordingly, the mobile portrait mode streaming system 1000 of the present embodiment can provide an optimal image in portrait mode on the entire screen of a smart phone.

지금까지, 본 발명을 도면에 도시된 실시예를 참고로 설명하였으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.So far, the present invention has been described with reference to the embodiments shown in the drawings, but this is only exemplary, and those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. will be. Therefore, the true technical protection scope of the present invention should be determined by the technical spirit of the appended claims.

100, 100R: 방송용 카메라, 110: 카메라 본체, 120: 디스플레이부, 150: 무선 마이크, 200: 캡쳐 장비, 300: 노트 북, 1000: 이동형 세로 모드 스트리밍 시스템100, 100R: broadcasting camera, 110: camera body, 120: display unit, 150: wireless microphone, 200: capture device, 300: notebook, 1000: portable portrait mode streaming system

Claims (9)

적어도 2개의 방송용 카메라들 각각을 시계 방향 또는 반시계 방향으로 90° 회전하여 세로가 길게 나오도록 대상을 촬영하는 단계;
촬영된 영상들을 상기 시계 방향 또는 반시계 방향의 반대로 90° 회전시키는 단계; 및
상기 영상들을 세로 모드로 스트리밍(streaming) 하는 단계;를 포함하고,
상기 스트리밍 하는 단계에서,
상기 적어도 2개의 방송용 카메라들의 상기 영상들을 모두 스트리밍 하거나, 또는 선택된 적어도 1개의 상기 방송용 카메라의 상기 영상을 스트리밍 하는, 세로 모드 스트리밍 방법.
Rotating each of the at least two broadcasting cameras clockwise or counterclockwise by 90° to photograph the subject so that the subject is vertically elongated;
rotating the captured images 90° in the clockwise or counterclockwise direction; and
Including; streaming (streaming) the images in portrait mode;
In the streaming step,
The portrait mode streaming method of streaming all of the images of the at least two broadcast cameras or streaming the images of the selected at least one broadcast camera.
제1 항에 있어서,
상기 적어도 2개의 방송용 카메라들 각각은,
HD(High Definition) 카메라이고, 상기 90°로 회전하기 전에는 16:9의 가로:세로의 화면 비율을 가지며, 상기 90°로 회전한 후에 16:9의 세로:가로의 화면 비율을 갖는 것을 특징으로 하는 세로 모드 스트리밍 방법.
According to claim 1,
Each of the at least two broadcasting cameras,
It is a high definition (HD) camera, and has a horizontal:vertical aspect ratio of 16:9 before rotating at 90 °, and has a vertical:horizontal aspect ratio of 16:9 after rotating at 90 ° How to stream in portrait mode.
제1 항에 있어서,
상기 반대로 90° 회전시키는 단계에서, 영상 회전 소프트웨어 프로그램을 이용하여 상기 영상들을 회전하며,
상기 영상들은 세로가 긴 스마트 폰의 화면에 동일 방향으로 대응하는 것을 특징으로 하는 세로 모드 스트리밍 방법.
According to claim 1,
In the opposite step of rotating 90 °, the images are rotated using an image rotation software program,
The images are vertical mode streaming method, characterized in that corresponding to the same direction on the screen of a vertically long smartphone.
제1 항에 있어서,
상기 대상을 촬영하는 단계에서,
UHD(Ultra HD) 카메라로 상기 대상을 촬영하고,
상기 반대로 90° 회전시키는 단계에서,
촬영된 영상을 세로가 길게 나오는 여러 개의 소영상들로 분할하거나, 또는 세로가 길게 나오는 소영상으로 특정 부분을 추출하며,
상기 스트리밍 하는 단계에서,
상기 소영상들을 세로 모드로 스트리밍 하는 것을 특징으로 하는 세로 모드 스트리밍 방법.
According to claim 1,
In the step of photographing the subject,
Photographing the target with a UHD (Ultra HD) camera,
In the opposite step of rotating 90 °,
The captured image is divided into several small images that are vertically long, or a specific part is extracted from a small image that is vertically long,
In the streaming step,
Vertical mode streaming method, characterized in that for streaming the small images in a vertical mode.
제1 항에 있어서,
상기 적어도 2개의 방송용 카메라들 각각은 HD 캠코더(camcorder)이고,
상기 반대로 90° 회전시키는 단계 전에,
캡쳐 장비를 통해 상기 적어도 2개의 방송용 카메라들로의 영상들을 캡쳐하는 단계를 더 포함하는 것을 특징으로 하는 세로 모드 스트리밍 방법.
According to claim 1,
Each of the at least two broadcasting cameras is an HD camcorder,
Before the reverse 90° rotation step,
The portrait mode streaming method further comprising the step of capturing images to the at least two broadcasting cameras through a capture device.
적어도 2개의 방송용 카메라들;
상기 적어도 2개의 방송용 카메라들의 영상들을 캡쳐하는 캡쳐 장비; 및
상기 영상들을 처리하는 이동형 컴퓨터;를 포함하고,
상기 적어도 2개의 방송용 카메라들 각각은, 시계 방향 또는 반시계 방향으로 90°로 회전하여 세로가 길게 나오도록 대상을 촬영하고,
상기 이동형 컴퓨터는, 제1 소프트웨어를 통해 상기 영상들을 상기 시계 방향 또는 반시계 방향의 반대로 90° 회전시키고, 제2 소프트웨어를 통해 상기 영상들을 세로 모드로 스트리밍 하는, 이동형 세로 모드 스트리밍 시스템.
at least two broadcast cameras;
a capture device for capturing images of the at least two broadcasting cameras; and
A mobile computer for processing the images; includes,
Each of the at least two broadcasting cameras rotates clockwise or counterclockwise by 90° to photograph an object so that the subject is elongated,
Wherein the mobile computer rotates the images 90° clockwise or counterclockwise through first software and streams the images in portrait mode through second software.
제6 항에 있어서,
상기 적어도 2개의 방송용 카메라들 각각은,
HD 캠코더이고, 상기 90°로 회전하기 전에는 16:9의 가로:세로의 화면 비율을 가지며, 상기 90°로 회전한 후에 16:9의 세로:가로의 화면 비율을 갖는 것을 특징으로 하는 이동형 세로 모드 스트리밍 시스템.
According to claim 6,
Each of the at least two broadcasting cameras,
An HD camcorder, characterized in that it has a horizontal:vertical aspect ratio of 16:9 before rotation by 90 °, and a vertical:horizontal aspect ratio of 16:9 after rotation by 90 ° streaming system.
제6 항에 있어서,
상기 이동형 컴퓨터는 노트북이고,
상기 이동형 컴퓨터는, 상기 제2 소프트웨어를 통해 상기 적어도 2개의 방송용 카메라들의 상기 영상들을 모두 스트리밍 하거나, 또는 선택된 적어도 1개의 상기 방송용 카메라의 상기 영상을 스트리밍 하는 것을 특징으로 하는 이동형 세로 모드 스트리밍 시스템.
According to claim 6,
The mobile computer is a notebook,
The mobile computer streams all of the images of the at least two broadcasting cameras through the second software, or streams the images of the selected at least one broadcasting camera.
제1 항에 있어서,
UHD 카메라를 더 포함하고,
상기 UHD 카메라의 영상은 상기 캡쳐 장비에 의해 함께 캡쳐되며,
상기 이동형 컴퓨터는, 제3 소프트웨어를 통해 상기 UHD 카메라의 영상을 세로가 길게 나오는 여러 개의 소영상들로 분할하는 것을 특징으로 하는 세로 모드 스트리밍 시스템.
According to claim 1,
Including more UHD cameras,
The image of the UHD camera is captured together by the capture device,
The vertical mode streaming system, characterized in that the mobile computer divides the image of the UHD camera into several small images appearing vertically through third software.
KR1020210155058A 2021-11-11 2021-11-11 Vertical mode streaming method, and portable vertical mode streaming system KR102637147B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210155058A KR102637147B1 (en) 2021-11-11 2021-11-11 Vertical mode streaming method, and portable vertical mode streaming system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210155058A KR102637147B1 (en) 2021-11-11 2021-11-11 Vertical mode streaming method, and portable vertical mode streaming system

Publications (2)

Publication Number Publication Date
KR20230068852A true KR20230068852A (en) 2023-05-18
KR102637147B1 KR102637147B1 (en) 2024-02-16

Family

ID=86545592

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210155058A KR102637147B1 (en) 2021-11-11 2021-11-11 Vertical mode streaming method, and portable vertical mode streaming system

Country Status (1)

Country Link
KR (1) KR102637147B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020075619A (en) * 2001-03-26 2002-10-05 (주)유스테크놀로지 System for monitoring and recording multi division image
KR20140001009A (en) * 2012-06-27 2014-01-06 삼성전자주식회사 Image process apparatus, image relay apparatus, method for image process, and method for image relay thereof
KR20180043712A (en) * 2016-10-20 2018-04-30 삼성전자주식회사 Method for displaying an image and an electronic device thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020075619A (en) * 2001-03-26 2002-10-05 (주)유스테크놀로지 System for monitoring and recording multi division image
KR20140001009A (en) * 2012-06-27 2014-01-06 삼성전자주식회사 Image process apparatus, image relay apparatus, method for image process, and method for image relay thereof
KR20180043712A (en) * 2016-10-20 2018-04-30 삼성전자주식회사 Method for displaying an image and an electronic device thereof

Also Published As

Publication number Publication date
KR102637147B1 (en) 2024-02-16

Similar Documents

Publication Publication Date Title
WO2019205872A1 (en) Video stream processing method and apparatus, computer device and storage medium
US9514783B2 (en) Video editing with connected high-resolution video camera and video cloud server
CN108650542B (en) Method for generating vertical screen video stream and processing image, electronic equipment and video system
WO2018014495A1 (en) Real-time panoramic live broadcast network camera and system and method
CN106303289B (en) Method, device and system for fusion display of real object and virtual scene
US10574933B2 (en) System and method for converting live action alpha-numeric text to re-rendered and embedded pixel information for video overlay
KR101282955B1 (en) Real-time Panorama Streaming System for High Resolution Panorama Videos and/or Images
US8803991B2 (en) Snapshot capture in video stream
CN106992959A (en) A kind of 3D panoramas audio frequency and video live broadcast system and audio/video acquisition method
CA3018600C (en) Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices
JP2020524450A (en) Transmission system for multi-channel video, control method thereof, multi-channel video reproduction method and device thereof
WO2016199607A1 (en) Information processing device and information processing method
CN108418832A (en) A kind of virtual reality shopping guide method, system and storage medium
KR102152627B1 (en) Method and apparatus for displaying contents related in mirroring picture
US10764655B2 (en) Main and immersive video coordination system and method
KR102637147B1 (en) Vertical mode streaming method, and portable vertical mode streaming system
Niamut et al. Live event experiences-interactive UHDTV on mobile devices
US11153613B2 (en) Remote-controlled media studio
CN109275010B (en) 4K panoramic super-fusion video terminal adaptation method and device
KR102465403B1 (en) Method and device for providing video contents that combine 2d video and 360 video
US10264241B2 (en) Complimentary video content
Niamut et al. Immersive live event experiences-interactive UHDTV on mobile devices
TWM585374U (en) Live broadcast architecture in mobile electronic device
WO2018010212A1 (en) Method and system for processing video
CN117459768A (en) Nondestructive preview method and system based on ultra-high definition camera on intelligent television

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right