WO2015046688A1 - 멀티앵글영상촬영헬멧 및 촬영방법 - Google Patents

멀티앵글영상촬영헬멧 및 촬영방법 Download PDF

Info

Publication number
WO2015046688A1
WO2015046688A1 PCT/KR2014/001856 KR2014001856W WO2015046688A1 WO 2015046688 A1 WO2015046688 A1 WO 2015046688A1 KR 2014001856 W KR2014001856 W KR 2014001856W WO 2015046688 A1 WO2015046688 A1 WO 2015046688A1
Authority
WO
WIPO (PCT)
Prior art keywords
helmet
information
server
unit
group
Prior art date
Application number
PCT/KR2014/001856
Other languages
English (en)
French (fr)
Inventor
이동채
유수근
Original Assignee
주식회사 모브릭
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 모브릭 filed Critical 주식회사 모브릭
Priority to US15/025,430 priority Critical patent/US20160241794A1/en
Publication of WO2015046688A1 publication Critical patent/WO2015046688A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure

Definitions

  • the present invention relates to a digital broadcasting service, and more particularly, to providing a multi-angle video, to multi-angle video through a multi-angle video recording helmet, and to an invention for synchronizing a captured video. .
  • IPTV which allows a user to selectively receive desired contents through a high-speed communication network, has become a major field of the broadcasting communication industry.
  • a multi-angle broadcasting service in which a plurality of cameras are arranged in a real-time event (eg, a sports event or a performance hall), and a video recorded by cameras having different angles is transmitted through different channels. have. By changing the channel, the user can watch the video captured from the desired angle.
  • a real-time event eg, a sports event or a performance hall
  • the existing multi-angle service is difficult to watch images outside the TV screen because the broadcast station can only watch the video provided by editing to the TV screen.
  • the broadcast station can only watch the video provided by editing to the TV screen.
  • the angles they want to see are different from each other, when one viewer selects a specific camera angle, there is a problem that prevents others from watching TV.
  • multiple video devices with built-in mobile cameras e.g. mobile phones, mobile broadcasting equipment, etc.
  • the present invention is to provide an optimal viewing environment to the user by allowing the synchronization of the respective images to be smoothly performed when the same event is photographed and broadcasted in a plurality of terminals, respectively.
  • a helmet unit including at least one camera mounting unit, a camera unit mounted on the camera mounting unit for recording an external image, encoding for encoding the image taken by the camera unit
  • the communication unit may transmit the device information of the helmet to a server and receive synchronization information and a control signal transmitted when the server determines that the helmet is a helmet included in a preset shooting group.
  • a synchronization unit configured to generate marking information based on a predetermined period based on the predetermined period and to transmit the encoded image and marking information to the server through the communication unit.
  • a plurality of multi-angle video recording helmets for recording the video of different angles from each other at different positions, each device information Transmitting, to the server, the server, based on the received device information, determining whether the plurality of helmets are helmets included in a preset shooting group; in the server, included in the shooting group Transmitting synchronization information and a control signal to the helmets determined to be determined, photographing an external image in the helmet, encoding the captured image into a digital image by the helmet, and the helmet to the captured image, Generating marking information by performing marking according to a predetermined period based on the received synchronization information; The encoded image and the marking information and transmitting to the server.
  • each multi-angle screen is synchronized to provide a screen of the same time to the user.
  • the multi-angle screen can be stably provided to the user. Accordingly, the user's interest and convenience can be improved, and the use of the multi-angle service can be promoted.
  • FIG. 1 is a diagram illustrating a multi-angle video service providing system according to an exemplary embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a multi-angle video recording helmet according to an embodiment of the present invention.
  • FIG. 3 is a flowchart illustrating steps of a multi-angle image capturing method according to an exemplary embodiment of the present invention.
  • FIG. 4 is a block diagram showing the internal configuration of a multi-angle video recording helmet according to an embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating a step of providing a multi-angle video service in a multi-angle video service providing system according to an exemplary embodiment of the present invention.
  • FIG. 6 is a diagram illustrating a configuration of a server according to an exemplary embodiment of the present invention.
  • FIG. 7 is a diagram illustrating a communication process between a multi-angle video recording helmet and a server according to an exemplary embodiment of the present invention.
  • FIG. 8 is a diagram illustrating a communication process between a multi-angle video recording helmet and a server according to another embodiment of the present invention.
  • FIG. 9 is a diagram illustrating a selection screen of a multi-angle video recording helmet according to an embodiment of the present invention.
  • unit and device for components used in the following description are merely given in consideration of ease of preparation of the present specification, and the “unit” and “device” may be used interchangeably with each other. It can be designed in hardware or software.
  • FIG. 1 is a diagram illustrating a multi-angle video service providing system according to an exemplary embodiment of the present invention.
  • the plurality of multi-angle video recording helmets 100 may be connected to the server 200 to perform an operation for providing a multi-angle screen. That is, when a plurality of multi-angle video recording helmets capture a video of the same event at different positions, and transmit the captured video to the server, the server provides a multi-angle screen including the plurality of video images. By transmitting to 300, a multi-angle screen providing service may be performed.
  • the server 200 described in this drawing and the following drawings may be distinguished from a streaming server for broadcast transmission as a sync server.
  • a plurality of multi-angle video recording helmets 100 are worn by football players, and the attached multi-angle video recording helmets ( Since the server 200 receives each image from the 100 and generates a multi-angle screen, and the generated image is displayed through the user terminal 300, the user can watch a game at each viewpoint of the player. .
  • the multi-angle video recording helmet 100 Action Cam
  • smart phone equipped with a camera SmartPhone
  • a digital camera Digital Camera
  • the present invention describes a multi-angle video recording helmet as an embodiment.
  • the scope of the present invention extends until another device plays the role of the multi-angle video recording helmet of the present invention to the extent that the scope of the present invention.
  • the user terminals 300 may be various devices capable of displaying a screen and transmitting / receiving data, such as a smartphone, a tablet PC, a laptop PC, and the like.
  • FIG. 2 is a diagram illustrating a multi-angle video recording helmet according to an embodiment of the present invention.
  • the multi-angle video recording helmet may have an external configuration as shown in this figure. That is, the helmet portion including at least one camera mounting portion may be configured as an external form.
  • the helmet unit may include first to fourth camera mounting units 112 to 115, and each camera mounting unit may include a first camera mounted on the front of the helmet unit and the helmet unit.
  • a second camera mounted on the right side, a third camera mounted on the left side of the helmet unit, and a fourth camera mounted on the rear side of the helmet unit may be mounted.
  • the multi-angle video recording helmet may be equipped with only one camera to capture an image, but by including a plurality of cameras, the multi-angle video recording helmet may capture all images before, after, left and right.
  • At least one of the first to fourth camera mounting units 112 to 115 may be equipped with a 3D photographing camera for allowing the captured image to be displayed in 3D. That is, a 3D video recording camera may be mounted to provide a more realistic screen.
  • each of the camera mounting portion (112 to 115) is equipped with only a camera portion (110 of FIG. 4) for capturing an image
  • other components may be integrally configured at different positions of the helmet portion. . That is, even when a plurality of cameras are mounted, only a plurality of cameras necessary for capturing a plurality of images are mounted, and each of the other necessary components, such as an encoding unit, a storage unit, a synchronization unit, a transmitter, a communication unit, a battery unit, and the like It may be configured to be located in the least impact position of any position of the helmet, the plurality of camera unit may be configured to be shared and available together.
  • FIG. 3 is a flowchart illustrating steps of a multi-angle image capturing method according to an exemplary embodiment of the present invention.
  • a multi-angle image may be provided through the steps as shown in the drawing.
  • these steps may be performed using a multi-angle imaging helmet as shown in FIG. 4.
  • a plurality of multi-angle video recording helmets for capturing images of different angles transmit respective device information to a server (S101).
  • a plurality of shooting multi-angle video recording helmets may be used to acquire a shooting screen of different angles, and in order to generate a multi-angle screen through the plurality of shooting multi-angle video recording helmets.
  • Information of the plurality of shooting multi-angle video recording helmets may be transmitted to the server.
  • a mobile communication network may be used as the transmission means. That is, a 3G communication network or an LTE communication network may be used.
  • a multi-angle video recording helmet should be subscribed to the mobile communication network.
  • the information may be transmitted to the server through Wi-Fi communication. That is, the communication format of various methods capable of transmitting and receiving data between the server and the multi-angle video recording helmet can be used without being limited to the communication means.
  • the server determines whether the plurality of multi-angle video recording helmets are multi-angle video recording helmets included in a preset shooting group based on the received device information (S102).
  • the server may determine whether a multi-angle video recording helmet is a multi-angle video recording helmet included in a preset shooting group.
  • the shooting group may be, for example, a 'team A' group, and in this case, all shooting multi-angle video shooting helmets attached to the players' helmets of the team A may be included in the shooting group.
  • the method may include determining whether the plurality of multi-angle video recording helmets are multi-angle video recording helmets included in a preset shooting group. : Group A), the multi-angle video recording helmet may be determined as a multi-angle video recording helmet included in the preset shooting group. That is, for example, the server may store a group information table, and the table may include information items of the multi-angle video recording helmets to be included.
  • the server may update the pre-stored multi-angle video recording helmet information when there is a difference between the device information of the received multi-angle video recording helmet and the device information of the multi-angle video recording helmet stored in the server. Can be. That is, the server can always keep the device information of the multi-angle video recording helmet up to date.
  • the multi-angle video recording helmet when the information on the multi-angle video recording helmet is not registered in the server with the same group name, the multi-angle video recording helmet does not include the multi-angle video recording helmet. It can be judged by a video shooting helmet.
  • a new new group is created based on the device information of the multi-angle video recording helmet, and the master (the multi-angle video recording helmet) Master) can be set with the shooting equipment. That is, a new shooting group may be configured based on a multi-angle video recording helmet not included in the shooting group.
  • the server may generate a group table for the generated group, and store information on a synchronization period among the information on the master photographing equipment in the group table. Therefore, a new group is created, and information about the new group can be stored and utilized in the server.
  • the server when a group information request signal is transmitted from another multi-angle video recording helmet not included in the photographing group to the server, the server may have previously generated a group by using the multi-angle video recording helmet. Information about can be transmitted. That is, the multi-angle video recording helmet without a preset shooting group requests the whole group information or the group information generated in the field of interest (predefined classification) to the server, and transmits a subscription request signal to the server with reference to this. Can be.
  • the subscription request signal when the subscription request signal is received, transmits a permission to join a photographing group of another multi-angle video recording helmet to a master photographing device.
  • the master photographing device may transmit a subscription permission signal or a subscription not allowed signal to the server after determining whether to subscribe based on a preset criterion.
  • the master photographing device when the subscription request signal is transmitted, displays the relevant menu on the display unit, and receives a subscription permission signal or a subscription disallowed signal by receiving a signal for subscription permission from a user through a user interface unit. Can be generated and transmitted.
  • one of the plurality of multi-angle video recording helmet the master mode (Master Mode) is On (On)
  • the other multi-angle video recording helmet is the master mode
  • the subscription request signal is automatically generated and transmitted when the subscription request signal is transmitted.
  • the server may receive the multi-angle video recording helmet, which transmits the subscription request signal to the generated group, as a slave recording device when the subscription permission signal of the multi-angle video recording helmet is received from the master photographing equipment. Including shooting groups can be organized and operated. Therefore, the digital image photographed by the master photographing device and the slave photographing device may be marked by the master photographing device and the slave photographing device according to the marking period reference of the generated group. Therefore, synchronization can be performed based on this marking information.
  • the server may control to stop the synchronization by transmitting the synchronization end signal to each slave photographing device.
  • the server transmits synchronization information and a control signal to the multi-angle video recording helmets determined to be included (S103).
  • the multi-angle video recording helmet determined to be included in the shooting group in the server may include transmission information including at least one of synchronization information including at least one of the information, photographing instruction information (eg, recording start / stop / end signal), and photographing information (frame number per second, color, size information).
  • the marking presence determination information may include information on whether to mark directly on the image captured by the multi-angle video recording helmet or to store it as separate marking information.
  • the transmitting of the synchronization information and the control signal may be performed by the server.
  • the synchronization period information may be transmitted to the multi-angle video recording helmets determined to be included in the photographing group. It is determined whether the preparation for the preparation of the multi-angle video recording helmets that transmits the information is completed. When the preparation for the preparation is completed, the recording start signal is transmitted to the multi-angle video recording helmets, and the multi-angle video transmitting the recording start signal.
  • An acknowledgment (ACK) signal may be received from the photographing helmet. That is, the server can control the start of shooting.
  • an external image is captured through the multi-angle video recording helmet (S104).
  • the multi-angle video recording helmet encodes the photographed video into a digital video, and generates marking information by performing marking on the photographed video based on the received synchronization information (S105).
  • the multi-angle video recording helmet transmits the encoded video and marking information to the server (S106).
  • the marking may be performed on the encoded image and may be encoded after the marking is performed.
  • the information about the order is included in the image so that it can be grasped by the decoder of the user terminal.
  • the multi-angle video recording helmet performs marking on the captured image according to a preset period based on the synchronization information received from the server.
  • the multi-angle video recording helmet may transmit the mark information to the server based on the information received from the server, according to a preset period.
  • the multi-angle video recording helmet uses the dummy information as dummy data, that is, information on the number of synchronizations, information on time, and information on the video image itself.
  • dummy data that is, information on the number of synchronizations, information on time, and information on the video image itself.
  • dummy data may be stored in the multi-angle video recording helmet to be inserted into the video material, and may be transmitted to the server.
  • the multi-angle video recording helmet in performing the marking, stores the mark information according to a predetermined period based on the information received from the server.
  • the encoded video and the mark information stored until the completion point may be transmitted to the server.
  • marking information when marking is performed, marking information may be immediately transmitted to the server. According to another exemplary embodiment, after the marking information is accumulated to some extent, the marking information may be transmitted to the server.
  • the server may receive encoded images and marking information from respective multi-angle video recording helmets, and provide a multi-angle screen service by providing the received information to a user. That is, since the playback time of the captured images can be synchronized using the encoded image and the marking information, the user can smoothly receive a multi-angle screen through a streaming server or an image player in the user terminal.
  • FIG. 4 is a block diagram showing the configuration of a multi-angle video recording helmet according to an embodiment of the present invention.
  • the multi-angle video recording helmet 100 as shown in FIG. 2, the helmet portion (not shown) including at least one camera mounting portion may be configured on the outside, as an internal component,
  • the camera 110, the synchronizer 120, the communicator 130, the encoder 140, the transmitter 150, and the storage 160 may be included.
  • a battery unit (not shown) for supplying power to each module may be configured.
  • the configurations may be configured in hardware / modules. However, one module / unit may be configured to perform a function of another module / unit. That is, it can be integrated or detailed according to needs or purposes.
  • the camera unit 110, the synchronization unit 120, the communication unit 130, the encoding unit 140, the transmission unit 150, and the storage unit 160 are shown as being configured in one block. This is for the purpose of facilitating the description of the components, and only the camera unit 110 is mounted to be exposed to the outside of the helmet unit to capture an image, and the rest of the synchronization unit 120, the communication unit 130, and the encoding unit 140. ),
  • the transmission unit 150, the storage unit 160, and the battery unit may be mounted at any position that can receive less impact inside the helmet.
  • the camera unit 110 like a conventional action camera, the camera unit 110, the circuit unit 120, 130, 140, 150, 160, and even the battery is all configured in one piece is implemented in the form or mounted on the helmet
  • the camera lens of the camera unit 110 is exposed or protruded to the outside, and the rest of the camera unit 110 and some or all of the circuit units 120, 130, 140, 150, and 160 are Consists of embedded or embedded in the helmet.
  • the camera unit 110 may capture an external image.
  • the aperture speed may be automatically adjusted according to the external brightness or the operation speed of the object.
  • the synchronizer 120 may generate marking information by performing marking based on the synchronization information received from the server. Embodiments related to marking have been described in detail with reference to FIG. 2.
  • the synchronization information corresponds to information for enabling synchronization through different multi-angle video recording helmets for capturing images of different angles at different positions and markings according to a predetermined period.
  • the synchronization unit 120 may perform marking on the captured image at a predetermined period based on the synchronization information received by the multi-angle image recording helmet from the server.
  • the streaming server waits until the synchronization time is reached for a plurality of broadcast video images, removes the marking information, and transmits the synchronized video to the user terminal (function A).
  • the function A may be performed by the video player in the user terminal when the network situation is poor.
  • the image may be a still image for a predetermined time or more during the time required for synchronization, a specific image (eg, an advertisement image) may be displayed on the user terminal during such a waiting time.
  • the communication unit 130 transmits the device information of the multi-angle video recording helmet to a server, and when the server determines that the multi-angle video recording helmet is a multi-angle video recording helmet included in a preset shooting group, the synchronization is transmitted. Information and control signals can be received.
  • a mobile communication network may be used as a transmission means using a communication unit. That is, a 3G communication network or an LTE communication network may be used. For this purpose, a multi-angle video recording helmet should be subscribed to the mobile communication network.
  • the information may be transmitted to the server through Wi-Fi communication. That is, the communication format of various methods capable of transmitting and receiving data between the server and the multi-angle video recording helmet can be used without being limited to the communication means.
  • the synchronization information may include at least one of synchronization period information and marking presence / determination information
  • the control signal may include at least one of photographing instruction information and photographing information.
  • the encoder 140 may encode an image photographed by the camera unit.
  • Various encoding formats according to the MPEG standard may be used, and image formats other than the MPEG standard may also be used according to the device setting of the multi-angle video recording helmet.
  • encoding may be performed by selecting a specific encoding format from a user.
  • the transmission unit 150 may control to transmit the image encoded in the multi-angle video recording helmet and the marking information generated to the server through the communication unit.
  • the storage unit 160 may store the encoded image and marking information.
  • the communication unit 130 may transmit the encoded image and marking information stored in the storage unit to the server.
  • the storage unit may be configured with various storage means such as RAM, SSD, HDD, and the like.
  • FIG. 5 is a flowchart illustrating a step of providing a multi-angle video service in a multi-angle video service providing system according to an exemplary embodiment of the present invention.
  • the multi-angle video service providing method using the multi-angle video service providing system may be performed through the steps as shown in the figure.
  • a plurality of multi-angle video recording helmets that capture images of different angles at different positions, that is, a plurality of imaging equipments respectively capture images (S101).
  • the plurality of photographing apparatuses may photograph the image including information for determining an angle of the photographed image including location information of the plurality of photographing apparatuses.
  • the plurality of photographing equipment transmits the captured images to the server (S102).
  • a mobile communication network may be used as the transmission means. That is, a 3G communication network or an LTE communication network may be used, and for this, photographing equipment may be subscribed to a mobile communication network.
  • the captured images may be transmitted to the server through Wi-Fi communication. That is, not limited to the communication means, various types of communication formats capable of transmitting and receiving data between the server and the photographing equipment can be used. The diversity of the use of the communication format also applies to the communication between the server 200 and the user terminal 300.
  • the server receives the captured images (S103), and the server generates a multi-angle image based on the received images (S104).
  • a multi-angle image in generating the multi-angle image, various image formats such as AVI, MKV, and MOV may be used.
  • a multi-angle image may be generated by being encrypted so as not to take data from a device other than the subscriber.
  • the server transmits the generated multi-angle image to the user terminal (S105).
  • subscriber information of the multi-angle video service may be stored in the server, and the multi-angle video may be transmitted to one or more user terminals 300 based on the stored subscription information.
  • the user terminal receives the multi-angle image (S106), and executes a process for playing the received multi-angle image (S107).
  • a process for playing the received multi-angle image S107
  • an installation screen is displayed so that the user can install the process on the user terminal.
  • the multi-angle video service may be provided to the user through the above steps.
  • FIG. 6 is a diagram illustrating a configuration of a server according to an exemplary embodiment of the present invention.
  • the server 200 may include a control unit 201, a network interface unit 202, a storage unit 203, a multi-angle video generation unit 204, and a subscriber management unit 205.
  • the control unit 201 controls the operation of each module of the server.
  • the network interface unit 202 may transmit / receive data with the multi-angle video recording helmet 100 and the user terminal 300.
  • a mobile communication network may be used as the transmission and reception means. That is, a 3G communication network or an LTE communication network may be used, and multi-angle video recording helmets may be subscribed to the mobile communication network.
  • the captured images may be transmitted to the server through Wi-Fi communication. That is, the communication format of various methods capable of transmitting and receiving data between the server and the multi-angle video recording helmet or the user terminal may be used without being limited to the communication means.
  • the storage unit 203 may store images received from the multi-angle video recording helmet 100 or store multi-angle images to be transmitted to the user terminal 300.
  • the multi-angle image generator 204 may generate and re-encode a multi-angle image based on the images stored in the storage 203.
  • various encoding formats according to the MPEG standard may be used, and image formats other than the MPEG standard may also be used according to the photographing equipment setting.
  • encoding may be performed by selecting a specific encoding format from a user.
  • the subscriber manager 205 may manage a shooting group of the multi-angle video recording helmets 100 and manage data transmission and reception for the user terminal 300. That is, the multi-angle video service may not be provided when the subscriber is not a subscriber, and even if the subscriber is correct, the multi-angle video service may not be provided when the subscription period is over.
  • the server 200 may receive the photographed images, generate a multi-angle image based on the received images, and transmit the generated multi-angle image to the user terminal. .
  • FIG. 7 is a diagram illustrating a communication process between a multi-angle video recording helmet and a server according to an exemplary embodiment of the present invention.
  • the multi-angle video recording helmet 100 transmits an inclusion request command and group name information to be included in the shooting group to the server 200 (JOIN Group_Name and Member_Num).
  • the server 200 examines the device information of the multi-angle video recording helmet 100 included in the pre-registered shooting group and, if there is a difference, the information of the multi-angle video recording helmet stored in the server. After updating (update) and save, and transmits the synchronization period (Sync_Period) information to the recording device (100).
  • the server 200 issues a multi-angle video recording helmet (Sync_Start) command when the artificial judgment or the member configuration is detected. To send them. Then, an Ack command is received from the photographing device in response to the photographing start signal.
  • Sync_Start multi-angle video recording helmet
  • the multi-angle video recording helmet can start shooting and perform marking at a period based on the synchronization period information (for example, 5 seconds).
  • the synchronization period information for example, 5 seconds.
  • the recording starts simultaneously without the marking information or generates the marking information only once at the start of the shooting.
  • the server 200 determines that it is time to end the shooting synchronization by artificial or system determination, it transmits a recording end (Sync_END) command to the multi-angle video recording helmet 100, the multi-angle video recording helmet ( 100) end of recording and marking end.
  • Sync_END recording end
  • the synchronization is performed through the above steps.
  • FIG. 8 is a diagram illustrating a communication process between a multi-angle video recording helmet and a server according to another embodiment of the present invention.
  • the server determines the device information of the multi-angle video recording helmet
  • information on the multi-angle video recording helmet is not registered with the same group name in the server
  • the mutual information as shown in FIG. Communication can be performed.
  • the multi-angle video recording helmet 100 to the server 200 the command (Master Group_Name and Sync_Info) to the server 200 to create a recording group using the multi-angle video recording helmet as a master recording equipment
  • the command may include synchronization information including information on the master photographing equipment and synchronization period information.
  • the server 200 may newly create a photographing group.
  • a group information request signal (Get Group_Info) for selecting a group for photographing synchronization may be transmitted from the other multi-angle video recording helmet 101 to the server 200.
  • the server 200 may correspondingly transmit information including the group name to the multi-angle video recording helmet 101.
  • the multi-angle video recording helmet 101 may transmit a subscription request signal JOIN Group_Name to a server in order to be included in a specific shooting group.
  • the server 200 transmits a photographing group join permission signal (JOINED Member_Info) to the other multi-angle video recording helmet 101 to the master photographing equipment so as to determine whether to permit the photographing group. Can be.
  • a photographing group join permission signal (JOINED Member_Info)
  • the master photographing equipment may determine whether the multi-angle video recording helmet 101 has a photography group. That is, the master photographing equipment may transmit a subscription permission signal or a subscription permission signal to the server 200 after determining whether to subscribe based on a preset criterion. If the multi-angle video recording helmet 101 is subscribed, the multi-angle video recording helmet 101 is included in the shooting group as a slave recording device.
  • a recording start (Sync Start) control signal may be notified to the other multi-angle video recording helmet 101 through the server 200, and the master photographing may be performed.
  • the device 100 intends to end the recording synchronization, by sending a recording end (Sync_End) command to another multi-angle video recording helmet 101 through the server 200, the recording synchronization can be terminated.
  • a recording end (Sync_End) command to another multi-angle video recording helmet 101 through the server 200
  • the recording synchronization can be terminated.
  • a new multi-angle video recording helmet is connected to the synchronization group during the synchronization shooting, it is possible to configure the shooting group through the above steps.
  • FIG. 9 is a diagram illustrating a selection screen of a multi-angle video recording helmet according to an embodiment of the present invention.
  • a plurality of multi-angle video recording helmets may simultaneously capture images within an event, the user may select a specific multi-angle video recording helmet to watch an image of a desired angle.
  • various types of image selection menus may be provided.
  • the figure displays a football stadium and overlays the position of a multi-angle video recording helmet equipped with a camera on the displayed football stadium. do. Therefore, the user can grasp the position of the multi-angle video recording helmet and select the angle video, so that the user can use the multi-angle video providing service more effectively.
  • the multi-angle video recording helmet can continuously transmit the location information to the server, so that the position of the multi-angle video recording helmet can be monitored and provided to the user.
  • the user may display different colors of the multi-angle video recording helmet 100 belonging to the first photographing group and the multi-angle video recording helmet 111 belonging to the second photographing group. You can make the selection convenient.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 멀티앵글영상촬영헬멧 및 그 촬영방법에 관한 것으로, 적어도 하나의 카메라장착부를 포함하는 헬멧부, 상기 카메라 장착부에 장착되어 외부 영상을 촬영하는 카메라부, 상기 카메라부에서 촬영된 영상을 인코딩하는 인코딩부, 상기 헬멧의 장치정보를 서버로 전송하고, 상기 서버에서 상기 헬멧이 기 설정된 촬영그룹에 포함된 헬멧으로 판단되는 경우에 전송되는 동기화 정보 및 제어신호를 수신하는 통신부, 상기 수신된 동기화 정보에 기초하여 일정주기에 따른 마킹(Marking)을 수행하여 마킹정보를 생성하는 동기화부 및 상기 인코딩된 영상 및 마킹정보를 상기 통신부를 통하여 상기 서버로 전송하도록 제어하는 전송부를 포함하는 멀티앵글영상촬영헬멧을 통하여, 동기화가 원활하게 이루어진 멀티앵글영상 서비스를 제공할 수 있도록 하는 발명이다.

Description

멀티앵글영상촬영헬멧 및 촬영방법
본 발명은 디지털 방송 서비스에 관한 것으로, 보다 구체적으로는 멀티앵글영상을 제공함에 있어서 멀티앵글영상촬영헬멧을 통하여 멀티앵글영상을 촬영하고, 촬영된 영상의 동기화를 수행할 수 있도록 하는 발명에 관한 것이다.
최근 초고속 통신망의 보급과 방송 및 통신 기술의 융합 추세에 따라 사용자가 초고속 통신망을 통해 원하는 콘텐츠를 선택적으로 수신할 수 있는 IPTV가 방송 통신 산업의 주요 분야로 자리 잡고 있다.
스포츠 중계뿐 아니라, 게임 방송과 같이 여러 명이 참여하는 프로그램을 방송할 때 시청자들은 종종 자신이 원하는 플레이어를 집중적으로 보기 원하지만, 기존의 텔레비전 방송 서비스는 방송사가 선택한 편집화면을 하나의 채널을 통해 제공한다.
이 같은 점을 개선하기 위해 최근에는 다수의 카메라를 실시간 이벤트(예: 스포츠 경기, 공연장)에 배치하고, 서로 다른 각도의 카메라로 촬영된 영상물을 상이한 채널을 통해 전송하는 멀티앵글 방송 서비스가 시행되고 있다. 사용자는 채널 변경을통해 자신이 원하는 각도에서 촬영된 영상을 시청할 수 있다.
그러나 기존의 멀티 앵글 서비스는 방송국에서 TV 화면에 맞게 편집하여 제공한 영상에 대해서만 시청이 가능하기 때문에 TV 화면 밖의 영상을 시청하기 어렵다. 또한, 여러 사람이 함께 TV를 시청하고 있는 경우에는 서로보고 싶은 앵글이 다르기 때문에 한 시청자가 특정 카메라 앵글을 선택하면 타인의 TV 시청을 방해하는 문제점이 있게 된다.
나아가, TV가 아닌 다른 단말기를 이용해서 멀티 앵글 서비스를 이용하는 경우에도, TV와 다른 단말기로 제공되는 영상이 각각 독립적으로 전송되기 때문에 IPTV 서비스 시스템 및 네트워크 상태에 따라 두 영상 간에 지연이발생할 수 있으므로 사용자가 같은 장소에서 시청할 경우 동기가 맞지 않는 문제가 발생할 수 있다.
특히, 모바일 카메라가 내장된 여러 대의 단말기(예: 모바일폰, 모바일 방송장비 등)로 멀티앵글 방송 시 촬영단말기의 성능 및 영상물의 업로드 통신 속도의 차이로 인해 동일한 시점의 이벤트 영상물이 동일한 시점에 시청하는 것은 매우 어렵다. 이를 위해 인위적이든 기계적이든 멀티앵글촬영장치에 대한 동기화가 필요하다.
본 발명은 복수개의 단말기에서 동일한 이벤트를 각기 촬영하여 방송하는 경우, 각각의 영상들에 대한 동기화가 원활하게 이루어질 수 있도록 함으로써, 사용자에게 최적의 시청환경을 제공하는 것을 그 목적으로 한다.
본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧은, 적어도 하나의 카메라장착부를 포함하는 헬멧부, 상기 카메라 장착부에 장착되어 외부 영상을 촬영하는 카메라부, 상기 카메라부에서 촬영된 영상을 인코딩하는 인코딩부, 상기 헬멧의 장치정보를 서버로 전송하고, 상기 서버에서 상기 헬멧이 기 설정된 촬영그룹에 포함된 헬멧으로 판단되는 경우에 전송되는 동기화 정보 및 제어신호를 수신하는 통신부, 상기 수신된 동기화 정보에 기초하여 일정주기에 따른 마킹(Marking)을 수행하여 마킹정보를 생성하는 동기화부 및 상기 인코딩된 영상 및 마킹정보를 상기 통신부를 통하여 상기 서버로 전송하도록 제어하는 전송부를 포함한다.
또한, 본 발명의 다른 실시 예에 따른 멀티앵글영상촬영헬멧의 멀티앵글영상 촬영방법은, 각각 서로 다른 위치에서 각각 서로 다른 앵글의 영상을 촬영하는 복수개의 멀티앵글영상촬영헬멧들이 각각의 장치정보를 서버로 전송하는 단계, 상기 서버가, 상기 전송 받은 장치정보들에 기초하여, 상기 복수개의 헬멧들이 기 설정된 촬영그룹에 포함된 헬멧 인지 여부를 판단하는 단계, 상기 서버에서, 상기 촬영그룹에 포함되는 것으로 판단된 헬멧들로 동기화 정보 및 제어신호를 전송하는 단계, 상기 헬멧에서 외부 영상을 촬영하는 단계, 상기 헬멧이 상기 촬영된 영상을 디지털 영상으로 인코딩하는 단계, 상기 헬멧이 상기 촬영된 영상에, 상기 수신된 동기화 정보에 기초한 일정주기에 따른 마킹(Marking)을 수행하여 마킹정보를 생성하는 단계 및 상기 헬멧이 상기 인코딩된 영상 및 마킹정보를 상기 서버로 전송하는 단계를 포함한다.
본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧 및 촬영방법을 통하여, 사용자가 멀티앵글영상을 시청하는 경우에도, 각각의 멀티앵글화면이 동기화 되어 동일한 시간의 화면을 사용자에게 제공할 수 있게 된다.
따라서, 사용자에게 멀티앵글화면을 안정적으로 제공할 수 있으며, 이에 따라, 사용자의 흥미성 및 편의성을 향상시킬 수 있고, 멀티앵글서비스의 이용을 촉진할 수 있다.
도 1은 본 발명의 실시 예에 따른 멀티앵글영상서비스 제공시스템을 도시한 도면이다.
도 2는 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧을 도시한 도면이다.
도 3은 본 발명의 실시 예에 따른 멀티앵글영상 촬영방법의 단계들을 도시한 순서도이다.
도 4는 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧의 내부 구성을 도시한 블럭도이다.
도 5는 본 발명의 실시 예에 따른 멀티앵글영상서비스 제공 시스템에서 멀티앵글영상서비스를 제공하는 단계를 도시한 순서도이다.
도 6은 본 발명의 실시 예에 따른 서버의 구성을 도시한 도면이다.
도 7은 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧과 서버의 통신과정을 도시한 도면이다.
도 8은 본 발명의 다른 실시 예에 따른 멀티앵글영상촬영헬멧과 서버의 통신과정을 도시한 도면이다.
도 9는 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧의 선택화면을 도시한 도면이다.
이하에서는 첨부된 도면을 참조하여 본 발명의 여러 가지 실시 예들을 보다 상세히 설명하도록 하겠다. 나아가, 이하의 설명에서 사용되는 구성요소에 대한 접미사 "부", 및 "장치"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "부", 및 "장치"는 서로 혼용되어 사용될 수 있으며, 하드웨어 또는 소프트웨어로 설계 가능하다.
나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시 예를 상세하게 설명하지만, 본 발명이 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
도 1은 본 발명의 실시 예에 따른 멀티앵글영상서비스 제공 시스템을 도시한 도면이다.
실시 예에 따라, 복수개의 멀티앵글영상촬영헬멧(100)들이 서버(200)에 연결되어 멀티앵글화면 제공을 위한 동작을 수행할 수 있다. 즉, 복수개의 멀티앵글영상촬영헬멧들이 각기 다른 위치에서 동일한 이벤트의 영상을 촬영하고, 그 촬영된 영상들을 서버 전송하면, 서버에서 그 복수개의 영상들을 포함하여 제공하는 멀티앵글화면을 가입자의 사용자 단말기(300)로 전송함으로써, 멀티앵글화면 제공 서비스가 수행될 수 있다. 한편, 본 도면 및 이하 도면들에서 설명되는 서버(200)는, 동기화(sync)서버로써, 방송송출을 위한 스트리밍(streaming) 서버와 구분될 수 있다.
즉, 예를 들어, 풋볼경기를 멀티앵글영상서비스를 통하여 제공하는 경우에, 복수개의 멀티앵글영상촬영헬멧(100)들이 풋볼선수들에 의하여 착용되고, 상기 부착된 복수개의 멀티앵글영상촬영헬멧(100)들로부터 각각의 영상을 서버(200)가 수신하여 멀티앵글화면을 생성하고, 생성된 영상이 사용자 단말기(300)를 통하여 디스플레이됨으로써, 사용자는 선수 각각의 시점에서 경기를 감상할 수 있게 된다.
또한, 실시 예에 따라, 멀티앵글영상촬영헬멧(100)들은, 액션캠(Action Cam), 카메라가 장착된 스마트폰(SmartPhone), 디지털 카메라(Digital Camera)등, 이동하면서 영상을 촬영할 수 있는 다양한 디바이스가 될 수 있다. 즉, 본 출원 발명은 멀티앵글영상촬영헬멧을 실시 예로써 기재하고 있다. 다만, 다른 실시 예에 따라, 본 발명의 범위가 미치는 한에서 다른 디바이스가 본 발명의 멀티앵글영상촬영헬멧의 역할을 수행하는 경우까지 본 출원발명의 권리범위가 미친다.
또한, 실시 예에 따라, 사용자 단말기(300)들은, 스마트폰, 태블릿PC, 랩탑PC 등, 화면의 디스플레이가 가능하고, 데이터 송수신이 가능한 다양한 디바이스가 될 수 있다.
본 도면에 도시된 멀티앵글영상촬영헬멧(100), 서버(200), 및 사용자 단말기의 구성, 그리고 이들을 포함하는 멀티앵글영상서비스 제공 시스템을 이용한 멀티앵글영상서비스 제공방법에 관해서는, 이하에서 상세히 설명한다.
도 2는 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧을 도시한 도면이다.
실시 예에 따라, 멀티앵글영상촬영헬멧은, 본 도면에 도시된 바와 같은 외부 구성을 가질 수 있다. 즉, 적어도 하나의 카메라장착부를 포함하는 헬멧부가 외부 형태로서 구성될 수 있다.
즉, 실시 예에 따라, 헬멧부는, 제1 카메라 장착부 내지 제4 카메라 장착부(112~115)를 포함할 수 있고, 각각의 카메라 장착부에는, 상기 헬멧부의 전면에 장착되는 제1 카메라, 상기 헬멧부의 우측면에 장착되는 제2 카메라, 상기 헬멧부의 좌측면에 장착되는 제3 카메라, 및 상기 헬멧부의 후면에 장착되는 제4 카메라가 장착될 수 있다. 따라서, 멀티앵글영상촬영헬멧은, 하나의 카메라만을 장착하여 영상을 촬영할 수도 있으나, 복수개의 카메라를 포함함으로써, 전, 후, 좌, 우의 영상을 모두 촬영할 수 있다.
또한, 다른 실시 예에 따라, 제1 카메라 장착부 내지 제4 카메라 장착부(112~115) 중, 적어도 하나에는, 촬영된 영상이 3D로 디스플레이될 수 있도록 하기 위한 3D촬영 카메라가 장착될 수 있다. 즉, 더욱 현실감있는 화면을 제공하기 위하여 3D영상촬영 카메라가 장착될 수 있다.
또한, 다른 실시 예에 따라, 상기 각각의 카메라 장착부(112~115)에는 영상을 촬영하기 위한 카메라부(도4의 110)만이 장착되고, 다른 구성들은 헬멧부의 다른 위치에 통합적으로 구성될 수 있다. 즉, 복수개의 카메라가 장착되는 경우에도, 복수개의 영상촬영에 필요한 카메라부만이 복수개가 장착되고, 다른 필요한 구성인 인코딩부, 저장부, 동기화부, 전송부, 통신부 및 배터리부 등은 각각 하나씩 구성되어 헬멧의 임의 위치중 충격을 가장 적게 받는 곳에 위치되고, 상기 복수개의 카메라부가 함께 공유하여 이용가능하도록 구성될 수 있다.
도 3은 본 발명의 실시 예에 따른 멀티앵글영상 촬영방법의 단계들을 도시한 순서도이다 .
실시 예에 따라, 본 도면에 도시된 바와 같은 단계들을 통하여 멀티앵글영상이 제공될 수 있다. 또한, 이러한 단계들은, 이하 도 4에 도시된 바와 같은 멀티앵글영상촬영헬멧을 이용하여 수행될 수 있다.
먼저, 각각 서로 다른 앵글의 영상을 촬영하는 복수개의 멀티앵글영상촬영헬멧들이 각각의 장치정보를 서버로 전송한다(S101).
실시 예에 따라, 각각 서로 다른 앵글의 촬영화면을 획득하기 위하여, 복수개의 촬영용 멀티앵글영상촬영헬멧들이 이용될 수 있고, 그 복수개의 촬영용 멀티앵글영상촬영헬멧를 통한 멀티앵글화면을 생성하기 위하여, 상기 복수개의 촬영용 멀티앵글영상촬영헬멧들의 정보가 서버로 전송될 수 있다.
또한, 실시 예에 따라, 상기 전송수단으로 모바일 통신망이 이용될 수 있다. 즉, 3G통신망 또는 LTE통신망이 이용될 수 있으며, 이를 위하여 멀티앵글영상촬영헬멧이 모바일통신망에 가입되어 있어야 한다. 또한, 다른 실시 예에 따라, 와이파이통신(Wifi)이 가능한 지역인 경우에는 와이파이통신을 통하여 상기 정보들을 서버로 전송할 수 있다. 즉, 통신수단에 제한되지 않고, 서버와 멀티앵글영상촬영헬멧 사이에 데이터를 송수신할 수 있는 다양한 방식의 통신포맷이 이용될 수 있다.
다음으로, 상기 서버가, 상기 전송 받은 장치정보들에 기초하여, 상기 복수개의 멀티앵글영상촬영헬멧들이 기 설정된 촬영그룹에 포함된 멀티앵글영상촬영헬멧 인지 여부를 판단한다(S102).
실시 예에 따라, 서버에서는 장치정보들을 수신하면, 어떠한 멀티앵글영상촬영헬멧이 기 설정된 촬영그룹에 포함된 멀티앵글영상촬영헬멧 인지 여부를 판단할 수 있다. 상기 촬영그룹은, 예를 들어, 'A팀'그룹일 수 있으며, 이러한 경우, A팀의 선수들 헬멧에 부착된 모든 촬영용멀티앵글영상촬영헬멧이 상기 촬영그룹에 포함될 수 있다.
실시 예에 따라, 상기 복수개의 멀티앵글영상촬영헬멧들이 기 설정된 촬영그룹에 포함된 멀티앵글영상촬영헬멧 인지 여부를 판단하는 단계, 멀티앵글영상촬영헬멧에 대한 정보가 상기 서버에 동일한 그룹명(예: A그룹)으로 기 등록되어 있는 경우, 상기 멀티앵글영상촬영헬멧을 기 설정된 촬영그룹에 포함된 멀티앵글영상촬영헬멧으로 판단할 수 있다. 즉, 예를 들어, 서버는 그룹정보 테이블(table)을 저장할 수 있고, 상기 테이블에는, 포함대상 멀티앵글영상촬영헬멧들의 정보항목이 포함되어 저장될 수 있다.
또한, 서버는, 수신된 멀티앵글영상촬영헬멧의 장치정보와 상기 서버에 기 저장된 멀티앵글영상촬영헬멧의 장치정보에 차이가 있는 경우, 상기 기 저장된 멀티앵글영상촬영헬멧 정보를 업데이트(update)할 수 있다. 즉, 서버는 멀티앵글영상촬영헬멧의 장치 정보를 항상 최신의 상태로 유지할 수 있다.
또한, 반면에, 실시 예에 따라, 멀티앵글영상촬영헬멧에 대한 정보가 상기 서버에 동일한 그룹명으로 기 등록되어 있지 않은 경우, 상기 멀티앵글영상촬영헬멧을 기 설정된 촬영그룹에 포함되지 않은 멀티앵글영상촬영헬멧으로 판단할 수 있다. 이러한 경우, 상기 촬영그룹에 포함되지 않는 것으로 판단된 멀티앵글영상촬영헬멧에 대하여, 그 멀티앵글영상촬영헬멧의 장치정보에 기초하여, 새로운 신규그룹을 생성하고, 상기 멀티앵글영상촬영헬멧을 마스터(Master) 촬영장비로 설정할 수 있다. 즉, 촬영그룹에 포함되지 않은 멀티앵글영상촬영헬멧을 중심으로 새로운 촬영그룹을 구성할 수 있다. 또한, 서버는, 상기 생성된 그룹에 대한 그룹테이블을 생성할 수 있고, 상기 마스터 촬영장비에 대한 정보 중, 동기화 주기에 관한 정보를 상기 그룹테이블에 저장할 수 있다. 따라서, 새로운 그룹이 생성되고, 새로운 그룹에 대한 정보들이 서버에 저장되어 활용될 수 있다.
또한, 실시 예에 따라, 촬영그룹에 포함되지 않은 또 다른 멀티앵글영상촬영헬멧으로부터 서버로 그룹정보 요청신호가 전송되면, 상기 서버는 상기 요청신호를 전송한 멀티앵글영상촬영헬멧으로 기 생성된 그룹에 대한 정보를 전송할 수 있다. 즉, 기 설정된 촬영그룹이 없는 멀티앵글영상촬영헬멧은, 서버로 전체 그룹정보 혹은 관심 분야(기정의된 분류)내 기 생성된 그룹정보를요청하고, 이를 참조하여, 서버로 가입 요청신호를 전송할 수 있다. 또한, 상기 가입요청신호가 수신되면, 마스터 촬영장비로 상기 또 다른 멀티앵글영상촬영헬멧의 촬영그룹 가입여부허용신호를 전송한다. 이에 대응하여, 마스터 촬영장비는 기 설정된 기준에 기초하여 가입여부를 판단 후, 서버로 가입허용신호 또는 가입불허신호를 전송할 수 있다.
실시 예에 따라, 상기 마스터 촬영장비는, 상기 가입요청신호가 전송되면, 관련 메뉴를 디스플레이부에 디스플레이하고, 사용자로부터 가입허용여부에 대한 신호를 사용자 인터페이스부를 통하여 수신함으로써 가입허용신호 또는 가입불허신호를 생성 및 전송할 수 있다.
또한, 다른 실시 예에 따라, 복수개의 멀티앵글영상촬영헬멧 중, 어느 하나의 멀티앵글영상촬영헬멧이 마스터모드(Master Mode)가 온(On)으로 되어 있고, 다른 멀티앵글영상촬영헬멧들은 마스터모드(Master Mode)가 오프(Off)로 되어 있는 경우, 상기 가입요청신호가 전송되면, 자동적으로 가입허용신호를 생성 및 전송하도록 한다.
또한, 상기 서버는, 상기 마스터 촬영장비로부터 상기 멀티앵글영상촬영헬멧의 가입허용신호가 수신되면, 상기 생성된 그룹에 상기 가입요청신호를 전송한 멀티앵글영상촬영헬멧을 슬레이브(Slave) 촬영장비로 포함하여 촬영 그룹을 구성하고, 운영할 수 있다. 따라서, 상기 마스터 촬영장비와 상기 슬레이브 촬영장비에서 촬영되는 디지털 영상은, 상기 마스터 촬영장비와 상기 슬레이브 촬영장비에서, 상기 생성된 그룹의 마킹주기기준에 따라, 마킹될 수 있다. 따라서, 이러한 마킹정보에 기초하여 동기화가 수행될 수 있다.
또한, 실시 예에 따라, 상기 마스터 촬영장비로부터 서버로 동기화종료신호가 수신되면, 상기 서버는 상기 동기화 종료신호를 각각의 슬레이브 촬영장비로 전송하여 동기화동작을 그만 수행하도록 제어할 수 있다.
다음으로, 상기 서버에서, 상기 촬영그룹에 포함되는 것으로 판단되는 경우, 상기 포함되는 것으로 판단된 멀티앵글영상촬영헬멧들로 동기화 정보 및 제어신호를 전송한다(S103).
실시 예에 따라, 동기화 정보 및 제어신호를 전송함에 있어서, 상기 서버에서 상기 촬영그룹에 포함되는 것으로 판단된 멀티앵글영상촬영헬멧들로, 동기화 주기 정보(예: 5초마다 마킹) 및 마킹유무결정정보 중 적어도 하나를 포함하는 동기화 정보 및 촬영지시정보(예: 촬영시작/정지/종료신호) 및 촬영 정보(초당 프레임수, 색상, 사이즈 정보) 중 적어도 하나를 포함하는 제어신호를 전송할 수 있다. 실시 예에 따라, 상기 마킹유무결정정보는, 멀티앵글영상촬영헬멧에서 촬영된 영상에 직접 마킹을 할 것인지 아니면, 별도의 마킹정보로 저장할 것인지 여부에 대한 정보를 포함할 수 있다.
또한, 실시 예에 따라, 동기화 정보 및 제어신호를 전송하는 단계가 서버에서 수행되는 과정은, 상기 촬영그룹에 포함되는 것으로 판단된 멀티앵글영상촬영헬멧들로 동기화 주기 정보를 전송하고, 상기 동기화 주기정보를 전송한 멀티앵글영상촬영헬멧들의 촬영준비가 완료되었는지 판단하고, 상기 촬영준비가 완료된 경우, 촬영시작신호를 상기 멀티앵글영상촬영헬멧들로 전송하고, 상기 촬영시작신호를 전송한 멀티앵글영상촬영헬멧으로부터 응답(ACK)신호를 수신할 수 있다. 즉, 서버에서 촬영의 시작을 제어할 수 있다.
다음으로, 상기 멀티앵글영상촬영헬멧을 통하여 외부 영상을 촬영한다(S104). 또한, 상기 멀티앵글영상촬영헬멧이 상기 촬영된 영상을 디지털 영상으로 인코딩하고, 상기 촬영된 영상에 대하여 상기 수신된 동기화 정보에 기초한 마킹(Marking)을 수행하여 마킹정보를 생성한다(S105), 또한, 상기 멀티앵글영상촬영헬멧이 상기 인코딩된 영상 및 마킹정보를 상기 서버로 전송한다(S106).
실시 예에 따라, 인코딩된 영상에 마킹이 수행될 수 있고, 마킹이 수행된 이후에 인코딩될 수 있다. 다만, 이러한 순서에 대한 정보들이 영상에 함께 포함되어 사용자 단말기의 디코더(decoder)에서 파악될 수 있도록 한다.
또한, 실시 예에 따라, 상기 마킹을 수행함에 있어서, 상기 멀티앵글영상촬영헬멧이 상기 서버로부터 수신된 동기화 정보에 기초하여 기 설정된 주기에 따라 상기 촬영된 영상에 마킹을 수행한다. 또한, 실시 예에 따라, 상기 서버로부터 수신된 정보에 기초하여, 기 설정된 주기에 따라 상기 멀티앵글영상촬영헬멧은, 상기 마크 정보를 상기 서버로 전송할 수 있다.
실시 예에 따라, 마킹을 수행함에 있어서, 멀티앵글영상촬영헬멧은 마킹정보를 더미데이터(Dummy Data) 즉, 예를 들어 몇 번째 동기화인지에 대한 정보, 시간에 대한 정보, 영상이미지 자체에 대한 정보의 형태로　상기 영상물에 삽입하여 멀티앵글영상촬영헬멧 내부에 저장될 수 있고, 서버로 전송될 수 있다.
또한, 다른 실시 예에 따라, 상기 마킹을 수행함에 있어서, 상기 멀티앵글영상촬영헬멧이, 상기 서버로부터 수신된 정보에 기초하여, 기 설정된 주기에 따라 마크 정보를 상기 멀티앵글영상촬영헬멧의 저장부에 저장할 수 있고, 상기 멀티앵글영상촬영헬멧에서 인코딩이 완료되면, 완료된 인코딩 영상과, 상기 완료시점까지 저장된 마크 정보를 상기 서버로 전송할 수 있다.
즉, 실시 예에 따라, 마킹이 되면 바로 마킹정보를 서버로 전송할 수 있고, 다른 실시 예에 따라, 어느 정도 마킹정보가 축적된 이후에, 축적된 마킹정보를 서버로 전송할 수 있다.
상기와 같은 단계들을 통하여, 서버는 각각의 멀티앵글영상촬영헬멧들로부터 인코딩된 영상 및 마킹정보들을 수신할 수 있고, 수신된 정보들을 사용자에게 제공함으로써 멀티앵글화면 서비스를 제공할 수 있다. 즉, 인코딩된 영상과 마킹정보를 이용하여 촬영된 영상들의 재생시점을 동기화 할 수 있으므로, 스트리밍 서버 혹은 사용자 단말기내 영상플레이어를 통해 사용자는 멀티앵글화면을 원활하게 제공받을 수 있다.
도 4는 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧의 구성을 도시한 블록도이다.
실시 예에 따라, 멀티앵글영상촬영헬멧(100)은, 상기 도 2에 도시된 바와 같이 적어도 하나의 카메라장착부를 포함하는 헬멧부(미도시)가 외부에 구성될 수 있고, 내부 구성요소로서, 카메라부(110), 동기화부(120), 통신부(130), 인코딩부(140), 전송부(150), 및 저장부(160)를 포함할 수 있다. 또한, 상기 각 모듈에 전원을 공급하기 위한 배터리부(미도시)가 구성될 수 있다. 상기 구성들은 하드웨어적으로 각각의 모듈/부로써 구성될 수 있다. 다만, 하나의 모듈/부가 다른 모듈/부의 기능을 수행할 수 있도록 구성될 수 있다. 즉, 필요 또는 목적에 따라, 통합적 또는 세부적으로 구성될 수 있다.
또한, 본 도면에는 상기 카메라부(110), 동기화부(120), 통신부(130), 인코딩부(140), 전송부(150), 및 저장부(160)들이 하나의 블록안에 구성된 것으로 도시되었으나, 이는 본 구성요소들의 설명을 용이하게 하기 위한 것이며, 카메라부(110)만이 영상을 촬영하기 위하여 헬멧부의 외부에 노출되어 장착되고, 나머지 동기화부(120), 통신부(130), 인코딩부(140), 전송부(150), 저장부(160), 및 배터리부(미도시)는, 헬멧 내부의 충격을 적게 받을 수 있는 임의의 위치에 장착될 수 있다.
다시 말해, 카메라부(110)는 통상의 액션 카메라와 같이 카메라부(110)와 회로부(120, 130, 140, 150, 160) 및 배터리까지 모두 일체형으로 구성되어 헬맷에 장착되거나 내장되는 형태로 구현될 수 있으나, 바람직하게는 카메라부(110)의 카메라 렌즈만이 외부로 노출 내지 돌출형성되고 카메라부(110)의 나머지 부분과 회로부(120, 130, 140, 150, 160)의 일부 내지 전부가 헬맷에 매립 내지 내장된 형태로 구성된다.
카메라부(110)는, 외부영상을 촬영할 수 있다. 실시 예에 따라, 외부의 밝기 또는 오브젝트(object)의 동작 속도에 따라 조리개 속도 등이 자동 조절될 수 있다.
동기화부(120)는, 서버로부터 수신된 동기화 정보에 기초한 마킹(Marking)을 수행하여 마킹정보를 생성할 수 있다. 마킹과 관련한 실시 예들에 관하여는 상기 도 2에서 상세히 설명한 바와 같다.
상기 동기화 정보는, 각각 서로 다른 위치에서 각각 서로 다른 앵글의 영상을 촬영하는 다른 멀티앵글영상촬영헬멧들과 일정주기에 따른 마킹(Marking)을 통하여 동기화를 수행할 수 있도록 하는 정보에 해당한다.
즉, 실시 예에 따라, 동기화부(120)는, 상기 멀티앵글영상촬영헬멧이 상기 서버로부터 수신한 동기화 정보에 기초하여 기 설정된 주기에 따라 상기 촬영된 영상에 마킹을 수행할 수 있다.
또한, 실시 예에 따라, 상기 동기화 정보에 따라 스트리밍 서버는 여러개의 방송 영상물에 대해 동기화 시점에 도달할때 까지 기다리고 마킹정보를 제거한후 동기화된 영상을 사용자 단말기에 전송(기능 A)할 수 있다. 상기 기능 A는 네트워크 상황이 열악한 경우, 사용자 단말기내 동영상 플레이어에서 본 기능을 수행되도록 될수 있다. 이때 동기화를 위하여 소요되는 시간 동안 영상물이 정지화면으로 일정 시간 이상 있을 수 있으므로, 그러한 대기시간 동안은 특정 이미지(예: 광고 이미지)가 사용자 단말기에 디스플레이될 수 있다.
통신부(130)는, 상기 멀티앵글영상촬영헬멧의 장치정보를 서버로 전송하고, 상기 서버에서 상기 멀티앵글영상촬영헬멧이 기 설정된 촬영그룹에 포함된 멀티앵글영상촬영헬멧으로 판단되는 경우 전송되는 동기화 정보 및 제어신호를 수신할 수 있다. 실시 예에 따라, 통신부를 이용한 전송수단으로 모바일 통신망이 이용될 수 있다. 즉, 3G통신망 또는 LTE통신망이 이용될 수 있으며, 이를 위하여 멀티앵글영상촬영헬멧이 모바일통신망에 가입되어 있어야 한다. 또한, 다른 실시 예에 따라, 와이파이통신(Wifi)이 가능한 지역인 경우에는 와이파이통신을 통하여 상기 정보들을 서버로 전송할 수 있다. 즉, 통신수단에 제한되지 않고, 서버와 멀티앵글영상촬영헬멧 사이에 데이터를 송수신할 수 있는 다양한 방식의 통신포맷이 이용될 수 있다.
또한, 상기 동기화 정보는, 동기화 주기 정보 및 마킹유무결정정보 중 적어도 하나를 포함할 수 있고, 상기 제어신호는, 촬영지시정보 및 촬영 정보 중 적어도 하나를 포함할 수 있다.
인코딩부(140)는, 상기 카메라부에서 촬영된 영상을 인코딩할 수 있다. MPEG 규격에 따른 다양한 인코딩 포맷이 사용될 수 있고, MPEG규격 이외의 영상 포맷들도 멀티앵글영상촬영헬멧의 장치설정에 따라 이용될 수 있다. 또한, 사용자로부터 특정 인코딩 포맷을 선택 받아 인코딩을 수행할 수 있다.
전송부(150)는, 멀티앵글영상촬영헬멧에서 인코딩된 영상 및 생성된 마킹정보를 상기 통신부를 통하여 상기 서버로 전송하도록 제어할 수 있다.
저장부(160)는, 상기 인코딩된 영상 및 마킹정보를 저장할 수 있고, 실시 예에 따라, 상기 통신부(130)는, 상기 저장부에 저장된 인코딩된 영상 및 마킹정보를 상기 서버로 전송할 수 있다. 상기 저장부는, RAM, SSD, HDD 등의 다양한 저장수단으로 구성될 수 있다.
도 5는 본 발명의 실시 예에 따른 멀티앵글 영상서비스 제공 시스템 에서 멀티앵글영상서비스 를 제공하는 단계를 도시한 순서도이다 .
실시 예에 따라, 멀티앵글영상서비스 제공 시스템을 이용한 멀티앵글영상서비스 제공 방법은, 본 도면에 도시된 바와 같은 단계들을 통하여 수행될 수 있다.
먼저, 각각 서로 다른 위치에서 각각 서로 다른 앵글의 영상을 촬영하는 복수개의 멀티앵글영상촬영헬멧들, 즉, 복수개의 촬영장비들에서 각각 영상을 촬영한다(S101).
실시 예에 따라, 상기 복수개의 촬영장비들은 각각 촬영되는 영상에 상기 복수개의 촬영장비들의 위치 정보를 포함하는 촬영되는 영상의 앵글을 판별할 수 있는 정보를 포함하여 상기 영상을 촬영할 수 있다.
다음으로, 상기 복수개의 촬영장비들이 촬영된 영상들을 서버로 전송한다(S102).
실시 예에 따라, 상기 전송수단으로 모바일 통신망이 이용될 수 있다. 즉, 3G통신망 또는 LTE통신망이 이용될 수 있으며, 이를 위하여 촬영장비들이 모바일통신망에 가입되어 있을 수 있다. 또한, 다른 실시 예에 따라, 와이파이통신(Wifi)이 가능한 지역인 경우에는 와이파이통신을 통하여 상기 촬영된 영상들이 서버로 전송될 수 있다. 즉, 통신수단에 제한되지 않고, 서버와 촬영장비 사이에 데이터를 송수신할 수 있는 다양한 방식의 통신포맷이 이용될 수 있다. 이러한 통신포맷 이용의 다양성은 서버(200)와 사용자 단말기(300)의 통신의 경우에도 마찬가지이다.
다음으로, 상기 서버에서 상기 촬영된 영상들을 수신하고(S103), 상기 서버가 상기 수신된 영상들에 기초하여 멀티앵글영상을 생성한다(S104).
실시 예에 따라, 상기 멀티앵글영상의 생성에 있어서, AVI, MKV, MOV등 다양한 영상포맷이 이용될 수 있다. 또한, 가입자 이외의 디바이스에서 데이터를 가져가지 못하도록 암호화되어 멀티앵글영상이 생성될 수 있다.
다음으로, 상기 서버가 상기 생성된 멀티앵글영상을 사용자 단말기로 전송한다(S105). 실시 예에 따라, 서버에는 멀티앵글영상서비스의 가입자 정보가 저장되어 있을 수 있고, 상기 저장된 가입정보에 기초하여 하나 이상의 사용자 단말기(300)로 멀티앵글영상을 전송할 수 있다.
다음으로, 상기 사용자 단말기에서 상기 멀티앵글영상을 수신하고(S106), 상기 수신된 멀티앵글영상을 재생하기 위한 프로세스를 실행한다(S107). 실시 예에 따라, 상기 프로세스가 미리 설치되어 있지 않은 경우에는, 설치화면을 디스플레이하여 사용자가 상기 프로세스를 사용자 단말기에 설치할 수 있도록 한다.
다음으로, 상기 실행된 프로세스를 통하여 상기 수신된 멀티앵글영상을 디스플레이한다(S108).
즉, 상기와 같은 단계들을 통하여 멀티앵글영상서비스가 사용자에게 제공될 수 있다.
도 6은 본 발명의 실시 예에 따른 서버의 구성을 도시한 도면이다.
실시 예에 따라, 서버(200)는, 제어부(201), 네트워크 인터페이스부(202), 저장부(203), 멀티앵글영상 생성부(204), 및 가입자 관리부(205)를 포함할 수 있다.
제어부(201)는, 서버의 각 모듈의 동작을 제어한다.
네트워크 인터페이스부(202)는, 멀티앵글영상촬영헬멧(100) 및, 사용자 단말기(300)와 데이터를 송수신할 수 있다.
실시 예에 따라, 상기 송수신수단으로 모바일 통신망이 이용될 수 있다. 즉, 3G통신망 또는 LTE통신망이 이용될 수 있으며, 이를 위하여 멀티앵글영상촬영헬멧들이 모바일통신망에 가입되어 있을 수 있다. 또한, 다른 실시 예에 따라, 와이파이통신(Wifi)이 가능한 지역인 경우에는 와이파이통신을 통하여 상기 촬영된 영상들이 서버로 전송될 수 있다. 즉, 통신수단에 제한되지 않고, 서버와 멀티앵글영상촬영헬멧 또는 사용자 단말기 사이에 데이터를 송수신할 수 있는 다양한 방식의 통신포맷이 이용될 수 있다.
저장부(203)는, 멀티앵글영상촬영헬멧(100)으로부터 수신된 영상들을 저장하거나, 사용자 단말기(300)로 전송할 멀티앵글영상들을 저장할 수 있다.
멀티앵글영상 생성부(204)는, 저장부(203)에 저장된 영상들에 기초하여 멀티앵글영상을 생성하여 재인코딩할 수 있다. 실시 예에 따라, MPEG 규격에 따른 다양한 인코딩 포맷이 사용될 수 있고, MPEG규격 이외의 영상 포맷들도 촬영장비 설정에 따라 이용될 수 있다. 또한, 사용자로부터 특정 인코딩 포맷을 선택 받아 인코딩을 수행할 수 있다.
가입자 관리부(205)는, 멀티앵글영상촬영헬멧(100)들의 촬영그룹에 대한 관리를 할 수 있고, 사용자 단말기(300)에 대한 데이터 송수신 관리를 할 수 있다. 즉, 가입자가 아닌 경우에 멀티앵글영상서비스를 제공하지 않을 수 있고, 가입자가 맞더라도, 가입 기간이 도과된 경우에는, 멀티앵글영상서비스를 제공하지 않을 수 있다.
즉, 이와 같은 구성을 통하여, 서버(200)는, 상기 촬영된 영상들을 수신하고, 상기 수신된 영상들에 기초하여 멀티앵글영상을 생성하고, 상기 생성된 멀티앵글영상을 사용자 단말기로 전송할 수 있다.
도 7은 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧과 서버의 통신과정을 도시한 도면이다.
실시 예에 따라, 서버에서 촬영장비를 판단 결과, 멀티앵글영상촬영헬멧에 대한 장치정보가 상기 서버에 동일한 그룹명으로 기 등록되어 있는 경우, 본 도면에 도시된 바와 같은 상호통신이 수행될 수 있다.
먼저, 멀티앵글영상촬영헬멧(100)이 서버(200)로, 촬영그룹에 포함되기 위한 포함요청 명령어와 그룹명 정보를 전송한다 (JOIN Group_Name 및 Member_Num).
다음으로, 서버(200)는, 기 등록된 촬영그룹에 포함된 상기 멀티앵글영상촬영헬멧(100)의 장치정보를 검토하여, 차이점이 있는 경우에는, 상기 서버에 저장된 멀티앵글영상촬영헬멧의 정보를 업데이트(update)하여 저장한 후, 동기화 주기(Sync_Period) 정보를 촬영장비 (100)로 전송한다.
다음으로, 서버(200)는, 멀티앵글영상촬영헬멧들 각각이 촬영 준비가 완료되었다고 판단되면, (인위적 판단 혹은 멤버들 구성 완료가 감지됨)되면 촬영시작(Sync_Start)명령을 멀티앵글영상촬영헬멧들로 전송한다. 그리고, 촬영장비로부터 상기 촬영시작 신호에 대한 응답(Ack) 명령어를 수신한다.
따라서, 멀티앵글영상촬영헬멧은 촬영을 착수할 수 있고, 상기 동기화 주기 정보에 기초한 주기에 따라(예: 5초)로 마킹(Marking)을 수행한다. 이때 동기화 주기의 값이 '0'이라면 마킹정보 없이 동시에 촬영을 시작하거나 혹은 촬영 시작 시점에 한번만 마킹 정보를 생성한다.
다음으로, 서버(200)가 인위적 혹은 시스템적 판단으로 촬영 동기화를 종료해야 할 시점이라고 판단하면, 촬영종료(Sync_END) 명령어를 멀티앵글영상촬영헬멧(100)으로 전송하여, 멀티앵글영상촬영헬멧(100)의 촬영종료 및 마킹 종료를 지시한다.
또한, 실시 예에 따라, 촬영 중간에도, 새로운 촬영장비의 포함요청명령어가 수신되면, 위 와 같은 단계들을 거쳐 동기화를 수행한다.
도 8은 본 발명의 다른 실시 예에 따른 멀티앵글영상촬영헬멧과 서버의 통신과정을 도시한 도면이다.
실시 예에 따라, 서버에서 멀티앵글영상촬영헬멧을 장치정보를 판단한 결과, 멀티앵글영상촬영헬멧에 대한 정보가 상기 서버에 동일한 그룹명으로 기 등록되어 있지 않은 경우, 본 도면에 도시된 바와 같은 상호통신이 수행될 수 있다.
먼저, 멀티앵글영상촬영헬멧(100)이 서버(200)로, 상기 멀티앵글영상촬영헬멧을 마스터(Master)촬영장비로 하는 촬영그룹을 생성하기 위해 서버(200)에 명령어(Master Group_Name 및 Sync_Info)를 전송할 수 있다, 상기 명령어에는, 마스터 촬영장비에 대한 정보, 동기화 주기정보를 포함하는 동기화 정보가 포함될 수 있다.
다음으로, 서버(200)는, 상기 명령어를 수신하면, 촬영그룹을 새로이 생성할 수 있다.
또한, 다른 멀티앵글영상촬영헬멧(101)으로부터, 서버(200)로, 촬영 동기화를 위한 그룹을 선택하기 위한 그룹정보요청신호(Get Group_Info)가 전송될 수 있다.
따라서, 서버(200)는 이에 대응하여, 그룹명을 포함한 정보를 상기 멀티앵글영상촬영헬멧(101)으로 전송할 수 있다.
또한, 상기 멀티앵글영상촬영헬멧(101)은, 특정 촬영그룹에 포함되기 위하여 가입요청신호 (JOIN Group_Name)를 서버로 전송할 수 있다.
이에 대응하여, 서버(200)는, 마스터 촬영장비에, 상기 다른 멀티앵글영상촬영헬멧(101)에 대한 촬영그룹 가입허용여부신호 (JOINED Member_Info)를 전송하여, 촬영그룹 가입허용여부를 판단하도록 할 수 있다.
다음으로, 마스터 촬영장비는, 상기 멀티앵글영상촬영헬멧(101)의 촬영그룹 허용 유무를 판단할 수 있다. 즉, 마스터 촬영장비는 기 설정된 기준에 기초하여 가입여부를 판단 후, 서버로 가입허용신호 또는 가입불허신호를 서버(200)로 전송할 수 있다. 만약, 상기 멀티앵글영상촬영헬멧(101)이 가입되면, 슬레이브(slave) 촬영장비로써 촬영그룹에 포함되게 된다.
또한, 마스터 촬영장비가 특정 시점에 촬영그룹의 형성이 완료되었다고 판단되면 촬영시작(Sync Start) 제어신호를 서버(200)를 통하여 다른 멀티앵글영상촬영헬멧(101)에 통보할 수 있고, 마스터 촬영장비(100)가 촬영 동기화를 종료하고자 할 경우, 촬영종료(Sync_End) 명령어를 서버(200)를 통하여 다른 멀티앵글영상촬영헬멧(101)으로 전송함으로써, 촬영 동기화가 종료되도록 할 수 있다. 한편, 동기화 그룹이 동기화 촬영 중 새로운 멀티앵글영상촬영헬멧이 연결되는 경우, 상기와 같은 단계들을 통하여 촬영그룹을 구성할 수 있다.
도 9는 본 발명의 실시 예에 따른 멀티앵글영상촬영헬멧의 선택화면을 도시한 도면이다.
실시 예에 따라, 복수개의 멀티앵글영상촬영헬멧이 한 이벤트 내에서 동시에 영상들을 촬영할 수 있으므로, 사용자는 특정 멀티앵글영상촬영헬멧을 선택하여, 원하는 앵글의 영상을 시청할 수 있다. 이를 위하여 다양한 형태의 영상선택 메뉴가 제공될 수 있다.
본 도면은 그 일예로써, 풋볼경기에 대한 멀티앵글영상 제공서비스인 경우에, 풋볼 경기장을 디스플레이하고, 카메라가 장착된 멀티앵글영상촬영헬멧의 위치를 상기 디스플레된 풋볼 경기장에 오버레이(overlay)하여 디스플레이한다. 따라서, 사용자는, 멀티앵글영상촬영헬멧의 위치를 파악하고, 앵글영상을 선택할 수 있으므로, 더욱 효과적으로 멀티앵글영상 제공서비스를 이용할 수 있다. 또한, 이를 위하여, 멀티앵글영상촬영헬멧들은 그 위치 정보를 지속적으로 서버로 전송함으로써, 멀티앵글영상촬영헬멧의 위치가 모니터링(monitoring)되어 사용자에게 제공될 수 있도록 할 수 있다.
또한, 실시 예에 따라, 상기 선택화면에서는, 제1 촬영그룹에 속한 멀티앵글영상촬영헬멧(100)들과, 제2 촬영그룹에 속한 멀티앵글영상촬영헬멧(111)들의 색상을 달리 표시하여 사용자가 편리하게 선택할 수 있도록 할 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.

Claims (17)

  1. 멀티앵글영상촬영헬멧에 있어서,
    적어도 하나의 카메라장착부를 포함하는 헬멧부;
    상기 카메라 장착부에 장착되어 외부 영상을 촬영하는 카메라부;
    상기 카메라부에서 촬영된 영상을 인코딩하는 인코딩부;
    상기 헬멧의 장치정보를 서버로 전송하고, 상기 서버에서 상기 헬멧이 기 설정된 촬영그룹에 포함된 헬멧으로 판단되는 경우에 전송되는 동기화 정보 및 제어신호를 수신하는 통신부;
    상기 수신된 동기화 정보에 기초하여 일정주기에 따른 마킹(Marking)을 수행하여 마킹정보를 생성하는 동기화부; 및
    상기 인코딩된 영상 및 마킹정보를 상기 통신부를 통하여 상기 서버로 전송하도록 제어하는 전송부를 포함하는 것을 특징으로 하는 멀티앵글영상촬영헬멧.
  2. 제1항에 있어서,
    상기 통신부는,
    다른 위치에서 다른 앵글의 영상을 촬영하는 멀티앵글영상촬영헬멧과 상기 마킹정보를 통하여 동기화를 수행할 수 있도록 하는 상기 동기화 정보를 수신하는 것을 특징으로 하는 멀티앵글영상촬영헬멧.
  3. 제2항에 있어서,
    상기 동기화 정보는, 동기화 주기 정보 및 마킹유무결정정보 중 적어도 하나를 포함하고,
    상기 제어신호는, 촬영지시정보 및 촬영 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 멀티앵글영상제공멀티앵글영상촬영헬멧.
  4. 제1항에 있어서,
    상기 인코딩된 영상 및 마킹정보를 저장하는 저장부를 더 포함하고,
    상기 통신부는,
    상기 저장부에 저장된 인코딩된 영상 및 마킹정보를 상기 서버로 전송하는 것을 특징으로 하는 멀티앵글영상촬영헬멧.
  5. 제1항에 있어서,
    상기 카메라부는,
    상기 헬멧부의 전면에 장착되는 제1 카메라,
    상기 헬멧부의 후면에 장착되는 제2 카메라,
    상기 헬멧부의 우측면에 장착되는 제3 카메라, 및
    상기 헬멧부의 좌측면에 장착되는 제4 카메라를 포함하는 것을 특징으로 하는 멀티앵글영상촬영헬멧.
  6. 제1항에 있어서,
    상기 카메라부는,
    촬영된 영상을 3D로 디스플레이하기 위한 3D촬영 카메라를 포함하는 것을 특징으로 하는 멀티앵글영상촬영헬멧.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서,
    상기 카메라부는 카메라 렌즈 부분만이 헬맷부 외부로 노출 또는 돌출되고 나머지 부분은 상기 헬멧부에 내장되며,
    상기 인코딩부, 통신부, 동기화부 및 전송부의 적어도 일부가 상기 헬멧부에 내장되는 것을 특징으로 하는 멀티앵글영상촬영헬멧.
  8. 멀티앵글영상촬영헬멧의 멀티앵글영상 촬영방법에 있어서,
    각각 서로 다른 위치에서 각각 서로 다른 앵글의 영상을 촬영하는 복수개의 멀티앵글영상촬영헬멧들이 각각의 장치정보를 서버로 전송하는 단계;
    상기 서버가, 상기 전송 받은 장치정보들에 기초하여, 상기 복수개의 헬멧들이 기 설정된 촬영그룹에 포함된 헬멧 인지 여부를 판단하는 단계;
    상기 서버에서, 상기 촬영그룹에 포함되는 것으로 판단된 헬멧들로 동기화 정보 및 제어신호를 전송하는 단계;
    상기 헬멧에서 외부 영상을 촬영하는 단계;
    상기 헬멧이 상기 촬영된 영상을 디지털 영상으로 인코딩하는 단계;
    상기 헬멧이 상기 촬영된 영상에, 상기 수신된 동기화 정보에 기초한 일정주기에 따른 마킹(Marking)을 수행하여 마킹정보를 생성하는 단계; 및
    상기 헬멧이 상기 인코딩된 영상 및 마킹정보를 상기 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  9. 제8항에 있어서,
    상기 동기화 정보는,
    헬멧에서 촬영된 영상에 마킹을 할 것인지 여부에 대한 정보를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  10. 제8항에 있어서,
    상기 인코딩된 영상 및 마킹정보를 상기 서버로 전송하는 단계는,
    상기 헬멧의 저장부에 상기 인코딩된 영상 및 마킹정보를 저장하는 단계; 및
    상기 인코딩된 영상 및 마킹정보를 상기 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  11. 제8항에 있어서,
    상기 헬멧의 멀티앵글영상촬영헬멧들이 기 설정된 촬영그룹에 포함된 헬멧인지 여부를 판단하는 단계는,
    헬멧에서 전송된 장치정보가 상기 서버에 동일한 그룹명으로 기 등록되어 있는 경우, 상기 헬멧을 기 설정된 촬영그룹에 포함된 헬멧으로 판단하는 단계; 및
    상기 헬멧에 대한 정보와 상기 서버에 기 저장된 장치정보에 차이가 있는 경우, 상기 기 저장된 장치정보를 업데이트(update)하는 단계를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  12. 제8항에 있어서,
    상기 동기화 정보 및 제어신호를 전송하는 단계는,
    상기 촬영그룹에 포함되는 것으로 판단된 헬멧들로 동기화 정보를 전송하는 단계;
    상기 동기화 정보를 전송한 헬멧들의 촬영준비가 완료되었는지 판단하는 단계;
    상기 촬영준비가 완료된 경우, 촬영시작신호를 포함하는 상기 제어신호를 상기 헬멧들로 전송하는 단계; 및
    상기 촬영시작신호가 수신된 헬멧으로부터 응답(ACK)신호를 수신하는 단계를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  13. 제8항에 있어서,
    상기 마킹(Marking)을 수행하여 마킹정보를 생성하는 단계는,
    상기 헬멧이, 상기 서버로부터 수신된 정보에 기초하여, 기 설정된 주기에 따라, 마킹되어 생성된 상기 마킹정보를 상기 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  14. 제8항에 있어서,
    상기 마킹(Marking)을 수행하여 마킹정보를 생성하는 단계는,
    상기 헬멧이, 상기 서버로부터 수신된 정보에 기초하여, 기 설정된 주기에 따라 마크 정보를 상기 멀티앵글영상촬영헬멧의 저장부에 저장하는 단계; 및
    상기 인코딩이 완료되면, 완료된 인코딩 영상과, 상기 완료시점까지 저장된 마킹정보를 상기 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  15. 제8항에 있어서,
    상기 복수개의 헬멧들이 기 설정된 촬영그룹에 포함된 헬멧 인지 여부를 판단하는 단계는,
    헬멧에 대한 장치정보가 상기 서버에 동일한 그룹명으로 기 등록되어 있지 않은 경우, 상기 헬멧을 기 설정된 촬영그룹에 포함되지 않은 헬멧으로 판단하는 단계;
    상기 헬멧의 장치 정보에 기초하여, 상기 촬영그룹에 포함되지 않은 헬멧에 대한 그룹을 생성하고 상기 헬멧을 마스터(Master) 촬영장비로 설정하는 단계;
    상기 생성된 그룹에 대한 그룹테이블을 생성하는 단계; 및
    상기 마스터 촬영장비에 대한 정보 중, 동기화 주기에 관한 정보를 상기 그룹테이블에 저장하는 단계를 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  16. 제15항에 있어서,
    촬영그룹에 포함되지 않은 헬멧으로부터 서버로 그룹정보 요청신호가 전송되면, 상기 서버는 상기 요청신호를 전송한 헬멧으로 상기 생성된 그룹에 대한 정보를 전송하는 단계;
    상기 그룹에 대한 정보를 전송한 헬멧으로부터 상기 생성된 그룹에 대한 가입요청신호를 수신하는 단계;
    상기 마스터 촬영장비로부터 상기 헬멧의 가입허용신호를 수신하는 단계;
    상기 가입허용신호가 수신되면, 상기 생성된 그룹에 상기 가입요청신호를 전송한 헬멧을 슬레이브(Slave) 촬영장비로 포함하는 단계; 및
    상기 마스터 촬영장비와 상기 슬레이브 촬영장비에서 촬영되는 디지털 영상을, 상기 생성된 그룹에 대응되는 특정 주기에 따라 생성되는 마킹정보에 기초하여 동기화 하는 단계를 더 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
  17. 제16항에 있어서,
    상기 마스터 촬영장비로부터 서버로 동기화종료신호가 수신되면, 상기 서버는 상기 동기화종료신호를 각각의 슬레이브 촬영장비로 전송하는 단계를 더 포함하는 것을 특징으로 하는 멀티앵글영상 촬영방법.
PCT/KR2014/001856 2013-09-26 2014-03-06 멀티앵글영상촬영헬멧 및 촬영방법 WO2015046688A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/025,430 US20160241794A1 (en) 2013-09-26 2014-03-06 Helmet for shooting multi-angle image and shooting method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2013-0114740 2013-09-26
KR20130114740A KR101446995B1 (ko) 2013-09-26 2013-09-26 멀티앵글영상촬영헬멧 및 촬영방법

Publications (1)

Publication Number Publication Date
WO2015046688A1 true WO2015046688A1 (ko) 2015-04-02

Family

ID=51996460

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/001856 WO2015046688A1 (ko) 2013-09-26 2014-03-06 멀티앵글영상촬영헬멧 및 촬영방법

Country Status (3)

Country Link
US (1) US20160241794A1 (ko)
KR (1) KR101446995B1 (ko)
WO (1) WO2015046688A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9389677B2 (en) * 2011-10-24 2016-07-12 Kenleigh C. Hobby Smart helmet
WO2013086246A1 (en) 2011-12-06 2013-06-13 Equisight Inc. Virtual presence model
CN106716244B (zh) * 2014-09-10 2019-05-03 富士胶片株式会社 摄影控制装置、摄影装置、摄影控制方法
US20160080649A1 (en) * 2014-09-16 2016-03-17 Marshall Lee Bex Systems and methods for producing first-person-perspective video footage
US10694801B2 (en) * 2016-09-28 2020-06-30 Bruce Cooke Electronic motorcycle helmet
US20190068941A1 (en) * 2017-08-28 2019-02-28 David Anthony O'Sullivan Method and process for transmitting a live video stream, with a 360-degree view, from the perspective of a participant in an activity
KR20190068284A (ko) 2017-12-08 2019-06-18 동국대학교 산학협력단 카메라 리그
US11245831B2 (en) * 2018-09-21 2022-02-08 R.F. Wireless Systems Inc. Wireless camera system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006148842A (ja) * 2004-10-20 2006-06-08 Daimei Kk ウェアラブル監視カメラシステム
JP2008134646A (ja) * 2003-08-04 2008-06-12 Casio Comput Co Ltd 撮像装置、撮像方法及びプログラム
KR20090131891A (ko) * 2008-06-19 2009-12-30 서강대학교산학협력단 개인별 맞춤형 실시간 동영상 제공 시스템 및 방법
KR20100061278A (ko) * 2008-11-28 2010-06-07 한국전자통신연구원 멀티 앵글 디지털 방송 서비스 제공 방법
KR101295976B1 (ko) * 2012-06-04 2013-08-13 충북대학교 산학협력단 3ｄ 화상 회의 시스템

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6819354B1 (en) * 2000-06-13 2004-11-16 Omnivision Technologies, Inc. Completely integrated helmet camera
US7796162B2 (en) * 2000-10-26 2010-09-14 Front Row Technologies, Llc Providing multiple synchronized camera views for broadcast from a live venue activity to remote viewers
JP2007072802A (ja) 2005-09-07 2007-03-22 Akebono Brake Ind Co Ltd カメラ付きヘルメットを用いた情報通信システム
CN200941842Y (zh) * 2006-05-25 2007-09-05 周光真 一种多功能头盔
KR20130052420A (ko) * 2011-11-11 2013-05-22 (주)넷투넷 스마트 헬멧을 이용한 현장 작업 관리 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008134646A (ja) * 2003-08-04 2008-06-12 Casio Comput Co Ltd 撮像装置、撮像方法及びプログラム
JP2006148842A (ja) * 2004-10-20 2006-06-08 Daimei Kk ウェアラブル監視カメラシステム
KR20090131891A (ko) * 2008-06-19 2009-12-30 서강대학교산학협력단 개인별 맞춤형 실시간 동영상 제공 시스템 및 방법
KR20100061278A (ko) * 2008-11-28 2010-06-07 한국전자통신연구원 멀티 앵글 디지털 방송 서비스 제공 방법
KR101295976B1 (ko) * 2012-06-04 2013-08-13 충북대학교 산학협력단 3ｄ 화상 회의 시스템

Also Published As

Publication number Publication date
US20160241794A1 (en) 2016-08-18
KR101446995B1 (ko) 2014-10-07

Similar Documents

Publication Publication Date Title
WO2015046688A1 (ko) 멀티앵글영상촬영헬멧 및 촬영방법
WO2013043000A1 (en) Apparatus and method of playing broadcast content in broadcasting system
WO2014142492A1 (en) Method and apparatus for allowing playback devices to perform synchronized playback of streaming content
WO2012128563A2 (ko) 이종망 기반 연동형 방송콘텐츠 송수신 장치 및 방법
WO2013077525A1 (ko) 제어 방법 및 그를 이용한 장치
CN112738540B (zh) 多设备直播切换方法、装置、系统、电子设备和可读存储介质
WO2013154397A1 (en) Transmitting system and receiving apparatus for providing hybrid service, and service providing method thereof
KR20190083906A (ko) 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법
WO2015064854A1 (ko) 멀티앵글영상서비스의 사용자인터페이스 메뉴 제공방법 및 사용자 인터페이스메뉴 제공장치
WO2011136537A2 (en) Method and apparatus for transmitting content to plurality of devices
WO2015046724A1 (en) Image display apparatus, server for synchronizing contents, and method for operating the server
WO2016056804A1 (en) Content processing apparatus and content processing method thereof
WO2015064855A1 (ko) 멀티앵글영상촬영을 위한 사용자인터페이스 메뉴 제공방법 및 사용자 인터페이스메뉴 제공장치
WO2015037761A1 (ko) 멀티앵글영상서비스 제공 방법 및 시스템
WO2019004783A1 (ko) 다채널 영상을 위한 전송 시스템 및 이의 제어 방법, 다채널 영상 재생 방법 및 장치
WO2012015288A2 (en) Method and apparatus for transmitting and receiving extended broadcast service in digital broadcasting
WO2011052960A2 (ko) 실시간 데이터 전송 제어 시스템 및 그 제어 방법
WO2015034122A1 (ko) 여러대의 액션캠 영상 동기화 제공방법 및 제공단말기
WO2021107708A1 (ko) 복수의 카메라로부터 입력된 가상현실영상을 실시간 방송하기 위한 장치 및 방법
WO2017010585A1 (ko) 카메라모듈이 구비된 단말기 용도변환 시스템
WO2015034123A1 (ko) 여러 대의 액션캠 영상을 재생하기 위한 버퍼관리 방법 및 그에 따른 재생장치
WO2016043432A1 (ko) 멀티미디어의 전송 또는 수신 방법 및 그 장치
WO2019004498A1 (ko) 다채널 영상 생성 방법, 다채널 영상 재생 방법 및 다채널 영상 재생 프로그램
WO2018155910A1 (ko) 중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체
WO2020138541A1 (ko) 모바일 단말을 이용한 다채널 영상 생성 방법 및 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14848707

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15025430

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14848707

Country of ref document: EP

Kind code of ref document: A1