WO2022060144A1 - 카메라서비스 시스템 및 방법 - Google Patents

카메라서비스 시스템 및 방법 Download PDF

Info

Publication number
WO2022060144A1
WO2022060144A1 PCT/KR2021/012745 KR2021012745W WO2022060144A1 WO 2022060144 A1 WO2022060144 A1 WO 2022060144A1 KR 2021012745 W KR2021012745 W KR 2021012745W WO 2022060144 A1 WO2022060144 A1 WO 2022060144A1
Authority
WO
WIPO (PCT)
Prior art keywords
camera
image
station
information
user
Prior art date
Application number
PCT/KR2021/012745
Other languages
English (en)
French (fr)
Inventor
김덕우
Original Assignee
김덕우
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김덕우 filed Critical 김덕우
Priority to US18/025,946 priority Critical patent/US20230362485A1/en
Priority to JP2023517392A priority patent/JP2023541950A/ja
Priority to CN202180063723.4A priority patent/CN116194949A/zh
Publication of WO2022060144A1 publication Critical patent/WO2022060144A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/02—Methods for producing synthetic speech; Speech synthesisers
    • G10L13/033—Voice editing, e.g. manipulating the voice of the synthesiser
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras

Definitions

  • the present invention provides a camera service that allows a user to directly control and shoot a camera installed in a tourist destination, scenic spot, other sites of interest, or a vehicle, yacht, helicopter, hot air balloon, drone, etc., and view the captured image through a TV, PC, mobile device, etc. It is about a system and its method.
  • the above needs can be partially resolved through a video site represented by YouTube or Google Maps.
  • a video site represented by YouTube or Google Maps.
  • the present invention intends to propose a camera service that provides images of tourist spots, scenic spots, and other places of interest so that the user can view the image while directly controlling the camera installed on the platform.
  • the camera service system and method of the present invention provide a tourist attraction, scenic spot, or other place of interest while a user directly controls a camera station composed of an operable camera installed on a movable or fixed platform through a camera service server. It has a function to view the image of a user terminal device in real time.
  • the user is connected to the camera station through a wired/wireless network, and it is possible to control the movement of the platform, the direction of the camera, zoom in, and zoom out for a predetermined time. If the user wants to use the camera station exclusively, he can pay a fee.
  • the camera service system of the present invention recognizes that a plurality of camera stations corresponding to the number of cameras exist when a plurality of cameras are installed on one platform, but creates a panoramic image instead of mechanical shooting direction control and creates some of them
  • a panoramic camera unit combined with a plurality of cameras that provide a camera according to the shooting direction is recognized as a single camera.
  • the platform on which the camera is installed may be a fixed type installed at a place of interest, or a mobile type such as a drone, a car, a train, a boat, a submarine, a rocket, an airplane, a helicopter, a hot air balloon, or a person.
  • a mobile type such as a drone, a car, a train, a boat, a submarine, a rocket, an airplane, a helicopter, a hot air balloon, or a person.
  • mobile platforms in the case of an unmanned platform such as a drone or an unmanned vehicle, it is possible for a user to specify a movement route or control the platform in real time to a server or a computer in the platform through a network.
  • manned platforms such as cars, trains, yachts, and hot air balloons
  • the user provides information about the movement route to the driver/pilot of the manned platform, and the pilot moves the manned platform accordingly. .
  • the user terminal device when controlling the platform in real time, it is more preferable to use the user terminal device separately as a user video terminal device and a user control terminal device.
  • a user can select a specific camera station desired.
  • the user may be provided with a captured image from the corresponding camera station selected by the user.
  • the user may be provided with his or her own images by grouping a plurality of camera stations in a specific area or a specific subject (eg, sunset, forest, beach, full moon night, rainy street, etc.).
  • the images may be provided sequentially according to a method set by the user.
  • the zoom in may be forcibly stopped or mosaiced.
  • personal information such as name, phone number, and vehicle number
  • zoom in is possible but mosaic is processed so that identification is impossible, and the camera service is provided so that the mosaic is removed when the owner of the name, phone number, or vehicle pays an advertisement fee. can operate.
  • the camera service system of the present invention may provide the captured image to the user as it is in real time, and the image processed by image processing technology (eg, image processing) (eg, pastel painting, watercolor painting, etc., or cartoon format) image-processed image) or a specific image (text, symbol string, photo, etc.) can be combined and provided.
  • image processing technology eg, image processing
  • pastel painting, watercolor painting, etc., or cartoon format image-processed image
  • a specific image text, symbol string, photo, etc.
  • the original sound (the field sound) can be output as it is.
  • the original sound can be removed or, in addition to the original sound, background sounds such as valley water, wind, waves, birds, recorded in the forest, and music can be inserted into the video and provided.
  • background sounds such as valley water, wind, waves, birds, recorded in the forest, and music can be inserted into the video and provided.
  • a user who has paid the fee can receive an image service by controlling the camera direction and zoom in/out for a predetermined period of time.
  • the video from the camera station can be shared with others who want to view the video for free. Advertised videos are provided to those who view free videos, and the ad revenue can be divided in a predetermined ratio with the occupants of the corresponding camera station. In this way, a third party can view advertisements and watch videos, and the usage fee can be divided and shared. In this case, the contribution can be deposited into the user's account and offset against the usage fee or returned in cash.
  • the user can directly control the camera in real time, going beyond passively viewing the image of a desired tourist destination, scenic spot, or other place of interest on the existing website, and furthermore, a camera installation platform such as a drone or vehicle You can view the obtained video by moving the device in real time.
  • a camera installation platform such as a drone or vehicle
  • You can view the obtained video by moving the device in real time.
  • a third party who does not pay a usage fee can view the advertisement and view the video for free by accessing the video service system.
  • the present invention can also greatly reduce the possibility of infection with viruses, germs, bacteria, etc. due to face-to-face contact between people, which is inevitable when going directly to a place of interest.
  • FIG. 1 is a configuration diagram of a camera service system according to the present invention.
  • FIGS. 2A and 2B are block diagrams of a camera station 10 according to the present invention.
  • Figure 3a is a configuration diagram of the manned platform (12a)
  • Figure 3b is a configuration diagram of the unmanned platform (12b)
  • 5A is a flow chart of control information of a camera service system according to the present invention.
  • 5b is a flow chart of media information of a camera service system according to the present invention.
  • 6A and 6B are configuration examples of the camera service server 30
  • FIGS. 7A to 7C are diagrams illustrating various implementations of the user terminal device 40
  • FIGS. 8 and 9 are process block diagrams of a camera service method according to the present invention.
  • FIG. 1 is a schematic configuration diagram of a camera service system according to the present invention.
  • the camera stations 10 are connected to the camera service server 30 through the communication network 20 .
  • the user connects to the camera service server 30 through the communication network 20, and the user terminal device 40 U1, U2, ... , is connected to the camera station 10 through the camera service server 30 using the UN, and controls the camera station 10 for a predetermined time and views the image. If the user wants to use the camera station 10 exclusively, he pays a usage fee.
  • the camera 13 is installed on the platform 12 .
  • the platform 12 is responsible for the movement of the camera 13 , and the image and sound are provided by the camera 13 . is preferably responsible for
  • the platform 12 is entirely responsible for the connection with the camera service server 30 , and the information exchanged with the camera is transmitted between the platform 12 and the camera 13 . It is better to use a separate dedicated communication line to handle it. Fig. 2a explains this.
  • the 2B shows a method in which a separate camera station control unit 11 is provided and both the platform 12 and the camera 13 are connected to the camera station control unit 11 .
  • the camera station control unit 11 is in charge of communication with the camera service server 30 through the communication network.
  • the camera station 10 may be fixed to a place of interest (fixed camera station), or may be movable by itself to provide various and three-dimensional images to the user (mobile camera station).
  • a mobile camera station uses a mobile platform.
  • the platform includes a ground mobile device such as a car or train, an airplane such as a drone or a hot air balloon or an airplane/helicopter, a sea mobile device such as a boat or a yacht, and a space launch vehicle.
  • the camera station 10 uses a manned platform with a driver/pilot, such as an airplane/helicopter, automobile, hot air balloon, boat, land mobile device, sea mobile device, airplane plane, space plane, underwater mobile device, and human itself
  • a driver/pilot such as an airplane/helicopter, automobile, hot air balloon, boat, land mobile device, sea mobile device, airplane plane, space plane, underwater mobile device, and human itself
  • the camera station 10 is moved by providing information on the movement path of the user to the operator or pilot of the platform, and the driver or pilot moves the manned movement platform to move the platform to the position desired by the user.
  • the manned mobile platform 12a includes: a control information communicator 121 that receives control information for operation transmitted by a user to the user terminal device 40 through a network and expresses it to a platform operator or pilot; a manipulator 122 for allowing a driver or pilot to control movement of the platform 12a; A actuator 123 connected to the manipulator to move the platform 12a is provided. Accordingly, the driver or the pilot controls the actuator 123 using the manipulator 122 according to the control information displayed on the control information communicator 121 to control the movement of the platform 12a. Therefore, when the manipulator 122 and the actuator 123 are combined, it may be substantially the manned platform itself.
  • a field map and a control screen are provided to the user and/or the driver or pilot of the manned platform.
  • it can be used by adding an auxiliary voice channel between the user and the driver or pilot of the manned platform.
  • the camera station 10 is a ground mobile device capable of autonomous movement such as a drone or an unmanned vehicle, a sea mobile device, an airplane device, a space flight device, an underwater mobile device, etc.
  • An autonomous controller 124 that can receive control information through the camera service server 30 through a communication network and control the movement of the unmanned mobile platform 12b according to the control information, and the autonomous controller connected to the platform ( An autonomous actuator 125 for moving 12b) is provided. At this time, it is preferable that the autonomous controller 124 compares the received control information with the preset operable range information to steer the autonomous movement of the platform 12b according to the control information only when the control information is within the operable range.
  • the function of reviewing the operable range may be implemented in the camera service server 30 . Therefore, when the autonomous controller 124 and the autonomous driver 125 are combined, it becomes like a drone, and the operation is controlled according to the command of the camera service server 30 and it means the unmanned platform itself having a function of transmitting an image. .
  • the unmanned platform 12b capable of autonomous movement, information on the movable area is stored and the received control information is compared thereto to control itself so that it is always located in the movable area.
  • an uncontrollable situation such as battery discharge, wind speed increase, or a traffic accident occurs, it can return to the starting position according to a predetermined algorithm or have a function to wait by moving to a nearby emergency standby position.
  • the user can select a specific camera station 10 to receive images.
  • the user groups a plurality of camera stations 10 in a group by a specific area or a specific subject (eg, sunset, forest, beach, night with a full moon, rainy street, etc.) and automatically records their own images sequentially can be provided
  • the image service server 30 may provide a function of searching for images provided by the plurality of camera stations 10 by keyword.
  • the user can set the image providing time and order of each of the camera stations selected by the user so that the camera stations automatically provide the images in sequence.
  • the present invention it is possible to increase the service range by allowing a third party to access the camera service server. That is, in addition to the camera station owned by the camera service provider, a third party who owns the camera station provides its own camera station to the video service provider of the present invention and receives a fee, or shares the revenue generated by the use of the provided camera station can do.
  • the third party must first define the nature of the camera station and camera service it intends to provide and obtain approval from the video service provider, and only when approved, the third party can connect the camera station to the camera service system and provide camera service. will be. Upon approval, the operator should check the platform used for the camera station and the protocol or equipment related to camera control and communication network connection to ensure compatibility.
  • a third party installs a camera station on the roof of a building with a good view and leases it to a business operator for a fee, or a third party configures a camera station by attaching a camera to their vehicle, yacht, airplane, or hot air balloon, and then selects a place with a good view. It is possible to provide camera services in the form of driving, sailing, and flying. In this case, the movement route of the camera station, service start time (for example, 13:00), service provision time (for example, 15 minutes), and sample images are displayed on the map together so that users can easily recognize them. It would be preferable to
  • the third party will provide his/her camera station to the operator according to the contract.
  • the camera station owner may provide his/her own camera station including platform-related information, camera-related information, and service plan.
  • registration is determined (S30)
  • the corresponding camera station is registered in the camera service system and disclosed to the user (S40) so that users can select and use the corresponding camera station.
  • the camera station information includes information on whether the camera station is mobile or stationary, and information on the location and altitude in the case of a stationary type, and information on whether the platform is an autonomous platform or a manned platform in the case of a mobile station, and information on a movable path.
  • the camera information includes information on zoom function, direction control, and resolution.
  • 5A is a diagram showing the flow of control information according to the camera service of the present invention.
  • the user selects one or a plurality of camera stations 10 using the user terminal device 40 , which is in charge of the camera station selection unit 310 .
  • Information related to the camera station 10 selected by the user is stored in the user account information.
  • the user control information is generated in the user terminal device 40 and transmitted to the camera service server 30 .
  • the camera station control unit 320 in the camera service server 30 creates final control information in consideration of the user control information and the state of the camera station 10 and transmits it to the camera station 10 .
  • the camera station 10 controls the platform 12 and the camera 13 according to the transmitted final control information.
  • the user control information may be generated in real time, but the user may select from the control examples presented by the camera service server 30 .
  • the generated control information may be stored in the user account according to the programming plan set by the user and then transmitted to the camera stations 10 to be used for control.
  • 5B is a diagram showing the flow of media information (video information + audio information) according to the camera service of the present invention.
  • the media information generated by the camera 13 is transmitted to the image management unit 330 of the camera service server 30 via the camera station 10 .
  • the image transmitted to the image management unit 330 is selectively stored, while the image is output through the image processing unit 340, the sound processing unit 350, the image analysis unit 360, and the billing advertisement processing unit 370 to be described in FIG. 6A. It is transmitted to the user terminal device 40 through the unit 380 .
  • FIG. 6A is an embodiment of the configuration of the camera service server 30 .
  • the configuration of the image service server 30 shown in FIG. 6 is only one example, and depending on the implementation, several components may be merged to be implemented as one component, or some components may be excluded and implemented separately. It can also be moved to the platform 12 or the camera 13 of the camera station 10 . Actually, it would be preferable to consist of a plurality of workstations or DB servers.
  • the camera station selection unit 310 serves to present information on a plurality of camera stations 10 connected to the camera service system 30 and to assist the user in selecting the camera station selection unit 310 .
  • fixed keywords platform information, camera information, etc.
  • variable keywords weather, time, movement route, etc.
  • the camera station controller 320 transmits the control information input by the user to the designated camera station 10 to control the movement of the platform 12 or change the direction (tilting, rotation, etc.) of the camera 13, zoom in, Controls the zoom-out function, etc.
  • This process may additionally include ancillary information exchange to confirm the control result.
  • the camera station control unit 320 is divided into a platform control unit 321 and a camera control unit 322 .
  • the platform control unit 321 transmits the control information input by the user to the designated camera station 10 to control the movement of the platform 12 of the corresponding camera station, that is, the movement of the camera station 10 .
  • the control information is transmitted to the autonomous controller 124 of the platform when the platform 12 can autonomously move, and to the control information communication unit 121 in the case of a manned platform.
  • the camera control unit 322 may control the camera direction change (tilting, rotation, etc.), zoom-in, zoom-out functions, and the like.
  • the platform control unit 321 may be responsible for the camera direction change.
  • the camera control unit 322 transmits related information among the control information input by the user to the camera 13 of the camera station 10 .
  • the camera control unit 322 may include a sub-function of automatically stopping the zoom-in function so that a person's face or a specific part is not enlarged beyond a certain size when the zoom-in function is executed.
  • information on the image size may be provided from the image analysis unit 360 .
  • the zoom operation (zoom-in, zoom-out) of the camera 13 may be performed in a digital zoom method, and the shooting direction control of the camera 13 may be performed in a manner that provides a part of a two-dimensional panoramic image obtained from a plurality of cameras.
  • the camera selection unit 310 and the camera control unit 320 are exemplified as being included in the server 30 , the present invention is not limited thereto. That is, as mentioned above, the camera selection unit 310 and/or the camera control unit 320 is implemented in an auxiliary server (not shown) in charge of controlling the plurality of camera stations 10 rather than the server 30 .
  • the server 30 transmits the user's control information to the auxiliary server so that the auxiliary server directly controls the camera station 10 is also possible.
  • the image management unit 330 receives the image captured by the camera 13 and Optionally, store, analyze, process and provide to users. To this end, the image management unit 330 analyzes the image using the image analysis unit 360 , assigns a keyword related to the image, and provides it to the user through the camera station selection unit 310 , so that the user can easily view the images. It provides the function to organize your own video by searching. If necessary, the information of the camera station provided in advance can be used. That is, using real-time weather information, location information, and image analysis information, for example, an image of rain on Waikiki Beach in Hawaii has keywords such as 'Hawaii Waikiki, beach, rain'. The video that appears can have keywords such as 'Haleakala, Maui, Hawaii, volcanic sunrise'. Similarly, when a user searches for 'aurora', camera images of the area where the aurora is currently occurring can be found and provided.
  • the image processing unit 340 is responsible for processing an image according to a given condition.
  • a mosaic processing function may be used.
  • the zoom-in of the camera control unit 322 automatically stops the zoom-in function so that a person's face or a specific part is not identified by being enlarged beyond a certain size. Separately from the sub-function of the pause, it automatically modulates the face or a specific part, such as mosaic, blur, etc.
  • the image processing unit 340 may also include a function of automatically mosaicing or blurring personal information, such as a business name, phone number, and vehicle number, in an indistinguishable manner (although zoom-in can still be performed).
  • a billing advertisement processing unit 370 which will be described later, is connected. Receive information from the billing advertisement processing unit 370, identify the signboard in the image during image modulation processing such as a trade name, phone number, vehicle number, etc., and search whether the information is in preset advertiser information. It can be implemented in a way that no modulation processing is performed.
  • the image captured by the camera 13 may be output in real time through the image management unit 330 and the image output unit 380 , but the image processed by the image processing technology (image processing) through the image processing unit 340 (For example, images processed in the form of drawings such as pastels, watercolors, or cartoons) may be output. In addition, it may be combined with a specific image (text, symbol string, photo, etc.) and output.
  • image processing technology image processing
  • image processing unit 340 For example, images processed in the form of drawings such as pastels, watercolors, or cartoons
  • it may be combined with a specific image (text, symbol string, photo, etc.) and output.
  • the sound processing unit 350 processes and outputs the sound of the image.
  • the original sound is output as it is, or the original sound is removed or added to the original sound according to sound control information set by the user, and background sounds such as valley water, wind, waves, birds, sounds recorded in the forest, music, etc. It is possible to synthesize and provide, or connect to a music site to receive and play music on the user's mobile device.
  • the camera service server 30 also includes a billing advertisement processing unit 370 in addition to the above functional elements.
  • a user who pays a fee for exclusive use of the camera station 10 can control the camera station 10 for a specific time, which can be performed by linking with the fee processing unit 380 .
  • the image of the corresponding camera station 10 may be shared with a person who wants to view the image for free. Advertisements are attached to those who view the free video, and the advertisement revenue can be divided in an appropriate ratio with those who paid for the camera 13 .
  • the fee is shared with the camera user (occupant). The contribution is credited to the user's account, offsetting the usage fee paid by the user, or returned in cash.
  • the image processing unit 340, the sound processing unit 350, the image analysis unit 360, the billing advertisement processing unit 360, etc. are separately configured to explain the functions, but in actual implementation, the combination of software and hardware is various. It is possible to implement It is also possible to process some steps simultaneously rather than sequentially.
  • 7A to 7C show various implementations of the user terminal device 40 .
  • the user terminal device 40 may be implemented as a dedicated terminal 41 connected to the camera service server 30 using a wired/wireless communication network.
  • the operator of the camera service system will be able to design the dedicated terminal 41 with a configuration and UI optimized for the camera service.
  • the dedicated terminal 41 may be a general-purpose computer, such as a PC, or a dedicated device designed with an architecture specialized for an image service system.
  • the user terminal device 40 may be implemented as a mobile device 42 such as a mobile phone, a smart phone, or a tablet PC connected to the camera service server 30 through a mobile communication company.
  • the user may log in to the image service server 30 using the app installed on the mobile device 42 and use the mobile device 42 as a terminal for user control and an image output terminal.
  • the user terminal device 40 may be a portable device 42 and a video device 43 such as a TV receiver.
  • the video device may be a cable or satellite set-top box or a TV receiver capable of Internet connection.
  • the user can use his/her portable device 42 as a terminal device for user control (in other words, a control terminal) and the video device 43 as a terminal device for image output (in other words, a video terminal).
  • the user logs in to the camera service server 30 using the mobile phone (or smart phone) app, and then inputs the subscriber information provided by the cable company to which he or she has joined to watch the video on the TV through his or her set-top box.
  • the camera service server 30 of the present invention can also be serviced in the same way.
  • the user terminal device 40 As described above, by separating the user terminal device 40 into a control terminal (ie, a mobile device) for which the user controls the camera 13 and a video terminal for receiving an image by the user, the image captured by the camera with a large screen device such as a TV is displayed. While viewing, you can conveniently use your mobile phone or tablet as a control terminal.
  • a control terminal ie, a mobile device
  • a video terminal for receiving an image by the user
  • FIG. 8 illustrates a process of a camera service method performed in the above-described camera service system. 8 the camera service method according to the present invention is
  • a camera station occupancy step in which the user selects and occupies the camera station 10 with reference to the occupancy status information received in the terminal device 40;
  • a control guide information transmission step in which the server transmits, by the server, control guide information of the occupied camera station 10 to the user terminal device 40;
  • control information generating step in which the user generates control information for controlling the camera station 10 with reference to the control guide information received in the terminal device 40 and transmits it to the server 30;
  • the server stores the received control information when an accident or problem occurs to determine the cause of;
  • the platform 12 of the camera station 10 is moved according to the received control information, and the zoom operation and/or the shooting direction of the camera 13 are controlled according to the received control information, so that the camera 13 is Control and image transmission step of transmitting the captured image to the server (30);
  • the server may transmit the image with a delay of a certain time.
  • the server may transmit the image with a delay of a certain time.
  • the occupancy status information of the camera station 10 may include charging information for charging a fee. And at this time, the camera occupancy step may be completed by the user selecting the camera station 10 with reference to the occupancy status information and paying a fee determined according to the billing information.
  • the occupancy status information of the camera station 10 includes reservation information, and in this case, the camera occupancy step may be completed as the user selects and makes a reservation for the camera station 10 with reference to the occupancy status information.
  • the occupancy status information of the camera station 10 includes advertisement guidance information, and in this case, the camera occupancy step is completed as the user selects the camera station 10 with reference to the occupancy status information and views the guided advertisement.
  • control guide information includes a plurality of control information examples composed of sequential control information for the camera station 10, and in this case, the control information may be one of these control information examples.
  • the image processing step may include processing the image so that when a human face in the image is larger than a certain size, it cannot be identified.
  • the image processing step may include the step of processing the image so that it cannot be identified when the license plate of the vehicle in the image is larger than a certain size.
  • image processing may be performed so that the information cannot be identified except when the information is in a preset advertiser list.
  • the image may be output.
  • the image may be output by combining the sound processed by synthesizing the original sound and another sound source of the image or removing the original sound according to preset sound control information.
  • control information transmission step may include: a control information validation step in which the server 30 checks whether the received control information is valid, that is, whether the control information is included within a steerable range;
  • a control information processing step of transmitting control information to the platform and the camera if it is determined within the steerable range by the control information validation check, and performing a preset operation if it is outside the steerable range and warning the user that it is out of the steerable range may include
  • the server 30 transmits the processed image to the user terminal device 40 after delaying it for a predetermined time.
  • FIG. 9 is a process flow diagram illustrating a case in which a user receives his/her own video channel service in the video service method according to the present invention.
  • a process will be described in which a cable TV user uses the video service of the present invention by pressing the remote control of the cable TV.
  • the user terminal device 40 in this case is a cable or satellite set-top box or a TV receiver capable of Internet connection.
  • the camera service method according to this embodiment is
  • the camera station 10 transmits the captured image to the server 30;
  • An image subject classification step in which the server 30 analyzes the keywords of the multiple camera stations 10 in real time and classifies the image subjects of the corresponding camera stations 10 according to the set image subject list;
  • Video subject selection step in which the user selects a video subject from the video subject list received in the terminal device 40 -
  • the user sets the desired video subject(s) on the video subject setting screen in advance, and the server The video subject(s) may be aggregated into a video subject list;
  • a video guide information presentation step in which the server 30 selects the video(s) and sound source(s) corresponding to the selected video topic and transmits the corresponding information to the user terminal device 40;
  • the keywords of the camera stations 10 may be installation location information, natural properties of the installation location, real-time weather information of the installation location, date, time, observation information, and the like.
  • the kiwi of the camera station 10 may be a type of platform, a moving path, or the like.
  • the sound source included in the video broadcasting information may be stored in a system managed by a third computer.
  • a user accesses the camera service site of the present invention (eg, the camera service server 30 in FIG. 1 ) in a dedicated app installed in the mobile phone and uses the camera service.
  • the user control terminal device is a mobile phone and the user video terminal device is a TV receiver.
  • the user must set the TV receiver and the mobile phone in advance to use the video terminal and the control terminal, respectively.
  • the setting method of the user video terminal device is as follows. First, the user turns on the TV receiver to be designated as the user video terminal device and accesses the website built in the video service server 30 through the Internet. And if you click (by remote control) the user control terminal menu that appears on the TV screen, a 16-digit code is displayed on the TV screen.
  • the user After setting up the TV receiver and mobile phone in this way, the user selects the desired region from the map provided by the dedicated app installed on the mobile phone. For example, assuming that the user has selected the Jeju Seongsan Ilchulbong area, an image of the area promoted by the operator is transmitted to the TV receiver, and available camera stations are displayed on the map displayed on the mobile phone app.
  • the camera station has a drone camera, a stationary camera, and a submarine camera depending on the platform type.
  • the camera service server generates the occupancy status information of the camera station and transmits it to the mobile phone, which is a user control terminal device (refer to FIG. 8, hereinafter the same).
  • the received camera station occupancy status information is displayed on the map through the mobile phone screen.
  • This camera occupancy status information may be displayed as an icon (for example, a drone is displayed as a drone-shaped icon and a submarine is displayed as a submarine-shaped icon).
  • the table below shows the camera station occupancy status information as an example.
  • the user selects a camera station by referring to the camera station occupancy status information displayed on the mobile phone and performs the camera station occupation step of occupying it.
  • the camera station occupancy status information exemplified above, drone camera unit 1 can be controlled, but another user is occupying and using it. However, possession is not possible, only sharing is possible. Meanwhile, free members can watch the video after watching the ad, and paid members such as monthly subscription members can watch the video without ads.
  • the occupation procedure can be completed by simply expressing the intention to occupy.
  • the transmitted information is displayed on the screen of the mobile phone, which displays the current location on the map, shows the current image of the camera, and arranges the buttons necessary to control the drone.
  • the current image is also transmitted to the TV receiver, which is a user video terminal device.
  • the user can control the drone camera unit 2 to see the images he wants to see. That is, from now on, the user generates control information for controlling the camera station of the drone camera unit 2 with reference to the control guide information received in the mobile phone, and a control information generation step of transmitting it to the server; A control information transmission step of transmitting the received control information to the platform and the camera of the drone camera unit 2 after checking whether the control information is valid after the server stores the received control information; The drone of the drone camera unit 2 moves according to the received control information, and the camera attached to the drone transmits the captured image to the server while controlling the zoom operation and the shooting direction according to the received control information; An image processing step of processing the image in a blurred image and transmitting the image when the server is capable of recognizing a human face in the received image, or processing the image in a watercolor tone through image processing if the user sets the image in watercolor tone; and an image transmission step in which the server transmits the processed image to the user image terminal device is repeatedly performed.
  • the server may transmit the image with a delay of a predetermined time. This delayed image transmission is to prevent exposure of unexpected scenes such as accident scenes.
  • the user can also control the drone camera unit 2 by making or selecting a flight plan before starting the flight.
  • the flight plan creation screen is presented on the user's mobile phone to set the flight altitude, flight route, flight speed, camera movement, and the like.
  • recommended examples or expert flight plan cases may be presented to make selection possible. For example, it can be shown to the user by using phrases that indicate the nature of the flight, such as 'comfortable flight', 'dynamic flight', 'random flight', and 'fantastic flight suggested by expert 1'.
  • the drone camera unit 2 moves the route according to the set plan.
  • the user may be displayed to other connecting users that 'the drone camera unit 2 is occupied by another user, but the image can be shared'.
  • the occupant of the drone camera unit 2 receives a portion of the advertising cost when other people access and share it, the occupant of the drone camera unit 2 will prepare his flight plan with more effort so that many people can share the video.
  • the drone itself stores information on the movable area and compares the received control information with this to control itself so that it is always located in the movable area.
  • an uncontrollable situation such as battery discharge or wind speed increase occurs, it can be programmed to return to the take-off location or land at a nearby emergency landing location according to a predetermined algorithm.
  • a control guide information transmission step is performed in which the server transmits control guide information of the submarine and the installed camera as the platform of the submarine camera unit 2 to the user's mobile phone.
  • the transmitted information is displayed on the screen of the mobile phone, and the current location can be displayed on the map and the area where the submarine can move can be displayed.
  • the user displays the desired movement path within the movable area and transmits it to the server as control information.
  • the server provides control information to the pilot of the submarine through the control information communication device, and the operator controls the manipulator and actuator that can control the movement of the submarine, and moves along the route requested by the user from the reserved time. Meanwhile, the video is transmitted to the TV receiver and aired, and the user can control the camera attached to the submarine while moving. If necessary, the submarine pilot can connect with the user by voice and listen to explanations.
  • Use example 2 is a scenario in which a user receives his/her own video channel service (refer to Fig. 9, hereinafter the same).
  • a cable TV user must use a set-top box by subscribing to cable TV through a local cable TV operator.
  • most cable TV set-top boxes provide a cable communication network, if a program is prepared in the cable set-top box, it is possible to configure the user to directly use the video service of the present invention by pressing the cable TV remote control. In this case, the user may pay an additional fee and configure the operation method in the form of using the video service of the present invention through cable TV.
  • the video subject setting screen appears on the TV receiver screen.
  • the user can set a desired image subject on this image subject setting screen or select a desired image subject from a preset image subject list.
  • the video topic list is transmitted by the server to the cable TV set-top box, which is a user terminal device, and the video topic is set by reflecting the location where the camera is installed, the weather at the location, and the properties of the location.
  • a user it is possible for a user to set a video subject with a vocabulary such as 'Korea, rain, beach'.
  • the theme in natural language such as 'walking on the beach in the rain' or 'flying in the moonlit night sky'.
  • the server can analyze these natural words to find keywords such as 'rain, beach, movement', 'night, moon, sky, movement' and use it to classify cameras.
  • the server analyzes the characteristic information (keywords) of the cameras installed in various places in real time and classifies each camera into location, weather, and location properties.
  • the type of platform and the movement route can also be used as a criterion for classification. For example, if the video subject set by the user is 'Europe, sunny day, forest', the video service system finds and presents to the user the camera(s) that can provide images of the currently clear sunlight shining through the forest among the cameras installed in the forests of Europe. . At this time, you can present sound sources that would be good to be added to the video. Sound sources can be stored and provided by the server, or other music sites can provide services in the form of streaming in real time. Also, if the user removes the sound source, it can be set with only the scene sound without the sound source, or it can be set by synthesizing the site sound and the sound source.
  • the image service system selects images that contain all of 'Europe', 'Forest' and 'Sunshine' from the images of the camera stations and stores the images of 'European sunny forest' in the user's set-top box. It is transmitted in 5 minute intervals, but in real time, Vivaldi's four seasons and field sounds are synthesized and provided.
  • the video composition information selected by the user can be used again after being saved in the user settings with a name. However, since the videos are provided in real time even when the same video programming information is selected, you can enjoy real-time video rather than the same video. On the other hand, if there is no video suitable for the video topic selected by the user or insufficient, the user's choice can be increased by displaying the recorded video as 'recorded video'.
  • the server finds the keyword 'moon, night, sky, movement' and then uses the date and time information to specify the region with the moon.
  • the user can select the desired image(s) from among them, create image schedule information and transmit it to the server, so that the user can receive the desired images through the cable TV set-top box as described above.
  • the server selects videos that fit the subject and transmits the images sent by drones or hot air balloons that cut the moonlit night sky to the user's set-top box at 10-minute intervals, but by synthesizing Chopin's Nocturne with the sound of the scene in real time.

Abstract

플랫폼에 설치된 카메라를 포함하는 카메라스테이션을 사용자가 직접 조종하면서 영상을 볼 수 있도록 구성된, 관광지나 경승지, 기타 관심장소의 영상을 제공하는 카메라서비스에 관한 발명이다. 이동가능한 또는 고정된 플랫폼에 설치된 카메라를 카메라서비스 서버를 통해 사용자가 직접 조종하면서 관광지나 경승지, 기타 관심장소의 영상을 실시간으로 볼 수 있다. 사용자는 상기 카메라스테이션에 유무선 네트워크로 연결되어 소정 시간 동안 카메라의 방향, 줌인, 줌아웃 등을 조종하는 것이 가능하다. 사용자가 카메라를 독점하여 사용하고 싶으면 요금을 지불할 수 있다.

Description

카메라서비스 시스템 및 방법
본 발명은 관광지나 경승지, 기타 관심현장, 또는 차량, 요트, 헬리콥터, 열기구, 드론 등에 설치된 카메라를 사용자가 직접 제어하여 촬영하고, 촬영 영상을 TV, PC, 휴대기기 등을 통해 관람할 수 있는 카메라서비스 시스템과 그 방법에 관한 것이다.
대부분의 사람들은 기본적으로 자기가 가 보지 못한 곳에 대한 동경이 있고 가본 곳에 대한 추억이 있다. 특히 사람들에게 많이 알려진 관광지나 경승지는 많은 사람들이 방문하며 가보고 싶어한다. 그러나 시간과 비용의 제약으로 관광지나 경승지를 직접 방문하는 것은 만만치 않다. 또한 가끔 사람들은 퇴근길에 문득 해지는 것을 보고 싶기도 하고, 커피를 마시다 해 뜨는 것을 보고 싶기도 하며, 바닷가를 드라이브하거나 숲길을 걷고도 싶다. 그러나 현실적으로 바로 해당 장소로 이동하는 것은 불가능하므로 상상에 그치게 된다.
상기와 같은 욕구는 유튜브(Youtube)로 대표되는 영상사이트나 구글맵을 통하여 일정 부분 해소가 가능하다. 즉 다른 사람이 올린 영상들 중에서 원하는 관광지나 경승지의 영상을 찾아보는 방식으로 일부분 해소가 가능하다. 또한 다양한 곳의 영상을 실시간으로 중계하는 영상사이트를 통하여 특정지역의 영상을 실시간으로 보는 것도 가능하다. 예를 들어 독도의 영상은 실시간으로 독도관련 사이트에서 볼 수 있다.
그러나 이들 사이트에서 영상을 보더라도 자신이 카메라를 실시간으로 직접 조작하는 것은 불가능하고 나아가 드론이나 차량과 같이 카메라 설치된 플랫폼을 실시간으로 직접 이동시키며 얻어지는 영상을 보는 것은 거의 불가능하다.
관광, 여행 등의 경우뿐만 아니라 공사현장, 부동산, 맛집 등의 관심장소에 대해서도 마찬가지이다.
본 발명에서는 이러한 사용자의 필요성에 부응하기 위하여, 플랫폼에 설치된 카메라를 사용자가 직접 조종하면서 영상을 볼 수 있도록 관광지나 경승지, 기타 관심장소의 영상을 제공하는 카메라서비스를 제안하고자 한다.
상기 과제를 해결하기 위하여 본 발명의 카메라서비스 시스템 및 방법은 이동가능한 또는 고정된 플랫폼에 설치되고 조작가능한 카메라로 구성되는 카메라스테이션을 카메라서비스 서버를 통해 사용자가 직접 조종하면서 관광지나 경승지, 기타 관심장소의 영상을 사용자 단말장치로 실시간으로 볼 수 있는 기능을 갖는다. 사용자는 상기 카메라스테이션에 유무선 네트워크로 연결되어 소정 시간 동안 플랫폼의 이동과 카메라의 방향, 줌인, 줌아웃 등을 조종하는 것이 가능하다. 사용자가 카메라스테이션을 독점하여 사용하고 싶으면 요금을 지불할 수 있다. 이때 본 발명의 카메라서비스시스템은 하나의 플랫폼에 다수의 카메라가 설치되는 경우에는 카메라 수에 상응하는 다수의 카메라스테이션이 존재하는 것으로 인식하지만, 기계적인 촬영방향제어 대신에 파노라마식 영상을 만들고 그중 일부를 촬영방향에 맞추어 제공하는 복수의 카메라가 결합된 파노라마 카메라유닛은 하나의 카메라로 인식한다.
카메라가 설치되는 플랫폼은 관심장소에 설치된 고정형일 수 있고, 드론, 자동차, 기차, 보트, 잠수함, 로켓, 비행기, 헬리콥터, 열기구, 사람 등 이동형일 수 있다. 이동형 플랫폼 중, 드론이나 무인자동차와 같은 무인 플랫폼의 경우에는 사용자가 네트워크를 통하여 서버에, 또는 플랫폼 내의 컴퓨터에, 이동경로를 지정하거나 플랫폼을 실시간으로 제어하는 것이 가능하다. 한편, 자동차, 기차, 요트, 열기구 등의 유인 플랫폼의 경우에 사용자는 유인 플랫폼의 운전자/조종사에게 이동경로에 대한 정보를 제공하고 이에 따라 조종사가 유인 플랫폼을 이동시키는 방식으로 이동경로를 지정할 수 있다. 이동경로에 대한 정보를 사용자와 플랫폼이 주고받기 용이하도록 하기 위하여 관심장소의 현장지도와 제어화면을 제공하는 것이 바람직하다. 한편 실시간으로 플랫폼을 제어하는 경우 사용자 단말장치를 사용자 영상단말장치와 사용자 제어단말장치로 분리해서 사용하는 것이 보다 바람직하다.
추가적으로 다수의 관심장소에 카메라스테이션이 설치되어 있을 때에는 사용자가 원하는 특정 카메라스테이션을 선택할 수 있다. 사용자는 자신이 선택한 해당 카메라스테이션으로부터 촬영 영상을 제공받을 수 있다. 이 경우에 사용자는 특정 지역이나 특정 주제(예를 들어 석양, 숲, 바닷가, 보름달이 있는 밤, 비 오는 거리 등)로 다수의 카메라스테이션을 그룹으로 묶어 자기만의 영상들을 제공받을 수 있다. 이 경우에 영상들의 제공은 사용자가 설정한 방식에 따라 순차적으로 이루어질 수 있다.
나아가 사용자가 카메라를 줌인 조종할 때에, 사람의 얼굴이나 특정 부위가 일정 크기 이상이 되면 줌인을 강제로 중단시키거나 모자이크처리할 수 있다. 한편, 상호나 전화번호, 차량번호 등의 개인정보의 경우에는 줌인은 계속 가능하나 식별이 불가능하도록 모자이크처리하고, 상호나 전화번호, 차량의 소유자가 광고요금을 낸 경우에 모자이크 해제를 하도록 카메라서비스를 운용할 수 있다.
본 발명의 카메라서비스 시스템은 촬영 영상을 실시간으로 그대로 사용자에게 제공할 수도 있고, 영상처리기술(예를 들어, 이미지프로세싱)로 처리된 영상(예를 들면 파스텔화, 수채화 등의 그림, 또는 만화 형식으로 이미지프로세싱된 영상) 또는 특정 이미지(문자, 기호열, 사진 등)와 합성하여 제공할 수도 있다.
영상의 음향은, 원음(현장음)을 그대로 출력할 수 있다. 그러나 사용자가 사전 설정한 음향제어정보에 따라 원음을 제거하거나 원음에 더해 계곡 물소리, 바람소리, 파도소리, 새소리, 숲속에서 녹음된 소리, 음악 등의 배경음을 영상에 삽입하여 제공할 수도 있다. 또는 사용자의 휴대기기를 통해 음원사이트에 연결하여 음원을 제공받아 영상과 함께 재생하는 것도 가능하다.
사용자는 카메라스테이션을 독점하여 사용하고 싶으면 서비스 사용 요금을 지불한다. 요금을 지불한 사용자는 소정 시간 동안 카메라의 방향과 줌인/줌아웃 등을 조종하여 영상서비스를 받을 수 있다.
카메라스테이션 점유자(예를 들어, 요금을 지불한 독점 사용자)의 의사에 따라 해당 카메라스테이션의 영상은 무료로 영상을 보려는 타인에게 공유될 수 있다. 무료영상을 보는 사람들에겐 광고가 붙은 영상이 제공되고 광고 수입은 해당 카메라스테이션 점유자와 소정의 비율로 나눌 수 있다. 이와 같이 제3자가 광고를 보고 영상을 관람할 수 있게 하고 사용요금을 나누어 분담할 수 있는 것이다. 이 경우에 분담액은 사용자 계정에 입금되어 사용요금과 상계하거나 현금으로 반환할 수 있다.
상술한 본 발명의 개념은 이후에 도면과 함께 설명하는 구체적인 실시예를 통하여 더욱 명확해질 것이다.
본 발명에 따르면 원하는 관광지나 경승지, 기타, 관심장소의 영상을 기존의 웹사이트에서 수동적으로 관람하는 것을 뛰어넘어 사용자가 직접 카메라를 실시간으로 조종할 수 있고, 나아가, 드론이나 차량과 같이 카메라 설치 플랫폼을 실시간으로 직접 이동시키며 얻어지는 영상을 관람할 수 있다. 사용요금을 내지 않는 제3자는 광고를 보고 영상서비스 시스템에 접속하여 무료로 영상을 관람할 수 있다.
본 발명은 또한 관심장소에 직접 가서 볼 때에 필연적인 사람들 간의 대면 접촉에 의한 바이러스, 병균, 세균 등의 감염 가능성을 크게 줄일 수 있다.
도 1은 본 발명에 따른 카메라서비스 시스템의 구성도
도 2a와 도 2b는 본 발명에 따른 카메라스테이션(10)의 구성도
도 3a는 유인 플랫폼(12a)의 구성도
도 3b는 무인 플랫폼(12b)의 구성도
도 4는 제3자 서비스 인증 단계의 순서도
도 5a는 본 발명에 따른 카메라서비스 시스템의 제어정보 흐름도
도 5b는 본 발명에 따른 카메라서비스 시스템의 미디어정보 흐름도
도 6a, 도 6b는 카메라서비스 서버(30)의 구성 예시도
도 7a~도 7c는 사용자 단말장치(40)의 다양한 구현 예시도
도 8 및 도 9는 본 발명에 따른 카메라서비스 방법의 프로세스 구성도
이하에서는 앞에서 소개한 본 발명의 사상을 구체적으로 구현한 실시예를 설명한다. 그러나 본 발명의 기술적 범위는 이하에서 설명하는 실시예 및 도면에 한정되는 것이 아니다. 특허청구범위의 합리적 해석에 의해 정해지는 것이다.
도 1은 본 발명에 따른 카메라서비스 시스템의 개략 구성도이다.
이동가능한 또는 고정된 플랫폼에 설치되어 관광지나 경승지, 기타 관심장소를 촬영하는 한 대 이상의 카메라가 포함된 카메라스테이션(10) C1, C2, …, CN이 있다. 카메라스테이션(10)들은 통신망(20)을 통하여 카메라서비스 서버(30)에 연결된다. 사용자는 이 카메라서비스 서버(30)에 통신망(20)을 통하여 접속하고 사용자 단말장치(40) U1, U2, …, UN을 사용하여 카메라서비스 서버(30)를 통해 카메라스테이션(10)에 연결되고 소정 시간 동안 카메라스테이션(10)을 조종하고 영상을 보게 된다. 사용자가 카메라스테이션(10)을 독점하여 사용하고 싶으면 사용요금을 지불한다.
도 2a를 참조하면, 카메라스테이션(10)내에서 카메라(13)는 플랫폼(12)에 설치되는데, 일반적으로 플랫폼(12)은 카메라(13)의 이동을 담당하고 영상과 음향은 카메라(13)가 담당하는 것이 바람직하다. 또한 카메라스테이션(10) 하나당 하나의 통신장치를 갖는 것이 바람직하므로 카메라서비스 서버(30)와의 연결은 전적으로 플랫폼(12)이 담당하고 카메라와 주고받는 정보는 플랫폼(12)과 카메라(13) 사이에 별도의 전용 통신선로를 두어 다루는 것이 좋다. 도 2a는 이를 설명하는 것이다.
도 2b는 별도의 카메라스테이션 제어부(11)를 두고 플랫폼(12)과 카메라(13)를 모두 카메라스테이션 제어부(11)에 연결하는 방식을 나타낸다. 이때 카메라스테이션 제어부(11)가 통신망을 통해 카메라서비스 서버(30)와의 통신을 담당하게 된다. 카메라스테이션(10)은 관심장소에 고정될 수도 있고(고정식 카메라스테이션), 자체적으로 이동 가능하여 사용자에게 다양하고 입체적인 영상을 제공(이동식 카메라스테이션)하도록 할 수도 있다. 이동식 카메라스테이션은 이동식 플랫폼을 사용하게 되는데 이 경우의 플랫폼으로는 자동차나 기차와 같은 지상이동기기, 드론 또는 열기구나 비행기/헬리콥터와 같은 비행기기, 보트나 요트와 같은 해상이동기기, 우주발사체와 같은 우주비행기기, 그리고 잠수함과 같은 수중이동기기 등을 사용할 수 있고, 심지어는 사람을 이동식 플랫폼으로 활용하여 사람이 카메라를 들고 이동하는 식으로 카메라스테이션(10)을 구성할 수도 있다. 한편 카메라스테이션(10)이 이동식 플랫폼을 이용하는 경우에는, 사용자단말장치(40)에 이동 경로가 지도상에 표시되어 사용자가 쉽게 카메라의 이동경로를 알 수 있도록 한다.
카메라스테이션(10)이 비행기/헬리콥터, 자동차, 열기구, 보트, 지상이동기기, 해상이동기기, 비행기기, 우주비행기기, 수중이동기기 등 운전자/조종사가 있는 유인 플랫폼을 이용하는 경우와 인간 그 자체인 경우에는, 플랫폼의 운전자 또는 조종사에게 사용자가 이동경로에 대한 정보를 제공하여 운전자나 조종사가 유인 이동플랫폼을 이동시켜 사용자가 원하는 위치로 플랫폼을 이동시킴으로써 카메라스테이션(10)이 이동하게 된다.
도 3a는 이를 나타낸다. 유인 이동플랫폼(12a)은 사용자가 사용자 단말장치(40)로 네트워크를 통하여 전송한 조종을 위한 제어정보를 수신하여 플랫폼 운전자 또는 조종사에게 표출하는 제어정보 통신기(121); 운전자 또는 조종사가 플랫폼(12a)의 이동을 제어하도록 하는 조종기(122); 이 조종기와 연결되어 플랫폼(12a)을 이동시키는 구동기(123)를 구비한다. 이에, 운전자 또는 조종사는 상기 제어정보 통신기(121)에 표출된 제어정보에 따라 조종기(122)를 사용해 구동기(123)를 제어하여 플랫폼(12a)의 이동을 제어한다. 따라서 조종기(122)와 구동기(123)를 결합하면 실질적으로 해당 유인 플랫폼 그 자체일 수 있다. 한편 이동경로에 대한 정보를 사용자(즉, 사용자 단말장치(40))와 플랫폼(12a)이 주고받을 때에는 현장 지도와 제어화면 등이 사용자 및/또는 유인 플랫폼의 운전자 또는 조종사에게 제공된다. 또한 사용자와 유인플랫폼의 운전자 또는 조종사 사이에 음성채널을 보조적으로 추가하여 사용할 수 있다. 다른 한편, 카메라스테이션(10)이 드론이나 무인자동차와 같이 자율이동이 가능한 지상이동기기, 해상이동기기, 비행기기, 우주비행기기, 수중이동기기 등일 경우의 무인 이동플랫폼(12b)에는, 도 3b와 같이 통신망을 통하여 카메라서비스 서버(30)를 통해 제어정보를 수신하여 제어정보에 따라 무인 이동플랫폼(12b)의 이동을 제어할 수 있는 자율조종기(124)와, 이 자율조종기와 연결되어 플랫폼(12b)을 이동시키는 자율구동기(125)가 구비된다. 이때에 상기 자율조종기(124)는 수신된 제어정보를 기설정된 동작가능범위정보와 비교하여 제어정보가 동작가능범위 내에 있는 경우에만 제어정보에 따라 플랫폼(12b)의 자율이동을 조종하는 것이 바람직한데 동작가능범위를 검토하는 기능은 카메라서비스 서버(30)에 구현할 수도 있다. 따라서 자율조종기(124)와 자율구동기(125)를 결합하면 드론과 같은 것이 되어, 카메라서비스 서버(30)의 명령에 따라 동작이 제어되고 영상을 전송하는 기능을 가지는 무인 플랫폼 그 자체를 의미하게 된다.
이러한 자율이동이 가능한 무인 플랫폼(12b)의 경우 이동가능영역에 대한 정보를 보관하고 수신되는 제어정보를 이와 비교하여 자신이 항상 이동가능영역에 위치하도록 스스로를 통제할 수 있다. 또한 배터리방전, 풍속증가, 교통사고 등 통제가 안 되는 상황이 발생하면 정해진 알고리즘에 따라 출발한 자리로 복귀하거나 가까운 비상대기위치에 이동하여 대기하는 기능을 가질 수 있다.
다음으로 카메라스테이션(10)이 다수 설치되어 있을 때에 사용자는 특정 카메라스테이션(10)을 선택하여 영상들을 제공받는 것이 가능하다. 이 경우에 사용자는 특정 지역이나 특정 주제(예를 들어 석양, 숲, 바닷가, 보름달이 있는 밤, 비오는 거리 등)로 다수의 카메라스테이션(10)을 그룹으로 묶어 자기만의 영상을 순차적으로 자동적으로 제공받을 수 있다. 이를 위하여 영상서비스 서버(30)는 복수의 카메라스테이션(10)이 제공하는 영상들을 키워드로 검색하는 기능을 제공할 수 있다. 한편 사용자는 자신이 골라낸 각각 카메라스테이션들의 영상제공 시간과 순서를 설정하여 자동으로 카메라스테이션들이 순차적으로 영상을 제공하도록 할 수 있다.
또한 본 발명은 제3자를 카메라서비스 서버에 접속가능하게 함으로써 서비스범위를 늘리는 것이 가능하다. 즉, 카메라서비스 사업자가 보유한 카메라스테이션 이외에, 카메라스테이션을 소유하고 있는 제3자가 본 발명의 영상서비스 사업자에게 자신의 카메라스테이션을 제공하고 수수료를 받거나, 제공된 카메라스테이션의 사용에 의해 발생하는 수익을 공유할 수 있다. 이 경우에 제3자는 먼저 자신이 제공하려는 카메라스테이션과 카메라서비스의 성격을 규정하여 영상서비스 사업자에게 승인을 받아야 하고 승인된 경우에 한해서만 카메라스테이션을 카메라서비스 시스템에 접속하고 카메라서비스를 제공할 수 있을 것이다. 사업자는 승인시에 카메라스테이션에 사용되는 플랫폼과 카메라의 제어 및 통신망 접속과 관련된 프로토콜이나 장비를 점검하여 호환성을 확보하여야 할 것이다. 예를 들어 제3자가 경관 좋은 자기 건물 옥상에 카메라스테이션을 설치하고 사업자에게 임대하여 수수료를 받거나 제3자가 자신의 차량이나 요트, 비행기, 열기구 등에 카메라를 달아 카메라스테이션을 구성한 후 경관이 좋은 곳을 드라이브, 항해, 비행하는 형식으로 카메라서비스를 제공하는 것이 가능하다. 이 경우에는 지도상에 카메라스테이션의 이동경로, 서비스개시 시각(예를 들면 13:00시), 및 서비스 제공시간(예를 들면 15분), 샘플영상 등을 함께 표시하여 사용자가 쉽게 알아볼 수 있도록 하는 것이 바람직할 것이다.
이렇게 함으로써 본 발명의 카메라서비스에 보다 많은 사람들이 주체로서 참여하도록 유도하여 카메라서비스 사업의 활성화를 꾀할 수 있다. 이 경우에, 제3자는 자신의 카메라스테이션을 계약에 따라 사업자에게 제공하게 될 것인데, 일 실시형태로 도 4와 같이, 카메라스테이션 보유자가 플랫폼 관련정보, 카메라관련정보, 및 서비스계획을 포함한 자신의 카메라스테이션정보를 카메라서비스 사업자에게 제공하는 단계(S10); 카메라서비스사업자가, 제공된 카메라스테이션정보를 확인하고 시험하여 적합할 때 등록여부를 결정하는 단계(S20); 등록이 결정되면(S30) 해당 카메라스테이션을 카메라서비스시스템에 등록하고 사용자에게 공개하는 단계(S40)를 거쳐서 사용자들이 해당 카메라스테이션을 선택하여 사용할 수 있도록 할 수 있다.
이 때 카메라스테이션정보에는 이동식인지 고정식인지 여부, 고정식인 경우 위치 및 고도에 대한 정보가 포함되고, 이동식인 경우 자율이동 플랫폼인지 유인 플랫폼인지에 대한 정보, 이동가능경로에 대한 정보가 포함된다. 또한 카메라정보에는 줌기능, 방향제어 및 해상도에 대한 정보가 포함된다.
도 5a는 본 발명의 카메라서비스에 따른 제어정보의 흐름을 나타내는 도면이다. 사용자는 사용자단말장치(40)를 이용하여 하나 또는 복수의 카메라스테이션(10)을 선택하는데 이는 카메라스테이션선택부(310)가 담당한다. 사용자가 선택한 카메라스테이션(10) 관련정보는 사용자계정정보에 보관된다. 다음으로 사용자 제어정보는 사용자단말장치(40)에서 생성되고 카메라서비스서버(30)에 전달된다. 다음 카메라서비스서버(30) 내의 카메라스테이션조종부(320)에서 사용자제어정보와 카메라스테이션(10)의 상태를 고려한 최종제어정보를 만들어 카메라스테이션(10)으로 전송한다. 카메라스테이션(10)은 전달된 최종제어정보에 따라 플랫폼(12)과 카메라(13)를 제어한다. 사용자 제어정보는 실시간으로 생성될 수도 있으나, 사용자가 카메라서비스 서버(30)가 제시하는 제어사례 중에서 선택할 수도 있다. 또한 이렇게 생성된 제어정보는 사용자가 설정한 편성계획에 따라 사용자계정에 저장되었다가 카메라스테이션(10)들에 전달되어 제어에 이용될 수도 있다.
도 5b는 본 발명의 카메라서비스에 따른 미디어정보(비디오정보+오디오정보)의 흐름을 나타내는 도면이다. 카메라(13)에서 생성된 미디어정보는 카메라스테이션(10)을 거쳐 카메라서비스 서버(30)의 영상관리부(330)에 전달된다. 영상관리부(330)에 전달된 영상은 선택적으로 저장되는 한편, 도 6a에서 설명할 영상처리부(340), 음향처리부(350), 영상분석부(360), 과금광고처리부(370)를 거쳐서 영상출력부(380)를 통하여 사용자 단말장치(40)로 전달된다.
도 6a는 카메라서비스 서버(30)의 구성의 일 실시예이다. 도 6에 나타낸 영상서비스 서버(30)의 구성은 하나의 예시일 뿐으로, 구현예에 따라서는 수 개의 구성요소들이 병합되어 하나의 구성요소로 구현될 수도 있고, 일부 구성요소가 제외되어 별도로 구현되거나 카메라스테이션(10)의 플랫폼(12)이나 카메라(13)로 옮겨갈 수도 있다. 실질적으로는 복수의 워크스테이션이나 DB서버로 구성되는 것이 바람직할 것이다.
카메라스테이션선택부(310)는, 카메라서비스시스템(30)에 연결된 복수의 카메라스테이션(10)들에 대한 정보를 제시하고 사용자가 선택할 수 있도록 돕는 기능을 담당한다. 이를 위하여 카메라스테이션(10)들마다 고정키워드(플랫폼정보, 카메라정보 등)와 변동키워드(날씨,시간,이동경로 등)를 부여하여 관리하며 사용자는 필요시 복수의 카메라스테이션(10)을 선택하여 자신의 설정에 따라 이들 카메라스테이션(10)들이 제공하는 영상들을 편성하여 사용자단말장치(40)로 볼 수 있다. 카메라스테이션조종부(320)는, 사용자가 입력하는 제어정보를 지정된 카메라스테이션(10)으로 전송하여 플랫폼(12)의 이동을 제어하거나 카메라(13)의 방향전환(틸팅, 회전 등), 줌인, 줌아웃 기능 등을 제어한다. 이 과정에는 제어결과를 확인하기 위한 부수적인 정보교환이 추가적으로 포함될 수 있다. 구체적으로 도 6b와 같이 카메라스테이션조종부(320)는 플랫폼조종부(321)와 카메라조종부(322)로 나누어진다.
플랫폼조종부(321)는 사용자가 입력하는 제어정보를 지정된 카메라스테이션(10)에 전송하여 해당 카메라스테이션의 플랫폼(12) 이동, 즉 카메라스테이션(10)의 이동을 제어하는 것이다. 이 경우 플랫폼(12)이 자율이동 가능한 경우에는 플랫폼의 자율조종기(124)에 제어정보가 전달되고 유인 플랫폼인 경우에는 제어정보통신기(121)에 전달되는 것이 바람직하다.
카메라조종부(322)는 카메라의 방향전환(틸팅, 회전 등), 줌인, 줌아웃 기능 등을 제어할 수 있는데 카메라의 방향전환은 경우에 따라 플랫폼조종부(321)가 담당할 수도 있다. 이를 위하여 카메라조종부(322)는 사용자가 입력한 제어정보 중 관련정보를 카메라스테이션(10)의 카메라(13)에 전달하는 것이 바람직하다. 한편 카메라조종부(322)는 줌인 기능을 실행하는 경우에, 사람의 얼굴이나 특정 부위가 일정 크기 이상으로 확대되지 않도록 줌인 기능을 자동으로 중단하는 부기능을 포함할 수 있다. 또한 이러한 기능을 위하여 영상크기에 대한 정보를 영상분석부(360)로부터 제공받을 수 있다.
카메라(13)의 줌 동작(줌인, 줌아웃)은 디지털줌 방식으로 수행될 수 있고, 카메라(13)의 촬영방향 제어는 복수의 카메라로부터 얻어지는 2차원 파노라마 영상의 일부를 제공하는 방식으로 수행될 수 있다. 여기서 상기 카메라선택부(310)와 카메라조종부(320)가 서버(30)에 포함되는 것으로 예시하였지만, 이에 한정되는 것은 아니다. 즉, 위에서 언급한 것과 같이, 카메라선택부(310) 및/또는 카메라조종부(320)가 서버(30)가 아닌 복수의 카메라스테이션(10)의 제어를 담당하는 보조서버(미도시)에 구현되고 서버(30)는 사용자의 제어정보를 보조서버에 전달하여 보조서버가 직접 카메라스테이션(10)을 제어하는 구조도 가능하다.영상관리부(330)는 카메라(13)로 촬영된 영상을 수신하여 선택적으로 저장하고 분석 및 처리하여 사용자에게 제공한다. 이를 위하여 영상관리부(330)는 영상을 영상분석부(360)를 이용하여 영상을 분석하여 영상과 관련된 키워드를 부여하고 이를 상기 카메라스테이션선택부(310)를 통해 사용자에게 제공함으로써 사용자가 쉽게 영상들을 검색하여 자신만의 영상을 편성할 수 있는 기능을 제공한다. 필요시 기제공되는 카메라스테이션의 정보를 사용할 수 있다. 즉 실시간 기상정보와 위치정보와 영상분석정보를 이용하여, 예를 들어 하와이 와이키키 해변에서 비가 오는 영상은 '하와이 와이키키, 바닷가, 비'와 같은 키워드를 가지게 되고 하와이 마우이섬의 할레아칼라 화산 정상에서 해가 뜨는 영상은 '하와이 마우이 할레아칼라, 화산 일출'과 같은 키워드를 가질 수 있다. 이와 유사하게 사용자가 '오로라'를 검색하면 현재 오로라가 발생한 지역의 카메라 영상들을 찾아서 제공할 수 있다.
영상처리부(340)는 영상을 주어진 조건에 따라 처리하는 기능을 담당하는데 먼저 모자이크처리기능을 들 수 있다. 영상처리부는 카메라조종부(322)를 통해 줌인 기능을 실행하는 경우에 사람의 얼굴이나 특정 부위가 일정 크기 이상으로 확대되어 식별되지 않도록 줌인 기능을 자동으로 중단하는 상기 카메라조종부(322)의 줌인 중단 부기능과 별개로, 얼굴이나 특정 부위 등에 자동으로 모자이크, 블러 등의 변조처리를 한다. 영상처리부(340)는 또한 상호, 전화번호, 차량번호 등의 개인정보에 대해서 (줌인의 수행은 계속 수행가능하나) 식별 불가능하게 자동으로 모자이크 또는 블러 처리를 하는 기능을 포함할 수 있다. 이러한 상호나 전화번호, 차량번호의 경우에는 해당 상호나 전화번호, 차량의 소유자가 광고요금을 내면 모자이크 또는 블러 처리를 해제한다. 이를 위해 후술할 과금광고처리부(370)가 연계된다. 과금광고처리부(370)로부터 정보를 받아, 상호나 전화번호, 차량번호 등의 영상 변조처리시에는 영상 내의 간판을 식별하여, 그 정보가 기설정된 광고주정보에 있는지 탐색하여 광고주정보에 있는 경우에는 영상변조처리를 하지 않는 방식으로 구현할 수 있다.
한편, 카메라(13)로 촬영된 영상은 영상관리부(330)와 영상출력부(380)를 통해 실시간으로 출력될 수도 있지만, 영상처리부(340)를 거쳐 영상처리기술(이미지프로세싱)로 처리된 영상(예를 들면 파스텔화, 수채화 등의 그림이나 만화 등의 형식으로 프로세싱된 영상)이 출력될 수도 있다. 또한 특정 이미지(문자, 기호열, 사진 등)와 합성되어 출력될 수도 있다.
음향처리부(350)는 영상의 음향을 처리하여 출력한다. 원음(현장음)을 그대로 출력, 또는 사용자가 기설정한 음향제어정보에 따라 원음을 없애거나 원음에 더하여, 계곡 물소리, 바람소리, 파도소리, 새소리, 숲속에서 녹음된 소리, 음악 등의 배경음을 합성하여 제공, 또는 음원사이트에 연결하여 사용자의 휴대기기로 음원을 제공받아 재생하는 것 등이 가능하다.
본 카메라서비스 서버(30)에는 또한 상기 기능요소들 이외에 과금광고처리부(370)가 포함된다.
카메라스테이션(10)을 독점 사용하기 위하여 요금을 낸 사용자는 특정 시간 동안 카메라스테이션(10)의 조종이 가능한데, 이는 요금처리부(380)와의 연계에 의해 수행될 수 있다. 한편, 카메라 점유자의 의사에 따라 해당 카메라스테이션(10)의 영상은 무료로 영상을 보려는 사람에게 공유될 수 있다. 무료영상을 보는 사람들에겐 광고가 붙게 되고 광고수입은 해당 카메라(13)에 대한 사용 요금을 낸 사람과 적절한 비율로 나눌 수 있다. 제3자가 광고를 보고 영상에 접속하여 관람하면 사용요금을 카메라 사용자(점유자)와 나누어 분담한다. 분담액은 사용자의 계정에 입금되어 사용자가 지불한 사용 요금과 상계하거나 현금으로 반환한다. 본 실시예에서는 기능을 설명하기 위하여 영상처리부(340), 음향처리부(350), 영상분석부(360), 과금광고처리부(360) 등을 분리 구성하였으나 실제로 구현시에는 소프트웨어와 하드웨어의 결합으로 다양하게 구현이 가능하다. 또한 순차적으로 처리하는 것이 아니라 일부 단계를 동시에 처리할 수도 있다.
도 7a ~ 7c는 사용자 단말장치(40)의 다양한 구현예를 나타낸다.
도 7a와 같이 사용자 단말장치(40)는 카메라서비스 서버(30)에 유무선 통신망을 이용하여 접속되는 전용 단말기(41)로 구현될 수 있다. 카메라서비스 시스템의 운영자가 카메라서비스에 최적화된 구성과 UI로 전용 단말기(41)를 설계할 수 있을 것이다. 전용 단말기(41)는 PC 등 범용컴퓨터일 수도 있고, 영상서비스 시스템에 특화된 아키텍처로 설계된 전용기기일 수도 있다.
또한 도 7b와 같이 사용자 단말장치(40)는 이동통신사를 통해 카메라서비스 서버(30)에 접속되는 휴대폰, 스마트폰, 태블릿PC 등의 휴대기기(42)로 구현될 수 있다. 사용자는 휴대기기(42)에 설치된 앱을 사용하여 영상서비스 서버(30)에 로그인하여 휴대기기(42)를 사용자 제어용 단말기 및 영상출력 단말기로 사용할 수 있다.
또한 도 7c와 같이 사용자 단말장치(40)는 휴대기기(42)와, TV수신기 등 영상기기(43)일 수 있다. 여기서 영상기기는 케이블 또는 위성 셋탑박스나 인터넷연결이 가능한 TV수신기일 수 있다. 이 구현예의 경우에 사용자는 자신의 휴대기기(42)를 사용자제어용 단말장치(다른 말로, 제어단말)로, 영상기기(43)를 영상출력용 단말장치(다른 말로, 영상단말)로 사용할 수 있다.
예를 들면 사용자는 휴대폰(또는 스마트폰)의 앱을 사용하여 카메라서비스 서버(30)에 로그인 한 후 자신이 가입한 케이블회사에서 제공되는 가입자정보를 입력하여 자신의 셋탑박스를 통해 TV로 영상을 수신할 수 있다. 케이블 셋탑박스에 내장된 프로그램이 일종의 VOD서비스처럼 가입자 셋탑박스를 구분하여 가입자별로 특화된 영상을 전송하는 것이 가능하므로 본 발명의 카메라서비스 서버(30)도 같은 방식으로 서비스가 가능하다.
인터넷연결이 가능한 TV수신기의 경우에는 해당 수신기에서 본 카메라서비스 서버(30)에 로그인한 후 사용자제어단말로 사용하려는 휴대폰번호를 등록하는 방식으로 해결이 가능하다. 이 경우에 사용자가 카메라서비스 서버(30)에 접속하면 자동으로 휴대폰의 앱이 활성화되어 제어단말로서의 서비스 사용이 가능해진다.
이와 같이 사용자 단말장치(40)를 사용자가 카메라(13)를 제어하는 제어단말(즉, 휴대기기)과 사용자가 영상을 수신하는 영상단말로 분리함으로써, TV와 같은 대화면 기기로 카메라 촬영된 영상을 관람하면서 자신의 휴대전화나 태블릿 등의 휴대기기를 제어단말로 편리하게 사용할 수 있다.
도 8은 상술한 카메라서비스 시스템에서 수행되는 카메라서비스 방법의 프로세스를 설명한다. 도 8을 참조하면, 본 발명에 따른 카메라서비스 방법은
- 상기 카메라서비스 서버(30)가 상기 카메라스테이션(10)의 점유상태정보를 사용자 단말장치(40)에 전송하는 점유상태정보 전송단계;
- 사용자가 단말장치(40)에 수신된 점유상태정보를 참조하여 카메라스테이션(10)을 선택하고 점유하는 카메라스테이션 점유단계;
- 상기 서버가, 점유가 완료된 상기 카메라스테이션(10)의 제어안내정보를 사용자 단말장치(40)에 전송하는 제어안내정보 전송단계;
- 사용자가 단말장치(40)에 수신된 제어안내정보를 참고하여 상기 카메라스테이션(10)의 조종을 위한 제어정보를 생성하고 이를 서버(30)로 전송하는 제어정보 생성단계;
- 상기 서버(30)가, 수신된 제어정보를 저장하고 이를 상기 카메라스테이션(10)에 전송하는 제어정보전송단계― 여기서 서버가 수신 제어정보를 저장하는 것은 사고나 문제가 발생하였을 때 사고나 문제의 원인을 확인하기 위해서임;
- 상기 카메라스테이션(10)의 플랫폼(12)은 수신된 제어정보에 따라 이동되고 상기 카메라(13)는 수신된 제어정보에 따라 줌동작 및/또는 촬영방향이 제어되어, 상기 카메라(13)가 촬영 영상을 서버(30)로 송신하는 제어 및 영상전송 단계;
- 상기 서버가, 수신된 영상을 점검하고 처리하는 영상처리단계; 및
- 상기 서버가, 처리된 영상을 사용자 단말장치로 전송하는 처리영상전송단계 ― 여기서 서버는 영상을 일정시간 지연시켜 전송할 수도 있는데, 이러한 영상의 지연송신은 사고장면 등 뜻하지 않은 장면이 노출되는 것을 막기 위한 것임 ― 를 포함한다.
여기서, 상기 카메라스테이션(10)의 점유상태정보에는 요금을 부과하기 위한 과금정보가 포함될 수 있다. 그리고 이 때 상기 카메라점유단계는 사용자가 점유상태정보를 참조하여 카메라스테이션(10)을 선택하고 과금정보에 따라 책정된 요금을 지불함으로써 완료될 수 있다.
또한, 카메라스테이션(10)의 점유상태정보에는 예약정보가 포함되고, 이때 상기 카메라점유단계는 사용자가 점유상태정보를 참조하여 카메라스테이션(10)을 선택하고 예약함에 따라 완료될 수 있다.
또한, 카메라스테이션(10)의 점유상태정보에는 광고안내정보가 포함되고, 이때 상기 카메라점유단계는 사용자가 점유상태정보를 참조하여 카메라스테이션(10)을 선택하고 안내된 광고를 봄에 따라 완료될 수 있다.
또한, 상기 제어안내정보에는 카메라스테이션(10)에 대한 순차적인 제어정보로 구성된 복수의 제어정보 사례들이 포함되고, 이 때에 상기 제어정보는 이들 제어정보사례들 중 하나일 수 있다.
한편, 상기 영상처리단계는 영상 내 사람 얼굴이 일정 크기 이상인 경우 식별 불가능하도록 이미지프로세싱을 하는 단계를 포함할 수 있다.
또한 상기 영상처리단계는 영상내 차량의 번호판이 일정크기 이상인 경우 식별 불가능하도록 이미지프로세싱을 하는 단계를 포함할 수 있다. 이 경우에, 상기 영상처리단계는 영상내의 간판을 식별한 후 그 정보가 기설정된 광고주명단에 있는 경우를 제외하고 식별 불가능하도록 이미지프로세싱을 할 수 있다.
그리고 상기 영상처리단계는 앞에서 언급한 것과 같이 카메라 영상을 그림이나 만화처럼 보이도록 이미지프로세싱을 한 후에 영상을 출력할 수 있다.
또한 상기 영상처리단계는 기설정된 음향제어정보에 따라 영상의 원래 음향과 다른 음원을 합성하거나 원래 음향을 제거하는 방식으로 처리된 음향을 영상에 결합하여 출력할 수 있다.
그리고 상기 제어정보전송단계는 수신된 제어정보가 유효한지, 즉, 제어정보가 조종가능범위 내에 포함되는지를 상기 서버(30)가 검사하는 제어정보유효성검사단계; 제어정보 유효성 검사에 의해 조종가능범위 내로 판정되면 제어정보를 상기 플랫폼과 상기 카메라에 전송하며, 조종가능범위 바깥이면 기설정된 동작을 수행하고 사용자에게 조종가능범위를 벗어났음을 경고하는 제어정보처리단계를 포함할 수 있다.
상기 영상전송단계는 상기 서버(30)가 처리된 영상을 사용자 단말장치(40)로 일정시간 지연시킨 후에 전송하는 방식을 취하여 전송할 수 있다.
도 9는 본 발명에 따른 영상서비스 방법 중 사용자가 자신만의 영상채널을 서비스받는 경우의 프로세스 흐름도이다. 이 경우는 케이블TV 사용자가 케이블TV의 리모콘을 눌러 본 발명의 영상서비스를 사용하는 경우의 프로세스를 설명한다. 따라서 이 경우의 사용자 단말장치(40)는 케이블 또는 위성 셋탑박스나 인터넷연결이 가능한 TV수신기이다.
도 9를 참조하면, 이 실시형태에 따른 카메라서비스 방법은
- 카메라스테이션(10)이 촬영 영상을 서버(30)로 전송하는 단계;
- 서버(30)가 다수 카메라스테이션(10)의 키워드를 실시간으로 분석하여 설정된 영상주제목록에 따라 해당 카메라스테이션(10)의 영상주제를 분류하는 영상주제분류단계;
- 상기 서버(30)가, 영상주제목록을 상기 사용자 단말장치(40)에 전송하는 영상주제목록전송단계;
- 사용자가 단말장치(40)에 수신된 영상주제목록에서 영상주제를 선택하는 영상주제선택단계 ― 다른 실시형태로, 사용자가 사전에 영상주제 설정 화면에서 원하는 영상주제(들)를 설정하고 서버가 이 영상주제(들)를 취합하여 영상주제목록을 만들 수도 있음;
- 상기 서버(30)가, 선택된 영상주제에 해당하는 영상(들)과 음원(들)을 골라 해당 정보를 사용자 단말장치(40)에 전송하는 영상안내정보 제시단계;
- 사용자가 단말장치(40)에 수신된 영상안내정보를 참고하여 영상(들)과 음원(들)을 선택하여 영상편성정보를 만들어 서버(30)로 전송하는 영상편성정보 생성단계; 및
- 상기 서버(30)가, 수신된 영상편성정보에 따라 영상들과 음원들을 차례대로 사용자 단말장치(40)에 전송하는 영상방영단계
를 수행한다.
여기서, 상기 카메라스테이션(10)들의 키워드는 설치위치정보, 설치위치의 자연적인 속성, 설치위치의 실시간 날씨정보, 날짜, 시간, 관측정보 등일 수 있다.
그리고 상기 플랫폼(12)이 특정 경로를 따라 이동하는 것일 때에, 상기 카메라스테이션(10)의 키위드는 플랫폼의 종류, 이동경로 등일 수 있다.
또한 상기 영상방영정보에 포함된 음원은 제3의 컴퓨터에 의해서 관리되는 시스템에 저장된 것일 수 있다.
이하, 앞에서 설명한 본 발명에 따른 카메라서비스 시스템 및 방법의 실제 사용 시나리오에 대해서 구체적인 예를 통해 설명한다.
<사용예 1>
사용자가 휴대폰에 설치된 전용 앱에서 본 발명의 카메라서비스 사이트(예를 들어, 도 1의 카메라서비스 서버(30))에 접속하여 카메라서비스를 사용하는 사용예이다. 여기서 사용자제어단말장치는 휴대폰이고 사용자영상단말장치는 TV수신기인 것으로 가정한다. 이때에 사용자는 TV수신기와 휴대폰을 각각 영상단말과 제어단말로 사용하기 위해 사전 설정을 해야 한다. 사용자영상단말장치의 설정 방식은 다음과 같다. 먼저, 사용자는 사용자영상단말장치로 지정하려는 TV수신기를 켜서 인터넷을 통해 영상서비스 서버(30)에 구축된 웹사이트에 접속한다. 그리고 TV 화면에 나타난 사용자제어단말 메뉴를 (리모콘으로) 클릭하면 TV화면에 16자리 코드가 표시된다. 사용자가 사용자제어단말장치인 자신의 휴대폰에서 영상서비스 앱을 실행시켜 표시되는 사용자영상단말 지정 메뉴를 터치하고 상기 16자리 코드를 입력하면 해당 TV수신기가 사용자영상단말장치로 지정된다.
1) 이렇게 TV수신기와 휴대폰을 설정해 놓은 후에, 사용자가 휴대폰에 설치된 전용 앱에서 제공하는 지도에서 원하는 지역을 선택한다. 예를 들어 사용자가 제주성산일출봉 지역을 선택하였다고 가정하면 TV수신기로 사업자가 홍보하는 지역의 영상이 전송되고 휴대폰의 앱에 표시된 지도에 사용가능한 카메라스테이션들이 표시된다. 여기서 카메라스테이션에는 플랫폼 유형에 따라 드론카메라, 고정식카메라, 잠수함카메라가 있다고 가정하자.
2) 카메라서비스 서버는 상기 카메라스테이션의 점유상태정보를 생성하여 이를 사용자제어단말장치인 휴대폰에 전송한다(도 8 참조. 이하 동일).
수신된 카메라스테이션 점유상태정보는 휴대폰 화면을 통해 지도상에 표시된다. 이 카메라 점유상태정보는 아이콘으로 표시될 수 있다(예를 들면 드론은 드론모양의 아이콘으로 잠수함은 잠수함모양의 아이콘으로 표시). 또는 표시에 단계를 두어, 먼저 간단하게 카메라스테이션 점유상태만 표시한 후, 사용자가 특정 카메라스테이션을 터치하면 말풍선을 표시하는 등으로 상세정보를 표시할 수 있다.
카메라스테이션 점유상태정보를 예로 들면 아래 표와 같다.
Figure PCTKR2021012745-appb-T000001
3) 이제 사용자가 휴대폰에 표시된 카메라스테이션 점유상태정보를 참조하여 카메라스테이션을 선택하고 이를 점유하는 카메라스테이션점유단계를 이행한다. 위에 예시한 카메라스테이션 점유상태정보에서, 드론카메라유닛1은 조종이 가능하나 다른 사용자가 점유하여 사용 중이므로 사용자는 '실시간영상보기'나 '저장영상보기'를 터치하여 해당 드론카메라의 영상을 볼 수 있지만 점유는 불가능하고 공유만이 가능하다. 한편 무료회원은 광고를 본 후에 영상을 볼 수 있고 월정액회원 등 유료회원은 광고없이 영상보기가 가능하다.
사용자가 드론카메라유닛2를 사용하기 원하는 경우에 드론카메라유닛2의 '사용하기'를 클릭하면 휴대폰의 앱은 팝업창을 띄워 사용시간을 입력받고, 사용요금 지불 안내 팝업화면을 띄워 요금을 받아 점유절차를 완료한다. 만일 사용요금이 무료인 경우에는 단순히 점유의사를 밝힘으로써 점유절차가 완료될 수 있을 것이다.
4) 드론카메라유닛2의 점유절차가 완료되면 서버가 드론카메라유닛2의 제어안내정보를 사용자 휴대폰에 전송하는 제어안내정보 전송단계가 수행된다.
이렇게 전송된 정보는 휴대폰 화면에 표시되는데 지도상에 현재 위치를 표시하고, 카메라의 현재영상을 보여주며 드론 조종에 필요한 버튼들을 배치하여 제공한다. 이때 현재 영상은 사용자영상단말장치인 TV수신기에도 전송된다.
이제 사용자는 드론카메라유닛2를 조종하여 자신이 보고 싶은 영상들을 볼 수 있게 된다. 즉, 이제부터는 사용자가 휴대폰에 수신된 제어안내정보를 참고하여 드론카메라유닛2의 카메라스테이션 조종을 위한 제어정보를 생성하고 이를 서버로 전송하는 제어정보생성단계; 수신된 제어정보를 서버가 저장한 후 제어정보가 유효한지를 검사한 후 드론카메라유닛2의 플랫폼과 카메라에 전송하는 제어정보전송단계; 드론카메라유닛2의 드론은 수신된 제어정보에 따라 이동하고, 드론에 부착된 카메라는 수신한 제어정보에 따라 줌동작과 촬영방향을 제어하면서 촬영된 영상을 서버로 송신하는 조종단계; 서버가 수신된 영상에 사람의 얼굴이 식별가능한 정도이면 얼굴을 흐릿하게 영상을 처리하여 전송하거나 사용자가 수채화톤으로 영상을 설정하였다면 이미지프로세싱을 통하여 영상을 수채화톤으로 처리하는 영상처리단계; 및 서버가 처리된 영상을 사용자영상단말장치로 전송하는 영상전송단계가 반복적으로 수행된다.
상기 영상전송단계에서 서버는 영상을 일정시간 지연시켜 전송할 수도 있는데, 이러한 영상 지연송신은 사고장면 등 뜻하지 않은 장면이 노출되는 것을 막기 위한 것이다. 한편 사용자는 비행을 시작하기 전에 비행계획을 만들거나 선택하여 드론카메라유닛2를 조종하는 것도 가능하다. 이때는 사용자 휴대폰에 비행고도, 비행경로, 비행속도, 카메라움직임 등을 설정할 수 있는 비행계획작성화면이 제시된다. 이때 비행계획작성화면에는 권장예시나 전문가들의 비행계획사례들을 제시하여 선택가능하게 할 수도 있다. 예를 들면 '편안한 비행', '다이내믹한 비행', '랜덤비행', '전문가1이 제시하는 환상비행'과 같이 비행의 성격을 나타내는 문구를 사용하여 사용자에게 보여줄 수 있다. 사용자가 비행계획을 선택하고 실행시키면 드론카메라유닛2는 정해진 계획에 따라 경로를 이동하게 되는데 카메라의 방향은 사용자가 수시로 조종할 수 있도록 하여 실감나는 영상을 느낄 수 있게 할 수 있다.
사용자가 드론카메라유닛2의 영상을 다른 사람들과 공유하는 것을 허용한 경우, 접속하는 다른 사용자들에게 '드론카메라유닛2는 다른 사용자가 점유 중이지만 영상은 공유될 수 있음'이 표시될 수 있다. 이때 다른 사람들이 접속하여 공유하는 경우 광고비의 일부를 드론카메라유닛2의 점유자가 받게 된다면 드론카메라유닛2의 점유자는 많은 사람들이 영상을 공유하도록 자신의 비행계획을 보다 더 공을 들여 준비할 것이다.
한편 상기 사용예 1에서 드론을 해킹하는 사고에 대비하기 위하여 드론은 자체적으로 이동가능영역에 대한 정보를 보관하고 수신되는 제어정보를 이와 비교하여 자신이 항상 이동가능영역에 위치하도록 스스로를 통제한다. 또한 배터리방전 및 풍속증가 등 통제가 안 되는 상황이 발생하면 정해진 알고리즘에 따라 이륙한 자리로 복귀하거나 가까운 비상착륙위치에 착륙하도록 프로그램할 수 있다.
5) 다음으로 사용자가 잠수함카메라유닛1을 사용하는 경우를 살펴보자. 현재시간은 오전 9시40분이라고 가정하자. 만일 사용자가 '사용하기'를 클릭하면 팝업창을 띄워 사용요금을 지불하도록 안내하는 팝업화면이 나타나고 사용자는 요금을 내고 점유절차를 완료한다. 한편 본 잠수함카메라유닛1의 경우 아직 잠수함의 출발시간인 오전 10시 전이므로 이는 카메라를 예약함으로써 점유절차를 완료한 상황이 된다.
잠수함카메라유닛2의 점유절차가 완료되면 서버가 잠수함카메라유닛2의 플랫폼인 잠수함과 설치된 카메라 제어안내정보를 사용자 휴대폰에 전송하는 제어안내정보전송단계가 수행된다. 이렇게 전송된 정보는 휴대폰의 화면에 표시되는데 지도상에 현재 위치를 표시하고 잠수함이 이동 가능한 영역을 표시할 수 있다. 사용자는 이동가능한 영역 내에서 자신이 원하는 이동경로를 표시하여 제어정보로 서버에 전송한다.
서버는 제어정보를 잠수함의 조종사에게 제어정보통신기를 통하여 제공하고 조종자는 잠수함의 이동을 제어할 수 있는 조종기와 구동기를 제어하여 예약된 시간부터 사용자가 요청한 경로를 따라 이동하게 된다. 한편 영상은 TV수신기로 전달되어 방영되는데 이동 중에 잠수함에 부착된 카메라는 사용자가 조종할 수 있다. 필요시 잠수함 조종사가 사용자와 음성으로 연결되어 설명을 들을 수도 있다.
<사용예 2>
사용예 2는 사용자가 자신만의 영상채널을 서비스받는 경우의 시나리오이다(도 9참조. 이하 동일). 예를 들어 케이블TV를 이용하는 사용자는 지역 케이블TV 사업자를 통하여 케이블TV에 가입하여 셋탑박스를 사용해야 한다. 그런데 대부분의 케이블TV 셋탑박스는 케이블 통신망을 제공하므로 케이블 셋탑박스에 프로그램이 준비되어 있다면 사용자가 케이블TV 리모콘을 눌러 바로 본 발명의 영상서비스를 이용하도록 구성하는 것이 가능하다. 이때 사용자는 추가요금을 내고 케이블TV를 통하여 본 발명의 영상서비스를 이용하는 형식으로 운영방식을 구성할 수 있다.
사용자가 리모콘을 눌러 영상서비스를 실행하면 TV수신기 화면에, 영상주제 설정 화면이 나타난다. 사용자는 이 영상주제 설정 화면에서 원하는 영상주제를 설정하거나, 사전 설정되어 있는 영상주제목록에서 원하는 영상주제를 선택할 수 있다. 영상주제목록은 서버가 사용자단말장치인 케이블TV 셋탑박스에 전송해 준 것으로, 영상주제는 카메라가 설치된 위치, 해당 위치의 날씨, 위치의 속성 등을 반영하여 설정된 것이다. 예를 들어 사용자는 '우리나라, 비, 해변'과 같은 어휘로 영상주제를 설정하는 것이 가능하다. 또한 '비 내리는 해변을 걷다' 또는 '달이 있는 밤 하늘을 날다'와 같은 자연어로 주제를 설정하는 것도 가능하다. 이 경우 서버는 이러한 자연어를 분석하여 '비, 해변, 이동', '밤, 달, 하늘, 이동' 등의 키워드를 찾아 내어 카메라를 분류하는 데 사용할 수 있다.
한편 서버는 곳곳에 설치된 카메라들의 특성정보(키워드)를 실시간으로 분석하여 기 각각의 카메라들을 위치, 날씨, 위치속성으로 분류한다. 이동가능한 플랫폼의 경우에는 플랫폼의 종류와 이동경로도 분류의 기준으로 사용될 수 있다. 예를 들어 사용자가 설정한 영상주제가 '유럽, 맑은 날, 숲'이라면 영상서비스 시스템은 유럽의 숲에 설치된 카메라 중 현재 맑은 햇살이 숲 사이로 비치는 영상제공이 가능한 카메라(들)을 찾아 사용자에게 제시한다. 이때 영상에 부가되면 좋을 음원들을 함께 제시할 수 있다. 음원들은 서버가 저장하였다가 제공할 수도 있으며 다른 음원사이트에서 실시간으로 스트리밍하는 형식으로 서비스할 수도 있다. 또한 사용자가 음원을 제거하면 음원없이 현장음만으로 설정할 수도 있고 현장음과 음원을 합성하는 방식으로 설정할 수도 있다.
이제, 사용자가 설정한 영상편성정보에 따라 총 20개 영상이 5분 간격으로 바뀌어 방영되고 음원으로 비발디의 사계(Four Seasons)가 사용되고 사용자가 현장음 20%, 음원 80%로 합성된 음향을 원하는 것이라고 가정하면, 영상서비스 시스템(서버)은 카메라스테이션들의 영상중에서 '유럽', '숲' '햇살'이 모두 포함된 영상을 골라내어 사용자의 셋탑박스에 '유럽의 햇살이 내리는 숲'의 영상들을 5분 간격으로 바꾸어 전송하되 실시간으로 비발디의 사계와 현장음을 합성하여 제공하게 된다.
사용자가 선택한 영상편성정보들은 이름을 붙여 사용자설정에 저장하였다가 다시 사용할 수 있다. 하지만 같은 영상편성정보들이 선택되었어도 영상들이 실시간으로 제공되므로 동일한 영상이 아닌 현장감있는 실시간 영상을 즐길 수 있게 된다. 한편 사용자가 선택한 영상주제에 알 맞는 영상이 없거나 부족한 경우에는 녹화된 영상을 '녹화영상'표시를 하여 제공하므로써 사용자의 선택폭을 늘릴 수도 있다.
다른 예로, 사용자가 '달이 있는 밤 하늘을 날다'를 영상주제로 선택하였다면 서버는 '달, 밤, 하늘, 이동'이라는 키워드를 찾아낸 후 날짜와 시간정보를 활용하여 달이 있는 지역을 특정할 수 있다. 또한, 해당지역에서 '하늘'과 '이동'이라는 주제어로 비행기구인 드론, 열기구, 비행기 등에 설치된 카메라들과 이동경로를 확인하여 사용자에게 제시하거나 녹화된 영상 중에 해당되는 것을 골라 낼 수 있다. 예를 들어 드론1(하와이 와이키키해변), 열기구1(터키 카마도키아)과 같이 하늘에서 이동하는 카메라를 골라내어 제시하는 것이 가능하다.
사용자는 이들 중에서 원하는 영상(들)을 선택하여 영상편성정보를 만들어 서버에 전송함으로써 위와 같이 자신이 원하는 영상들을 케이블TV셋탑박스를 통하여 서비스 받을 수 있다. 예를 들어 사용자가 설정한 영상편성정보가 영상들이 총10개이고 영상이 10분 간격으로 변경되어 방영되고 음원이 쇼팽의 야상곡(Nocturn)이고 사용자가 현장음 30%, 음원 70%로 합성된 음향을 원하는 것이라면, 서버는 주제에 맞는 영상들을 골라내서 사용자의 셋탑박스에 달이 있는 밤 하늘을 가르는 드론이나 열기구가 보내오는 영상들을 10분 간격으로 바꾸어 전송하되 실시간으로 쇼팽의 야상곡을 현장음과 합성하여 제공하게 된다.
지금까지 본 발명의 바람직한 실시예를 통하여 본 발명을 상세히 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 본 명세서에 개시된 내용과는 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야 한다. 또한 본 발명의 보호범위는 상기 상세한 설명보다는 후술한 특허청구범위에 의하여 정해지며, 특허청구의 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태는 본 발명의 기술적 범위에 포함되는 것으로 해석되어야 한다.

Claims (21)

  1. 카메라가 설치가능하도록 구성된 플랫폼과 상기 플랫폼에 설치되고 줌동작 및 촬영방향 제어 중 어느 하나가 가능한 카메라로 구성되는 카메라 스테이션;
    상기 카메라스테이션에 통신망을 통해 연결되는 카메라서비스 서버; 및
    상기 카메라서비스 서버와 통신망을 통해 연결되어 상기 카메라스테이션을 제어하는 사용자단말장치를 포함하여,
    상기 사용자단말장치가 상기 카메라스테이션의 조종을 위한 제어정보를 생성하고 이를 상기 서버로 전송하면, 상기 서버가 수신된 제어정보를 상기 카메라스테이션에 전송하고,
    상기 카메라스테이션의 플랫폼은 수신된 제어정보에 따라 이동되고, 상기 카메라스테이션의 카메라는 수신된 제어정보에 따라 줌동작과 촬영방향 제어를 수행하고,
    상기 카메라스테이션의 카메라가 촬영한 영상이 상기 서버를 통해 상기 사용자단말장치로 전송되는 것을 특징으로 하는 카메라서비스 시스템.
  2. 제1항에 있어서, 상기 플랫폼은 고정체인 것을 특징으로 하는 카메라서비스 시스템.
  3. 제1항에 있어서, 상기 플랫폼은 조종자의 조종으로 이동가능하며, 통신망을 통하여 상기 제어정보를 수신하여 상기 플랫폼의 조종자에게 표출하는 제어정보수신기, 조종자가 플랫폼의 이동을 제어할 수 있는 조종기, 및 상기 조종기와 연결되어 상기 플랫폼을 이동시키는 구동기를 포함하는 카메라서비스 시스템.
  4. 제1항에 있어서, 상기 플랫폼은 자율 이동이 가능하며, 통신망을 통하여 상기 제어정보를 수신하여 제어정보에 따라 플랫폼의 이동을 제어하는 자율조종기, 및 이 자율조종기와 연결되어 플랫폼을 이동시키는 구동기를 포함하되,
    상기 자율조종기는 수신된 제어정보를 사전 설정된 동작가능범위정보와 비교하여 수신된 제어정보가 사전 설정된 동작가능범위에 있는 경우에 상기 제어정보에 따라 플랫폼의 이동을 제어하는 것을 특징으로 하는 카메라서비스 시스템.
  5. 제1항에 있어서, 상기 카메라가 촬영한 영상 내 사람 얼굴이 사전 설정된 크기 이상인 경우에 식별 불가능하도록 변조하는 영상처리부를 추가로 포함하는 카메라서비스 시스템.
  6. 제1항에 있어서, 상기 카메라가 촬영한 영상 내 개인정보를 식별불가능하도록 변조하고, 상기 카메라가 촬영한 영상을 이미지프로세싱하여 변화시키고, 상기 카메라가 촬영한 영상에 다른 이미지를 합성하는 영상처리부를 추가로 포함하는 카메라서비스 시스템.
  7. 제1항에 있어서, 상기 카메라가 촬영한 영상에 포함된 음향을 변화시키는 음향처리부를 추가로 포함하는 카메라서비스 시스템.
  8. 제1항에 있어서, 상기 사용자 단말장치는
    상기 카메라가 촬영한 영상이 표시되는 영상단말장치; 및
    상기 카메라스테이션을 제어하는 제어단말장치를 포함하는 카메라서비스 시스템.
  9. 통신망을 통하여 줌동작 및 촬영방향 제어가 가능한 카메라와 이 카메라가 설치되는 플랫폼이 포함된 카메라스테이션, 상기 카메라스테이션에 통신망을 통해 연결되는 카메라서비스 서버, 및 상기 카메라서비스 서버와 통신망을 통해 연결되어 상기 카메라스테이션을 제어하는 사용자단말장치를 포함하는 카메라서비스 시스템에서 수행되는 카메라서비스 방법으로,
    상기 카메라서비스 서버가 상기 카메라스테이션의 점유상태정보를 상기 사용자 단말장치에 전송하는 점유상태정보전송단계;
    사용자가 단말장치에 수신된 점유상태정보를 참조하여 카메라스테이션을 선택하고 점유하는 카메라스테이션점유단계;
    상기 서버가, 점유가 완료된 상기 카메라스테이션의 제어안내정보를 사용자 단말장치에 전송하는 제어안내정보전송단계;
    사용자가 단말장치에 수신된 제어안내정보를 참고하여 상기 카메라스테이션의 조종을 위한 제어정보를 생성하고 이를 서버로 전송하는 제어정보생성단계;
    상기 서버가, 수신된 제어정보를 저장한 후 상기 플랫폼과 카메라에 전송하는 제어정보전송단계;
    상기 카메라스테이션의 플랫폼은 수신된 제어정보에 따라 이동되고, 상기 카메라는 수신된 제어정보에 따라 줌동작과 촬영방향이 제어되고, 상기 카메라는 촬영된 영상을 서버로 송신하는 제어 및 영상전송단계;
    상기 서버가, 수신된 영상을 점검하고 처리하는 영상처리단계; 및
    상기 서버가 처리된 영상을 사용자 단말장치로 전송하는 영상전송단계를 포함하는 카메라서비스 방법.
  10. 제9항에 있어서, 상기 영상처리단계는
    상기 카메라가 촬영한 영상 내 사람 얼굴을 식별 불가능하도록 변조하는 단계를 포함하는 카메라서비스 방법.
  11. 제9항에 있어서, 상기 영상처리단계는
    상기 카메라가 촬영한 영상을 이미지프로세싱하여 변화시키는 단계를 포함하는 카메라서비스 방법.
  12. 제9항에 있어서, 상기 영상처리단계는
    상기 카메라가 촬영한 영상에 다른 이미지를 합성하는 단계를 포함하는 카메라서비스 방법.
  13. 제9항에 있어서, 상기 카메라가 촬영한 영상에 포함된 음향을 변화시키는 단계를 추가로 포함하는 카메라서비스 방법.
  14. 제9항에 있어서, 상기 제어정보전송단계는
    상기 서버가, 수신된 제어정보가 유효한지를 검사하는 제어정보유효성검사단계; 및
    상기 제어정보 유효성 검사에 의해 조종가능범위 내이면 상기 제어정보를 상기 카메라스테이션에 전송하고, 조종가능범위 바깥이면 사전 설정된 동작을 수행하고 사용자에게 조종가능범위를 벗어났음을 경고하는 제어정보처리단계를 포함하는 카메라서비스 방법.
  15. 제9항에 있어서, 상기 영상전송단계는
    상기 서버가 상기 처리된 영상을 사전 설정된 시간을 지연시킨 후에 사용자 단말장치로 전송하는 것을 특징으로 하는 카메라서비스 방법.
  16. 제9항에 있어서, 상기 제어안내정보에는 카메라스테이션에 대한 순차적인 제어정보로 구성된 복수의 제어정보사례가 포함되고, 상기 제어정보는 이 제어정보사례 중 하나인 것을 특징으로 카메라서비스 방법.
  17. 통신망을 통하여 줌동작 및 촬영방향 제어가 가능한 카메라와 이 카메라가 설치되는 플랫폼이 포함된 카메라스테이션, 상기 카메라스테이션에 통신망을 통해 연결되는 카메라서비스 서버, 및 상기 카메라서비스 서버와 통신망을 통해 연결되어 상기 카메라스테이션을 제어하는 사용자단말장치를 포함하는 카메라서비스 시스템에서 수행되는 카메라서비스 방법으로, 상기 카메라스테이션이 촬영 영상을 상기 카메라서비스 서버로 전송하는 단계;
    상기 서버가 상기 카메라스테이션의 키워드를 실시간으로 분석하여 사전 설정된 영상주제목록에 따라 해당 카메라스테이션의 영상주제를 분류하는 영상주제분류단계;
    상기 서버가, 사전 설정된 영상주제목록을 상기 사용자 단말장치에 전송하는 영상주제목록전송단계;
    사용자가 단말장치에 수신된 영상주제목록에서 영상주제를 선택하는 영상주제선택단계;
    상기 서버가, 선택된 영상주제에 해당하는 영상들과 음원들을 선택하여 사용자 단말장치에 전송하는 영상안내정보제시단계;
    사용자가 단말장치에 수신된 영상안내정보를 참고하여 영상과 음원을 선택하여 영상편성정보를 만들어 서버로 전송하는 영상편성정보생성단계;
    상기 서버가 수신된 영상편성정보에 따라 영상과 음원을 사용자 단말장치에 전송하는 영상방영단계를 포함하는 카메라서비스 방법.
  18. 제17항에 있어서, 상기 카메라스테이션의 키워드는
    설치위치정보, 설치위치의 자연적인 속성, 설치위치의 실시간 날씨정보, 날짜, 시간, 관측정보 중 어느 하나를 포함하는 카메라서비스 방법.
  19. 제17항에 있어서, 상기 카메라스테이션의 플랫폼은 특정경로를 따라 이동하는 것이고, 상기 카메라스테이션의 키워드는 플랫폼의 종류와 이동경로 중 어느 하나를 포함하는 카메라서비스 방법.
  20. 제17항에 있어서, 상기 음원은 외부의 컴퓨터에 의해서 관리되는 시스템에 저장된 것을 특징으로 하는 카메라서비스 방법.
  21. 제17항에 있어서, 상기 카메라스테이션은 제3자가 제공하는 것으로, 제3자의 카메라스테이션 제공을 위해
    카메라스테이션의 보유자가 자신의 카메라스테이션정보를 카메라서비스 사업자에게 제공하는 단계;
    카메라서비스사업자가, 제공된 카메라스테이션정보를 확인하고 시험하여 적합할 때 등록여부를 결정하는 단계; 및
    등록이 결정되면 카메라스테이션을 카메라서비스 시스템에 등록하고 사용자에게 공개하는 단계를 수행하는 것을 특징으로 하는 카메라서비스 방법.
PCT/KR2021/012745 2020-06-16 2021-09-16 카메라서비스 시스템 및 방법 WO2022060144A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US18/025,946 US20230362485A1 (en) 2020-06-16 2021-09-16 Camera service system and method
JP2023517392A JP2023541950A (ja) 2020-09-16 2021-09-16 カメラサービスシステムおよび方法
CN202180063723.4A CN116194949A (zh) 2020-09-16 2021-09-16 摄像机服务系统及方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2020-0119115 2020-09-16
KR1020200119115A KR20220036645A (ko) 2020-09-16 2020-09-16 카메라서비스 시스템 및 방법

Publications (1)

Publication Number Publication Date
WO2022060144A1 true WO2022060144A1 (ko) 2022-03-24

Family

ID=80776265

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/012745 WO2022060144A1 (ko) 2020-06-16 2021-09-16 카메라서비스 시스템 및 방법

Country Status (5)

Country Link
US (1) US20230362485A1 (ko)
JP (1) JP2023541950A (ko)
KR (2) KR20220036645A (ko)
CN (1) CN116194949A (ko)
WO (1) WO2022060144A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11968353B2 (en) * 2021-04-05 2024-04-23 Acumera, Inc. Camera health determination based on local analysis of scene information content

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006532A (ja) * 2001-06-27 2003-01-10 Fujitsu Ltd 移動ロボットとその獲得画像を用いたサーバ経由のサービス提供方式
JP2003023619A (ja) * 2001-07-09 2003-01-24 Matsushita Electric Ind Co Ltd 画像サーバー及び画像サーバーシステム
JP2007213364A (ja) * 2006-02-10 2007-08-23 Nec Corp 画像変換装置、画像変換方法及び画像変換プログラム
KR20090075593A (ko) * 2008-01-03 2009-07-08 주식회사 알티캐스트 키워드 기반 영상 서비스 제공 방법 및 시스템
JP2017119501A (ja) * 2015-08-06 2017-07-06 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 無人飛行体、飛行制御方法、飛行制御プログラム及び操縦器
KR101808157B1 (ko) * 2017-01-19 2017-12-12 주식회사 인디씨에프 영상물에 배경음악을 삽입하는 배경음악 삽입방법 및 그 방법을 수행하는 소프트웨어가 저장된 소프트웨어 분배 서버

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006532A (ja) * 2001-06-27 2003-01-10 Fujitsu Ltd 移動ロボットとその獲得画像を用いたサーバ経由のサービス提供方式
JP2003023619A (ja) * 2001-07-09 2003-01-24 Matsushita Electric Ind Co Ltd 画像サーバー及び画像サーバーシステム
JP2007213364A (ja) * 2006-02-10 2007-08-23 Nec Corp 画像変換装置、画像変換方法及び画像変換プログラム
KR20090075593A (ko) * 2008-01-03 2009-07-08 주식회사 알티캐스트 키워드 기반 영상 서비스 제공 방법 및 시스템
JP2017119501A (ja) * 2015-08-06 2017-07-06 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 無人飛行体、飛行制御方法、飛行制御プログラム及び操縦器
KR101808157B1 (ko) * 2017-01-19 2017-12-12 주식회사 인디씨에프 영상물에 배경음악을 삽입하는 배경음악 삽입방법 및 그 방법을 수행하는 소프트웨어가 저장된 소프트웨어 분배 서버

Also Published As

Publication number Publication date
KR20220036645A (ko) 2022-03-23
US20230362485A1 (en) 2023-11-09
CN116194949A (zh) 2023-05-30
KR20230163320A (ko) 2023-11-30
JP2023541950A (ja) 2023-10-04

Similar Documents

Publication Publication Date Title
CN102906810B (zh) 支持视觉受损的个体的扩增的现实全景
US7546552B2 (en) System and method of attracting, surveying, and marketing to consumers
US20090064014A1 (en) System and method of attracting, surveying, and marketing to consumers
CN106878672A (zh) 通过uav网络促进多媒体信息递送
WO2015056969A4 (ko) 하이브리드앱을 이용한 소셜 네트워크 서비스 기반의 실시간 라이브 방송을 제공하는 솔루션 시스템 및 방법
CN111242704B (zh) 用于在现实场景中叠加直播人物影像的方法和电子设备
WO2022060144A1 (ko) 카메라서비스 시스템 및 방법
US11770605B2 (en) Apparatus and method for remote image capture with automatic subject selection
US20020178116A1 (en) Imaging system, imaging method, image service system and image service method
CN109360371A (zh) 一种发电车监控报警无线传输系统
CN106210438A (zh) 一种基于全息投影的信息发布方法及系统
CN113093811A (zh) 基于智能座舱系统的无人机控制方法以及系统
CN212386404U (zh) 一种应用于自驾旅游的车顶摄像头系统
US20090141019A1 (en) 4d real-world browsing with capability to recognize and access objects in real-time
WO2020106082A1 (ko) Vr 영상 기반의 여행 가이드 매칭 서비스 제공 장치 및 그 방법
CN112004060B (zh) 用于景区的无人机观光方法
CN115103206A (zh) 视频数据的处理方法、装置、设备、系统及存储介质
JP6917426B2 (ja) 画像表示装置、画像表示方法、および、画像表示システム
CN110301133A (zh) 信息处理装置、信息处理方法和信息处理程序
WO2015124446A1 (fr) Procédé et système de transmission de données a bord d&#39;un aéronef
CN114666493B (zh) 一种ar观览服务系统和终端
KR20200020431A (ko) 자연공원 관광서비스 관리서버
DE19845093A1 (de) Verfahren zur Überwachung von Ereignissen
US20230214097A1 (en) System and method utilizing multiple virtual presence devices
CN116409268A (zh) 望远镜控制方法、装置、设备及介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21869766

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2023517392

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21869766

Country of ref document: EP

Kind code of ref document: A1