WO2022153955A1 - ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置 - Google Patents

ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置 Download PDF

Info

Publication number
WO2022153955A1
WO2022153955A1 PCT/JP2022/000445 JP2022000445W WO2022153955A1 WO 2022153955 A1 WO2022153955 A1 WO 2022153955A1 JP 2022000445 W JP2022000445 W JP 2022000445W WO 2022153955 A1 WO2022153955 A1 WO 2022153955A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
video data
camera
digest
information
Prior art date
Application number
PCT/JP2022/000445
Other languages
English (en)
French (fr)
Inventor
淳 篠原
Original Assignee
協栄精工株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 協栄精工株式会社 filed Critical 協栄精工株式会社
Publication of WO2022153955A1 publication Critical patent/WO2022153955A1/ja
Priority to US17/984,079 priority Critical patent/US20230075621A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B57/00—Golfing accessories
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/56—Accessories
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera

Definitions

  • the present invention relates to a golf digest creation system that automatically performs from shooting a play during a golf round to creating a digest that collects highlight scenes.
  • FIG. 28 is a diagram of a moving shooting unit constituting the conventional golf digest creation system described in Patent Document 1.
  • the mobile photographing unit includes a 360-degree camera installed at a position where a 360-degree view is open at the top of the golf cart, a sound collecting microphone installed on the golf cart, video data from the 360-degree camera, and a sound collecting microphone. It had an AV storage unit that stores the audio data from the camera, and a control unit that attaches time information for synchronizing the video data and the audio data to the AV storage unit and stores the data.
  • the digest creation device extracts the highlight scene based on the result of the data analysis unit that analyzes the video data stored in the AV storage unit of the mobile imaging unit for image analysis and / or the audio data for audio analysis, and the result of the data analysis unit. It had a digest creation department.
  • Patent Document 2 there is a system described in Patent Document 2 as a system that can easily store video, audio, score, course status, etc. at the time of play as a library. 29 and 30 are examples of display screens in the conventional golf play library system described in Patent Document 2.
  • the present invention has been made to solve the above-mentioned conventional problems, and an object of the present invention is a state or shot of a golf ball rolling in a highlight scene on a golf course without the player being aware of shooting.
  • the purpose is to provide a golf digest creation system that automatically creates a digest of a golf round that shows the undulation of the point.
  • the golf digest automatic creation system that solves the above-mentioned conventional problems includes a moving shooting unit and a digest creation device.
  • the mobile photography unit was installed in a 360-degree camera installed at a position where a 360-degree view was opened above the golf cart, a camera with an electric zoom lens mounted on an electric cloud stand installed in the golf cart, and a golf cart.
  • the shooting target area is determined from the AV storage unit that stores the video data from the camera with an electric zoom lens and the audio data from the sound collecting microphone, and the position information and map information detected by the GPS receiver, and the direction detector.
  • the electric cloud stand is driven so that the lens direction detected by the camera is in the shooting target area, and the video data zoomed by the camera with the electric zoom lens, the video data from the 360-degree camera, and the audio data are added. It has a control unit that stores time information for a person to synchronize and area identification information that specifies an area to be photographed in an AV storage unit.
  • the digest creation device has a data analysis unit that analyzes video data stored in the AV storage unit of the mobile imaging unit and / or audio analysis of audio data, and highlight scenes based on the results of the data analysis unit.
  • the digest creation unit to extract and the video data to be targeted for image analysis and extraction of the highlight scene based on the area identification information attached to the video data are the video data from the 360-degree camera and the camera with an electric zoom lens. It has a control unit for selecting which of the video data to be used from.
  • the camera with an electric zoom lens can record an image at a clearly visible level, so that the image can be recorded at a position away from the golf cart. Even in play, it is possible to check the movement of the ball etc. with a digest.
  • the control unit of the mobile photographing unit determines the green as the photographing target area of the camera with an electric zoom lens.
  • the control unit of the mobile photographing unit sets the map information as the next falling area of the ball shot from the position indicated by the position information.
  • the area determined in advance is determined as the shooting target area.
  • the ball fall prediction area after the shot is shot with a camera with an electric zoom lens, so it is possible to check the whereabouts of the ball after the shot with a digest image.
  • control unit of the digest creation device indicates that the area identification information attached to the video data is green
  • the control unit is electrically operated as the video data to be targeted for image analysis or highlight scene extraction. Select video data from a camera with a zoom lens.
  • the play on the green will be an image taken by a camera with an electric zoom lens, so it will be possible to check the rolling state of the ball on the green in the digest image.
  • control unit of the digest creation device uses the electric zoom lens at the same time to obtain the video data after the shot of the highlight scene. Replace with video data from the camera.
  • the image of the next fall prediction area will be attached to the image after the shot, so it will be possible to check the direction of the hit ball and the approximate flight distance with the digest image.
  • the digest creation system further includes a mobile terminal provided with a GPS receiver and which creates movement trajectory information of a player by recording position information at predetermined time intervals.
  • the 360-degree camera of the moving shooting unit is equipped with a azimuth sensor to attach azimuth information to the video data output, and the control unit attaches the position information of the golf cart to the video data and stores it in the AV storage unit. ..
  • the digest creation device further has a map information storage unit that stores three-dimensional map information of the golf course, and the digest creation unit is attached to the image data from the 360-degree camera at the time when the highlight scene occurs.
  • the position of the player is specified from the information, the position information of the golf cart, and the movement trajectory information acquired from the mobile terminal, the terrain information at the position is calculated from the three-dimensional map information, and the image data of the highlight scene is combined.
  • the mobile photographing unit includes a 360-degree camera installed at a position where a 360-degree view is open at the top of the golf cart, a camera with an electric zoom lens mounted on an electric cloud stand installed on the golf cart, and a camera with an electric zoom lens.
  • a direction detector that detects the lens direction of the camera with an electric zoom lens
  • a course information storage unit that stores map information of a golf course
  • a 360-degree camera From a sound collecting microphone and GPS receiver installed in a golf cart, a direction detector that detects the lens direction of the camera with an electric zoom lens, a course information storage unit that stores map information of a golf course, and a 360-degree camera.
  • a camera with an electric zoom lens from the AV storage unit that stores the video data from the camera with the electric zoom lens and the audio data from the sound collecting microphone, and the position information and map information detected by the GPS receiver.
  • the shooting target area is determined, the electric cloud stand is driven so that the lens direction detected by the direction detector is the shooting target area, and the video data zoomed by the camera with the electric zoom lens and the 360-degree camera It has a control unit that stores the video data from the camera and the audio data in the AV storage unit with time information for synchronizing the three parties and area identification information for specifying the shooting target area.
  • the electric zoom camera can record the image at a clearly visible level, and which area of the golf course the image is. Can be known.
  • the digest creation device includes image data from a 360-degree camera installed on a golf cart, image data from a camera with an electric zoom lens mounted on an electric cloud stand, and a sound collecting microphone installed on the golf cart.
  • the digest creation AV storage unit that stores the audio data from the data with the time information for synchronization by the three parties and the area identification information that identifies the area targeted for shooting
  • the digest creation AV storage unit stores the audio data from the data with the time information for synchronization by the three parties and the area identification information that identifies the area targeted for shooting
  • a data analysis unit that analyzes the stored video data as an image and / or analyzes the audio data as audio
  • a digest creation unit that extracts highlight scenes based on the results of the data analysis unit, and area identification information attached to the video data. It has a control unit that selects whether the video data to be the target of image analysis or highlight scene extraction is the video data from the 360-degree camera or the video data from the camera with an electric zoom lens based on the above. ..
  • the digest creation device can record at a level that can be clearly seen by the electric zoom camera without using an image that cannot be recorded at a level where the ball or the like can be visually recognized by the 360-degree camera, depending on the shooting target area. Since you can create a digest using the video, you can check the whereabouts of the hit ball and the rolling state of the ball with the digest.
  • the player can clearly see the whereabouts of the hit ball in the highlight scene on the golf course and the rolling of the ball on the green, and the player is aware of the shooting of the digest showing the undulation of the shot point. It is possible to create automatically without.
  • FIG. 1 Schematic diagram of the golf digest creation system according to the first embodiment of the present invention.
  • Hardware configuration diagram of the moving shooting unit according to the first embodiment of the present invention Hardware configuration diagram of the mobile terminal according to the first embodiment of the present invention
  • Hardware configuration diagram of the digest creation device according to the first embodiment of the present invention External view of an electric pan head equipped with an electric zoom lens according to the first embodiment of the present invention.
  • FIG. 1 shows the example of the frame image cut out about a specific person and a flagpole from the image data on the green in Embodiment 1 of this invention.
  • Figure of solid model showing undulation to be combined with digest video Operation flow chart of the moving photography unit according to the first embodiment of the present invention.
  • Operation flow chart of the mobile terminal according to the first embodiment of the present invention Operation flow chart of the digest making apparatus according to Embodiment 1 of this invention.
  • FIG. 5 is a flow chart of processing during movement of the cart performed by the moving photographing unit according to the second embodiment of the present invention.
  • Operation flow chart of the fixed imaging unit according to the second embodiment of the present invention Operation flow chart of the golf course terminal according to the second embodiment of the present invention
  • the flow chart of the digest making process performed by the digest making apparatus in Embodiment 2 of this invention The figure which shows the hardware composition of the moving shooting unit which constitutes the conventional golf digest creation system.
  • the figure which shows the display screen of the conventional golf play library The figure which shows the display screen of the conventional golf play library
  • FIG. 1 is a diagram showing an outline of the golf digest creation system according to the first embodiment of the present invention.
  • Golf is a sport in which a player goes around all 18-hole golf courses in a fixed order and competes for the total number of hits by hitting a golf ball from the teeing area 111 to the cup on the green 113.
  • the golf course 11 shows one of 18 holes
  • the golf cart 12 on which the player 13 rides and moves on the course has a 360-degree camera 101 capable of omnidirectional shooting and an electric pan head.
  • a camera 105 with an electric zoom lens mounted on the electric pan head, an omnidirectional sound collecting microphone 102, a GPS receiver 103, and a mobile recording device 104 having a wireless communication function are mounted.
  • the 360-degree camera 101 is installed at a position above the roof of the golf cart 12 with a 360-degree field of view.
  • the resolution of the 360-degree camera 101 and the camera 105 with an electric zoom lens is 4K (3,840 pixels x 2,160 pixels) or 8K (7,680 pixels x 4,320 pixels).
  • the video data from the 360-degree camera and the camera 105 with the electric zoom lens and the audio data from the sound collecting microphone 102 are transmitted to the mobile recording device 104 by wire or wirelessly.
  • the 360-degree camera 101 may be configured to cover 360 degrees by using a plurality of cameras so that each image is combined.
  • the camera 105 with an electric zoom lens is equipped with an electric optical zoom lens capable of varying the focal length and angle of view of the optical lens, and the electric pan head can be tilted, panned, and rolled.
  • a moving shooting unit which is a 360-degree video and audio around the golf cart being played, and a zoom-up of the area or green that is predicted to be the next drop point of the ball.
  • the recorded video is automatically recorded.
  • the mobile terminal 106 that the player 13 attaches to the waist or the like is provided with a GPS receiver and records the movement trajectory of the player together with the time information.
  • a golf course terminal 107 is installed in the clubhouse 14, and the screen is operated to instruct the creation of a desired digest video, or the digest video is written to a DVD or the like.
  • a digest creation device 109 and a digest distribution server 110 exist on the Internet 15, and data communication is performed by wire with the golf course terminal 107 existing in the golf course, and data communication with the mobile photographing unit via the wireless base station 108. do.
  • the digest creation device 109 receives the moving image data (hereinafter, both "video data” and "audio data”) recorded in the movement recording device 104 mounted on the golf cart, and outputs the video data and the audio data. Create a digest that collects the highlight scenes of the play by analyzing it.
  • FIG. 2 is a diagram illustrating the configuration of the golf digest creation system of the present embodiment.
  • the mobile photographing unit 21 performs bidirectional wireless communication with the mobile terminal 22, and further performs fifth-generation mobile communication (5G) with the digest creation device 23 existing on the Internet 27. ..
  • This fifth generation mobile communication (5G) system is composed of a UE (user device), a 5G access network (5G-AN) 29, and a 5G core network (5GCN) 28.
  • the 5G access network (5G-AN) 29 is a fifth-generation wireless network portion that directly exchanges radio waves with the user equipment, and the 5G core network 28 performs connection processing and user data routing processing as a whole. This is the 5th generation wireless network part.
  • 5G access network (5G-AN) 29 and the 5G core network (5GCN) 28 for example, the literature “5G textbooks (LTE / IoT to 5G)" (publisher: Impress Co., Ltd.), pages 218 to 241 As stated on the page.
  • the mobile photographing unit 21 in the present embodiment corresponds to the above-mentioned UE, and is a 5G wireless transmitter / receiver capable of bidirectional communication with a fifth-generation wireless base station via a new wireless interface (hereinafter referred to as NR). It has.
  • the above NR is as described on pages 108 to 117 of the above-mentioned document "5G textbook (LTE / IoT to 5G)". This NR has a communication capability that realizes a maximum data rate of 20 Gbps for downlink and a maximum of 10 Gbps for uplink.
  • the golf course terminal 24 is a general personal computer having a DVD writing function and a network i / f, and performs two-way wired communication with the digest creation device 23.
  • the digest distribution server 26 is a computer equipped with a large-scale storage device and network i / f, receives digest data from the digest creation device 23, assigns individual IDs or URLs, and stores and stores the data. In addition, it accepts a request for transmission of digest data specified by an ID or URL from the outside, transfers the file to the requesting terminal (smartphone or personal computer), or distributes the file by streaming.
  • FIG. 3 is a diagram showing the hardware configuration of the moving shooting unit constituting the golf digest creation system.
  • the mobile photographing unit 21 includes a first imaging unit 211, a second imaging unit 212, a sound collecting unit 213, a first AV storage unit 214, a second AV storage unit 215, a course information storage unit 216, and a 5G wireless transmission / reception unit 217. It is composed of a wireless transmission / reception unit 218, a GPS reception unit 219, and a control unit 220.
  • the first imaging unit 211 includes a 360-degree camera and transmits video data from the 360-degree camera to the first AV storage unit 214, but at that time, the distortion caused by the wide-angle lens of the 360-degree camera is corrected and output.
  • This distortion correction is realized in real time by an ASIC (Application Specific Integrated Circuit) incorporating a known algorithm.
  • ASIC Application Specific Integrated Circuit
  • FIG. 7A shows an example of a one-frame image of this video data.
  • the letters N, E, S, and W attached with the dashed line indicate the north, east, south, and west directions, respectively.
  • the second imaging unit 212 includes an electric pan head and a camera with an electric zoom lens mounted on the electric pan head.
  • FIG. 6 is a diagram showing the electric pan head 60 and the electric zoom lens 61 of the camera with the electric zoom lens attached to the electric pan head 60.
  • the electric zoom lens 61 is connected to a video camera body (not shown) by an electric signal cable 61b, and the electric cloud stand 60 is connected to a moving recording device (not shown) by an electric cable 60a.
  • the electric pan head 60 includes a pan rotation unit 601, a tilt rotation unit 602, and a roll rotation unit 603, and incorporates a pan drive motor, a tilt drive motor, and a roll drive motor, respectively.
  • the electric zoom lens 61 is fixed to the rotating cylinder 603a of the roll rotating portion 603.
  • An orientation sensor 62 is attached to the pan rotation unit 601, an inclination sensor 63 for detecting the elevation angle is attached to the tilt rotation unit 602, and an inclination sensor 64 for detecting the roll angle is attached to the roll rotation unit 603.
  • the roll rotating unit 603 rotates the rotating cylinder 603a in a direction that cancels the angle detected by the tilt sensor, and keeps the zoom lens 61 horizontal at all times.
  • the electric zoom lens 61 is provided with a lens moving motor, and the zoom lens 61a can be driven by an electric signal from the video camera body to change the focal length and the angle of view.
  • the second imaging unit 212 directs the lens in the direction indicated based on the detection values of the azimuth sensor and the tilt sensor while keeping the optical zoom lens rolling-corrected and always kept horizontal, and is designated.
  • the video data zoomed at the same magnification is transmitted to the second AV storage unit 215.
  • the sound collecting unit 213 includes a sound collecting microphone 102, and transmits audio data from the sound collecting microphone 102 to the first AV storage unit 214 and the second AV storage unit 215.
  • the GPS receiver 219 includes a GPS receiver, receives a signal from a satellite, and outputs current position information and time information.
  • the first AV storage unit 214 stores video data from the first imaging unit 211 and audio data from the sound collecting unit 213.
  • the second AV storage unit 215 stores video data from the second imaging unit 212 and audio data from the sound collecting unit 213.
  • the first AV storage unit 214 and the second AV storage unit 215 are both non-volatile storage devices using a hard disk or a semiconductor memory card as a recording medium, but a semiconductor memory card having excellent impact resistance is preferable.
  • the course information storage unit 216 is also a non-volatile storage device, and stores three-dimensional map information of all courses of the golf course.
  • FIG. 8 is a contour diagram showing one hole of the golf course. In FIG. 8, the contour lines are partially omitted, but the three-dimensional map information in the present embodiment is a mesh of contour maps created at altitude intervals of 1 cm in 5 cm squares. It consists of the latitude, longitude, and altitude of each subdivided point, and is stored for each hole. Further, as shown in FIG. 8, each hole is divided into 2 to 4 areas according to the reference number of strokes.
  • a hole with a standard at bat of 3 is divided into area 1 and area 2
  • a hole with a standard at bat 4 is divided into areas 1 to 3
  • a hole with a standard at bat 5 is divided into areas 1 to 4 to form an outer shell of the hole.
  • the points on the boundary line of each area are stored as area information.
  • the 5G wireless transmission / reception unit 217 performs high-speed wireless communication with the above-mentioned 5th generation wireless base station.
  • the wireless transmission / reception unit 218 performs medium-range wireless communication (IEEE802.11), and is capable of communication over several hundred meters.
  • IEEE802.11 medium-range wireless communication
  • the control unit 220 controls the entire mobile photographing unit 21, and writes the video data from the first imaging unit 211 and the audio data from the sound collecting unit 213 to the first AV storage unit 214, and the second imaging unit 212
  • the video data and the audio data from the sound collecting unit 213 are written to the second AV storage unit 215.
  • These video data are shot at a frame rate of 20 fps to 60 fps, and each frame is recorded with an elapsed time (time code) from the start of shooting.
  • the audio data is also recorded with time information (time code) synchronized with each of the above frames.
  • the control unit 220 instructs the electric pan head of the second imaging unit 212 to have a rotation angle in the pan direction and a rotation angle in the tilt direction, and also instructs a camera with an electric zoom lens to have a zoom magnification.
  • control unit 220 calculates the hole number at which the golf cart is currently stopped from the position information acquired from the GPS receiving unit 219 and the three-dimensional map information, and adds the golf cart position information and the hole number to these video data. Record the area identification information that identifies the area targeted for shooting.
  • the above-mentioned moving recording device 104 is wireless. It is realized by a communication device and a computer device.
  • This computer device includes a CPU, memory, a non-volatile storage unit, an input / output interface, and a wireless communication interface, which are connected by a bus.
  • the control unit 220 realizes the function by expanding and executing the control program stored in the non-volatile storage unit in the memory.
  • the AV storage unit of the mobile imaging unit according to the present invention refers to the first AV storage unit 214 and the second AV storage unit 215, the direction detector refers to the orientation sensor 62 and the tilt sensor 63, and the map information is 3. Refers to dimensional map information.
  • the hardware configuration of the mobile terminal 22 will be described.
  • FIG. 4 is a diagram showing a hardware configuration of the mobile terminal 22 according to the present embodiment.
  • the mobile terminal 22 includes a GPS receiving unit 221, a movement locus recording unit 222, a wireless transmission / reception unit 223, and a control unit 224.
  • the GPS receiver 221 includes a GPS receiver, receives a signal from a satellite, and outputs current position information and time information.
  • the movement locus recording unit 222 is a non-volatile memory, and stores information (hereinafter, referred to as “movement locus information”) that records the points where the player holding the mobile terminal 22 has moved during golf play at predetermined time intervals. ing.
  • the wireless transmission / reception unit 223 performs wireless communication (IEEE802.11), and can communicate for several hundred meters.
  • the control unit 224 controls the entire mobile terminal 22.
  • the above mobile terminal 22 is realized by a GPS receiver, a wireless communication device, and a computer device.
  • This computer device includes a CPU, a memory, a non-volatile storage unit, an input / output interface, and a wireless communication interface, which are connected by a bus.
  • the control unit 224 realizes the function by expanding and executing the control program stored in the non-volatile storage unit in the memory.
  • FIG. 5 is a diagram showing a hardware configuration of the digest creation device 23 according to the present embodiment.
  • the digest creation device 23 includes an AVL storage unit 231, a moving image cutting unit 232, a motion analysis unit 233, a voice analysis unit 234, a composite image generation unit 235, a digest creation unit 236, a digest storage unit 237, and a course information storage unit. It is composed of 238, a network i / f unit 239, and a control unit 240.
  • the AVL storage unit 231 is a non-volatile storage device, and is referred to as video data captured by a 360-degree camera (hereinafter referred to as “360-degree camera video data”) received from the mobile imaging unit 21 via a fifth-generation mobile communication system.
  • This is a storage device that stores video data (hereinafter referred to as "optical zoom camera video data") taken by a camera with an electric zoom lens, audio data, and movement locus data created by the mobile terminal 22.
  • the movement trajectory data file is accompanied by identification information of the player or the mobile terminal.
  • the video cutting unit 232 cuts out a video by designating an arbitrary area from the video data, detects a person by motion detection, performs a process of cutting out to a peripheral area including all the people, or cuts out a person. Identify and cut out. When cutting out a specific person, a person tracking process is performed to cut out the person in the center.
  • the moving image cutting unit 232 displays not only the person but also the flagpole and the ball on the green. It detects and cuts out the area including them.
  • FIG. 7A shows an image example of a frame of video data taken by a 360-degree camera, and this frame is an image of 360 degrees around a golf cart.
  • the moving image cutting unit 232 cuts out an area surrounded by a broken line so that all the people in this frame are included.
  • FIG. 7B is an example of an image obtained by identifying a person and cutting out an area so that the person has a predetermined size or more.
  • the direction information seen from the 360-degree camera of the person for example, the north is defined as 0 degree, the clockwise direction is defined as plus, and the counterclockwise direction is defined as minus, and the moving image is cut out together with the direction information such as minus 170 degrees. A request is made. Then, this direction information is attached to the cut-out image as specific information for identifying a person.
  • FIG. 7C is an example of an image obtained by identifying a person on the green and cutting out an area centered on the specified person and the flagpole.
  • OpenCV Open Source Computer-Vision-Library is an open source computer vision library developed and published by Intel. This is performed by performing software processing using a known image processing program, motion analysis program, object tracking program, pattern recognition program, or the like.
  • the motion analysis unit 233 recognizes the video data as an image and analyzes whether the player swings, puts, jumps, or raises his / her hand.
  • this analysis technique for example, a technique for determining an operation using a three-dimensional high-order local autocorrelation feature amount is known. Then, the motion analysis unit 233 creates a highlight scene candidate list including each determined motion type and the determination time information.
  • an ultra-high resolution camera is used.
  • the pixels of the recorded moving image are 3,840 pixels ⁇ 2,160 pixels, and in the case of an 8K camera, 7,680 pixels ⁇ .
  • the frame is recorded with 4,320 pixels. Therefore, even after cutting out, the number of pixels of a person is four times or eight times as large as that after cutting out in the case of recording of HD image quality, so that it is possible to perform motion analysis with high accuracy. Further, since the video data from the second imaging unit is a moving image in which only the green is magnified by the electric zoom lens, it is possible to clearly recognize the ball on the green.
  • the voice analysis unit 234 analyzes the frequency of the voice data, obtains the spectrogram, and obtains the similarity with the spectrogram of the preset model. Further, the voice information is classified into shot sound, cheers, laughter, speaking voice, and other voices in consideration of the magnitude of the squared average value of the volume. In this way, the voice analysis unit 234 creates a highlight scene candidate list including the determined voice type and time information.
  • the composite image generation unit 235 generates an image to be composited, and synthesizes the image and video data.
  • the image to be combined is an image of the plan view of each hole held in advance with the golf cart position and the position where the highlight scene occurred marked, or an image expressing the undulations of a certain point with a solid model of a three-dimensional curved surface. be.
  • This solid model is created using a known solid modeling kernel.
  • FIG. 10A is an image example of a plan view of a golf course hole to be combined with the digest image
  • FIG. 10B is an image example of a solid model showing an undulation to be combined with the digest image.
  • the digest creation unit 236 extracts highlight scenes from the video data and audio data stored in the AVL storage unit 231 based on the time information list, and creates a digest by combining them. Further, the frame cut out by the moving image cutting unit 232 is corrected to full HD image quality by a known up-conversion technique.
  • the digest storage unit 237 stores the digest created by the digest creation unit 236.
  • the course information storage unit 238 is a non-volatile storage device and stores three-dimensional map information of all courses of the golf course.
  • This three-dimensional map information consists of the latitude, longitude, and altitude of each point, which is a contour map created by dividing each hole of the golf course at an altitude interval of 1 cm into a mesh shape of 5 cm square. be.
  • the control unit 240 controls the entire digest creation device 23, and instructs each processing unit constituting the digest creation device 23 to perform a request obtained via the network i / f239.
  • the digest creation device 23 described above is a computer device having a large-capacity storage device, and includes a CPU, a memory, a non-volatile storage unit, an input / output interface, and a network interface, and they are connected by a bus.
  • the video cutting unit 232, the motion analysis unit 233, the voice analysis unit 234, the composite image generation unit 235, the digest creation unit 236, and the control unit 240 expand various programs stored in the non-volatile storage unit into the memory. The function is realized by executing it.
  • the digest creation AV storage unit of the digest creation device refers to a part of the AVL storage unit 231 of the present embodiment, and the map information storage unit refers to the course information storage unit 238 of the present embodiment.
  • the data analysis unit refers to the moving image cutting unit 232, the motion analysis unit 233, and the voice analysis unit 234 of the present embodiment, and the digest creation unit includes the composite image generation unit 235 and the digest creation unit 236 of the present embodiment. Point to.
  • the golf course terminal 24 and the digest distribution server 26 have the golf digest creation system of the present embodiment, but the golf course terminal 24 is a general personal computer having a DVD writing function and a network i / f, and provides a digest.
  • the service program is stored in the built-in storage device.
  • the digest providing service is executed by expanding this application program from the built-in storage device to the memory and executing it by the CPU.
  • the digest distribution server 26 transfers files by a known streaming server that performs streaming distribution of the digest requested by HTTP Live Streaming (hereinafter referred to as HLS), a known web server that distributes by the HTTP protocol, or an FTP protocol. It is a known file server.
  • HLS HTTP Live Streaming
  • FIG. 11 is an operation flow diagram of the moving shooting unit.
  • the control unit 220 of the moving shooting unit 21 determines whether or not the current position is next to the teeing area of the start hole (S601), and determines that the current position is next to the teeing area of the start hole. If so, the control unit 220 waits until the position information does not change.
  • the control unit 220 starts shooting and starts recording / recording video data (S602).
  • the golf cart number for identifying the moving image data to be recorded and the time when the recording / recording of the moving image is started are also recorded.
  • the control unit 220 of the mobile shooting unit 21 records the elapsed time (time code) from the start of recording, the hole number where the golf cart is stopped, the position information (latitude / longitude information), and the area identification information as video data. Add to and record.
  • control unit 220 determines whether or not the position information has changed (S603), and waits until the position information changes.
  • the golf cart is moving, so the video recording / recording is stopped, and the video data file being recorded in the first AV storage unit 214 and the second AV storage unit 215 is closed. Then, the moving image data file is transmitted from the 5G wireless transmission / reception unit 217 to the digest creation device 23 on the Internet by the FTP protocol (S604).
  • This video data file contains the golf course number, play date, cart number, identification information indicating whether the video was taken with a 360-degree camera or a camera with an electric zoom lens, and a serial number that is incremented each time it is sent.
  • a video ID consisting of is given as a file name.
  • the control unit 220 checks whether or not the current position is the clubhouse (S605). When the current position is not the clubhouse, the control unit 220 starts shooting and recording / recording by the first imaging unit 211 (S606).
  • control unit 220 checks whether the current position is next to the green (S607), and if it is not next to the green, controls the second imaging unit 212 to assume an area where the next ball falls. Is photographed and recorded / recorded (S608).
  • the control unit 220 sets the angle of view from the three-dimensional map information stored in the course information storage unit 216 so that the entire next area 2 fits on the screen when the current position is in the area 1. Determine the direction. Then, the zoom magnification of the camera with the electric zoom lens of the second imaging unit 212 is changed by driving the lens moving motor, and the directions in which the detection values of the direction sensor 62 and the tilt sensor 63 of the electric cloud stand are determined are determined. The pan drive motor and the tilt drive motor are controlled so as to have an elevation angle.
  • the fact that the entire area next to the current position fits is, for example, the maximum angle of view 804 that allows the entire area 2 to be photographed when the golf cart is at the point G1 (801) next to the teeing area.
  • the angle of view is set to the maximum angle of view 808 in which the entire area 3 can be photographed when the current position is at the point G3 (805).
  • control unit 220 of the mobile photographing unit 21 controls the second imaging unit 212 to photograph and record the entire green from the current position (S609).
  • the control unit 220 maximizes the angle of view of the camera with the electric zoom lens of the second imaging unit 212 so that the entire green 811 fits on the screen.
  • the angle of view is determined to be 810, and the direction is also determined at the same time.
  • the zoom magnification of the camera with the electric zoom lens of the second imaging unit 212 is changed by driving the lens moving motor, and the pan drive motor and the tilt drive motor of the electric pan head are controlled to start shooting. do.
  • step S605 When it is determined in step S605 that the current position is the clubhouse, the control unit 220 of the moving shooting unit 21 determines whether or not the play of all 18 holes has already been recorded (step S610), and records all 18 holes. If not, the process proceeds to step S606.
  • the control unit 220 of the moving shooting unit 21 determines that the round is over, and requests each mobile terminal 22 to transmit the moving locus data. After that, when the movement locus data files are received from each mobile terminal 22 via the wireless transmission / reception unit 218, the movement locus data files are transferred from the 5G wireless transmission / reception unit 217 to the digest creation device 23 on the Internet by the FTP protocol (S611). ).
  • the movement trajectory data file is accompanied by identification information of the player or the mobile terminal.
  • control unit 220 of the moving shooting unit 21 notifies the digest creation device 23 of the completion of the final file transmission when the transmission of the moving image data to the digest creation device 23 has been completed, and has not completed the transmission of the final file. After transmitting the video data for the transmission, the final file transmission completion notification is sent.
  • FIG. 12 is an operation flow diagram of the mobile terminal 22.
  • the control unit 224 of the mobile terminal 22 acquires the position information from the GPS receiving unit 221 (S701), and determines whether or not a predetermined time has elapsed from the recording of the previous position information (S702).
  • the predetermined time is 1 second.
  • the position information acquired together with the time information is additionally written to the movement locus recording unit 222 (S703), but if the predetermined time has not passed, the position information is not written.
  • control unit 224 determines whether or not the transmission request for the movement locus data has been received (S704). Then, when the transmission request is received, the movement locus data written in the movement locus recording unit 222 is attached to the identification information of the player or the mobile terminal and transmitted to the request source via the wireless transmission / reception unit 223 (). After S705), the process returns to step S701.
  • step S701 the process returns to step S701 as it is.
  • the above is the operation / operation of the mobile terminal 22.
  • FIG. 13 is an operation flow diagram of the digest creation device 23.
  • FIG. 14 is an operation flow for explaining the digest creation process.
  • the control unit 240 of the digest creation device 23 refers to the video ID of the golf cart number based on the golf course number, play date, and golf cart number attached when instructing the digest creation.
  • the attached 360-degree camera video data file is read from the VAL storage unit 231 (S901).
  • the control unit 240 requests the moving image cutting unit 232 to perform the moving image cutting process for the video data whose area identification information is not green among the video data.
  • the control unit 240 reads out the optical zoom camera video data file with the golf cart number by referring to the video ID, and requests the video data for which the area identification information is green to cut out the video.
  • the moving image cutting unit 232 cuts out an area including a part recognized as a person by performing a person detection process, or a part recognized as a person and a flagpole from the video data in which the area identification information is green.
  • the area including the portion recognized as is cut out (S902).
  • the control unit 240 of the digest creation device 23 requests the motion analysis unit 233 to perform motion analysis processing on the video cut out.
  • the motion analysis unit 233 performs motion analysis processing (S903), and creates a highlight scene candidate list 1 of the motion type and its occurrence time information (S904). Even if the video data has a high resolution, the motion analysis is performed using the video data obtained by cutting out a part of the video data, so that the analysis time can be kept short.
  • control unit 240 requests the voice analysis unit 234 to perform voice analysis processing on the voice data read from the AVL storage unit 231.
  • the voice analysis processing unit 234 performs voice analysis processing (S905) and creates a highlight scene candidate list 2 of the voice type and its determination time information (S906).
  • control unit 240 of the digest creation device 23 determines a scene to be extracted as a highlight scene from the list created by the motion analysis unit 233 and the voice analysis unit 234 (S907).
  • FIG. 15 is an operation flow diagram for explaining the highlight scene determination process.
  • a candidate list in which the highlight scene candidate list 1 and the highlight scene candidate list 2 are integrated in chronological order is created (S1001), and evaluation values are given to each operation type and voice type (S1002). ..
  • 16A and 16B are diagrams for explaining the process of assigning evaluation values to the operation type and the voice type.
  • an evaluation value of 6 is assigned when the motion type is swing or putting, and an evaluation value of 4 is assigned when the motion is jumping or raising a hand.
  • the evaluation value is 6 when the voice type is a cheer, the evaluation value is 4, and when the voice type is a laughing voice, the evaluation value is 3.
  • the evaluation value is set to 6 because it is a promising candidate for the highlight scene. In the case of other voice types, the evaluation value is 0.
  • control unit 240 assigns an evaluation value to each operation type and voice type according to these assignment criteria.
  • the control unit 240 sets a predetermined time before and after one operation type or voice type as one section, and obtains the total of the evaluation values for each section as the section evaluation value ( S1004).
  • the motion type of swing and putting is set to 5 seconds each before and after, and the cheering, jumping motion, and hand raising motion are set to 5 seconds before and 1 second after.
  • the sections overlap, the sections are extended and treated as one section.
  • one section is from the movement type swing to the movement type jump.
  • FIG. 16B one section is from 5 seconds before the operation type putting to 1 second after the operation type hand is raised.
  • control unit 240 determines the selected section as a highlight scene having a section evaluation value equal to or higher than a predetermined score (S1005).
  • the above is the highlight scene determination process (S907).
  • the control unit 240 of the digest creation device 23 extracts the moving image data of the selected section from the moving image data stored in the AVL storage unit 231 before the moving image cutting process (S908), and cuts out the moving image.
  • the moving image cutout process is requested to the unit 232 again.
  • the moving image cutting section 234 cuts out from the video data of the section selected as the highlight scene, and at this time, the moving image cutting section 232 cuts out the specific information of the person to be specified in the selected section.
  • the direction information is from the golf cart, but when this specific information is recorded, it is specified by cutting out the specified person as shown in FIG. 7B or as shown in FIG. 7C. Performs cutting processing centered on the person and the flagpole. Further, when the person is moving within the time of the selected section, the moving image cutting unit 232 tracks the person and performs cutting processing so as not to be out of the frame (S909).
  • the control unit 240 determines the time when the shot sound is generated, or the moving image data at the same time from the optical zoom camera video data for a predetermined time after one second has passed from the occurrence. Is extracted and replaced with 360-degree camera image data. Alternatively, if an operation is detected within the same section after the shot sound is generated, the optical zoom camera image data for the time until the operation is replaced with the 360-degree camera image data (S910).
  • control unit 240 of the digest creation device 23 generates an image to be combined with the video cut out by the composite image generation unit 235, and requests the creation of the combined video data (S911).
  • the processing performed by the composite image generation unit 235 will be described in detail below.
  • the composite image generation unit 235 determines whether or not the video data of the highlight scene is provided with the specific information of the person to be specified (in the present embodiment, the direction information from the golf cart). , If specific information is attached, obtain the position information of the person to be specified from the time information at the time of occurrence of the highlight scene, the position information of the golf cart, the direction information, and the movement trajectory data, and mark it on the plan view image. Add a mark and combine with the video data.
  • the specific information of the person to be specified in the present embodiment, the direction information from the golf cart.
  • FIG. 10A is a plan view of a golf course hole to be combined with a digest image, in which the mark 1001 indicates the position where the highlight scene occurs, and the orientation mark 1002 indicates the orientation.
  • A1 to A4 indicate the positions played by player A
  • B1 to B3 indicate the positions played by player B
  • C1 to C3 indicate the positions played by player C
  • D1 to D4 indicates the position played by player D.
  • G1 to G4 indicate the stopped positions of the golf cart.
  • the line connecting G1-A1-G1-G2-A2-G2-G3-G4-A3-A4 shows the movement trajectory of player A.
  • the line connecting G1-B1-G1-G2-G3-B2-G3-G4-B3 shows the movement trajectory of player B
  • G1-C1-G1-G2-G3-C2-G3-G4-C3 The line connecting the two shows the movement locus of the player C
  • the line connecting the G1-D1-G1-G2-G3-D2-G3-G4-D3-D4 shows the movement locus of the player D.
  • the direction information 901 (specific information) of the player B and the player C from the golf cart when the highlight scene occurs. Since the direction information 902 (specific information) of the above is added to the video data, the position information B2 of the player B, the position information C2 of the player C, and the golf cart at the time of occurrence obtained from these specific information and the movement trajectory data. The position information G3 of is compared with the direction calculated from. Then, the position information of the player in the direction closest to the specific information is regarded as the position information of the person to be specified in the highlight scene. As a result, the position information of a specific person can be accurately determined.
  • the composite image generation unit 235 has a latitude within a range of 1 meter around the point where the highlight scene has occurred from the position information of the specified person and the three-dimensional map information stored in the course information storage unit 238. , Longitude, and altitude data are extracted. Then, an image of a solid model of a three-dimensional curved surface with orientation information (N, S, E, W) is created from these data (S910).
  • FIG. 10B is a solid model diagram showing the undulation to be combined with the digest video, and is created within a radius of 1 meter around the position 1003 where the highlight scene occurs.
  • N, E, S, and W indicate the directions, and the numbers indicate the altitude difference between the center altitude and each position in centimeters.
  • the figure of this solid model corresponds to the topographical information generated by the digest creating apparatus according to the present invention.
  • the composite image generation unit 235 synthesizes the images of these solid models and the map images with marks into the video data.
  • the golf cart position mark for example, a white circle
  • this plan view image is combined with the video data in the video data.
  • the above is the composite image generation process (S911) performed by the composite image generation unit 235.
  • the control unit 240 of the digest creation device 23 requests the digest creation unit 236 to create a digest.
  • the digest creation unit 236 combines the moving image data, which is a composite of the map image and the solid model image with undulations, into full HD image quality by the up-conversion technology, and combines them in chronological order to the digest storage unit 237. Write.
  • control unit 240 refers to the hole number recorded in the video data together with the time information, and inserts an image showing the hole number prepared in advance before the moving image of the tee shot (S912). ..
  • This digest ID consists of a golf course number, a play date, and a cart number.
  • the golf course associates the URL of the storage location with the digest ID. Notify the field terminal 24 (S808).
  • control unit of the digest creation device 23 returns to the process of step S801.
  • FIG. 17 is an operation flow diagram of the digest distribution server 26.
  • the digest distribution server 26 is a web server that transfers and streams digests (video files) that it manages on the Internet.
  • the digest distribution server 26 receives a storage request from the digest creation device 23 (S1101), it receives a digest file having the digest ID as a file name and stores it in the storage device (S1102). Then, the URL of the storage location of the digest file is returned to the digest creation device 23 (S1103). At this time, the digest distribution server 26 manages the digest ID, which is the file name of the received file, in association with the URL of the storage location.
  • the digest distribution server 26 receives a transfer request or a streaming distribution request for the digest file specified by the URL from a mobile terminal such as a player or a golf course terminal 24 (S1104)
  • the digest distribution server 26 reads the specified digest file from the storage device.
  • File transfer by FTP protocol or streaming distribution by HLS protocol is performed to the requesting terminal (S1105).
  • the digest distribution server 26 when the digest distribution server 26 receives an instruction to delete the digest file specified by the URL from a mobile terminal such as a player or a golf course terminal 24 (S1106), the digest distribution server 26 deletes the digest file specified from the storage device and also deletes the digest file. Notifies the transmission source player terminal or golf course terminal 24 of the completion of erasing the digest file (S1107).
  • the above is the operation flow of the digest distribution server.
  • FIG. 18 is an operation flow diagram of the golf course terminal 24.
  • the golf course terminal 24 is a general personal computer that can be connected to the Internet, but a digest providing service program is executed. That is, first, a menu of a digest creation request, a DVD creation request, and a digest erasure request is displayed on the display.
  • the golf course terminal 24 receives the digest creation request after the golf cart number is input from the keyboard or the like (S1201), the golf course terminal 24 attaches the golf course number, the date of play, and the cart number to the digest creation device 23. Requests that a digest be created from a file such as the corresponding video data (S1202). This request is transmitted to the digest creation device 23 on the Internet via the network i / f provided in the golf course terminal.
  • the golf course terminal 24 determines whether or not the digest ID and the URL which is the storage location of the digest have been received from the digest creation device 23 (S1203), and repeats the check until it is received.
  • the golf course terminal 24 associates and stores this URL with the digest ID, and at the same time, sends an e-mail or the like to the player who played with the cart number indicated by the digest ID. Notify the URL (S1204).
  • the digest distribution server 26 transfers the digest to the requesting terminal or performs streaming distribution, so that the player Will be able to watch the digest.
  • the golf course terminal 24 When the golf course terminal 24 receives a DVD creation request from the player (S1205), the golf course terminal 24 obtains a digest ID from the play date, the golf course ID, and the designated cart number, and the digest creation device 23. The URL is extracted from the information related to the URL received from and the digest ID. Then, the corresponding URL is accessed, the digest file is downloaded from the digest distribution server 26 (S1206), and the digest file is written to a DVD (S1207). At this time, the golf course terminal 24 creates a DVD of the digest with full HD (1920 pixels ⁇ 1080 pixels) image quality.
  • the golf course terminal 24 receives the cart number and the digest deletion instruction from the display menu (S1208), the golf course terminal 24 similarly extracts the corresponding URL and sends a digest file deletion request to the digest distribution server 26. (S1209).
  • the digest distribution server 26 deletes the digest file whose address is the specified URL.
  • the golf digest automatic creation system is a camera with an electric zoom lens in addition to an ultra-high resolution 360-degree camera installed at a position where a 360-degree field of view is open at the top of the golf cart. Because it is equipped with, you can also zoom in on playing at a place away from the golf cart, so you can clearly see the rolling of the ball on the green and the falling of the ball after the shot in the digest image. Can be recorded.
  • each player since each player possesses a mobile terminal for recording the movement trajectory information and makes a round, the position of the person in the highlight scene can be accurately obtained. As a result, it is also possible to know what kind of undulation the player hit the ball with.
  • the player since the player does not need to input any input to the mobile terminal 22 or the mobile shooting unit 21, the player can enjoy golf without being conscious of video shooting at all.
  • the moving shooting unit 21 is provided with the first AV storage unit 214 and the second AV storage unit 215 to write the moving image data from the first imaging unit 211 and the second imaging unit 212, but the present invention is not limited to this. It is also possible to output the moving image data from the 5G wireless transmission / reception unit 217 and transmit it to the digest creation device 23 in real time.
  • the moving image data from the first imaging unit 211 and the second imaging unit 212 is compressed by the video compression method H. It is preferable to provide a real-time encoder that compresses with 265 / HEVC or the like to transmit the encoded moving image data. Further, even in the case of real-time transmission, it is preferable that the first AV storage unit 214 and the second AV storage unit 215 store a certain amount of moving image data in order to deal with communication troubles in the mobile communication system.
  • the mobile terminal 22 records the moving locus data in the moving locus recording unit 222 from the start to the end of the round and transmits it to the moving shooting unit 21 after the round ends, but the present invention is not limited to this. May transmit the moving locus data to the moving shooting unit 21 every second in the present embodiment for a predetermined time, and a moving locus recording unit may be provided in the moving shooting unit 21. As a result, the mobile terminal 22 does not need to record the movement locus data, and can be a device having a simple hardware configuration equipped with a GPS receiver.
  • the mobile terminal 106 is provided with a sound collecting microphone, and voice data is transmitted to the mobile photographing unit 21 in real time via the wireless communication unit 224, and the control unit 220 of the mobile photographing unit 21 collects sound by the sound collecting unit 213. It is also possible to detect the event as voice data different from the data.
  • the size of the video cutout is determined on the premise of creating a high-definition digest, but the size is not limited to this, and it is premised on creating a DVD with SD image quality (720 pixels ⁇ 480 pixels). You may decide the size of the moving image cutout.
  • the digest creation device 23 and the digest distribution server 26 are separate devices, but the present invention is not limited to this, and the digest distribution function can be included in the digest creation device to form one device. Is.
  • the highlight scene section is determined by both the operation type and the sound type, but the present invention is not limited to this, and only the operation type or only the sound type is determined. It is also possible to determine the highlight scene section using. As described above, it is preferable to use both the motion type and the audio type because the reliability of the highlight scene judgment can be increased, but using only the audio type does not perform the motion analysis processing using the video data. , The load on the digest creation device is reduced, and the digest creation time can be shortened.
  • FIG. 19 is a diagram for explaining the configuration of the golf digest automatic creation system according to the second embodiment of the present invention, in which a fixed shooting unit 25 is provided, and the fixed shooting unit 25 and the mobile shooting unit 21 are a golf course terminal.
  • the configuration differs from that of the first embodiment in that the moving image data and the moving locus data are transferred to the digest creation device 23 via the 24 and the fifth generation mobile communication system is not used.
  • This fixed shooting unit 25 is installed when it is necessary to park the golf cart in an area where the golf cart cannot enter or in a place where the camera on the golf cart cannot shoot, and the mobile shooting unit 21 can play only by shooting. It is installed in a place that cannot cover the situation.
  • the points different from those of the first embodiment will be described in detail.
  • FIG. 20 is a diagram showing the configuration of the moving shooting unit 21 in the present embodiment.
  • the mobile photographing unit 21 does not have the 5G wireless transmission / reception unit 217, and has only the wireless transmission / reception unit 218 capable of medium-range wireless communication, such as the mobile terminal 22 and the fixed photography unit 25. Send and receive with the golf course terminal 24.
  • the three-dimensional map information stored in the course information storage unit 216 further includes information indicating that the fixed imaging unit is installed in the area and information indicating whether or not the second imaging unit 212 can photograph in that area. Has been added. Others are the same as in the first embodiment.
  • FIG. 21 is a diagram showing a hardware configuration of the fixed photographing unit 25 according to the second embodiment of the present invention.
  • the fixed shooting unit 25 of the present embodiment includes an imaging unit 251 including a camera, a sound collecting unit 252 including a voice microphone, an AV storage unit 253 for recording moving image data, a wireless transmission unit 254, and a control unit 255. Consists of. Since the shooting target range of the camera is limited, the camera shoots at a full HD image quality (1920 pixels ⁇ 1080 pixels) at a rate of 30 fps. At that time, the distortion caused by the wide-angle lens of the camera is corrected and output.
  • the fixed photographing unit 25 is realized by a camera, a sound collecting microphone, a wireless communication device, and a computer device.
  • This computer device includes a CPU, a memory, a non-volatile storage unit, an input / output interface, and a wireless communication interface, which are connected by a bus.
  • the control unit 255 realizes the function by expanding and executing the control program stored in the non-volatile storage unit in the memory.
  • FIG. 22 is a diagram showing a hardware configuration of the golf course terminal 24 according to the present embodiment.
  • the golf course terminal 24 includes a data transfer storage unit 246, a digest storage unit 245, a DVD writing unit 244, a key input unit 242, a display unit 241 and a network i / f 248, a wireless transmission / reception unit 247, and a control unit 243. Consists of.
  • the data transfer storage unit 246 is a storage device that temporarily stores the 360-degree camera video data file, the optical zoom camera video data file, the audio data file, and the movement locus data file received from the mobile photographing unit 21 by wireless communication. ..
  • the digest storage unit 245 stores the digest file received from the digest distribution server 26.
  • the DVD writing unit 244 reads out the digest file stored in the digest storage unit 245 and writes it to the DVD in full HD image quality.
  • the control unit 243 controls the entire golf course terminal 24 to execute the digest providing service, displays a menu on the display unit 241 and performs the process selected by the key input unit 242 on the golf course terminal 24. Instruct each component processing unit to perform this.
  • the golf course terminal 24 described above is realized by a display, a keyboard, a mouse, a DVD recorder, a network interface card, a wireless communication device, and a computer device.
  • This computer device includes a CPU, a memory, a non-volatile storage unit, an input / output interface, and a wireless communication interface, which are connected by a bus.
  • the control unit 240 realizes the function by expanding and executing various programs stored in the non-volatile storage unit in the memory.
  • the golf course terminal 24 can be realized by a personal computer provided with these hardware resources, as in the first embodiment.
  • FIG. 23 is an operation flow diagram of the moving shooting unit according to the second embodiment. Only the points different from the first embodiment will be described below.
  • the first difference is the cart moving process (S1304) performed while the cart is moving.
  • FIG. 24 is a diagram illustrating a process during movement of the cart performed by the moving shooting unit 21.
  • control unit 220 of the mobile photographing unit 21 stops the photographing and the recording / recording that the first imaging unit and the second imaging unit have performed until then (S1401).
  • a radio transmission / reception unit 218 transmits a shooting start request to the unit 25 together with the golf cart number (S1404). After that, wait until the golf cart stops.
  • the control unit 220 checks whether the fixed shooting area has moved out of the area (S1403), and if so, requests the fixed shooting unit to stop shooting. Is transmitted (S1405). The above is the processing during movement of the cart performed by the moving shooting unit 21.
  • the second difference is the processing when the cart is stopped outside the clubhouse.
  • the moving shooting unit 21 checks whether or not the current position is within the installation area of the fixed shooting unit (step S1307). Then, if it is within the area, it is determined whether or not the second imaging unit can take a picture (S1308), and if it is possible to take a picture, the second imaging unit starts taking a picture (S1309).
  • the third difference is the processing performed by the moving shooting unit 21 after the round is completed.
  • the moving shooting unit 21 receives the moving locus data from the mobile terminal 22, and transmits the shot moving image data together with the moving locus data to the digest creation device 23 via the golf course terminal 24 ( S1315).
  • the mobile photographing unit 21 does not perform the fifth generation mobile communication, and when the golf cart returns to the clubhouse after the end of the round, the first AV storage unit 214 and the second AV storage unit 21 are stored. All the moving image data and the movement locus data recorded in this land recorded in the part 215 are transmitted to the golf course terminal 24.
  • FIG. 25 is an operation flow diagram of the fixed photographing unit 25.
  • the control unit 255 of the fixed shooting unit 25 waits for a shooting start request from the moving shooting unit 21 (S1501), and when there is a request, the control unit 255 receives the imaging unit 251 and the sound collecting unit 252. Recording / recording of the moving image data from the above to the AV storage unit 253 is started (S1502). At this time, the control unit 255 records the golf cart number notified together with the shooting start instruction and the time when the recording / recording of the moving image is started in order to identify the moving image data to be recorded.
  • control unit 254 waits for a shooting end request from the mobile shooting unit 21 (S1503), and if there is a request, ends recording / recording to the AV storage unit 253 (S1504).
  • control unit 255 of the fixed shooting unit 25 creates a digest of the recorded video data file, audio data file, and attribute information file in which the golf cart number, shooting start time information, hole number, and area identification information are described. Radio transmission to the device 23 (S1505).
  • control unit 255 of the fixed photographing unit 25 returns to the process of step S1501 for the next play group.
  • FIG. 26 is an operation flow diagram of the golf course terminal 24.
  • the control unit 243 of the golf course terminal 24 first checks whether or not there is a transfer request for moving image data from the mobile shooting unit 21 (S1701), and if there is a reception request, permits transmission and images. Start receiving the data file, audio data file, and movement trajectory data file.
  • the control unit 243 requests the digest creation device 23 to receive these files.
  • the golf course terminal 24 transmits all the files received earlier, that is, the video data file, the audio data file, and the movement trajectory data file with the moving image ID. Is transmitted by the FTP protocol to (S1702).
  • control unit 243 of the golf course terminal 24 checks the options displayed on the display of the display unit 241.
  • step S1703 to step S1711 are the same as the processes from step S1201 to step S1209 in the operation flow diagram (FIG. 18) of the golf course terminal 24 of the first embodiment.
  • FIG. 27 is an operation flow diagram of the digest creation process performed by the digest creation device 23.
  • control unit 240 of the digest creation device 23 when the control unit 240 of the digest creation device 23 receives an instruction to create a digest, it reads a moving image file to which the notified golf cart number is assigned from the AVL storage unit 231 (S1601), and is a moving shooting unit. For the moving image file taken by 21, the moving image cutting process (S1602) to the creation of the highlight scene scene candidate list 2 (S1606) are performed in the same manner as in the first embodiment.
  • control unit 240 performs the same operation analysis processing as in the first embodiment (S1607) for the moving image file shot by the fixed shooting unit 25, without performing the moving image cutting process. From S1608) to the creation of the highlight scene candidate list 2 (S1611). This is because shooting with a fixed camera only shoots a limited space.
  • control unit 240 combines all the highlight scene candidate lists in chronological order (S1612), and performs from the highlight scene determination process (S1613) to the digest creation (S1617) as in the first embodiment. ..
  • This digest is of high quality because both the moving image taken by the moving photography unit 21 and the moving image taken by the fixed shooting unit 25 are all in full HD image quality by the up-conversion technique.
  • the operation of the mobile terminal 22 and the digest distribution server 26 is the same as that of the first embodiment.
  • the fixed shooting unit since the fixed shooting unit is installed in the area where the golf cart cannot enter, the highlight scene of the area that cannot be covered only by the shooting of the moving shooting unit 21 is not missed. You can create a collected digest.
  • the golf digest creation system of the present embodiment only needs to be able to communicate with the golf course terminal 24 by a medium-range wireless communication device without using the 5th generation mobile communication system, the 5th generation such as in the mountains and along the coast. It can be implemented even in areas where the services of wireless communication systems do not reach.
  • the present invention is useful for creating a digest of golf play, and is suitable for making a digest that collects clearly visible highlight scenes without being conscious of shooting.

Abstract

移動撮影ユニットはゴルフカートに設置した３６０度カメラと電動雲台上の電動式ズームレンズ付きカメラと集音マイクとＧＰＳ受信機とレンズの方向検出器とを有しており、現在位置とゴルフコース地図情報とから電動式ズームレンズ付きカメラの撮影対象エリアを決定し電動雲台を駆動して、ズーム撮影した映像データに時刻情報やエリア識別情報を付して記憶する。そして、ダイジェスト作成装置がその記憶された映像データに付されたエリア識別情報に基づいて画像解析やハイライトシーンの抽出の対象とする映像データを３６０度カメラからのものと電動式ズームレンズ付きカメラからのものとのいずれにするかを選択する。

Description

ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置
　本発明は、ゴルフラウンド中のプレーの撮影からハイライトシーンを集めたダイジェスト作成までを自動的に行うゴルフダイジェスト作成システムに関する。
　従来より、ゴルフラウンド中のプレーを撮影し、プレー後に動画像をプレーヤーに提供するシステムとしては、特許文献１に記載されているようなものがあった。図２８は、特許文献１に記載された従来のゴルフダイジェスト作成システムを構成する移動撮影ユニットの図である。
　図２８において、移動撮影ユニットは、ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、そのゴルフカートに設置した集音マイクと、３６０度カメラからの映像データと集音マイクからの音声データとを記憶するＡＶ記憶部と、映像データと音声データとに両者が同期するための時刻情報を付してＡＶ記憶部に記憶する制御部とを有していた。また、ダイジェスト作成装置は、移動撮影ユニットのＡＶ記憶部に記憶した映像データを画像解析および／または音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部とを有していた。
　また、プレー時の映像、音声やスコア、コース状況等をライブラリーとして簡易に蓄積できるシステムとしては、特許文献２に記載されているようなものがあった。図２９と図３０は、特許文献２に記載された従来のゴルフプレーライブラリーシステムでの表示画面の例である。
　このゴルフプレーライブラリーシステムでは、プレーヤーがプレー中に撮像ボタンを押して撮影すると、その画像が画像・音声ファイルに格納され、プレー中のホールのたとえば、グリーンとをリンクさせるリンク情報が追加される。これにより、ラウンド終了後、図２９の収録画像を表示するモードの画面でユーザがグリーンをポイント指示すると、リンクが取れている画像があれば図３０のように表示される。
特開２０２０－８８８５５号公報 特開２００３－１１１８８３号公報
　しかしながら、上記従来例の特許文献１に記載の移動撮影ユニットでは、ゴルフカートがゴルフプレーヤーから離れた位置で撮影せざるを得ない場合、ショット後のボールの行方やグリーン上のボールの転がりなどを明瞭に視認可能な程度に映像として記録することができないという課題があった。
　また、ハイライトシーン（見どころのシーン）の映像のみでは、そのシーンの地点の詳細なアンジュレーションが分からないという課題があった。
　また、特許文献２に記載のゴルフプレーライブラリーシステムでは、プレーヤーがプレー中に撮影しなければならずプレーに集中できない上に、映像からしかショットしたときのアンジュレーションが分からないという課題があった。
　本発明は、上記従来の課題を解決するためになされ、その目的とするところは、プレーヤーが撮影を意識することなしに、ゴルフコース上のハイライトシーンでのゴルフボールの転がりなどの様子やショットした地点のアンジュレーションが分かるゴルフラウンドのダイジェストを自動作成するゴルフダイジェスト作成システムを提供することにある。
　上記従来の課題を解決する本発明に係るゴルフダイジェスト自動作成システムは、移動撮影ユニットとダイジェスト作成装置とを備える。
　その移動撮影ユニットは、ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、ゴルフカートに設置した集音マイクとＧＰＳ受信機と、電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、ゴルフコースの地図情報を記憶したコース情報記憶部と、前記３６０度カメラからの映像データと前記電動式ズームレンズ付きカメラからの映像データと集音マイクからの音声データとを記憶するＡＶ記憶部と、ＧＰＳ受信機の検出した位置情報と地図情報とから撮影対象エリアを決定し、方向検出器の検出するレンズ方向が当該撮影対象エリアになるように電動雲台を駆動して、電動式ズームレンズ付きカメラでズーム撮影した映像データと、３６０度カメラからの映像データと、音声データとに三者が同期するための時刻情報や撮影対象エリアを特定するエリア識別情報を付してＡＶ記憶部に記憶する制御部とを有する。
　また、ダイジェスト作成装置は、移動撮影ユニットのＡＶ記憶部に記憶された映像データを画像解析および／または音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、映像データに付されたエリア識別情報に基づいて画像解析や前記ハイライトシーンの抽出の対象とする映像データを前記３６０度カメラからの映像データと電動式ズームレンズ付きカメラからの映像データとのいずれにするかを選択する制御部とを有する。
　これによって、３６０度カメラではボールなどを視認できるほどに映像を記録できない場合にも、電動式ズームレンズ付きカメラにより明瞭に視認可能なレベルの映像を記録できるので、ゴルフカートと離れた位置でのプレーでもボールなどの動きをダイジェストで確認することが可能になる。
　また、本発明に係る移動撮影ユニットの制御部は、ＧＰＳ受信機の検出した位置情報が地図情報においてグリーン横である場合、当該グリーンを電動式ズームレンズ付きカメラの撮影対象エリアに決定する。
　これによって、グリーン上のボールの転がりの様子をダイジェストの映像で確認することが可能になる。
　また、本発明に係る移動撮影ユニットの制御部は、さらにＧＰＳ受信機の検出した位置情報が地図情報においてグリーン横でない場合、当該位置情報の示す位置からショットしたボールの次の落下エリアとして地図情報にあらかじめ定めたエリアを撮影対象エリアに決定する。
　これによって、グリーン横以外でのプレーでは、ショット後のボールの落下予測エリアを電動式ズームレンズ付きカメラで撮影するので、ショット後のボールの行方をダイジェストの映像で確認することが可能になる。
　また、本発明に係るダイジェスト作成装置の制御部は、映像データに付されているエリア識別情報がグリーンであることを示す場合、画像解析やハイライトシーンの抽出の対象とする映像データとして電動式ズームレンズ付きカメラからの映像データを選択する。
　これによって、グリーン上のプレーは電動式ズームレンズ付きカメラで撮影した映像となるので、グリーン上のボールの転がりの様子をダイジェストの映像で確認することが可能になる。
　また、本発明に係るダイジェスト作成装置の制御部はハイライトシーンの映像データに付されたエリア識別情報がグリーンでない場合、当該ハイライトシーンのショット後の映像データを、同時刻の電動式ズームレンズ付きカメラからの映像データに置換する。
　これによって、ショット後の映像には次の落下予測エリアの映像が付くので、打球の方向やおよその飛距離などをダイジェストの映像で確認することが可能になる。
　また、本発明に係るダイジェスト作成システムは、ＧＰＳ受信機を備えて所定時間の間隔で位置情報を記録することによりプレーヤーの移動軌跡情報を作成する携帯端末をさらに有する。また、移動撮影ユニットの３６０度カメラは方位センサを備えて出力する映像データに方位情報を付し、制御部は映像データにゴルフカートの位置情報を付してＡＶ記憶部に記憶するものである。そして、ダイジェスト作成装置はゴルフコースの３次元地図情報を記憶した地図情報記憶部をさらに有し、ダイジェスト作成部がハイライトシーンの発生時刻における、３６０度カメラからの映像データに付されている方位情報とゴルフカートの位置情報と携帯端末から取得した移動軌跡情報とからプレーヤーの位置を特定し、３次元地図情報から当該位置における地形情報を算出して当該ハイライトシーンの映像データに合成する。
　これによって、ボールを打った地点のアンジュレーションをダイジェストの映像で確認することが可能になる。
　また、本発明に係る移動撮影ユニットは、ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、ゴルフカートに設置した集音マイクとＧＰＳ受信機と、前記電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、ゴルフコースの地図情報を記憶したコース情報記憶部と、３６０度カメラからの映像データと電動式ズームレンズ付きカメラからの映像データと集音マイクからの音声データとを記憶するＡＶ記憶部と、ＧＰＳ受信機の検出した位置情報と地図情報とから電動式ズームレンズ付きカメラの撮影対象エリアを決定し、方向検出器の検出するレンズ方向が当該撮影対象エリアになるように電動雲台を駆動して、電動式ズームレンズ付きカメラでズーム撮影した映像データと、３６０度カメラからの映像データと、音声データとに三者が同期するための時刻情報や撮影対象エリアを特定するエリア識別情報を付してＡＶ記憶部に記憶する制御部とを有する。
　これによって、３６０度カメラではボールなどを視認できるほどに映像を記録できない場合にも、電動式ズームカメラにより明瞭に視認可能なレベルの映像を記録できると共に、ゴルフコースのどのエリアの映像であるかを知ることができる。
　また、本発明に係るダイジェスト作成装置は、ゴルフカートに設置した３６０度カメラからの映像データと電動雲台上に取り付けた電動式ズームレンズ付きカメラからの映像データとゴルフカートに設置した集音マイクからの音声データに、三者が同期するための時刻情報や撮影対象としたエリアを識別するエリア識別情報を付したものを記憶するダイジェスト作成用ＡＶ記憶部と、そのダイジェスト作成用ＡＶ記憶部に記憶した映像データを画像解析および／または音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、映像データに付されたエリア識別情報に基づいて画像解析やハイライトシーンの抽出の対象とする映像データを３６０度カメラからの映像データと電動式ズームレンズ付きカメラからの映像データとのいずれにするかを選択する制御部とを有する。
　これによって、ダイジェスト作成装置は、撮影対象エリアに応じて、３６０度カメラではボールなどを視認できるレベルで記録できていない映像を使用せず、電動式ズームカメラにより明瞭に視認可能なレベルの記録できている映像を使用してダイジェストを作成できるので、打球の行方やボールの転がりの様子をダイジェストで確認することが可能になる。
　本発明により、ゴルフコース上のハイライトシーンでの打球の行方やグリーン上のボールの転がりなどの様子を明瞭に視認できると共に、ショット地点のアンジュレーションが分かるダイジェストを、プレーヤーが撮影を意識することなしに自動作成することが可能となる。
本発明の実施の形態１におけるゴルフダイジェスト作成システムの概要図 本発明の実施の形態１のゴルフダイジェスト作成システムの構成を説明する図 本発明の実施の形態１における移動撮影ユニットのハードウェア構成図 本発明の実施の形態１における携帯端末のハードウェア構成図 本発明の実施の形態１におけるダイジェスト作成装置のハードウェア構成図 本発明の実施の形態１における電動式ズームレンズを装着した電動雲台の外観図 本発明の実施の形態１における映像データの１フレーム画像の例を示す図 本発明の実施の形態１における映像データから特定人物を中心に切り出したフレーム画像の例を示す図 本発明の実施の形態１におけるグリーン上の映像データから特定人物と旗竿を中心に切り出したフレーム画像の例を示す図 本発明の実施の形態１におけるゴルフコースの一つのホールを示した等高線図 本発明の実施の形態１におけるハイライトシーンの発生時に特定すべき人物がいた位置を正確に求める方法を説明する図 本発明の実施の形態１におけるダイジェスト映像に合成するゴルフコースのホールの図 ダイジェスト映像に合成するアンジュレーションを示すソリッドモデルの図 本発明の実施の形態１における移動撮影ユニットの動作フロー図 本発明の実施の形態１における携帯端末の動作フロー図 本発明の実施の形態１におけるダイジェスト作成装置の動作フロー図 本発明の実施の形態１におけるダイジェスト作成装置のダイジェスト作成処理を説明する動作フロー図 本発明の実施の形態１におけるハイライトシーンの決定処理を説明する動作フロー図 本発明の実施の形態１における動作種別と音声種別に評価値を付与する処理を説明する図 本発明の実施の形態１における動作種別と音声種別に評価値を付与する処理を説明する図 本発明の実施の形態１におけるダイジェスト配信サーバの動作フロー図 本発明の実施の形態１におけるゴルフ場端末の動作フロー図 本発明の実施の形態２におけるゴルフダイジェスト作成システムの構成を説明する図 本発明の実施の形態２における移動撮影ユニットのハードウェア構成を示す図 本発明の実施の形態２における固定撮影ユニットのハードウェア構成を示す図 本発明の実施の形態２におけるゴルフ場端末のハードウェア構成を示す図 本発明の実施の形態２における移動撮影ユニットの動作フロー図 本発明の実施の形態２における移動撮影ユニットの行うカート移動中処理のフロー図 本発明の実施の形態２における固定撮影ユニットの動作フロー図 本発明の実施の形態２におけるゴルフ場端末の動作フロー図 本発明の実施の形態２におけるダイジェスト作成装置の行うダイジェスト作成処理のフロー図 従来のゴルフダイジェスト作成システムを構成する移動撮影ユニットのハードウェア構成を示す図 従来のゴルフプレーライブラリーの表示画面を示す図 従来のゴルフプレーライブラリーの表示画面を示す図
　以下本発明の実施の形態について、図面を参照しながら説明する。
　（実施の形態１）
　図１は、本発明の実施の形態１におけるゴルフダイジェスト作成システムの概要を示す図である。
　ゴルフは、プレーヤーが決められた順番に１８ホールのゴルフコースをすべてまわり、ティーイングエリア１１１からグリーン１１３上のカップまでのゴルフボールを打ったトータル打数を競うスポーツである。
　図１において、ゴルフコース１１は１８ホールの一つを示しており、プレーヤー１３が乗車してコース上を移動するゴルフカート１２には、全方位の撮影を行える３６０度カメラ１０１と、電動雲台と、その電動雲台上に取り付けられた電動式ズームレンズ付きカメラ１０５と、無指向性の集音マイク１０２と、ＧＰＳ受信機１０３と、無線通信機能を有する移動記録装置１０４とが搭載されている。特に、３６０度カメラ１０１はゴルフカート１２のルーフ上方の３６０度視界が開けた位置に設置されている。
　また、この３６０度カメラ１０１と電動式ズームレンズ付きカメラ１０５の解像度は、４Ｋ（３，８４０画素×２，１６０画素）または８Ｋ（７，６８０画素×４，３２０画素）である。なお、３６０度カメラと電動式ズームレンズ付きカメラ１０５からの映像データと集音マイク１０２からの音声データは移動記録装置１０４へ有線または無線で送られる。また、この３６０度カメラ１０１は複数台のカメラを用いて３６０度をカバーするように構成し各映像を合成するようにしたものでもよい。そして、電動式ズームレンズ付きカメラ１０５は光学レンズの焦点距離や画角を可変できる電動式光学ズームレンズを装着しており、電動雲台はチルトやパンやロール駆動が可能である。
　これらゴルフカートに搭載されたものが移動撮影ユニットであり、この移動撮影ユニットはプレー中のゴルフカート周辺３６０度の映像と音声、そしてボールの次の落下地点と予測されるエリアあるいはグリーンのズームアップした映像を自動的に記録する。
　プレーヤー１３が腰などに付ける携帯端末１０６は、ＧＰＳ受信機を備え、プレーヤーの移動軌跡を時刻情報とともに記録する。
　クラブハウス１４にはゴルフ場端末１０７が設置されており、画面を操作して所望のダイジェスト動画の作成を指示したり、ＤＶＤなどへダイジェスト動画の書込みなどを行う。
　　インターネット１５上にはダイジェスト作成装置１０９とダイジェスト配信サーバ１１０が存在しており、ゴルフ場に存するゴルフ場端末１０７とは有線でデータ通信し、移動撮影ユニットとは無線基地局１０８を介してデータ通信する。このダイジェスト作成装置１０９はゴルフカートに搭載した移動記録装置１０４に記録された動画データ（以下、「映像データ」と「音声データ」との両方を指す。）を受信し、映像データと音声データを解析するなどしてプレーのハイライトシーンを集めたダイジェストを作成する。
　図２は本実施の形態のゴルフダイジェスト作成システムの構成を説明する図である。
　図２において、移動撮影ユニット２１は携帯端末２２との間で双方向の無線通信を行うが、さらにインターネット２７上に存在するダイジェスト作成装置２３との間で第５世代移動通信（５Ｇ）を行う。この第５世代移動通信（５Ｇ）システムは、ＵＥ（ユーザー装置）と５Ｇアクセス・ネットワーク（５Ｇ－ＡＮ）２９と５Ｇコア・ネットワーク（５ＧＣＮ）２８とで構成される。５Ｇアクセス・ネットワーク（５Ｇ－ＡＮ）２９は、ユーザ装置と直接電波をやり取りする第五世代の無線ネットワーク部分であって、５Ｇコア・ネットワーク２８は、全体として接続処理やユーザ・データのルーティング処理をする第５世代の無線ネットワーク部分である。この５Ｇアクセス・ネットワーク（５Ｇ－ＡＮ）２９と５Ｇコア・ネットワーク（５ＧＣＮ）２８については、たとえば文献「５Ｇ教科書（ＬＴＥ／ＩｏＴから５Ｇまで）」（発行所：株式会社インプレス）の２１８頁から２４１頁に記載されている通りである。
　本実施の形態における移動撮影ユニット２１は、上記のＵＥに該当し、第５世代無線基地局との間で新無線インタフェース（以下、ＮＲと記す。）で双方向通信が可能な５Ｇ無線送受信部を備えている。上記のＮＲについては、前記の文献「５Ｇ教科書（ＬＴＥ／ＩｏＴから５Ｇまで）」の１０８頁から１１７頁に記載されている通りである。なお、このＮＲは下りリンク最大２０Ｇｂｐｓ、上りリンク最大１０Ｇｂｐｓのデータレートを実現する通信能力を有するものである。
　ゴルフ場端末２４はＤＶＤ書込み機能とネットワークｉ／ｆを備える一般的なパーソナルコンピュータであって、ダイジェスト作成装置２３との間で有線での双方向通信を行うものである。
　ダイジェスト配信サーバ２６は大規模な容量の記憶装置とネットワークｉ／ｆを備えるコンピュータであって、ダイジェスト作成装置２３からダイジェストデータを受信し、個別のＩＤあるいはＵＲＬを付与して記憶・蓄積する。また、外部からＩＤあるいはＵＲＬで指定されたダイジェストデータの送信要求を受付け、要求元の端末（スマートフォンやパーソナルコンピュータ）へファイルを転送したり、ストリーミング配信するものである。
　図３はゴルフダイジェスト作成システムを構成する移動撮影ユニットのハードウェア構成を示す図である。
　図３において、移動撮影ユニット２１は、第１撮像部２１１と第２撮像部２１２と集音部２１３と第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５とコース情報記憶部２１６と５Ｇ無線送受信部２１７と無線送受信部２１８とＧＰＳ受信部２１９と制御部２２０とからなる。
　第１撮像部２１１は３６０度カメラを含み、当該３６０度カメラからの映像データを第1ＡＶ記憶部２１４へ送信するが、その際に３６０度カメラの広角レンズによる歪みを補正して出力する。この歪み補正は公知のアルゴリズムを組み込んだＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）によりリアルタイム処理を実現している。
　さらに、３６０度カメラは方位センサを備え、撮影した映像データに方位情報を付して出力する。図７Aはこの映像データの１フレーム画像の例を示している。図７Aにおいて、破線と共に付されたＮ、Ｅ、Ｓ、Ｗの文字はそれぞれ北、東、南、西の方位を示している。
　第２撮像部２１２は、電動雲台とその上に取り付けられた電動式ズームレンズ付きカメラを含む。図６はこの電動雲台６０とそれに取り付けられた電動式ズームレンズ付きカメラの電動式ズームレンズ６１とを示す図である。この図において、電動式ズームレンズ６１は電気信号ケーブル６１ｂで図示されていないビデオカメラ本体とつながっており、電動雲台６０は電気ケーブル６０ａで図示されていない移動記録装置に接続している。
　図６において、電動雲台６０はパン回転部６０１とチルト回転部６０２とロール回転部６０３とからなり、それぞれパン駆動用モータとチルト駆動用モータとロール駆動用モータを内蔵している。電動式ズームレンズ６１はロール回転部６０３の回転シリンダ６０３ａに固定されている。そして、パン回転部６０１には方位センサ６２が取り付けられ、チルト回転部６０２には仰角を検出する傾斜センサ６３が取り付けられ、ロール回転部６０３にはロール角度を検出する傾斜センサ６４が取り付けられている。なお、ロール回転部６０３は傾斜センサの検出した角度を打ち消す方向に回転シリンダ６０３ａを回転させて常にズームレンズ６１の水平を保っている。
　また、電動式ズームレンズ６１はレンズ移動用モータを備え、ビデオカメラ本体からの電気信号によりズームレンズ６１ａを駆動して焦点距離や画角を変更することができる。
　これらの構成により、第２撮像部２１２は光学ズームレンズをローリング補正して常に水平を保った状態で、方位センサと傾斜センサの検出値を基に指示された方向へレンズを向けると共に、指定された倍率でズーミングした映像データを第２ＡＶ記憶部２１５へ送信する。
　集音部２１３は集音マイク１０２を含み、当該集音マイク１０２からの音声データを第1ＡＶ記憶部２１４および第２ＡＶ記憶部２１５へ送信する。
　ＧＰＳ受信部２１９はＧＰＳ受信機を含み、衛星からの信号を受信して現在の位置情報と時刻情報とを出力する。
　第１ＡＶ記憶部２１４は第１撮像部２１１からの映像データと集音部２１３からの音声データを記憶するものである。そして第２ＡＶ記憶部２１５は第２撮像部２１２からの映像データと集音部２１３からの音声データを記憶するものである。これら第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５は、共にハードディスクや半導体メモリカードを記録媒体とする不揮発性記憶装置であるが、耐衝撃性に優れる半導体メモリカードが好ましい。
　コース情報記憶部２１６も不揮発性記憶装置であり、ゴルフ場の全コースの３次元地図情報が記憶されている。図８はゴルフコースの一つのホールを示した等高線図である。図８において、等高線は一部を省略して表記しているが、本実施の形態における３次元地図情報は、１センチメートルの高度間隔で作成された等高線図を５センチメートル四方でメッシュ状に細分化した各点の緯度と経度と高度とからなるものであって、ホールごとに記憶している。また、図８で示すように、各ホールは基準打数に応じてエリアを２から４に分けている。すなわち、基準打数が３のホールではエリア１とエリア２に分け、基準打数４のホールでは、エリア１からエリア３に分け、基準打数５のホールではエリア１からエリア４に分け、ホールの外郭と各エリアの境界線上の点をエリア情報として記憶している。
　５Ｇ無線送受信部２１７は、前述した第５世代無線基地局と高速無線通信を行うものである。
　無線送受信部２１８は中距離の無線通信（ＩＥＥＥ８０２．１１）を行うもので、数１００メートル間の通信が可能である。
　制御部２２０は、移動撮影ユニット２１全体を制御するものであり、第１撮像部２１１からの映像データや集音部２１３からの音声データを第１ＡＶ記憶部２１４に書き込み、第２撮像部２１２からの映像データや集音部２１３からの音声データを第２ＡＶ記憶部２１５に書き込む。これらの映像データは、２０ｆｐｓから６０ｆｐｓのフレームレートで撮影され、各フレームには撮影開始からの経過時刻（タイムコード）を付して記録する。また、音声データにも上記各フレームに同期した時刻情報（タイムコード）を付して記録する。なお、制御部２２０は、第２撮像部２１２の電動雲台に対してパン方向の回転角度とチルト方向の回転角度を指示すると共に、電動式ズームレンズ付きカメラに対してズーム倍率を指示する。
　さらに、制御部２２０はＧＰＳ受信部２１９から取得した位置情報と３次元地図情報とから現在ゴルフカートの停止しているホール番号を算出し、これらの映像データにゴルフカートの位置情報とホール番号と撮影対象としたエリアを識別するエリア識別情報とを記録する。
　以上の移動撮影ユニット２１から３６０度カメラ１０１と電動雲台６０と電動式ズームレンズ付きカメラ１０５と集音マイク１０２とＧＰＳ受信機１０３とを除いたものが前述した移動記録装置１０４であり、無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インタフーェースを備えており、それらはバスで接続されている。特に、制御部２２０は、不揮発性記憶部に記憶してある制御用プログラムをメモリに展開して実行することにより機能を実現している。
　なお、本発明に係る移動撮影ユニットのＡＶ記憶部は第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５とをさし、方向検出器は方位センサ６２と傾斜センサ６３とをさし、地図情報は３次元地図情報をさす。
　次に、携帯端末２２のハードウェア構成を説明する。
　図４は本実施形態における携帯端末２２のハードウェア構成を示す図である。
　図４において、携帯端末２２は、ＧＰＳ受信部２２１と移動軌跡記録部２２２と無線送受信部２２３と制御部２２４とからなる。
　ＧＰＳ受信部２２１はＧＰＳ受信機を含み、衛星からの信号を受信して現在の位置情報と時刻情報とを出力する。
　移動軌跡記録部２２２は不揮発性メモリであり、この携帯端末２２を保有するプレーヤーがゴルフプレー中に移動した地点を所定時間ごとに記録した情報（以下、「移動軌跡情報」という。）を記憶している。
　無線送受信部２２３は無線通信（ＩＥＥＥ８０２．１１）を行うもので、数１００メートル間の通信が可能である。
　制御部２２４は携帯端末２２全体を制御するものである。
　以上の携帯端末２２は、ＧＰＳ受信機と無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インターフェースを備えており、それらはバスで接続されている。特に、制御部２２４は、不揮発性記憶部に記憶してある制御用プログラムをメモリに展開して実行することにより機能を実現している。
　次に、ダイジェスト作成装置２３のハードウェア構成を説明する。
　図５は、本実施の形態におけるダイジェスト作成装置２３のハードウェア構成を示す図である。
　図５において、ダイジェスト作成装置２３は、ＡＶＬ記憶部２３１と動画切出し部２３２と動作解析部２３３と音声解析部２３４と合成画像生成部２３５とダイジェスト作成部２３６とダイジェスト記憶部２３７とコース情報記憶部２３８とネットワークｉ／ｆ部２３９と制御部２４０とからなる。
　ＡＶＬ記憶部２３１は、不揮発性記憶装置であり、移動撮影ユニット２１から第５世代移動通信システムを経由して受信した、３６０度カメラの撮影した映像データ（以下、「３６０度カメラ映像データ」という。）と電動式ズームレンズ付きカメラの撮影した映像データ（以下、「光学ズームカメラ映像データ」という。）と音声データと携帯端末２２が作成した移動軌跡データを記憶する記憶装置である。なお、移動軌跡データファイルにはプレーヤーあるいは携帯端末の識別情報が付されている。
　動画切出し部２３２は、映像データから任意の領域を指定して映像を切り出すものであって、動体検出によって人物を検出し、その人物全員が含まれる周辺領域までを切り出す処理を行ったり、人物を特定して切り出す。なお、特定の人物を切り出す際には、人物追跡処理を行って、当該人物を中心にして切り出す。
　さらに、動画切出し部２３２は、ＡＶＬ記憶部２３１から読み出した光学ズームカメラ映像データに付されたエリア識別情報がグリーンを示すものであった場合は、人物ばかりでなく、グリーン上の旗竿とボールを検出し、それらも含めた領域を切り出す処理を行う。
　図７Aは３６０度カメラによる映像データのフレームの画像例を示し、本フレームはゴルフカートの周り３６０度の画像である。動画切り出し部２３２は、このフレーム中の人物がすべて含まれるように破線で囲んだ領域を切り出す。
　また、図７Bは人物を特定して切り出した画像例であって、人物が所定のサイズ以上になるように領域を切り出す。このとき、人物の特定はその人物の３６０度カメラから見た方角の情報、たとえば、北を０度とし時計方向をプラス、反時計方向をマイナスと規定し、マイナス１７０度といった方角情報と共に動画切り出し要求が出される。そして、切り出された画像にはこの方角情報が人物を特定する特定情報として付される。
　また、図７Cはグリーン上の人物を特定して切り出した画像例であって、特定された人物と旗竿とを中心にした領域を切り出す。
　これら人物等の検出や人物追跡や画像切出し（トリミング）の処理は、ＯｐｅｎＣＶ（Ｏｐｅｎ　Ｓｏｕｒｃｅ　Ｃｏｍｐｕｔｅｒ－Ｖｉｓｉｏｎ－Ｌｉｂｒａｒｙとはインテル社が開発・公開したオープンソースのコンピュータビジョンライブラリーをいう。）で公開されている公知の画像処理プログラムやモーション解析プログラムや物体追跡プログラムやパターン認識プログラムなどを利用したソフトウェア処理を行うことにより行う。
　動作解析部２３３は、映像データを画像認識してプレーヤーがスイングする動作であるか、パッティングする動作であるか、あるいは飛び跳ねたり、手を上にあげる動作であるかを解析する。この解析技術としては、例えば、立体高次局所自己相関（Ｃｕｂｉｃ　Ｈｉｇｈ　ｏｒｄｅｒ　Ｌｏｃａｌ　Ａｕｔｏ　Ｃｏｒｒｅｌａｔｉｏｎ）特徴量を用いて動作を判定する技術が知られている。そして、動作解析部２３３は判定された各動作種別とその判定時刻情報とからなるハイライトシーン候補リストを作成する。
　なお、本実施の形態では超高解像度カメラを使用しており、４Ｋカメラの場合、録画した動画の画素が３，８４０画素×２，１６０画素であり、８Ｋカメラの場合、７，６８０画素×４，３２０画素でフレームは録画されている。このため、切り出し後であっても人物の画素数はＨＤ画質の録画の場合の切り出し後のものに比べ４倍、あるいは８倍となるので、高い精度で動作解析することが可能である。さらに、第２撮像部からの映像データは電動式ズームレンズによりグリーンのみが拡大された動画であるため、グリーン上のボールを明瞭に認識することが可能である。
　音声解析部２３４は、音声データの周波数分析を行いスペクトログラムを求め、予め設定してあるモデルのスペクトログラムとの類否度を求める。さらに、音量の２乗平均値の大きさも加味して、音声情報をショット音、歓声、笑い声、話し声、その他の音声とに分類する。このようにして音声解析部２３４は、判定した音声種別と時刻情報とからなるハイライトシーン候補リストを作成する。
　合成画像生成部２３５は、合成する画像を生成し、その画像と映像データとを合成する。合成する画像としては、予め保有するホールごとの平面図の画像にゴルフカート位置やハイライトシーンの発生した位置を印したものや、ある地点の起伏を３次元曲面のソリッドモデルで表現した画像である。このソリッドモデルは公知のソリッドモデリングカーネルを用いて作成する。
　図１０Aは、そのダイジェスト映像に合成するゴルフコースのホールの平面図の画像例であり、図１０Bはダイジェスト映像に合成するアンジュレーションを示すソリッドモデルの画像例である。
　ダイジェスト作成部２３６は、時刻情報リストに基づいてＡＶＬ記憶部２３１内に記憶されている映像データおよび音声データの中からハイライトシーンを抽出し、それらを結合してダイジェストを作成する。また、動画切出し部２３２が切り出したフレームを公知のアップコンバート技術によりフルＨＤ画質に補正する。
　ダイジェスト記憶部２３７は、ダイジェスト作成部２３６が作成したダイジェストを記憶するものである。
　コース情報記憶部２３８は不揮発性記憶装置であり、ゴルフ場の全コースの３次元地図情報を記憶している。この３次元地図情報は、ゴルフコースの各ホールを１センチメートルの高度間隔で作成した等高線図を、５センチメートル四方でメッシュ状に細分化した各点の緯度と経度と高度とからなるものである。
　制御部２４０は、ダイジェスト作成装置２３全体を制御するものであって、ネットワークｉ／ｆ２３９を介して得た要求を、ダイジェスト作成装置２３を構成する各処理部に指示して行うものである。
　上記したダイジェスト作成装置２３は大容量記憶装置を有するコンピュータ装置であって、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、およびネットワークインタフェースを備えており、それらはバスで接続されている。特に、動画切出し部２３２や動作解析部２３３や音声解析部２３４や合成画像生成部２３５やダイジェスト作成部２３６や制御部２４０は、不揮発性記憶部に記憶してある各種プログラムをメモリに展開して実行することにより機能を実現している。
　なお、本発明に係るダイジェスト作成装置のダイジェスト作成用ＡＶ記憶部は本実施の形態のＡＶＬ記憶部２３１の一部をさし、地図情報記憶部は本実施の形態のコース情報記憶部２３８をさし、データ解析部は本実施の形態の動画切出し部２３２と動作解析部２３３と音声解析部２３４とをさし、ダイジェスト作成部は本実施の形態の合成画像生成部２３５とダイジェスト作成部２３６とをさす。
　その他にゴルフ場端末２４とダイジェスト配信サーバ２６を本実施の形態のゴルフダイジェスト作成システムは有するが、ゴルフ場端末２４はＤＶＤ書込み機能とネットワークｉ／ｆを備える一般的なパーソナルコンピュータであり、ダイジェスト提供サービスプログラムが内蔵記憶装置に記憶されている。このアプリケーションプログラムを内蔵記憶装置からメモリに展開してＣＰＵが実行することによりダイジェスト提供サービスが実施される。
　ダイジェスト配信サーバ２６はＨＴＴＰ　Ｌｉｖｅ　Ｓｔｒｅａｍｉｎｇ（以下ＨＬＳと記載する。）で要求されたダイジェストのストリーミング配信を行う公知のストリーミングサーバやＨＴＴＰプロトコルで配信を行う公知のウェブサーバ、あるいはＦＴＰプロトコルでファイル転送を行う公知のファイルサーバである。
　以上のように構成されたゴルフダイジェスト作成システムの装置毎の動作、作用について、以下に説明する。
　図１１は、移動撮影ユニットの動作フロー図である。
　図１１において、まず、移動撮影ユニット２１の制御部２２０は、現在位置がスタートホールのティーイングエリアの横であるか否か判定し（Ｓ６０１）、スタートホールのティーイングエリアの横であると判定した場合、制御部２２０は、位置情報が変化しなくなるまで待機する。
　そして、スタートホールのティーイングエリアの横で停止したことを検出すると、制御部２２０は、撮影を開始し動画データの録画・録音を始める（Ｓ６０２）。このとき、記録する動画データを識別するためのゴルフカート番号と動画の録画・録音を開始した時刻も記録する。これ以降、移動撮影ユニット２１の制御部２２０は、録画開始からの経過時間（タイムコード）とゴルフカートの停止しているホール番号と位置情報（緯度・経度情報）とエリア識別情報とを映像データに付加して記録する。
　次に、制御部２２０は、位置情報が変化しているか否かを判定し（Ｓ６０３）、変化するまで待機する。
　位置情報が変化している場合は、ゴルフカートが移動中であるので動画の録画・録音を停止し、第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５に記録中の動画データファイルをクローズする。そして、５Ｇ無線送受信部２１７からインターネット上のダイジェスト作成装置２３へ当該動画データファイルをＦＴＰプロトコルで送信する（Ｓ６０４）。この動画データファイルには、ゴルフ場番号、プレー年月日、カート番号、３６０度カメラの撮影か電動式ズームレンズ付きカメラの撮影かを示す識別情報、そして、送信するたびにインクリメントされる連番からなる動画ＩＤがファイル名として付けられる。
　その後、位置情報が変化していないと判定した場合、制御部２２０は現在位置がクラブハウスであるか否かチェックする（Ｓ６０５）。現在位置がクラブハウスではない場合、制御部２２０は、第１撮像部２１１による撮影と録画・録音を開始する（Ｓ６０６）。
　次に、制御部２２０は、現在位置がグリーンの横であるかをチェックし（Ｓ６０７）、グリーンの横でない場合は、第２撮像部２１２を制御して次のボールの落下エリアと想定したエリアを撮影し、録画・録音する（Ｓ６０８）。
　すなわち、制御部２２０は、図８において、現在位置がエリア１にあるときは次のエリア２の全体が画面に収まるようにコース情報記憶部２１６に記憶している３次元地図情報から画角と方角を決定する。そして、第２撮像部２１２の電動式ズームレンズ付きカメラのズーム倍率をレンズ移動用モータを駆動して変更すると共に、電動雲台の方位センサ６２と傾斜センサ６３の検出値が決定された方位と仰角となるようにパン駆動用モータとチルト駆動用モータを制御する。ここで、現在位置から次のエリアの全体が収まるとは、たとえば、ゴルフカートがティーイングエリア横のポイントＧ１（８０１）にあるときに画角をエリア２の全体を撮影できる最大画角８０４とすることであり、現在位置がポイントＧ３（８０５）にあるときに画角をエリア３の全体が撮影できる最大画角８０８とすることをいう。
　一方、移動撮影ユニット２１の制御部２２０は、現在位置がグリーンの横である場合、第２撮像部２１２を制御して現在位置からグリーン全体を撮影し録画・録音する（Ｓ６０９）。
　すなわち、制御部２２０は、図８において、現在位置がポイントＧ４（８０９）であるとき、グリーン８１１の全体が画面に収まるように第２撮像部２１２の電動式ズームレンズ付きカメラの画角を最大画角８１０に決定し、方角も同時に決定する。そして、第２撮像部２１２の電動式ズームレンズ付きカメラのズーム倍率をレンズ移動用モータを駆動して変更すると共に、電動雲台のパン駆動用モータとチルト駆動用モータを制御して撮影を開始する。
　ステップＳ６０５において、現在位置がクラブハウスであると判定した場合、移動撮影ユニット２１の制御部２２０は、すでに１８ホールすべてのプレーを記録済みか否か判定し（ステップＳ６１０）、１８ホールすべての記録をしていない場合は、ステップＳ６０６の処理へ移行する。
　他方、１８ホールすべてを記録していた場合、移動撮影ユニット２１の制御部２２０はラウンド終了と判断し、各携帯端末２２へ移動軌跡データの送信を要求する。その後、各携帯端末２２から移動軌跡データファイルを無線送受信部２１８を介して受信すると、それらの移動軌跡データファイルを５Ｇ無線送受信部２１７からインターネット上のダイジェスト作成装置２３へＦＴＰプロトコルで転送する（Ｓ６１１）。なお、移動軌跡データファイルにはプレーヤーあるいは携帯端末の識別情報が付けられている。
　さらに、移動撮影ユニット２１の制御部２２０は、ダイジェスト作成装置２３へ動画データの送信が完了していた場合は、ダイジェスト作成装置２３へ最終ファイル送信完了通知を行い、完了していない場合は、未送信分の動画データを送信した後、最終ファイル送信完了通知を行う。
　以上が移動撮影ユニット２１の動作フローである。この様に、動画データの収録開始と終了が移動撮影ユニット２１が現在位置を検出して自動で行われるので、収録忘れや漏れを防ぐことができる。
　次に、携帯端末２２の動作・作用を図面を用いて説明する。
　図１２は携帯端末２２の動作フロー図である。
　図１２において、携帯端末２２の制御部２２４はＧＰＳ受信部２２１から位置情報を取得し（Ｓ７０１）、前回の位置情報の記録から所定時間経過したか否かを判定する（Ｓ７０２）。なお、本実施の形態では所定時間は１秒としている。
　所定時間経過していた場合は、時刻情報と共に取得した位置情報を移動軌跡記録部２２２へ追加書き込みを行うが（Ｓ７０３）、所定時間経過していない場合は位置情報の書き込みを行わない。
　次に、制御部２２４は、移動軌跡データの送信要求を受信したか否か判定する（Ｓ７０４）。そして、送信要求を受信していた場合は、要求元へ移動軌跡記録部２２２に書き込まれている移動軌跡データにプレーヤーあるいは携帯端末の識別情報を付して無線送受信部２２３を介して送信した（Ｓ７０５）後、ステップＳ７０１へ戻る。
　一方、送信要求を受信していなかった場合は、そのままステップＳ７０１へ戻る。
　以上が携帯端末２２の動作・作用である。
　次に、ダイジェスト作成装置２３の動作・作用を図面を用いて説明する。
　図１３は、ダイジェスト作成装置２３の動作フロー図である。
　図１３において、まず、ダイジェスト作成装置２３の制御部２４０は、移動撮影ユニット２１から動画データの受信要求があるか否かを判定し（Ｓ８０１）、受信要求がある場合は送信を許可し、動画ＩＤの付された映像データファイルと音声データファイルをＦＴＰプロトコルで受信する（Ｓ８０２）。そして、それぞれＡＶＬ記憶部２３１へ書き込み、それまでに受信していた同一動画ＩＤのそれぞれのファイルと結合する（Ｓ８０３）。なお、この映像データファイル等の受信とそれぞれのファイル結合は移動撮影ユニット２１からの最終ファイル送信完了通知を受けるまで行う。
　次に、ダイジェスト作成装置２３の制御部２４０は、ゴルフ場端末２４からダイジェスト作成指示を受信すると（Ｓ８０４）、ダイジェスト作成処理を行う（Ｓ８０５）。
　図１４はダイジェスト作成処理を説明する動作フローである。
　図１４において、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト作成の指示に際して付されていたゴルフ場番号、プレー年月日、ゴルフカート番号に基づいて、動画ＩＤを参照して当該ゴルフカート番号の付された３６０度カメラ映像データファイルをＡＶＬ記憶部２３１から読み出す（Ｓ９０１）。そして、制御部２４０はこの映像データの内、エリア識別情報がグリーンでない映像データについて動画切り出し部２３２に動画切り出し処理を要求する。また、制御部２４０は、動画ＩＤを参照して当該ゴルフカート番号の付された光学ズームカメラ映像データファイルを読み出し、エリア識別情報がグリーンである映像データについても、動画切り出し処理を要求する。
　そして、動画切り出し部２３２は、これらの要求を受けて、人物検知処理を行い人物と認識した部分を含む領域を切り出したり、エリア識別情報がグリーンである映像データからは人物として認識した部分と旗竿として認識した部分を含む領域を切り出す（Ｓ９０２）。
　次に、ダイジェスト作成装置２３の制御部２４０は、動作解析部２３３に切り出された動画について動作解析処理を要求する。動作解析部２３３はこれを受けて動作解析処理を行い（Ｓ９０３）、動作種別とその発生時刻情報とのハイライトシーン候補リスト１を作成する（Ｓ９０４）。なお、高解像度の映像データであっても動作解析は一部を切り出した映像データを用いて行うので、解析時間を短くおさえることができる。
　次に、制御部２４０が、音声解析部２３４にＡＶＬ記憶部２３１から読み出した音声データについて音声解析処理を要求する。音声解析処理部２３４は音声解析処理を行い（Ｓ９０５）、音声種別とその判定時刻情報とのハイライトシーン候補リスト２を作成する（Ｓ９０６）。
　次に、ダイジェスト作成装置２３の制御部２４０は、動作解析部２３３と音声解析部２３４が作成したリストからハイライトシーンとして抽出すべきシーンを決定する（Ｓ９０７）。
　図１５は、ハイライトシーンの決定処理を説明する動作フロー図である。
　図１５において、まず、ハイライトシーン候補リスト１とハイライトシーン候補リスト２とを時系列順に統合した候補リストを作成し（Ｓ１００１）、各動作種別と音声種別に評価値を付与する（Ｓ１００２）。
　図１６Aと図１６Bは動作種別と音声種別に評価値を付与する処理を説明する図である。
　評価値の付与基準としては、たとえば、動作種別がスイングやパッティングである場合は評価値６、飛び跳ね動作や手をあげる動作の場合には評価値４を付与する。また、音声種別がショット音である場合には評価値６、歓声である場合には評価値４、笑い声である場合には評価値３とする。特に、音声が話し声と判定された際は、公知の音声認識処理により認識した音声が「ナイスショット」や「グッドショット」である場合は、ハイライトシーンの有力候補であるので評価値６とし、その他の音声種別の場合には評価値０とする。
　制御部２４０は、まず、図１６Aに示すように各動作種別と音声種別にこれらの付与基準に従い評価値を付与する。
　次に、ゴルフカートの位置との関係で評価値を加算する。たとえば、スイング動作とショット音がティーグラウンドにいるときのものである場合には、それぞれ評価値４を加点する。また、図１６Bに示すように、グリーン上にいる場合のパッティング動作には評価点４を加点する。これにより、ティーショットとカップインするパッティングの動作をハイライトシーンから漏れることを防止できる。
　また、この評価値付与の段階で、動作種別の判定対象とされた映像中の人物を後の再動画切り出し処理において特定できるように当該人物の映像中の特定情報、本実施の形態ではゴルフカートからの方角情報を記録する。
　次に、制御部２４０は、図１６Aと図１６Bに示すように一つの動作種別や音声種別の前後の所定時間を１区間として設定し、区間毎の評価値の合計を区間評価値として求める（Ｓ１００４）。たとえば、スイングやパッティングの動作種別は前後各５秒を１区間とし、歓声や飛び跳ね動作や手の上げ動作は前５秒、後１秒を１区間とする。また、区間がオーバーラップする場合は、区間を延長し、一つの区間として扱う。たとえば、図１６Aは、動作種別スイングから動作種別飛び跳ねまでを１区間とする。また、図１６Bは、動作種別パッティングの前５秒から動作種別手の上げの後１秒までを１区間とする。
　これにより、１ブロック内に動作解析と音声解析の両方でイベントを検出している場合はブロック評価値が高くなり、ハイライトシーンとして抽出する確率が高くなるので、ハイライトシーン選定の妥当性が高まる。
　次に、制御部２４０は、区間評価値が所定の点数以上のものをハイライトシーンとして選出区間を決定する（Ｓ１００５）。
　以上が、ハイライトシーンの決定処理（Ｓ９０７）である。
　次に、ダイジェスト作成装置２３の制御部２４０は、ＡＶＬ記憶部２３１に記憶されている、動画切り出し処理をする前の動画データから、選出された区間の動画データを抽出し（Ｓ９０８）、動画切出し部２３２に再度動画切り出し処理を要求する。動画切り出し部２３４は、この要求を受けて、ハイライトシーンとして選出された区間の映像データから切り出しを行うが、このとき動画切出し部２３２は、選出された区間に特定すべき人物の特定情報、本実施の形態ではゴルフカートからの方角情報であるが、この特定情報が記録されている場合は図７Bで示すようにこの特定した人物を中心とした切り出し処理や図７Cで示すように特定した人物と旗竿とを中心とした切り出し処理を行う。また、選出された区間の時間内に当該人物が移動している場合は、動画切出し部２３２は当該人物を追尾してフレームから外れることがないように切り出し処理を行う（Ｓ９０９）。
　次に、制御部２４０は、切り出した動画データ中にショット音がある場合、そのショット音の発生時刻、あるいは発生から１秒経過した後に所定時間分、光学ズームカメラ映像データから同時刻の動画データを抽出し、３６０度カメラ映像データと置換する。あるいは、ショット音の発生後、同一区間内に動作を検出していた場合は、その動作までの時間分の光学ズームカメラ映像データを３６０度カメラ映像データと置換する（Ｓ９１０）。
　これにより、ハイライトシーンであるショット後の打球の行方をダイジェスト映像で視認することが可能になる。
　次に、ダイジェスト作成装置２３の制御部２４０は、合成画像生成部２３５に切り出された動画に合成する画像を生成し、それらを合成した映像データの作成を要求する（Ｓ９１１）。以下に合成画像生成部２３５の行う処理を詳細に説明する。
　まず、合成画像生成部２３５は、ハイライトシーンの映像データに特定すべき人物の特定情報（本実施の形態では、ゴルフカートからの方角情報をさす。）が付されているか否かを判定し、特定情報が付されている場合は、ハイライトシーンの発生時の時刻情報とゴルフカートの位置情報と方角情報と移動軌跡データとから特定すべき人物の位置情報を求め、平面図画像に印しを付けて映像データと合成する。
　図１０Aは、ダイジェスト映像に合成するゴルフコースのホールの平面図であり、印１００１がハイライトシーンの発生した位置を示し、方位マーク１００２が方位を示すものである。
　ここで、図９を用いてハイライトシーンの発生時に特定すべき人物がいた位置を正確に求める方法を説明する。
　図９において、Ａ１からＡ４はプレーヤーＡのプレーした位置を示すものであり、同様にＢ１からＢ３はプレーヤーＢのプレーした位置を示し、Ｃ１からＣ３はプレーヤーＣのプレーした位置を示し、Ｄ１からＤ４はプレーヤーＤのプレーした位置を示している。また、Ｇ１からＧ４はゴルフカートの停止した位置を示している。
　そして、Ｇ１－Ａ１－Ｇ１－Ｇ２－Ａ２－Ｇ２－Ｇ３－Ｇ４－Ａ３－Ａ４を繋いだ線はプレーヤーＡの移動軌跡を示している。同様に、Ｇ１－Ｂ１－Ｇ１－Ｇ２－Ｇ３－Ｂ２－Ｇ３－Ｇ４－Ｂ３を繋いだ線はプレーヤーＢの移動軌跡を示し、Ｇ１－Ｃ１－Ｇ１－Ｇ２－Ｇ３－Ｃ２－Ｇ３－Ｇ４－Ｃ３を繋いだ線はプレーヤーＣの移動軌跡を示し、Ｇ１－Ｄ１－Ｇ１－Ｇ２－Ｇ３－Ｄ２－Ｇ３－Ｇ４－Ｄ３－Ｄ４を繋いだ線はプレーヤーＤの移動軌跡を示している。
　いま、プレーヤーＢとプレーヤーＣのそれぞれの位置Ｂ２と位置Ｃ２でのプレーがハイライトシーンであったとき、ハイライトシーン発生時のゴルフカートからのプレーヤーＢの方角情報９０１（特定情報）とプレーヤーＣの方角情報９０２（特定情報）が映像データに付与されているので、これらの特定情報と、移動軌跡データから求めた当該発生時刻のプレーヤーＢの位置情報Ｂ２とプレーヤーＣの位置情報Ｃ２とゴルフカートの位置情報Ｇ３とから算出する方角とを比較する。そして、最も特定情報に近い方角のプレーヤーの位置情報をハイライトシーンの特定する人物の位置情報であるとみなす。これにより、特定人物の位置情報を正確に決定することができる。
　次に、合成画像生成部２３５は、特定した人物の位置情報とコース情報記憶部２３８に記憶してある３次元地図情報とからハイライトシーンの発生した地点を中心に半径１メートルの範囲の緯度、経度、高度のデータを抽出する。そして、これらのデータから方位情報（Ｎ、Ｓ、Ｅ、Ｗ）も付した３次元曲面のソリッドモデルの画像を作成する（Ｓ９１０）。
　図１０Bは、ダイジェスト映像に合成するアンジュレーションを示すソリッドモデルの図であり、ハイライトシーンの発生した位置１００３を中心に半径１メートルの範囲で作成している。図中のＮ、Ｅ、Ｓ、Ｗは方位を示し、数字は中心の高度とそれぞれの位置との高度差をセンチメートル単位で示している。このソリッドモデルの図形が本発明に係るダイジェスト作成装置の生成する地形情報に該当する。
　そして、合成画像生成部２３５は、これらソリッドモデルの画像と印の入った地図画像とを映像データに合成する。
　これにより、ダイジェスト映像にはハイライトシーンの発生した位置とその場所の起伏形状も表示されるので、プレー後にどのようなアンジュレーションのボールを打ったのかを知ることができる。すなわち、図１０Aにおいては、ショットした位置１００１からグリーン方向は北西にあるので、図１０Bから対象プレーヤーは右利きの場合、左足上がりのスタンスで前下がりのボールを打ったことが分かる。
　一方、ハイライトシーンの映像データに特定すべき人物の特定情報が付されていない場合は、ゴルフカートの位置情報を基に、前述したホールの平面図画像にゴルフカートの位置の印（たとえば白丸）を付ける。その後、映像データにこの平面図画像を映像データと合成する。
　以上が合成画像生成部２３５の行う合成画像生成処理（Ｓ９１１）である。
　次に、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト作成部２３６にダイジェストの作成を要求する。ダイジェスト作成部２３６はこれを受けて、地図画像や起伏の分かるソリッドモデルの画像が合成された動画データをアップコンバート技術によりフルＨＤ画質に補正しながら時系列順に結合してダイジェスト記憶部２３７に順次書き込む。
　そして、最後に、制御部２４０は、映像データに時刻情報とともに記録されているホール番号を参照して、ティーショットの動画の前に予め用意しているホール番号を示す画像を挿入する（Ｓ９１２）。
　以上がダイジェスト作成装置２３の行うダイジェスト作成処理（Ｓ８０５）であり、その後、作成されたダイジェストにダイジェストＩＤを付してダイジェスト配信サーバ２６（ウェブサーバ）に送信する（Ｓ８０６）。このダイジェストＩＤはゴルフ場番号とプレー年月日とカート番号とからなる。
　次に、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト配信サーバ２６からダイジェストファイルの格納完了通知とその格納場所のＵＲＬを受信すると（Ｓ８０７）、当該格納場所のＵＲＬとダイジェストＩＤとを関連付けてゴルフ場端末２４へ通知する（Ｓ８０８）。
　その後、ダイジェスト作成装置２３の制御部はステップＳ８０１の処理へ戻る。
　以上が本実施の形態におけるダイジェスト作成装置２３の動作フローである。
　次に、ダイジェスト配信サーバ２６の動作フローについて説明する。
　図１７は、ダイジェスト配信サーバ２６の動作フロー図である。
　前述の通りダイジェスト配信サーバ２６はインターネット上で自己の管理するダイジェスト（動画ファイル）のファイル転送やストリーミング配信を行うウェブサーバである。
　まず、ダイジェスト配信サーバ２６はダイジェスト作成装置２３からの格納要求を受けると（Ｓ１１０１）、ダイジェストＩＤをファイル名とするダイジェストファイルを受信し、記憶装置に格納する（Ｓ１１０２）。そして、ダイジェスト作成装置２３にダイジェストファイルの格納場所のＵＲＬを返信する（Ｓ１１０３）。このときダイジェスト配信サーバ２６は受信したファイルのファイル名であるダイジェストＩＤと格納場所のＵＲＬとを関連付けて管理する。
　次に、ダイジェスト配信サーバ２６はプレーヤー等の携帯端末やゴルフ場端末２４からＵＲＬにより指定されたダイジェストファイルの転送要求あるいはストリーミング配信要求を受信すると（Ｓ１１０４）、指定されたダイジェストファイルを記憶装置から読み出し、要求元の端末にＦＴＰプロトコルによるファイル転送あるいはＨＬＳプロトコルによるストリーミング配信を行う（Ｓ１１０５）。
　次に、ダイジェスト配信サーバ２６は、プレーヤー等の携帯端末やゴルフ場端末２４からＵＲＬにより指定されたダイジェストファイルの消去指示を受信すると（Ｓ１１０６）、記憶装置から指定されたダイジェストファイルを消去するとともに、送信元のプレーヤー端末やゴルフ場端末２４へダイジェストファイルの消去完了を通知する（Ｓ１１０７）。
　以上がダイジェスト配信サーバの動作フローである。
　次に、ゴルフ場端末２４の動作について説明する。
　図１８は、ゴルフ場端末２４の動作フロー図である。
　前述の通りゴルフ場端末２４はインターネット接続可能な一般的なパーソナルコンピュータであるが、ダイジェスト提供サービスプログラムが実行される。すなわち、まず、ディスプレイ上にダイジェスト作成要求とＤＶＤ作成要求とダイジェスト消去要求のメニューを表示する。
　そして、ゴルフ場端末２４はキーボードなどからゴルフカート番号が入力された後にダイジェスト作成要求を受け付けると（Ｓ１２０１）、ゴルフ場番号とプレーの年月日とカート番号とを付してダイジェスト作成装置２３へ該当する映像データ等のファイルからダイジェストを作成するように要求する（Ｓ１２０２）。この要求はゴルフ場端末が備えるネットワークｉ／ｆを介してインターネット上のダイジェスト作成装置２３へ送信される。
　その後、ゴルフ場端末２４は、ダイジェスト作成装置２３からダイジェストＩＤとそのダイジェストの格納場所であるＵＲＬを受信したかを判定し（Ｓ１２０３）、受信するまでチェックを繰り返す。
　その後、ダイジェスト作成装置２３からのダイジェストＩＤとＵＲＬを受信すると、ゴルフ場端末２４はこのＵＲＬとダイジェストＩＤとを関連付けて記憶するとともに、当該ダイジェストＩＤが示すカート番号でプレーしたプレーヤーへメールなどでそのＵＲＬを通知する（Ｓ１２０４）。
　このメールを受信したプレーヤーは自己の端末から当該ＵＲＬへアクセスし、ダイジェストの転送要求を行うと、ダイジェスト配信サーバ２６が要求元の端末へダイジェストを転送したり、あるいはストリーミング配信をすることで、プレーヤーは当該ダイジェストを視聴することが可能になる。
　また、ゴルフ場端末２４がプレーヤーからＤＶＤ作成の要求を受けると（Ｓ１２０５）、ゴルフ場端末２４はプレー年月日とゴルフ場ＩＤと指定されたカート番号とからダイジェストＩＤを求め、ダイジェスト作成装置２３から受信済みのＵＲＬとダイジェストＩＤとの関連情報からＵＲＬを抽出する。そして、該当ＵＲＬへアクセスし、ダイジェスト配信サーバ２６からダイジェストファイルをダウンロードし（Ｓ１２０６）、ＤＶＤに書き込む（Ｓ１２０７）。このとき、ゴルフ場端末２４は当該ダイジェストのＤＶＤをフルＨＤ（１９２０画素×１０８０画素）画質で作成する。
　次に、ゴルフ場端末２４が表示メニューからカート番号とダイジェスト消去指示を受けると（Ｓ１２０８）、ゴルフ場端末２４は同様に該当するＵＲＬを抽出し、ダイジェスト配信サーバ２６へダイジェストファイルの削除要求を送信する（Ｓ１２０９）。
　ダイジェスト配信サーバ２６はこれを受けて、指定されたＵＲＬをアドレスとするダイジェストファイルを削除する。
　以上のように、本実施の形態においては、ゴルフダイジェスト自動作成システムは、ゴルフカート上部の３６０度視界が開けた位置に設置した超高解像度の３６０度カメラの他に、電動式ズームレンズ付きカメラを備えているので、ゴルフカートから離れた場所でのプレーもズーム撮影することができるので、ダイジェスト映像にグリーン上のボールの転がりやショット後のボールの落下の様子を明瞭に視認可能なレベルで記録することができる。
　また、本実施の形態においては、各プレーヤーが移動軌跡情報を記録する携帯端末を所持してラウンドするので、ハイライトシーンの人物の位置を正確に求めることができる。その結果、そのプレーヤーがどのようなアンジュレーションでボールを打ったのかを知ることも可能になる。
　また、本実施の形態では、プレーヤーが携帯端末２２や移動撮影ユニット２１に対して一切の入力を行う必要がないので、プレーヤーはビデオ撮影をまったく意識することなしにゴルフを楽しむことができる。
　なお、本実施の形態では、移動撮影ユニット２１に第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５を設けて第１撮像部２１１や第２撮像部２１２からの動画データを書き込んだが、これに限らず、動画データを５Ｇ無線送受信部２１７から出力し、ダイジェスト作成装置２３へリアルタイムで送信することも可能である。
　この場合には、第１撮像部２１１や第２撮像部２１２からの動画データを映像圧縮方式Ｈ．２６５／ＨＥＶＣなどで圧縮するリアルタイムエンコーダを設けて、エンコードされた動画データを送信することが好ましい。また、リアルタイム送信する場合であっても、移動通信システムでの通信トラブル等に対応するため、第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５によりある程度の動画データを記憶する構成であることが好ましい。
　また、本実施の形態では、携帯端末２２が移動軌跡データを移動軌跡記録部２２２にラウンド開始から終了まで記録し、ラウンド終了後に移動撮影ユニット２１へ送信したが、これに限らず、携帯端末２２が移動軌跡データを所定時間、本実施の形態では１秒ごとに移動撮影ユニット２１へ送信し、移動撮影ユニット２１内に移動軌跡記録部を設ける構成にしてもよい。これにより、携帯端末２２は移動軌跡データを記録する必要がなくなり、ＧＰＳ受信機を備えた簡易なハードウェア構成の機器にすることができる。
　さらに、携帯端末１０６に集音マイクを備え、音声データを無線通信部２２４を介してリアルタイムで移動撮影ユニット２１へ送信し、移動撮影ユニット２１の制御部２２０が集音部２１３で集音した音声データとは別の音声データとしてイベントの検出を行うことも可能である。
　また、本実施の形態では、ハイビジョンのダイジェストを作成することを前提に動画切り出しのサイズを決定したが、これに限らず、ＳＤ画質（７２０画素×４８０画素）でＤＶＤを作成することを前提にして動画切り出しのサイズを決定してもよい。
　また、本実施の形態では、ダイジェスト作成装置２３とダイジェスト配信サーバ２６とを別の装置としたが、これに限らず、ダイジェスト配信機能をダイジェスト作成装置に含ませてひとつの装置とすることも可能である。
　なお、本実施の形態では、図１６Aと図１６Bに示したように動作種別と音声種別の両方でハイライトシーン区間の判定を行ったが、これに限らず、動作種別のみ、あるいは音声種別のみを用いてハイライトシーン区間の判定を行うことも可能である。上記のように、動作種別と音声種別の両種別を用いることはハイライトシーン判定の信頼度を増すことができ好ましいが、音声種別のみ用いることは映像データを用いた動作解析処理を行わない分、ダイジェスト作成装置の負荷が軽くなりダイジェスト作成の時間を短縮することが可能になる。
　また、本実施の形態では、動画のダイジェストのみを作成したが、これに限らず、さらに動画の中からプレーヤーが任意に画像を選択して静止画をＤＶＤに記録したスナップ写真集を作成することも可能である。これは、ライブラリソフトウェアＯｐｅｎＣＶを用いた公知の技術により実現することができる。
　（実施の形態２）
　図１９は、本発明の実施の形態２におけるゴルフダイジェスト自動作成システムの構成を説明する図であり、固定撮影ユニット２５がある点と、この固定撮影ユニット２５と移動撮影ユニット２１とがゴルフ場端末２４を介して動画データと移動軌跡データをダイジェスト作成装置２３に転送する点と、第５世代移動通信システムを利用していない点が実施の形態１の構成と異なる。
　この固定撮影ユニット２５はゴルフカートが入れない区域あるいはゴルフカート上のカメラからでは撮影不可能な場所にゴルフカートを停める必要がある場合に設置されており、移動撮影ユニット２１の撮影のみではプレーの様子をカバーしきれない場所に設けられるものである。
　以下、実施の形態１と異なる点を詳細に説明する。
　まず、移動撮影ユニット２１のハードウェア構成を説明する。
　図２０は本実施の形態における移動撮影ユニット２１の構成を示す図である。
　この移動撮影ユニット２１は実施の形態１のものと異なり、５Ｇ無線送受信部２１７を有しておらず、中距離の無線通信が可能な無線送受信部２１８のみで携帯端末２２や固定撮影ユニット２５やゴルフ場端末２４と送受信する。
　また、コース情報記憶部２１６に記憶してある３次元地図情報には、さらに固定撮影ユニット設置区域であることを示す情報とその区域での第２撮像部２１２の撮影可あるいは不可を示す情報が追加されている。その他は実施の形態１と同じである。
　次に、固定撮影ユニット２５のハードウェア構成を説明する。
　図２１は、本発明の実施の形態２における固定撮影ユニット２５のハードウェア構成を示す図である。
　図２１において、本実施の形態の固定撮影ユニット２５は、カメラを含む撮像部２５１と音声マイクを含む集音部２５２と動画データを記録するＡＶ記憶部２５３と無線送信部２５４と制御部２５５とからなる。なお、カメラは撮影対象範囲が限定されているので、フルＨＤ画質（１９２０画素×１０８０画素）で、３０ｆｐｓレートで撮影する。また、その際にカメラの広角レンズによる歪みを補正して出力する。
　この固定撮影ユニット２５は、カメラと集音マイクと無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インターフェースを備えており、それらはバスで接続されている。特に、制御部２５５は、不揮発性記憶部に記憶してある制御用プログラムをメモリに展開して実行することにより機能を実現している。
　次に、ゴルフ場端末２４のハードウェア構成を説明する。
　図２２は、本実施の形態におけるゴルフ場端末２４のハードウェア構成を示す図である。
　図２２において、ゴルフ場端末２４は、データ転送用記憶部２４６とダイジェスト記憶部２４５とＤＶＤ書込み部２４４とキー入力部２４２と表示部２４１とネットワークｉ／ｆ２４８と無線送受信部２４７と制御部２４３とからなる。
　データ転送用記憶部２４６は、移動撮影ユニット２１から無線通信により受信した３６０度カメラ映像データファイルと光学ズームカメラ映像データファイルと音声データファイルと移動軌跡データファイルを一時的に記憶する記憶装置である。
　ダイジェスト記憶部２４５はダイジェスト配信サーバ２６から受信したダイジェストファイルを記憶するものである。
　ＤＶＤ書き込み部２４４は、ダイジェスト記憶部２４５に記憶されているダイジェストファイルを読みだしてＤＶＤにフルＨＤ画質で書き込むものである。
　制御部２４３は、ゴルフ場端末２４全体を制御して、ダイジェスト提供サービスを実行するものであって、表示部２４１にメニュー表示を行い、キー入力部２４２により選択された処理をゴルフ場端末２４を構成する各処理部に指示して行う。
　上記したゴルフ場端末２４は、ディスプレイとキーボードとマウスとＤＶＤレコーダーとネットワーク・インターフェース・カードと無線通信機とコンピュータ装置により実現されている。このコンピュータ装置は、ＣＰＵ、メモリ、不揮発性記憶部、入出力インターフェース、および無線通信インターフェースを備えており、それらはバスで接続されている。特に、制御部２４０は、不揮発性記憶部に記憶してある各種プログラムをメモリに展開して実行することにより機能を実現している。なお、ゴルフ場端末２４は実施の形態１と同じく、これらのハードウェア資源を備えるパーソナルコンピュータにより実現することが可能である。
　次に、移動撮影ユニット２１と固定撮影ユニット２５とゴルフ場端末２４とダイジェスト作成装置２３の動作・作用について図面を用いて説明する。
　図２３は、本実施の形態２における移動撮影ユニットの動作フロー図である。以下に実施の形態１と異なる点のみを説明する。
　第１の相違点は、カートが移動中に行うカート移動中処理（Ｓ１３０４）である。
　図２４は、移動撮影ユニット２１の行うカート移動中処理を説明する図である。
　図２４において、移動撮影ユニット２１の制御部２２０は、それまで第１撮像部と第２撮像部が行っていた撮影の停止と録画・録音を停止する（Ｓ１４０１）。
　次に、ＧＰＳ受信部２１９が検出する現在位置が３次元地図情報にある固定撮影ユニット２５の設置区域にあるか否かをチェックし（Ｓ１４０２）、所定区域に入った時点で当該区域の固定撮影ユニット２５へ撮影の開始要求をゴルフカート番号と共に無線送受信部２１８から送信する（Ｓ１４０４）。その後、ゴルフカートが停止するまで待機する。
　一方、現在位置が固定撮影ユニット２５の設置区域ではない場合、制御部２２０は固定撮影エリアからエリア外へ移動したかをチェックし（Ｓ１４０３）、移動したのであれば固定撮影ユニットへ撮影の停止要求を送信する（Ｓ１４０５）。
以上が移動撮影ユニット２１が行うカート移動中処理である。
　第２の相違点は、クラブハウス以外でカートが停止しているときの処理である。
　すなわち、図２３において、移動撮影ユニット２１は、現在位置が固定撮影ユニットの設置区域内であるか否かをチェックする（ステップＳ１３０７）。そして、区域内であれば第２撮影部が撮影可能か否かを判定し（Ｓ１３０８）、撮影が可能であれば第２撮像部の撮影を開始する（Ｓ１３０９）。
以降の動作は、実施の形態１の移動撮影ユニット２１の動作フロー図（図１１）のステップＳ６０６からステップＳ６０９と同じである。
　第３の相違点は、移動撮影ユニット２１がラウンド終了後に行う処理である。
　すなわち、移動撮影ユニット２１はラウンド終了後、携帯端末２２から移動軌跡データを受信するが、この移動軌跡データと共に、撮影した動画データをゴルフ場端末２４を経由してダイジェスト作成装置２３へ送信する（Ｓ１３１５）。
　これは、本実施の形態においては、移動撮影ユニット２１は第５世代移動通信を行わないためであり、ラウンド終了後にクラブハウスにゴルフカートが戻ったときに、第１ＡＶ記憶部２１４と第２ＡＶ記憶部２１５に記録しているこのランドで撮影したすべての動画データと移動軌跡データをゴルフ場端末２４へ送信する。
　次に、固定撮影ユニット２５の動作・作用を図面を用いて説明する。
　図２５は、固定撮影ユニット２５の動作フロー図である。
　図２５において、まず、固定撮影ユニット２５の制御部２５５は、移動撮影ユニット２１からの撮影開始要求を待ち（Ｓ１５０１）、要求があった場合、制御部２５５は、撮像部２５１と集音部２５２からの動画データのＡＶ記憶部２５３への録画・録音を開始する（Ｓ１５０２）。このとき、制御部２５５は、記録する動画データを識別するために撮影開始指示と共に通知されたゴルフカート番号と動画の録画・録音を開始した時刻を記録する。
　次に、制御部２５４は移動撮影ユニット２１からの撮影終了要求を待ち（Ｓ１５０３）、要求があった場合、ＡＶ記憶部２５３への録画・録音を終了する（Ｓ１５０４）。
　次に、固定撮影ユニット２５の制御部２５５は、収録した映像データファイル、音声データファイル、およびゴルフカート番号と撮影開始時刻情報とホール番号とエリア識別情報とが記載された属性情報ファイルをダイジェスト作成装置２３へ無線送信する（Ｓ１５０５）。
　そして、固定撮影ユニット２５の制御部２５５は、次のプレー組のためにステップＳ１５０１の処理へ戻る。
　次に、ゴルフ場端末２４の動作・作用を図面を用いて説明する。
　図２６は、ゴルフ場端末２４の動作フロー図である。
　図２６において、ゴルフ場端末２４の制御部２４３は、まず、移動撮影ユニット２１から動画データの転送要求があるか否かをチェックし（Ｓ１７０１）、受信要求がある場合は送信を許可し、映像データファイルと音声データファイルと移動軌跡データファイルの受信を開始する。
　そして、データ転送用記憶部２４６にすべてのファイルの受信が完了すると、制御部２４３は、ダイジェスト作成装置２３へこれらファイルの受信を要求する。
　ダイジェスト作成装置２３が受信要求を許可した場合、ゴルフ場端末２４は先に受信したすべてのファイル、すなわち、動画ＩＤの付された映像データファイルと音声データファイルと移動軌跡データファイルをダイジェスト作成装置２３へＦＴＰプロトコルで送信する（Ｓ１７０２）。
　次に、ゴルフ場端末２４の制御部２４３は、表示部２４１のディスプレイに表示されている選択肢のチェックを行う。
　これ以降のステップＳ１７０３からステップＳ１７１１までの処理は、実施の形態１のゴルフ場端末２４の動作フロー図（図１８）のステップＳ１２０１からステップＳ１２０９までの処理と同一である。
　次に、本実施の形態におけるダイジェスト作成装置２３の動作、作用を説明する。
　図２７はダイジェスト作成装置２３の行うダイジェスト作成処理の動作フロー図である。
　図２７において、まず、ダイジェスト作成装置２３の制御部２４０は、ダイジェスト作成の指示を受けると、通知されたゴルフカート番号の付与された動画ファイルをＡＶＬ記憶部２３１から読み出し（Ｓ１６０１）、移動撮影ユニット２１の撮影した動画ファイルに対しては、実施の形態１と同じように、動画切出し処理（Ｓ１６０２）からハイライトシーンシーン候補リスト２の作成（Ｓ１６０６）までを行う。
　次に、制御部２４０は、固定撮影ユニット２５で撮影した動画ファイルに対しては、映像データの読出し後（Ｓ１６０７）、動画の切り出し処理を行うことなしに実施の形態１と同じ動作解析処理（Ｓ１６０８）からハイライトシーン候補リスト２の作成（Ｓ１６１１）までを行う。これは、固定カメラによる撮影は限られた空間のみを撮影したものだからである。
　次に、制御部２４０は、すべてのハイライトシーン候補リストを時系列順に結合し（Ｓ１６１２）、実施の形態１と同様にハイライトシーンの決定処理（Ｓ１６１３）からダイジェスト作成（Ｓ１６１７）までを行う。このダイジェストは、移動撮影ユニット２１で撮影した動画も固定撮影ユニット２５で撮影した動画もアップコンバート技術によりすべてフルＨＤ画質であるので、高画質なものである。
　なお、携帯端末２２とダイジェスト配信サーバ２６の動作は、実施の形態１と同じである。
　以上のように、本実施の形態においては、ゴルフカートが入れない区域に固定撮影ユニットを設置しているので、移動撮影ユニット２１の撮影のみではカバーしきれない区域のハイライトシーンも逃すことなく集めたダイジェストを作成することができる。
　また、本実施の形態のゴルフダイジェスト作成システムは、第５世代移動通信システムを用いずに、中距離用無線通信機によりゴルフ場端末２４と通信できればよいので、山間部や海岸沿いなど第５世代無線通信システムのサービスが及ばない地域においても実施可能である。
　本発明は、ゴルフプレーのダイジェストの作成に有用であり、撮影を意識することなしに明瞭に視認可能なハイライトシーンを集めたダイジェストにするのに適している。
　１１　　ゴルフコース
　１２　　ゴルフカート
　１３　　プレーヤー
　１４　　クラブハウス
　１５　　インターネット
　２１　　移動撮影ユニット
　２２　　携帯端末
　２３　　ダイジェスト作成装置
　２４　　ゴルフ場端末
　２５　　固定撮影ユニット
　２６　　ダイジェスト配信サーバ
　６０　　電動雲台
　６１　　電動式ズームレンズ
　６２　　方位センサ
　６３、６４　　傾斜センサ
　１０１　３６０度カメラ
　１０２　無指向性マイク
　１０３　ＧＰＳ受信機
　１０４　移動記録装置
　１０５　携帯端末
　１０６　ダイジェスト作成装置
　１１１　ティーイングエリア
　１１２　フェアウェイ
　１１３　グリーン
　２１１　第１撮像部
　２１２　第２撮像部
　２１３、２５２　集音部
　２１４　第１ＡＶ記憶部
　２１５　第２ＡＶ記憶部
　２１６、２３８　コース情報記憶部
　２１７　５Ｇ無線送受信部
　２１８、２２３、２４７、２５４　無線送受信部
　２１９、２２１　ＧＰＳ受信部
　２２０、２４０、２４３　制御部
　２２２　移動軌跡記録部
　２３１　ＡＶＬ記憶部
　２３２　動画切出し部
　２３３　動作解析部
　２３４　音声解析部
　２３５　合成画像生成部
　２３６　ダイジェスト作成部
　２３７、２４５　ダイジェスト記憶部
　２３９、２４８　ネットワークｉ／ｆ
　２４１　表示部
　２４２　キー入力部
　２４４　ＤＶＤ書込み部
　２４６　データ転送用記憶部

Claims (8)

  1. 　ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、前記ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、前記ゴルフカートに設置した集音マイクとＧＰＳ受信機と、前記電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、ゴルフコースの地図情報を記憶したコース情報記憶部と、前記３６０度カメラからの映像データと前記電動式ズームレンズ付きカメラからの映像データと前記集音マイクからの音声データとを記憶するＡＶ記憶部と、前記ＧＰＳ受信機の検出した位置情報と前記地図情報とから撮影対象エリアを決定し、前記方向検出器の検出する前記レンズ方向が当該撮影対象エリアになるように前記電動雲台を駆動して、前記電動式ズームレンズ付きカメラでズーム撮影した前記映像データと、３６０度カメラからの前記映像データと、前記音声データとに三者が同期するための時刻情報や前記撮影対象エリアを特定するエリア識別情報を付して前記ＡＶ記憶部に記憶する制御部と、を有する移動撮影ユニットと、
    前記ＡＶ記憶部に記憶した前記映像データを画像解析および／または前記音声データを音声解析するデータ解析部と、当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、前記映像データに付された前記エリア識別情報に基づいて前記画像解析や前記ハイライトシーンの抽出の対象とする映像データを前記３６０度カメラからの前記映像データと電動式ズームレンズ付きカメラからの前記映像データとのいずれにするかを選択する制御部とを有するダイジェスト作成装置と
    を備えるゴルフダイジェスト作成システム。
  2. 　前記移動撮影ユニットの前記制御部は、前記ＧＰＳ受信機の検出した位置情報が前記地図情報においてグリーン横である場合、当該グリーンを前記電動式ズームレンズ付きカメラの撮影対象エリアに決定する
    ことを特徴とする請求項１に記載のゴルフダイジェスト作成システム。
  3. 　前記移動撮影ユニットの前記制御部は、さらに前記ＧＰＳ受信機の検出した位置情報が前記地図情報においてグリーン横でない場合、当該位置情報の示す位置からショットしたボールの次の落下エリアとして前記地図情報にあらかじめ定めたエリアを前記撮影対象エリアに決定する
    ことを特徴とする請求項２に記載のゴルフダイジェスト作成システム。
  4. 　前記ダイジェスト作成装置の前記制御部は、前記映像データに付されている前記エリア識別情報がグリーンであることを示す場合、前記画像解析や前記ハイライトシーンの抽出の対象とする映像データとして前記電動式ズームレンズ付きカメラからの前記映像データを選択する
    ことを特徴とする請求項２に記載のゴルフダイジェスト作成システム。
  5. 　前記ダイジェスト作成装置の前記制御部は前記ハイライトシーンの映像データに付された前記エリア識別情報がグリーンでない場合、当該ハイライトシーンのショット後の前記映像データを、同時刻の前記電動式ズームレンズ付きカメラからの映像データに置換する
    ことを特徴とする請求項３に記載のゴルフダイジェスト作成システム。
  6. 　ＧＰＳ受信機を備えて、所定時間の間隔で位置情報を記録することによりプレーヤーの移動軌跡情報を作成する携帯端末をさらに有し、
    前記移動撮影ユニットの前記３６０度カメラは方位センサを備え、出力する前記映像データに方位情報を付し、同じく前記移動撮影ユニットの制御部は前記映像データにゴルフカートの前記位置情報を付して前記ＡＶ記憶部に記憶するものであって、
    前記ダイジェスト作成装置はゴルフコースの３次元地図情報を記憶した地図情報記憶部をさらに有し、前記ダイジェスト作成部が前記ハイライトシーンの発生時刻における、前記３６０度カメラからの前記映像データに付されている前記方位情報とゴルフカートの前記位置情報と前記携帯端末から取得した前記移動軌跡情報とから前記プレーヤーの位置を特定し、前記３次元地図情報から当該位置における地形情報を算出して当該ハイライトシーンの映像データに合成する
    ことを特徴とする請求項１に記載のゴルフダイジェスト作成システム。
  7. 　ゴルフカート上部の３６０度視界が開けた位置に設置した３６０度カメラと、
    前記ゴルフカートに設置した電動雲台上に取り付けた電動式ズームレンズ付きカメラと、
    前記ゴルフカートに設置した集音マイクとＧＰＳ受信機と、
    前記電動式ズームレンズ付きカメラのレンズ方向を検出する方向検出器と、
    ゴルフコースの地図情報を記憶したコース情報記憶部と、
    前記３６０度カメラからの映像データと前記電動式ズームレンズ付きカメラからの映像データと前記集音マイクからの音声データとを記憶するＡＶ記憶部と、
    前記ＧＰＳ受信機の検出した位置情報と前記地図情報とから撮影対象エリアを決定し、前記方向検出器の検出する前記レンズ方向が当該撮影対象エリアになるように前記電動雲台を駆動して、前記電動式ズームレンズ付きカメラでズーム撮影した前記映像データと、３６０度カメラからの前記映像データと、前記音声データとに三者が同期するための時刻情報や前記撮影対象エリアを特定するエリア識別情報を付して前記ＡＶ記憶部に記憶する制御部と、
    を有する移動撮影ユニット。
  8. ゴルフカートに設置した３６０度カメラからの映像データと電動雲台上に取り付けた電動式ズームレンズ付きカメラからの映像データと前記ゴルフカートに設置した集音マイクからの音声データに、三者が同期するための時刻情報や撮影対象としたエリアを識別するエリア識別情報が付されたものを記憶するダイジェスト作成用ＡＶ記憶部と、
    前記ダイジェスト作成用ＡＶ記憶部に記憶した映像データを画像解析および／または音声データを音声解析するデータ解析部と、
    当該データ解析部の結果に基づいてハイライトシーンを抽出するダイジェスト作成部と、
    前記映像データに付された前記エリア識別情報に基づいて前記画像解析や前記ハイライトシーンの抽出の対象とする映像データを前記３６０度カメラからの前記映像データと電動式ズームレンズ付きカメラからの前記映像データとのいずれにするかを選択する制御部と
    を有するダイジェスト作成装置。
PCT/JP2022/000445 2021-01-16 2022-01-10 ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置 WO2022153955A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/984,079 US20230075621A1 (en) 2021-01-16 2022-11-09 Golf digest creating system, mobile imaging unit, and digest creating device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021005415A JP7347731B2 (ja) 2021-01-16 2021-01-16 ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置
JP2021-005415 2021-01-16

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/984,079 Continuation US20230075621A1 (en) 2021-01-16 2022-11-09 Golf digest creating system, mobile imaging unit, and digest creating device

Publications (1)

Publication Number Publication Date
WO2022153955A1 true WO2022153955A1 (ja) 2022-07-21

Family

ID=82448418

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/000445 WO2022153955A1 (ja) 2021-01-16 2022-01-10 ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置

Country Status (3)

Country Link
US (1) US20230075621A1 (ja)
JP (1) JP7347731B2 (ja)
WO (1) WO2022153955A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005034529A (ja) * 2003-07-18 2005-02-10 Nec Corp ゴルフプレーヤのプレー支援方法およびシステム
JP2005253858A (ja) * 2004-03-15 2005-09-22 Nec Fielding Ltd ゴルフプレー支援システム、方法、アドバイスサーバ、プログラム
JP2020088855A (ja) * 2018-11-16 2020-06-04 協栄精工株式会社 ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005034529A (ja) * 2003-07-18 2005-02-10 Nec Corp ゴルフプレーヤのプレー支援方法およびシステム
JP2005253858A (ja) * 2004-03-15 2005-09-22 Nec Fielding Ltd ゴルフプレー支援システム、方法、アドバイスサーバ、プログラム
JP2020088855A (ja) * 2018-11-16 2020-06-04 協栄精工株式会社 ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置

Also Published As

Publication number Publication date
JP7347731B2 (ja) 2023-09-20
US20230075621A1 (en) 2023-03-09
JP2022110177A (ja) 2022-07-29

Similar Documents

Publication Publication Date Title
US9497391B2 (en) Apparatus and method for displaying images
US9154690B2 (en) Image search device, image search method, and image search program
CN103907341B (zh) 图像生成装置和图像生成方法
JP2019159950A (ja) 情報処理装置および情報処理方法
JP5927856B2 (ja) 画像処理装置、画像処理方法及びプログラム
KR20170086203A (ko) 스포츠 중계 서비스 제공 방법
KR20160021706A (ko) 360도 공간영상 재생방법 및 그 시스템
CN106060523A (zh) 全景立体图像采集、显示方法及相应的装置
JP6056664B2 (ja) 画像処理装置および撮像システム
JP7207913B2 (ja) 情報処理装置、情報処理方法及びプログラム
WO2022153955A1 (ja) ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置
JP6778864B2 (ja) ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置
JP7282519B2 (ja) 画像処理装置または画像処理サーバー
WO2020095647A1 (ja) 画像処理装置、画像処理サーバー、画像処理方法、コンピュータプログラム及び記憶媒体
JP2021153221A (ja) ドローン撮影映像提供システム、ドローン撮影映像提供システムのプログラム、移動体撮影映像提供システム、移動体撮影映像提供システムのプログラム
JP2008152374A (ja) 画像システム、撮影方位特定装置、撮影方位特定方法、プログラム
KR101857104B1 (ko) 놀이공간 영상 컨텐츠 서비스 시스템
CN115225944B (zh) 视频处理方法、装置、电子设备和计算机可读存储介质
JP7289630B2 (ja) 画像処理装置
KR102650406B1 (ko) 원거리의 장면을 모니터링하기 위한 영상 서비스 제공 장치 및 방법
JP2003283976A (ja) メディア情報記録装置および方法
JP5409852B2 (ja) 仮想風景表示装置及び仮想風景表示方法
WO2023131327A1 (zh) 视频合成方法、装置及系统
JP5058842B2 (ja) 仮想風景表示装置
JP2003125389A (ja) 映像配信装置及びその方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22739363

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22739363

Country of ref document: EP

Kind code of ref document: A1