WO2006011447A1 - ダイジェストの作成方法及び装置 - Google Patents

ダイジェストの作成方法及び装置 Download PDF

Info

Publication number
WO2006011447A1
WO2006011447A1 PCT/JP2005/013574 JP2005013574W WO2006011447A1 WO 2006011447 A1 WO2006011447 A1 WO 2006011447A1 JP 2005013574 W JP2005013574 W JP 2005013574W WO 2006011447 A1 WO2006011447 A1 WO 2006011447A1
Authority
WO
WIPO (PCT)
Prior art keywords
replay
digest
importance
video
information
Prior art date
Application number
PCT/JP2005/013574
Other languages
English (en)
French (fr)
Inventor
Yoshihisa Terada
Hiroshi Kasahara
Toru Nakada
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to US11/572,957 priority Critical patent/US8544037B2/en
Publication of WO2006011447A1 publication Critical patent/WO2006011447A1/ja

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00086Circuits for prevention of unauthorised reproduction or copying, e.g. piracy
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00086Circuits for prevention of unauthorised reproduction or copying, e.g. piracy
    • G11B20/00731Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving a digital rights management system for enforcing a usage restriction
    • G11B20/00746Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving a digital rights management system for enforcing a usage restriction wherein the usage restriction can be expressed as a specific number
    • G11B20/00797Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving a digital rights management system for enforcing a usage restriction wherein the usage restriction can be expressed as a specific number wherein the usage restriction limits the number of times a content can be reproduced, e.g. using playback counters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Definitions

  • the present invention relates to a method for creating a digest such as a program video of a main broadcast, and an apparatus and program for executing the method.
  • a digest such as a program video of a main broadcast
  • an apparatus and program for executing the method In particular, the creation of a digest can be performed without taking time and effort. It is a thing.
  • the receiving device In digital broadcasting, for example, if broadcast data including baseball broadcast data including highlight scene identification information is broadcast from a broadcast station, the receiving device accumulates the received information and creates a digest consisting of a highlight sinker. The viewer can watch the game with a digest at any time of day.
  • Patent Document 1 listed below describes a method for extracting a replay video included in a broadcast video and creating a digest by combining them as a simple digest creation method.
  • Scenes that are replayed in the broadcast are, for example, scored scenes, etc., which are determined to be important by the sender of the broadcast, so by automatically extracting and connecting this replay video, a digest that shows the important fields is automatically created. Is possible.
  • the digest length (hereinafter referred to as “scale”) is automatically determined by the length of the replay scene, and the digest scale can be adjusted. Can not. In order to adjust the scale, it is necessary to assign importance to the scene and select the scene to be included in the digest based on the importance.
  • Patent Document 2 describes a method for creating a digest capable of adjusting the scale.
  • the broadcast station adds a digest creation index, such as a “rising degree” that evaluates the audience's cheering power and “game parameters” that indicate the progress information of the game, to the program.
  • a digest creation index such as a “rising degree” that evaluates the audience's cheering power and “game parameters” that indicate the progress information of the game
  • the receiver selects a cut with a high evaluation value according to the scale of the digest, and creates a digest.
  • FIG. 35 schematically shows a digest creation apparatus 110 that performs this method.
  • This device 110 includes, as index information, an input unit 120 for inputting information such as “climax” and “game parameters” output from the input terminal 160 and production parameter information output from the editing device 170 and the switcher 180.
  • An importance calculation unit 130 that calculates the importance of each cut of the program based on the index information, a digest evaluation unit 140 that creates a digest information by selecting the cut according
  • the degree of excitement is a value that is evaluated subjectively by the power evaluator, such as the importance of the scene in the game, the degree of tension, and the climax of the audience. input.
  • the “game parameter” is information indicating which is the attacking side and which is the defending side, scoring information, occurrence of a foul, interruption of the game, and the like.
  • “Player information” is information representing all the players on the screen.
  • the “production parameter” includes information indicating the cut switching time, information indicating whether or not the commercial is being performed, and information indicating the replay start position and end position.
  • the importance calculation unit 130 weights the input index information according to viewer preference information and the like, and then adds the index information to obtain the importance of each cut.
  • the digest creation unit 140 selects a cut with high importance until the digest length set in advance is reached, and generates digest information.
  • the power specified by the digest information is selectively played back from the stored video and audio data of the program, and the digest is displayed.
  • Patent Document 1 Japanese Patent Laid-Open No. 9-65287
  • Patent Document 2 JP 2002-300518
  • Patent Document 2 has a problem that it takes a very large cost to create information such as the “rising degree” added to the program.
  • the present invention solves such a conventional problem, and provides a digest creation method capable of creating a digest adapted to a scale very easily, and the method.
  • An object of the present invention is to provide an apparatus and a computer program for executing the above.
  • the replay broadcast section information that identifies the broadcast time zone of the replay video Z sound and the replay reference section information that identifies the actual shooting Z sound collection time zone of the replay video Z sound.
  • the replay importance calculator that outputs the replay information, the ribray information with importance and the digest condition information are received, and the replay Video Z Audio is set as a digest candidate, and the sum of importance is maximized within a range that does not exceed the specified digest length.Select one or more digest candidate combinations to obtain the digest candidate.
  • a digest creation unit is provided to output information that identifies the destination.
  • digest information that satisfies the length condition can be created using information such as the history of broadcasting equipment that can be easily obtained.
  • the digest creating unit of the digest creating device of the present invention excludes the replay video Z audio having the least importance from the digest candidates among the plurality of replay video Z audio having overlapping replay reference sections, and Select a combination.
  • the digest creating device has replay broadcast section information for specifying the broadcast time zone of the replay video Z sound and replay reference section information for specifying the actual shooting Z sound collection time zone of the replay video Z sound.
  • Input part for inputting digest condition information for specifying the digest length, information indicating the section of the video Z audio, the number of replays, and the replay broadcast section.
  • the replay reference section interval, the replay broadcast length, the replay broadcast speed, or the replay power switching number, and the importance of the replay video Z audio is calculated.
  • a replay importance calculator that outputs replay information with importance with importance added to the play information, a section that includes the replay information with importance and digest condition information, and includes a replay reference section of the replay video Z audio Video Z audio is set as a digest candidate with the importance of the replay video Z audio, and the specified digest length is not exceeded!
  • a digest creation unit is provided that selects a combination of digest candidates and outputs information for specifying the acquisition destination of the digest candidates.
  • the digest creating device has replay broadcast section information for specifying the broadcast time zone of the replay video Z sound and replay reference section information for specifying the actual shooting Z sound collection time zone of the replay video Z sound.
  • an input unit for inputting digest condition information for specifying the length of the digest, cut specifying information indicating the cut switching point of the broadcast broadcasting the video Z sound, and the replay information power Replay video using at least one of the number of replays to be calculated, the interval between the predetermined positions of the replay broadcast section and the replay reference section, the replay broadcast time length, the replay broadcast speed, or the replay cut switching number.
  • Replay importance calculation unit that calculates the importance of replay and outputs replay information with importance with importance attached to replay information And the replay information with importance, digest condition information, and cut identification information, and the broadcast cut including the replay reference section of the replay video Z audio is converted into a digest having the importance of the replay video Z audio.
  • Set as a candidate select the combination of one or more digest candidates that maximizes the sum of the importance within a range that does not exceed the specified digest length, and output the broadcast segment information of the digest candidate And a digest creation unit.
  • the replay video Z audio specifying the broadcast time zone of the replay video Z audio and the actual shooting of the replay video Z audio Z replay reference zone specifying the sound pickup time zone Specify replay information including information and digest length Input section for inputting the digest condition information to be transmitted and scene information indicating the scene of the broadcast video z sound, the replay information power is also obtained, the number of replays, the interval between the replay broadcast section and the rib reference reference section, the replay The importance of replay video Z audio is calculated using at least one of the broadcast time length, replay broadcast speed, or replay cut switching count, and replay information with importance is added to the replay information.
  • Replay importance calculation unit that outputs information, ribray information with importance, digest condition information and scene information are received, and the video Z audio divided by scene information including the replay reference section of the replay video Z audio
  • the scene is set as a digest candidate having the importance of the replay video Z audio, and the specified digest length is set.
  • a digest creation unit for outputting information specifying an acquisition destination of the digest candidate.
  • the digest creation unit of this apparatus changes the size of the scene of the video Z audio including the replay reference section according to the importance of the replay video Z audio.
  • a long scene can be selected when the importance level of the replay video Z sound is high, and a short scene can be selected when the importance level of the replay video Z sound is low.
  • the replay importance calculation unit of the digest creation device of the present invention adds importance to a plurality of replay video Z sounds in which replay broadcast sections are continuous and replay reference sections do not overlap.
  • the replay video Z audio specifying the broadcast time zone of the replay video Z audio and the actual shooting of the replay video Z audio Z replay reference zone specifying the sound pickup time zone.
  • the replay information including information, at least one of the number of replays, the interval between the replay broadcast section and the replay reference section, the predetermined position of the replay, the replay broadcast length, the replay broadcast speed, or the replay cut switching number
  • the importance of the replay video Z audio is calculated using the obtained value, and the replay video Z audio is digested. Select a combination of one or more digest candidates and specify where to obtain the relevant digest candidate within the range that does not exceed the specified digest length.
  • the information to be output is output.
  • digest information that satisfies the length condition can be created using information such as the history of broadcasting equipment that can be easily obtained.
  • the replay video Z sound is excluded from the digest candidates, since the replay video Z sound has the highest importance. Then, select the combination.
  • the live broadcast section information specifying the broadcast time zone of the replay video Z sound and the actual shooting of the replay video Z sound Z replay reference section specifying the sound collection time zone.
  • the replay information including information, at least one of the number of replays, the interval between the replay broadcast section and the replay reference section, the predetermined position of the replay, the replay broadcast length, the replay broadcast speed, or the replay cut switching number
  • the importance of the replay video Z sound is calculated using the obtained value, and the importance of the replay video Z audio is determined for the video Z audio in the section including the ribriy reference section of the replay video Z audio.
  • One or more digests that have the maximum sum of importance within a range that does not exceed the specified digest length. Selects a combination of strike candidates, so as to output information specifying an acquisition destination of the digest candidate, Ru.
  • the video Z audio of the time zone in which the replay video Z audio was captured and collected can be included in the digest.
  • the replay video Z audio broadcast time zone information specifying the replay video Z audio and the replay video Z audio actual shooting Z replay reference zone specifying the sound pickup time zone.
  • the replay information including information, at least one of the number of replays, the interval between the replay broadcast section and the replay reference section, the predetermined position of the replay, the replay broadcast length, the replay broadcast speed, or the replay cut switching number Calculate the importance of the replay video Z audio using the obtained value, and replay the replay video Z audio.
  • the cut of the broadcast of the video Z audio that includes the reference section is set as a digest candidate having the importance of the replay video Z audio, and the sum of the importance is within a range that does not exceed the specified digest length.
  • the combination of one or more digest candidates that maximizes is selected, and the broadcast segment information of the digest candidates is output.
  • a cut of the broadcast during the time zone when the replay video Z sound was captured and collected can be included in the digest.
  • the replay video Z audio broadcast time zone information specifying the replay video Z audio and the replay video Z audio actual shooting Z replay reference zone specifying the sound pickup time zone.
  • the replay information including information, at least one of the number of replays, the interval between the replay broadcast section and the replay reference section, the predetermined position of the replay, the replay broadcast length, the replay broadcast speed, or the replay cut switching number
  • the replay video Z audio importance level is calculated using the obtained value, and the replay video Z audio replay is replayed from the video Z audio scene separated by the scene information including the reference section.
  • a combination of a plurality of digest candidates is selected, and information specifying the acquisition destination of the digest candidates is output.
  • the video / audio scene of the time zone in which the replay video Z audio was captured and collected can be included in the digest.
  • the size of the scene of the video Z audio including the replay reference section is changed according to the importance of the replay video Z audio.
  • the computer program of the present invention provides the computer with replay broadcast section information for specifying the replay video / audio broadcast time zone and replay reference for specifying the actual shooting Z sound collection time zone of the replay video Z audio.
  • replay information that includes the section information
  • Replay video using at least one of the number of times, the interval between the replay broadcast section and the replay reference section, the replay broadcast time length, the replay broadcast speed, or the replay cut switching number.
  • the procedure for calculating the importance of Z audio and the replay video Z audio is set as a digest candidate, and the total sum of importance is maximized within a range that does not exceed the specified digest length. And a procedure for selecting a combination of digest candidates.
  • the computer includes replay broadcast interval information for specifying the broadcast time zone of the replay video Z sound, and replay reference interval information for specifying the actual shooting of the replay video Z audio, and the Z sound pickup time zone. From the replay information, obtain and obtain at least one of the number of replays, the interval between the replay broadcast section and the replay reference section, the replay broadcast length, the replay broadcast speed, or the replay cut switching number.
  • the replay video Z audio importance level is calculated using the calculated values, and the video Z audio of the interval that includes the replay reference zone of the replay video Z audio is converted into a candidate for the replay video Z audio with the importance level of the replay video Z audio. Set to, and the maximum sum of importance is within the range that does not exceed the specified digest length. Combination of one or more digest candidates And the procedure for selecting the mode.
  • the computer includes replay broadcast interval information for specifying the broadcast time zone of the replay video Z audio and replay reference interval information for specifying the actual shooting of the replay video Z audio Z sound collection time zone. From the replay information, obtain and obtain at least one of the number of replays, the interval between the replay broadcast section and the replay reference section, the replay broadcast length, the replay broadcast speed, or the replay cut switching number.
  • the importance of the replay video Z audio is calculated using the procedure for calculating the importance of the replay video Z audio and the cut of the broadcast that broadcasts the video Z audio that includes the replay reference section of the replay video Z audio. One or more dies that have the maximum sum of importance within a range that does not exceed the specified digest length.
  • the replay broadcast zone information for specifying the broadcast time zone of the replay video Z sound and the replay reference zone for specifying the actual shooting of the replay video Z audio and the Z sound pickup time zone are also stored in the computer. From the replay information including the interval information, at least the number of replays, the interval between the predetermined positions of the replay broadcast section and the replay reference section, the replay broadcast length, the replay broadcast speed, or the number of replay cut changes The procedure for calculating the importance of the replay video Z audio using the obtained value and the importance of the replay video Z audio according to the importance of the replay video Z audio.
  • the procedure for selecting the hierarchy and the scene in the hierarchy of the video z audio that includes the replay reference section of the replay video z audio is set as the digest candidate having the importance of the replay video Z audio, and the specified digest is selected.
  • digest information corresponding to a specified length can be generated using information that can be easily obtained from history information of a broadcasting device. Also, when broadcast scene information is given, it is possible to include the main broadcast scene in the time zone when the replay video was shot in the digest, changing the length of the scene according to the importance, etc. As a result, the quality of the digest can be improved.
  • FIG. 1 is a block diagram showing a configuration of a digest creation device according to a first embodiment of the present invention.
  • FIG. 3 is a diagram for explaining information used by the digest creation device according to the first embodiment of the present invention.
  • FIG. 4 is a diagram showing a data structure of replay information in the first embodiment of the present invention.
  • FIG. 6 is a diagram showing information input to each part of the digest creation device according to the first embodiment of the present invention.
  • ⁇ 9 Diagram showing the data structure of the digest information in the first embodiment of the present invention.
  • ⁇ 10 Flow diagram showing the processing procedure of the digest creation device in the first embodiment of the present invention.
  • ⁇ 11 A diagram for explaining the calculation method of the replay importance in the first embodiment of the present invention.
  • ⁇ 12 A flow chart showing the processing procedure of the digest creating unit in the first embodiment of the present invention.
  • ⁇ 14 Diagram for explaining the digest creation method in the second embodiment of the present invention.
  • ⁇ 15 Flow diagram showing the processing procedure of the digest creation unit in the second embodiment of the present invention.
  • ⁇ 16 Diagram illustrating the digest creation method in the second embodiment of the present invention.
  • ⁇ 17 Diagram explaining the digest creation method in the third embodiment of the present invention.
  • ⁇ 18 In the third embodiment of the present invention. Flow chart showing the processing procedure of the digest creation device
  • ⁇ 19 A diagram showing an example of calculating importance in the digest creation method according to the third embodiment of the present invention.
  • ⁇ 20 Diagram for explaining the digest creation method in the fourth embodiment of the present invention.
  • ⁇ 21 Diagram for explaining the digest creation method in the fourth embodiment of the present invention.
  • ⁇ ⁇ ⁇ ⁇ 22 In the fourth embodiment of the present invention. Flow diagram showing the processing procedure of the digest creation unit
  • ⁇ 23 A diagram for explaining a delimiter hierarchy determination method according to the fourth embodiment of the present invention.
  • ⁇ 24 A diagram illustrating a digest information creation procedure according to the fourth embodiment of the present invention.
  • ⁇ 25 A fifth embodiment of the present invention.
  • the block diagram which shows the structure of the digest production apparatus in form
  • ⁇ 26 A diagram showing a data structure of the first replay information in the fifth embodiment of the present invention.
  • ⁇ 27 A diagram showing a data structure of second replay information in the fifth embodiment of the present invention.
  • FIG. 28 A diagram showing a data structure of ribray information with importance in the fifth embodiment of the present invention.
  • FIG. 30 is a diagram showing a weighting rule setting table managed by the database according to the fifth embodiment of the present invention.
  • FIG.33 A diagram explaining the calculation of interval importance using threshold values for replay used immediately after an event.
  • FIG. 35 is a block diagram showing the configuration of a conventional digest creation device.
  • a digest in sports broadcast such as baseball is created by connecting selected replay videos.
  • replay video of past video is often inserted in the middle of live video of a game and broadcast.
  • the time zone in which the replay video was actually shot is referred to as the “live reference section”
  • the replay broadcast section starts when the operator who monitors the video of each camera specifies the camera number from the editing equipment and performs the "Q stroke" operation within the broadcast station. It ends with the next “Q hit” operation.
  • the replay broadcast section starts when the operator performs a “replay 'start” operation from the switcher and ends with a return to live broadcast operation.
  • “replay reference section information” indicating the start time and end time of the replay reference section
  • “camera information” indicating the shooting camera of the replay video
  • replay broadcast section information (collectively referred to as “replay information”) indicating the start time and end time of the broadcast section
  • FIG. 1 shows a configuration of a digest creation device 10 that implements this method.
  • the device 10 includes an input unit 20 for inputting ribray information from the editing device 70 and the switch 80, a replay importance calculating unit 30 for calculating the importance of each input replay video information, and a scale of the digest.
  • a digest creating unit 40 that selects replay video information with high importance and creates digest information, and an output unit 50 that outputs the created digest information are provided.
  • the replay importance calculation unit 30 and the digest creation unit 40 are realized by a computer built in the digest creation device 10 executing a program that defines the operation.
  • FIG. 4 shows the data structure of the replay information input to the input unit 20.
  • the replay information includes a replay broadcast section start time, a replay broadcast section end time, a replay reference section start time, and a replay reference section end time, in addition to a ribray number for identifying each replay. , And information on the shooting camera number.
  • Fig. 5 schematically shows the relationship between the replay video (a) inserted into the main broadcast and the data content (b) of the replay information.
  • FIG. 6 shows information input / output to / from each unit of the digest creation device 10.
  • the replay information (FIG. 4) is input to the input unit 20 from the editing device 70 and the switcher 80, and digest condition information for specifying the digest scale is input.
  • This digest condition information is input by the user who wants to view the broadcast game content as a digest when the digest creation device 10 is on the broadcast receiving side, and when it is on the broadcast sending side.
  • the editor on the broadcast sending side may determine the digest scale and send it to the digest generating device on the broadcast receiving side.
  • Figure 7 shows the data structure of the digest condition information.
  • the input unit 20 outputs the replay information to the replay importance calculation unit 30 and outputs the digest condition information to the digest creation unit 40.
  • the replay importance calculation unit 30 calculates the importance of each piece of replay information, and outputs the replay information with importance to the digest creation unit 40.
  • Figure 8 shows the data structure of the ribray information with importance. Based on the importance of each piece of replay information shown in the relevance information with importance (Fig. 8) and the specified conditions in the digest condition information (Fig. 7), the digest creation unit 40 uses the specified scale. Select the replay video to be combined in creating the digest, and output the digest information to the output unit 50.
  • Figure 9 shows the data structure of the digest information. The output unit 50 outputs this digest information to the outside.
  • FIG. 10 shows a processing procedure of the digest creation device 10.
  • the input unit 20 acquires replay information (step 1).
  • the replay importance calculation unit 30 determines the importance based on the viewpoint of “(a) number of replays” based on the number of replays that overlap the replay reference sections even if the replay reference sections overlap.
  • Step 2-1 and based on the difference between the replay broadcast segment start time and the replay reference segment start time, the importance based on the viewpoint of (b) Interval between the replay broadcast segment and the replay reference segment ( (Interval importance) is calculated (step 2-2), and based on the difference between the replay broadcast segment end time and the replay broadcast segment start time, the importance based on the viewpoint of (c) replay length (length important) (Step 2-3) and the ratio of the difference between the replay broadcast segment end time and the replay broadcast segment start time and the difference between the replay reference segment end time and the replay reference segment start time is calculated as “(d ) Replay playback speed Calculated degree of importance based on the point of view (the playback speed importance) of "(step 2-4), also, the number force of replay reference section start time of the ribs Rei information is also” (e) cut of the replay broadcasting section switches the number of comparatively " Calculate the importance (switching importance) based on the viewpoint (Step 2-5).
  • each importance is multiplied by a weighting factor ⁇ , and the sum is obtained.
  • the replay importance is calculated and added to each piece of replay information (step 3). This process is repeated until replay importance is added to all replay information (step 4).
  • the number of times importance is 1 (times)
  • the interval importance is 120 (seconds)
  • the length importance is 20 (seconds)
  • playback is performed. Since the speed importance is 1 (double speed) and the switching number importance is 1 (times), the replay importance R1 is
  • Rl al- (importance of times) + ⁇ 2 ⁇ (interval importance) + ⁇ 3 ⁇ (length importance)
  • the replay importance calculation unit 30 creates the replay information with importance by adding the importance obtained in this way to each replay information (FIG.), And outputs this to the digest creation unit 40.
  • the digest creation unit 40 creates the digest information by selecting the combination of replays that is closest to the scale specified in the digest condition information and has the largest sum of importance. (Step 5).
  • FIG. 12 shows the detailed procedure in the digest creation unit 40 at this time.
  • the digest creation unit 40 receives the ribbed information with importance and the digest condition information (step 61), and performs the following processing using all replays as digest candidates (elements that can be combined when creating a digest). Do (step 62).
  • step 63 it is determined whether or not the digest candidate replay total time length force exceeds the specified digest scale. If so, list all combinations of digest candidates that fit within the specified digest scale (step 65), and calculate the total replay importance for each combination listed (step 66). Select the replay combination that maximizes (Step 67), and arrange the replays of the selected combination in chronological order to create digest information (Step 68). Also, in step 63, if the digest candidate replay total time duration does not exceed the specified digest length, all the replays included in the digest candidate are selected (step 64), and the processing in step 68 is performed. I do.
  • the output unit 50 of the digest creating device 10 outputs the digest information created by the digest creating unit 40 (step 6).
  • this digest information Fig. 9
  • only the replay videos from the replay broadcast section start time to the replay broadcast section end time specified in the digest information are displayed sequentially from the stored main broadcast video.
  • the digest can be displayed without exceeding the specified scale.
  • the replay information may be provided multiplexed with the main broadcast video, or all the replay information may be provided together after the game is over, or the replay information included in a certain period of time. Or may be provided regularly. Also, you should be able to change the weighting factor for importance calculation according to the type of broadcast (sports program, news program, etc.) and viewer preference.
  • the importance is calculated by using the replay that the same broadcast station broadcasts during the same game, that is, the replay used in the relay program. Hana ⁇ .
  • replays that have been used once in other channels (including multi-channels) or other games may be referenced, such as news programs or sports programs. In such a case, importance may be added to the riblay. This allows replays used in programs other than relay programs to be used for digests.
  • the digest creation device is installed in a receiving terminal on the receiving station side, Digest information for the viewer to perform digest viewing may be created and used. It may also be installed on the broadcaster's center device and output digest information for creating a digest program summarizing the game content. Alternatively, it may be possible to output digest information for provision to the receiving terminal through broadcasting. To obtain replay information and digest condition information, "broadcast”, “distribution”, “via network”, etc. can be used.
  • the digest creation device in the center device and other functional blocks in the receiving terminal.
  • the replay importance calculation unit 30 and the digest creation unit 40 are installed in the center device, or when the replay importance calculation unit 30 is installed in the center device and the digest creation unit 40 is installed in the receiving terminal, or In some cases, the replay importance calculation unit 30 and the digest creation unit 40 are installed in the receiving terminal, and in any case, the digest information that fits in the digest condition information set on the center device side or the receiving terminal side is created. It is also possible to share the load of digest creation processing between both devices, and to create digest information that reflects the user's preferences.
  • a receiving terminal that can manage each information in a database (not shown) is the center device.
  • the information managed by the database may be acquired after performing two-way communication with. This makes it possible to efficiently perform digest creation processing between both apparatuses.
  • the digest quality is improved by incorporating the replay video in which the replay reference sections do not overlap into the digest.
  • the configuration of the digest creation device that performs this method is the same as that of the first embodiment (Figs. 1 and 6).
  • the replay importance calculation unit 30 calculates the importance of each replay by the same processing as in the first embodiment, and outputs the replay information with importance to the digest creation unit 40.
  • the digest creation unit 40 creates digest information according to the procedure shown in FIG.
  • the digest creation unit 40 receives digest information with importance and digest condition information (step 61), sees all replays as digest candidates (step 62), and specifies the total time length of digest candidate replays. Determine whether the force exceeds the digest length (step 63). If it exceeds, the presence / absence of replay information with overlapping replay reference sections is checked (step 631), and if there are overlapping replays, the one with the lowest replay importance is deleted from the digest candidates (step 632).
  • step 65 The subsequent processing is the same as in the first embodiment, and all the combinations of digest candidates that fit within the specified digest scale are listed (step 65), and the sum of the replay importance levels for each listed combination. Is calculated (step 66), the replay combination having the maximum total replay importance is selected (step 67), and the replays of the selected combination are arranged in time series to create digest information (step 68). If the total time length of all replays does not exceed the specified digest scale in step 63, all replays are selected (step 64) and the process of step 68 is performed.
  • FIG. 16 illustrates the processing procedure when the digest scale is specified as 110 seconds in the case of FIG.
  • the amount of digest information can be increased by selecting only one digest candidate even in a replay in which replay reference sections overlap.
  • FIG. 17 shows the difference between highlight and normal replay.
  • the highlight also consists of a number of rib breakers with consecutive replay broadcast sections and no overlapping replay reference sections. Even if multiple replay broadcast sections are consecutive, if the replay reference sections overlap, it is a normal replay and not a highlight.
  • the configuration of the apparatus for performing this digest creation method is the same as that of the first embodiment (Figs. 1 and 6).
  • the replay importance calculator 30 focuses on highlights and adds importance (highlight importance) to highlights as one of the viewpoints for measuring the importance of replay information. different.
  • FIG. 18 shows the processing procedure of the digest creation device 10 including the processing of the replay importance level calculation unit 30.
  • the replay importance calculation unit 30 determines the number of times importance (step 2-1), interval importance (step 2-2), length importance (step 2-3), and replay information sent from the input unit 20. Playback speed importance (steps 2-4) and switching number importance (steps Step 2-5) and if the replay broadcast section is continuous and the replay reference section does not overlap, those replay groups are judged as highlights, and the highlight is important for each replay. Set the degree (steps 2-6).
  • the replay importance is calculated from the number importance, interval importance, length importance, playback speed importance, switching number importance, and highlight importance, and added to the replay information (step) 3). This process is repeated until replay importance is added to all replay information (step 4).
  • the operation of the digest creation unit 40 that has received the replay information with importance from the replay importance calculation unit 30 is the same as that of the first embodiment.
  • Embodiment 3 by increasing the replay importance level of the replay video in the highlight broadcast section, it is possible to incorporate the highlight video that the program producer has determined to be important into the digest. become.
  • the configuration of the digest creation device that performs this method is the same as that of the first embodiment (FIGS. 1 and 6).
  • the replay information and the live video cut switching point information obtained from the operation history of the broadcasting device are input to the input unit 20, and the digest creation unit 40 receives the replay reference section included in the replay information with importance. From the information and the information of the cut change point, identify the cut of the live video including the replay reference section (possibly in multiple cases), and consider that cut as a digest candidate with importance attached, The point of creating digest information is different.
  • An inning scene including a reference section can be a digest candidate
  • a batter scene including a replay reference section can be a digest candidate
  • a pitch scene including a rib reference section can be a digest candidate.
  • the inning scene is set as a digest candidate
  • the pitching scene is set as a digest candidate. The size of the scene to be divided can be changed accordingly.
  • FIG. 22 shows a processing procedure in the digest creation unit 40 in this case.
  • the digest creation unit 40 receives the ribbed information with importance, the digest condition information, and the scene information (step 611), the digest candidate is emptied and the following processing is performed (step 612).
  • the hierarchy that divides the scene is determined (step 614), and the scene information that includes the replay reference section of replay is determined using the scene information.
  • the specified hierarchical power is also acquired (step 615), and the acquired scene interval is added to the digest candidates (step 616).
  • Step 631 list all combinations of digest candidates that fall within the specified digest scale (Step 65), and add the total replay importance for each listed combination.
  • Calculate step 66), select a combination of digest candidates that maximizes the total replay importance (step 67), and arrange the scene sections of the selected combination in time series to create digest information (step 681). If the total time length of all scene sections does not exceed the specified digest length in step 631, all scene sections are selected (step 641) and the processing in step 681 is performed.
  • FIG. 23 and FIG. 24 illustrate the processing in this case.
  • the unit (hierarchy) that separates scenes is high in importance, Replay 1 is “separation by inning”, low importance is low !, Replay 2 is “separation by pitching”, and replay 3 of medium importance is “ “Battery break” is determined.
  • “Inning break” that includes the reference interval of Replay 1 “Pitch break” that includes the reference interval of Replay 2, and “Batter break” that includes the reference interval of Replay 3. ”And make them digest candidates.
  • Figure 24 (al) is the digest candidate scene corresponding to Replay 1
  • Figure 24 (a2) is the digest candidate scene corresponding to Replay 3
  • Figure 24 (a3) is the digest candidate corresponding to Replay 2. Shows the scene.
  • the digest scale is specified as 160 seconds
  • use these three digest candidates to find all the combinations of digest candidates that fit within 160 seconds, and among them, the combination that maximizes the importance. Select.
  • the combination shown in Fig. 24 (b) is selected.
  • the digests viewed using this digest information are the main broadcast video part (part of Livel) corresponding to the "2 times table” scene section, and "batter It will look like the main broadcast video corresponding to “1” (part of Live3).
  • the time used for the scene time delimitation is as described above.
  • the video used as the digest may be a video other than the main broadcast video (video from another camera other than the main broadcast).
  • one replay is associated with one scene section, and the digest is created using only the scene section. Both the replay and scene sections are not necessarily limited to this. You can combine them to create a digest!
  • the calculation of the importance of each piece of replay information is roughly divided into two stages: the number of replays, the interval, the length of time, the broadcast speed, or the cut switching. After calculating the importance such as the number, the importance of the ribray information is calculated.
  • the configuration of the replay importance calculation unit 30 shown in the first embodiment is divided into a first replay importance calculation unit 31 and a second replay importance calculation unit 32. A method of creating a digest will be described separately for the center device 100 provided on the broadcasting station side and the receiving terminal 200 provided on the receiving station side.
  • the center device 100 receives the first replay information from the editing device 70 and the switch 80 (FIG. 1), the first replay information, and the number of times from the information. Calculate importance, interval importance, length importance, playback speed importance, number of switching importance, etc., and create second replay information that associates each importance with the first replay information. With a calculator 31! /
  • FIG. 26 shows the data structure of the first replay information input to the input unit 20.
  • the first replay information includes a replay broadcast section start time, a replay broadcast section end time, a replay reference section start time, a replay reference section end time, and a photographic camera, in addition to a ribray number for identifying each replay. Contains number information. Note that the first replay information in this embodiment has the same data structure as the replay information shown in the first embodiment.
  • FIG. 27 shows the data structure of the second replay information created by the first replay importance calculation unit 31.
  • the 2nd replay information is calculated from each information shown in the 1st replay information, frequency importance, interval importance, length importance, playback speed importance, switching The number importance is associated with the first replay information. For example, in the case of replay 1 in FIG. 5, as shown in FIG. 11, the frequency importance is 1 (times), the interval importance is 120 (seconds), the length importance is 20 (seconds), and the playback speed importance is Is 1 (double speed), and the switching number importance is 1 (times), and the second replay information associates each importance with the first replay information.
  • the receiving terminal 200 acquires the second replay information transmitted from the center apparatus 100, and based on the weighting factor managed in the weighting rule setting database 60, each important information indicated in the second replay information is displayed.
  • the second replay importance calculation unit 32 outputs the replay information with importance, and the digest condition information input by the user's operation. (Digest scale), select the most important ribray information according to the digest scale, and create digest information 40 to create digest information, and output section 50 to output the created digest information. It has.
  • the first replay importance calculating unit 31 of the center device 100, the second replay importance calculating unit 32, and the digest creating unit 40 of the receiving terminal 200 are each of the devices 100 or the computer built in the terminal 200 operates. It is realized by executing a program that specifies
  • FIG. 29 shows a processing procedure from when the center apparatus 100 acquires the first replay information to when the receiving terminal 200 outputs the digest information.
  • the input unit 20 in the center device 100 acquires the first replay information (step 1).
  • the first replay importance calculator 31 calculates the importance (number importance) from the viewpoint of (a) number of replays based on the number of riblays that overlap even part of the replay reference section.
  • Step 2-1 and based on the difference between the replay broadcast section start time and the replay reference section start time, the importance based on the viewpoint of “(b) interval between the replay broadcast section and the replay reference section” (interval important (Step 2-2), and the importance based on the viewpoint of (c) Replay length from the difference between the end time of the replay broadcast section and the start time of the replay broadcast section (length importance) (Step 2-3) and the ratio of the difference between the replay broadcast segment end time and the replay broadcast segment start time and the difference between the replay reference segment end time and the replay reference segment start time is calculated as “(d) Play speed " The importance (reproduction speed importance) is calculated based on the viewpoint of each (Step 2-4), and “(e) Replay broadcasting is calculated from the number of replay reference section start times in the replay information. Calculate the importance based on the “number of cuts in the section” (switching importance) (Steps 2-5).
  • the first replay importance calculating unit 31 repeats such processing until each importance is calculated for all replay information (step 3). 2 Send the second replay information to the replay importance calculation unit 30 (step 4).
  • the second replay importance calculating unit 30 acquires the second replay information to which the first replay importance calculating unit 31 of the center device 100 is also transmitted (step 5). In accordance with this, the second replay importance calculation unit 30 acquires the weighting rule setting table (FIG. 30) managed for each genre from the weighting rule setting database 70, and is displayed in the table! Based on the weighting factor, each importance shown in the second replay information is adjusted.
  • the weighting rule setting table (FIG. 30) managed for each genre from the weighting rule setting database 70
  • Rl al- (importance of times) + ⁇ 2 ⁇ (interval importance) + ⁇ 3 ⁇ (length importance)
  • the importance level R2 of Replay 2 and the importance level R3 of Replay 3 in FIG. 5 are as follows.
  • R2 l. 5-1 + 1. 5-105 + 1-15 + 0. 5-1 + 1-1
  • R3 l. 5-1 + 1. 5-50 + 1-25 + 0. 5-1 + 1-2
  • the replay importance calculation unit 30 creates the replay information with importance by adding the importance obtained in this way to the second replay information (FIG. 28), and outputs this to the digest creation unit 40 (scopy). Step 6).
  • the value of the weighting factor shown in the weighting rule setting table can be set by either a person on the broadcasting station side or on the receiving station side. If a person on the broadcasting station side sets, a digest with the same tendency can be provided to the user. On the other hand, when a person on the receiving station side sets, a digest that takes into account the user's preferences can be created. In addition, the value of the weight coefficient may be updated so that a digest preferable for the broadcasting station side or the receiving station side can be created.
  • the digest creating unit 40 is closest to the scale specified by the digest condition information input by the user's operation, and the sum of the importance levels is the closest to the obtained combination of the rib information with importance levels. Select the combination that maximizes and create the digest information (Step 7). Note that the detailed procedure in the digest creation unit 40 at this time is the same as the procedure shown in FIGS.
  • the output unit 50 of the receiving terminal 200 acquires and outputs the digest information created by the digest creation unit 40 (step 8).
  • this digest information (Fig. 9) only the replay video from the start time of the replay broadcast section specified by the digest information to the end time of the replay broadcast section is sequentially displayed from the main broadcast video stored in the receiving terminal 200. This means that digests that do not exceed the specified scale can be displayed.
  • the second replay information acquired by the receiving terminal 200 may be acquired by the force bidirectional communication acquired by the one-way communication. That is, in the center device 100, the second replay information calculated by the first replay importance calculating unit 31 is managed in a database (not shown), and the second replay information is requested from the receiving terminal 200 to the center device 100.
  • the digest creation process can be performed efficiently between both devices.
  • the digest condition information acquired by the digest creating unit 40 of the receiving terminal 200 is the digest condition information set on the side of the force center device 100 input by the user's operation. OK.
  • the center device side can create digest information that fits in the digest condition information set on the receiving terminal side.
  • first replay importance calculation unit 31 and the “second replay importance calculation unit 32” are separately described as “center device 100” and “receiving terminal 200”. Needless to say, these can be operated in the same apparatus as described in the first embodiment.
  • the replay importance calculation method may be other than the method shown in the embodiment.
  • the interval importance calculated from “the interval between the replay broadcast section and the replay reference section” the importance calculated only from the difference affects the time zone in which the event occurs.
  • the interval importance may be calculated by the following formula.
  • the interval shown in the above embodiment The calculation of the importance for is calculated by multiplying the difference by a constant (1), but it may be multiplied by a logarithm.
  • the replay used immediately after the event is mainly used to emphasize the event, but a means for calculating a higher degree of importance is set as the interval between the replay broadcast section and the replay reference section is wider.
  • the replay used immediately after the event is calculated with a small interval importance value.
  • Replays used immediately after the event include “Fine Play” and “Strike Strike Scene” events, which are not events that directly affect the game, but can be used as a digest. Therefore, a threshold may be set for the interval between the predetermined positions of the replay broadcast section and the replay reference section, and the replay video and audio may be grouped using the threshold. In other words, by using the set threshold value and grouping, replay video and audio with different characteristics can be classified.
  • the interval between the replay broadcast section and the replay reference section is less than the threshold
  • replays such as fine play and strikeout scenes immediately after the event
  • the interval is less than the threshold.
  • event abilities that is, rib lays that indicate the flow of the game.
  • the importance of the ribray video is discriminated based on the “interval” between the start time of the replay reference section and the start time of the replay broadcast section. It is possible to discriminate importance based on the above. For example, the importance of the ribray video may be differentiated from the “interval” of the time between the replay reference section and the replay broadcast section.
  • the digest creation method and program of the present invention are implemented in this digest creation device, and the program that defines the operation of the digest creation device of the present invention is recorded on a recording medium and stored in another device. Can be transferred or copied to.
  • the digest creation device of the present invention can be used to create a digest of a program in combination with broadcast equipment of a broadcast station, or can be used as a device for creating digest information for broadcasting. it can. It can also be used as a device that enables digest viewing of stored programs in combination with a receiving terminal.
  • the digest creation apparatus of the present invention can also be applied to the case of creating a digest of a program belonging to another genre that uses replay, such as a use program and a dramas program, in addition to a sports program. Furthermore, the present invention can also be applied when the replay is audio.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Circuits (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

 本発明は、尺に合うダイジェストを簡便に作成できるダイジェスト作成装置を提供することを目的とする。  本発明は、リプレイ映像の放送区間と実際の撮影時間帯を表す参照区間とを含むリプレイ情報と、ダイジェストの長さについて指定する情報とが入力する入力部20と、リプレイ情報からリプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、リプレイのカット切替わり数等を求め、これらを基にリプレイ映像の重要度を算出するリプレイ重要度算出部30と、リプレイ映像をダイジェスト候補に設定して、ダイジェストの長さ条件に収まり、かつ重要度の総和が最大になるダイジェスト候補の組合せを選択するダイジェスト作成部40とを設ける。これにより、放送機器の履歴等から容易に入手できる情報を利用して長さ条件を満たすダイジェスト情報を作成できる。

Description

明 細 書
ダイジェストの作成方法及び装置
技術分野
[0001] 本発明は、本放送の番組映像等カゝらダイジェストを作成する方法、並びに、その方 法を実行する装置及びプログラムに関し、特に、ダイジェストの作成が、手間を掛け ずに実施できるようにしたものである。
背景技術
[0002] デジタル放送では、放送局から、例えば野球中継の放送データにハイライトシーン の識別情報を含めて放送すれば、受信装置は、受信情報を蓄積してハイライトシ一 ンカゝら成るダイジェストを作成することができ、視聴者は、好きな時間帯に、ダイジエス トで試合を視聴することができる。
また、ダイジェストの作成は、放送局内でも、試合内容を要約してスポーツ番組のコ ーナ一で紹介する場合等に必要となる。
[0003] 下記特許文献 1には、ダイジェストの簡便な作成方法として、放送映像に含まれるリ プレイ映像を抽出し、繋ぎ合わせてダイジェストを作成する方法が記載されて ヽる。 放送でリプレイされる場面は、例えば、得点シーンなど、放送の送り手側が重要と判 断した部分であるから、このリプレイ映像を抽出して繋ぎ合わせることにより、重要場 面を示すダイジェストの自動作成が可能になる。
し力しながら、この場合は、リプレイ映像を繋ぎ合わせるだけなので、ダイジェストの 長さ(以下「尺」と言う。)がリプレイシーンの長さによって自動的に決まり、ダイジェスト の尺を調節することができない。尺を調節するためには、シーンに重要度を付し、ダ イジェストに含めるシーンを、重要度に基づいて選択することが必要になる。
[0004] 下記特許文献 2には、尺の調節が可能なダイジェストの作成方法が記載されている 。この方法では、放送局側が、観客の歓声など力 評価した「盛り上がり度」や、試合 の進行情報を示す「ゲームパラメータ」等のダイジェスト作成用インデックスを番組に 付加して送出する。受信装置は、このインデックス情報を用いて、評価値の高いカット をダイジェストの尺に合わせて選択し、ダイジェストを作成する。 [0005] 図 35には、この方法を実施するダイジェスト作成装置 110を模式的に示している。 この装置 110は、インデックス情報として、入力端末 160から出力された「盛り上がり 度」や「ゲームパラメータ」等の情報と編集装置 170やスィッチヤー 180から出力され た制作パラメータ情報とが入力する入力部 120と、インデックス情報に基づいて番組 の各カットの重要度を算出する重要度算出部 130と、評価値の高!、カットを尺に合わ せて選択してダイジェスト情報を作成するダイジェスト作成部 140と、ダイジェスト情報 を出力する出力部 150とを備えている。
[0006] 「盛り上がり度」は、その場面のゲーム上での重要度、緊迫度、観客の盛り上がり状 況など力 評価者が主観的に評価した値であり、評価者は、この値を端末から入力 する。「ゲームパラメータ」は、どちらが攻撃側でどちらが防御側かを示す情報や、得 点情報、反則の発生やゲームの中断等を示す情報である。「選手情報」は、画面に 映る全ての選手を表す情報である。また、「制作パラメータ」は、カット切り替え時刻を 示す情報や CM中か否かを示す情報、リプレイの開始位置'終了位置を示す情報な どである。
[0007] 重要度算出部 130は、入力したインデックス情報に対して、視聴者の嗜好情報等 に依る重み付けを行った後、インデックス情報を加算して各カットの重要度を求める。 ダイジェスト作成部 140は、予め設定されたダイジェスト長に達するまで、重要度の高 いカットを選択し、ダイジェスト情報を生成する。このダイジェスト情報で指定された力 ットが、蓄積された番組の映像音声データの中から選択的に再生され、ダイジェスト が表示される。
特許文献 1:特開平 9-65287号公報
特許文献 2 :特開 2002— 300518号公報
発明の開示
発明が解決しょうとする課題
[0008] し力しながら、前記特許文献 2に記載された方法では、番組に付加する「盛り上がり 度」等の情報の作成に非常に大きなコストが掛カると言う問題点がある。
[0009] 本発明は、こうした従来の問題点を解決するものであり、尺に合わせたダイジェスト を極めて簡便に作成することができるダイジェスト作成方法を提供し、また、その方法 を実行する装置及びコンピュータプログラムを提供することを目的としている。
課題を解決するための手段
[ooio] そこで、本発明では、ダイジェスト作成装置に、リプレイ映像 Z音声の放送時間帯を 特定するリプレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を 特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指 定するダイジェスト条件情報とを入力する入力部と、リプレイ情報から求める、リプレイ の回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時 間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一 つを用いてリプレイ映像 Z音声の重要度を算出し、リプレイ情報に重要度を付した重 要度付きリプレイ情報を出力するリプレイ重要度算出部と、重要度付きリブレイ情報と ダイジェスト条件情報とを受信し、リプレイ映像 Z音声をダイジェスト候補に設定して、 指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる 1また は複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の取得先を 特定する情報を出力するダイジェスト作成部とを設けている。
この装置では、放送機器の履歴など力も容易に入手できる情報を利用して、長さの 条件を満たすダイジェスト情報を作成することができる。
[0011] また、本発明のダイジェスト作成装置のダイジェスト作成部は、リプレイ参照区間が 重複する複数のリプレイ映像 Z音声の内、重要度が最大でないリプレイ映像 Z音声 をダイジェスト候補から除外して、前記組み合わせを選択する。
こうすることで、指定されたダイジェストの時間長の中で、多くの情報を含むダイジヱ ストを作成することができる。
[0012] また、本発明では、ダイジェスト作成装置に、リプレイ映像 Z音声の放送時間帯を 特定するリプレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を 特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指 定するダイジェスト条件情報と、映像 Z音声の区間を示す情報とを入力する入力部と 、リプレイ情報力も求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所 定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイの力 ット切り替わり数、の少なくとも一つを用いてリプレイ映像 Z音声の重要度を算出し、リ プレイ情報に重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出 部と、この重要度付きリブレイ情報とダイジェスト条件情報とを受信し、リプレイ映像 Z 音声のリプレイ参照区間を包含する区間の映像 Z音声を、当該リプレイ映像 Z音声 の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超え な!、範囲で、重要度の総和が最大になる 1または複数のダイジェスト候補の組み合 わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力するダイジエス ト作成部とを設けている。
この装置では、リプレイ映像 Z音声に代えて、リプレイ映像 Z音声が撮影 Z収音さ れた時間帯の他の映像 Z音声をダイジェストに含めることができる。
[0013] また、本発明では、ダイジェスト作成装置に、リプレイ映像 Z音声の放送時間帯を 特定するリプレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を 特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指 定するダイジェスト条件情報と、映像 Z音声を放送する放送のカットの切り替わり点を 示すカット特定情報とを入力する入力部と、リプレイ情報力も求める、リプレイの回数 、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リ プレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用い てリプレイ映像 Z音声の重要度を算出し、リプレイ情報に重要度を付した重要度付き リプレイ情報を出力するリプレイ重要度算出部と、重要度付きリブレイ情報とダイジェ スト条件情報とカット特定情報とを受信し、リプレイ映像 Z音声のリプレイ参照区間を 包含する前記放送のカットを、当該リプレイ映像 Z音声の重要度を有するダイジエス ト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和 が最大になる 1または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェ スト候補の放送区間情報を出力するダイジェスト作成部とを設けている。
この装置では、リプレイ映像 Z音声が撮影 Z収音された時間帯の放送のカットをダ イジェストに含めることができる。
[0014] また、本発明のダイジェスト作成装置では、リプレイ映像 Z音声の放送時間帯を特 定するリブレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特 定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定 するダイジェスト条件情報と、放送される映像 z音声のシーンを示すシーン情報とを 入力する入力部と、リプレイ情報力も求める、リプレイの回数、リプレイ放送区間とリブ レイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、ま たは、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像 Z音声の 重要度を算出し、リプレイ情報に重要度を付した重要度付きリプレイ情報を出力する リプレイ重要度算出部と、重要度付きリブレイ情報とダイジェスト条件情報とシーン情 報とを受信し、リプレイ映像 Z音声のリプレイ参照区間を包含するシーン情報で区切 られた映像 Z音声のシーンを、当該リプレイ映像 Z音声の重要度を有するダイジエス ト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和 が最大になる 1または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェ スト候補の取得先を特定する情報を出力するダイジェスト作成部とを設けている。 この装置では、リプレイ映像 Z音声が撮影 Z収音された時間帯の映像 Z音声のシ ーンをダイジェストに含めることができる。
[0015] また、この装置のダイジェスト作成部は、リプレイ映像 Z音声の重要度に応じて、リ プレイ参照区間を包含する映像 Z音声のシーンの大きさを変える。
そのため、リプレイ映像 Z音声の重要度が高い場合に、長いシーンを選択し、リブ レイ映像 Z音声の重要度が低 、場合に、短 、シーンを選択することができる。
[0016] また、本発明のダイジェスト作成装置のリプレイ重要度算出部は、リプレイ放送区間 が連続し、リプレイ参照区間が重複していない複数のリプレイ映像 Z音声に対して重 要度を加算する。
そのため、ハイライトとして放送された複数のリプレイはダイジェストに取り込まれ易く なり、ダイジェストの質が向上する。
[0017] また、本発明のダイジェスト作成方法では、リプレイ映像 Z音声の放送時間帯を特 定するリブレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特 定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ 放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの 放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られ た値を用いてリプレイ映像 Z音声の重要度を算出し、リプレイ映像 Z音声をダイジェ スト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総 和が最大になる 1または複数のダイジェスト候補の組み合わせを選択し、当該ダイジ ェスト候補の取得先を特定する情報を出力するようにして 、る。
この方法では、放送機器の履歴など力も容易に入手できる情報を利用して、長さの 条件を満たすダイジェスト情報を作成することができる。
[0018] また、リプレイ参照区間が重複している複数のリプレイ映像 Z音声がある場合には、 リプレイ映像 Z音声の内、重要度が最大でな 、リプレイ映像 Z音声をダイジェスト候 補から除外して、前記組み合わせを選択するようにして 、る。
こうすることで、指定されたダイジェストの時間長の中で、多くの情報を含むダイジヱ ストを作成することができる。
[0019] また、本発明のダイジェスト作成方法では、リプレイ映像 Z音声の放送時間帯を特 定するリブレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特 定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ 放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの 放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られ た値を用いてリプレイ映像 Z音声の重要度を算出し、このリプレイ映像 Z音声のリブ レイ参照区間を包含する区間の映像 Z音声を、当該リプレイ映像 Z音声の重要度を 有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えな 、範囲で 、重要度の総和が最大になる 1または複数のダイジェスト候補の組み合わせを選択し 、当該ダイジェスト候補の取得先を特定する情報を出力するようにして 、る。
この方法では、リプレイ映像 Z音声の代わりに、リプレイ映像 Z音声が撮影 Z収音 された時間帯の映像 Z音声をダイジェストに含めることができる。
[0020] また、本発明のダイジェスト作成方法では、リプレイ映像 Z音声の放送時間帯を特 定するリブレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特 定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ 放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの 放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られ た値を用いてリプレイ映像 Z音声の重要度を算出し、リプレイ映像 Z音声のリプレイ 参照区間を包含する映像 Z音声の放送のカットを、当該リプレイ映像 Z音声の重要 度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えな ヽ範 囲で、重要度の総和が最大になる 1または複数のダイジェスト候補の組み合わせを 選択し、当該ダイジェスト候補の放送区間情報を出力するようにしている。
この方法では、リプレイ映像 Z音声の代わりに、リプレイ映像 Z音声が撮影 Z収音 された時間帯の放送のカットをダイジェストに含めることができる。
[0021] また、本発明のダイジェスト作成方法では、リプレイ映像 Z音声の放送時間帯を特 定するリブレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特 定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ 放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの 放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られ た値を用いてリプレイ映像 Z音声の重要度を算出し、リプレイ映像 Z音声のリプレイ 参照区間を包含するシーン情報で区切られた映像 Z音声のシーンを、当該リブレイ 映像 Z音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェスト の長さを超えない範囲で、重要度の総和が最大になる 1または複数のダイジェスト候 補の組み合わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力す るようにしている。
この方法では、リプレイ映像 Z音声の代わりに、リプレイ映像 Z音声が撮影 Z収音 された時間帯の映像/音声のシーンをダイジェストに含めることができる。
[0022] また、この方法では、リプレイ映像 Z音声の重要度に応じて、リプレイ参照区間を包 含する映像 Z音声のシーンの大きさを変えている。
また、リプレイ放送区間が連続し、リプレイ参照区間が重複していない複数のリプレ ィ映像 Z音声に対して重要度を加算するようにして 、る。
こうすることで、ハイライトに取り上げられたリプレイ映像 Z音声の重要度が高くなる
[0023] また、本発明のコンピュータプログラムは、コンピュータに、リプレイ映像/音声の放 送時間帯を特定するリプレイ放送区間情報とリプレイ映像 Z音声の実際の撮影 Z収 音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの 回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間 長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つ を求め、得られた値を用いてリプレイ映像 Z音声の重要度を算出する手順と、リプレ ィ映像 Z音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えな 、範囲で、重要度の総和が最大になる 1または複数のダイジェスト候補の組み合わ せを選択する手順とを実行させる。
[0024] また、コンピュータに、リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区 間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区 間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参 照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、 リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ 映像 Z音声の重要度を算出する手順と、リプレイ映像 Z音声のリプレイ参照区間を 包含する区間の映像 Z音声を、当該リプレイ映像 Z音声の重要度を有するダイジ スト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総 和が最大になる 1または複数のダイジェスト候補の組み合わせを選択する手順とを実 行させる。
[0025] また、コンピュータに、リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区 間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区 間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参 照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、 リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ 映像 Z音声の重要度を算出する手順と、リプレイ映像 Z音声のリプレイ参照区間を 包含する映像 Z音声を放送する放送のカットを、当該リプレイ映像 Z音声の重要度 を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えな 、範囲 で、重要度の総和が最大になる 1または複数のダイジェスト候補の組み合わせを選 択する手順とを実行させる。
[0026] また、コンピュータに、リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区 間情報とリプレイ映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区 間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参 照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、 リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ 映像 Z音声の重要度を算出する手順と、リプレイ映像 Z音声の重要度に応じて、シ ーン情報で区切られた映像 Z音声のシーンの階層を選択する手順と、リプレイ映像 z音声のリプレイ参照区間を包含する映像 z音声の前記階層におけるシーンを、当 該リプレイ映像 Z音声の重要度を有するダイジェスト候補に設定して、指定されたダ イジヱストの長さを超えない範囲で、重要度の総和が最大になる 1または複数の前記 ダイジェスト候補の組み合わせを選択する手順とを実行させる。
これらのプログラムをダイジェスト作成装置に搭載して、リプレイ重要度算出部及び ダイジェスト作成部の機能を実現することができる。
発明の効果
[0027] 本発明のダイジェスト作成装置及びダイジェスト作成方法では、放送機器の履歴情 報などから容易に入手できる情報を用いて、指定された長さに対応したダイジェスト 情報を生成することができる。また、放送のシーン情報が与えられる場合には、リプレ ィ映像が撮影された時間帯の本放送のシーンをダイジェストに含めることが可能であ り、シーンの長さを重要度に応じて変えるなどして、ダイジェストの質を高めることがで きる。
図面の簡単な説明
[0028] [図 1]本発明の第 1の実施形態におけるダイジェスト作成装置の構成を示すブロック 図
[図 2]リプレイ放送区間とリプレイ参照区間とを説明する図
[図 3]本発明の第 1の実施形態におけるダイジェスト作成装置が使用する情報を説明 する図
[図 4]本発明の第 1の実施形態におけるリプレイ情報のデータ構造を示す図
[図 5]リプレイとリプレイ情報との関係を示す具体例
[図 6]本発明の第 1の実施形態におけるダイジェスト作成装置の各部に入力する情報 を示す図 圆 7]本発明の第 1の実施形態におけるダイジェスト条件情報のデータ構造を示す図 圆 8]本発明の第 1の実施形態における重要度付きリブレイ情報のデータ構造を示す 図
圆 9]本発明の第 1の実施形態におけるダイジェスト情報のデータ構造を示す図 圆 10]本発明の第 1の実施形態におけるダイジェスト作成装置の処理手順を示すフ ロー図
圆 11]本発明の第 1の実施形態におけるリプレイ重要度の算出方法を説明する図 圆 12]本発明の第 1の実施形態におけるダイジェスト作成部の処理手順を示すフロ 一図
圆 13]カメラ力 台の場合のリプレイとリプレイ情報との関係を示す図
圆 14]本発明の第 2の実施形態におけるダイジェスト作成方法を説明する図 圆 15]本発明の第 2の実施形態におけるダイジェスト作成部の処理手順を示すフロ 一図
圆 16]本発明の第 2の実施形態におけるダイジェスト作成方法を図解した図 圆 17]本発明の第 3の実施形態におけるダイジェスト作成方法を説明する図 圆 18]本発明の第 3の実施形態におけるダイジェスト作成装置の処理手順を示すフ ロー図
圆 19]本発明の第 3の実施形態におけるダイジェスト作成方法での重要度算出例を 示す図
圆 20]本発明の第 4の実施形態におけるダイジェスト作成方法を説明する図 圆 21]本発明の第 4の実施形態におけるダイジェスト作成方法を説明する図 圆 22]本発明の第 4の実施形態におけるダイジェスト作成部の処理手順を示すフロ 一図
圆 23]本発明の第 4の実施形態における区切り階層決定方法を説明する図 圆 24]本発明の第 4の実施形態におけるダイジェスト情報作成手順を図解した図 圆 25]本発明の第 5の実施形態におけるダイジェスト作成装置の構成を示すブロック 図
圆 26]本発明の第 5の実施形態における第 1リプレイ情報のデータ構造を示す図 圆 27]本発明の第 5の実施形態における第 2リプレイ情報のデータ構造を示す図 [図 28]本発明の第 5の実施形態における重要度付きリブレイ情報のデータ構造を示 す図
圆 29]本発明の第 5の実施形態におけるダイジェスト作成装置の処理手順を示すフ ロー図
[図 30]本発明の第 5の実施形態におけるデータベースで管理されている重み付けル ール設定テーブルを示す図
[図 31]試合の前半及び後半に発生するイベントのリプレイの違いについて説明する 図
[図 32]同じイベントのリプレイを連続して用いられる場合の間隔重要度の算出方法に ついて説明する図
[図 33]イベントの直後に用いられるリプレイについて閾値を用いて間隔重要度を算出 することを説明する図
圆 34]中継番組以外に用いるリプレイの重要度の算出方法を説明する図
[図 35]従来のダイジェスト作成装置の構成を示すブロック図
符号の説明
10 ダイジェスト作成装置
20 入力部
30 リプレイ重要度算出部
31 第 1リプレイ重要度算出部
32 第 2リプレイ重要度算出部
40 ダイジェスト作成部
50 出力部
60 重み付けルール設定データベース
70 編集機器
80 スィッチヤー
100 センター装置
200 受信端末 発明を実施するための最良の形態
[0030] (第 1の実施形態)
本発明の実施形態では、野球等のスポーツ中継におけるダイジェストを、選択した リプレイ映像を繋ぎ合わせて作成する場合について説明する。図 2に示すように、ス ポーッ中継では、試合のライブ映像の途中に、しばしば、過去の映像のリプレイ映像 が挿入されて放送される。ここでは、リプレイ映像が実際に撮影された時間帯を「リブ レイ参照区間」と言い、リプレイ映像が放送された時間帯を「リプレイ放送区間」と言う ことにする。図 3に示すように、リプレイ参照区間は、放送局内において、各カメラの 映像を監視する操作者が、編集機器から、カメラ番号を指定して「Q打」の操作を行 つた時が開始時点であり、次の「Q打」操作で終了する。また、リプレイ放送区間は、 操作者がスィッチヤーから「リプレイ'スタート」の操作を行った時が開始時点であり、 生放送への戻りの操作で終了する。
[0031] 本発明の第 1の実施形態におけるダイジェスト作成方法では、リプレイ参照区間の 開始時刻及び終了時刻を示す「リプレイ参照区間情報」、リプレイ映像の撮影カメラ を示す「カメラ情報」、並びに、リプレイ放送区間の開始時刻及び終了時刻を示す「リ プレイ放送区間情報」(これらの情報を纏めて「リプレイ情報」と言う)に基づいて、ダイ ジェストに取り込むべきリプレイ映像を選択する。
[0032] 図 1は、この方法を実施するダイジェスト作成装置 10の構成を示している。この装置 10は、編集装置機器 70及びスィッチヤー 80からリブレイ情報が入力する入力部 20 と、入力された各リプレイ映像情報の重要度を算出するリプレイ重要度算出部 30と、 ダイジェストの尺に合わせて重要度の高 ヽリプレイ映像情報を選択し、ダイジェスト情 報を作成するダイジェスト作成部 40と、作成されたダイジェスト情報を出力する出力 部 50とを備えている。なお、リプレイ重要度算出部 30及びダイジェスト作成部 40は、 ダイジェスト作成装置 10に内蔵されたコンピュータが、動作を規定するプログラムを 実行することにより実現される。
[0033] 図 4は、入力部 20に入力するリプレイ情報のデータ構造を示している。リプレイ情報 には、各リプレイを識別するためのリブレイ番号の他に、リプレイ放送区間開始時刻、 リプレイ放送区間終了時刻、リプレイ参照区間開始時刻、リプレイ参照区間終了時刻 、及び、撮影カメラ番号の情報が含まれている。図 5には、本放送に挿入されるリプレ ィ映像 (a)と、リプレイ情報のデータ内容 (b)との関係を模式的に示している。
[0034] また、図 6は、ダイジェスト作成装置 10の各部に入出力する情報を示している。入 力部 20には、編集機器 70及びスィッチヤー 80からリプレイ情報(図 4)が入力し、ま た、ダイジェストの尺を指定するダイジェスト条件情報が入力する。このダイジェスト条 件情報は、ダイジェスト作成装置 10が放送受信側にある場合には、中継された試合 内容をダイジェストで視聴しょうとするユーザの操作により入力し、また、放送送出側 にある場合には、試合内容を要約したダイジェスト番組を提供しょうとする編集者の 操作により入力する。なお、放送送出側の編集者がダイジェストの尺を決定し、これを 放送受信側のダイジェスト作成装置に送出しても良い。図 7には、ダイジェスト条件情 報のデータ構造を示している。入力部 20は、リプレイ情報をリプレイ重要度算出部 3 0に出力し、ダイジェスト条件情報をダイジェスト作成部 40に出力する。
[0035] リプレイ重要度算出部 30は、各リプレイ情報の重要度を算出し、重要度付きリプレ ィ情報をダイジェスト作成部 40に出力する。図 8には、重要度付きリブレイ情報のデ ータ構造を示している。ダイジェスト作成部 40は、重要度付きリブレイ情報(図 8)に示 された各リプレイ情報の重要度と、ダイジェスト条件情報(図 7)の指定条件とに基づ V、て、指定された尺のダイジェストを作成する上で組み合わせるべきリプレイ映像を 選択し、ダイジェスト情報を出力部 50に出力する。図 9には、ダイジェスト情報のデー タ構造を示している。出力部 50は、このダイジェスト情報を外部に出力する。
[0036] 次に、リプレイ情報の重要度を計るための観点について説明する。
(a)リプレイ回数:リプレイ回数が「多 、」場合は、制作者が強く強調して 、ると考えら れるため、重要度が高い。
(b)リプレイ放送区間とリプレイ参照区間との間隔:リプレイ放送区間開始時刻とリブ レイ参照区間開始時刻との間隔力 ^広い」場合は、試合全体力も評価して、制作者が 見せた 、と思うシーンと考えられるため、重要度が高 、。
(c)リプレイの長さ:リプレイ放送区間が「長い」場合は、より長い時間説明を行いたい 部分と考えられるため、重要度が高い。
(d)リプレイの再生スピード:再生スピードが「遅 、」場合は、より詳しく説明した 、部分 と考えられるため、重要度が高い。
(e)リプレイ放送区間のカット切り替わり数:図 5のリプレイ 3のように、リプレイ放送区 間でカットの切り替わり数が「多 、」場合は、 V、ろ 、ろな角度のシーンを利用して強く 強調していると考えられるため、重要度が高い。
[0037] 図 10は、このダイジェスト作成装置 10の処理手順を示している。入力部 20は、リプ レイ情報を取得する (ステップ 1)。リプレイ重要度算出部 30は、取得したリプレイ情報 につ 、て、リプレイ参照区間が一部でも重なって 、るリプレイの個数から「(a)リプレイ 回数」の観点に基づく重要度(回数重要度)を算出し (ステップ 2—1)、また、リプレイ 放送区間開始時刻とリプレイ参照区間開始時刻との差から「(b)リプレイ放送区間とリ プレイ参照区間との間隔」の観点に基づく重要度 (間隔重要度)を算出し (ステップ 2 — 2)、また、リプレイ放送区間終了時刻とリプレイ放送区間開始時刻との差から「(c) リプレイの長さ」の観点に基づく重要度 (長さ重要度)を算出し (ステップ 2— 3)、また 、リプレイ放送区間終了時刻とリプレイ放送区間開始時刻との差と、リプレイ参照区間 終了時刻とリプレイ参照区間開始時刻との差の比率から「(d)リプレイの再生スピード 」の観点に基づく重要度 (再生スピード重要度)を算出し (ステップ 2— 4)、また、リブ レイ情報のリプレイ参照区間開始時刻の数力も「 (e)リプレイ放送区間のカット切り替 わり数」の観点に基づく重要度 (切り替え数重要度)を算出する (ステップ 2— 5)。
[0038] 次いで、回数重要度、間隔重要度、長さ重要度、再生スピード重要度、及び、切り 替え数重要度から、例えば、各重要度に重み係数 αを乗じて、それらの総和を取る ことによりリプレイ重要度を算出し、各リプレイ情報に付加する (ステップ 3)。こうした処 理を全てのリプレイ情報にリプレイ重要度が付加されるまで繰り返す (ステップ 4)。
[0039] 例えば、図 5のリプレイ 1の場合、図 11に示すように、回数重要度が 1(回)、間隔重 要度が 120(秒)、長さ重要度が 20(秒)、再生スピード重要度が 1(倍速)、また、切り替 え数重要度が 1(回)であるから、リプレイ重要度 R1は、
Rl=al- (回数重要度) + α2· (間隔重要度) + α3· (長さ重要度)
+ α4· (再生スピード重要度) + α5· (切り替え数重要度)
= α 1-1+ α2·120+ α3·20+ α4·1+ α5·1
ここで、 α 1= α2= α3= α4= α5 = 1とすると、 Rl = 143
となる。
同様の手順で、リプレイ 2の重要度 R2、及び、リプレイ 3の重要度 R3は、次のように なる。
R2= 1 + 105 + 15 + 1 + 1 = 123
R3 = 1 + 50 + 25 + 1 + 2 = 79
リプレイ重要度算出部 30は、こうして求める重要度を各リプレイ情報に付加して重 要度付きリプレイ情報を作成し(図)、これをダイジヱスト作成部 40に出力する。
[0040] ダイジェスト作成部 40は、リプレイの組み合わせのうち、ダイジェスト条件情報で指 定された尺に一番近ぐかつ、重要度の和が最大になる組み合わせを選択して、ダイ ジェスト情報を作成する (ステップ 5)。
[0041] このときのダイジェスト作成部 40での詳細手順を図 12に示している。ダイジェスト作 成部 40は、重要度付きリブレイ情報とダイジェスト条件情報とを受信し (ステップ 61) 、全てのリプレイをダイジェスト候補 (ダイジェストを作成する上で、組み合わせを考え る要素)として以下の処理を行う (ステップ 62)。
[0042] まず、ダイジェスト候補のリプレイの総時間長力 指定されたダイジェストの尺を超え る力否か判定する (ステップ 63)。超えるときは、指定されたダイジェストの尺に収まる ダイジェスト候補の組み合わせをすベて挙げ (ステップ 65)、挙げた組み合わせごとに 、リプレイ重要度の総和を算出し (ステップ 66)、リプレイ重要度の総和が最大となるリ プレイの組み合わせを選択し (ステップ 67)、選択した組み合わせのリプレイを時系列 に並べて、ダイジェスト情報を作成する (ステップ 68)。また、ステップ 63において、ダ イジェスト候補のリプレイの総時間長力 指定されたダイジェストの尺を超えな 、とき は、ダイジェスト候補に含まれる全てのリプレイを選択して (ステップ 64)、ステップ 68 の処理を行う。
[0043] 図 5の場合、ダイジェスト条件情報によって指定されたダイジェストの尺が 40秒だと すると、 40秒に収まるリプレイの組み合わせは、「リプレイ 1のみ」「リプレイ 2のみ」「リ プレイ 3のみ」「リプレイ 1 +リプレイ 2」及び「リプレイ 2 +リプレイ 3」の 5通りであり、各 々のリプレイ重要度の総和は次のようになる。 「リプレイ 1のみ」: 143
「リプレイ 2のみ」: 123
「リプレイ 3のみ」: 79
「リプレイ 1 +リプレイ 2」:266
「リプレイ 2 +リプレイ 3」:211
その結果、リプレイ重要度の総和が最も大きい「リプレイ 1 +リプレイ 2」が選択され、 それらのリプレイを時系列に並べて、ダイジェスト情報が作成される。
[0044] ダイジェスト作成装置 10の出力部 50は、ダイジェスト作成部 40が作成したダイジェ スト情報を出力する (ステップ 6)。このダイジェスト情報(図 9)に従って、蓄積された本 放送映像の中から、ダイジェスト情報で指定されたリプレイ放送区間開始時刻からリ プレイ放送区間終了時刻までのリプレイ映像のみを順次表示することにより、指定さ れた尺を超えな 、ダイジェストが表示できる。
[0045] このように、このダイジェスト作成方法では、容易に入手可能な、放送機器の履歴( Q打ちのタイミング、スィッチの切り替え情報等)の情報のみを利用して、指定された 長さのダイジェストを作成することが可能になる。
[0046] なお、リプレイ情報は、本放送映像に多重化して提供しても良ぐあるいは、試合終 了後に全てのリプレイ情報を纏めて提供したり、一定期間に含まれるリプレイ映像のリ プレイ情報を纏めて、定期的に提供したりしてもよい。また、放送の種類 (スポーツ番 組、ニュース番組等)や視聴者の嗜好に応じて、重要度算出の重み係数を変更でき るようにしてちょい。
[0047] また、本実施形態 1では、同一放送局が同一試合中に放送するリプレイ、つまり、中 継番組内で用いられるリプレイを使って重要度を算出する場合について説明したが、 それだけに限る必要はな ヽ。他チャンネル (マルチチャンネルを含む)や他の試合で 一度使ったリプレイが参照される場合もあり、例えば、ニュース番組やスポーツ番組 等で参照される。こうした場合、当該リブレイに対しても重要度を付加しても良い。こ れにより、中継番組以外の番組で使用されたリプレイをダイジェストに使用することが できる。
[0048] また、本実施形態 1のダイジェスト作成装置は、受信局側の受信端末に設置して、 視聴者がダイジェスト視聴を行うためのダイジェスト情報を作成して使用しても良い。 また、放送局側のセンター装置に設置して、試合内容を要約したダイジェスト番組作 成のためのダイジェスト情報を出力しても良い。あるいは、放送を通じて受信端末に 提供するためのダイジェスト情報を出力するようにしても良 ヽ。リプレイ情報及びダイ ジェスト条件情報の取得には、「放送」「配信」「ネットワーク経由」等を用いることがで きる。
[0049] また、ダイジェスト作成装置の一部の機能ブロックをセンター装置に含め、他の機能 ブロックを受信端末に含めることも可能である。例えば、リプレイ重要度算出部 30及 びダイジェスト作成部 40をセンター装置に設置する場合、また、リプレイ重要度算出 部 30をセンター装置に設置し、ダイジェスト作成部 40を受信端末に設置する場合、 あるいは、リプレイ重要度算出部 30及びダイジェスト作成部 40を受信端末に設置す る場合等があり、何れの場合もセンター装置側あるいは受信端末側で設定するダイ ジェスト条件情報に収まるダイジェスト情報を作成することができ、また、両装置間で ダイジェスト作成処理の負荷を分担することや、ユーザの嗜好をカ卩味したダイジェスト 情報を作成すること等ができる。なお、センター装置において、ダイジェスト情報を作 成した場合や、重要度付きリブレイ情報等を作成した場合には、当該各情報をデー タベース(図示しない)で管理しても良ぐ受信端末がセンター装置との間で双方向 通信を行った上で、データベースで管理している当該各情報を取得しても良い。これ により、両装置間においてダイジェスト作成処理を効率良く行うことができる。
[0050] (第 2の実施形態)
本発明の第 2の実施形態におけるダイジェスト作成方法では、リプレイ参照区間が 重ならないリプレイ映像をダイジェストに取りこむようにして、ダイジェストの質を高めて いる。
[0051] 図 14に示すように、本放送映像にリプレイ 1〜4が挿入されている場合、重要度を 算出すると、 「リプレイ 1 +リプレイ 2 +リプレイ 3」の方が「リプレイ 1 +リプレイ 3 +リプレ ィ 4」よりも高くなる。しかし、「リプレイ 1 +リプレイ 2 +リプレイ 3」は、リプレイ参照区間 が重複する「リプレイ 1」と「リプレイ 2」とを含み、一方、「リプレイ 1 +リプレイ 3 +リプレ ィ 4」は、リプレイ参照区間が重複するリプレイ (即ち、同じ内容の映像)を含んでいな いため、「リプレイ 1 +リプレイ 3 +リプレイ 4」の方が多くの情報量を有している。従つ て、この場合、「リプレイ 1 +リプレイ 3 +リプレイ 4」を選択することにより、ダイジェスト の質が向上する。
[0052] この方法を行うダイジェスト作成装置の構成は、第 1の実施形態(図 1、図 6)と変わ りがない。リプレイ重要度算出部 30は、第 1の実施形態と同様の処理により各リプレイ の重要度を算出し、重要度付きリプレイ情報をダイジェスト作成部 40に出力する。
[0053] ダイジェスト作成部 40は、図 15に示す手順でダイジェスト情報を作成する。ダイジ ェスト作成部 40は、重要度付きダイジェスト情報とダイジェスト条件情報とを受信し (ス テツプ 61)、全てのリプレイをダイジェスト候補と見て (ステップ 62)、ダイジェスト候補の リプレイの総時間長力 指定されたダイジェストの尺を超える力否か判定する (ステツ プ 63)。超えるときは、リプレイ参照区間が重複するリプレイ情報の有無を調べ (ステツ プ 631)、重複するリプレイが存在する場合に、リプレイ重要度が最小のものをダイジ スト候補から削除する (ステップ 632)。
[0054] その後の処理は第 1の実施形態と同じであり、指定されたダイジェストの尺に収まる ダイジェスト候補の組み合わせをすベて挙げ (ステップ 65)、挙げた組み合わせごとに 、リプレイ重要度の総和を算出し (ステップ 66)、リプレイ重要度の総和が最大となるリ プレイの組み合わせを選択し (ステップ 67)、選択した組み合わせのリプレイを時系列 に並べて、ダイジェスト情報を作成する (ステップ 68)。また、ステップ 63において、全 てのリプレイの総時間長が、指定されたダイジェストの尺を超えないときは、全てのリ プレイを選択して (ステップ 64)、ステップ 68の処理を行う。
[0055] 図 16は、図 14の場合に、ダイジェストの尺が 110秒と指定されているときの処理手 順を図解している。
(a)全てのリプレイをダイジェスト候補としたときのリプレイの総時間長は 160秒であり 、 110秒を超えている。
(b)そこで、リプレイ参照区間が重複しているリプレイを検出する。リプレイ 1とリプレイ 2とが重複して 、るので、リプレイ重要度が最小のリプレイ 2をダイジェスト候補から削 除する。
(c)その結果、ダイジェスト候補は、リプレイ 1、リプレイ 3、リプレイ 4に絞られる力 そ の総時間長は 120秒であり、指定された尺(110秒)を超えて 、る。
(d)そのため、(参照区間が重複しているリプレイはもう存在しないので)リプレイ 1、リ プレイ 3、リプレイ 4を対象として、 110秒を超えない組み合わせを列挙し、リプレイ重 要度の総和を算出する。
(e)この組み合わせの内、重要度の総和が最も高いのは、リプレイ 1 +リプレイ 3の組 み合わせである。
(f)リプレイ 1 +リプレイ 3の組み合わせを選択し、リプレイ 1、リプレイ 3を時系列に並 ベて最終的なダイジェストとする。
[0056] このように、本実施の形態 2では、リプレイ参照区間が重なるリプレイの中カもダイジ ェスト候補を 1つだけ選択することにより、ダイジェストの情報量を高めることができる。
[0057] (第 3の実施形態)
スポーツ中継では、それまでのハイライト場面が度々リプレイされる。本発明の第 3 の実施形態におけるダイジェスト作成方法では、このハイライトに高 、評価を与えて ダイジェストの質の向上を図る。ハイライトは、試合を通じて重要だと思われるリプレイ を集めたものであり、ハイライトという状態をダイジェスト作成に反映することにより、ダ イジェストの質が高まる。
[0058] 図 17は、ハイライトと通常のリプレイとの違いを示している。ハイライトは、リプレイ放 送区間が連続し、リプレイ参照区間が重複していない複数のリブレイカも成る。複数 のリプレイの放送区間が連続していても、それらのリプレイ参照区間が重複している 場合は、通常のリプレイであり、ハイライトではない。
[0059] このダイジェスト作成方法を行う装置の構成は、第 1の実施形態(図 1、図 6)と同じ である。ただ、リプレイ重要度算出部 30が、リプレイ情報の重要度を計る観点の 1つと して、ハイライトに着目し、ハイライトに対して重要度 (ハイライト重要度)を付加してい る点が違っている。
[0060] 図 18は、このリプレイ重要度算出部 30の処理を含めたダイジェスト作成装置 10の 処理手順を示している。リプレイ重要度算出部 30は、入力部 20から送られたリプレイ 情報について、回数重要度 (ステップ 2—1)、間隔重要度 (ステップ 2— 2)、長さ重要 度 (ステップ 2— 3)、再生スピード重要度 (ステップ 2—4)及び切り替え数重要度 (ス テツプ 2— 5)を算出すると共に、リプレイ放送区間が連続していて、リプレイ参照区間 が重複していない場合、それらのリプレイ群をハイライトと判定し、個々のリプレイに対 してハイライト重要度を設定する (ステップ 2— 6)。
[0061] 次いで、回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替え数 重要度、及び、ハイライト重要度からリプレイ重要度を算出し、リプレイ情報に付加す る (ステップ 3)。こうした処理を全てのリプレイ情報にリプレイ重要度が付加されるまで 繰り返す (ステップ 4)。リプレイ重要度算出部 30から重要度付きリプレイ情報を受信 したダイジェスト作成部 40の動作は、第 1の実施形態と同じである。
[0062] 図 19に示すリプレイ 1〜5の場合、各リプレイについて、回数、間隔、長さ、再生スピ ード、切り替え数にカ卩えて、それぞれのリプレイがハイライトであるかどうかが判定され る。リプレイ 1及びリプレイ 2は、リプレイ放送区間は連続している力 リプレイ参照区 間が重複しているため、ハイライトではない。一方、リプレイ 3、リプレイ 4及びリプレイ 5 は、リプレイ放送区間が連続していて、リプレイ参照区間が重複していないため、ハイ ライトと判定される。そのため、リプレイ 3、リプレイ 4、リプレイ 5のそれぞれのリプレイに は、ハイライト重要度が設定される。リプレイ 1とリプレイ 5との重要度を比較すると、次 のようになる。
リプレイ 1の重要度 =回数重要度 +間隔重要度 +長さ重要度 +再生スピード重要 度
+切り替え数重要度
= 1 + 60+40+ 1 + 1 = 103
リプレイ 5の重要度 =回数重要度 +間隔重要度 +長さ重要度 +再生スピード重要 度
+切り替え数重要度 +ハイライト重要度
= 1 + 60 + 20+ 1 + 1 + 30= 113
[0063] このように、本実施の形態 3では、ハイライト放送区間のリプレイ映像のリプレイ重要 度を高くすることにより、番組の制作者が重要と判断したハイライト映像をダイジェスト に取り込むことが可能になる。
[0064] (第 4の実施形態) 本発明の第 4の実施形態では、リプレイ映像以外の映像を用いてダイジェストを作 成する方法について説明する。この方法では、リプレイ情報と共に、ライブ映像のカツ ト切り替わり点の情報を取得して、図 20に示すように、リプレイ映像をダイジェストに用 いる代わりに、リプレイ参照区間を含むライブ映像のカット (即ち、そのリブレイ映像が 実際に撮影された時間帯のライブ映像)をダイジェストに使用する。
[0065] この方法を行うダイジェスト作成装置の構成は、第 1の実施形態(図 1、図 6)と同じ である。ただ、入力部 20に、リプレイ情報と共に、放送機器の操作履歴より得られるラ イブ映像のカット切り替わり点の情報が入力し、ダイジェスト作成部 40が、重要度付き リプレイ情報に含まれるリプレイ参照区間の情報とカット切り替わり点の情報とから、リ プレイ参照区間を含むライブ映像のカット (複数に跨る場合も有り得る)を特定し、そ のカットを重要度が付されたダイジェスト候補と見做して、ダイジェスト情報を作成する 点が違っている。
[0066] また、入力部 20に、リプレイ情報と共に、シーン情報 (意味のある映像の区切りを表 す情報)が与えられる場合には、リプレイ映像をダイジェストに用いる代わりに、リプレ ィ参照区間を含むライブ映像のシーンをダイジェストに使用することもできる。
[0067] 例えば、図 21に示すように、野球中継において、イニングの区切りを表すシーン情 報、打者の区切りを表すシーン情報、及び、投球の区切りを表すシーン情報が与え られる場合には、リプレイ参照区間を含むイニングのシーンをダイジェスト候補にした り、リプレイ参照区間を含む打者のシーンをダイジェスト候補にしたり、あるいは、リブ レイ参照区間を含む投球のシーンをダイジェスト候補にしたりすることができる。また、 リプレイの重要度が高いときは、イニングのシーンをダイジェスト候補に設定し、リプレ ィの重要度が低いときは、投球のシーンをダイジェスト候補に設定する、と言うように、 リプレイ重要度に応じて、区切るシーンの大きさを変えることもできる。
[0068] 図 22は、この場合のダイジェスト作成部 40における処理手順を示して ヽる。ダイジ ェスト作成部 40は、重要度付きリブレイ情報、ダイジェスト条件情報、及び、シーン情 報を受信すると (ステップ 611)、ダイジェスト候補を空にして以下の処理を行う (ステツ プ 612)。リプレイの重要度の値により、シーンを区切る階層を決定し (ステップ 614)、 シーン情報を利用して、リプレイのリプレイ参照区間を包含しているシーンの区間を、 指定された階層力も取得し (ステップ 615)、ダイジェスト候補に、取得したシーンの区 間を追加する (ステップ 616)。
[0069] この処理を全てのリプレイに対して繰り返し、全てのリプレイに対してシーン情報へ の対応付けが終了すると (ステップ 613)、ダイジェスト候補のシーン区間の総時間長 力 指定されたダイジェストの尺を超えるかを判断し (ステップ 631)、超える場合は、 指定されたダイジェストの尺に収まるダイジェスト候補の組み合わせをすベて挙げ (ス テツプ 65)、挙げた組み合わせごとに、リプレイ重要度の総和を算出し (ステップ 66)、 リプレイ重要度の総和が最大となるダイジェスト候補の組み合わせを選択し (ステップ 67)、選択した組み合わせのシーン区間を時系列に並べて、ダイジェスト情報を作成 する (ステップ 681)。また、ステップ 631において、全てのシーン区間の総時間長が、 指定されたダイジェストの尺を超えな ヽときは、全てのシーン区間を選択して (ステツ プ 641)、ステップ 681の処理を行う。
[0070] 図 23及び図 24は、この場合の処理を図解している。シーンを区切る単位 (階層)を、 重要度が高 、リプレイ 1は「イニングでの区切り」、重要度が低!、リプレイ 2は「投球で の区切り」、重要度が中位のリプレイ 3は「打者での区切り」と決定する。シーン情報か ら、リプレイ 1の参照区間を包含する「イニングでの区切り」、リプレイ 2の参照区間を 包含する「投球での区切り」、及び、リプレイ 3の参照区間を包含する「打者での区切 り」を取得し、これらをダイジェスト候補とする。図 24 (al)は、リプレイ 1に対応するダ イジエスト候補のシーン、図 24 (a2)は、リプレイ 3に対応するダイジェスト候補のシー ン、図 24 (a3)は、リプレイ 2に対応するダイジェスト候補のシーンを示している。
[0071] ダイジェストの尺が 160秒と指定されている場合は、この 3つのダイジェスト候補を使 つて、 160秒に収まるダイジェスト候補の組み合わせを全て求め、その中で重要度の 総和が最大となる組み合わせを選択する。この場合、図 24 (b)に示す組み合わせが 選択される。実際に、このダイジェスト情報を利用して視聴されるダイジェストは、図 2 4 (c)のように、「2回表」のシーン区間に対応する本放送映像部分 (Livelの一部分) と、「打者 1」に対応する本放送映像 (Live3の一部分)のようになる。
[0072] このように、本実施の形態 4では、リプレイ参照区間を包含する本放送映像のカット やシーンをダイジェストに用いることにより、リプレイ映像に映されたプレイがどのよう な状況で発生したかが分力り易くなり、ダイジェストの質を高めることができる。
[0073] なお、シーンの時間の区切りは、以上のものを用いる力 ダイジェストとして使用す る映像は、本放送映像以外のもの(本放送以外の別カメラの映像等)を用いても良い 。また、ここでは、 1リプレイに対して、 1つのシーンの区間を対応させ、シーンの区間 だけを利用してダイジェストを作成している力 必ずしもこの限りではなぐリプレイ、シ ーンの区間の両方を組み合わせてダイジェストを作成しても良!、。
[0074] (第 5の実施形態)
上記実施形態の説明からも明らかなように、各リプレイ情報の重要度の算出は、大 きく分けると、二段階に分けられ、リプレイの回数、間隔、時間の長さ、放送スピード、 あるいはカット切り替わり数などの重要度の算出を行った後、当該リブレイ情報の重 要度の算出を行っている。本発明の第 5の実施形態におけるダイジェスト作成方法で は、実施形態 1で示したリプレイ重要度算出部 30の構成を第 1リプレイ重要度算出部 31と第 2リプレイ重要度算出部 32に分け、放送局側に備えるセンター装置 100と受 信局側に備える受信端末 200に分けてダイジェストを作成する方法について説明す る。
[0075] 図 25に示すように、センター装置 100には編集機器 70およびスィッチヤー 80 (図 1 )から第 1リプレイ情報を入力する入力部 20と、第 1リプレイ情報を取得し、当該情報 から回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替え数重要 度等を算出し、各重要度と第 1リプレイ情報を対応付けた第 2リプレイ情報を作成する 第 1リプレイ重要度算出部 31とを備えて!/、る。
[0076] 図 26は、入力部 20に入力する第 1リプレイ情報のデータ構造を示している。第 1リ プレイ情報には、各リプレイを識別するためのリブレイ番号の他に、リプレイ放送区間 開始時刻、リプレイ放送区間終了時刻、リプレイ参照区間開始時刻、リプレイ参照区 間終了時刻、及び、撮影カメラ番号の情報が含まれている。なお、本実施形態の第 1 リプレイ情報は、第 1の実施形態で示したリプレイ情報のデータ構造と同じである。
[0077] また、図 27は、第 1リプレイ重要度算出部 31で作成される第 2リプレイ情報のデータ 構造を示している。第 2リプレイ情報は、第 1リプレイ情報に示されている各々の情報 から算出した、回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替 え数重要度等を第 1リプレイ情報と対応付けている。例えば、図 5のリプレイ 1の場合 、図 11に示すように、回数重要度が 1(回)、間隔重要度が 120 (秒)、長さ重要度が 2 0(秒)、再生スピード重要度が 1(倍速)、また、切り替え数重要度が 1(回)であり、第 2リ プレイ情報は、これらの各重要度を第 1リプレイ情報と対応付けている。
[0078] 一方、受信端末 200にはセンター装置 100から送出される第 2リプレイ情報を取得 し、重み付けルール設定データベース 60で管理されている重み係数に基づいて、第 2リプレイ情報に示される各重要度を調整して当該リブレイ情報の重要度を算出し、 重要度付きリプレイ情報を出力する第 2リプレイ重要度算出部 32と、当該重要度付き リプレイ情報及びユーザの操作により入力されるダイジェスト条件情報 (ダイジェスト の尺)を取得し、ダイジェストの尺に合わせて重要度の高いリブレイ情報を選択し、ダ イジェスト情報を作成するダイジェスト作成部 40と、作成されたダイジェスト情報を出 力する出力部 50とを備えている。なお、センター装置 100の第 1リプレイ重要度算出 部 31、受信端末 200の第 2リプレイ重要度算出部 32及びダイジェスト作成部 40は、 それぞれの装置 100ある 、は端末 200に内蔵されたコンピュータが動作を規定する プログラムを実行することにより実現される。
[0079] 図 29は、センター装置 100で第 1リプレイ情報を取得してから、受信端末 200でダ イジエスト情報を出力するまでの処理手順を示している。センター装置 100における 入力部 20は、第 1リプレイ情報を取得する (ステップ 1)。第 1リプレイ重要度算出部 3 1は、第 1リプレイ情報について、リプレイ参照区間が一部でも重なっているリブレイの 個数から「 (a)リプレイ回数」の観点に基づく重要度(回数重要度)を算出し (ステップ 2—1)、また、リプレイ放送区間開始時刻とリプレイ参照区間開始時刻との差から「(b )リプレイ放送区間とリプレイ参照区間との間隔」の観点に基づく重要度(間隔重要度 )を算出し (ステップ 2— 2)、また、リプレイ放送区間終了時刻とリプレイ放送区間開始 時刻との差から「 (c)リプレイの長さ」の観点に基づく重要度 (長さ重要度)を算出し( ステップ 2— 3)、また、リプレイ放送区間終了時刻とリプレイ放送区間開始時刻との差 と、リプレイ参照区間終了時刻とリプレイ参照区間開始時刻との差の比率から「(d)リ プレイの再生スピード」の観点に基づく重要度 (再生スピード重要度)を算出し (ステツ プ 2— 4)、また、リプレイ情報のリプレイ参照区間開始時刻の数から「(e)リプレイ放送 区間のカット切り替わり数」の観点に基づく重要度 (切り替え数重要度)を算出する (ス テツプ 2— 5)。
[0080] 第 1リプレイ重要度算出部 31は、こうした処理を全てのリプレイ情報に対して各重要 度が算出されるまで繰り返し行い (ステップ 3)、当該処理が終了した場合、受信端末 200の第 2リプレイ重要度算出部 30へ第 2リプレイ情報を送出する (ステップ 4)。
[0081] 第 2リプレイ重要度算出部 30は、センター装置 100の第 1リプレイ重要度算出部 31 力も送出される第 2リプレイ情報を取得する (ステップ 5)。これに従い、第 2リプレイ重 要度算出部 30は、重み付けルール設定データベース 70からジャンル毎に管理され て ヽる重み付けルール設定テーブル(図 30)を取得し、当該テーブルに示されて!/ヽ る重み係数に基づいて、第 2リプレイ情報に示される各重要度を調整する。
[0082] 例えば、入力された第 1リプレイ情報が野球を示している場合、図 30に示すように、 回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替え数重要度の 重み係数はそれぞれ、 al = l. 5, «2=1. 5, «3 = 1, «4 = 0. 5, α 5 =1である ので、
図 5のリプレイ 1の重要度 R1は、
Rl=al- (回数重要度) + α2· (間隔重要度) + α3· (長さ重要度)
+ α4· (再生スピード重要度) + α5· (切り替え数重要度)
=1. 5-1 + 1. 5-120+1-20 + 0. 5-1 + 1-1
= 203
となる。
同様の手順で、図 5のリプレイ 2の重要度 R2、及び、リプレイ 3の重要度 R3は、次の ようになる。
R2=l. 5-1 + 1. 5-105 + 1-15 + 0. 5-1 + 1-1
= 175. 5
R3 = l. 5-1 + 1. 5-50+1-25 + 0. 5-1 + 1-2
= 104
リプレイ重要度算出部 30は、こうして求める重要度を第 2リプレイ情報に付加して重 要度付きリプレイ情報を作成し(図 28)、これをダイジェスト作成部 40に出力する (ス テツプ 6)。
[0083] なお、重み付けルール設定テーブルに示される重み係数の値は、放送局側または 受信局側の人物の何れかが設定できるものとする。放送局側の人物が設定した場合 には、利用者に対して同じ傾向のダイジェストを提供することができる。一方、受信局 側の人物が設定した場合には、利用者の嗜好を加味したダイジェストを作成すること ができる。また、放送局側あるいは受信局側にとって好ましいダイジェストが作成でき るよう、重み係数の値が更新されるようにしても良い。
[0084] ダイジェスト作成部 40は、取得した重要度付きリブレイ情報の組み合わせのうち、ュ 一ザの操作により入力されたダイジェスト条件情報で指定された尺に一番近ぐ且つ 、重要度の和が最大になる組み合わせを選択して、ダイジェスト情報を作成する (ス テツプ 7)。なお、このときのダイジェスト作成部 40での詳細手順は図 12や図 15で示 した手順と同じである。
[0085] 図 5の場合、ダイジェスト条件情報によって指定されたダイジェストの尺が 40秒だと すると、 40秒に収まるリプレイの組み合わせは、「リプレイ 1のみ」「リプレイ 2のみ」「リ プレイ 3のみ」「リプレイ 1 +リプレイ 2」及び「リプレイ 2 +リプレイ 3」の 5通りであり、各 々のリプレイ重要度の総和は次のようになる。
「リプレイ 1のみ」: 203
「リプレイ 2のみ」: 175. 5
「リプレイ 3のみ」: 104
「リプレイ 1 +リプレイ 2」:378. 5
「ジプレイ 2 +ジプレイ 3」:279. 5
その結果、リプレイ重要度の総和が最も大きい「リプレイ 1 +リプレイ 2」が選択され、 それらのリプレイを時系列に並べて、ダイジェスト情報が作成される。
[0086] 受信端末 200の出力部 50は、ダイジェスト作成部 40が作成したダイジェスト情報を 取得し、出力する (ステップ 8)。このダイジェスト情報(図 9)に従って、受信端末 200に 蓄積された本放送映像の中から、ダイジェスト情報で指定されたリプレイ放送区間開 始時刻からリプレイ放送区間終了時刻までのリプレイ映像のみを順次表示すること〖こ より、指定された尺を超えないダイジェストが表示できる。 [0087] このように、このダイジェスト作成方法では、実施形態 1乃至 4で示したリプレイ重要 度算出部の構成を分離し、放送局側と受信局側に分けており、リプレイの回数、間隔 、時間の長さ、放送スピード、あるいはカット切り替わり数などの重要度の算出を放送 局で行い、一方、当該リブレイ情報に対する重要度の算出を受信局で行うので、各リ プレイ情報の重要度の算出を両装置間で分担して行うことができ、また、ユーザの嗜 好を加味したダイジェスト情報を作成すること等ができる。
[0088] なお、本実施形態では、受信端末 200が取得する第 2リプレイ情報は、片方向通信 により取得している力 双方向通信により取得しても良い。つまり、センター装置 100 において、第 1リプレイ重要度算出部 31で算出した第 2リプレイ情報をデータベース( 図示しない)で管理し、受信端末 200からセンター装置 100に対して第 2リプレイ情報 を要求した上で取得しても良ぐこれにより、両装置間においてダイジェスト作成処理 を効率良く行うことができる。
[0089] また、本実施形態では、受信端末 200のダイジェスト作成部 40で取得するダイジェ スト条件情報は、ユーザの操作により入力している力 センター装置 100側で設定し たダイジェスト条件情報を取得しても良 、。何れの場合もセンター装置側ある ヽは受 信端末側で設定するダイジェスト条件情報に収まるダイジェスト情報を作成することが できる。
[0090] また、本実施形態では「第 1リプレイ重要度算出部 31」、「第 2リプレイ重要度算出部 32」を「センター装置 100」、「受信端末 200」にそれぞれ分離して説明したが、これら が同一装置内で動作できることは言うまでもなぐ上記実施の形態 1で説明したとおり である。
[0091] その他、リプレイ重要度算出の方法は、実施形態に示した方法以外であってもよい 。例えば、「リプレイ放送区間とリプレイ参照区間との間隔」から算出する間隔重要度 について、その差分のみで算出される重要度は、イベントが発生する時間帯に影響 してしまう。つまり、図 31に示すように、同じようなイベントであっても、試合の後半に 発生したイベントのリプレイは、前半で発生したイベントのリプレイよりも間隔が短くなり 、間隔の重要度は正確に反映されない。そこで試合放送の残り時間を考慮して、以 下の計算式により、間隔重要度を算出しても良い。また、上記実施形態で示した間隔 についての重要度の算出は、差分に定数(1)を乗じたものであるが、対数を乗じたも のでも良いものとする。
[数 1]
リプレイ放送区間の所定位置ーリプレイ参照区間の所定位置
"~ ^Slt組終了時刻—リプレイ参照区間の所定位置
[0092] また、「リプレイ放送区間とリプレイ参照区間との間隔」から算出する間隔重要度に ついて、リプレイ参照区間が重複し、リプレイ放送区間が連続して用いられる場合、 すなわち、同じイベントのリプレイが連続して放送される場合、図 32に示すように、後 で使用されるリプレイ情報の間隔重要度は、前に使用されるリプレイの長さの分だけ 間隔が開 ヽてしま 、、同じ値の間隔重要度が付けなければならないにもかかわらず、 大きく算出されてしまう。このようなリプレイは、野球においては奪三振シーンを様々 な角度からリプレイするような場合など、数多く放送されており、後で使用されるリプレ ィの方が重要であるということはない。従って、このような場合のリプレイ間隔重要度 の算出に差が生じな 、ように、同じイベントのリプレイ参照区間が連続して用いられる 場合は、最初のリプレイ放送開始時刻を連続して用いられるイベントのリプレイ放送 開始時刻とみなして、リプレイ間隔重要度の算出を行うよう設定する。
[0093] また、イベントの直後に用いられるリプレイは、主に当該イベントを強調するために 用いられるが、リプレイ放送区間とリプレイ参照区間との間隔が広いほど重要度を大 きく算出する手段を設定していると、図 33に示すように、イベントの直後に用いられる リプレイは間隔重要度の値が小さく算出されてしまう。イベントの直後に用いられるリ プレイには、「ファインプレー」や「奪三振シーン」等のイベントがあり、これらは、試合 に直接的に影響するイベントではないが、ダイジェストとして利用できるものである。そ こで、リプレイ放送区間とリプレイ参照区間の所定位置の間隔について閾値を設定し 、当該閾値を用いて各リプレイ映像 Ζ音声をグループ分けしても良い。すなわち、設 定された閾値を用いてグループ分けすることにより、特徴が異なるリプレイ映像 Ζ音 声を区分けすることができる。例えば、リプレイ放送区間とリプレイ参照区間の所定位 置の間隔が閾値よりも小さい場合は、イベント直後のファインプレーや奪三振シーン などのリプレイが含まれるグループを作成し、一方、当該間隔が閾値よりも大きい場 合は、イベント発生力もある時間以上経って使用されるリプレイ、つまり、試合の流れ を示すリブレイが含まれるグループを作成することができる。そして、例えば、利用者 力 Sファインプレーや奪三振シーンに重きをお 、たダイジェストを作成した 、場合には
、該当するグループ内のリプレイ映像 Z音声のリプレイ間隔重要度に所定の係数を 乗じて間隔重要度を高く設定する。一方、試合全体を加味したダイジェストを作成し たい場合には、該当するグループ内のリプレイ映像 Z音声のリプレイ間隔重要度に 所定の係数を乗じて間隔重要度を高く設定する。これにより、ダイジェスト作成装置を 利用する視聴者やダイジェスト作成者等は、所望のダイジェスト内容に応じたダイジ ェスト情報を取得することができる。
[0094] また、中継番組終了後に放送されるリプレイ、例えば-ユース番組やスポーツ番組 における放送は、番組編成に大きく関与しており、リプレイ放送区間とリプレイ参照区 間との間隔に重要度が比例していない。そこで、図 34に示すように、中継番組終了 後のリブレイ情報については、リプレイ間隔重要度を区別せず、同じ値の重要度に設 定しておく。ただし、中継番組終了後に放送されるリプレイは、全て重要なものである と考えられるので、中継番組終了後のリプレイ情報については、重要度の数値を高く 設定しておいたほうが良い。つまり、中 «番^ a終了時点の前後で、間隔重要度の算 出方法を個別に設定しておく必要がある。
[0095] また、上記実施形態では、リプレイ参照区間の開始時刻とリプレイ放送区間の開始 時刻との「間隔」からリブレイ映像の重要度を差別ィ匕する場合について説明したが、 その他の「間隔」に基づいて重要度の差別ィ匕を図ることも可能である。例えば、リプレ ィ参照区間とリプレイ放送区間の中間となる時刻の「間隔」からリブレイ映像の重要度 を差別化しても良い。
[0096] なお、上記実施形態では、撮影カメラ台数が複数台の場合について説明したが、 図 13 (a)に示すように、カメラは 1台でも構わない。この場合、リプレイ情報には、図 1 3 (b)に示すように、撮影カメラ番号の情報を含める必要がない。さらに、リプレイ情報 の重要度は、リプレイ映像を撮影したカメラの番号 (カメラの撮影方向)によって差別ィ匕 するようにしても良い。また、子画面表示されているリプレイ映像の画面の大きさや、 CG表示のエフェクトにより重要度を差別ィ匕してもよ 、。 [0097] 以上、本発明のダイジェスト作成方法及びプログラムは、このダイジェスト作成装置 において実施され、また、本発明のダイジェスト作成装置の動作を規定するプロダラ ムは、記録媒体に記録して、他の装置に移転または複写することができる。
産業上の利用可能性
[0098] 本発明のダイジェスト作成装置は、放送局の放送機器と組み合わせて、番組のダイ ジェストを作成するために用いることができ、あるいは、放送用のダイジェスト情報を 作成する装置として利用することができる。また、受信端末と組み合わせて、蓄積した 番組のダイジェスト視聴を可能にする装置として利用することもできる。
[0099] また、本発明のダイジェスト作成装置は、スポーツ番組以外にも-ユース番組やドラ マ番組等、リプレイを利用する他のジャンルに属する番組のダイジェストを作成する 場合にも適用できる。さらに、リプレイが音声の場合にも適用できる。

Claims

請求の範囲
[1] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報とを入力する 入力部と、
前記リブレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間 の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレ ィのカット切り替わり数、の少なくとも一つを用いてリプレイ映像 Z音声の重要度を算 出し、前記リブレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリ プレイ重要度算出部と、
前記重要度付きリブレイ情報と前記ダイジェスト条件情報とを受信し、前記リブレイ 映像 Z音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えな ヽ 範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択 するダイジェスト作成部とを備えることを特徴とするダイジェスト作成装置。
[2] 前記ダイジェスト作成部は、リプレイ参照区間が重複する複数のリプレイ映像 Z音 声の内、前記重要度が最大でないリブレイ映像 Z音声を前記ダイジェスト候補から除 外して、前記組み合わせを選択することを特徴とする請求項 1に記載のダイジェスト 作成装置。
[3] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、映像 Z音 声の区間を示す情報とを入力する入力部と、
前記リブレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間 の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレ ィのカット切り替わり数、の少なくとも一つを用いてリプレイ映像 Z音声の重要度を算 出し、前記リブレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリ プレイ重要度算出部と、
前記重要度付きリブレイ情報と前記ダイジェスト条件情報とを受信し、前記リブレイ 映像 z音声のリプレイ参照区間を包含する区間の前記映像 z音声を、当該リブレイ 映像 Z音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェスト の長さを超えな!/、範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の 組み合わせを選択するダイジェスト作成部と
を備えることを特徴とするダイジェスト作成装置。
[4] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、映像 Z音 声を放送する放送のカットの切り替わり点を示すカット特定情報とを入力する入力部 と、
前記リブレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間 の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレ ィのカット切り替わり数、の少なくとも一つを用いてリプレイ映像 Z音声の重要度を算 出し、前記リブレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリ プレイ重要度算出部と、
前記重要度付きリブレイ情報と前記ダイジェスト条件情報と前記カット特定情報とを 受信し、前記リプレイ映像 Z音声のリプレイ参照区間を包含する前記放送のカットを 、当該リプレイ映像 Z音声の重要度を有するダイジェスト候補に設定して、指定され たダイジェストの長さを超えな!/、範囲で、前記重要度の総和が最大になる前記ダイジ ェスト候補の組み合わせを選択するダイジェスト作成部とを備えることを特徴とするダ イジェスト作成装置。
[5] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、放送され る映像 Z音声のシーンを示すシーン情報とを入力する入力部と、
前記リブレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間 の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレ ィのカット切り替わり数、の少なくとも一つを用いてリプレイ映像 Z音声の重要度を算 出し、前記リブレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリ プレイ重要度算出部と、
前記重要度付きリブレイ情報と前記ダイジェスト条件情報と前記シーン情報とを受 信し、前記リプレイ映像 Z音声のリプレイ参照区間を包含するシーン情報で区切られ た映像 Z音声を、当該リプレイ映像 Z音声の重要度を有するダイジェスト候補に設定 して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大に なる前記ダイジェスト候補の組み合わせを選択するダイジェスト作成部とを備えること を特徴とするダイジェスト作成装置。
[6] 前記ダイジェスト作成部は、前記リプレイ映像 Z音声の重要度に応じて、前記リプレ ィ参照区間を包含する映像 z音声のシーンの大きさを変えることを特徴とする請求 項 3または 5に記載のダイジェスト作成装置。
[7] 前記リプレイ重要度算出部は、前記リプレイ放送区間が連続し、前記リプレイ参照 区間が重複していない複数のリプレイ映像 Z音声に対して重要度を加算することを 特徴とする請求項 1から 6のいずれか〖こ記載のダイジェスト作成装置。
[8] 前記リプレイ重要度算出部は、前記リプレイ情報を基に、リプレイの回数、リプレイ 放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの 放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つの重要度を算 出する、第 1リプレイ重要度算出部と、
前記第 1リプレイ重要度算出部で算出した各重要度を基に、前記リブレイ情報の重 要度を算出する第 2リプレイ重要度算出部とを備えることを特徴とする請求項 1から 6 の!、ずれかに記載のダイジェスト作成装置。
[9] 前記第 1リプレイ重要度算出部を送信局側に備え、前記第 2リプレイ重要度算出部 を受信局側に備えることを特徴とする請求項 8に記載のダイジェスト作成装置。
[10] 前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔から算出するリプレイ 間隔重要度は、差分に定数あるいは対数を乗じたものを用いることを特徴とする請求 項 1から 6のいずれか〖こ記載のダイジェスト作成装置。
[11] 前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔から算出するリプレイ 間隔重要度は、以下の式を用いて算出することを特徴とする請求項 1から 6のいずれ かに記載のダイジェスト作成装置。
[数 1] πプレイ (^[g軍 产一リプレイ放送区間の所定位置—リプレイ参照区間の所定位置
B 一 中継番組終了時刻一リプレイ参照区間の所定位置
[12] 前記リプレイ参照区間が重複し、前記リプレイ放送区間が連続して用いられる場合 、前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔力 算出するリプレイ 間隔重要度は、最初に用いられるリプレイ放送区間の所定位置を、連続して用いら れるイベントのリプレイ放送区間の所定位置とみなして算出することを特徴とする請求 項 1から 6のいずれか〖こ記載のダイジェスト作成装置。
[13] 前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔から算出するリプレイ 間隔重要度は、前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔につい て設定された閾値を用いて前記リプレイ映像 Z音声をグループ分けし、利用者により 選択されるダイジェスト内容に応じて、該当するグループ内の前記リプレイ映像 Z音 声の前記リプレイ間隔重要度に所定の係数を乗じることを特徴とする請求項 1から 6 の!、ずれかに記載のダイジェスト作成装置。
[14] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出し、前記リプレイ映像 Z音声をダイジェスト候補に設定して、指定され たダイジェストの長さを超えな!/、範囲で、前記重要度の総和が最大になる前記ダイジ ェスト候補の組み合わせを選択することを特徴とするダイジェスト作成方法。
[15] 前記リプレイ参照区間が重複している複数のリプレイ映像 Z音声がある場合に、前 記リプレイ映像 Z音声の内、前記重要度が最大でな 、リプレイ映像 Z音声を前記ダ イジヱスト候補力 除外して、前記組み合わせを選択することを特徴とする請求項 8に 記載のダイジェスト作成方法。
[16] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 z音声の実際の撮影 z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出し、前記リプレイ映像 Z音声のリプレイ参照区間を包含する区間の映 像 z音声を、当該リプレイ映像 Z音声の重要度を有するダイジェスト候補に設定して
、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる 前記ダイジェスト候補の組み合わせを選択することを特徴とするダイジェスト作成方法
[17] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出し、前記リプレイ映像 Z音声のリプレイ参照区間を包含する映像 Z音 声の放送のカットを、当該リプレイ映像 Z音声の重要度を有するダイジェスト候補に 設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最 大になる前記ダイジェスト候補の組み合わせを選択することを特徴とするダイジェスト 作成方法。
[18] リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出し、前記リプレイ映像 Z音声のリプレイ参照区間を包含するシーン情 報で区切られた映像 Z音声のシーンを、当該リプレイ映像 Z音声の重要度を有する ダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記 重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択する情報を出 力することを特徴とするダイジェスト作成方法。
[19] 前記リプレイ映像 Z音声の重要度に応じて、前記リプレイ参照区間を包含する映像 Z音声のシーンの大きさを変えることを特徴とする請求項 12に記載のダイジェスト作 成方法。
[20] 前記リプレイ放送区間が連続し、前記リプレイ参照区間が重複していない複数のリ プレイ映像 Z音声に対して重要度を加算することを特徴とする請求項 8から請求項 1 3の 、ずれかに記載のダイジェスト作成方法。
[21] コンピュータに、
リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出する手順と、
前記リプレイ映像 Z音声をダイジェスト候補に設定して、指定されたダイジェストの 長さを超えな 、範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組 み合わせを選択する手順と
を実行させるためのプログラム。
[22] コンピュータに、
リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出する手順と、
前記リプレイ映像 Z音声のリプレイ参照区間を包含する区間の映像 Z音声を、当 該リプレイ映像 Z音声の重要度を有するダイジェスト候補に設定して、指定されたダ イジェストの長さを超えな 、範囲で、前記重要度の総和が最大になる前記ダイジエス ト候補の組み合わせを選択する手順と
を実行させるためのプログラム。
[23] コンピュータに、
リプレイ映像 Z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出する手順と、
前記リプレイ映像 Z音声のリプレイ参照区間を包含する放送された映像 Z音声の カットを、当該リプレイ映像 Z音声の重要度を有するダイジェスト候補に設定して、指 定されたダイジェストの長さを超えな 、範囲で、前記重要度の総和が最大になる前記 ダイジェスト候補の組み合わせを選択する手順と
を実行させるためのプログラム。
[24] コンピュータに、
リプレイ映像 z音声の放送時間帯を特定するリプレイ放送区間情報と前記リブレイ 映像 Z音声の実際の撮影 Z収音時間帯を特定するリプレイ参照区間情報とが含ま れたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定 位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカツ ト切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像 Z音声の 重要度を算出する手順と、
前記リプレイ映像 Z音声の重要度に応じて、シーン情報で区切られた映像 Z音声 のシーンの階層を選択する手順と、
前記リプレイ映像 Z音声のリプレイ参照区間を包含する映像 Z音声の前記階層に おけるシーンを、当該リプレイ映像 z音声の重要度を有するダイジェスト候補に設定 して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大に なる前記ダイジェスト候補の組み合わせを選択する手順と
を実行させるためのプログラム。
PCT/JP2005/013574 2004-07-30 2005-07-25 ダイジェストの作成方法及び装置 WO2006011447A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US11/572,957 US8544037B2 (en) 2004-07-30 2005-07-25 Digest creating method and device

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2004-223135 2004-07-30
JP2004223135 2004-07-30
JP2005211614A JP4758161B2 (ja) 2004-07-30 2005-07-21 ダイジェストの作成方法及び装置
JP2005-211614 2005-07-21

Publications (1)

Publication Number Publication Date
WO2006011447A1 true WO2006011447A1 (ja) 2006-02-02

Family

ID=35786196

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2005/013574 WO2006011447A1 (ja) 2004-07-30 2005-07-25 ダイジェストの作成方法及び装置

Country Status (3)

Country Link
US (1) US8544037B2 (ja)
JP (1) JP4758161B2 (ja)
WO (1) WO2006011447A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010205313A (ja) * 2009-02-27 2010-09-16 Sony Corp 情報処理装置、情報処理方法およびプログラム

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4776423B2 (ja) * 2006-04-24 2011-09-21 パナソニック株式会社 映像操作履歴を基にした重要度情報付与装置及び方法
WO2007139105A1 (ja) * 2006-05-31 2007-12-06 Pioneer Corporation 放送受信装置、ダイジェスト生成方法、およびダイジェスト生成プログラム
US9432629B2 (en) * 2008-08-18 2016-08-30 Brigham Young University Interactive viewing of sports video
US8621486B2 (en) * 2010-06-30 2013-12-31 Hewlett-Packard Development Company, L.P. Significance level automation
US9288431B2 (en) * 2014-03-25 2016-03-15 Rovi Guides, Inc. Systems and methods for re-recording content associated with re-emerged popularity
US9996769B2 (en) * 2016-06-08 2018-06-12 International Business Machines Corporation Detecting usage of copyrighted video content using object recognition
CN109167934B (zh) * 2018-09-03 2020-12-22 咪咕视讯科技有限公司 一种视频处理方法、装置及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0965287A (ja) * 1995-08-18 1997-03-07 Hitachi Ltd 動画像の特徴場面検出方法及び装置
JP2000261754A (ja) * 1999-03-05 2000-09-22 Jisedai Joho Hoso System Kenkyusho:Kk ダイジェスト作成装置,ダイジェスト作成方法およびその方法の各工程をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002300518A (ja) * 2001-03-29 2002-10-11 Nippon Hoso Kyokai <Nhk> ダイジェスト番組の作成方法、装置および記憶媒体
JP2003078878A (ja) * 2001-08-29 2003-03-14 Matsushita Electric Ind Co Ltd 番組送受信システム及び番組受信装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5717879A (en) * 1995-11-03 1998-02-10 Xerox Corporation System for the capture and replay of temporal data representing collaborative activities
JPH10243352A (ja) * 1997-02-27 1998-09-11 Hitachi Ltd 映像情報記録再生装置
JPH11238071A (ja) * 1998-02-20 1999-08-31 Toshiba Corp ダイジェスト作成装置及びダイジェスト作成方法
ATE240559T1 (de) * 1998-09-03 2003-05-15 Ricoh Kk Speichermedien mit video- beziehungsweise audioindexinformation, verwaltungsverfahren und wiederauffindungsverfahren für video-, bzw audioinformation und videowiederauffindungssystem
US6795092B1 (en) * 1999-02-15 2004-09-21 Canon Kabushiki Kaisha Data processing apparatus and method, and storage medium
JP2002199043A (ja) * 2000-12-27 2002-07-12 Nec Corp 情報処理装置および電子機器制御システム
JP2002259720A (ja) * 2001-03-02 2002-09-13 Internatl Business Mach Corp <Ibm> コンテンツ要約システム、映像要約システム、ユーザ端末、要約映像生成方法、要約映像受信方法、およびプログラム
JP2002290954A (ja) * 2001-03-23 2002-10-04 Sanyo Electric Co Ltd 要約映像特定装置、要約映像特定方法、および映像端末
JP3663362B2 (ja) * 2001-03-30 2005-06-22 インターナショナル・ビジネス・マシーンズ・コーポレーション インデックス生成装置
JP4546682B2 (ja) * 2001-06-26 2010-09-15 パイオニア株式会社 映像情報要約装置、映像情報要約方法および映像情報要約処理プログラム
US7035435B2 (en) * 2002-05-07 2006-04-25 Hewlett-Packard Development Company, L.P. Scalable video summarization and navigation system and method
JP2003333505A (ja) * 2002-05-14 2003-11-21 Pioneer Electronic Corp 記録媒体、映像記録装置、映像再生装置及び映像記録再生装置
US20040088723A1 (en) * 2002-11-01 2004-05-06 Yu-Fei Ma Systems and methods for generating a video summary
JP4430929B2 (ja) * 2003-12-18 2010-03-10 株式会社日立製作所 自動録画システム
FR2864858A1 (fr) * 2004-01-06 2005-07-08 Thomson Licensing Sa Dispositif et procede de creation de condenses de documents multimedias

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0965287A (ja) * 1995-08-18 1997-03-07 Hitachi Ltd 動画像の特徴場面検出方法及び装置
JP2000261754A (ja) * 1999-03-05 2000-09-22 Jisedai Joho Hoso System Kenkyusho:Kk ダイジェスト作成装置,ダイジェスト作成方法およびその方法の各工程をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002300518A (ja) * 2001-03-29 2002-10-11 Nippon Hoso Kyokai <Nhk> ダイジェスト番組の作成方法、装置および記憶媒体
JP2003078878A (ja) * 2001-08-29 2003-03-14 Matsushita Electric Ind Co Ltd 番組送受信システム及び番組受信装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010205313A (ja) * 2009-02-27 2010-09-16 Sony Corp 情報処理装置、情報処理方法およびプログラム
US8706781B2 (en) 2009-02-27 2014-04-22 Sony Corporation Apparatus and method for enabling content data to be copied or moved in accordance with desired time or capacity of a storage medium and a program thereof

Also Published As

Publication number Publication date
JP4758161B2 (ja) 2011-08-24
US8544037B2 (en) 2013-09-24
JP2006067564A (ja) 2006-03-09
US20080196058A1 (en) 2008-08-14

Similar Documents

Publication Publication Date Title
WO2006011447A1 (ja) ダイジェストの作成方法及び装置
JP4611209B2 (ja) コンテンツ再生装置
JP5322550B2 (ja) 番組推奨装置
CN101303695B (zh) 用于处理运动视频的装置
JP4692775B2 (ja) 映像コンテンツ再生支援方法、映像コンテンツ再生支援システム、及び情報配信プログラム
JP2012008789A (ja) 動画推薦システム及び動画推薦方法
JP6291162B2 (ja) コンテンツ再生装置
JP2008103784A (ja) 映像記録装置
KR20100085720A (ko) 하이라이트 영상 구성 방법 및 장치
JP2007336283A (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP2010206447A (ja) 視聴端末装置、サーバ装置および参加型番組共有システム
CN112653918B (zh) 预览视频生成方法、装置、电子设备及存储介质
JP4925938B2 (ja) ダイジェスト映像情報作成方法、ダイジェスト映像情報作成プログラム、および、映像装置
JP4305080B2 (ja) 映像再生方法およびシステム
JP3938034B2 (ja) 映像及び音声のダイジェスト作成方法及びその装置
JP2004126811A (ja) コンテンツ情報編集装置とその編集プログラム
JP2010226630A (ja) コメント処理機能を有した映像処理装置及びそのコメント処理方法
KR100956739B1 (ko) 동영상 요약 서비스 시스템 및 그 방법
JP2008103802A (ja) 映像合成装置
JP4261319B2 (ja) 情報提供システム及び視聴行動分析システム
JP2004260297A (ja) パーソナルダイジェスト配信装置、その配信方法、その配信プログラム、およびパーソナルダイジェスト配信システム
JP2002290954A (ja) 要約映像特定装置、要約映像特定方法、および映像端末
JP2009033618A (ja) 映像インデックス生成装置、映像インデックス生成方法、及び映像インデックス生成プログラム
JP2009302751A (ja) 要約再生装置、要約再生方法、要約再生プログラム、および記録媒体
JP2005167456A (ja) Avコンテンツ興趣特徴抽出方法及びavコンテンツ興趣特徴抽出装置

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS KE KG KM KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NG NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU LV MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 200580030900.X

Country of ref document: CN

122 Ep: pct application non-entry in european phase
WWE Wipo information: entry into national phase

Ref document number: 11572957

Country of ref document: US