CN118118746A - 影像编辑装置以及计算机程序 - Google Patents

影像编辑装置以及计算机程序 Download PDF

Info

Publication number
CN118118746A
CN118118746A CN202410381796.3A CN202410381796A CN118118746A CN 118118746 A CN118118746 A CN 118118746A CN 202410381796 A CN202410381796 A CN 202410381796A CN 118118746 A CN118118746 A CN 118118746A
Authority
CN
China
Prior art keywords
video
image
editing
user
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202410381796.3A
Other languages
English (en)
Inventor
田所贵司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of CN118118746A publication Critical patent/CN118118746A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Circuits (AREA)
  • Studio Devices (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

本公开涉及影像编辑装置以及计算机程序。影像编辑装置具备：影像储存部，储存利用多个拍摄装置拍摄一个事件而得到的、用于创建与事件相关的影像作品的未编辑的多个素材影像；以及影像编辑部，使用多个素材影像创建与用户的请求相应的与事件有关的编辑影像。影像编辑部针对储存于影像储存部的多个素材影像的各个素材影像，对每个场景附加元数据，以使得所映现的内容明了，在从外部输入了编辑基准时，基于元数据计算该编辑基准与多个素材影像的吻合度，并且使用根据吻合度提取出的若干素材影像创建编辑影像。

Description

影像编辑装置以及计算机程序
本申请是分案申请，其母案申请的申请日为2022年02月03日，国际申请号为PCT/JP2022/004267，进入中国国家阶段的申请号为202280004882.1，发明名称为“影像编辑装置、影像编辑方法以及计算机程序”。
技术领域
本发明涉及用于对在商用的影像作品的创建中使用的多个影像进行编辑而创建其他影像的影像编辑装置。
背景技术
在将音乐会这样的事件商品化为影像作品的情况下，大多对由多台、例如30台左右的视频摄像机从各种角度拍摄的影像进行编辑而作为一部影像作品。将编辑前的影像称为“素材影像”。影像作品被记录在记录介质中进行销售或分发。商用的影像作品通常是将从多个视频摄像机得到的多个素材影像基于特定的编辑基准、例如适合于特定目的的专业的基准筛选、编辑成一个影像而创建的。另外，还有在拍摄前创建预定的脚本，基于该脚本自动编辑素材影像的装置。在专利文献1中，公开了通过基于脚本编辑拍摄素材来创建影像作品的技术。
现有技术文献
专利文献
专利文献1：日本特开2002-016871号公报
发明内容
发明要解决的问题
从多个视频摄像机得到的多个素材影像不使用作为影像作品的影像以外的部分。影像作品中未使用的素材影像是不见天日的，通常直接被封藏。然而，对于用户而言，有时在素材影像的影像作品中未包含的部分中包含自身想要的影像。目前未提供将素材影像的影像作品中未包含的部分向用户开放的服务。
鉴于上述问题，本发明的目的在于提供一种影像编辑装置，用户能够编辑素材影像而创建独特的影像作品。
用于解决问题的方案
本发明的影像编辑装置的特征在于，具备：储存部件，将利用多个拍摄装置拍摄一个事件的状况而得到的多个素材影像与在各素材影像的拍摄时录音的录音数据建立关联而存储到预定的存储装置；受理部件，从用户终端受理用户独特的编辑基准；影像编辑部件，从所述存储装置中抽出与所受理的所述编辑基准的吻合度相对高的预定数量的素材影像，对所抽出的预定数量的素材影像进行编辑，创建用户独特的所述事件的编辑影像；以及控制部件，使所述用户终端再现所创建的所述编辑影像和与该编辑影像所使用的素材影像建立有关联的所述录音数据。
发明的效果
根据本发明，用户能够在第2编辑基准下对在第1编辑基准下未被使用的素材影像进行编辑而创建独特的影像作品。
附图说明
图1是影像编辑系统的结构说明图。
图2是影像编辑装置的功能框图。
图3是影像数据获取的说明图。
图4的(a)～(d)是数据结构的例示图。
图5是用户终端的功能框图。
图6是选择画面的例示图。
图7是操作画面的例示图。
图8是附加标签的说明图。
图9的(a)、(b)是场景提取的说明图。
图10是编辑影像的说明图。
图11是影像编辑序列的序列图。
图12是主画面的例示图。
图13是显示画面的例示图。
图14的(a)、(b)是变形例的影像编辑装置的结构说明图。
具体实施方式
以下，使用附图对本发明的实施方式进行说明。
(整体结构)
图1是应用了本发明的包含影像编辑装置的影像编辑系统的结构说明图。该影像编辑系统1构成为影像编辑装置10与用户终端20能够经由网络N进行通信。影像编辑装置10是储存有多个影像数据的服务器。用户终端20是个人计算机、智能手机、平板终端等用户能够在自己的管理下操作的信息处理终端。用户终端20在图1中示出了两台，但台数是任意的，可以是一台，或者也可以是三台以上。
影像编辑装置10具备包括CPU(Central Processing Unit，中央处理器)101、ROM(Read Only Memory，只读存储器)102、RAM(Random Access Memory，随机存取存储器)103、存储装置104的计算机部件和通信接口(I/F)105。计算机部件和通信I/F105经由总线106连接为能够通信。CPU101通过执行储存在ROM102中的计算机程序来控制影像编辑装置10的动作。RAM103提供CPU101执行处理时的作业区域。
存储装置104是HDD(Hard Disk Drive，硬盘驱动器)、SSD(Solid State Drive，固态硬盘)等大容量存储装置。在存储装置104中储存有多个影像数据，该多个影像数据包含拍摄音乐会、戏剧等事件的表演者(艺术家)而得到的素材影像。存储装置104中还储存声音数据，该声音数据包括在获得多个视频数据的事件中收集到的声音。通信接口105在与用户终端20之间进行与网络N的通信协议相应的通信。
用户终端20具备CPU201、ROM202、RAM203、通信接口(I/F)204、操作部205、显示器206以及扬声器207。各部经由总线208连接为能够通信。CPU201通过执行储存在ROM202中的计算机程序来控制用户终端20的操作。RAM203提供CPU201执行处理时的作业区域。
操作部205是输入接口，受理来自后述的用户的各种操作输入。受理的操作输入例如是用于编辑储存在影像编辑装置10中的多个影像数据的指示、其他的信息处理的指示。经由操作部205输入的指示被发送给CPU201。CPU201进行与从操作部205获取的指示相应的信息处理。显示器206通过CPU201的控制，显示用户进行指示的输入时的输入画面、从影像编辑装置10获取的影像。扬声器207在CPU201的控制下输出从影像编辑装置10获取的声音。通信接口204在与影像编辑装置10之间进行与网络N的通信协议相应的通信。
在这样的结构的影像编辑系统1中，用户终端20根据从操作部205输入的指示的内容，生成包含基于用户的嗜好的编辑基准的编辑指示。用户终端20通过通信接口204经由网络N向影像编辑装置10发送所生成的编辑指示。
影像编辑装置10通过通信接口105获取从用户终端20发送的编辑指示。影像编辑装置10基于获取的编辑指示，编辑存储装置104内的多个影像数据，生成表示一个编辑影像的编辑影像数据。影像编辑装置10通过通信接口105经由网络N将编辑影像数据和与该编辑影像数据同步的声音数据向用户终端20发送。
用户终端20通过通信接口204获取从影像编辑装置10发送的编辑影像数据和声音数据。用户终端20在显示器206上显示对所获取的编辑影像数据进行处理而得到的编辑影像，并从扬声器207输出对所获取的声音数据进行处理而得到的声音。这样，用户终端20的用户能够收看符合自身的嗜好的影像以及声音。
接下来，对影像编辑装置10和用户终端20进行详细说明。
(影像编辑装置)
图2是影像编辑装置10的功能框图。各功能块除了通过CPU101执行计算机程序来实现以外，也可以至少一部分通过硬件来实现。影像编辑装置10作为影像储存部110、声音储存部111、登记信息储存部112、编辑影像储存部113、影像编辑部114、用户管理部115、嗜好学习部116、输入部117以及输出部118而发挥功能。也就是说，使计算机部件作为这样的功能块进行动作。
影像储存部110、声音储存部111、登记信息储存部112以及编辑影像储存部113由CPU101和存储装置104实现。影像编辑部114、用户管理部115以及嗜好学习部116通过CPU101来实现。输入部117和输出部118由CPU101和通信接口105实现。
影像储存部110储存多个影像数据。多个影像数据包括由设置于一个事件会场的多个视频摄像机拍摄到的素材影像。这些素材影像是创建(编辑)与事件相关的商用的影像作品时使用的素材影像，是在由创作者基于专业编辑基准编辑的编辑影像(第1编辑影像)中使用的未编辑状态的素材影像。这样的未编辑的素材影像以往在影像作品的创建后通常被废弃。
图3是影像数据获取的说明图。图3表示在音乐会会场使用的多个拍摄装置(视频摄像机C1～C25)的配置例。各视频摄像机C1～C25以从各种角度拍摄舞台300上的方式配置。在本例的情况下，视频摄像机C1～C16从观众席拍摄舞台300。视频摄像机C17～C19在舞台300上使用。视频摄像机C20～C22设置于吊车等特殊器材，对舞台300进行拍摄。视频摄像机C23从中央拍摄舞台300，视频摄像机C24从右侧拍摄舞台300，视频摄像机C25从左侧拍摄舞台300。
各视频摄像机C1～C25分别被赋予作用。在本例中，视频摄像机C1、C3、C5、C7、C9分别拍摄特定的表演者的面部特写。视频摄像机C2、C4、C6、C8、C10分别拍摄特定的表演者的全身。视频摄像机C11～C13拍摄所有表演者。视频摄像机C14～C16拍摄主要演唱的表演者。视频摄像机C17、C18在舞台300上从近距离拍摄其他表演者(成员)。视频摄像机C19拍摄演奏者。另外，除了视频摄像机C1～C25以外，也可以使用用于在后台拍摄成员的视频摄像机。
由各视频摄像机C1～C25拍摄的影像作为素材影像由创作者用于影像作品的创建后，储存在存储装置104的影像储存部110中。需要说明的是，在视频摄像机C1～C25的拍摄的同时，在音乐会会场(事件会场)，通过集音装置对声音进行录音。包含被录音的声音的声音数据储存在声音储存部111中。
登记信息储存部112储存登记数据，该登记数据包括通过用户终端20进行储存在影像储存部110的素材影像的编辑的指示的用户的登记信息。编辑影像储存部113储存包括根据用户的指示而编辑创建的编辑影像的编辑影像数据。
图4是储存在影像储存部110、声音储存部111、登记信息储存部112以及编辑影像储存部113中的各数据的数据结构的例示图。图4的(a)是储存在影像储存部110中的影像数据的结构例示图。图4的(b)是储存在声音储存部111中的声音数据的结构例示图。图4的(c)是储存在登记信息储存部112中的登记数据的结构例示图。图4的(d)是储存在编辑影像储存部113中的编辑影像数据的结构例示图。
图4的(a)的影像数据是对素材影像赋予了识别拍摄该素材影像的事件的事件ID以及识别拍摄该素材影像的视频摄像机的摄像机ID的结构。素材影像通过事件ID和摄像机ID，能够确定是由哪个事件的哪个视频摄像机拍摄到的影像。
拍摄音乐会的素材影像大多再现时间为2小时左右。素材影像中映现的表演者根据场景而变化。因此，在素材影像中附加标签，以便使每个场景中映现的表演者及其表情一目了然。此时，若映现于一个画面的表演者是多个，则进行诸如尽可能使位于中央并且映现得大的表演者明了的标签附加、诸如使所有表演者明了的标签附加。在素材影像中，这样的标签、再现时间作为元数据而被附加。
图4的(b)的声音数据是对声音赋予了识别该声音被录音的事件的事件ID的结构。影像数据和声音数据通过事件ID建立关联。在再现时，影像和声音被同步地再现。在影像数据和声音数据中包含用于该同步的同步信号。
图4的(c)的登记数据是对用户的个人信息(登记信息)赋予了识别用户的用户ID和识别该用户所创建的编辑影像的编辑影像ID的结构。在登记数据中附加有表示该用户的嗜好的后述的嗜好数据。用户的个人信息由用户从用户终端20的操作部205输入。
影像编辑装置10通过用户管理部115管理登记信息储存部112。用户管理部115对从用户终端20获取.的用户的个人信息赋予用户ID而创建登记数据，并储存到登记信息储存部112中。个人信息是用户的姓名、联系方式、登录时的密码等。编辑影像ID是为了在该用户独特编辑素材影像而创建编辑影像时识别该编辑影像而赋予的。每当用户创建编辑影像时，对登记数据追加编辑影像ID。
图4的(d)的编辑影像数据是对用户创建的编辑影像赋予编辑影像ID的结构。影像编辑部114将对编辑影像赋予编辑影像ID而创建的编辑影像数据储存于编辑影像储存部113。用户管理部115在对编辑影像赋予编辑影像ID时，对创建了该编辑影像的用户的登记数据追加该编辑影像ID。通过编辑影像ID，登记数据与编辑影像相关联。编辑影像只要能够再现影像即可，除了影像本身之外，例如也可以组合指示编辑影像所使用的素材影像的场景的信息来构成。例如，编辑影像也可以如是诸如再现时间0秒～5秒指示第1素材影像的场景，再现时间5秒～8秒指示第2素材影像的场景…这样，再现时间和所使用的素材影像的场景变得明确的信息的组合。
影像编辑部114基于从用户终端20获取的编辑指示所包含的编辑基准(第2编辑基准)对储存于影像储存部110的多个素材影像进行编辑，创建符合用户的嗜好的编辑影像。影像编辑部114在编辑影像的创建前分析素材影像，例如通过面部认证技术，确定每个场景的影像内的表演者。影像编辑部114如上所述地对素材影像进行附加标签，以使特定的表演者明了。
影像编辑部114根据编辑基准和附加于各素材影像的标签，判定符合编辑基准的影像并从多个素材影像中提取。影像编辑部114通过组合所提取的影像来创建一个编辑影像。影像编辑部114例如对各素材影像的每个场景计算与编辑基准的吻合度。影像编辑部114针对每个场景提取吻合度最高的素材影像，创建编辑影像。此时，如果存在该用户的嗜好数据，则影像编辑部114也可以使用嗜好数据和编辑基准来计算吻合度。通过考虑嗜好数据，自动获得更符合用户的嗜好的编辑影像。
编辑影像被发送给用户终端20，并且，被赋予编辑影像ID而储存于编辑影像储存部113。
嗜好学习部116将编辑基准和编辑影像作为训练数据，学习用户的嗜好。嗜好学习部116获取从用户终端20获取的编辑基准和基于该编辑基准创建的编辑影像。嗜好学习部116根据所获取的编辑基准和编辑影像进行机器学习，创建该用户的嗜好数据。嗜好数据由用户管理部115附加到该用户的登记数据。每当用户指示编辑影像的创建时，嗜好学习部116进行机器学习，并更新嗜好数据。因此，通过用户创建大量编辑影像，从而创建更符合用户的嗜好的编辑影像。
输入部117获取从用户终端20发送的编辑指示等指示。输出部118将表示编辑影像的编辑影像数据和与该编辑影像相对应的声音数据向用户终端20发送。
(用户终端)
接下来，说明用户终端20的结构例。图5是用户终端20的功能框图。各功能除了通过CPU201执行计算机程序来实现之外，也可以至少一部分通过硬件来实现。在本实施方式中，说明通过在用户终端20中安装用于使用影像编辑装置10来创建编辑影像的应用软件，实现各功能的例子。
用户终端20作为输入部210、输出部211、输出控制部212、发送数据生成部213以及通信控制部214发挥功能。也就是说，作为这样的功能块进行动作。输入部210通过CPU201和操作部205来实现。输出部211通过CPU201、显示器206以及扬声器207来实现。输出控制部212和发送数据生成部213通过CPU201来实现。通信控制部214通过CPU201和通信接口204来实现。
输入部210受理用户通过操作部205输入的指示等。输出部211在输出控制部212的控制下在显示器206上显示画面，从扬声器207输出声音。发送数据生成部213基于由输入部210受理的指示等，生成向影像编辑装置10发送的发送数据。
作为向影像编辑装置10的发送数据对生成编辑指示的处理进行说明。在该情况下，输出控制部212在显示器206上显示用于使用影像编辑装置10创建编辑影像的操作画面。当执行用于使用影像编辑装置10创建编辑影像的应用软件时，在显示器206上首先显示选择对哪个事件的素材影像进行编辑的选择画面。图6是选择画面的例示图。在选择画面中显示事件名和事件的举办日。用户通过操作部205从选择画面中选择要编辑的事件。
当选择了事件时，在显示器206上显示用于设定编辑基准的操作画面。图7是该情况下的操作画面的例示图。操作画面包含主查看器701、成员选择按钮702、参数调整条703、商品销售字段704、共享按钮705以及保存按钮706。在主查看器701上显示编辑影像。成员选择按钮702和参数调整条703用于供用户输入所期望的编辑基准。商品销售字段704是介绍在选择画面中选择的事件的关联商品的字段，链接到关联商品的销售网站。
用户通过成员选择按钮702选择希望的成员。通过成员选择按钮702选择的成员是该事件的表演者。用户能够通过参数调整条703设定希望成员的映现状态(拉远/推近)、其他成员的映现状态、推荐的影像等。发送数据生成部213将这些设定作为编辑基准来创建编辑指示。
通信控制部214在与影像编辑装置10之间进行通信。例如，通信控制部214向影像编辑装置10发送编辑指示。通信控制部214从影像编辑装置10获取基于编辑指示编辑后的编辑影像数据和声音数据，并向输出控制部212发送。输出控制部212在主查看器701上显示基于所获取的编辑影像数据的编辑影像，从扬声器207输出基于所获取的声音数据的声音。由此，用户能够收看符合用户的偏好的编辑影像。
(影像编辑)
对由以上那样的影像编辑系统1进行的影像编辑的一例进行说明。如上所述，通过影像编辑部114进行影像编辑。在此，对设定“成员A”的推近图像作为编辑基准的情况进行说明。
影像编辑部114预先学习各成员的面部图像，通过面部认证技术从各素材影像中提取成员。例如，影像编辑部114按素材影像的每个场景提取成员。影像编辑部114例如每当影像中包含的成员变化时判断为场景已切换。影像编辑部114在素材影像的该场景中对提取出的成员附加标签。图8是对素材影像进行了成员的标签附加的情况下的说明图。
图8的素材影像是由主要拍摄成员A的视频摄像机拍摄的影像。在图8中，对第1场景(再现时间t0～t1)附加标签“成员A、C、D”。对第2场景(再现时间t1～t2)附加标签“成员A、B”。对第3场景(再现时间t2～t3)附加标签“成员全员”。对第4场景(再现时间t3～t4)附加标签“成员A”。对第5场景(再现时间t5～)附加标签“成员A、F”。
对所有素材影像附加标签后的影像编辑部114基于编辑基准对编辑影像进行编辑。在指定成员A作为编辑基准的情况下，从各素材影像中提取包含成员A的影像(场景)而创建编辑影像。图9是场景提取的说明图。图9的(a)、图9的(b)是在相同的时机由不同的视频摄像机拍摄到的影像。任一影像中都包含成员A、B、C三人。
在该情况下，在图9的(a)的影像中，成员A映现得最大，在图9的(b)的影像中，成员A映现得第二大。影像编辑部114针对各个影像计算与编辑基准的吻合度。由于编辑基准是“成员A”的推近图像，因此图9的(a)的吻合度为比图9的(b)的吻合度高的值。因此，影像编辑部114提取包含图9的(a)的影像的场景。此时，影像编辑部114也可以将用户的嗜好数据附加于吻合度的基准。例如，在用户喜欢在影像的中心映现成员A的情况下，除了影像中的成员A的大小之外，成员A的位置也包含于吻合度。
影像编辑部114将这样从各素材影像提取出的场景组合而创建编辑影像。图10是组合场景后的编辑影像的说明图。在图10中，针对每个场景，对从多个视频摄像机获得的多个素材影像进行映现出的成员的标签附加，影像编辑部114通过标签自动创建符合编辑基准的编辑影像。
在编辑基准为“成员A”的情况下，影像编辑部114从各素材影像中取入附加有“成员A”的标签的场景并进行组合，创建编辑影像。当在多个素材影像中在相同的时机成员A被附加了标签的情况下，影像编辑部114根据在图9中说明的吻合度来选择要取入的场景。从各素材影像中选择加网示出的场景，从而构成图10的编辑影像。在以往的专业的编辑基准下，对各成员没有偏差地选择场景而完成影像作品。相对于此，如本实施方式那样，在基于用户的嗜好的编辑基准下，创建成员存在偏差的编辑影像。
(影像编辑序列)
对以上那样的结构的影像编辑系统1的影像编辑序列进行说明。图11是影像编辑序列的序列图。作为前提，用户被进行用户登记，多个素材影像储存在影像储存部110中。
用户通过用户终端20启动用于使用影像编辑装置10创建编辑影像的应用软件(S101)。通过启动应用软件，在用户终端20的显示器206上显示主画面(S102)。图12是主画面的例示图。主画面包括“登录ID”字段1201、“密码”字段1202、“影像编辑”按钮1203以及“收看”按钮1204。用户通过操作部205在“登录ID”字段1201中输入登录ID，在“密码”字段1202中输入密码。之后，用户通过操作部205选择“影像编辑”按钮1203和“收看”按钮1204中的任一个。在进行影像编辑的情况下，用户选择“影像编辑”按钮1203。
用户操作部205从主画面选择“影像编辑”按钮1203，由此在显示器206上显示图6的选择画面(S103)。此时，用户终端20从影像编辑装置10请求储存于影像储存部110中的素材影像的事件名以及举办日的一览。影像编辑装置10根据该请求将事件名以及举办日一览向用户终端20发送(S201)。由此，用户终端20获取事件名以及举办日一览。用户利用操作部205从选择画面选择要进行编辑的事件。用户通过操作部205从选择画面选择编辑对象的事件，由此在显示器206上显示图7的操作画面(S104)。
用户通过操作部205从操作画面中选择所期望的编辑条件。在图7的例子中，用户通过成员选择按钮702和参数调整条703设定希望的成员和希望成员的映现状态等。发送数据生成部213将这些设定作为编辑基准而创建编辑指示。发送数据生成部213生成包含基于所选择的条件的编辑基准的编辑指示(S105)。在编辑指示中还包含在主画面中输入的用户的用户ID和密码。用户终端20通过通信控制部214经由网络N向影像编辑装置10发送由发送数据生成部213生成的编辑指示(S106)。
影像编辑装置10通过输入部117获取从用户终端20发送的编辑指示(S202)。影像编辑装置10通过用户管理部115参照登记数据，进行基于编辑指示中包含的用户ID和密码的用户认证(S203)。以下的处理在用户认证成功的情况下执行。在用户认证失败的情况下，影像编辑装置10向用户终端20发送促使再次输入用户ID和密码的通知，并再次进行用户认证。
影像编辑装置10通过影像编辑部114基于编辑指示中包含的编辑基准进行上述那样的素材影像的编辑，创建编辑影像(S204)。影像编辑装置10通过输出部118经由网络N向用户终端20发送表示编辑影像的编辑影像数据和相应的声音的声音数据(S205)。
另外，影像编辑部114将用户ID附加到所创建的编辑影像，并储存到编辑影像储存部113中(S206)。影像编辑装置10通过嗜好学习部116学习在本次的处理中获取到的编辑基准和所创建出的编辑影像，生成嗜好数据，并附加到登记信息储存部112的相应的登记数据。在已经对登记数据附加有嗜好数据的情况下，更新嗜好数据(S207)。
用户终端20通过通信控制部214获取从影像编辑装置10发送的编辑影像数据和声音数据(S107)。用户终端20的输出控制部212将编辑影像数据和声音数据转换为可输出的形式，并通过输出部211输出(S108)。输出部211通过显示器206显示编辑影像，通过扬声器207输出声音。
编辑影像也可以显示在图7的操作画面的主查看器701上，或者也可以显示在不同的显示画面上。图13是显示编辑影像的显示画面的例示图。在S106的处理中从用户终端20向影像编辑装置10发送编辑指示之后，从图7的操作画面切换显示该显示画面。显示画面包括主查看器701、评论栏1301、共享按钮1302以及保存按钮1303。编辑影像显示在主查看器701中。
通过按下共享按钮1302，用户能够与其他用户共享正在显示的编辑影像。在被共享的情况下，在评论栏1301中能够显示自身和其他用户的评论。通过按下保存按钮1303，用户能够将显示中的编辑影像保存在用户终端20内。需要说明的是，也可以通过保存按钮1303的按下来决定影像编辑装置10是否在S206的处理中储存编辑影像。
在选择了图12的“收看”按钮1204的情况下也显示图13的显示画面。在该情况下，除了自身创建的编辑影像之外，用户还能够收看由其他用户创建并设定为共享的编辑影像。
图14是变形例的影像编辑装置的结构说明图。图14的(a)表示影像编辑装置30的硬件结构，图14的(b)表示影像编辑装置30的功能块。影像编辑装置30是将图1的影像编辑装置10和用户终端20形成为一体的结构。
影像编辑装置30是在图1的影像编辑装置10中追加了操作部107、显示器108以及扬声器109的结构。操作部107是具有与图1的用户终端20的操作部205同样的功能的输入接口。显示器108具有与图1的用户终端20的显示器206相同的功能，但是是提高了画面尺寸、画质等的显示装置。扬声器109具有与图1的用户终端20的扬声器207同样的功能，但音质更高。
影像编辑装置30是与图2的影像编辑装置10的功能块同样的结构，但输入部119和输出部120的功能不同。即，输入部119不经由网络N而从操作部107直接受理编辑指示等指示。输出部120不经由网络N发送编辑影像数据和声音数据，而直接从显示器108和扬声器109输出编辑影像和声音。
另外，影像编辑装置30也可以将编辑影像记录到记录介质中而能够提供给用户。在该情况下，影像编辑装置30具备向USB存储器、DVD、Blu-ray(注册商标)等记录介质写入的写入装置。在通过影像编辑装置30创建编辑影像之后，用户指示将该编辑影像写入记录介质。影像编辑装置30根据该指示将编辑影像写入记录介质。这样创建的记录介质被提供给用户，供用户使用。
这样的影像编辑装置30例如设置在具备最新的显示器108、扬声器109的专用的设施中。用户终端20即使在使用高性能的个人计算机的情况下，临场感也存在极限。相对于此，例如在将影像编辑装置30设置于专用的设施的情况下，用户能够以高画质、高音质的高临场感来欣赏编辑影像。
通过如上所述的影像编辑系统1，能够有效利用以往只能被废弃或被封藏的未编辑状态的素材影像。用户例如能够以与专业的编辑基准不同的独特的编辑基准来编辑素材影像，因此能够将音乐会等事件定制为自己喜好的独特的影像作品来欣赏。因此，即使是相同的事件，用户也能够以不同的观点持续地欣赏。另外，还能够对自己编辑的影像作品与其他用户编辑的影像作品进行比较或评价。

Claims (5)

1.一种影像编辑装置，其特征在于，该影像编辑装置具备：
储存部件，将利用多个拍摄装置拍摄一个事件的状况而得到的多个素材影像与在各素材影像的拍摄时录音的录音数据建立关联而存储到预定的存储装置；
受理部件，从用户终端受理用户独特的编辑基准；
影像编辑部件，从所述存储装置中抽出与所受理的所述编辑基准的吻合度相对高的预定数量的素材影像，对所抽出的预定数量的素材影像进行编辑，创建用户独特的所述事件的编辑影像；以及
控制部件，使所述用户终端再现所创建的所述编辑影像和与该编辑影像所使用的素材影像建立有关联的所述录音数据。
2.根据权利要求1所述的影像编辑装置，其特征在于，
所述储存部件所储存的所述多个素材影像的一部分或者全部为未被使用为影像作品而被废弃的预定的素材影像。
3.根据权利要求1所述的影像编辑装置，其特征在于，
所述储存部件关于所述多个素材影像的各个素材影像，针对每个场景附加元数据而储存到所述存储装置，以使得所映现的内容明了。
4.一种计算机程序，使经由通信路径而与用户终端连接的服务器作为如下部件而动作：
储存部件，将利用多个拍摄装置拍摄一个事件的状况而得到的多个素材影像与在各素材影像的拍摄时录音的录音数据建立关联而存储到预定的存储装置；
受理部件，从所述用户终端受理用户独特的编辑基准；
影像编辑部件，从所述储存部件中抽出与所述编辑基准的吻合度相对高的预定数量的素材影像，对所抽出的预定数量的素材影像进行编辑，创建用户独特的所述事件的编辑影像；以及
控制部件，使所述用户终端再现所创建的所述编辑影像和与该编辑影像所使用的素材影像建立有关联的所述录音数据。
5.一种计算机程序，使与将利用多个拍摄装置拍摄一个事件的状况而得到的多个素材影像与在各素材影像的拍摄时录音的录音数据建立关联而保持的影像编辑装置之间进行通信的用户终端作为如下部件而动作：
受理部件，受理用户独特的编辑基准的输入；
指示部件，向所述影像编辑装置发送所受理的所述编辑基准，使所述影像编辑装置创建对与所发送的所述编辑基准的吻合度相对高的预定数量的素材影像进行编辑而得到的所述事件的编辑影像；
获取部件，从所述影像编辑装置获取所创建的编辑影像以及在该编辑影像中使用的所述录音数据；以及
再现部件，使所获取到的所述编辑影像和所述录音数据同步并再现。
CN202410381796.3A 2021-02-19 2022-02-03 影像编辑装置以及计算机程序 Pending CN118118746A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2021-025637 2021-02-19
JP2021025637A JP7118379B1 (ja) 2021-02-19 2021-02-19 映像編集装置、映像編集方法、及びコンピュータプログラム
CN202280004882.1A CN115699723B (zh) 2021-02-19 2022-02-03 影像编辑装置、影像编辑方法以及记录介质
PCT/JP2022/004267 WO2022176633A1 (ja) 2021-02-19 2022-02-03 映像編集装置、映像編集方法、及びコンピュータプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202280004882.1A Division CN115699723B (zh) 2021-02-19 2022-02-03 影像编辑装置、影像编辑方法以及记录介质

Publications (1)

Publication Number Publication Date
CN118118746A true CN118118746A (zh) 2024-05-31

Family

ID=82849854

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202280004882.1A Active CN115699723B (zh) 2021-02-19 2022-02-03 影像编辑装置、影像编辑方法以及记录介质
CN202410381796.3A Pending CN118118746A (zh) 2021-02-19 2022-02-03 影像编辑装置以及计算机程序

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202280004882.1A Active CN115699723B (zh) 2021-02-19 2022-02-03 影像编辑装置、影像编辑方法以及记录介质

Country Status (6)

Country Link
US (2) US11942115B2 (zh)
EP (1) EP4203460A1 (zh)
JP (2) JP7118379B1 (zh)
KR (2) KR102625045B1 (zh)
CN (2) CN115699723B (zh)
WO (1) WO2022176633A1 (zh)

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3826686B2 (ja) 2000-06-30 2006-09-27 セイコーエプソン株式会社 映像編集方法および映像編集装置、並びに映像編集を行なうためのコンピュータプログラムを記録した記録媒体
JP2003134446A (ja) 2001-10-19 2003-05-09 Sharp Corp 映像編集配信システム及びその課金方法
JP4426623B2 (ja) 2005-06-01 2010-03-03 パイオニア株式会社 映像配信装置、映像配信方法、映像配信プログラム、および記録媒体
US9196304B2 (en) 2006-01-26 2015-11-24 Sony Corporation Method and system for providing dailies and edited video to users
JP2008131617A (ja) * 2006-11-27 2008-06-05 Hitachi Ltd 映像処理装置
JP4600521B2 (ja) 2008-06-03 2010-12-15 ソニー株式会社 情報処理装置、情報処理方法、プログラム
JP2010232814A (ja) * 2009-03-26 2010-10-14 Nikon Corp 映像編集プログラムおよび映像編集装置
JP5532645B2 (ja) * 2009-03-26 2014-06-25 株式会社ニコン 映像編集プログラムおよび映像編集装置
JP5709359B2 (ja) * 2009-04-07 2015-04-30 ソニー株式会社 通信装置、通信方法、及び通信システム
JP5664374B2 (ja) * 2011-03-17 2015-02-04 富士通株式会社 ダイジェスト映像生成装置およびプログラム
WO2014024475A1 (ja) * 2012-08-10 2014-02-13 パナソニック株式会社 映像提供方法、送信装置および受信装置
US11291920B2 (en) * 2013-05-22 2022-04-05 David S. Thompson Interaction interleaver
JPWO2015125815A1 (ja) * 2014-02-20 2017-03-30 シャープ株式会社 映像編集装置
JP6241802B1 (ja) 2017-01-20 2017-12-06 パナソニックＩｐマネジメント株式会社 映像配信システム、ユーザ端末装置および映像配信方法
JP7028687B2 (ja) * 2018-03-23 2022-03-02 株式会社日立国際電気 放送システム
US11710392B2 (en) * 2020-09-11 2023-07-25 IDEMIA National Security Solutions LLC Targeted video surveillance processing

Also Published As

Publication number Publication date
US11942115B2 (en) 2024-03-26
EP4203460A1 (en) 2023-06-28
JP7118379B1 (ja) 2022-08-16
JP2022127633A (ja) 2022-08-31
KR20240010578A (ko) 2024-01-23
KR20230051308A (ko) 2023-04-17
US20230215468A1 (en) 2023-07-06
KR102625045B1 (ko) 2024-01-16
CN115699723B (zh) 2024-05-28
JP2022127469A (ja) 2022-08-31
CN115699723A (zh) 2023-02-03
WO2022176633A1 (ja) 2022-08-25
US20240194226A1 (en) 2024-06-13

Similar Documents

Publication Publication Date Title
US7499918B2 (en) Information processing apparatus and method, program, and recording medium
KR101007508B1 (ko) 비디오 신호 처리 장치, 비디오 신호 기록 장치, 비디오신호 재생 장치, 비디오 신호 처리 장치의 처리 방법,비디오 신호 기록 장치의 처리 방법, 비디오 신호 재생장치의 처리 방법, 기록 매체
US8249434B2 (en) Contents playing method and apparatus with play starting position control
WO2004002144A1 (ja) メタデータ作成装置、その作成方法および検索装置
JP2008293219A (ja) コンテンツ管理システム、コンテンツ管理システムにおける情報処理装置、情報処理装置におけるリンク情報生成方法、情報処理装置におけるリンク情報生成プログラム、及びリンク情報生成プログラムを記録した記録媒体
JP4543694B2 (ja) コミュニケーションシステム、コミュニケーションシステムのサーバー、及びサーバーの処理方法
CN105814905A (zh) 用于使使用信息在装置与服务器之间同步的方法和系统
JP2002109099A (ja) 資料と映像・音声の記録システム、装置及びコンピュータ読み取り可能な記録媒体
JP2005293339A (ja) 情報処理装置および情報処理方法
JP2006157689A (ja) 視聴者間コミュニケーション方法及び装置及びプログラム
JP2004153764A (ja) メタデータ制作装置及び検索装置
JP2012178028A (ja) アルバム作成装置、アルバム作成装置の制御方法、及びプログラム
CN115699723B (zh) 影像编辑装置、影像编辑方法以及记录介质
US7444068B2 (en) System and method of manual indexing of image data
JP2009232325A (ja) 撮像装置
JP2005191892A (ja) 情報取得装置及びこれを用いたマルチメディア情報作成システム
JP2000222381A (ja) アルバム作成方法および情報処理装置および情報出力装置
JP2008090526A (ja) 会議情報保存装置、システム、会議情報表示装置及びプログラム
US20230262200A1 (en) Display system, display method, and non-transitory recording medium
JP2014235301A (ja) ジェスチャーによるコマンド入力識別システム
JP2004187275A (ja) 映像プログラム制作支援システム，企画装置，処理装置，映像プログラムの処理方法，プログラムおよびデータ構造
WO2017026387A1 (ja) 映像処理装置、映像処理方法および記録媒体
WO2022209648A1 (ja) 情報処理装置、情報処理方法および非一時的なコンピュータ可読記憶媒体
JP2010074437A (ja) アノテーション付与方法及び装置及びプログラム及びコンピュータ読み取り可能な記録媒体
TWI259711B (en) System and method for playing visual information again via network

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination