CN102860031A - 用于识别运动图像内容中包含的静止图像的装置和方法 - Google Patents

用于识别运动图像内容中包含的静止图像的装置和方法 Download PDF

Info

Publication number
CN102860031A
CN102860031A CN2011800169550A CN201180016955A CN102860031A CN 102860031 A CN102860031 A CN 102860031A CN 2011800169550 A CN2011800169550 A CN 2011800169550A CN 201180016955 A CN201180016955 A CN 201180016955A CN 102860031 A CN102860031 A CN 102860031A
Authority
CN
China
Prior art keywords
dynamic image
content
image
image content
rest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011800169550A
Other languages
English (en)
Inventor
田中和政
田中健司
高桥义博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102860031A publication Critical patent/CN102860031A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/48—Matching video sequences
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4828—End-user interface for program selection for searching program descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

用于识别一个或多个运动图像内容中的一个或多个静止图像的装置。识别单元被配置为识别运动图像内容中包括的具有与特定特征很相像的至少一个特征的一个或多个静止图像。显示控制器被配置为使得在与运动图像内容相关联的时间线上显示至少一个运动图像内容中所识别出的静止图像的位置。

Description

用于识别运动图像内容中包含的静止图像的装置和方法
技术领域
本发明涉及内容搜索装置、内容搜索方法和程序。更具体而言，本发明涉及以更易理解的方式显示在运动图像内容中搜索图像的结果以供用户确认的内容搜索装置、内容搜索方法和程序。
背景技术
下文中提出了一些针对图像（运动图像）内容的图像搜索的技术。
当要显示针对图像内容的图像搜索的结果时，惯常的做法是显示通过搜索获得的内容的第一帧的图像以及该内容的代表图像。或者，如果作为搜索的结果从内容中检测到与搜索图像相对应的帧，则显示这些帧。
另外，存在这样的技术，即，给定搜索结果的列表，允许检索到的内容被选择性再现以供图像确认，比如在例如日本专利申请早期公布2003-289487中描述的那种。
另外，在编辑内容的处理中，沿着时间轴指示内容的音频信号的波形的时间线显示近年来已被用于让用户更好地认识到被编辑的内容的时间长度和再现位置。
发明内容
然而，如果从搜索通常获得多个结果，则传统的技术不会使得搜索结果能够作为运动图像被相互比较。结果，很难或者不可能基于搜索结果来比较检索到的内容的内部包含什么。
例如，根据传统技术，缩略图或代表图像作为搜索结果被显示。用户在比较这些缩略图或代表图像所代表的多个内容时，除了从视觉上相互比较来自多个搜索结果的这些缩略图或代表图像以外，别无选择。
另外，根据传统技术，包括作为搜索的结果获得的图像的每个内容可被再现以供确认。然而，很难或者不可能同时再现多个搜索结果以便比较。
技术方案
本发明是鉴于上述情况而作出的，并且提供了用于以更易理解的方式显示在运动图像内容中搜索的结果以供用户确认的布置。
根据一个实施例，提供了用于识别一个或多个运动图像内容中的一个或多个静止图像的装置。
该装置包括识别单元，该识别单元被配置为识别运动图像内容中包括的具有与一个或多个特定特征很相像的至少一个特征的一个或多个静止图像。显示控制器被配置为使得在与运动图像内容相关联的时间线上显示运动图像内容中所识别出的静止图像的位置。
优选地，识别单元识别每个运动图像内容中的包含具有与特定特征很相像的特征的静止图像的场景；并且所述识别出的场景被显示。
在一个有利的实施例中，不同的运动图像内容被同时显示。
在另一实施例中，显示控制器使得在共同的时间线轴上对齐显示运动图像内容中所识别出的静止图像所位于的位置。
在另一实施例中，运动图像内容包括与运动图像内容相关联的音频信息，并且显示控制器使得显示运动图像内容的各个场景中的音频信息的信号波形的时间线。
在另一实施例中，显示控制器使得显示与运动图像内容之中的各个运动图像内容相关联的标记，该标记表示各个运动图像内容中的场景的持续时间。
有利地，显示控制器使得运动图像内容被再现，并且使得沿着上述时间线显示表示运动图像内容的当前再现位置的移动滑块。
作为一个特征，多个运动图像内容中所识别出的静止图像被同时显示。
本发明的有利效果
从而，可以以更易理解的方式显示在运动图像内容中搜索的结果以供用户确认。
附图说明
图1是示出作为本发明的一个实施例的内容搜索装置的典型结构的框图。
图2是示出典型搜索图像的示意图。
图3是示出搜索结果的典型显示画面的示意图。
图4是示出在图3的画面上再现的内容的典型画面的示意图。
图5是示出从图4的状态起随着时间的流逝进一步产生的内容的典型画面的示意图。
图6是示出反复再现的所选场景的典型画面的示意图。
图7是仅提取和显示包括与搜索图像相似的图像的场景的典型画面的示意图。
图8是说明典型内容输入处理的流程图。
图9是说明典型搜索结果显示处理的流程图。
图10是示出个人计算机的典型结构的框图。
具体实施方式
参考附图，图1是示出根据本发明的一个实施例的内容搜索装置的典型结构的框图。
此内容搜索装置10是让多个运动图像内容被存储在媒体存档库22中并且搜索存储的内容以寻找包括输入搜索图像的内容的装置。
如图1中所示，内容搜索装置10包括内容输入部21、媒体存档库22、图像处理部23、元数据数据库24以及图像特征量数据库25。另外，内容搜索装置10包括搜索图像输入部31、图像特征量提取部32、搜索部33以及搜索结果输出部34。
内容输入部21接收内容数据的输入。如上所述，内容是根据需要可包括声音和字幕的运动图像内容。例如，这些内容可以是作为要广播的TV节目的一部分被编辑的内容。
媒体存档库22存储从内容输入部21输入的内容数据。例如，媒体存档库22存储配备有用于标识各个内容的标识信息的大量内容数据并且允许根据需要检索和输出数据。
图像处理部23分析从内容输入部21提供来的内容数据并且从所提供的内容中提取元数据。在此上下文中，元数据通常指的是关于内容的场景变化点的信息，和关于提供后文所述的时间线显示所必要的时间点的信息，以及文件名和数据大小。另外，元数据可包括诸如内容中的音频信号的波形之类的信息。
图像处理部23提取的元数据用于如后文所述基于时间线显示的内容。例如，图像处理部23提取的元数据与内容标识信息相对应地被存储在元数据数据库24中。
另外，图像处理部23分析从内容输入部21提供来的内容数据，并且从所提供的内容中提取图像特征量。在此上下文中，图像特征量是在后文所述的搜索部33执行的处理中用来获得与搜索图像的相似度的信息。例如，在构成内容的一部分的单帧静止图像被分割成多个预定区域的情况下，可利用构成图像特征量的信息来描述这些区域中的每一个的代表色。又例如，图像特征量可以是由单帧静止图像的像素值的直方图形成的信息。作为另一示例，图像特征量可由在搜索部33进行的处理中提供与搜索图像的相似度的任何其他信息构成。
图像处理部23提取的图像特征量通常与内容标识信息和帧号相对应地被存储到图像特征量数据库25中。
搜索图像输入部31接收作为静止图像的搜索图像的输入。例如，搜索图像可以是由用户选择的任何图像。搜索图像被输入，由此媒体存档库22被搜索以寻找存储的内容中与输入的搜索图像相似的那些图像。
与图像处理部23一样，图像特征量提取部32从通过搜索图像输入部31输入的搜索图像中提取一个或多个特定的图像特征。
搜索部33根据预定的原则将图像特征量提取部32从搜索图像中提取的图像特征量（即一个或多个特定的图像特征）与存储在图像特征量数据库25中的图像特征量相比较。通过该比较，搜索部33以数值的形式计算一方面的搜索图像的图像特征量与另一方面的存储在图像特征量数据库25中的构成每个内容的每个单帧静止图像的图像特征量之间的相似度。
例如，搜索部33确定具有与搜索图像的图像特征量的相似度高于预定阈值的图像特征量的静止图像。搜索部33随后向搜索结果输出部34提供从中检测到这些静止图像的内容的标识信息以及这些图像的帧号，从而识别出内容中与搜索图像很相像的静止图像。如果从单个内容中检测到多个拥有与搜索图像的图像特征量的相似度高于预定阈值的图像特征量的静止图像，则搜索部33通常向搜索结果输出部34提供具有最高相似度的静止图像的帧号。
以上述方式，搜索部33确定从中检测到与搜索图像具有高相似度的静止图像的帧（即，与搜索图像相似的静止图像的帧）的内容，并且将这些内容通知给搜索结果输出部34。
基于从搜索部33提供来的关于内容的标识信息，搜索结果输出部34从元数据数据库24中检索出内容的元数据。并且搜索结果输出部34包括显示控制器以基于从搜索部33馈送来的静止图像的帧号和检索到的元数据来生成用于显示搜索结果的显示数据。
从搜索结果输出部34输出的显示数据通常被发送到未示出的显示设备以便作为图像来显示，如后文所述。在替换实施例中，显示设备可被包括在搜索结果输出部34中。
接下来说明内容搜索装置10如何显示搜索的结果的示例。
图2是示出通过搜索图像输入部31输入的典型搜索图像（静止图像）的示意图。此示例构成指示导弹及其发射台的图像。
搜索图像可被布置为被显示在显示设备上或者不被显示在其上。
图3是基于从搜索结果输出部34输出的显示数据在未示出的显示设备上显示的典型画面的示意图。图3指示了当在图2的搜索图像通过搜索图像输入部31输入的情况下在媒体存档库22中存储的内容中执行了搜索时显示的画面的示例。
图3中所示的画面具有搜索结果显示区域51。此示例示出了指示七个内容的搜索结果显示区域51，从这七个内容中检测到了与图2的搜索图像具有高相似度的静止图像。并且搜索结果显示区域51具有区域51-1至51-7，其中每一个显示关于上述七个内容中的每一个的信息。
区域51-1显示关于第一内容的信息。
静止图像显示区域52-1是显示从第一内容中检测到的与搜索图像具有高相似度的静止图像的区域。在静止图像显示区域52-1中的静止图像上方示出的标注“4113889.asf”是标识第一内容的标识信息。
时间线显示区域53-1是提供关于第一内容的时间线显示的区域。在图中，水平方向对应于内容的时间轴。
在此上下文中，关于内容的时间线显示是在以使得用户可从视觉上认识到内容的时间长度以及内容内的场景和帧的时间位置的方式显示给定内容时提供的。并且，虽然关于内容的时间线显示涉及以某种方式显示所涉内容，但这并不意味着该内容将被作为运动图像再现和显示。例如，给定内容的时间线显示意味着表示该内容或其成分的图形、波形、符号等等被沿着时间轴显示。
时间线显示区域53-1中显示的倒三角符号61-1指示在静止图像显示区域52-1中显示的第一内容的该静止图像帧的时间位置。
时间线显示区域53-1中示出的波形显示区域62-1是显示第一内容中包括的声音的信号波形的区域。或者，波形显示区域62-1可显示图像的波形。又或者，时间线显示区域53-1可被布置为不包括波形显示区域62-1。
时间线显示区域53-1中示出的场景显示区域63-1是显示第一内容中的场景的表示的区域。场景显示区域63-1以宽度（即长度）对应于所涉场景的时间长度的矩形的形式显示第一内容中的每个场景的表示。也就是说，可看到场景显示区域63-1显示三个矩形，这意味着第一内容由三个场景构成。每个场景的开始点和结束点是基于从元数据数据库24检索到的元数据中包括的场景变化点信息来确定的。每个场景的开始点和结束点随后用于在场景显示区域63-1中显示与所涉场景相对应的矩形。
场景显示区域63-1中的每个矩形是以代表相应场景的颜色显示的。给定场景的代表色通常可被确定为与构成所涉场景内的所有帧的像素值之中的最大数目的像素值相对应的颜色。或者，每个场景的代表色可按某种其他适当方式来确定。简言之，适合于所关注的场景的任何颜色可被为该场景的代表色。
例如，可通过在生成显示数据时分析相应内容的数据来确定给定场景的代表色。作为另一示例，可预先确定每个场景的代表色并将其包括在相关元数据中。
类似地，区域51-2显示关于第二内容的信息。也就是说，静止图像显示区域52-2显示从第二内容中检测到的与搜索图像具有高相似度的静止图像。时间线显示区域53-2是提供第二内容的时间线显示的区域。
另外，区域51-3至51-7以与区域51-1和51-2相同的方式分别显示关于第三至第七内容的信息。
在接下来的描述中，只要无需区分各个区域或符号，各个静止图像显示区域可被统称为静止图像显示区域52；各个时间线显示区域可类似地被统称为时间线显示区域53；并且各个符号也可被统称为符号61。
如图3中所示，时间线显示区域53-1至53-7在水平方向上具有相同长度。并且在时间线显示区域53-1至53-7中，符号61-1至61-7在图3的水平方向上具有相同位置。也就是说，这些符号在时间线显示区域的共同轴上对齐，从而描绘了与搜索图像很相像的静止图像帧在各个内容的场景中的位置。
也就是说，搜索结果输出部34如下确定各个显示区域的显示位置。
在第一至第七内容中，从其开始时间直到符号61的时间长度最长的内容的开始位置与时间线显示区域53的最左侧位置对齐。在图3中，第四内容的开始位置与时间线显示区域53的最左侧位置对齐。另外，在第一至第七内容中，从其结束时间直到符号61的时间长度最长的内容的结束位置与时间线显示区域53的最右侧位置对齐。在图3中，第四和第五内容的结束位置与时间线显示区域53的最右侧位置对齐。
由于搜索部33已经如上所述确定了与搜索图像具有高相似度的静止图像的帧号，所以可以确定从给定内容的开始时间或结束时间到符号61的时间长度。
并且，基于第四和第五内容的时间长度，确定水平方向上时间线显示区域53的单位长度所对应的时间。
例如，搜索结果输出部34将图3中显示的符号61的水平方向上的位置定义为时间线显示区域53的中心。这进而确定了区域51-1至51-7中显示的波形显示区域62和场景显示区域63的位置。并且搜索结果输出部34生成用于显示如图3中所示那样的图像的显示数据。
在此示例中，时间线显示区域53的波形显示区域62中显示的波形被示为是与时间轴一致地显示的。或者，可以以某种其他适当的方式提供内容的时间线显示。例如，时间线显示区域53如上所述可被布置为不包括波形显示区域62。简言之，只需要以使得用户可容易认识到其时间轴的方式来显示内容。
并且图3中所示的按钮71通常被用作构成GUI的一部分的搜索开始按钮。例如，在图2中所示的搜索图像输入之后，操作按钮71将执行对与输入的搜索图像具有高相似度的静止图像的搜索。也就是说，图3的画面是在用户操作了按钮71后显示的画面。
图3中所示的按钮72通常构成GUI的一部分并且用于发出在图3中的区域51-1至51-7中再现内容的命令。类似地，图3中的按钮73通常用作停止通过操作按钮72而开始的内容的再现的按钮。
如果在图3的状态中按钮72被操作，则区域51-1至51-7中的内容开始被再现，这使得图4中所示的画面被显示。
随着在图4的画面上开始内容的再现，指示再现位置的移动滑块64出现在时间线显示区域53中。滑块64通常被显示为红色的矩形框。随着时间流逝，滑块移动，并且其长度在图4的水平方向上增大。滑块64的最右侧位置表示内容的当前再现位置。
在图4的示例中，从内容再现开始以来只经过了较短的时间，从而只有第四内容的运动图像正被再现。也就是说，滑块64-4被显示为重叠在波形显示区域62-4中出现的波形上。滑块64-4的最右侧位置大致位于场景显示区域63-4中显示的最左侧矩形的中心。同时，滑块64-1至64-3和64-5至64-7的最右侧位置尚未到达场景显示区域63-1至63-3和63-5至63-7中分别显示的最左侧矩形。也就是说，与显示区域51-1至51-3和51-5至51-7相关联的第一至第三和第五至第七内容的再现尚未开始。
从而，在图4的示例中，只有第四内容的运动图像当前正被再现；被再现的图像被显示在再现图像显示区域54-4中。也就是说，再现图像显示区域54-4显示通过再现第四内容而获得的运动图像。
由于在图4的示例中内容已经开始被再现，所以按钮72充当在被操作时暂时停止内容再现的“暂停”按钮。
随着从如图4中所示显示的画面的状态起更多时间流逝，图5中所示的画面出现。
在图5的示例中，随着从内容再现开始以来更多的时间流逝，滑块64被示为在水平方向上比图4中更长。与此相伴，在图5的示例中除了第四内容以外第二和第三内容现在也被再现。
也就是说，滑块64-2至64-4被示为分别重叠在波形显示区域62-2至62-4中显示的波形上。并且滑块64-2至64-4的最右侧位置各自位于场景显示区域63-2至63-4中显示的矩形之一上。
从而，在图5的示例中，第二至第四内容的运动图像被再现。再现图像被显示在再现图像显示区域54-2至54-4中。也就是说，再现图像显示区域54-2至54-4分别显示通过再现第二至第四内容而获得的运动图像。
随着从显示图4的画面的状态以来更多的时间流逝，滑块64在图5的水平方向上进一步移动。然后，第五、第六、第一和第七内容开始被一个接一个地再现。从而，再现图像显示区域54-5、54-6、54-1和54-7显示通过再现相应内容而获得的运动图像。也就是说，不同的运动图像内容被同时显示。
并且，当滑块64的最右侧位置在图5的垂直方向上与符号61一致时，静止图像显示区域52中示出的图像被显示在再现图像显示区域54中，因为每个内容中的该图像现在正被再现。这使得用户可以选择性地查看第一至第七内容是如何被编辑的以及它们的与搜索图像具有高相似度的图像是如何被显示的。也就是说，用户不仅能够确认对象图像（即，与搜索图像相似的图像）位于内容中的何处，而且能够以运动图像的形式比较每个对象图像前后的图像。
另外，在显示内容搜索装置10执行的搜索的结果的画面上，用户可选择时间线显示区域53的场景显示区域63中的矩形，这使得与所选矩形相对应的场景被反复再现。如上所述，场景显示区域63中的每个矩形是对应于所涉内容的相关场景来显示的。
例如，假定用户希望反复再现包括关于第二内容的静止图像显示区域52-2中显示的图像的场景。在此情况下，用户选择时间线显示区域53-2的场景显示区域63-2中显示的矩形之中从左侧起的第五个矩形。基于在图5的垂直方向上符号61-2的位置，可以看出在静止图像显示区域52-2中显示的图像被包括在第二内容的第五场景中。
在该情况下，显示图6中所示的画面。在图6的示例中，在时间线显示区域53-2的场景显示区域63-2中显示的矩形之中，选择并突出从左侧起的第五矩形63-2a。这使得再现图像显示区域54-2将与矩形63-2a相对应的场景的运动图像从所涉场景的开始时间到结束时间反复显示。
这里假定场景显示区域63中的每个矩形被显示为GUI的一部分并且用户通常操作未示出的指点设备等来选择场景显示区域63中的任何矩形。
在该情况下，不仅第二内容，而且第一以及第三至第七内容也被反复再现。也就是说，再现图像显示区域54将所有内容中与矩形63-2a相对应的那些场景的运动图像从每个场景的开始时间显示到结束时间。
例如，在第一内容的情况下，在再现图像显示区域54-1中反复显示从第二场景的中途点到第三场景的中途点的运动图像。另外，在第三内容的情况下，在再现图像显示区域54-3中反复显示从第六场景的开头附近经过整个第七场景直到第八场景的中途点的运动图像。
如上所述，无论从哪个内容中选择了哪个场景，搜索结果显示区域51中显示的所有内容都被再现。在图6的示例中，滑块64的最右侧位置位于符号61的稍右侧。因此，在静止图像显示区域52中示出的图像之后立即再现的图像被显示在再现图像显示区域54中。在此情况下，正被发射的导弹的图像被显示在再现图像显示区域54中。
在图6的示例中，从场景显示区域63-2中显示的矩形之中选择从左侧起的第五矩形，从而所有内容在与符号61相对应的位置被再现。从而，静止图像显示区域52-1至52-7中显示的图像分别被包括在再现图像显示区域54-1至54-7中反复再现的运动图像中。利用此布置，用户能够通过关注各个内容的目标图像来以运动图像的形式比较性地查看各个内容。
另外，内容搜索装置10可从内容中仅提取包括与搜索图像相似的图像的场景。例如，通过对内容搜索装置10的未示出的操作部进行操作，用户可发出显示包括与搜索图像相似的图像的场景的列表的命令。
图7是显示包括与搜索图像相似的图像的场景的列表的典型画面的示意图。这是当例如作为利用图2中的图像作为搜索图像在内容中搜索的结果显示图3的画面时出现的典型画面。也就是说，图7的示例中的搜索图像和搜索结果与以上参考图3所述的那些相同。
在图7中，垂直排列的区域101-1至101-7显示第一至第七内容中的包括与目标或搜索图像相似的图像的那些场景。这里，区域101-1至101-7的水平方向对应于场景的时间轴。各个场景被显示为长度反映每个场景的时间长度的矩形112-1至112-7。
在图7中，区域102-1至102-7显示从各个内容中检测到的作为与搜索图像具有高相似度的图像的静止图像。也就是说，区域102-1至102-7中显示的图像与图3中的静止图像显示区域52-1至52-7中显示的那些相同。
在图7中，倒三角符号111-1至111-7指向矩形112-1至112-7所表示的场景中的特定位置。这样由符号指示的位置包括在区域102-1至102-7中显示的图像。如图7中所示，矩形112-1至112-7各自是以使得符号111-1至111-7在图的垂直方向上处于相同位置的方式来显示的。
例如，在区域101-1至101-7中显示的场景中，从其开始时间直到符号111的时间长度最长的场景的开始位置与区域101的最左侧位置对齐。在此情况下，从最上方起的第二和第三场景的开始位置与区域101的最左侧位置对齐。另外，在区域101-1至101-7中显示的场景中，从其结束时间直到符号111的时间长度最长的场景的结束位置与区域101的最右侧位置对齐。在此情况下，从最上方起的第六场景的结束位置与区域101的最右侧位置对齐。
并且，与从其开始时间直到符号111的时间长度最长的场景相对应的矩形112-2的最左侧边缘112-2a被突出显示，其方式通常是利用特定的颜色（例如红色）。类似地，与从其结束时间直到符号111的时间长度最长的场景相对应的矩形112-6的最右侧边缘112-6b被突出显示，其方式通常是利用特定的颜色（例如蓝色）。
当如上所述给出显示时，用户可容易地比较整个场景的时间长度、场景的从开始时间直到显示目标图像的点（即直到符号111）的时间长度，以及场景的从显示目标图像的点直到结束时间的时间长度。
通过上述比较，通常当要利用蓄积在媒体存档库22中的内容数据编辑新内容时，容易检测适当的场景。另外，可以通过比如删除很有可能彼此重叠的场景来高效地管理媒体存档库22。另外，即使最后一刻改变了广播时间表，也容易确认要广播哪个内容。
过去，当显示在内容中进行图像搜索的结果时，惯常的做法是显示作为搜索的结果获得的每个内容的第一帧的图像或者代表图像。在从内容中检测到与搜索图像相对应的帧的情况下，显示这些帧的图像。
然而，在从搜索获得多个结果的情况下，很难或者不可能利用传统技术以运动图像的形式比较这些结果。因此，不可能或者至少很难基于搜索的结果来比较内容的内部包含什么。例如，当传统上作为搜索的结果显示缩略图或代表图像时，用户除了通过视觉上查看源于多个搜索结果的这些缩略图或代表图像来比较这些内容的内部包含什么以外，别无选择。另外，虽然传统技术允许了再现包含从搜索获得的图像的每个内容以用于确认，但极难同时比较构成作为运动图像显示的多个内容的多个搜索结果。
与之不同，根据本发明，如以上参考图3至7所述，在运动图像内容中搜索图像的结果可作为多个运动图像内容被同时确认。因此，在运动图像内容中搜索的结果被以更易理解的方式显示来供用户确认。
接下来参考图8的流程图说明图1中的内容搜索装置10执行的典型内容输入处理。
在步骤S21中，内容输入部21接收内容数据的输入。如上所述，输入的内容是根据需要可包括声音和字幕的运动图像内容。例如，这些内容是作为要广播的TV节目的一部分被编辑的内容。
在步骤S22中，图像处理部23分析在步骤S21中从内容输入部21提供来的内容数据。
在步骤S23中，图像处理部23基于步骤S22中的分析的结果提取元数据。在此上下文中，元数据通常指的是关于内容的场景变化点的信息，和关于提供后文所述的时间线显示所必要的时间点的信息，以及文件名和数据大小。
在步骤S24中，元数据数据库24存储在步骤S23中提取的元数据。元数据通常是与内容标识信息相对应地存储的。
在步骤S25中，图像处理部23基于步骤S22中的分析提取图像特征量（例如，特定的特征）。在此上下文中，图像特征量是在搜索部33执行的处理中用来获得与搜索图像的相似度的信息。例如，在构成内容的一部分的单帧静止图像被分割成多个预定区域的情况下，可利用构成图像特征量的信息来描述这些区域中的每一个的代表色。作为另一示例，图像特征量可以是由单帧静止图像的像素值的直方图形成的信息。
在步骤S26中，图像特征量数据库25存储在步骤S25中提取的图像特征量。图像特征量通常是与内容标识信息和帧号相对应地存储的。
在步骤S27中，媒体存档库22存储在步骤S21中接收到输入的内容的数据。通常，媒体存档库22将内容数据与用于标识各个内容的标识信息一起存储。
内容如上所述被输入并存储到媒体存档库22中。
接下来参考图9的流程图说明图1中的内容搜索装置10执行的典型搜索结果显示处理。
在步骤S41中，搜索图像输入部31接收作为静止图像的搜索图像的输入。搜索图像可以是用户选择的任何图像，并且被输入以搜索媒体存档库22中存储的内容来寻找与所涉搜索图像相似的图像。
在步骤S42中，从在步骤S41中通过搜索图像输入部31输入的搜索图像中，图像特征量提取部32以与步骤S25中相同的方式提取图像特征量。
在步骤S44中，搜索部33根据预定的原则将在步骤S43中从搜索图像中提取的图像特征量与存储在图像特征量数据库25中的图像特征量相比较。通过该比较，搜索部33以数值的形式计算一方面的搜索图像的图像特征量与另一方面的存储在图像特征量数据库25中的构成每个内容的每个单帧静止图像的图像特征量之间的相似度。
在步骤S45中，搜索部33确定具有与搜索图像的图像特征量的相似度通常高于预定阈值的图像特征量的静止图像，并且确定关于从中检测到这些静止图像的内容的标识信息以及这些静止图像的帧号。如果从单个内容中检测到多个拥有与搜索图像的图像特征量的相似度高于预定阈值的图像特征量的静止图像，则搜索部33通常确定具有最高相似度的静止图像的帧号。
以上述方式，媒体存档库22中存储的内容被搜索以寻找包括与在步骤S41中接收到输入的搜索图像相似的图像的那些内容。
在步骤S46中，搜索部33将步骤S45中的搜索的结果通知给搜索结果输出部34。在此情况下，通常向搜索结果输出部34提供关于包括与搜索图像相似的静止图像的内容的标识信息以及这些静止图像的帧号。
在步骤S47中，搜索结果输出部34基于在步骤S46中提供的信息生成用于显示搜索结果的显示数据。例如，基于内容标识信息，搜索结果输出部34从元数据数据库24中读取关于所涉内容的元数据，并且基于静止图像的帧号和检索到的元数据生成用于显示搜索结果的显示数据。
从搜索结果输出部34输出的显示数据通常被发送到显示设备以便作为图像来显示，如后文所述。其结果是，例如以上参考图3所述那样的画面被显示在显示设备上。
以后，响应于对显示画面等的GUI操作，搜索结果输出部34生成用于显示例如图4至7中所示那样的画面的适当显示数据。
以上述方式，执行搜索结果显示处理。
在以上参考图1所述的示例中，内容搜索装置10被说明为包括内容输入部21和图像处理部23。或者，内容搜索装置10可被布置为不包括内容输入部21和图像处理部23。也就是说，只需要通过搜索各自预先存储有数据的媒体存档库22、元数据数据库24和图像特征量数据库25以寻找包括与搜索图像相似的图像的内容，来生成显示数据。
并且，在以上描述中，用于显示内容搜索装置10进行的搜索的结果的显示画面被示为在内容的时间轴被设定为对应于图的水平方向的情况下提供内容的时间线显示。或者，内容可按其时间轴被布置为对应于图的垂直方向的方式被示出在时间线显示上。
顺便说一下，上述一系列处理可用硬件或用软件来执行。在要执行基于软件的处理的情况下，构成软件的程序可安装在诸如RAM或非易失性存储器之类的非暂态计算机可读存储介质上，通过网络或从记录介质安装到包含在专用硬件中的计算机中。这种程序可从记录介质安装到例如图10中所示的通用计算机700那样的计算机或者能够基于安装的程序执行不同功能的类似设备中。
在图10中，CPU（中央处理单元）701根据存储在ROM（只读存储器）702中的程序或者按照从记录部708加载到RAM（随机访问存储器）703中的程序执行各种处理。另外，RAM 703可容纳CPU 701执行不同处理所必要的数据。
CPU 701、ROM 702和RAM 703经由总线704互连。输入/输出接口705也连接到总线704。
输入/输出接口705与通常由键盘和鼠标构成的输入部706连接，并且与通常由诸如LCD（液晶显示器）之类的显示设备和扬声器组成的输出部700连接。输入/输出接口705还与通常由硬盘形成的记录部708连接并且与通常由调制解调器和/或诸如LAN卡之类的网络接口卡构成的通信部709连接。通信部709处理通过包括因特网在内的网络进行的通信。
驱动器710也根据需要连接到输入/输出接口705。诸如磁盘、光盘、磁光盘或半导体存储器之类的可移除介质711可附接到驱动器710。从可移除介质读取的计算机程序根据需要被安装到记录部708中。
在要用软件执行上述一系列处理的情况下，构成软件的程序是通过包括因特网在内的网络或从诸如可移除介质711之类的记录介质安装在存储介质上的。
记录介质不仅是作为与图10中所示的装置本身分开并且由磁盘（包括软盘（注册商标））、光盘（包括CD-ROM（致密盘-只读存储器）和DVD（数字多功能盘））、磁光盘（包括MD（袖珍盘；注册商标））或半导体存储器构成的各自容纳程序的可移除介质711被提供来向用户分发程序的；而且还是以各自容纳程序并预先被包含在用户的装置中的ROM702或记录部708中的硬盘的形式被提供来向用户分发程序的。
在本说明书中，上述一系列处理不仅包括以所示顺序（即基于时序）执行的处理，而且包括可并行或分别执行而不一定按时间顺序执行的处理。
应当理解，本发明在实现时不限于上述实施例，而是可有各种修改。例如，图1中的内容搜索装置10的各种组件可在可连接到诸如因特网之类的网络的一个或多个设备或服务器中实现。上述的一些功能可在远离装置10的地点处执行。可对本发明进行其他变化和替换，只要它们在所附权利要求或其等同物的范围内即可。

Claims (20)

1.一种用于识别一个或多个运动图像内容中的一个或多个静止图像的装置，所述装置包括：
识别单元，该识别单元被配置为识别所述一个或多个运动图像内容中包括的具有与一个或多个特定特征很相像的一个或多个特征的一个或多个静止图像；以及
显示信息生成器，该显示信息生成器被配置为生成用于使得在与所述一个或多个运动图像内容相关联的时间线上显示在至少一个所述运动图像内容中所识别出的静止图像的位置的信息。
2.如权利要求1所述的装置，其中，所述识别单元将所述一个或多个特定特征与所述一个或多个运动图像内容中的静止图像的相应特征相比较。
3.如权利要求1所述的装置，其中，所述识别单元识别每个所述运动图像内容中的包含具有与所述一个或多个特定特征很相像的特征的静止图像的场景；并且
其中，所述显示信息生成器生成用于使得显示所述识别出的场景的信息。
4.如权利要求1所述的装置，其中，所述显示信息生成器可操作来生成用于使得不同的运动图像内容被同时显示的信息。
5.如权利要求1所述的装置，其中，所述显示信息生成器生成用于使得在共同的时间线轴上对齐地显示所述一个或多个运动图像内容中、所识别出的静止图像所位于的位置的信息。
6.如权利要求1所述的装置，其中，所述运动图像内容包括与所述一个或多个运动图像内容相关联的音频信息，并且其中，所述显示信息生成器生成用于使得显示各个所述运动图像内容中的所述音频信息的信号波形的时间线的信息。
7.如权利要求3所述的装置，其中，所述显示信息生成器生成用于使得显示与所述运动图像内容之中的各个运动图像内容相关联的、表示所述各个运动图像内容中的场景的持续时间和/或颜色的标记的信息。
8.如权利要求1所述的装置，其中，所述显示信息生成器生成用于使得所述运动图像内容被再现并且使得沿着所述时间线显示表示所述运动图像内容的当前再现位置的移动滑块的信息。
9.如权利要求1所述的装置，其中，所述显示信息生成器生成用于使得同时显示多个所述运动图像内容中所识别出的静止图像的信息。
10.如权利要求1所述的装置，其中，所述显示信息生成器生成用于使得所述运动图像内容被再现并且使得同时显示所述运动图像内容中所识别出的静止图像的信息。
11.如权利要求1所述的装置，其中，所述识别单元识别每个所述运动图像内容中的、包含具有与所述一个或多个特定特征很相像的特征的静止图像的场景；并且
其中，所述显示信息生成器生成用于使得在共同的时间线轴上对齐地显示所述识别出的场景中的所识别出的静止图像的时间位置的信息。
12.一种用于识别一个或多个运动图像内容中的一个或多个静止图像的方法，所述方法包括：
识别所述一个或多个运动图像内容中包括的具有与一个或多个特定特征很相像的一个或多个特征的一个或多个静止图像；以及
使得在与所述一个或多个运动图像内容相关联的时间线上显示在至少一个所述运动图像内容中所识别出的静止图像的位置。
13.如权利要求12所述的方法，其中，通过将所述一个或多个特定特征与所述一个或多个运动图像内容中的静止图像的相应特征相比较来识别所述一个或多个静止图像。
14.如权利要求12所述的方法，其中，每个所述运动图像内容中的包含具有与所述一个或多个特定特征很相像的特征的静止图像的场景被识别；并且其中，所述识别出的场景被显示。
15.如权利要求12所述的方法，其中，不同的运动图像内容被同时显示。
16.如权利要求12所述的方法，还使得在共同的时间线轴上对齐地显示所述一个或多个运动图像内容中、所识别出的静止图像所位于的位置。
17.如权利要求12所述的方法，其中，所述运动图像内容包括与所述一个或多个运动图像内容相关联的音频信息，并且所述方法还包括显示各个所述运动图像内容中的所述音频信息的信号波形的时间线。
18.如权利要求14所述的方法，还包括显示与所述运动图像内容之中的各个运动图像内容相关联的、表示所述各个运动图像内容中的场景的持续时间和/或颜色的标记。
19.如权利要求12所述的方法，还包括再现所述运动图像内容，并且沿着所述时间线显示移动滑块，所述移动滑块表示运动图像内容的当前再现位置。
20.一种编码有指令的非暂态计算机可读介质，所述指令当被计算机读取时执行用于识别一个或多个运动图像内容中的一个或多个静止图像的方法，该方法包括：
识别所述一个或多个运动图像内容中包括的具有与一个或多个特定特征很相像的一个或多个特征的一个或多个静止图像；以及
使得在与所述一个或多个运动图像内容相关联的时间线上显示至少一个所述运动图像内容中所识别出的静止图像的位置。
CN2011800169550A 2010-04-09 2011-04-04 用于识别运动图像内容中包含的静止图像的装置和方法 Pending CN102860031A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010090606A JP2011223325A (ja) 2010-04-09 2010-04-09 コンテンツ検索装置および方法、並びにプログラム
JP2010-090606 2010-04-09
PCT/JP2011/001995 WO2011125322A1 (en) 2010-04-09 2011-04-04 Apparatus and method for identifying a still image contained in moving image contents

Publications (1)

Publication Number Publication Date
CN102860031A true CN102860031A (zh) 2013-01-02

Family

ID=44762293

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011800169550A Pending CN102860031A (zh) 2010-04-09 2011-04-04 用于识别运动图像内容中包含的静止图像的装置和方法

Country Status (7)

Country Link
US (2) US9594957B2 (zh)
EP (1) EP2556663A1 (zh)
JP (1) JP2011223325A (zh)
KR (1) KR20130045248A (zh)
CN (1) CN102860031A (zh)
BR (1) BR112012025207A2 (zh)
WO (1) WO2011125322A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754274A (zh) * 2013-12-26 2015-07-01 佳能株式会社 图像再现装置及其控制方法
CN104780362A (zh) * 2015-04-24 2015-07-15 宏祐图像科技(上海)有限公司 基于局部特征描述的视频静止logo检测方法
CN106802717A (zh) * 2017-01-20 2017-06-06 深圳奥比中光科技有限公司 空间手势遥控方法及电子设备

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011223325A (ja) * 2010-04-09 2011-11-04 Sony Corp コンテンツ検索装置および方法、並びにプログラム
WO2012174301A1 (en) 2011-06-14 2012-12-20 Related Content Database, Inc. System and method for presenting content with time based metadata
CN102867529B (zh) * 2012-09-05 2015-07-15 杭州天视智能系统有限公司 多媒体视频时间轴的展现方法、装置、播放方法及播放器
KR20150125947A (ko) * 2013-03-08 2015-11-10 톰슨 라이센싱 리스트 구동 선택 프로세스를 이용하여 비디오 및 미디어 시간 기반 편집을 개선하는 방법 및 장치
US20140372419A1 (en) * 2013-06-13 2014-12-18 Microsoft Corporation Tile-centric user interface for query-based representative content of search result documents
WO2015107775A1 (ja) * 2014-01-17 2015-07-23 株式会社日立製作所 映像情報処理システム
CN105426530B (zh) * 2015-12-15 2017-05-10 徐庆 一种商标检索方法、装置和系统
JP6478162B2 (ja) * 2016-02-29 2019-03-06 株式会社Ｈｅａｒｒ 携帯端末装置およびコンテンツ配信システム
KR102673322B1 (ko) 2018-11-14 2024-06-10 삼성전자주식회사 영상 및 오디오 처리 장치 및 그 동작 방법
KR20240025993A (ko) * 2022-08-19 2024-02-27 삼성전자주식회사 영상 정보를 제공하는 디스플레이 장치 및 그 제어 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000115684A (ja) * 1998-09-29 2000-04-21 Sony Corp 画像編集装置及びその方法
CN1695371A (zh) * 2002-11-19 2005-11-09 日本电气株式会社 影像阅览系统及方法
JP2006039753A (ja) * 2004-07-23 2006-02-09 Canon Inc 画像処理装置、画像処理方法
CN1822665A (zh) * 2004-12-13 2006-08-23 索尼株式会社 编辑装置、编辑方法和编辑程序
CN1893614A (zh) * 2005-06-28 2007-01-10 三星电子株式会社 根据数字键输入播放内容的设备和方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2323991B (en) * 1997-04-04 1999-05-12 Questech Ltd Improvements in and relating to the processing of digital video images
JP4090936B2 (ja) 2003-04-17 2008-05-28 Ｋｄｄｉ株式会社 動画像検索装置
JPWO2005050986A1 (ja) * 2003-11-19 2007-07-12 独立行政法人情報通信研究機構 映像内容の提示方法及び装置
JP3839839B2 (ja) * 2004-06-25 2006-11-01 株式会社セブンスディメンジョンデザイン 医療画像管理システム及び医療画像管理方法
JP4411392B2 (ja) * 2004-07-16 2010-02-10 独立行政法人情報通信研究機構 録画情報提示方法及び装置
GB2424091A (en) * 2005-03-11 2006-09-13 Alamy Ltd Ranking of images in the results of a search
JP4559935B2 (ja) * 2005-08-25 2010-10-13 株式会社東芝 画像記憶装置及び方法
US7739599B2 (en) * 2005-09-23 2010-06-15 Microsoft Corporation Automatic capturing and editing of a video
JP4982065B2 (ja) * 2005-09-26 2012-07-25 株式会社東芝 映像コンテンツ表示システム、映像コンテンツ表示方法及びそのプログラム
US20070153091A1 (en) * 2005-12-29 2007-07-05 John Watlington Methods and apparatus for providing privacy in a communication system
JP4618166B2 (ja) * 2006-03-07 2011-01-26 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
JP4909854B2 (ja) * 2007-09-27 2012-04-04 株式会社東芝 電子機器および表示処理方法
US8768137B2 (en) * 2007-12-14 2014-07-01 Microsoft Corporation Program segments display bar
US8117204B2 (en) * 2008-02-04 2012-02-14 Fuji Xerox Co., Ltd. Video browser for navigating linear video on small display devices using a similarity-based navigation hierarchy of temporally ordered video keyframes with short navigation paths
JP4989516B2 (ja) * 2008-02-27 2012-08-01 キヤノン株式会社 表示制御装置、撮像装置及び表示制御方法、プログラム並びに記憶媒体
JP5231928B2 (ja) * 2008-10-07 2013-07-10 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
US9202137B2 (en) * 2008-11-13 2015-12-01 Google Inc. Foreground object detection from multiple images
US8881012B2 (en) * 2009-11-17 2014-11-04 LHS Productions, Inc. Video storage and retrieval system and method
JP2011223325A (ja) * 2010-04-09 2011-11-04 Sony Corp コンテンツ検索装置および方法、並びにプログラム
JP2011223326A (ja) * 2010-04-09 2011-11-04 Sony Corp コンテンツ処理装置および方法、並びにプログラム
US8418467B2 (en) * 2010-06-29 2013-04-16 General Electric Company System including feedwater heater for extracting heat from low pressure steam turbine
US8745500B1 (en) * 2012-12-10 2014-06-03 VMIX Media, Inc. Video editing, enhancement and distribution platform for touch screen computing devices
CN105474213B (zh) * 2013-07-30 2019-12-03 柯达阿拉里斯股份有限公司 用于创建可操纵视图的系统及方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000115684A (ja) * 1998-09-29 2000-04-21 Sony Corp 画像編集装置及びその方法
CN1695371A (zh) * 2002-11-19 2005-11-09 日本电气株式会社 影像阅览系统及方法
JP2006039753A (ja) * 2004-07-23 2006-02-09 Canon Inc 画像処理装置、画像処理方法
CN1822665A (zh) * 2004-12-13 2006-08-23 索尼株式会社 编辑装置、编辑方法和编辑程序
CN1893614A (zh) * 2005-06-28 2007-01-10 三星电子株式会社 根据数字键输入播放内容的设备和方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754274A (zh) * 2013-12-26 2015-07-01 佳能株式会社 图像再现装置及其控制方法
CN104780362A (zh) * 2015-04-24 2015-07-15 宏祐图像科技(上海)有限公司 基于局部特征描述的视频静止logo检测方法
CN106802717A (zh) * 2017-01-20 2017-06-06 深圳奥比中光科技有限公司 空间手势遥控方法及电子设备

Also Published As

Publication number Publication date
US20170140226A1 (en) 2017-05-18
WO2011125322A1 (en) 2011-10-13
US9881215B2 (en) 2018-01-30
JP2011223325A (ja) 2011-11-04
US9594957B2 (en) 2017-03-14
EP2556663A1 (en) 2013-02-13
BR112012025207A2 (pt) 2017-06-27
KR20130045248A (ko) 2013-05-03
US20130077876A1 (en) 2013-03-28

Similar Documents

Publication Publication Date Title
CN102860031A (zh) 用于识别运动图像内容中包含的静止图像的装置和方法
CN112740713B (zh) 用于提供多媒体内容中的关键时刻的方法及其电子设备
Boreczky et al. An interactive comic book presentation for exploring video
US8971633B2 (en) Content retrieval to facilitate recognizing content details of a moving image
US9510044B1 (en) TV content segmentation, categorization and identification and time-aligned applications
CN102823265A (zh) 内容处理装置和方法及程序
US10129515B2 (en) Display control device, recording control device, and display control method
US20090158323A1 (en) Method and apparatus for video navigation
US20110243529A1 (en) Electronic apparatus, content recommendation method, and program therefor
CN101398843B (zh) 用于浏览视频概要描述数据的设备及方法
JP5135024B2 (ja) コンテンツのシーン出現を通知する装置、方法およびプログラム
US10014029B2 (en) Video processing apparatus and method
KR101440168B1 (ko) 개요 및 리포트를 이미 포함하는 시청각 도큐먼트의 새로운 개요를 생성하기 위한 방법 및 상기 방법을 구현할 수 있는 수신기
JPH1139343A (ja) 映像検索装置
JP2014130536A (ja) 情報管理装置、サーバ及び制御方法
JP2013105502A (ja) 画像処理装置、及び画像処理装置の制御方法
US20140189769A1 (en) Information management device, server, and control method
KR20080064364A (ko) 장면 검색 방법 및 장치
JP2006332765A (ja) コンテンツ検索・再生方法、コンテンツ検索・再生装置、並びにプログラムおよび記録媒体
CN117132925B (zh) 一种体育赛事的智能场记方法及装置
Bailer et al. Skimming rushes video using retake detection
JP2007201815A (ja) 表示装置、再生装置、方法、及びプログラム
JP5840026B2 (ja) コンテンツ蓄積装置及びコンテンツ蓄積方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130102