CN1972414A - 信息处理装置、成像设备、信息处理方法以及计算机程序 - Google Patents
信息处理装置、成像设备、信息处理方法以及计算机程序 Download PDFInfo
- Publication number
- CN1972414A CN1972414A CNA2006101689356A CN200610168935A CN1972414A CN 1972414 A CN1972414 A CN 1972414A CN A2006101689356 A CNA2006101689356 A CN A2006101689356A CN 200610168935 A CN200610168935 A CN 200610168935A CN 1972414 A CN1972414 A CN 1972414A
- Authority
- CN
- China
- Prior art keywords
- information
- picture
- frame
- high bright
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 28
- 238000003384 imaging method Methods 0.000 title claims description 68
- 238000003672 processing method Methods 0.000 title claims description 22
- 238000004590 computer program Methods 0.000 title claims description 18
- 238000012545 processing Methods 0.000 claims abstract description 56
- 230000005236 sound signal Effects 0.000 claims description 36
- 230000001133 acceleration Effects 0.000 claims description 30
- 238000012163 sequencing technique Methods 0.000 claims description 16
- 238000001514 detection method Methods 0.000 claims description 11
- 230000008859 change Effects 0.000 description 36
- 239000000284 extract Substances 0.000 description 30
- 238000003860 storage Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 23
- 238000005070 sampling Methods 0.000 description 18
- 238000000034 method Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 13
- 238000004091 panning Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 9
- 230000002123 temporal effect Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 230000014759 maintenance of location Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000001052 transient effect Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000005096 rolling process Methods 0.000 description 2
- 240000004859 Gamochaeta purpurea Species 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 229910002056 binary alloy Inorganic materials 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/781—Television signal recording using magnetic recording on disks or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
Abstract
一种信息处理装置,包括被配置成执行下述处理的数据处理器,这些处理包括:从活动画面数据中选择多个帧画面,以及显示所选帧画面的阵列。在选择将要显示的帧画面时,数据处理器使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
Description
交叉引用相关申请
本发明包含有关于2005年11月8日在日本专利局提交的日本专利申请JP2005-323364的主题,这里通过引用结合其全部内容。
技术领域
本发明涉及信息处理装置、成像设备、信息处理方法以及计算机程序。更特别地,本发明涉及允许从捕捉到的活动画面数据中的典型画面选择和所选典型画面阵列的显示(诸如胶卷显示)的信息处理装置、成像设备、信息处理方法以及计算机程序。
背景技术
在以容易识别的方式将视频摄像机捕捉到的活动画面的内容呈现给用户的公知方法中,以例如固定间隔从活动画面中选择帧画面,并且按时间顺序排列该帧画面,以便像胶卷一样显示该帧画面(以下简称“胶卷显示”)。
借助于胶卷显示,用户可以识别活动画面的内容,而不用重放该活动画面。例如,通过显示从过去捕捉到的各种活动画面数据文件中选择的一系列帧画面,用户可以有效地检查捕捉到的画面。此外,可以显示从正在重放的画面数据中选择的典型画面,作为在屏幕的下半部分的胶卷显示,在正在重放的画面上重叠地显示典型画面,以便用户可以在胶卷显示下选择静止画面来指定重放位置。在普通胶卷显示中,显示微缩画面(缩减画面)阵列。例如,日本未审专利申请公开第2-32473号描述了这种显示画面的方法。
然而,特别是在只有小屏幕的设备,诸如摄像机或数字摄像机中,不能显示足够数量的画面的阵列。因此,以胶卷显示方式显示的画面的数量很小,以至用户通常很难掌握活动画面的整体内容。此外,当与胶卷显示一样,在正在重放的活动画面上重叠显示典型的静止画面时,由于所记录的活动画面的长度变长,所以更加难以显示适当的典型画面的阵列。因此,用户难以选择适当的重放位置。
发明内容
希望提供信息处理装置、成像设备、信息处理方法以及计算机程序,以便当例如以胶卷显示方式显示从捕捉到的活动画面数据中选择的典型画面的阵列,而不是显示以固定时间间隔选择的画面时,有效地选择和显示活动画面中被认为是重要场面的画面,从而容易识别活动画面数据的内容并且允许指定与用户大概比较想知道的重要场面相关的重放位置。
根据本发明的实施方式,提供包括数据处理器的信息处理装置,该处理器被配置成执行用于从活动画面数据中选择多个帧画面并且用于显示所选帧画面的阵列的处理。在选择将要显示的帧画面时,数据处理器使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地记录。
在该信息处理装置中,在选择将要显示的帧画面时,数据处理器可以计算与沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,数据处理器可以优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面。
此外,在该信息处理装置中,在选择将要显示的帧画面时,数据处理器可以计算沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,数据处理器可以优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面,而当预定的临界时间范围中不存在与高亮点相应的帧画面时,数据处理器可以选择与基准时间相应的帧画面作为将要显示的帧画面。
此外,在信息处理装置中,数据处理器可以从包括重要场面的记录时间的高亮点信息中获得重要场面的记录时间,而对于重要场面的每个记录时间,当满足下面的条件式时:
x-(Δx/2)≤tj<x+(Δx/2)
数据处理器可以选择与具有重要场面的记录时间的高亮点相应的帧画面作为将要显示的帧画面,其中tj表示重要场面的记录时间,x表示沿时间顺序设置的多个显示帧中与重要场面的记录时间相关联的显示帧相应的基准时间,而Δx表示显示帧的时间间隔。
根据本发明的另一个实施方式,提供包括记录数据处理器和重放数据处理器的成像设备,该记录数据处理器配置成执行用于根据在画面拍摄期间输入的输入信息而从捕捉到的画面数据中选择与重要场面相应的画面部分、用于生成允许识别与重要场面相应的所选画面部分的高亮点信息和用于在记录介质上将高亮点信息记录为与捕捉到的画面数据相关的信息的处理;该重放数据处理器配置成执行用于从活动画面数据中选择多个帧画面和用于显示所选帧画面的阵列的处理。在选择将要显示的帧画面时,重放数据处理器使用与活动画面数据相关联地记录的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面。
在该成像设备中,该记录数据处理器可以接收变焦操作信息、加速传感器的检测信息、音频信号电平信息、GPS信息、时钟信息以及静止画面拍摄信息中至少之一作为输入信息,根据该输入信息识别与重要场面相应的画面部分,并且生成高亮点信息。
根据本发明的另一个实施方式,提供信息处理方法,该方法执行用于通过信息处理装置显示画面的处理。该信息处理方法包括执行数据处理的步骤,用于从活动画面数据中选择多个帧画面并且显示所选帧画面的阵列,其中通过数据处理器执行该数据处理。在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,其中该高亮点信息被与活动画面数据相关联地进行记录。
在该信息处理方法中,在选择将要显示的帧画面时,可以计算与沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,可以优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面。
此外,在该信息处理方法中,在选择将要显示的帧画面时,可以计算与沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,可以优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面,并且当预定的临界时间范围中不存在与高亮点相应的帧画面时,可以选择与基准时间相应的帧画面作为将要显示的帧画面。
此外,在该信息处理方法中,可以从包括重要场面的记录时间的高亮点信息中获得重要场面的记录信息,而对于重要场面的每个记录时间,当满足下面的条件式时:
x-(Δx/2)≤tj<x+(Δx/2)
可以选择与具有重要场面的记录时间的高亮点相应的帧画面作为将要显示的帧画面,其中tj表示重要场面的记录时间,x表示沿时间顺序设置的多个显示帧中与重要场面的记录时间有关的显示帧相应的基准时间,而Δx表示显示帧的时间间隔。
根据本发明的另一个实施方式,提供由成像设备执行的信息处理方法。该信息处理方法包括执行记录数据处理的步骤,用于根据画面拍摄期间输入的输入信息从捕捉到的画面数据中选择与重要场面相应的画面部分,用于生成允许识别与重要场面相应的所选画面部分的高亮点信息,以及用于在记录介质上将该高亮点信息记录为与捕捉到的画面数据相关的信息,由记录数据处理器执行该记录数据处理;并且执行重放数据处理,用于从活动画面数据中选择多个帧画面以及显示所选帧画面的阵列,由重放数据处理器执行该重放数据处理。在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
在信息处理方法中,接收变焦操作信息、加速传感器的检测信息、音频信号电平信息、GPS信息、时钟信息、以及静止画面拍摄信息中至少之一作为输入信息,根据该输入信息识别与重要场面相应的画面部分,并且可以生成高亮点信息。
根据本发明的另一个实施方式,提供用于允许信息处理装置执行显示画面的处理的计算机程序。该计算机程序包括执行数据处理的步骤,用于从活动画面数据中选择多个帧画面以及显示所选帧画面的阵列,由数据处理器执行该数据处理。在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
根据本发明的另一个实施方式,提供用于允许成像设备执行信息处理的计算机程序。该计算机程序包括执行记录数据处理的步骤,用于根据画面拍摄期间输入的输入信息从捕捉到的画面数据中选择与重要场面相应的画面部分,用于生成允许识别与重要场面相应的所选画面部分的高亮点信息,以及用于在记录介质上将高亮点信息记录为与捕捉到的画面数据相关的信息,由记录数据处理器执行该记录数据处理;并且执行重放数据处理,用于从活动画面数据中选择多个帧画面以及显示所选帧画面的阵列,由重放数据处理器执行该重放数据处理。在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
使用以计算机可读形式将计算机程序提供到例如能够执行各种程序代码的通用计算机系统中的存储介质或通信介质,可以提供根据这些实施方式的每种计算机程序,例如,诸如CD、FD、或MO的存储介质,或者诸如网络的通信介质。通过以计算机可读形式提供计算机程序,可以根据该计算机程序在计算机系统上执行处理。
下面通过参照附图,更加详细地描述本发明的实施方式,本发明的其他目的、特征、以及优点将变得显而易见。在本说明书中,系统是指多个装置的逻辑组合,无论该装置是否位于独立的外壳中。
根据本发明的实施方式,当从例如数字摄影机捕捉到的活动画面数据中选择多个帧画面并且显示所选帧画面的阵列时,例如,胶卷显示,在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。因此,以胶卷显示呈现的多个画面表示重要场面。因此,用户可以有效地识别活动画面的内容并且选择将要重放的场景。
附图说明
图1是示出根据本发明的实施方式成像设备的结构的方框图;
图2是示出基于变焦操作信息的高亮点提取处理的顺序的流程图;
图3A和3B是示出基于变焦操作信息的高亮点提取处理的例子以及基于变焦操作信息的高亮点信息的数据结构的例子的示意图;
图4是示出基于基于加速传感器信息的高亮点提取处理的顺序的流程图;
图5A和5B是示出基于加速传感器信息的高亮点提取处理的例子以及基于加速传感器信息的高亮点信息的数据结构的例子的示意图;
图6是用于解释基于音频信息的高亮点提取处理的示意图;
图7是示出基于音频信息的高亮点提取处理的顺序的流程图;
图8A和8B是示出基于音频信息的高亮点提取处理的例子以及基于音频信息的高亮点信息的数据结构的例子的示意图;
图9是示出基于GPS信息的高亮点提取处理的顺序的流程图;
图10A到10C是示出基于GPS信息的高亮点提取处理的例子以及高亮点信息的数据结构的例子的示意图;
图11是示出基于时钟信息的高亮点提取处理的顺序的流程图;
图12A和12B是示出基于时钟信息的高亮点提取处理的例子以及基于时钟信息的高亮点信息的数据结构的例子的示意图;
图13是示出基于静止画面拍摄信息的高亮点提取处理的顺序的流程图;
图14A和14B是示出基于静止画面拍摄信息的高亮点信息的例子以及基于静止画面拍摄信息的高亮点信息的数据结构的例子的示意图;
图15A到15F是示出通过基于不同类型的信息的高亮点提取处理获得的高亮点信息的示意图;
图16是示出执行来重放高亮场面的高亮点选择处理的顺序的流程图;
图17是解释高亮场面的重放的例子的示意图;
图18是解释胶卷显示的例子的示意图;
图19是解释胶卷显示的例子的示意图;以及
图20是示出胶卷显示处理的顺序的流程图。
具体实施方式
现在,将参照附图更加详细地描述根据本发明的实施方式的信息处理装置、成像设备、信息处理方法以及计算机程序。
首先,将参照图1描述根据本发明的实施方式作为信息处理装置的成像设备(数字摄像机)的示例结构。
参照图1,成像设备包括镜头101、由固态成像设备(例如,CCD)等等实现的、将通过镜头101输入的光学信号转换为电信号的成像器102、将模拟电信号转换为数字信号的A/D转换器103、根据捕捉到的视频数据对画面执行信号处理的摄像机信号处理器104、接收音频信息的输入的麦克风105、将从麦克风105输出的模拟音频信号转换为数字信号的A/D转换器106、以及根据捕捉到的音频数据对声音执行信号处理的音频信号处理器107。音频信号处理器107将音频信号电平信息输入到微处理器111。微处理器111例如根据从音频信号处理器107输入的音频信号电平信息提取高亮点(表示重要场面的位置的信息片断)。
微处理器111起这样的记录数据处理器的作用:其在成像期间获得各种类型的输入信息,从捕捉到的视频数据中选择与重要场面相应的部分,生成允许识别与根据输入信息所选择的重要场面相应的部分的高亮点信息,以及在记录介质112上将该高亮点信息记录为与捕捉到的视频数据相关的信息。下面将详细描述高亮点的提取。
微处理器111还起这样的重放数据处理器的作用:重放并显示捕捉到的画面,选择将要以胶卷显示形式显示的画面,等等。下面将详细描述胶卷显示。
由摄像机信号处理器104和音频信号处理器107生成的视频和音频数字数据被存储到存储器120中。视频编码器121和音频编码器122执行编码以便将输入的视频信号和音频信号转换为用于记录的数据。例如,当从记录了捕捉到的数据的记录介质112读出并重放数据时,视频解码器123和音频解码器124对从记录介质112读取的视频和音频信号执行解码。存储器120暂时存储将要编码或解码的数据。
微处理器111控制成像设备中执行的处理。此外,微处理器111接收用户从诸如各种开关和按钮的输入设备108输入的信息。此外,微处理器111从加速传感器109接收传感器检测信息,从音频信号处理器107接收音频信号电平信息,从GPS卫星接收由GPS模块110获得的位置信息,并且从时钟131接收日期和时间信息。此外,微处理器111控制在记录介质112上记录数据或者从记录介质112重放数据。
输入设备108是当用户操作成像设备时使用的按钮、开关等等。更特别地,输入设备108包括例如用于变焦操作的开关、用于拍摄活动画面的按键、用于拍摄静止画面的快门、以及触板。通过输入设备108输入的信息被传送到微处理器111,而微处理器111根据与用户的操作相应的信息实行控制和提取高亮点。
加速传感器109检测成像设备的移动,并且将表示检测结果的信息输入到微处理器111。GPS模块110从GPS卫星接收数据,并且将该数据输入到微处理器111。根据该信息,微处理器111可以获得当前位置的纬度和经度。时钟131将表示当前日期和时间的信息输入到微处理器111。微处理器111根据从加速传感器109、GPS模块110、以及时钟131输入的这些信息而提取高亮点。
记录介质112是例如非易失性存储器或硬盘,并且记录介质112存储捕捉到的视频数据。显示控制器125控制监视器显示捕捉到的视频数据,或者显示已经获取并记录在记录介质112上并且由视频解码器123解码的数据。D/A转换器126将显示控制器125生成的数据转换为模拟信号,而该模拟信号被输出到显示器127,诸如LCD面板。
音频信号处理器128接收音频解码器124解码的音频信号的输入。D/A转换器129将解码的音频信号转换为模拟信号,并且将该模拟信号输出到扬声器130。
在根据本实施方式的成像设备中起数据处理器作用的微处理器111接收所输入的以下信息:
(1)有关输入设备108的用户操作的信息
(2)有关加速传感器109的检测结果的信息
(3)从音频信号处理器107提供的音频信号电平信息
(4)从GPS模块110提供的位置信息
(5)从时钟131提供的日期和时间信息
根据这些输入信息,微处理器111提取高亮点(表示重要场面的位置的信息)。微处理器111接收所输入的这些信息片断并且根据成像期间的输入信息提取高亮点。下面将详细描述高亮点的提取。
首先,描述高亮点。高亮点是允许识别所记录的活动画面中可能重要的场面的信息片断。例如,借助于从开始记录活动画面所经过的时间(以下简称“记录时间”)来表示高亮点。也就是说,高亮点是表示包括相对于成像开始的重要场面的帧的时间位置的信息片断。
在根据该实施方式的成像设备中,例如,以下点被检测为高亮点:
当拍摄画面时,用户执行变焦操作的点(借助于从成像开始的时间表示);
当拍摄画面时,用户移动摄像机的点(执行摇镜头或倾斜操作);
从麦克风输入的声音电平达到峰值的点;
改变表示纬度或经度的信息的点,其中该信息是从GPS卫星获得的;
在当前时间中与具体变化相应的点(例如,日子的改变或年的改变);以及
当记录活动画面时,用户记录静止画面的点。
当记录活动画面时,根据该实施方式的成像设备检测这些高亮点,并且将该高亮点记录为与捕捉到的视频数据相关的高亮点信息。采用如上所述地记录的高亮点,当重放捕捉到的数据时,可以选择地重放只与高亮点邻近相应的部分。因此,成像之后可以立即选择地重放高亮场面,而不用对捕捉到的数据执行特殊的后期处理,诸如图像分析。
现在,将详细地顺序描述由根据该实施方式的成像设备执行的有关以下所检测到的信息片断的高亮点提取:
(1)与输入设备108的用户操作相关的变焦操作信息
(2)从加速传感器109提供的传感器检测信息
(3)从音频信号处理器107提供的音频信号电平信息
(4)从GPS模块110提供的位置信息
(5)从时钟131提供的日期和时间信息
(6)与输入设备108的用户操作相关的静止画面拍摄信息
(1)与输入设备108的用户操作相关的变焦操作信息
首先,参照图2和图3A和3B详细描述当与输入设备108的用户操作相关的变焦操作信息被输入到微处理器111时,由微处理器111执行的高亮点提取处理。
图2是示出当与输入设备108的用户操作相关的变焦操作被输入到微处理器111时,成像期间执行的高亮点提取处理的顺序的流程图。
当拍摄活动画面时,用户操作作为输入设备108之一的变焦键,以便改变变焦比。用户的操作从输入设备108报告给微处理器111,而微处理器111移动镜头101以改变变焦比。当用户停止变焦操作时,例如,通过释放变焦键,微处理器111停止移动镜头101,从而停止变焦操作。
现在,描述图2中所示的处理流的个别步骤中的处理。当微处理器111在步骤S101中已经检测到变焦操作开始时,处理进行到步骤S102,在该步骤中获得表示变焦操作开始时的放大系数的信息。
然后,当在步骤S103检测到变焦操作的结束时,在步骤S104中,获得表示变焦操作结束时的放大系数的信息。然后,在步骤S105,在存储器120上存储(当前记录时间、变焦变化总量)的数据集。
这里,变焦变化总量是指例如变焦比的变化总量,并且根据变焦操作结束时的变焦比与变焦操作开始时的变焦比之间的差来计算该总量。
然后,在步骤S106中,检测是否已经结束了视频记录。当还没有结束视频记录时,处理返回步骤S101并且从那里开始重复。通过该重复,在存储器120上连续地存储表示视频记录期间执行的个别变焦操作的结束时间的数据集以及个别变焦操作中变焦变化总量,即,(当前记录时间,变焦变化总量)的数据集。
当步骤S106检测到视频记录已经结束时,在步骤S107,根据捕捉到的数据,例如,在记录介质112上将存储器120上存储的(当前记录时间,变焦变化总量)的数据集记录为与捕捉到的数据相关的高亮信息。
例如,当用户想要推近镜头到成像的目标或者想要拉远镜头拓宽视野时,用户一般执行变焦操作。因此,可以适当地认为紧接变焦操作之后的记录时间很可能与重要的场面相关,以便可以将记录时间认为是高亮点。
当在记录介质112上将存储器120上存储的(当前记录时间,变焦变化总量)的数据集记录为与在活动画面的记录结束时捕捉到的数据相关的高亮点信息时,可以将存储器120上存储的所有信息记录为高亮点信息。或者,可以从存储器120上存储的信息中选择具有较大的变焦变化总量的预定数量的数据集并且可以在记录介质112上仅仅将所选择的数据集与活动画面数据一起记录为高亮点信息。
可以应用各种方案来记录高亮点信息。例如,可以在一部分活动画面文件中提供用于记录高亮点的区域,或者可以分别从活动画面文件提供数据库文件以便可以在数据库文件中记录高亮点。
现在,将参照图3A和3B描述根据变焦操作信息的高亮点提取处理的具体例子以及根据变焦操作信息的高亮点信息的数据的具体例子。图3A是示出有关从活动画面的拍摄开始(开始)到结束(停止)所经过的时间的变焦操作历史的示意图。图3B是示出与捕捉到的视频数据相关的高亮点信息的数据的例子的示意图,当执行图3A中所示的变焦操作时,该数据被记录到记录介质112上。
在图3A所示的例子中,在成像的开始与结束之间执行三个变焦操作。第一个变焦操作是在广角(W)到远摄(T)方向上的变焦操作,即,朝着成像目标变焦,并且在成像开始之后的0分45秒钟结束第一个变焦操作。将变焦操作的结束时间记录为高亮点。相应于图3B中所示的高亮点信息的第一项数据记录数据。也就是说,变焦操作的结束时间的数据集以及变焦变化总量,即,[0:45]和[3.0]被记录为第一高亮点信息片断。
同样,作为第二和第三高亮点信息片断,为单独的变焦操作记录结束时间的数据集以及变焦变化总量。在图3B所示的例子中,广角(W)到远摄(T)方向上的变焦变化总量被表示为正值,而远摄(T)到广角(W)方向上的变化总量被表示为负值。
(2)从加速传感器109提供的传感器检测信息
接下来,将参照图4和图5A和5B描述当从加速传感器109输入的信息传送到微处理器111时,由微处理器111执行的高亮点执行处理。在该处理中,微处理器111根据从加速传感器109输入的信息检测成像期间执行的摇镜头或倾斜操作,并且根据该检测而记录高亮点。
当用户移动摄像机拍摄活动画面时,加速传感器109检测该移动并且将该移动报告给微处理器111。当微处理器111确定成像设备在某一时期在相同的方向上根据从加速传感器109输入的信息连续进行移动时,微处理器111确定用户在某一方向上移动摄像机(即,执行摇镜头或倾斜操作),并且将当前的点记录为高亮点。
现在,描述图4中所示的处理流程的个别步骤中执行的处理。在步骤S201,作为初始设置,微处理器111将存储器120中存储的连续移动总量复位为[0]。然后,在步骤S202中,从加速传感器109中获得表示检测结果的值。然后,在步骤S203中,微处理器111检查成像设备是处于静止状态还是处于移动状态。
当确定成像设备处于移动状态时,处理进行到步骤S211,在该步骤确定移动的方向是否与上次从加速传感器109输入的信息表示的移动方向相同。连续重复从加速传感器109输入信息。当确定移动的方向与上次从加速传感器109输入的信息表示的移动方向相同时,确定很可能已经执行了摇镜头或倾斜操作。然后,根据从加速传感器109输入的信息计算移动总量,并且更新存储器120中存储的连续移动总量。通过根据加速度和暂时累计的速度计算速度可以获得移动总量。
当在步骤S211确定移动的方向与上次从加速传感器109输入的信息表示的移动方向不同时,确定很可能还没有执行摇镜头或倾斜操作。然后,处理进行到步骤S205,在该步骤复位存储器120中存储的连续移动总量。
当在步骤S203根据从加速传感器109输入的信息确定成像设备处于静止状态时,处理进行到步骤S204。在步骤S204中,参考存储器120中存储的表示连续移动总量的值,并且确定移动总量是否大于预定的临界距离。当移动总量大于预定的临界距离时,确定已经执行了摇镜头或倾斜操作。然后,在步骤S213中,在存储器120中存储(当前记录时间,移动总量)的数据集。
当在步骤S204确定存储器120中存储的表示连续移动总量的值不大于预定的临界距离时,确定还没有执行摇镜头或倾斜操作。然后,在步骤S205中,将存储器120中存储的表示连续移动总量的值复位为[0]。
在步骤S206中,确定是否已经完成了视频记录。当还没有完成视频记录时,处理返回步骤S202并且从那里重复执行。通过重复,在存储器120上顺序地存储图像记录期间执行的每个摇镜头或倾斜操作的结束时间的数据集以及摇镜头或倾斜操作中移动总量和方向,即,(当前记录时间,移动总量和方向)的数据集。
当在步骤S206检测到已经完成了视频记录时,在步骤S207,根据捕捉到的数据在记录介质112上将存储器120中存储的(当前记录时间,移动总量和方向)的数据集记录为与捕捉到的数据相关的高亮点信息。
例如,当用户想要改变用于成像的感兴趣的目标时,用户一般执行摇镜头或倾斜操作。因此,可以适当地认为紧接摇镜头或倾斜操作之后的点与重要场面相应,以便该点可以被认为是高亮点。例如,当已经完成了摇镜头或倾斜操作并且摄像机已经静止时,在存储器120上将当前记录时间以及由摇镜头或倾斜操作引起的移动总量和方向存储为高亮信息。当已经完成活动画面的记录时,已经存储的所有高亮点信息,或者具有由摇镜头或倾斜操作引起的较大移动总量的高亮点信息的预定数量的集合,与活动画面数据一起被记录到记录介质112上。与前面描述的变焦操作相关的高亮点的记录类似,可以使用各种方案记录高亮点。
现在,将参照图5A和5B描述根据摇镜头或倾斜信息的高亮点提取处理的具体例子以及根据摇镜头或倾斜信息的高亮点信息的数据的具体例子。图5A是示出有关从活动画面的拍摄开始(开始)到结束(停止)所经过的时间的摇镜头和倾斜操作的历史的示意图。图5B是示出与捕捉到的视频数据相关的高亮信息的数据的例子的示意图,当执行图5A中所示的摇镜头和倾斜操作时,该数据被记录到记录介质112上。
在图5A所示的例子中,在成像的开始与结束之间执行三个摇镜头或倾斜操作。在成像开始之后的0分52秒钟结束第一个摇镜头或倾斜操作。结束时间被记录为高亮点。图5B中示出了与高亮点信息的第一项数据相应的记录数据。也就是说,摇镜头或倾斜操作的结束时间的数据集以及移动总量和方向,即,数据集[0:52]和[5.0]被记录为第一高亮点信息片断。
同样,作为第二和第三高亮点信息片断,记录单独的摇镜头或倾斜操作的结束时间以及移动总量和方向的数据集。在图5B所示的例子中,左到右的方向上以及上到下的方向上的移动总量被表示为正数,而相反方向上的移动总量被表示为负数。
在上述的例子中,通过根据从加速传感器109输入的加速度以及暂时累计的速度计算速度而获得与摇镜头或倾斜操作相关的移动总量。然而,即使在不包括加速传感器的设备中,通过比较捕捉到的视频数据中包括的邻近帧的画面也可以获得有关摄像机移动的信息。因此,该配置可以使得微处理器111根据捕捉到的视频数据确定是否已经执行了摇镜头或倾斜操作。
(3)从音频信号处理器107提供的音频信号电平信息
接下来,将参照图6、图7、以及图8A和8B详细描述当从音频信号处理器107提供的音频信号电平信息被输入到微处理器111时,由微处理器111执行的高亮点提取处理。在该处理中,根据成像期间麦克风105捕捉到的音频数据,将音频信号电平信息输入到微处理器111,而微处理器111根据该输入信息分析音频电平的变化并且根据分析的结果记录高亮点。
当拍摄活动画面时,通过麦克风105输入声音,而在音频信号处理器107中生成音频电平信息并输入到微处理器111。还使用音频电平信息,例如,用于在屏幕上显示音频电平表。
根据音频电平信息,微处理器111获得音频电平达到峰值的时间。音频电平经常在比较刺激的场面达到峰值。因此,音频电平的峰值可能被认为与重要场面相关,因此可以认为是高亮点。可以使用各种算法来检测峰值,并且将在下面描述一个例子。
在活动画面的记录期间,获得音频电平。在立体声麦克风的情况下,可以获得左右声道的音频电平,以便例如两个值的平均数被用作音频电平。此外,为了减轻噪音的影响,以预定周期(例如,3秒)采用平均音频电平。这里将预定周期的平均值称为采样。也就是说,当已经完成活动画面的记录时,已经获得了预定间隔的音频电平的采样。然后,获得采样的最大值和最小值,并且执行标准化,以便最大值变为10而最小值变为0。
图6示出了标准化数据的例子。图6是一个图表,其中水平轴表示时间而垂直轴表示音频电平的标准化值。如图6中所示,通过标准化,所有的采样具有0到10的范围中的值。然后,当放弃其他采样时,提取产生局部最大值的采样。图6中,用黑点表示音频电平的标准化值形成的最大值。
然后,还要放弃音频电平小于预定值(例如,8)的采样。然后,剩下的采样具有大于预定值的值并且还具有局部最大值(顶点)。然后,当选择的点包括邻近时间的采样时,保留具有较大值的采样而放弃其他采样时。这些操作之后剩下的采样被认为是高亮点,并且为每个高亮点记录一组记录时间和音频电平。
在图6所示的例子中,首先,作为高亮点的候选者,选择具有大于或等于预定值(例如,8)的音频电平(标准化值)的点,即,点P1到P4。然后,当选择的点(P1到P4)包括任何邻近时间的采样时,保留具有较大值的采样并且放弃其他采样。当邻近时间被定义为±5秒的范围时,选择点P4存在于与具有较高电平的选择点P1相对的±5秒的邻近范围中,这样就从高亮点的候选者中排除了选择点P4。结果,只从图6所示的数据中提取点P1、P2、和P3作为高亮点。
将参照图7所示的流程图描述当从音频信号处理器107向微处理器111输入音频信号电平信息时,执行高亮点提取处理的处理顺序。
在步骤S301,微处理器111从音频信号处理器107获得音频信号电平信息。在步骤S302,微处理器111计算预定周期(例如,3秒)的平均音频电平,并且与记录时间一起在存储器120上存储该平均音频电平。重复这些步骤,直到步骤S303确定已经完成了视频记录为止。当步骤S303确定已经完成了视频记录时,处理进行到步骤S304。
在步骤S304,根据存储器120中存储的时间音频电平数据而执行标准化,从而获得例如图6中所示的时间与标准化的音频电平数据之间的关系。然后,在步骤S305提取高亮点。更特别地,
(a)选择具有大于或等于预定值(例如,8)的音频电平(标准化的值)的点。
(b)当选择的点包括邻近时间的采样时,保留具有较大值的采样而放弃其他采样。
选择步骤(a)和(b)之后剩下的点作为高亮点。然后,在步骤S306,例如,根据捕捉到的数据在记录介质112上将用于提取个别高亮点的时间信息和标准化音频电平(峰值)的集合记录为与捕捉到的数据相关的高亮点信息。
将参照图8A和8B描述根据音频电平信息的高亮点提取处理的具体例子以及根据音频电平信息的高亮点信息的数据的具体例子。图8A是示出有关从活动画面的拍摄开始(开始)到结束(停止)所经过的时间的音频电平信息的历史的示意图。图8B是示出与捕捉到的视频数据相关的高亮点信息的数据的例子的示意图,当获得图8A中所示的音频电平时,该数据被记录到记录介质112上。
在图8A所示的例子中,通过上述的高亮点提取处理从音频电平转换数据中获得三个高亮点。结果,选择记录时间[2:14]、[3:30]、以及[4:07]作为高亮点,如图8B中所示。因此,根据捕捉到的数据在记录介质112上将包括三项的高亮点信息,即,用于个别高亮点的时间信息和标准化音频电平(峰值)的集合,如图8B中所示,记录为与捕捉到的数据相关的高亮点信息。
(4)从GPS模块110提供的位置信息
接下来,参照图9以及图10A到10C描述当从GPS模块110向微处理器111输入位置信息时,微处理器111执行的高亮点提取处理。在该处理中,根据成像期间从GPS模块110输入的信息计算成像设备的位置,并且微处理器111根据位置的变化确定并记录高亮点。
活动画面的拍摄期间,微处理器111从GPS模块110接收GPS卫星信息,以便微处理器111可以实时地获得当前位置的纬度和经度。活动画面的拍摄期间,微处理器111根据GPS数据计算成像设备的移动距离等等。
由于根据GPS数据计算的纬度和经度信息包括一定程度的错误,假设当位置变化的距离大于或等于预定距离时,设备已经从以前观察的位置移开了。当成像期间发生相当大的移动时,假设移动之后立即获得的场面是重要场面并且因此与高亮点相应。根据该估算,微处理器111根据从GPS模块110输入的信息以纬度和经度的变化为基础而计算移动的距离。当发生移动的距离大于或等于预定距离时,微处理器111在存储器120上记录与移动相关的移动的记录时间和总量。当已经完成活动画面的记录时,存储器120上存储的所有高亮点,或者存储器120存储的高亮点中预定数量的高亮点,与活动画面数据一起被记录到记录介质112上。
现在,将描述图9中所示的处理流程的个别步骤中执行的处理。步骤S401中,微处理器111从GPS模块110接收输入的信息,即,表示纬度和经度的信息,作为成像设备的位置信息。以预定的时间间隔重复输入该位置信息,并且根据输入信息的时间在存储器120上存储该位置信息。
在步骤S402,GPS模块110计算从GPS模块110输入的信息与存储器120上已经存储的位置信息之间的差,从而确定是否发生了距离大于或等于预定临界距离的移动。当发生了距离大于或等于临界距离的移动时,微处理器111确定已经检测了高亮点。然后,处理进行到步骤S411,在该步骤微处理器111在存储器120上存储(当前记录时间,位置变化总量)的集合。
当步骤S402确定没有发生距离大于或等于预定临界距离的移动时,或者(当前记录时间,位置变化总量)的数据集在步骤S411中已经存储到存储器120时,处理进行到步骤S404,在该步骤微处理器111确定是否已经完成了视频记录。当还没有完成视频记录时,处理返回步骤S401并且从那里重复。通过该重复,在图像记录期间,在存储器120上顺序地存储距离大于或等于临界值的移动的发生时间以及位置变化总量的集合,即,(当前记录时间,位置变化总量)的集合。
当步骤S403检测到已经完成了视频记录时,在步骤S404中,例如,根据捕捉到的数据在记录介质112上将存储器120上存储的(当前记录时间,位置变化总量)的集合记录为与捕捉到的数据相关的高亮点信息。
现在,将参照图10A到10C描述根据GPS信息的高亮点提取处理的具体例子以及根据GPS信息的高亮点信息的数据的具体例子。图10A是示出根据从活动画面的拍摄开始(开始)到结束(停止)所经过的时间来测量的距离大于或等于临界值的移动的发生时间的示意图,即,示出了高亮点的示意图。图10B是示出与图10A中所示的数据相应的位置变化的状态的示意图。
在图10B所示的成像开始点P1开始成像,并且随着用户通过成像设备拍摄画面,成像设备开始移动。当成像设备达到点P2时,确定发生了距离大于或等于临界值的移动,以便及时确定当前的点为第一高亮点。与该点相关的时间是从成像开始的1分35秒,并且该时间以及移动总量被记录为图10C中所示的高亮点信息的第一项。此外,当成像设备从点P2移动到点P3时,确定发生了距离大于或等于临界值的移动,以便及时确定当前的点为第二高亮点。与该点相关的时间是成像开始之后的2分11秒,并且该时间以及移动总量被记录为图10C中所示的高亮信息的第二项。
(5)从时钟131提供的日期和时间信息
接下来,将参照图11以及图12A和12B描述当将日期和时间信息从时钟131输入到微处理器111时,微处理器111执行的高亮点提取处理。在该处理中,成像期间,日期和时间信息从时钟131输入到微处理器111,而微处理器111根据表示当前的日期和时间的信息检测和记录高亮点。
活动画面的拍摄期间,微处理器111从时钟131接收表示当前的日期和时间的输入信息。根据用户事先指定的时间测量或者根据从GPS模块110接收的GPS卫星信息设置当前的时间。画面拍摄期间微处理器111监视时钟131,以便微处理器111可以及时获得日期改变时的点的记录时间信息、及时获得年改变时的点的记录时间信息,等等。
在日期改变、年改变等等的时刻,可以假设已经掌握了某些重要的事件,以便此刻可以被认为是高亮点。在这个例子中,成像期间在日期改变或年改变时的点的记录时间被认为是高亮点。
现在,参照图11所示的流程图描述微处理器111根据时钟131提供的日期和时间信息执行的高亮点检测和记录处理的顺序。在步骤S501中,微处理器111接收从时钟131输入的日期和时间信息。在步骤S502中,微处理器111确定日期和时间信息是否与事件的日期和时间相应。例如,根据用户事先设置的数据确定事件的日期和时间。此外,可以通过默认值将日期改变、年改变等等的点定义为事件的日期和时间。
当在步骤S502确定日期和时间信息与事件的日期和时间相应时,确定已经检测到了高亮点。然后,在步骤S511,在存储器120上存储(当前记录时间,事件类型)的数据集。事件类型表示例如日期改变或年改变。
当在步骤S502确定日期和时间信息与任何事件的日期和时间都不相应时,或者存储器120上已经存储了(当前记录时间,事件类型)数据集之后,在步骤S503中,微处理器111确定是否已经完成了视频记录。当还没有完成视频记录时,处理返回步骤S501并且从那里重复。通过该重复,在存储器120上顺序地存储图像记录期间事件的发生时间以及表示事件类型的信息的集合,即,(当前记录时间,事件类型)的集合。
当在步骤S503检测到已经完成了视频记录时,在步骤S504中,微处理器111例如根据捕捉到的数据在记录介质112上将存储器120上存储的(当前记录时间,事件类型)的集合记录为与捕捉到的数据相关的高亮点信息。
现在,参照图12A和12B描述根据时钟信息高亮点提取处理的具体例子以及根据时钟信息高亮点信息的具体例子。图12A是示出沿着活动画面的拍摄开始(开始)到结束(停止)所经过的时间,根据时钟信息检测的事件发生的点的示意图。图12B是示出根据图12A中所示的捕捉到的数据在记录介质112上记录高亮点信息的数据的例子的示意图。
在图12A所示的例子中,成像的开始与结束之间包括一个事件发生时间,例如,年改变的时间,而该点被记录为高亮点。所记录的数据相应于图12B中所示的高亮点信息的数据项(entry data)。更特别地,从成像开始的记录时间的数据集与年变化的时间即[1:40]和事件类型即[年变化]相应,并被记录为高亮点信息。
(6)与输入设备108的用户操作相关的静止画面拍摄信息
接下来,参照图13以及图14A和14B描述当与输入设备108的用户操作相关的静止画面拍摄信息被输入到微处理器111时,微处理器111执行的高亮点提取处理。
图13是示出当与输入设备108的用户操作相关的静止画面拍摄信息被输入到微处理器111时,微处理器111在成像期间执行的高亮点提取处理的处理顺序的流程图。
当拍摄活动画面时,用户可以通过按压输入设备108中的静止画面键(例如,快门)来拍摄静止画面。用户的操作从输入设备108报告给微处理器111,而微处理器111控制摄像机拍摄静止画面。当用户拍摄活动画面时拍摄静止画面时,假设用户认为该场面是重要的,以便该静止画面可以被认为与高亮点相应。在这个例子中,与拍摄静止画面的时间相应的记录时间被记录为高亮点。
现在,描述图13中所示的处理流程的个别步骤中执行的处理。当在步骤S601微处理器111检测到拍摄静止画面的快门操作时,处理进行到步骤S611,在该步骤拍摄静止画面。然后,在步骤S612,在存储器120上存储表示拍摄静止画面的时间的信息。
然后,在步骤S602,检测是否完成了视频记录。当还没有完成视频记录时,处理返回步骤S601并且从那里重复。通过该重复,在存储器120上顺序地存储视频记录期间拍摄静止画面的时间数据。
当在步骤S602检测到已经完成了视频记录时,在步骤S603,根据捕捉到的数据在记录介质112上将存储器120中存储的(拍摄静止画面的记录时间)数据记录为与捕捉到的数据相关的高亮信息。
现在,参照图14A和14B描述根据静止画面拍摄信息高亮点提取处理的具体例子以及根据静止画面拍摄信息高亮点信息的数据的具体例子。图14A示出了沿着从活动画面的拍摄开始(开始)到结束(停止)所经过的时间,获取静止画面的历史。图14B示出了当拍摄静止画面时,如图14A中所示,记录介质112上记录的与捕捉到的视频数据相关的高亮点信息的数据的例子。
在图14A所示的例子中,在成像的开始与结束之间拍摄了两次静止画面。在成像开始之后的2分22秒拍摄了第一个静止画面。拍摄静止画面的时间被记录为高亮点。与图14B中所示的高亮点信息的第一项数据相应的记录数据,以及拍摄静止画面的时间,即,[2:22],被记录为第一高亮点信息片断。此外,顺序记录第二和第三高亮点信息片断。
总体处理顺序
如上所述,根据该实施方式的成像设备根据下述信息片断提取高亮点:
(1)与输入设备108的用户操作相关的变焦操作信息
(2)从加速传感器109提供的传感器检测信息
(3)从音频信号处理器107提供的音频信号电平信息
(4)从GPS模块110提供的位置信息
(5)从时钟131提供的日期和时间信息
(6)与输入设备108的用户操作相关的静止画面拍摄信息
可以对单独的活动画面同时执行这些处理。在这种情况下,根据这些不同类型的信息生成并且根据捕捉到的视频数据记录该高亮点信息。所记录的高亮点信息是例如图15A到15F中所示的数据。
图15A到15F示出了微处理器111分别根据以下信息片断(1)到(6)而提取和记录的高亮点信息:
(1)与输入设备108的用户操作相关的变焦操作信息
(2)从加速传感器109提供的传感器检测信息
(3)从音频信号处理器107提供的音频信号电平信息
(4)从GPS模块110提供的位置信息
(5)从时钟131提供的日期和时间信息
(6)与输入设备108的用户操作相关的静止画面拍摄信息
根据该实施方式的成像设备中,根据这些信息生成的高亮点信息,与根据用于生成高亮点信息的输入信息的类型分配给高亮点信息的各片断的优先等级一起,被记录到记录介质上。该优先等级用于仅仅选择地重放高亮场面。
现在,描述使用根据捕捉到的视频数据记录的高亮点信息仅仅选择地重放所获取视频数据的高亮场面的过程。根据本实施方式的成像设备能够在显示器127上重放捕捉到的活动画面,并且使用根据捕捉到的活动画面记录的高亮点信息选择地重放与高亮点相应的场面。
当重放高亮场面时,例如,用户选择单一的活动画面并且仅仅重放它的高亮场面,或者以放映幻灯片的形式重放一定数量的活动画面的高亮场面。
当重放高亮场面时,可以选择并重放与图15A到15F中所示的高亮点相应的所有大量的高亮场面。例如,根据图15A到15F中所示的高亮信息的各片断中包括的记录时间,能够使用诸如索引的记录时间,根据设置诸如相对于与每个记录时间相应的捕捉到的帧画面的前面10秒后面10秒或者前面5秒后面20秒,而重放高亮场面。
代替选择和重放与图15A到15F中所示的大量的高亮点相应的所有场面,可以根据分配给高亮点的优先等级选择具有较高优先等级的高亮点并且仅仅重放与所选的高亮点相应的场面。
现在,描述高亮点的优先等级。如上所述,根据不同类型的信息提取高亮点,诸如变焦操作、摇镜头或倾斜操作、音频电平的峰值、基于GPS信息的位置的改变、基于时间信息日期或年的改变、以及有关拍摄活动画面时捕捉到的静止画面的信息。根据用于提取高亮点的信息的类型将优先等级分配给这些高亮点。用户可以任意分配该优先等级。
例如,当用户认为与变焦操作、音频电平的峰值、以及拍摄活动画面时捕捉到的静止画面相关的高亮点很可能与重要场面相应时,而与摇镜头或倾斜操作、基于GPS信息的位置的改变、以及基于时间信息的日期或年的改变相关的高亮点不可能与重要场面相应时,用户以下面的方式分配优先等级:
优先等级1:根据变焦操作、音频电平的峰值、以及捕捉到的静止画面提取高亮点
优先等级2:根据GPS信息以及诸如日期或年的改变事件提取高亮点
优先等级3:根据摇镜头或倾斜操作提取高亮点
在如上所述那样设置优先等级之后,确定将要选择的高亮点的数目,用于选择地重放高亮点。为了只重放活动画面的高亮场面,首先,确定高亮重放的长度。可以事先确定该长度为固定值(例如,20秒)或者与整个活动画面的长度成固定比率(例如,活动画面长度的五分之一),或者由用户事先设置。
然后,确定重放的每个高亮场面的长度。可以事先将该长度确定为固定值(例如,5秒),或者可以在以放映幻灯片的形式重放活动画面的每个场合确定该长度,以便给出某种表现效果。当以放映幻灯片重放BGM时,可以为每条音乐确定或者由用户事先设置该长度。采用这种方式,可以确定用于高亮重放的整个长度以及每个场面的长度。可以根据需要的重放方式适当地选择这两个值。可以通过用每个场面的长度划分高亮重放的整个长度而计算将要选择的高亮点的数量。当在根据BGM确定长度的情况下每个场面的长度是可变的时,将要选择的高亮点的数量与其中场面的总长度等于BGM的长度的场面的数量相应。
接下来,参照图16中所示的流程图描述选择高亮点的过程。在高亮点选择处理中,重放高亮点之前,微处理器111使用与捕捉到的视频数据相关的高亮点信息选择具有较高优先等级的高亮点。
首先,在步骤S701,选择具有分配到那里的最高优先级的高亮点的集合。在上述的优先级设置的例子的情况下,获得以下高亮点的集合:
优先等级1:根据变焦操作、音频电平的峰值、以及捕捉到的静止画面提取高亮点
然后,在步骤S702,检查集合是否为空。当集合不为空时,处理进行到步骤S703,从集合中选择一个高亮点。在该选择中,当存在具有分配到那里的相同优先级的多个高亮点时,例如,可以随机地选择一个高亮点。或者例如可以根据表示改变程度的索引而选择一个高亮点,例如,在变焦操作的情况下变焦变化总量、在摇镜头或倾斜操作的情况下移动总量、在音频电平的情况下音频电平的值、或者在根据GPS信息改变纬度或经度的情况下位置改变总量。
在步骤S704,检查获得的高亮点的数量是否已经达到预定的上限。当高亮点的数量还没有达到上限时,处理返回步骤S702并且从那里重复。当具有最高优先级的高亮点的集合变为空时,处理进行到步骤S711,在该步骤检查是否存在具有下一个最高优先级的高亮点的集合。当存在具有下一个最高优先级的高亮点的集合时,在步骤S712,选择具有下一个最高优先级的高亮点的集合。在上述的优先级设置的例子的情况下,获得以下高亮点的集合:
优先等级2:根据GPS信息或者诸如日期改变或年改变的事件提取高亮点
然后,在步骤S703,从所选的集合中选择一个高亮点。重复这些步骤直到从那些顺序选择的具有较高优先级的高亮点的数量达到预定的数量为止,或者直到提取了所有的高亮点为止。
当在步骤S711确定不存在将要选择的高亮点的集合时,在步骤S713,捕捉到的画面被划分为等长的段(例如,10段),并且产生的点被认为是高亮点的集合。然后,处理返回步骤S703,在该步骤根据新集合选择高亮点。根据预定的规则执行该选择;例如,从开始按照顺序选择通过平均划分活动画面而形成的高亮点。
最后,当在步骤S704确定高亮点的数量达到了预定数量时,结束高亮点选择处理。如上所述,通过按照优先级的顺序重复选择,选择预定数量的高亮点。
接下来,描述根据所选的高亮点活动画面的高亮重放的过程。首先,按照成像时间安排所选的高亮点。然后,从高亮点稍前一点开始重放每个场面长度的与每个高亮点相关的活动画面的场面。例如,当每个场面的长度是5秒时,从高亮点之前的1秒处开始重放5秒活动画面的场面。将该规则顺序地应用到所有高亮点,从而只重放活动画面的高亮场面。图17示出了选择重放高亮场面的例子。
图17示出了从捕捉到的画面数据选择三个高亮点并重放的例子。高亮场面301到303是包括由上述的处理选择的高亮点的活动画面数据。例如,进行设置以便重放场面覆盖从高亮点之前的1秒到高亮点之后的5秒的范围。在图17所示的例子中,只有三个高亮场面被重放。例如,可以进行设置以便场面变化的影响,诸如交叉衰落,被插入到高亮点之间。
胶卷显示处理
接下来,描述使用上述的高亮点信息执行的胶卷显示处理。首先,描述胶卷显示的概观。将参照图18和19描述胶卷显示处理的例子。
图18示出了在活动画面重放屏幕501上重叠胶卷显示区域用于在显示器上重放捕捉到的活动画面的例子。在胶卷显示区域502中,显示了从活动画面重放屏幕501中正在重放的活动画面数据文件中选择的多个代表性的静止画面。通过在活动画面中,以时间顺序在某些适当的间隔安排多个帧画面(缩略图),能够识别活动画面的内容并且能够参考正在重放的前后的场面容易地选择重放位置。
图19示出以胶卷的形式显示多个捕捉到的活动画面数据文件的代表性静止画面的例子。在图19所示的例子中,以时间顺序在胶卷显示区域601到604中分别显示四个活动画面数据文件的代表性静止画面。
当显示设备中的记录介质上存储的捕捉到的活动画面的列表时,很难通过显示活动画面的一个代表性的画面(例如,开始帧的缩略图)来识别每个活动画面的内容。相反,如图19中所示,通过显示每个活动画面的胶卷,可以容易地识别活动画面的内容,而这个使得容易选择重放的活动画面。
在普通的胶卷显示中,使用活动画面的个别帧画面(缩略图)。可以通过解码从活动画面选择的具体的帧画面而获得该缩略图。或者,当拍摄活动画面时,可以将预定间隔的帧画面存为静止画面(缩略图),以便该静止画面可以被用于胶卷显示。当可以通过在显示存储器中排列缩略图并显示该缩略图而获得任意帧(或预定间隔的帧)的缩略图时,可以实现图18或图19中所示的胶卷显示。
接下来,描述早先描述的使用高亮点信息的胶卷显示处理。当以胶卷的形式显示捕捉到的画面数据时,为了从活动画面数据文件的开始到结束同时显示从画面数据选择的静止画面帧画面数据,以覆盖了活动画面的整个长度的间隔提取帧,并且显示所提取帧的缩略图。
然而,特别是在尺寸受限的液晶显示屏幕的设备中,诸如数字摄像机,可以同时排列的缩略图的数量被限制到几个画面(例如,5个画面)。例如,为了用5个缩略图覆盖5分钟长度的活动画面,以1分钟的间隔排列缩略图。然而,由于缩略图的间隔变长,所以很难识别活动画面的内容。此外,以规则的间隔提取的帧的缩略图可能不包含足够的用于识别场面的信息(例如,通过摄像机的摆动而改变的场面的中间的画面)。在那种情况下,即使采用胶卷显示,也不能够确定该场面像什么。相反,当执行胶卷显示时,通过选择与可能代表重要场面的高亮点相应的帧,并且显示该帧的缩略图,所选的重要场面被用于胶卷显示。因此,即使采用小数量的帧显示,也可以更有效地使用胶卷显示区域。
如上所述,在记录介质112上将高亮点存储为包括表示重要场面的位置的识别信息的数据。根据本实施方式的成像设备使用高亮点信息在胶卷显示中选择将要显示的画面。
现在,参照图20中所示的流程图描述根据本实施方式成像设备执行胶卷显示处理的顺序。图20示出作为数据处理器的微处理器111执行的处理的流程图,其中,使用与捕捉到的活动画面相关的高亮点信息执行记录介质112上存储的所捕捉到的活动画面的胶卷显示。
在执行图20所示的流程图中的步骤之前,首先,确定用于胶卷显示的活动画面数据文件,并且确定屏幕上显示的缩略图的数量。通过用胶卷显示中使用的静止画面的数量划分活动画面的长度(记录时间),可以获得胶卷显示中使用的静止画面帧画面的显示间隔(时间间隔)。根据显示屏幕的版面确定用于胶卷显示的静止画面帧画面缩略图的数量。
当不能同时在屏幕上显示用于胶卷显示的静止画面,而是使用诸如滚动操作的功能时,可以任意地确定帧的显示间隔。例如,能够以某个预定的间隔显示帧的缩略图,诸如5秒的间隔或10秒的间隔。在这种情况下,由于不能同时显示所有的缩略图,所以当通过滚动操作等等变换画面时执行胶卷显示。
现在,描述图20中所示的流程图的个别步骤中执行的处理。步骤S801中,确定表示用于胶卷显示的帧的间隔(记录时间间隔)的Δx(Δx>0),以及表示在胶卷的开始所显示的帧的基准时间(记录时间)的x1。
也就是说,胶卷显示中将要显示的帧(静止画面)的记录时间可以表示为下述:
第一帧:基准时间x(1)=x(1)
第二帧:基准时间x(2)=x(1)+Δx
第三帧:基准时间x(3)=x(1)+2Δx
第i帧:基准时间x(i)=x(1)+(i-1)Δx
其中i是表示胶卷显示中使用的帧的数量的参数,从开始显示时开始计数。
在步骤S802,初始化参数i,以便i=1。然后,在步骤S803,为了确定胶卷显示的第i个显示区域中将要显示的帧画面的缩略图,在根据用于胶卷显示的画面数据而记录的高亮点信息中,例如,参照图15A到15F在前面描述的各种类型的高亮点信息,搜索最接近基准时间x(i)的高亮点的时间tj。
例如,参照图15A到15F在前面描述的各种类型的高亮点信息包含在一个数据文件中,并且沿时间顺序存储记录时间tp(p=1,...,n),并且可以通过使用二进制检索有效地确定最接近基准时间x(i)的高亮点tj。
然后,在步骤S804,检查根据高亮点信息确定的最接近参考点x(i)的高亮点tj是否满足以下表达式(1):x-(Δx/2)≤tj<x+(Δx/2) (1)
表达式(1)用于检查根据高亮点信息获得的最接近参考点x(1)的高亮点tj是否比用于胶卷显示的第i个帧画面的基准时间x(i)前后的帧,即,第(i-1)个帧画面的基准时间x(i-1)以及第(i+1)个帧画面的基准时间x(i+1),更接近x(i)。
当满足表达式(1)时,处理进行到步骤S811,在该步骤确定可以用高亮点tj时候的帧来代替进行胶卷显示的第i个帧画面,以便在高亮点tj时候的帧被用作进行胶卷显示的第i个帧画面。如上所述,可以通过解码活动画面或者通过使用存储的帧的静止画面(缩略图)来显示画面。
当在步骤S804确定不满足表达式(1)时,处理进行到步骤S805,在步骤S805,考虑到不能用任意的高亮点来代替进行胶卷显示的第i个帧画面,时间x(i)处的帧画面被显示为进行胶卷显示的第i个帧画面。
然后,在步骤S806,检查所选择的用于胶卷显示的画面的数量是否已经达到了预定的数量。当画面的数量还没有达到预定数量时,在步骤S807,参数i按1递增。然后,在步骤S808,根据下式计算第i个显示帧的基准时间(记录时间):
x(i)=x(i-1)+Δx
然后,处理返回步骤S803并且从那里重复。
重复该处理直到所选择的用于胶卷显示的画面的数量达到预定数量为止,并且当在步骤S806确定所选择的用于胶卷显示的画面的数量已经达到预定数量时,处理结束。
通过该处理,用与选择的作为重要场面的高亮点相应的画面来代替胶卷显示中将要使用的多个画面。因此,用户可以有效地识别活动画面的内容并且选择重放的场面。此外,由于沿时间顺序排列所选择的用于胶卷显示的画面,所以不会出现时间不一致。
接下来,描述根据用户的操作改变胶卷显示的范围的过程。如上所述,可以任意确定用于胶卷显示的帧的时间间隔。然而,根据可以获得帧画面的最小时间来确定帧间隔的最小值。
例如,当所捕捉到的视频数据被记录为MPEG数据时,在下述设备中,即MPEG定义的GOP(画面组)中只有I个画面被选择作为用于胶卷显示的帧画面,用于胶卷显示的画面间隔的最小值与GOP的周期相应。最小值被表示为dmin。根据活动画面的长度确定帧周期的最大值。例如,通过用显示画面帧画面的区域的数量划分活动画面的长度来获得该最大值。最大值被表示为dmax。
胶卷显示中显示的画面的帧间隔可以采用以下的值:
dmin、dmin×2、dmin×3、...、dmin×k、dmax
其中k是自然数并且dmin×k<dmax≤dmin×(k+1)。
当根据上述过程的胶卷显示采用帧时间间隔Δx=d进行时时,胶卷显示将被改变成采用Δx=dnew的胶卷显示,例如,实际上维持在胶卷的开始采用时间xl执行的胶卷显示,并且使用Δx=dnew通过以上过程计算时间x2、...、xn。
通过上述的过程,可以用不同的时间间隔呈现胶卷显示。因此,例如,当用户想要以比较短的时间间隔观看详细的胶卷显示时,相应地用比较短的时间间隔呈现胶卷显示。相反,当用户想要以相当长的时间间隔了解活动画面的全部内容时,相应地用比较长的时间间隔呈现胶卷显示。
接下来,描述胶卷显示中从帧的位置重放活动画面的过程。当以上述的方式呈现胶卷显示时,与可能表示重要场面的高亮点相应的多个帧画面存在于胶卷显示的帧中。当用户想要参考胶卷显示重放与高亮点相应的场面时,用户选择胶卷显示中对应的画面。用户使用输入设备选择画面,例如,通过使用触摸板直接选择画面,或者通过在胶卷显示中的帧上放置光标,使用水平移动的按钮移动该光标,并且按压用于开始重放感兴趣的帧上放置了光标的按钮。表示用户的选择的信息被输入到微处理器111。然后,微处理器111从高亮点信息中获得与所选的帧画面相应的高亮点(记录时间),并且从该记录时间开始重放活动画面。或者,微处理器111从高亮点的记录时间稍前的点开始重放,从而重放邻近的高亮点中的场面。
在具体实施方式的上下文中已经详细描述了本发明。然而,对本领域的普通技术人员显而易见的是,在不脱离本发明的精神的前提下可以进行更改或选择。也就是说,已经作为例子公开了本发明,而本发明应当不被解释为限定到实施方式。应当根据权利要求确定本发明的范围。
可以通过硬件、通过软件、或通过硬件和软件的组合执行这里描述的一系列处理。当通过软件执行一系列处理时,通过将软件安装到嵌入了特殊硬件的计算机的存储器上,或者安装到能够执行各种处理的通用计算机上,来执行定义处理顺序的程序。
例如,可以在诸如硬盘或只读存储器(ROM)的记录介质中记录程序。或者,可以在诸如软盘、光盘只读存储器(CD-ROM)、磁光(MO)盘、数字化视频光盘(DVD)、磁盘、或半导体存储器的可移动记录介质上暂时或永久地存储(记录)程序。可以以称作软件包的形式提供该可移动介质。
代替将程序从可移动记录介质安装到计算机,可以通过将程序从下载位置无线地传送到计算机,或者通过诸如局域网(LAN)或Internet这样的网络有线地传送到计算机,以便计算机可以接收所传送的程序并且在诸如硬盘的内部记录介质上安装该程序。
这里描述的各种处理不必按照描述的顺序连续地执行,可以并行地或者根据需要个别地或者根据执行处理的设备的处理能力而执行。本说明书中的系统是指多个装置的逻辑组合,而不管装置的组成部分是否处于同一个外壳中。
Claims (14)
1、一种信息处理装置,包括:
数据处理器,配置成执行用于从活动画面数据中选择多个帧画面并且用于显示所选帧画面的阵列的处理,
其中,在选择将要显示的帧画面时,数据处理器使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息与活动画面数据相关联地进行记录。
2、根据权利要求1的信息处理装置,
其中,在选择将要显示的帧画面时,数据处理器计算与沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,数据处理器优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面。
3、根据权利要求1的信息处理装置,
其中,在选择将要显示的帧画面时,数据处理器计算与沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,数据处理器优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面,并且当预定临界时间范围中不存在与高亮点相应的帧画面时,该数据处理器选择与基准时间相应的帧画面作为将要显示的帧画面。
4、根据权利要求1的信息处理装置,
其中,该数据处理器从包括重要场面的记录时间的高亮点信息中获得重要场面的记录时间,而对于重要场面的每个记录时间,当满足下面的条件表达式
x-(Δx/2)≤tj<x+(Δx/2)
时,该数据处理器选择与具有重要场面的记录时间的高亮点相应的帧画面作为将要显示的帧画面,其中tj表示重要场面的记录时间,x表示与沿时间顺序设置的多个显示帧中与重要场面的记录时间有关的显示帧相应的基准时间,而Δx表示显示帧的时间间隔。
5、一种成像设备,包括:
记录数据处理器,配置成执行用于根据画面拍摄期间输入的输入信息从所捕捉到的画面数据中选择与重要场面相应的画面部分,用于生成允许识别所选择的与重要场面相应的画面部分的高亮点信息,以及用于在记录介质上将该高亮点信息记录为与所捕捉到的画面数据相关的信息的处理;以及
重放数据处理器,配置成执行用于从活动画面数据中选择多个帧画面,以及用于显示所选帧画面的阵列的处理,
其中,在选择将要显示的帧画面时,重放数据处理器使用与活动画面数据相关联地记录的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面。
6、根据权利要求5的成像设备,
其中,该记录数据处理器接收变焦操作信息、加速传感器的检测信息、音频信号电平信息、GPS信息、时钟信息以及静止画面拍摄信息中至少之一作为输入信息,根据该输入信息识别与重要场面相应的画面部分,以及生成高亮点信息。
7、一种信息处理方法,用于执行通过信息处理装置显示画面的处理,该信息处理方法包括步骤:
执行数据处理,用于从活动画面数据中选择多个帧画面,以及用于显示所选帧画面的阵列,该数据处理由数据处理器执行,
其中,在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
8、根据权利要求7的信息处理方法,
其中,在选择将要显示的帧画面时,计算与沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面。
9、根据权利要求7的信息处理方法,
其中,在选择将要显示的帧画面时,计算与沿时间顺序设置的多个显示帧相应的基准时间,而对于每个基准时间,优先选择与具有最接近基准时间的记录时间的高亮点相应的帧画面作为将要显示的帧画面,并且当预定临界时间范围中不存在与高亮点相应的帧画面时,选择与基准时间相应的帧画面作为将要显示的帧画面。
10、根据权利要求7的信息处理方法,
其中,从包括重要场面的记录时间的高亮点信息中获得重要场面的记录时间,而对于重要场面的每个记录时间,当满足下面的条件表达式
x-(Δx/2)≤tj<x+(Δx/2)
时,选择与具有重要场面的记录时间的高亮点相应的帧画面作为将要显示的帧画面,其中tj表示重要场面的记录时间,x表示与沿时间顺序设置的多个显示帧中与重要场面的记录时间有关的显示帧相应的基准时间,而Δx表示显示帧的时间间隔。
11、一种由成像设备执行的信息处理方法,该信息处理方法包括步骤:
执行记录数据处理,用于根据画面拍摄期间输入的输入信息从所捕捉到的画面数据中选择与重要场面相应的画面部分,用于生成允许识别所选择的与重要场面相应的画面部分的高亮点信息,以及用于在记录介质上将该高亮点信息记录为与所捕捉到的画面数据相关的信息,该记录数据处理由记录数据处理器执行;以及
执行重放数据处理,用于从活动画面数据中选择多个帧画面,以及用于显示所选帧画面的阵列,该重放数据处理由重放数据处理器执行,
其中,在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
12、根据权利要求11的信息处理方法,
其中,接收变焦操作信息、加速传感器的检测信息、音频信号电平信息、GPS信息、时钟信息以及静止画面拍摄信息中至少之一作为输入信息,根据该输入信息识别与重要场面相应的画面部分,以及生成高亮点信息。
13、一种使信息处理装置执行用于显示画面的处理的计算机程序,该计算机程序包括步骤:
执行数据处理,用于从活动画面数据中选择多个帧画面,以及用于显示所选帧画面的阵列,该数据处理由数据处理器执行,
其中,在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
14、一种使成像设备执行信息处理的计算机程序,该计算机程序包括步骤:
执行记录数据处理,用于根据画面拍摄期间输入的输入信息从所捕捉到的画面数据中选择与重要场面相应的画面部分,用于生成允许识别所选择的与重要场面相应的画面部分的高亮点信息,以及用于在记录介质上将该高亮点信息记录为与所捕捉到的画面数据相关的信息,该记录数据处理由记录数据处理器执行;以及
执行重放数据处理,用于从活动画面数据中选择多个帧画面,以及用于显示所选帧画面的阵列,该重放数据处理由重放数据处理器执行;
其中,在选择将要显示的帧画面时,使用允许识别与重要场面相应的画面部分的高亮点信息,优先选择与高亮点相应的帧画面作为将要显示的帧画面,该高亮点信息被与活动画面数据相关联地进行记录。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005323364A JP4525558B2 (ja) | 2005-11-08 | 2005-11-08 | 情報処理装置、撮像装置、および情報処理方法、並びにコンピュータ・プログラム |
JP323364/05 | 2005-11-08 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1972414A true CN1972414A (zh) | 2007-05-30 |
CN1972414B CN1972414B (zh) | 2011-12-21 |
Family
ID=37714641
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2006101689356A Expired - Fee Related CN1972414B (zh) | 2005-11-08 | 2006-11-08 | 信息处理装置、成像设备、信息处理方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US8265146B2 (zh) |
EP (1) | EP1783772A3 (zh) |
JP (1) | JP4525558B2 (zh) |
KR (1) | KR20070049585A (zh) |
CN (1) | CN1972414B (zh) |
TW (1) | TW200721824A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107920182A (zh) * | 2011-12-16 | 2018-04-17 | 三星电子株式会社 | 便携式电子装置、电子装置及显示方法 |
Families Citing this family (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4854339B2 (ja) * | 2006-03-08 | 2012-01-18 | 三洋電機株式会社 | 映像再生装置 |
WO2009037856A1 (ja) * | 2007-09-19 | 2009-03-26 | Panasonic Corporation | 記録装置 |
JP5038836B2 (ja) * | 2007-09-28 | 2012-10-03 | 株式会社東芝 | 情報処理装置 |
US8223151B2 (en) * | 2008-01-25 | 2012-07-17 | Tektronix, Inc. | Mark extension for analysis of long record length data |
JP4640456B2 (ja) * | 2008-06-25 | 2011-03-02 | ソニー株式会社 | 画像記録装置、画像記録方法、画像処理装置、画像処理方法、プログラム |
US8477228B2 (en) | 2008-06-30 | 2013-07-02 | Verizon Patent And Licensing Inc. | Camera data management and user interface apparatuses, systems, and methods |
JP5072757B2 (ja) * | 2008-07-24 | 2012-11-14 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP5386915B2 (ja) * | 2008-09-30 | 2014-01-15 | カシオ計算機株式会社 | 動画撮像装置、動画撮像方法、及びプログラム |
JP4760892B2 (ja) | 2008-10-10 | 2011-08-31 | ソニー株式会社 | 表示制御装置、表示制御方法及びプログラム |
JP5369595B2 (ja) * | 2008-10-10 | 2013-12-18 | ソニー株式会社 | 画像処理装置と画像処理方法および撮像装置とコンピュータ・プログラム |
JP5500812B2 (ja) * | 2008-10-20 | 2014-05-21 | 株式会社ソニー・コンピュータエンタテインメント | 撮像画像記憶制御装置、撮像画像記憶制御方法、撮像画像記憶制御プログラム及び撮像画像記憶制御プログラムを記憶した記憶媒体 |
JP2010213136A (ja) * | 2009-03-12 | 2010-09-24 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
JP5456023B2 (ja) | 2009-04-07 | 2014-03-26 | パナソニック株式会社 | 画像撮影装置、画像撮影方法、プログラム、及び集積回路 |
JP2011009846A (ja) | 2009-06-23 | 2011-01-13 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
JP5531467B2 (ja) * | 2009-07-03 | 2014-06-25 | ソニー株式会社 | 撮像装置、および画像処理方法、並びにプログラム |
JP5369947B2 (ja) | 2009-07-09 | 2013-12-18 | ソニー株式会社 | 撮像装置、画像処理方法及びプログラム |
JP5521436B2 (ja) * | 2009-08-19 | 2014-06-11 | ソニー株式会社 | 動画像記録装置、動画像記録方法およびプログラム |
JP2011239075A (ja) * | 2010-05-07 | 2011-11-24 | Sony Corp | 表示装置、表示方法及びプログラム |
JP5714297B2 (ja) | 2010-10-29 | 2015-05-07 | 株式会社キーエンス | 画像処理装置、画像処理方法および画像処理プログラム |
JP2012169786A (ja) * | 2011-02-10 | 2012-09-06 | Canon Inc | 画像処理装置、画像処理方法 |
JP5510484B2 (ja) | 2012-03-21 | 2014-06-04 | カシオ計算機株式会社 | 動画撮影装置、ダイジェスト再生設定装置、ダイジェスト再生設定方法、及び、プログラム |
US20150020011A1 (en) * | 2013-07-15 | 2015-01-15 | Verizon and Redbox Digital Entertainment Services, LLC | Media program discovery assistance user interface systems and methods |
JP5748246B2 (ja) * | 2014-05-12 | 2015-07-15 | Necカシオモバイルコミュニケーションズ株式会社 | 端末装置及びプログラム |
US9571971B2 (en) * | 2015-04-24 | 2017-02-14 | International Business Machines Corporation | Managing crowd sourced data acquisition |
US9681111B1 (en) | 2015-10-22 | 2017-06-13 | Gopro, Inc. | Apparatus and methods for embedding metadata into video stream |
US10033928B1 (en) | 2015-10-29 | 2018-07-24 | Gopro, Inc. | Apparatus and methods for rolling shutter compensation for multi-camera systems |
US9792709B1 (en) | 2015-11-23 | 2017-10-17 | Gopro, Inc. | Apparatus and methods for image alignment |
US9973696B1 (en) | 2015-11-23 | 2018-05-15 | Gopro, Inc. | Apparatus and methods for image alignment |
US9848132B2 (en) | 2015-11-24 | 2017-12-19 | Gopro, Inc. | Multi-camera time synchronization |
US9667859B1 (en) | 2015-12-28 | 2017-05-30 | Gopro, Inc. | Systems and methods for determining preferences for capture settings of an image capturing device |
US9922387B1 (en) * | 2016-01-19 | 2018-03-20 | Gopro, Inc. | Storage of metadata and images |
US9967457B1 (en) | 2016-01-22 | 2018-05-08 | Gopro, Inc. | Systems and methods for determining preferences for capture settings of an image capturing device |
US9665098B1 (en) | 2016-02-16 | 2017-05-30 | Gopro, Inc. | Systems and methods for determining preferences for flight control settings of an unmanned aerial vehicle |
US9973746B2 (en) | 2016-02-17 | 2018-05-15 | Gopro, Inc. | System and method for presenting and viewing a spherical video segment |
US9743060B1 (en) | 2016-02-22 | 2017-08-22 | Gopro, Inc. | System and method for presenting and viewing a spherical video segment |
US9602795B1 (en) | 2016-02-22 | 2017-03-21 | Gopro, Inc. | System and method for presenting and viewing a spherical video segment |
US9934758B1 (en) | 2016-09-21 | 2018-04-03 | Gopro, Inc. | Systems and methods for simulating adaptation of eyes to changes in lighting conditions |
US10268896B1 (en) | 2016-10-05 | 2019-04-23 | Gopro, Inc. | Systems and methods for determining video highlight based on conveyance positions of video content capture |
US9973792B1 (en) | 2016-10-27 | 2018-05-15 | Gopro, Inc. | Systems and methods for presenting visual information during presentation of a video segment |
US10194101B1 (en) | 2017-02-22 | 2019-01-29 | Gopro, Inc. | Systems and methods for rolling shutter compensation using iterative process |
US10187607B1 (en) | 2017-04-04 | 2019-01-22 | Gopro, Inc. | Systems and methods for using a variable capture frame rate for video capture |
EP3731073A4 (en) | 2017-12-22 | 2021-02-24 | Sony Corporation | INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND PROGRAM |
JP6723566B2 (ja) * | 2018-10-17 | 2020-07-15 | 株式会社アジェンシア | コンテンツ生成プログラム、コンテンツ生成方法及びコンテンツ生成システム |
JP7281951B2 (ja) | 2019-04-22 | 2023-05-26 | シャープ株式会社 | 電子機器、制御装置、制御プログラムおよび制御方法 |
JP7452620B2 (ja) | 2020-02-26 | 2024-03-19 | 日本電気株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP7182754B2 (ja) * | 2020-06-12 | 2022-12-05 | 株式会社Mixi | 情報処理装置,情報処理装置の制御方法及び制御プログラム |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2741871B2 (ja) | 1988-07-22 | 1998-04-22 | 日本電信電話株式会社 | 動画像検索編集方法 |
JP3230858B2 (ja) * | 1992-11-26 | 2001-11-19 | 松下電器産業株式会社 | 動画像の優先度自動選択方法および動画像ダイジェスト自動表示装置 |
US6574416B1 (en) * | 1995-11-02 | 2003-06-03 | Videa, Llc | Picture-based video indexing system |
JP4000623B2 (ja) * | 1997-05-26 | 2007-10-31 | ソニー株式会社 | 映像信号記録装置及び映像信号記録方法 |
US6236395B1 (en) * | 1999-02-01 | 2001-05-22 | Sharp Laboratories Of America, Inc. | Audiovisual information management system |
JP2002176613A (ja) | 2000-12-06 | 2002-06-21 | Minolta Co Ltd | 動画像編集装置、動画像編集方法および記録媒体 |
JP4497761B2 (ja) * | 2001-07-18 | 2010-07-07 | キヤノン株式会社 | 画像処理装置及びインデックス作成方法 |
JP3976316B2 (ja) * | 2002-10-18 | 2007-09-19 | 富士フイルム株式会社 | 画像再生装置 |
JP2004222268A (ja) | 2002-12-26 | 2004-08-05 | Sanyo Electric Co Ltd | 動画像処理装置 |
JP3936666B2 (ja) * | 2003-02-20 | 2007-06-27 | 日本電信電話株式会社 | 動画像中の代表画像抽出装置,動画像中の代表画像抽出方法,動画像中の代表画像抽出プログラムおよび動画像中の代表画像抽出プログラムの記録媒体 |
US8718128B2 (en) * | 2003-05-07 | 2014-05-06 | Canon Kabushiki Kaisha | Moving image processing method and apparatus |
JP2005229236A (ja) * | 2004-02-12 | 2005-08-25 | Casio Comput Co Ltd | カメラ装置およびプログラム |
-
2005
- 2005-11-08 JP JP2005323364A patent/JP4525558B2/ja not_active Expired - Fee Related
-
2006
- 2006-11-06 EP EP06023057A patent/EP1783772A3/en not_active Withdrawn
- 2006-11-06 TW TW095140921A patent/TW200721824A/zh not_active IP Right Cessation
- 2006-11-07 US US11/557,278 patent/US8265146B2/en not_active Expired - Fee Related
- 2006-11-08 CN CN2006101689356A patent/CN1972414B/zh not_active Expired - Fee Related
- 2006-11-08 KR KR1020060109811A patent/KR20070049585A/ko active IP Right Grant
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107920182A (zh) * | 2011-12-16 | 2018-04-17 | 三星电子株式会社 | 便携式电子装置、电子装置及显示方法 |
US10579211B2 (en) | 2011-12-16 | 2020-03-03 | Samsung Electronics Co., Ltd. | Display apparatus and method |
CN107920182B (zh) * | 2011-12-16 | 2020-06-12 | 三星电子株式会社 | 便携式电子装置、电子装置及显示方法 |
US11099711B2 (en) | 2011-12-16 | 2021-08-24 | Samsung Electronics Co., Ltd. | Display apparatus and method |
Also Published As
Publication number | Publication date |
---|---|
JP4525558B2 (ja) | 2010-08-18 |
US20070140662A1 (en) | 2007-06-21 |
TWI341132B (zh) | 2011-04-21 |
EP1783772A2 (en) | 2007-05-09 |
US8265146B2 (en) | 2012-09-11 |
TW200721824A (en) | 2007-06-01 |
EP1783772A3 (en) | 2009-06-03 |
JP2007134771A (ja) | 2007-05-31 |
KR20070049585A (ko) | 2007-05-11 |
CN1972414B (zh) | 2011-12-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1972414B (zh) | 信息处理装置、成像设备、信息处理方法 | |
JP4379409B2 (ja) | 撮像装置、および情報処理方法、並びにコンピュータ・プログラム | |
CN101267523B (zh) | 处理运动图像的设备、成像设备、图像显示控制方法 | |
CN101263706B (zh) | 摄像装置、记录方法 | |
US7609901B2 (en) | Recording/reproducing system | |
CN101945212B (zh) | 图像捕获设备、图像处理方法 | |
CN102362491B (zh) | 缩略图生成装置及缩略图生成方法 | |
US7602980B2 (en) | Image processing apparatus and method | |
JP2009017598A (ja) | 撮像装置、および情報処理方法、並びにコンピュータ・プログラム | |
CN103002207A (zh) | 摄影设备 | |
JP4185810B2 (ja) | 撮影装置 | |
US20080151060A1 (en) | Camera apparatus and chapter data generating method in camera apparatus | |
KR101748576B1 (ko) | 이동통신 단말기에서 동영상 데이터를 세그먼팅하기 위한 장치 및 방법 | |
JP2006311145A (ja) | 撮像装置、再生装置、制御方法、およびプログラム | |
CN105744124B (zh) | 摄像装置及记录设备的控制方法 | |
JP5262695B2 (ja) | 情報処理装置、および情報処理方法、並びにプログラム | |
JP2024038333A (ja) | 撮像装置 | |
JP2013051476A (ja) | 監視装置、監視方法およびプログラム | |
JP2005236891A (ja) | 画像処理装置およびその方法 | |
JP2009081691A (ja) | 再生指示情報記録装置 | |
JP2016167716A (ja) | 撮像装置 | |
JP2016122949A (ja) | 代表画像を選出する手段を備えた撮影装置 | |
JP2007074489A (ja) | 再生評価装置および方法 | |
KR20080103766A (ko) | 참고 특징 점을 이용한 피사체 영상 검색방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20111221 Termination date: 20151108 |
|
EXPY | Termination of patent right or utility model |