CN107251551A - 图像处理设备、图像捕获装置、图像处理方法和程序 - Google Patents

图像处理设备、图像捕获装置、图像处理方法和程序 Download PDF

Info

Publication number
CN107251551A
CN107251551A CN201680008330.2A CN201680008330A CN107251551A CN 107251551 A CN107251551 A CN 107251551A CN 201680008330 A CN201680008330 A CN 201680008330A CN 107251551 A CN107251551 A CN 107251551A
Authority
CN
China
Prior art keywords
frame
time
detection
audio reproducing
rabbit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680008330.2A
Other languages
English (en)
Other versions
CN107251551B (zh
Inventor
成田哲也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Semiconductor Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corp filed Critical Sony Semiconductor Solutions Corp
Publication of CN107251551A publication Critical patent/CN107251551A/zh
Application granted granted Critical
Publication of CN107251551B publication Critical patent/CN107251551B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04—Time compression or expansion
    • G10L21/055—Time compression or expansion for synchronising with other signals, e.g. video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape
    • H04N5/783—Adaptations for reproducing at a rate different from the recording rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H04N5/9305—Regeneration of the television signal or of selected parts thereof involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/802—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving processing of the sound signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

采集声音和移动图像的图像拾取装置防止再现质量劣化。场景改变检测器检测以预定帧频成像的多个帧之中的场景改变时的帧作为检测帧。帧频转换单元将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频。视频再现时间设置单元将以低帧频执行再现的再现时间设置为关于所述多个帧中的每个的视频再现时间。音频再现时间设置单元针对检测时间段之外的以恒定间隔记录的多个声音中的每个设置恒定间隔的音频再现时间，并且相对于所述检测时间段之内记录的声音来设置与对应于所述检测帧的视频再现时间同步的音频再现时间。

Description

图像处理设备、图像捕获装置、图像处理方法和程序
技术领域
本技术涉及图像处理设备、图像拾取装置、图像处理方法和程序。更具体地，本技术涉及用于执行录影和录音的图像处理设备、图像拾取装置和使用以上装置的图像处理方法以及用于致使计算机执行该方法的程序。
背景技术
传统上，当对高速移动物体进行成像时，已经使用了以比再现时帧频高的帧频对移动图像进行高速成像的图像拾取装置。可以通过以比记录时帧频低的帧频再现移动图像来得到流畅的慢动作视频。例如，当以60赫兹(Hz)的低帧频再现以600赫兹(Hz)的高帧频成像的移动图像时，再现时间延长至记录时间的10倍，并且所再现的移动图像中的物体运动速度减小至1/10。已经提出了在高速摄影期间记录声音的情况下按照帧频的减小来放慢音频再现速度的图像拾取装置(例如，参见专利文献1)。例如，当以相对于记录时帧频的1/10的帧频再现移动图像时，图像拾取装置将再现速度放慢至1/10，以再现该声音。另外，再现速度转换之后的声音再现时间被设置成高速摄影的起始时间。
引用列表
专利文献
专利文献1：日本专利申请特许公开No.2010-178124
发明内容
本发明要解决的问题
然而，用上述传统技术，当声音再现速度变得较慢时，因为声音再现质量劣化，可能难以听到声音。另外，在不改变声音再现速度的情况下从开始高速摄影时再现声音的情况下，静音时间延长。例如，当高速下成像的移动图像的1秒再现时间延长至10秒并且从开始高速摄影时再现高速摄影时记录的声音而没有延长该声音时，静音时间持续达9秒。结果，再现质量会劣化。因此，问题是难以抑制再现质量的劣化。
本技术是在考虑到以上陈述的情况下提出的。本技术的目的是抑制用于采集声音和移动图像的图像拾取装置的再现质量劣化。
问题的解决方案
已经提出用于解决以上所提到问题的本技术。本技术的第一方面是图像处理设备、图像处理设备的图像处理方法和用于致使计算机执行该方法的程序。所述图像处理设备包括：场景改变检测器，其被检测以预定帧频成像的多个帧之中的场景改变时的帧作为检测帧；帧频转换单元，其将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；视频再现时间设置单元，其将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及音频再现时间设置单元，其将恒定间隔的音频再现时间设置成所述检测时间段之外的以恒定间隔记录的多个声音，并且相对于所述检测时间段之内记录的声音来设置与对应于所述检测帧的视频再现时间同步的音频再现时间。用本技术的以上第一方面，得到相对于检测时间段之内记录的声音来设置与对应于检测帧的视频再现时间同步的音频再现时间的效果。
另外，在第一方面，该图像处理设备还可包括放慢检测时间段之内记录的声音的再现速度的再现速度改变单元。用再现速度改变单元，得到改变检测时间段之内记录的声音的再现速度的效果。
另外，在第一方面，有可能，图像处理设备还包括复制单元，该复制单元复制所述检测时间段之内记录的声音的数据，以生成复制数据，并且所述音频时间设置单元将复制数据的音频再现时间设置成检测时间段之内记录的声音的再现结束时间。用以上处理，得到复制数据的音频再现时间被设置为与检测时间段之内记录的声音的再现结束时间同步的时间的效果。
另外，在第一方面，图像处理设备还可包括手动设置单元，该手动设置单元按照用户的操作将固定时间段设置为手动设置时间段。该帧频转换单元可以将除了检测时间段和手动设置时间段外的时间段中成像的帧的帧频转换成低帧频，并且该音频再现时间设置单元可将手动设置时间段中的特定时间设置为相对于记录在手动设置时间中的声音的音频再现时间。用以上配置，可得到手动设置时间段中的特定时间被设置为相对于手动设置时间段之内记录的声音的音频再现时间。
另外，在第一方面，还可包括用于将预定附加声音叠加在声音上的声音叠加单元。用该声音叠加单元，可得到叠加附加声音的效果。
另外，本技术的第二方面是一种图像拾取装置，所述图像拾取装置包括：成像单元，其以预定帧频将多个帧成像；场景改变检测器，其检测所述多个帧之中的场景改变时的帧作为检测帧；帧频转换单元，其将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；视频再现时间设置单元，其被配置成将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及音频再现时间设置单元，其将恒定间隔的音频再现时间设置成所述检测时间段之外的以恒定间隔记录的多个声音，并且相对于所述检测时间段之内记录的声音来设置与对应于所述检测帧的视频再现时间同步的音频再现时间。用本技术的以上第二方面，得到相对于检测时间段之内记录的声音来设置与对应于检测帧的视频再现时间同步的音频再现时间的效果。
本发明的效果
根据本技术，可得到优异的效果，即，可以抑制用于采集声音和移动图像的图像拾取装置中的再现质量劣化。注意的是，本文中描述的效果不受限制，并且该效果可以是本公开中描述的任何效果。
附图说明
图1是根据第一实施例的图像拾取装置的示例性配置的框图。
图2是根据第一实施例的移动图像数据生成单元的示例性配置的框图。
图3是根据第一实施例的时序控制单元的示例性配置的框图。
图4是根据第一实施例的示例性流的示图。
图5是根据第一实施例的其中被插入静音数据的示例性流的示图。
图6是根据第一实施例的流和分组的示例性数据结构的示图。
图7是根据第一实施例的示例性记录处理的流程图。
图8是根据第一实施例的示例性录音处理的流程图。
图9是根据第二实施例的移动图像数据生成单元的示例性配置的框图。
图10是根据第二实施例的示例性流的示图。
图11是根据第二实施例的示例性记录处理的流程图。
图12是根据第二实施例的示例性录音处理的流程图。
图13是根据第二实施例的修改形式的示例性流的示图。
图14是根据第三实施例的图像拾取装置的示例性配置的框图。
图15是根据第三实施例的示例性流的示图。
图16是根据第三实施例的示例性录音处理的流程图。
图17是根据第四实施例的图像拾取装置的示例性配置的框图。
图18是根据第四实施例的示例性流的示图。
图19是根据第四实施例的示例性录音处理的流程图。
图20是根据第五实施例的图像拾取装置的示例性配置的框图。
具体实施方式
以下，描述用于执行本技术的实施例(以下被称为实施例)。按以下次序进行描述。
1.第一实施例(再现时间被设置成场景改变定时的示例)
2.第二实施例(再现时间被设置成用户指定定时或场景改变定时的示例)
3.第三实施例(通过改变再现速度来将再现时间设置成场景改变定时的示例)
4.第四实施例(通过复制音频数据来将再现时间设置成场景改变定时的示例)
5.第五实施例(通过添加声音来将再现时间设置成场景改变定时的示例)
<1.第一实施例>
[图像拾取装置的示例性配置]
图1是根据第一实施例的图像拾取装置100的示例性配置的框图。图像拾取装置100包括时序控制单元110、移动图像数据生成单元120、移动图像编码单元130、视频再现时间添加单元140、音频取样处理单元150、音频编码单元160、音频再现时间添加单元170和记录单元180。
移动图像数据生成单元120根据通过因用户操作而生成的操作信号，按时间序列来生成包括多个视频帧的移动图像数据。例如，输入指示记录和录音的开始时间的信号和指示记录和录音的结束时间的信号作为操作信号。这里，假定记录和录音的开始时间相同。类似地，假定记录和录音的结束时间相同。移动图像数据生成单元120将所生成的移动图像数据经由信号线129供应到移动图像编码单元130。
移动图像编码单元130对移动图像数据进行编码。例如，遵照移动图像专家组(MPEG)-2标准对移动图像数据进行编码。移动图像编码单元130将编码后的移动图像数据分组成视频分组并且将数据经由信号线139供应到视频再现时间添加单元140。此外，移动图像编码单元130可遵照除了MPEG-2外的标准(诸如，MPEG-4)对移动图像数据进行编码。
音频取样处理单元150根据操作信号对声音进行取样，以生成取样数据。例如，以44.1千赫兹(kHz)的取样频率对声音进行取样，并且每当执行取样时，生成具有根据量化位深的大小(例如，16位)的取样数据。音频取样处理单元150将取样数据供应到音频编码单元160。此外，取样频率和量化位深度分别限于44.1千赫兹(kHz)和16位。
音频编码单元160通过预定编码单元对取样数据进行编码。例如，遵照MPEG标准，以20毫秒(ms)为单元对取样数据进行编码。被编码单元进行编码的每个音频数据被称为“音频帧”。音频编码单元160将音频帧分组成音频分组并且将音频分组经由信号线169供应到音频再现时间添加单元170。
音频取样处理单元150和音频编码单元160按恒定间隔来记录声音。注意的是，音频取样处理单元150和音频编码单元160是权利要求书中的示例性记录单元。
时序控制单元110设置每个视频帧的视频再现时间并且设置每个音频帧的音频再现时间。例如，MPEG标准下的显示时间戳记(PTS)被设置为再现时间。在下面的描述中，针对视频帧设置的PTS被称为“PTS_V”，并且针对音频帧设置的PTS被称为“PTS_A”。时序控制单元110将PTS_V经由信号线119供应到视频再现时间添加单元140，并且将PTS_A经由信号线118供应到音频再现时间添加单元170。
视频再现时间添加单元140在视频分组中添加PTS_V作为视频再现时间。视频再现时间添加单元140将其中已经添加PTS_V的视频分组经由信号线149供应到记录单元180。
音频再现时间添加单元170在视频分组中添加PTS_A作为音频再现时间。音频再现时间添加单元170将其中已经添加PTS_A的音频分组经由信号线179供应到记录单元180。
记录单元180记录包括视频分组和音频分组的流。
此外，图像拾取装置100还可包括解码单元并且可以对流进行解码。另外，除了解码单元之外，图像拾取装置100还可以包括显示单元和音频再现单元，并且可将通过解码而得到的移动图像与声音一起再现。此外，图像拾取装置100还可包括外部接口，并且可将流输出到外部装置。
[移动图像数据生成单元的示例性配置]
图2是根据第一实施例的移动图像数据生成单元120的示例性配置的框图。移动图像数据生成单元120包括成像单元121、缓冲器122、场景改变检测器123、帧频转换单元124和开关单元125。
成像单元121根据操作信号，与预定垂直同步信号SYNC_VH同步地按时间序列来采集多个视频帧。成像单元121包括例如光学系统(诸如，成像透镜和成像元件)。例如，使用互补金属氧化物半导体(CMOS)传感器和电荷耦合器件(CCD)传感器作为成像元件。另外，垂直同步信号SYNC_VH的频率是比再现时的帧频(例如，600赫兹(Hz))高的值。成像单元121使缓冲器122保持每个视频帧，并且将视频帧作为当前视频帧供应到场景改变检测器123。缓冲器122保持预定数量的视频帧。
场景改变检测器123检测场景改变时的视频帧作为检测帧。场景改变检测器123得到来自缓冲器122的当前帧之前的视频帧作为前一视频帧，将当前视频帧与前一视频帧进行比较，并且基于比较结果来确定场景是否改变。当场景已经改变时，场景改变检测器123将此时帧的成像时间作为场景改变定时供应到时序控制单元110。另外，场景改变检测器123将包括场景改变定时的固定时间段设置成高帧频时间段，并且将指示高帧频时间段的高帧频标志供应到开关单元125。例如，将在中心(1秒等)包括场景改变时间的预定时间段设置为高帧频时间段。另外，例如，至于高帧频时间段标志，值“1”被设置成在高帧频时间段之内，而值“0”被设置成在高帧频时间段之外。
帧频转换单元124通过减少缓冲器122所保持的帧来减小帧频。例如，帧频转换单元124将视频帧的帧频转换成垂直同步信号SYNC_VL的频率(例如，60赫兹：Hz)的帧频，并且将该帧频供应到开关单元125。
开关单元125根据高帧频时间段标志将帧切换至输出。在高帧频时间段标志是“1”的情况下，开关单元125将缓冲器122所保持的视频帧供应到移动图像编码单元130。另一方面，在高帧频时间段标志是“0”的情况下，开关单元125将来自帧频转换单元124的帧供应到移动图像编码单元130。
此外，虽然成像单元121和音频取样处理单元150设置在单个装置中，但成像单元121和音频取样处理单元150可分别设置在不同装置中。例如，成像单元121和音频取样处理单元150可设置在图像拾取装置中，并且其他电路可设置在图像处理设备中。
[时序控制单元的示例性配置]
图3是根据第一实施例的时序控制单元110的示例性配置的框图。时序控制单元110包括视频再现时间设置单元111和音频再现时间设置单元112。
视频再现时间设置单元111设置每个视频帧的视频再现时间(PTS_V)。视频再现时间设置单元111设置PTS_V，以与垂直同步信号SYNC_VL同步地再现视频帧。例如，将通过将从参考时间到再现时间的秒数乘以预定参考频率而得到的值设置为PST_V。例如，在参考频率是90千赫兹(kHz)并且从参考时间起以0.5秒的时间执行再现的情况下，将值0.5×90×1000设置为PTS_V。
音频再现时间设置单元112设置每个音频帧的音频再现时间(PTS_A)。音频再现时间设置单元112设置PTS_A，以相对于高帧频时间段之外的视频帧，与垂直同步信号SYNC_VL同步地执行再现。另一方面，音频再现时间设置单元112相对于高帧频时间段之内的视频帧，将与场景改变定时同步的时间设置成PTS_A。例如，将与场景改变定时相同的时间和场景改变定时移位一定时长的时间设置为作为同步时间的PTS_A。
图4是根据第一实施例的示例性流的示图。图4中的a是与垂直同步信号SYNC_VH同步成像的示例性视频帧的示图。在垂直同步信号SYNC_VH的频率是600赫兹(Hz)的情况下，每1/600秒对多个视频帧(诸如，视频帧501)进行成像。另外，在视频帧之中，检测场景改变时间(Tc)的视频帧作为检测帧。在图4中的a中，用对角线画出的视频帧指示检测帧。
图4中的b是在帧频已经转换之后的示例性帧的示图。包括场景改变定时Tc的固定时间段被设置成高帧频时间段，并且帧频被转换成高帧频时间段之外的低帧频，例如，60赫兹(Hz)。用图4中的c中的粗线包围的视频帧指示高帧频时间段之内的视频帧。
图4中的c是示例性音频帧的示图。例如，每1/50秒对取样数据进行编码，并且生成诸如音频帧Fa1、Fa2和Fa3的帧。这里，记录高帧频时间段之外的音频帧Fa1和Fa3，并且记录高帧频时间段之内的音频帧Fa2。
图4中的d是视频再现时间已经被设置成的示例性视频帧的示图。对于包括检测帧的每个视频帧，设置用于执行(例如，以60赫兹(Hz)的低帧频)再现的视频再现时间。根据视频再现时间，以非常慢的运动来再现高帧频时间段之内成像的移动对象。例如，在高帧频时间段之内的帧频是600赫兹(Hz)并且再现时的帧频是60赫兹(Hz)的情况下，再现时间延长至高帧频时间段的10倍，移动对象的运动速度减小至1/10。
图4中的e是音频再现时间已经被设置成的示例性音频帧的示图。相对于高帧频时间段之外的音频帧Fa1、Fa3等以恒定间隔(例如，1/50秒)来设置音频再现时间。另一方面，相对于高帧频时间段之内的音频帧Fa2，设置与检测帧对应的视频再现时间Tc'。
严格地，高帧频时间段之内记录的音频帧Fa2的再现时间是高帧频时间段的开始时间点Ts。然而，如果开始时间点Ts被设置为音频再现时间，则静音时间延长。例如，在高帧频时间段是1秒并且再现时间延长至10倍(也就是说，10秒)的情况下，静音时间持续9秒。虽然如专利文献1中一样考虑放慢声音再现速度，但随着再现速度变慢，捕捉声音变得更难。
然而，图像拾取装置100将与检测帧对应的视频再现时间Tc'设置成相对于高帧频时间段之内的音频帧Fa2的音频再现时间。因此，静音时间缩短。例如，在高帧频时间段是检测帧之前和之后的0.5秒并且再现时间延长至10倍(也就是说，10秒)的情况下，从处于高帧频时间段中间的视频再现时间Tc'起再现音频帧Fa2。因此，静音时间变得少于5秒。用以上处理，再现质量提高。
另外，由于图像拾取装置100设置与场景改变定时同时的再现时间，因此再现装置不需要检测场景改变，并且再现装置可以在依赖再现环境的情况下根据场景改变来再现声音。另外，如果再现速度改变，则音频帧的数据量增大，并且需要高速编码和大容量编码缓冲器。然而，由于图像拾取装置100不改变再现速度，因此不需要高速编码和大容量编码缓冲器。
此外，图像拾取装置100并没有将任何音频帧插入高帧频时间段之内的静音时间中。然而，可如图5中所例示地插入静音帧。这里，静音帧意指其音量大小被设置成零的音频帧。
图6是根据第一实施例的流和分组的示例性数据结构的示图。图6中的a是流的示例性数据结构的示图。在MPEG-2TS标准中，流包括例如包括辅助数据、视频分组V_PCK和音频分组A_PCK的分组ARI_PCK。视频帧被存储在一个或更多个视频分组V_PCK中，并且音频帧被存储在一个或更多个音频分组A_PCK中。
图6中的b是视频分组V_PCK的示例性数据结构的示图。在MPEG-2TS标准中，视频分组V_PCK存储分组起始码、分组长度、代码“10”、标志和控制、PES报头长度、条件编码和分组数据。注意的是，音频分组的数据结构类似于视频分组的数据结构。
在分组起始码的字段中，存储指示分组头部的报头起始码和用于识别流的流ID。在条件编码的字段中，存储指示再现时间的PTS和指示解码时间的解码时间戳记(DTS)。PTS_V和PTS_A被存储在该字段中。
[图像拾取装置的示例性操作]
图7是根据第一实施例的示例性记录处理的流程图。例如，当执行开始记录的操作(按下记录按钮等)时，开始录音处理。图像拾取装置100以600Hz的高帧频来生成视频帧(步骤S901)。另外，图像拾取装置100在已经检测到场景改变时设置高帧频时间段(步骤S902)并且将帧频转换成高帧频时间段之外的60赫兹的低帧频(步骤S903)。
然后，图像拾取装置100对视频帧进行编码(步骤S904)并且设置视频再现时间，以在60赫兹的低帧频下执行编码后的视频帧的再现(步骤S905)。图像拾取装置100确定是否已经执行了结束记录的操作(按下停止按钮等)(步骤S906)。在还未执行结束记录的操作(步骤S906：否)的情况下，图像拾取装置100重复步骤S901或之后中的处理。另一方面，在已经执行了结束记录的操作(步骤S906：是)的情况下，图像拾取装置100结束记录处理。
图8是根据第一实施例的示例性记录处理的流程图。例如，当执行开始记录的操作(按下记录按钮等)时，开始录音处理。图像拾取装置100以44.1千赫兹(kHz)的取样频率对声音进行取样(步骤S911)。然后，图像拾取装置100每1/50秒对取样数据进行编码。结果，以50赫兹(Hz)的帧频来产生音频帧(步骤S912)。图像拾取装置100确定所生成的帧是否是高帧频时间段之内的帧(步骤S913)。
在所生成的帧是高帧频时间段之内的帧(步骤S913：是)的情况下，图像拾取装置100将在其中已经检测到场景改变的帧的定时设置成音频再现时间(步骤S914)。另一方面，在所生成的帧是高帧频时间段之内的帧(步骤S913：是)的情况下，图像拾取装置100以恒定间隔(诸如，1/50秒)设置音频再现时间(步骤S915)。在步骤S914或S915之后，图像拾取装置100确定是否已经执行了结束录音的操作(按下停止按钮等)(步骤S916)。在还未执行结束录音的操作(步骤S916：否)的情况下，图像拾取装置100重复步骤S911和之后中的处理。另一方面，在已经执行了结束录音的操作(步骤S916：是)的情况下，图像拾取装置100结束录音处理。
以这种方式，根据本技术的第一实施例，由于图像拾取装置100将音频再现时间设置成与高帧频时间段之内的场景改变时帧的再现时间同步的时间，因此可以再现与场景改变的定时同步的声音。结果，静音时间缩短，并且再现质量提高。
<2.第二实施例>
在上述的第一实施例中，图像拾取装置100在不顾及用户操作的情况下基于场景改变的检测结果来确定高帧频时间段。然而，图像拾取装置100可根据用户的操作来确定高帧频时间段。根据第二实施例的图像拾取装置100与第一实施例的不同之处在于，根据用户的操作来设置高帧频时间段。
图9是根据第二实施例的移动图像数据生成单元120的示例性配置的框图。第二实施例的移动图像数据生成单元120与第一实施例的移动图像数据生成单元的不同之处在于，还包括手动设置单元126和或(OR)门127。
手动设置单元126根据操作信号来设置高帧频时间段。例如，将从执行开始高速摄影的预定操作起直至过去特定时间段为止的时间段设置为高帧频时间段。另选地，将以执行操作的定时作为中心的固定时间段设置为高帧频时间段。手动设置单元126将指示所设置的高帧频时间段的高帧频时间段标志供应到或门127和场景改变检测器123。
或门127将来自手动设置单元126的高帧频时间段标志与来自场景改变检测器123的高帧频时间段标志的逻辑和(OR)供应到开关单元125和定时控制单元110。
另外，根据第二实施例的场景改变检测器123没有检测到手动设置单元126所设置的高帧频时间段之内的场景改变。
另外，根据第二实施例的音频再现时间设置单元112还得到高帧频时间段标志。然后，当高帧频时间段标志是“1”时，音频再现时间设置单元112根据是否检测到场景改变检测定时来确定是否已经手动设置了高帧频时间段。在已经手动设置了高帧频时间段的情况下，音频再现时间设置单元112将高帧频时间段之内的特定定时设置成该时间段之内的音频帧的音频再现时间。例如，将高帧频时间段的开始定时设置为音频再现时间。另一方面，在还未手动设置高帧频时间段的情况下，音频再现时间设置单元112设置与场景改变检测定时同步的音频再现时间，类似于第一实施例。
此外，虽然场景改变检测器123没有检测已经手动设置的高帧频时间段之内的场景改变，但场景改变检测器123也可以检测高帧频时间段之内的场景改变。用该配置，音频再现时间设置单元112在该帧频时间段之内出现场景改变的情况下设置与场景改变定时同步的音频再现时间，并且在没有出现场景改变的情况下将特定定时设置成音频再现时间。
图10是根据第二实施例的示例性流的示图。图10中的a是在帧频已经转换之后的示例性帧的示图。将用户所指定的时间段设置为高帧频时间段，并且帧频被转换成高帧频时间段之外的例如60赫兹(Hz)。
图10中的b是示例性音频帧的示图。例如，每1/50秒对取样数据进行编码，并且生成诸如音频帧Fa1、Fa2和Fa3的帧。
图10中的c是视频再现时间已经被设置成的示例性视频帧。对于每个视频帧，设置用于执行(例如，以60赫兹(Hz)的低帧频)再现的视频再现时间。
图10中的d是音频再现时间已经被设置成的示例性音频帧的示图。相对于高帧频时间段之外的音频帧Fa1、Fa3等以恒定间隔(例如，1/50秒)来设置音频再现时间。另一方面，将高帧频时间段的开始定时Ts设置为相对于高帧频时间段之内的音频帧Fa2的音频再现时间。
图11是根据第二实施例的示例性记录处理的流程图。根据第二实施例的记录处理与第一实施例的记录处理的不同之处在于，执行步骤S907来代替步骤S902。
在生成视频帧(步骤S901)之后，图像拾取装置100在检测到场景改变时或者在执行预定操作时设置高帧频时间段(步骤S907)。然后，图像拾取装置100执行步骤S903和之后中的处理。
图12是根据第二实施例的示例性录音处理的流程图。根据第二实施例的录音处理与第一实施例的录音处理的不同之处在于，还执行步骤S921和S922。
在所生成的帧是高帧频时间段之内的帧(步骤S913：是)的情况下，图像拾取装置100确定高帧频时间段是否是已经被手动设置的时间段(步骤S921)。在已经手动设置了时间段(步骤S921：是)的情况下，图像拾取装置100将高帧频时间段的开始定时设置成音频再现时间(步骤S922)。另一方面，在还未手动设置时间段(步骤S921：否)的情况下，图像拾取装置100将场景改变定时设置成音频再现时间(步骤S914)。在步骤S914或S922之后，图像拾取装置100执行步骤S916。
以这种方式，根据本技术的第二实施例，图像拾取装置100将已经手动设置的高帧频时间段之内的特定时间设置为该时间段之内的音频再现时间。因此，可以从手动设置的时间段中的适宜位置起再现声音。
[修改形式]
在上述的第二实施例中，图像拾取装置100将已经手动设置的高帧频时间段之内的开始定时设置为音频再现时间。然而，也可将除了开始定时外的特定定时设置为音频再现时间。例如，可将高帧频时间段的中间定时设置为音频再现时间。根据第二实施例的修改形式的图像拾取装置100与第二实施例的图像拾取装置的不同之处在于，将已经手动设置的高帧频时间段的中间定时设置为音频再现时间。
图13是根据第二实施例的修改形式的示例性流的示图。图13中的a是在帧频已经转换之后的示例性帧的示图。图13中的b是示例性音频帧的示图。图13中的c是视频再现时间已经被设置成的示例性视频帧的示图。这些配置与第二实施例的配置类似。
图13中的d是音频再现时间已经被设置成的示例性音频帧的示图。将高帧频时间段的中间定时Tm设置为相对于高帧频时间段之内的音频帧Fa2的音频再现时间。
以这种方式，根据第二实施例的修改形式，由于图像拾取装置100将已经手动设置的高帧频时间段之内的中间时间设置为该时间段之内的音频再现时间，因此在已经手动设置的时间段之内的静音时间可缩短。
<3.第三实施例>
在上述的第一实施例中，图像拾取装置100在不改变音频再现速度的情况下再现声音。然而，还可以随再现速度改变来再现声音。音频再现速度的改变也被称为语速转换。根据第三实施例的图像拾取装置100与第一实施例的图像拾取装置的不同之处在于，音频再现速度改变。
图14是根据第三实施例的图像拾取装置100的示例性配置的框图。根据第三实施例的图像拾取装置100与第一实施例的图像拾取装置的不同之处在于，还包括语速转换单元185。
语速转换单元185将高帧频时间段之内的取样数据的再现速度变成较慢的速度(也就是说，语速转换)。语速转换单元185按固定倍数(例如，1/2倍)放慢再现速度。关于该倍数，设置的是比成像时的帧频与再现时的帧频的比率高的比率。例如，在以600赫兹(Hz)对图像进行成像并且以60赫兹(Hz)再现图像的情况下，设置高于1/10的比率(1/2等)。语速转换单元185将转换后的取样数据供应到音频编码单元160。注意的是，语速转换单元185是权利要求书中描述的示例性再现速度改变单元。
图15是根据第三实施例的示例性流的示图。图15中的a是在帧频已经转换之后的示例性帧的示图。图15中的b是视频再现时间已经被设置成的示例性视频帧的示图。这些配置与第二实施例的配置类似。
图15中的c是其中已经执行了语速转换并且音频再现时间已经被设置成的示例性音频帧的示图。高帧频时间段之内的音频帧Fa2'的再现速度减小至1/2，并且音频帧Fa2'的再现时间从1/50秒延长至2/50秒。用以上处理，高帧频时间段之内的静音时间进一步缩短，并且再现质量提高。
图16是根据第三实施例的示例性录音处理的流程图。根据第三实施例的录音处理与第一实施例的录音处理的不同之处在于，还执行步骤S931。
在对声音进行取样(步骤S911)之后，图像拾取装置100转换高帧频时间段之内的取样数据的语速(步骤S931)。在步骤S931之后，图像拾取装置100执行步骤S912和之后中的处理。
以这种方式，根据本技术的第三实施例，由于图像拾取装置100放慢了高帧频时间段之内的音频再现速度，因此高帧频时间段之内的静音时间可进一步缩短。
<4.第四实施例>
在第一实施例中，高帧频时间段之内的声音被再现一次。然而，高帧频时间段之内的声音的音频帧可被复制，以重复地再现声音。根据第四实施例的图像拾取装置100与第一实施例的图像拾取装置的不同之处在于，音频帧被复制，以重复地再现声音。
图17是根据第四实施例的图像拾取装置100的示例性配置的框图。根据第四实施例的图像拾取装置100与第一实施例的图像拾取装置的不同之处在于，还包括复制单元190。
复制单元190按预定次数(例如，一次)复制音频编码单元160所生成的多个音频帧之中的高帧频时间段之内的帧。复制单元190将复制源的帧和复制帧供应到音频再现时间添加单元170。
另外，根据第四实施例的音频再现时间设置单元112将与复制源的帧的再现结束时间同步的时间设置为针对复制帧的音频再现时间。
图18是根据第四实施例的示例性流的示图。图18中的a是在帧频已经转换之后的示例性帧的示图。图18中的b是示例性音频帧的示图。图18中的c是视频再现时间已经被设置成的示例性视频帧的示图。这些配置与第一实施例的配置类似。
图18中的d是音频再现时间已经被设置成的示例性音频帧的示图。复制具有高帧频的音频帧Fa2，并且新生成诸如帧Fa22的帧。另外，假定复制源的音频帧是帧Fa21。复制帧Fa22的再现时间被设置成复制源的帧Fa21的再现结束时间。通过以这种方式设置再现时间，在高帧频时间段中重复再现所述声音。
此外，图像拾取装置100可以复制其再现速度已经改变的音频帧。例如，高帧频时间段之内的声音的再现速度可以减半，并且转换之后的音频帧可被复制并且再现两次。用以上处理，静音时间可进一步缩短。另外，图像拾取装置100可将特定静音时间插入通过复制而生成的多个音频帧之间。例如，在通过复制来生成两个音频帧的情况下，优选地，图像拾取装置100设置通过将固定静音时间与第一帧的再现结束时间相加而得到的时间设置为第二帧的再现时间。
图19是根据第四实施例的示例性录音处理的流程图。根据第四实施例的录音处理与第一实施例的录音处理的不同之处在于，还执行步骤S941和S942。
如果音频帧是高帧频时间段之内的帧(步骤S913：是)，则图像拾取装置100复制音频帧(步骤S941)。图像拾取装置100将场景改变定时设置位复制源的帧的再现时间(步骤S914)并且将复制源的再现结束时间设置为复制帧的再现时间(步骤S942)。在步骤S942之后，图像拾取装置100执行步骤S916。
以这种方式，根据第四实施例，由于图像拾取装置100复制高帧频时间段之内的音频帧并且将再现时间设置成重复地执行再现，因此可进一步缩短高帧频时间段之内的静音时间。
<5.第五实施例>
在上述的第一实施例中，图像拾取装置100将移动图像和声音按它们原样进行记录。然而，图像拾取装置100还可执行编辑处理，以便添加音效和叙述。根据第五实施例的图像拾取装置100与第一实施例的图像拾取装置的不同之处在于，还执行用于添加声音的编辑处理。
图20是根据第五实施例的图像拾取装置100的示例性配置的框图。根据第五实施例的图像拾取装置100与第一实施例的图像拾取装置的不同之处在于，还包括附加声音存储单元195和编辑处理单元200。
附加声音存储单元195存储之前记录的附加音频数据(诸如，音效和叙述)。
编辑处理单元200执行用于添加附加音频数据的处理作为编辑处理来执行。编辑处理单元200从附加声音存储单元195读取用户指定的附加音频数据，并且根据用户操作将附加音频数据叠加在来自音频取样处理单元150的取样数据上。
以这种方式，根据本技术的第五实施例，由于图像拾取装置100将附加音频数据叠加在取样数据上，因此可以在移动图像中添加用户所期望的声音。
注意的是，实施例指示用于实施本技术的示例，并且指定权利要求书中的内容的实施例和本发明中的内容具有对应关系。类似地，指定用相同名称表示的权利要求书中的内容和本技术的实施例中的内容的本发明具有对应关系。然而，本技术不限于实施例，并且可以在不脱离本技术的范围的情况下向实施例应用各种修改来实施。
另外，以上实施例中描述的处理过程可被理解为具有一系列过程的方法、用于致使计算机执行一系列过程的程序或用于存储该程序的记录介质。例如，可使用光盘(CD)、迷你盘(MD)、数字通用盘(DVD)、存储卡、蓝光(注册商标)盘等作为记录介质。
注意的是，本文中描述的效果不受限制，并且该效果可以是本公开中描述的任何效果。
注意的是，本技术可具有以下配置。
(1)一种图像拾取装置，所述图像拾取装置包括：
成像单元，其被配置成以预定帧频将多个帧成像；
场景改变检测器，其被配置成检测所述多个帧之中的场景改变时的帧作为检测帧；
帧频转换单元，其被配置成将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置单元，其被配置成将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置单元，其被配置成针对检测时间段之外的以恒定间隔记录的多个声音设置恒定间隔的音频再现时间，并且相对于所述检测时间段之内记录的声音来设置与对应于检测帧的视频再现时间同步的音频再现时间。
(2)根据(1)所述的图像处理设备，所述图像处理设备还包括：
再现速度改变单元，其被配置成减小在所述检测时间段之内记录的声音的再现速度。
(3)根据(1)或(2)所述的图像处理设备，所述图像处理设备还包括：
复制单元，其被配置成复制所述检测时间段之内记录的声音的数据，以生成复制数据，其中，
所述音频时间设置单元将与记录在所述检测时间段中的声音的再现结束时间同步的时间设置成所述复制数据的音频再现时间。
(4)根据(1)至(3)中的任一项所述的图像处理设备，所述图像处理设备还包括：
手动设置单元，其被配置成根据用户的操作将固定时间段设置为手动设置时间段，其中，
所述帧频转换单元将除了所述检测时间段和所述手动设置时间段外的时间段中成像的帧的帧频转换成低帧频，以及
所述音频再现时间设置单元将所述手动设置时间段中的特定时间设置为相对于所述手动设置时间段之内记录的声音的音频再现时间。
(5)根据(1)至(4)中的任一项所述的图像处理设备，所述图像处理设备还包括：
声音叠加单元，其被配置成将预定附加声音叠加在所述声音上。
(6)一种图像拾取装置，所述图像拾取装置包括：
成像单元，其被配置成以预定帧频将多个帧成像；
场景改变检测器，其被配置成检测所述多个帧之中的场景改变时的帧作为检测帧；
帧频转换单元，其被配置成将在所述多个帧之中的所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置单元，其被配置成将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置单元，其被配置成针对检测时间段之外的以恒定间隔记录的多个声音设置恒定间隔的音频再现时间，并且相对于所述检测时间段之内记录的声音来设置与对应于检测帧的视频再现时间同步的音频再现时间。
(7)一种程序，其使计算机执行以下处理：
场景改变检测处理，其通过场景改变检测器来检测以预定帧频成像的多个帧之中的场景改变时的帧作为检测帧；
帧频转换处理，其将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置处理，其通过视频再现时间设置单元将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置处理，其通过音频再现时间设置单元针对检测时间段之外的以恒定间隔记录的多个声音设置恒定间隔的音频再现时间，并且相对于所述检测时间段之内记录的声音来设置与对应于检测帧的视频再现时间同步的音频再现时间。
(8)一种程序，其使计算机执行以下处理：
场景改变检测处理，其通过场景改变检测器来检测以预定帧频成像的多个帧之中的场景改变时的帧作为检测帧；
帧频转换处理，其通过帧频转换单元将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置处理，其通过视频再现时间设置单元将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置处理，其通过音频再现时间设置单元针对检测时间段之外的以恒定间隔记录的多个声音设置恒定间隔的音频再现时间，并且相对于所述检测时间段之内记录的声音来设置与对应于检测帧的视频再现时间同步的音频再现时间。

Claims (8)

1.一种图像处理设备，所述图像处理设备包括：
场景改变检测器，其被配置成检测以预定帧频成像的多个帧之中的场景改变时的帧作为检测帧；
帧频转换单元，其被配置成将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置单元，其被配置成将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置单元，其被配置成将恒定间隔的音频再现时间设置成所述检测时间段之外的以恒定间隔记录的多个声音，并且相对于所述检测时间段之内记录的声音来设置与对应于所述检测帧的所述视频再现时间同步的音频再现时间。
2.根据权利要求1所述的图像处理设备，所述图像处理设备还包括：
再现速度改变单元，其被配置成减小在所述检测时间段之内记录的所述声音的再现速度。
3.根据权利要求1所述的图像处理设备，所述图像处理设备还包括：
复制单元，其被配置成复制所述检测时间段之内记录的所述声音的数据，以生成复制数据，其中，
所述音频时间设置单元将与记录在所述检测时间段中的声音的再现结束时间同步的时间设置成所述复制数据的音频再现时间。
4.根据权利要求1所述的图像处理设备，所述图像处理设备还包括：
手动设置单元，其被配置成根据用户的操作将固定时间段设置为手动设置时间段，其中，
所述帧频转换单元将除了所述检测时间段和所述手动设置时间段外的时间段中成像的帧的帧频转换成所述低帧频，以及
所述音频再现时间设置单元将所述手动设置时间段中的特定时间设置为相对于所述手动设置时间段之内记录的声音的音频再现时间。
5.根据权利要求1所述的图像处理设备，所述图像处理设备还包括：
声音叠加单元，其被配置成将预定附加声音叠加在所述声音上。
6.一种图像拾取装置，所述图像拾取装置包括：
成像单元，其被配置成以预定帧频将多个帧成像；
场景改变检测器，其被配置成检测所述多个帧之中的场景改变时的帧作为检测帧；
帧频转换单元，其被配置成将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置单元，其被配置成将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置单元，其被配置成将恒定间隔的音频再现时间设置成所述检测时间段之外的以恒定间隔记录的多个声音，并且相对于所述检测时间段之内记录的声音来设置与对应于所述检测帧的所述视频再现时间同步的音频再现时间。
7.一种图像处理方法，所述图像处理设备包括：
场景改变检测处理，其通过场景改变检测器来检测以预定帧频成像的多个帧之中的场景改变时的帧作为检测帧；
帧频转换处理，其通过帧频转换单元将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置处理，其通过视频再现时间设置单元将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置处理，其通过音频再现时间设置单元针对检测时间段之外的以恒定间隔记录的多个声音设置恒定间隔的音频再现时间，并且相对于所述检测时间段之内记录的声音来设置与对应于所述检测帧的所述视频再现时间同步的音频再现时间。
8.一种程序，其使计算机执行以下处理：
场景改变检测处理，其通过场景改变检测器来检测以预定帧频成像的多个帧之中的场景改变时的帧作为检测帧；
帧频转换处理，其通过帧频转换单元将在所述多个帧之中的包括所述检测帧的成像时间的检测时间段之外成像的帧的帧频转换成比所述预定帧频低的低帧频；
视频再现时间设置处理，其通过视频再现时间设置单元将以低帧频执行再现的再现时间设置为所述多个帧中的每个的视频再现时间；以及
音频再现时间设置处理，其通过音频再现时间设置单元针对所述检测时间段之外的以恒定间隔记录的多个声音设置恒定间隔的音频再现时间，并且相对于所述检测时间段之内记录的声音来设置与对应于所述检测帧的所述视频再现时间同步的音频再现时间。
CN201680008330.2A 2015-02-10 2016-01-08 图像处理设备、图像捕获装置、图像处理方法和存储介质 Active CN107251551B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015-023764 2015-02-10
JP2015023764 2015-02-10
PCT/JP2016/050429 WO2016129303A1 (ja) 2015-02-10 2016-01-08 画像処理装置、撮像装置、画像処理方法、および、プログラム

Publications (2)

Publication Number Publication Date
CN107251551A true CN107251551A (zh) 2017-10-13
CN107251551B CN107251551B (zh) 2020-10-13

Family

ID=56614317

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680008330.2A Active CN107251551B (zh) 2015-02-10 2016-01-08 图像处理设备、图像捕获装置、图像处理方法和存储介质

Country Status (3)

Country Link
US (1) US10224055B2 (zh)
CN (1) CN107251551B (zh)
WO (1) WO2016129303A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10965867B2 (en) * 2016-03-03 2021-03-30 Sony Corporation Display control device and display control method
CN108989832B (zh) * 2017-05-31 2021-12-10 腾讯科技（深圳）有限公司 一种图像数据处理方法及其设备、存储介质、终端
CN111277895B (zh) * 2018-12-05 2022-09-27 阿里巴巴集团控股有限公司 一种视频插帧方法和装置
US11238901B1 (en) * 2020-09-03 2022-02-01 Gopro, Inc. Generation of audio-synchronized visual content
CN114520886A (zh) * 2020-11-18 2022-05-20 华为技术有限公司 一种慢动作录像方法及设备
US20240096373A1 (en) * 2022-09-15 2024-03-21 Qualcomm Incorporated Coordination of slow motion video with audio

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1701593A (zh) * 2003-07-18 2005-11-23 索尼株式会社 图像拾取装置
US20060140575A1 (en) * 2003-04-04 2006-06-29 Norihiko Fuchigami Audio/video recording apparatus, recording method, playback apparatus, playback method, playback program, and recording program
JP2007267351A (ja) * 2005-09-28 2007-10-11 Sanyo Electric Co Ltd 映像記録再生装置及び映像再生装置
JP2010206641A (ja) * 2009-03-04 2010-09-16 Fujitsu Ltd 情報処理装置およびプログラム
CN103139638A (zh) * 2011-11-21 2013-06-05 索尼公司 再现设备、再现方法和程序

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7162147B2 (en) * 1998-03-13 2007-01-09 Matsushita Electric Industrial Co., Ltd. Data storage medium and apparatus and method for reproducing the data from the same
JPH11298890A (ja) * 1998-04-13 1999-10-29 Hitachi Ltd 画像データの圧縮又は伸張方法とその装置、並びに、それを用いた画像伝送システム及び監視システム
US7286749B2 (en) * 2002-04-16 2007-10-23 Canon Kabushiki Kaisha Moving image playback apparatus, moving image playback method, and computer program thereof with determining of first voice period which represents a human utterance period and second voice period other than the first voice period
JP4717060B2 (ja) 2005-02-03 2011-07-06 パナソニック株式会社 記録再生装置および記録再生方法および記録再生プログラムを格納した記録媒体および記録再生装置において用いられる集積回路
CN101390388B (zh) * 2006-02-27 2010-09-15 松下电器产业株式会社 再现装置、携带式电话机和再现方法
JP4552889B2 (ja) * 2006-05-10 2010-09-29 ソニー株式会社 記録装置、記録方法および記録プログラム、ならびに、撮像装置および撮像方法
KR101323331B1 (ko) * 2006-11-06 2013-10-29 삼성전자주식회사 불연속 동영상 데이터의 재생 방법 및 장치
JP5110862B2 (ja) * 2006-12-01 2012-12-26 キヤノン株式会社 液晶表示装置及びその制御方法、コンピュータプログラム及び記憶媒体
JP2010178124A (ja) 2009-01-30 2010-08-12 Victor Co Of Japan Ltd 記録装置及び記録方法
JP4679647B2 (ja) * 2009-02-27 2011-04-27 株式会社東芝 映像音声再生装置および映像音声再生方法
US8830339B2 (en) * 2009-04-15 2014-09-09 Qualcomm Incorporated Auto-triggered fast frame rate digital video recording
JP2011055386A (ja) * 2009-09-04 2011-03-17 Sanyo Electric Co Ltd 音響信号処理装置及び電子機器
JP2011139306A (ja) * 2009-12-28 2011-07-14 Sanyo Electric Co Ltd 撮像装置及び再生装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060140575A1 (en) * 2003-04-04 2006-06-29 Norihiko Fuchigami Audio/video recording apparatus, recording method, playback apparatus, playback method, playback program, and recording program
CN1701593A (zh) * 2003-07-18 2005-11-23 索尼株式会社 图像拾取装置
JP2007267351A (ja) * 2005-09-28 2007-10-11 Sanyo Electric Co Ltd 映像記録再生装置及び映像再生装置
JP2010206641A (ja) * 2009-03-04 2010-09-16 Fujitsu Ltd 情報処理装置およびプログラム
CN103139638A (zh) * 2011-11-21 2013-06-05 索尼公司 再现设备、再现方法和程序

Also Published As

Publication number Publication date
US20180012618A1 (en) 2018-01-11
WO2016129303A1 (ja) 2016-08-18
CN107251551B (zh) 2020-10-13
US10224055B2 (en) 2019-03-05

Similar Documents

Publication Publication Date Title
CN107251551A (zh) 图像处理设备、图像捕获装置、图像处理方法和程序
JP4358081B2 (ja) 映像記録装置
JP4669902B2 (ja) 映像記録装置、多重方法、プログラム、及び記録媒体
US20070201832A1 (en) Recording apparatus, recording method, program for recording method, recording medium recording program for recording method, reproducing apparatus, reproduction method, program for reproduction method, and recording medium recording program for reproduction method
JP3912536B2 (ja) 記録方法、記録装置、記録媒体、撮像装置および撮像方法
CN101076121B (zh) 流生成装置、成像装置、数据处理装置和流生成方法
KR101132043B1 (ko) 디코더 장치 및 디코드 방법
KR20080068149A (ko) 동영상 촬영 장치, 동영상 재생 장치 및 기록 매체
US20100080536A1 (en) Information recording/reproducing apparatus and video camera
JP2009017283A (ja) 記録再生装置、記録装置、再生装置、記録方法、再生方法およびコンピュータプログラム
US8511901B2 (en) Image recording apparatus and method
EP2227029A2 (en) Image processing apparatus, image processing method, and program
JP2010074323A (ja) 記録装置および方法、並びに記録再生装置および方法
WO2010125757A1 (ja) 映像音声再生装置、映像音声記録再生装置、映像音声再生方法、および映像音声記録再生方法
US7835618B2 (en) Recording apparatus, recording method, program of recording method, and recording medium having program of recording method recorded thereon
JP2010245856A (ja) 映像編集装置
JP2007158432A (ja) 映像記録装置
JP4973497B2 (ja) 撮像画像記録装置、撮像画像記録方法、撮像画像再生装置、撮像画像再生方法及び撮像画像記録再生システム
JP2005303336A (ja) 映像信号記録装置および映像信号再生装置
JP2008060622A (ja) 映像編集システム、映像処理装置、映像編集装置、映像処理方法、映像編集方法、プログラムおよびデータ構造
JP2007312007A (ja) 動画像データ処理装置、ストリーム生成装置、撮像装置、および動画像データ処理方法
KR100899046B1 (ko) 동영상 촬영 장치, 동영상 재생 장치, 동영상 촬영 방법, 부호화 영상 신호 재생 방법, 및 동영상 재생 방법
JP4164696B2 (ja) 撮像装置および撮像方法
JP3026559B2 (ja) 映像識別信号の附加及び削除装置及びその方法
JP2024065386A (ja) 動画像記録装置、動画像記録装置の制御方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant