CN107409194B - 信号处理装置、信号处理系统和信号处理方法 - Google Patents

信号处理装置、信号处理系统和信号处理方法 Download PDF

Info

Publication number
CN107409194B
CN107409194B CN201680012073.XA CN201680012073A CN107409194B CN 107409194 B CN107409194 B CN 107409194B CN 201680012073 A CN201680012073 A CN 201680012073A CN 107409194 B CN107409194 B CN 107409194B
Authority
CN
China
Prior art keywords
signal processing
frame rate
period
sound signal
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680012073.XA
Other languages
English (en)
Other versions
CN107409194A (zh
Inventor
早川知伸
根岸慎治
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Semiconductor Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corp filed Critical Sony Semiconductor Solutions Corp
Publication of CN107409194A publication Critical patent/CN107409194A/zh
Application granted granted Critical
Publication of CN107409194B publication Critical patent/CN107409194B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0356—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for synchronising with other signals, e.g. video signals
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04—Time compression or expansion
    • G10L21/043—Time compression or expansion by changing speed
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04—Time compression or expansion
    • G10L21/055—Time compression or expansion for synchronising with other signals, e.g. video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H04N5/06—Generation of synchronising signals
    • H04N5/067—Arrangements or circuits at the transmitter end
    • H04N5/073—Arrangements or circuits at the transmitter end for mutually locking plural sources of synchronising signals, e.g. studios or relay stations
    • H04N5/0736—Arrangements or circuits at the transmitter end for mutually locking plural sources of synchronising signals, e.g. studios or relay stations using digital storage buffer techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape
    • H04N5/783—Adaptations for reproducing at a rate different from the recording rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/802—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving processing of the sound signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

在对声音和移动图像进行成像的成像装置中抑制再现质量的降低。帧速率转换器将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于所述预定帧速率的低帧速率。复制单元复制在所述预定周期内记录的原始声音信号以生成多个复制的声音信号，所述多个复制的声音信号中的每一个与所述原始声音信号相同。所述音频信号处理单元对所述多个复制的声音信号中的每一个执行不同的信号处理。

Description

信号处理装置、信号处理系统和信号处理方法
技术领域
本技术涉及一种信号处理装置、信号处理系统、信号处理方法、和程序。更具体地，本发明涉及一种对声音信号进行处理的信号处理装置、信号处理系统、信号处理方法、和使计算机执行该方法的程序。
背景技术
按照惯例，在对高速移动的物体进行成像的情况下，使用一种按照高于再现时的帧速率的帧速率捕获移动图像的成像装置。可以通过按照比在视觉记录时的帧速率更低的帧速率再现该移动图像来获得流畅的慢动作图像。例如，在按照60赫兹(Hz)的低帧速率再现按照600赫兹(Hz)的高帧速率捕获到的移动图像的情况下，将再现时间延长至视觉记录时间的10倍，并且将在再现的移动图像中的物体的运动速度减少至1/10。在这种高速拍摄期间记录声音的情况下，已经提出了一种根据帧速率的减少延迟声音再现速度的成像装置(例如，参见专利文献1)。在该成像装置中，例如，在按照相对于视觉记录时间的1/10的帧速率来再现移动图像的情况下，将再现速度减小到 1/10来再现声音。
引用列表
专利文献
专利文献1：日本专利申请特开2010-178124号公报
发明内容
本发明需要解决的问题
然而，利用上述的常规技术，由于延迟了声音再现速度，所以声音的再现质量可能会下降，从而使得难以听见该声音。而且，在延长移动图像的再现时间但不改变声音的再现速度的情况下，静默时间将会更长。例如，在将1 秒内高速拍摄的移动图像的再现时间延长至10秒并且从高速拍摄开始时执行再现，但不延长在高速拍摄期间记录的声音的情况下，静默时间持续9秒。因此，再现质量可能会下降。因此，存在难以抑制再现质量下降的问题。
已经鉴于这种情况创造出本技术，并且本技术的目的是在捕获声音和移动图像的成像装置中抑制再现质量下降。
问题的解决方案
已经发明了本技术以解决上文提到的问题，并且本技术的第一方面是一种信号处理装置、该信号处理装置中的信号处理方法、和使计算机执行该方法的程序，该信号处理装置包括：帧速率转换器，该帧速率转换器将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换成低于该预定帧速率的低帧速率；复制单元，该复制单元复制在预定周期内记录的原始声音信号以生成多个复制的声音信号，该多个复制的声音信号中的每一个与原始声音信号相同；以及声音信号处理单元，该声音信号处理单元针对多个复制的声音信号中的每一个执行不同的信号处理。因此，对多个复制的声音信号中的每一个执行不同的信号处理。
进一步地，在第一方面中，声音信号处理单元可以执行通过相互不同的增益来调整多个复制的声音信号中的每一个的音量级的处理，作为信号处理。因此，各个复制的声音信号的音量级由不同的增益调整。
此外，在第一方面中，声音信号处理单元可以执行将多个复制的声音信号的频率特性更改为相互不同的特性的处理，作为信号处理。因此，将各个复制的声音信号的频率特性更改为不同的特性。
进一步地，在第一方面中，信号处理装置可以进一步包括再现速度转换器，该再现速度转换器改变原始声音信号的再现速度并且将原始声音信号提供给复制单元。因此，改变了原始声音信号的再现速度。
另外，在第一方面中，信号处理装置可以进一步包括再现时间设置单元，在紧接着预定周期的开始定时之前存在音量级小于预定级的静默期的情况下，该再现时间设置单元将静默期的开始定时设置为多个复制的声音信号的再现开始时间。因此，从静默期的开始定时起再现复制的声音信号。
而且，在第一方面中，在紧接着预定周期的开始定时之后存在音量级小于预定级的静默期的情况下，复制在将静默期从预定周期排除的周期内记录的声音信号，并且在不存在静默期的情况下，可以复制在预定周期内记录的原始声音信号。因此，复制在排除静默期的周期内记录的声音信号。
进一步地，在第一方面中，信号处理装置可以进一步包括场景变化检测器，该场景变化检测器检测场景已经从按照预定帧速率捕获到的多个帧变化的场景变化定时并且将包括该场景变化定时的周期设置为预定周期。因此，将在包括场景变化定时的周期之外捕获到的帧的帧速率转换成低帧速率。
此外，本技术的第二方面是一种信号处理系统，该信号处理系统包括：信号处理装置，该信号处理装置将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于该预定帧速率的低帧速率，并且生成元数据，该元数据包括设置信息，该设置信息指示用于复制在预定周期内记录的原始声音信号的复制次数和将针对通过复制原始声音信号而生成的多个复制的声音信号中的每一个执行的相互不同的信号处理；以及再现装置，该再现装置通过基于由设置信息指示的复制次数复制原始声音信号来生成多个复制的声音信号，对多个复制的声音信号中的每一个执行由设置信息指示的信号处理，并且再现多个声音信号和多个帧。因此，对多个复制的声音信号中的每一个执行不同的信号处理。
进一步地，在第二方面中，元数据格式是MPEG4-AAC，并且信号处理装置可以将设置信息记录在元数据的数据流元素(DSE)区域中。这会产生一种基于MPEG4-AAC格式的DES区域设置信息来执行复制和信号处理的效果。
此外，在第二方面中，元数据格式是MPEG4-system，并且信号处理装置可以将设置信息记录在元数据的udta区域中。这会产生一种基于 MPEG4-system格式的udta区域的设置信息来执行复制和信号处理的效果。
此外，在第二方面中，元数据格式是家庭和移动多媒体平台(HMMP)，并且信号处理装置可以将设置信息记录在元数据的uuid区域中。这会产生一种基于HMMP格式的uuid区域的设置信息来执行复制和信号处理的效果。
此外，本技术的第二方面是一种信号处理系统，该信号处理系统包括：信号处理装置，该信号处理装置将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于该预定帧速率的低帧速率，并且生成元数据，该元数据包括设置信息，该设置信息指示用于复制在预定周期内记录的原始声音信号的复制次数和将针对通过复制原始声音信号而生成的多个复制的声音信号中的每一个执行的相互不同的信号处理；以及编辑装置，该编辑装置改变设置信息，通过基于由所改变后的设置信号指示的复制次数复制原始声音信号来生成多个复制的声音信号，并且对多个复制的声音信号中的每一个执行由设置信息指示的信号处理。因此，对多个复制的声音信号中的每一个执行不同的信号处理。
发明效果
根据本技术的实施例，能够实现一种可以在捕获声音和移动图像的成像装置中抑制再现质量下降的良好效果。注意，本文描述的效果并非是限制性的，并且可以应用在本公开中描述的任何效果。
附图说明
图1是图示了根据第一实施例的成像装置的配置示例的框图。
图2是图示了根据第一实施例的移动图像数据生成单元的配置示例的框图。
图3是图示了在第一实施例中的控制单元的配置示例的框图。
图4是图示了在第一实施例中的声音处理单元的配置示例的框图。
图5是图示了在第一实施例中的流的示例的视图。
图6是图示了在第一实施例中在编码之前和之后的声音信号的示例的视图。
图7是图示了在第一实施例中设置有负偏移时间的流的示例的视图。
图8是图示了在第一实施例中设置有正偏移时间的流的示例的视图。
图9是图示了在第一实施例中的流和分组的数据配置的示例的视图。
图10是图示了根据第一实施例的视觉记录处理的示例的流程图。
图11是图示了在第一实施例中的声音记录处理的示例的流程图。
图12是图示了在第一修改例中的声音处理单元的配置示例的框图。
图13是图示了在第一实施例的第一修改例中的流的示例的视图。
图14是图示了在第一实施例的第二修改例中的声音信号处理单元的配置示例的框图。
图15是图示了在第一实施例的第二修改例中的频率特性的示例的图表。
图16是图示了根据第二实施例的成像系统的配置示例的框图。
图17是图示了在第二实施例中的声音处理单元的配置示例的框图。
图18是图示了在第二实施例中要在使用MPEG 4-AAC的情况下设置的字段的示例的视图。
图19是图示了在第二实施例中的详细的设置数据的示例的视图。
图20是图示了在第二实施例中要在使用MPEG 4-system的情况下设置的字段的示例的视图。
图21是图示了在第二实施例中要在使用HMMP文件格式的情况下设置的字段的示例的视图。
图22是图示了在第二实施例中的声音记录处理的示例的流程图。
图23是图示了在第二实施例中的再现处理的示例的流程图。
图24是图示了根据第三实施例的成像系统的配置示例的框图。
图25是图示了在第三实施例中的流的示例的视图。
图26是图示了在第三实施例中的编辑处理的示例的流程图。
具体实施方式
在下文中，将描述用于实施本技术的模式(在下文中，称为实施例)。将按照以下顺序来进行描述。
1.第一实施例(复制声音并且针对各个声音执行不同的信号处理的示例)
2.第二实施例(基于元数据来复制声音并且针对各个声音执行不同的信号处理的示例)
3.第三实施例(编辑元数据、复制声音、并且针对各个声音执行不同的信号处理的示例)
<1.第一实施例>
[成像装置的配置示例]
图1是图示了根据第一实施例的成像装置100的配置示例的框图。成像装置100包括操作单元110、控制单元120、移动图像数据生成单元130、移动图像编码单元140、流生成单元150、声音采样处理单元160、声音处理单元170、和记录单元180。
操作单元110根据用户的操作生成操作信号。例如，生成指示视觉记录和声音记录的开始定时以及视觉记录和声音记录的结束定时的信号，作为该操作信号。此处，将视觉记录和声音记录的开始定时假设为同一定时。同样，将视觉记录和声音记录的结束定时假设为同一定时。操作单元110经由信号线119将生成的操作信号提供给控制单元120、移动图像数据生成单元130、和声音采样处理单元160。
移动图像数据生成单元130根据操作信号按照时间顺序生成包括多个视频帧的移动图像数据。移动图像数据生成单元130经由信号线139将生成的移动图像数据提供给移动图像编码单元140。
移动图像编码单元140对移动图像数据进行编码。例如，根据移动图片专家组(MPEG)-2标准对移动图像数据进行编码。移动图像编码单元140 将编码的移动图像数据分组成视频分组并且经由信号线149将分组后的数据提供给流生成单元150。注意，移动图像编码单元140可以根据除了MPEG-2 之外的标准(诸如，MPEG-4)来执行编码。
声音采样处理单元160根据操作信号对声音进行采样以生成声音信号。例如，按照44.1千赫(kHz)的采样频率对声音进行采样，并且，在每次采样时，将与量化位数对应的大小(例如，16位)的数据添加至声音信号。声音采样处理单元160经由信号线169将声音信号提供给声音处理单元170。注意，采样频率和量化位数不限于44.1千赫(kHz)和16位。
声音处理单元170对声音信号执行预定信号处理并且利用预定编码单位对处理过的声音信号进行编码。例如，执行通过增益来调整音量级的处理，作为该信号处理。而且，例如，根据MPEG标准，以20毫秒(ms)为单位对处理过的声音数据进行编码。将在编码单元中进行编码的各个声音信号称为“音频帧”。声音处理单元170将音频帧分组成音频分组并且经由信号线179 将该音频分组提供给流生成单元150。
控制单元120控制对声音和移动图像的信号处理。控制单元120在各个视频帧中设置视频再现时间并且在各个音频帧中设置声音再现时间。例如，将按照MPEG标准的呈现时间戳(PTS)设置为这些再现时间。在下文中，将在视频帧中设置的PTS称为“PTS_V”，并且将在音频帧中设置的PTS称为“PTS_A”。另外，控制单元120生成元数据并且经由信号线129将元数据连同 PTS_V和PTS_A一起提供给流生成单元150。此处，元数据是附在移动图像和声音上的信息，并且例如，包括记录日期和时间、标题、记录格式等。
流生成单元150配置为生成流。流生成单元150将PTS_V和PTS_A与元数据添加至视频分组和音频分组，并且经由信号线159将其作为流提供给记录单元180。记录单元180记录流。
[移动图像数据生成单元的配置示例]
图2是图示了根据第一实施例的移动图像数据生成单元130的配置示例的框图。移动图像数据生成单元130包括图像单元131、缓冲器132、场景变化检测器133、帧速率转换器134、和切换单元135。
图像单元131根据操作信号按照与预定垂直同步信号SYNC_VH同步的时间顺序来捕获多个视频帧。例如，图像单元131包括光学系统，诸如，成像镜头和成像元件。例如，将互补金属氧化物半导体(CMOS)传感器和电荷耦合装置(CCD)传感器用作成像元件。垂直同步信号SYNC_VH的频率高于再现时的帧速率，例如，600Hz(Hz)。成像单元131使缓冲器132保持各个视频帧并且将视频帧提供给场景变化检测器133作为当前视频帧。缓冲器 132保持预定数量的视频帧。
在场景发生变化的情况下，场景变化检测器133检测视频帧，作为检测帧。场景变化检测器133从缓冲器132获取在当前帧之前的视频帧作为先前视频帧，将当前视频帧与先前视频帧进行比较，并且基于比较结果来检测是否存在场景变化。在出现场景变化的情况下，场景变化检测器133将在该时间处的帧的成像时间提供给控制单元120作为场景变化定时。进一步地，场景变化检测器133将包括场景变化定时的固定周期设置为高帧速率周期，并且将指示高帧速率周期的高帧速率标记提供给切换单元135。例如，将在场景变化定时周围的预定时间的周期(1秒等)设置为高帧速率周期。而且，例如，在高帧速率周期标记中设置值“1”，并且在高帧速率周期之外设置值“0”。
帧速率转换器134通过使保持在缓冲器132中的帧稀疏来降低帧速率。例如，帧速率转换器134将视频帧的帧速率转换为垂直同步信号SYNC_VL 的频率(例如，60赫兹：Hz)的帧速率，并且将帧速率提供给切换单元135。
切换单元135根据高帧速率周期标记切换要输出的帧。在高帧速率周期标记是“1”的情况下，切换单元135将保持在缓冲器132中的视频帧提供给移动图像编码单元140。另一方面，在高帧速率周期标记是“0”的情况下，切换单元135将帧从帧速率转换器134提供至移动图像编码单元140。
注意，尽管将成像单元131、声音采样处理单元160等设置在一个装置中，但是可以将它们设置在分开的装置中。例如，成像单元131和声音采样处理单元160可以设置在成像装置中，并且其它电路可以设置在信号处理装置中。
另外，尽管移动成像数据生成单元130将包括场景变化定时的周期设置为高帧速率周期，但是操作单元110可以根据用户的操作来设置高帧速率周期。例如，在用户执行预定操作的情况下，将包括执行了该操作的定时的固定周期设置为高帧速率周期。
[控制单元的配置示例]
图3是图示了在第一实施例中的控制单元120的配置示例的框图。控制单元120包括视频再现时间设置单元121、元数据生成单元122、声音再现时间设置单元123、信号处理设置单元124、偏移设置单元125、和复制周期设置单元126。
视频再现时间设置单元121在各个视频帧中设置视频再现时间(PTS_V)。视频再现时间设置单元121设置用于再现与垂直同步信号SYNC_VL同步的视频帧的PTS_V。视频再现时间设置单元121将设置的PTS_V提供给流生成单元150。
元数据生成单元122生成待添加至流的元数据。在视觉记录和声音记录开始时，元数据生成单元122生成元数据并且将该元数据提供给流生成单元 150。
偏移设置单元125设置用于使在高帧速率周期内记录的声音信号的再现开始定时移位的偏移时间。在检测到场景变化定时的情况下，偏移设置单元 125在包括场景变化定时的高帧速率周期的开始定时之前和之后从声音处理单元170读取声音信号。在紧接着开始定时之前存在音量级小于预定级的静默期的情况下，偏移设置单元125设置与静默期的长度相同的负偏移时间。在偏移时间的符号为负的情况下，通过偏移时间，将在高帧速率周期的开始定时之前的定时设置为声音信号的再现开始时间。
此外，在正好在开始定时之前不存在静默期并且在紧接着开始定时之后存在连续静默期的情况下，偏移设置单元125根据静默期来设置正偏移时间。用以下等式来设置该正偏移时间。在偏移时间的符号为正的情况下，将从高帧速率周期的开始定时起已经过去了偏移时间的定时设置为声音信号的再现开始时间。
偏移时间＝静默时间×SYNC_VH/SYNC_VL 等式1
在以上等式中，静默时间是静默期的长度。例如，偏移时间和静默时间的单位是秒(s)。
偏移设置单元125将设置的偏移时间提供给声音再现时间设置单元123 和复制周期设置单元126。
复制周期设置单元126设置用于复制声音信号的周期。例如，复制周期设置单元126将与高帧速率周期相同的周期设置为复制周期。然而，在设置正偏移时间的情况下，通过偏移时间来校正复制周期的开始定时。然后，复制周期设置单元126生成指示复制周期的复制周期标记并且将该复制周期标记提供给声音处理单元170。例如，在复制周期内设置值“1”并且在复制周期之外设置值“0”。
信号处理设置单元124设置用于复制声音信号的复制次数和针对各个复制的声音信号的信号处理的内容。在下文中，将复制源声音信号称为“原始声音信号”，并且将通过复制生成的多个声音信号中的每一个称为“复制的声音信号”。例如，用以下等式来设置复制次数。
复制次数＝SYNC_VH/SYNC_VL 等式2
例如，在SYNC_VH是600赫兹(Hz)并且SYNC_LH是60赫兹(Hz) 的情况下，将“10”设置为复制次数。在右侧不是整数的情况下，执行取整处理。此外，在SYNC_VH和SYNC_LH中的至少一个发生变化的情况下，根据等式2重新设置复制次数。
进一步地，信号处理设置单元124执行设置，从而对各个复制的声音信号执行不同的信号处理。例如，执行通过增益来调整音量级的信号处理，并且在复制声音再现信号的再现时间变慢时，设置针对各个处理要发生变化的增益的变化量和变化速率，从而使增益减小。因此，在声音再现期间，音量级随着时间的推移逐渐减小。注意，在再现时间变慢时，信号处理设置单元 124可以设置增益变化量等，从而使增益增加。信号处理设置单元124将设置的内容(复制次数和增益变化量)提供给声音处理单元170。
声音再现时间设置单元123在各个音频帧中设置声音再现时间(PTS_A)。声音再现时间设置单元123在各个音频帧中设置待与垂直同步信号 SYNC_VL同步再现的PTS_A。按照固定间隔(例如，1/50秒)设置该PTS_A。然而，在设置偏移时间的情况下，通过偏移时间来校正PTS_A。声音再现时间设置单元123将设置的PTS_A提供给流生成单元150。注意，声音再现时间设置单元123是权利要求书中描述的再现时间设置单元的示例。
[声音处理单元的配置示例]
图4是图示了在第一实施例中的声音处理单元170的配置示例的框图。声音处理单元170包括缓冲器171、切换单元172、复制单元174、声音信号处理单元175、和声音编码单元178。
缓冲器171暂时性地保持声音信号。将保持的声音信号提供给切换单元 172和控制单元120。
切换单元172根据复制周期标记来切换保持在缓冲器171中的声音信号的输出目的地。例如，切换单元172在复制周期标记是“1”的情况下将声音信号输出至复制单元174，并且在复制周期标记是“0”的情况下将声音信号输出至声音编码单元178。
复制单元174通过设置的复制次数来复制声音信号。复制单元174将各个复制的声音信号提供给声音信号处理单元175。
声音信号处理单元175对各个复制的声音信号执行设置的信号处理。例如，针对各个复制的声音信号执行通过不同的增益来调整音量级的信号处理。声音信号处理单元175在信号处理之后将各个复制的声音信号提供给声音编码单元178。
声音编码单元178对声音信号进行编码。声音编码单元178对通过编码而生成的音频帧进行分组并且将分组提供给流生成单元150。
图5是图示了在第一实施例中的流的示例的视图。在图5中，a是与垂直同步信号SYNC_VH同步捕获到的视频帧的示例。在垂直同步信号SYNC_VH 的频率是600赫兹(Hz)的情况下，每隔1/600秒便捕获多个视频帧(诸如，视频帧501)。而且，在这些视频帧中，检测在场景变化(Tc)时的视频帧作为检测帧。在图5的a中，绘制有斜线的视频帧表示检测帧。
在图5中，b是图示了在帧速率转换之后的帧的示例的视图。将包括场景变化定时Tc的固定周期设置为高帧速率周期，并且例如，在该高帧速率周期之外，将帧速率转换为60赫兹(Hz)的低帧速率。在图5的b中的用粗线围起来的视频帧图示了在高帧速率周期中的视频帧。
在图5中，c是图示了采样得到的声音信号的示例的视图。例如，通过采样按顺序生成声音信号Sa1、Sa2、和Sa3。此处，声音信号Sa1是在高帧速率周期开始之前采样得到的声音信号，并且声音信号Sa2是在高帧速率周期内采样得到的声音信号。此外，声音信号Sa3是在高帧速率周期结束之后采样得到的声音信号。
在图5中，d是图示了设置有视频再现时间的视频帧的示例的视图。例如，针对包括检测帧的各个视频帧，设置用于按照60赫兹(Hz)的低帧速率执行再现的视频再现时间。根据视频再现时间，利用非常慢的动作来再现在高帧速率周期中捕获到的移动主体。例如，在高帧速率周期中的帧速率是600赫兹(Hz)并且在再现期间的帧速率是60赫兹(Hz)的情况下，将较慢再现周期延长至高帧速率周期的10倍，并且操作速度减少至1/10。
在图5中，e是图示了在声音处理之后的声音信号的示例的视图。复制在高帧速率周期内的声音信号Sa2，并且生成复制的声音信号Sa2-1至Sa2-m。在较慢再现周期期间，按顺序再现这些复制的声音信号。由于这些复制的声音信号与复制源的原始声音信号Sa2相同，所以在较慢再现周期期间重复地再现相同的声音。
在图5中，f是图示了用于调整各个声音信号的音量的增益的示例的视图。图5中的f的纵轴表示增益并且横轴表示时间。针对首先要再现的复制的声音信号Sa2-1，设置“0”分贝(dB)的增益。针对随后复制的声音信号Sa2-2 至Sa2-m，在再现时间变慢时，设置较小的增益。因此，重复再现的声音的音量级逐渐减小。
如果在不复制的情况下按照原样再现在高帧速率周期中的声音，则静默期变长并且再现质量下降。例如，在高帧速率周期是1秒并且再现时间延长到10倍(即，10秒)的情况下，静默时间会持续9秒。尽管可设想如专利文献1那样减慢声音再现速度，但再现速度越慢，越不容易听到声音。
另一方面，由于成像装置100复制在高帧速率周期内记录的声音信号并且重复地再现相同的声音，所以能够在较慢再现周期内消除静默时间。另外，由于成像装置100针对各个重复再现的声音信号执行不同的声音处理，所以能够提高较慢再现周期的真实感。
图6是图示了在第一实施例中在编码之前和之后的声音信号的示例的视图。在图6中，a是图示了在编码之前的声音信号的示例的视图，并且图6的 b是在编码之后的声音帧的示例。利用特定编码单位(例如，1/50秒)对声音信号Sa1和Sa2-2至Sa2-m进行编码，并且生成音频帧Fa1和Fa2等。
图7是图示了在第一实施例中设置有负偏移时间的流的示例的视图。在图7中，a是与垂直同步信号SYNC_VH同步捕获到的视频帧的示例。在图7 中，b是图示了采样得到的声音信号的示例的视图。在从Ts之前的、与Ts间隔t0的定时Ts'到Ts的周期内，假设存在音量级小于特定级的静默期，其中，高帧速率周期的开始定时为Ts。在这种情况下，成像装置100利用t0的绝对值来设置负偏移时间tofs。
在图7中，c图示了设置有视频再现时间的视频帧的示例。在图7中，d 是图示了在经过声音处理之后的声音信号的示例的视图。要再现第一复制的声音信号Sa-1的声音的定时被精确限制为高帧速率周期的开始定时Ts。然而，由于在Ts之前存在静默期，所以将复制的声音信号Sa-1的声音再现时间设置为在定时Ts之前的定时Ts'。因此，不存在静默期，并且可以自然地再现声音。
图8是图示了在第一实施例中设置有正偏移时间的流的示例的视图。在图8中，a是与垂直同步信号SYNC_VH同步捕获到的视频帧的示例。在图8 中，b是图示了采样得到的声音信号的示例的视图。在高帧速率周期中，假设在从开始定时Ts到过去了t0的周期内存在静默期。在这种情况下，成像装置 100设置长度与Ts对应的正偏移时间tofs(例如，t0的10倍)。
在图8中，c图示了设置有视频再现时间的视频帧的示例。在图8中，d 是图示了在经过声音处理之后的声音信号的示例的视图。从Ts起已经过去了t0的定时是Ts”，复制声音信号Sa2中排除静默期的一部分(即，从Ts”到高帧速率周期的结束定时Te的声音信号)，并且生成声音信号Sa2'-1至Sa2'-m。然后，将第一Sa2'-1的声音再现时间设置为从Ts起已经过去了偏移时间tofs的定时。按照这种方式，由于从高帧速率周期内的声音信号Sa2复制了除静默期之外的信号，所以可以将流的数据量减去静默期。
图9是图示了在第一实施例中的流和分组的数据配置的示例的视图。在图9中，a是图示了流的数据配置的示例的视图。按照MPEG-2TS标准，例如，流包括分组ARI_PCK(该分组ARI_PCK包括辅助数据)、视频分组V_PCK、和音频分组A_PCK。将视频帧存储在一个或者多个视频分组V_PCK中，并且将音频帧存储在一个或者多个音频分组A_PCK中。
在图9中，b是图示了视频分组V_PCK的数据配置的示例的视图。按照 MPEG-2TS标准，将分组起始码、分组长度、代码“10”、标记和控制、PES 报头长度、条件编码、和分组数据存储在视频分组V_PCK中。音频分组的数据配置与视频分组的数据配置相似。
在分组起始码的字段中，存储指示分组的报头的报头起始码和用于识别流的流ID。在条件编码字段中，存储指示再现时间的PTS和指示解码时间的解码时间戳(DTS)。将上文提到的PTS_V和PTS_A存储在该字段中。
[成像装置的操作示例]
图10是图示了根据第一实施例的视觉记录处理的示例的流程图。例如，在执行用于开始视觉记录的操作(诸如，按下记录按钮)时，开始该视觉记录处理。成像装置100按照600Hz的高帧速率生成视频帧(步骤S901)。而且，当检测到场景变化时，成像装置100设置高帧速率周期(步骤S902)并且在高帧速率周期之外将帧速率转换成60Hz的低帧速率(步骤S903)。
然后，成像装置100对视频帧进行编码(步骤S904)，并且在编码的视频帧中设置用于按照60Hz的低帧速率进行再现的视频再现时间(步骤S905)。成像装置100确定是否执行用于结束视觉记录的操作(诸如，按下停止按钮) (步骤S906)。在尚未执行用于结束视觉记录的操作的情况下(步骤S906：否)，成像装置100重复步骤S901之后的步骤。另一方面，在执行了用于结束视觉记录的操作的情况下(步骤S906：是)，成像装置100结束视觉记录处理。
图11是图示了在第一实施例中的声音记录处理的示例的流程图。例如，在执行用于开始视觉记录的操作(诸如，按下记录按钮)时，开始该声音记录处理。成像装置100按照44.1千赫(kHz)的采样频率执行声音采样(步骤S911)。然后，成像装置100确定采样得到的声音信号是否为在复制周期内的信号(步骤S912)。在采样得到的声音信号是在复制周期内的声音信号的情况下(步骤S912：是)，成像装置100复制声音信号(步骤S913)并且针对各个复制的声音信号，通过不同的增益来调整音量(步骤S914)。
在采样得到的声音信号不是在复制周期内的声音信号的情况下(步骤 S912：否)，或者在步骤S914之后，成像装置100按照50赫兹(Hz)等的帧速率对声音信号进行编码以生成音频帧(步骤S915)。成像装置100针对各个音频帧设置声音再现时间(步骤S916)，并且确定是否已经执行了用于结束声音记录的操作(诸如，按下停止按钮)(步骤S917)。在尚未执行用于结束声音记录的操作的情况下(步骤S917：否)，成像装置100重复步骤S911之后的步骤。另一方面，在执行了用于结束声音记录的操作的情况下(步骤S917：是)，成像装置100结束声音记录处理。
如上所述，根据本技术的第一实施例，由于成像装置100复制在高帧速率周期内的声音信号并且针对各个复制的声音信号执行不同的声音处理，所以能够重复地再现相同的声音，同时改变音量等。因此，在较慢再现周期中不存在静默期，并且提高真实感，从而可以提高声音的再现质量。
[第一修改例]
在上述的第一实施例中，未改变声音信号的再现速度，并且按照原样再现声音信号；然而，可以在改变再现速度之后复制声音信号。还将改变声音的再现速度称作声音速度转换。由于延迟了再现时间，所以各个复制的声音信号的再现时间变长，从而可以减少复制次数。而且，通过适当地延迟再现速度，更容易听见声音。然而，如果将再现速度设置得过慢，则用户可能难以听见声音，从而使得，用于减小再现速度的比例因子优选不超过1/2倍。根据第一实施例的第一修改例的成像装置100与第一实施例的不同之处在于成像装置100在延迟声音信号的再现速度之后执行复制。
图12是图示了在第一修改例中的声音处理单元的配置示例的框图。第一修改例的声音处理单元170与第一实施例的不同之处在于声音处理单元170 进一步包括再现速度转换器173。
再现速度转换器173利用固定比例因子n(例如，1/2)来延迟来自切换单元172的声音信号的再现速度。该比例因子是转换之后的再现速度与转换之前的再现速度的比值。再现速度转换器173将具有转换后的再现速度的声音信号提供给复制单元174。
进一步地，第一修改例的控制单元120进一步设置用于延迟再现速度的比例因子，并且将设置的值提供给再现速度转换器173。
此外，在第一修改例中，通过以下等式(而不是等式2)来设置复制次数。
复制次数＝SYNC_VH×n/SYNC_VL 等式3
例如，在SYNC_VH是600赫兹(Hz)，SYNC_LH是60赫兹(Hz)，并且再现速度的比例因子是1/2的情况下，将“5”设置为复制次数。
注意，在第一修改例中，在控制单元120中，代替在转换之前和之后的再现速度的比值n，可以设置在转换之前和之后的再现时间的比值n'。在这种情况下，使用以下等式，而不是等式3。
复制次数＝SYNC_VH/(SYNC_VL×n') 等式4
图13是图示了在第一实施例的第一修改例中的流的示例的视图。在图13 中，a是与垂直同步信号SYNC_VH同步捕获到的视频帧的示例。在图13中， b是在帧速率转换之后的帧的示例。在图13中，c是图示了采样得到的声音信号的示例的视图。在图13中，d图示了设置有视频再现时间的视频帧的示例。在图13中，e是图示了在声音处理之后的声音信号的示例的视图。对原始声音信号Sa2执行转换处理，从而延迟再现速度，并且生成具有较长再现时间的复制的声音信号Sa2-1至Sa2-p。
如上所述，根据本技术的第一修改例，由于成像装置100延迟在高帧速率周期期间记录的声音信号的再现速度，所以能够减少复制次数并且使听见声音变得更容易。
[第二修改例]
在上述的第一实施例中，成像装置100通过增益来调整音量级，但是除了音量级调整处理之外，还可以执行用于改变声音信号的频率特性的均衡器处理。根据第一实施例的第二修改例的成像装置100与第一实施例的不同之处在于进一步执行了均衡器处理。
图14是图示了在第一实施例的第二修改例中的声音信号处理单元175的配置示例的框图。第二修改例的声音信号处理单元175包括增益调整单元176 和均衡器处理单元177。
增益调整单元176通过增益来调整音量级。增益调整单元176将调整过的声音信号提供给均衡器处理单元177。均衡器处理单元177执行用于将复制的声音信号的频率特性更改为相互不同的特性的均衡器处理。例如，针对各个复制的声音信号，均衡器处理单元177执行使小于预定阈值的低频率区域的增益比大于阈值的高频率区域的增益更大的处理。再现时间越短，阈值越小。鉴于此，能够获得如下声学效果：在低频率区域中的声音的加重程度随着时间的流逝逐渐增加。均衡器处理单元177将在均衡处理之后的声音信号提供给声音编码单元178。注意，改变频率特性的方法不限于加重低频率区域。成像装置100可以逐渐地加重高频率区域。进一步地，成像装置100可以相对于以预定中心频率为中心的特定频带来改变增益。
注意，声音信号处理单元175执行声音音量级的调整和均衡器处理。然而，声音信号处理单元175可以配置为仅执行均衡器处理。
图15是图示了在第一实施例的第二修改例中的频率特性的示例的图表。在图15中，纵轴表示增益并且横轴表示频率。进一步地，虚线的曲线表示首先在较慢再现周期中再现的复制的声音信号Sa2-1的特性，并且单点划线的曲线表示接下来要再现的复制的声音信号Sa2-2的特性。实线曲线示出了最后在较慢再现周期中再现的复制的声音信号Sa2-p的特性。在复制的声音信号Sa-1中，将在高频率区域中的增益调整为小于阈值Th1，并且在复制的声音信号Sa-2中，相对于小于阈值Th1的阈值Th2，将增益调整为相对较小。此外，在复制的声音信号Sa-p中，将在高频率区域中的增益调整为比小于这些值的阈值Thp更小。因此，能够获得如下声学效果：与低频率区域中的声音的协作程度随着时间的流逝而增加。
如上所述，根据本技术的第二修改例，由于成像装置100针对各个复制的声音信号执行将频率特性更改为不同的频率特性的均衡器处理，所以能够在较慢再现周期内实现典型的声学效果。
<2.第二实施例>
在上述的第一实施例中，成像装置100在记录时执行声音信号的复制和信号处理；然而，可以在再现时执行以上处理，但不在记录时执行以上处理。通过不在记录时复制声音信号，能够减小记录流所需的数据大小。根据第二实施例的成像装置100与第一实施例的不同之处在于在再现期间执行声音信号的复制处理和信号处理。
图16是图示了根据第二实施例的成像系统的配置示例的框图。该成像系统包括成像装置100和再现装置200。
根据第二实施例的成像装置100将指示待复制的声音信号的声音再现时间、再现次数、和声音处理(增益变化量)的内容的详细的设置数据存储在元数据中并且将添加有该数据的流提供给再现装置200。然而，在成像装置 100中，未执行声音信号的复制与信号处理。进一步地，在元数据中，将详细的设置数据记录在用于用户数据或者辅助数据的区域中。稍后将描述用于记录详细的设置数据的区域的具体示例。
再现装置200是再现流的装置并且包括操作单元210、元数据分离单元 220、再现控制单元230、解码单元240、复制单元250、声音信号处理单元 260、显示单元270、和扬声器280。
操作单元210根据用户的操作生成操作信号。例如，操作信号包括下令开始或者停止流的再现的信号。操作单元210将操作信号提供给元数据分离单元220。
元数据分离单元220根据操作信号获取流，并且将该流分成元数据和编码数据(视频分组或者音频分组)。元数据分离单元220将分开的元数据提供给再现控制单元230并且将编码数据提供给解码单元240。
解码单元240将编码数据解码成原始的声音信号和视频信号。解码单元 240将通过解码获得的声音信号提供给复制单元250并且将视频信号提供给显示单元270。显示单元270显示视频信号。
再现控制单元230控制复制单元250和声音信号处理单元260。再现控制单元230获得待复制的声音信号的声音再现时间、复制次数、和增益变化量，并且将音频再现时间和复制次数提供给复制单元250。另外，再现控制单元 230将增益变化量提供给声音信号处理单元260。
在再现控制单元230的控制下，复制单元250复制声音信号。每当提供来自解码单元240的声音信号时，复制单元250确定声音再现时间是否与来自再现控制单元230的声音再现时间一致。在一致的情况下，复制单元250 按照由再现控制单元230设置的复制次数来复制声音信号并且将声音信号提供给声音信号处理单元260。另一方面，在声音再现时间彼此不一致的情况下，复制单元250将声音信号提供给扬声器280，但不复制声音信号。
在再现控制单元230的控制下，声音信号处理单元260针对各个复制的声音信号执行不同的声音处理。每当提供复制的声音信号时，声音信号处理单元260通过当前增益来调整音量级，并且通过设置的变化量来改变增益。例如，在将“-10分贝(dB)”设置为增益变化量的情况下，声音信号处理单元 260针对第一复制的声音信号将音量级改变0分贝(dB)，并且针对下一个复制的声音信号将音量级改变-10分贝(dB)。在后文中，类似地，通过将增益改变-10分贝(dB)来调整音量级。声音信号处理单元260将调整音量级之后的复制的声音信号提供给扬声器280。扬声器280将声音信号转换成物理振动以再现声音。
注意，在第二实施例中，再现装置200可以进一步改变再现速度并且执行均衡器处理。在改变再现速度的情况下，在元数据中设置用于改变再现速度的比例因子。另外，在执行均衡器处理的情况下，在元数据中设置中心频率的阈值和增益变化量。
进一步地，尽管再现装置200设置在成像装置100之外，但可以在成像装置100中提供再现装置200的功能。
图17是图示了在第二实施例中的声音处理单元170的配置示例的框图。根据第二实施例的声音处理单元170与第一实施例的不同之处在于声音处理单元170排除切换单元172、复制单元174、和声音信号处理单元175。
图18是图示了在第二实施例中要在使用MPEG 4-AAC的情况下设置的字段的示例的视图。如图18所图示，例如，在MPEG 4-AAC标准的元数据 510中，将详细的设置数据存储在数据流元素(DSE)区域511中。
图19是图示了在第二实施例中的详细的设置数据的示例的视图。在该详细的设置数据中，设置待复制的声音信号的声音再现时间、再现次数、和增益变化量。例如，在将从声音再现时间Ts1再现的声音信号复制十次并且每次将相应增益改变-10分贝(dB)的情况下，设置“Ts1”、“10”、和“-10dB”。
图20是图示了在第二实施例中要在使用MPEG 4-system的情况下设置的字段的示例的视图。如图20所图示，例如，在MPEG 4-system标准的元数据 520中，将详细的设置数据存储在udta区域521中。
图21是图示了在第二实施例中要在使用HMMP文件格式的情况下设置的字段的示例的视图。如图21所图示，例如，在HMMP标准的元数据530 中，将详细的设置数据存储在uuid区域531中。
图22是图示了在第二实施例中的声音记录处理的示例的流程图。成像装置100对声音进行采样(步骤S951)，并且对声音信号进行编码以生成音频帧 (步骤S952)。进一步地，成像装置100生成存储详细的设置数据的元数据(步骤S953)，并且将该元数据添加至音频帧(步骤S954)。然后，成像装置100 确定是否已经执行了用于结束记录的操作(步骤S955)。在尚未执行用于结束记录的操作的情况下(步骤S955：否)，成像装置100重复步骤S951之后的步骤。另一方面，在执行了用于结束声音记录的操作的情况下(步骤S955：是)，成像装置100结束声音记录处理。
图23是图示了在第二实施例中的再现处理的示例的流程图。例如，在执行了用于再现流的操作(诸如，按下再现按钮)时，该操作开始。
再现装置200执行复制处理以对编码数据进行解码(步骤S961)，并且参考元数据以确定解码的声音信号是否为待复制的声音信号(步骤S962)。在解码的声音信号是待复制的声音信号的情况下(步骤S962：是)，再现装置200 复制声音信号(步骤S963)，并且通过相互不同的增益来调整复制的声音信号的音量级(步骤S964)。
在解码的声音信号不是待复制的声音信号的情况下(步骤S962：否)，再现装置200通过使用显示单元和扬声器来再现移动图像和声音(步骤S965)。然后，再现装置200确定再现结束时间是否已经到来(步骤S966)。在再现结束时间尚未到来的情况下(步骤S966：否)，成像装置100重复步骤S961之后的步骤。另一方面，在再现结束时间已经到来的情况下(步骤S966：是)，再现装置200结束再现处理。
如上所述，根据本技术的第二实施例，由于再现装置200执行声音信号的复制和信号处理，所以不需要成像装置100在记录时复制声音信号，并且可以减小记录流所需的数据大小。
<3.第三实施例>
在上述的第二实施例中，复制次数和增益变化量是固定值，但是可以根据用户的操作来改变复制次数和增益变化量中的至少一个。根据第三实施例的成像系统与第二实施例的不同之处在于根据用户的操作来改变复制次数和增益变化量。
图24是图示了根据第三实施例的成像系统的配置示例的框图。根据第三实施例的成像系统与第二实施例的不同之处在于设置了编辑装置300，而不是再现装置200。
此外，根据第三实施例的成像装置100与第二实施例的不同之处在于除了复制次数和增益变化量之外，将用于延迟再现速度的比例因子进一步设置为元数据。
编辑装置300包括操作单元310、元数据分离单元320、编辑控制单元330、解码单元340、再现速度转换器350、复制单元360、声音信号处理单元370、和重新编码单元380。
操作单元310根据用户的操作生成操作信号。例如，生成操作信号，该操作信号下令改变元数据中的复制次数、增益变化量、和比例因子中的至少一个。操作单元310将生成的操作信号提供给编辑控制单元330。
元数据分离单元320将流分成元数据和编码数据。元数据分离单元320 将分开的元数据提供给编辑控制单元330并且将编码数据提供给解码单元 340。
编码控制单元330根据操作信号改变比例因子、复制次数、和增益变化量中的至少一个。当用户改变复制次数和比例因子中的一个时，编辑控制单元330改变复制次数和比例因子中的另一个以满足等式3。编辑控制单元330 将复制目标的声音再现时间提供给解码单元340。另外，编辑控制单元330 将改变后的比例因子提供给再现速度转换器350，将复制次数提供给复制单元 360，并且将增益变化量提供给声音信号处理单元370。
解码单元340对编码数据进行解码。解码单元340对要复制的声音信号进行解码并且将声音信号提供给再现速度转换器350。在不解码的情况下，将尚不准备复制的声音信号和视频信号提供给成像装置100。
在编辑控制单元330的控制下，再现速度转换器350延迟来自解码单元 340的声音信号的再现速度。再现速度转换器350将具有延迟的再现速度的声音信号提供给复制单元360。在编辑控制单元330的控制下，复制单元360 复制原始声音信号。复制单元360复制原始声音信号并且将原始声音信号提供给声音信号处理单元370。
在编辑控制单元330的控制下，声音信号处理单元370对复制的声音信号执行信号处理。声音信号处理单元370基于设置的增益变化量来调整复制的声音信号的音量级并且将复制的声音信号提供给重新编码单元380。
重新编码单元380对声音信号进行重新编码。重新编码单元380将通过编码生成的流提供给成像装置100。
按照这种方式，用户可以通过精确地调整再现速度和复制次数来进一步提高再现质量。例如，在用户感觉当前再现速度相对于将再现速度设置为“1/2”倍并且将复制执行“5”次的设置过慢的情况下，将比例因子更改为“1”倍等。当将比例因子更改为“1”倍时，编辑装置300通过使用等式3将复制次数更改为“10”次。
注意，在第三实施例中，成像装置100进一步在元数据中描述了均衡器处理中的中心频率的阈值和变化量，并且编辑装置300可以改变阈值和变化量。进一步地，在第三实施例中，成像装置100可以进一步在元数据中描述偏移时间，并且编辑装置300可以改变偏移时间。
进一步地，尽管编辑装置300设置在成像装置100之外，但可以在成像装置100中提供编辑装置300的功能。
图25是图示了在第三实施例中的流的示例的视图。在图25中，a是与垂直同步信号SYNC_VH同步捕获到的视频帧的示例。在图25中，b是在帧速率转换之后的帧的示例。在图25中，c是编码音频帧的示例。在图25中，d 图示了设置有视频再现时间的视频帧的示例。在图25中，e是在改变元数据之后的音频帧的示例。如由图25中的e所例示，将通过对高帧速率周期内的音频帧Fa3和Fa4进行解码而获得的声音信号复制成m个声音信号，并且通过对这些声音信号进行重新编码来生成音频帧Fa 3-1和Fa 4-1等。
图26是图示了在第三实施例中的编辑处理的示例的流程图。例如，当执行用于编辑元数据的应用时，开始该编辑处理。
编辑装置300将元数据分开并且根据用户的操作改变元数据中的复制次数、比例因子、和增益变化量(步骤S971)。另外，编辑装置300执行用于对编码数据进行解码的解码处理(步骤S972)，并且改变待复制的声音信号的再现速度(步骤S973)。然后，编辑装置300复制再现速度已经发生变化的声音信号(步骤S974)，并且通过不同的增益来调整各个复制的声音信号的音量级 (步骤S975)。编辑装置300对复制的声音信号进行重新编码(步骤S976)，并且确定是否已经执行了用于结束编辑的操作(步骤S977)。在尚未执行用于结束记录的操作的情况下(步骤S977：否)，成像装置100重复步骤S971之后的步骤。另一方面，在执行了用于结束编辑的操作的情况下(步骤S977：是)，成像装置100结束编辑处理。
如上所述，根据本技术的第三实施例，由于复制根据用户的操作改变设置(诸如，元数据中的再现次数和再现速度)，所以能够通过精确地调整再现次数和再现速度来进一步提高再现质量。
应该注意，以上实施例示出了用于体现本技术的示例，在实施例中的事项和本发明在权利要求书中指定的事项分别具有对应关系。同样，本发明在权利要求书中指定的事项和本技术的实施例中用相同名称表示的事项具有对应关系。然而，本技术不限于实施例，并且可以在不脱离本技术的主旨的情况下通过对实施例进行各种修改而体现。
另外，可以将在以上实施例中描述的处理过程视为具有这些系列的过程的方法，或者可以将在以上实施例中描述的处理过程视为用于使计算机执行这些系列的过程的程序或者视作用于存储该程序的记录介质。例如，可以使用光盘(CD)、迷你光盘(MD)、数字通用光盘(DVD)、存储卡、蓝光(TM) 光盘等，作为该记录介质。
注意，本文描述的效果并非是限制性的，并且可以应用在本公开中描述的任何效果。
应该注意的是，本技术可以具有以下配置。
(1)一种信号处理装置，其包括：
帧速率转换器，该帧速率转换器将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于该预定帧速率的低帧速率；
复制单元，该复制单元复制在预定周期内记录的原始声音信号以生成多个复制的声音信号，该多个复制的声音信号中的每一个与该原始声音信号相同；以及
声音信号处理单元，该声音信号处理单元针对多个复制的声音信号中的每一个执行不同的信号处理。
(2)根据(1)的信号处理装置，其中，声音信号处理单元执行通过相互不同的增益来调整多个复制的声音信号中的每一个的音量级的处理，作为信号处理。
(3)根据(1)或者(2)的信号处理装置，其中，声音信号处理单元执行将多个复制的声音信号中的每一个的频率特性更改为相互不同的特性的处理，作为信号处理。
(4)根据(1)至(3)中任一项的信号处理装置，该信号处理装置进一步包括再现速度转换器，该再现速度转换器改变原始声音信号的再现速度并且将原始声音信号提供给复制单元。
(5)根据(1)至(4)中任一项的信号处理装置，该信号处理装置进一步包括再现时间设置单元，在紧接着预定周期的开始定时之前存在音量级小于预定级的静默期的情况下，该再现时间设置单元将静默期的开始定时设置为多个复制的声音信号的再现开始时间。
(6)根据(1)至(5)中任一项的信号处理装置，在紧接着预定周期的开始定时之后存在音量级小于预定级的静默期的情况下，复制在将静默期从预定周期排除的周期内记录的声音信号，并且在不存在静默期的情况下，复制在预定周期内记录的原始声音信号。
(7)根据(1)至(6)中任一项的信号处理装置，该信号处理装置进一步包括场景变化检测器，该场景变化检测器检测场景已经从按照预定帧速率捕获到的多个帧变化的场景变化定时并且将包括该场景变化定时的周期设置为预定周期。
(8)一种信号处理系统，其包括：
信号处理装置，该信号处理装置将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于预定帧速率的低帧速率，并且生成元数据，该元数据包括设置信息，该设置信息指示用于复制在预定周期内记录的原始声音信号的复制次数和将针对通过复制原始声音信号而生成的多个复制的声音信号中的每一个执行的相互不同的信号处理；以及
再现装置，该再现装置通过基于由设置信息指示的复制次数复制原始声音信号来生成多个复制的声音信号，对多个复制的声音信号中的每一个执行由设置信息指示的信号处理，并且再现多个声音信号和多个帧。
(9)根据(8)的信号处理系统，其中，元数据格式是MPEG4-AAC，并且信号处理装置将设置信息记录在元数据的数据流元素(DSE)区域中。
(10)根据(8)的信号处理系统，其中，元数据格式是MPEG4-system，并且信号处理装置将设置信息记录在元数据的ubta区域中。
(11)根据(8)的信号处理系统，其中，元数据格式是家庭和移动多媒体平台(HMMP)，并且信号处理装置将设置信息记录在元数据的uuid区域中。
(12)一种信号处理系统，其包括：
信号处理装置，该信号处理装置将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于预定帧速率的低帧速率，并且生成元数据，该元数据包括设置信息，该设置信息指示用于复制在预定周期内记录的原始声音信号的复制次数和将针对通过复制原始声音信号而生成的多个复制的声音信号中的每一个执行的相互不同的信号处理；以及
编辑装置，该编辑装置改变设置信息，通过基于由所改变后的设置信号指示的复制次数复制原始声音信号来生成多个复制的声音信号，并且对多个复制的声音信号中的每一个执行由设置信息指示的信号处理。
(13)一种信号处理方法，其包括：
帧速率转换过程，在该帧速率转换过程中，帧速率转换器将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于预定帧速率的低帧速率；
复制过程，在该复制过程中，复制单元复制在预定周期内记录的原始声音信号以生成多个复制的声音信号，该多个复制的声音信号中的每一个与原始声音信号相同；以及
声音信号处理过程，在该声音信号处理过程中，声音信号处理单元针对多个复制的声音信号中的每一个执行不同的信号处理。
(14)一种用于使计算机执行以下过程的程序：
将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于预定帧速率的低帧速率的帧速率转换过程；
复制在预定周期内记录的原始声音信号以生成多个复制的声音信号的复制过程，该多个复制的声音信号中的每一个与原始声音信号相同；以及
针对多个复制的声音信号中的每一个执行不同的信号处理的声音信号处理过程。
附图标记列表
100 成像装置
110、210、310 操作单元
120 控制单元
121 视频再现时间设置单元
122 元数据生成单元
123 声音再现时间设置单元
124 信号处理设置单元
125 偏移设置单元
126 复制周期设置单元
130 移动图像数据生成单元
131 成像单元
132、171 缓冲器
133 场景变化检测器
134 帧速率转换器
135、172 切换单元
140 移动图像编码单元
150 流生成单元
160 声音采样处理单元
170 声音处理单元
173、350 再现速度转换器
174、250、360 复制单元
175、260、370 声音信号处理单元
176 增益调整单元
177 均衡器处理单元
178 声音编码单元
180 记录单元
200 再现装置
220、320 元数据分离单元
230 再现控制单元
240、340 解码单元
270 显示单元
280 扬声器
300 编辑装置
330 编辑控制单元
380 重新编码单元。

Claims (13)

1.一种信号处理装置，所述信号处理装置包括：
帧速率转换器，所述帧速率转换器将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于所述预定帧速率的低帧速率；
复制单元，所述复制单元复制在所述预定周期内记录的原始声音信号以生成多个复制的声音信号，所述多个复制的声音信号中的每一个与所述原始声音信号相同；以及
声音信号处理单元，所述声音信号处理单元针对所述多个复制的声音信号中的每一个执行不同的信号处理,
其中，在紧接着所述预定周期的开始定时之后存在音量级小于预定级的静默期的情况下，复制在将所述静默期从所述预定周期排除的周期内记录的所述声音信号，并且在不存在静默期的情况下，复制在所述预定周期内记录的所述原始声音信号。
2.根据权利要求1所述的信号处理装置，其中，所述声音信号处理单元执行通过相互不同的增益来调整所述多个复制的声音信号中的每一个的音量级的处理，作为所述信号处理。
3.根据权利要求1所述的信号处理装置，其中，所述声音信号处理单元执行将所述多个复制的声音信号中的每一个的频率特性更改为相互不同的特性的处理，作为所述信号处理。
4.根据权利要求1所述的信号处理装置，所述信号处理装置进一步包括再现速度转换器，所述再现速度转换器改变所述原始声音信号的所述再现速度并且将所述原始声音信号提供给所述复制单元。
5.根据权利要求1所述的信号处理装置，所述信号处理装置进一步包括再现时间设置单元，在紧接着所述预定周期的开始定时之前存在所述音量级小于预定级的静默期的情况下，所述再现时间设置单元将静默期的开始定时设置为所述多个复制的声音信号的再现开始时间。
6.根据权利要求1所述的信号处理装置，所述信号处理装置进一步包括场景变化检测器，所述场景变化检测器检测场景已经从按照预定帧速率捕获到的多个帧变化的场景变化定时并且将包括所述场景变化定时的周期设置为所述预定周期。
7.一种信号处理系统，所述信号处理系统包括：
信号处理装置，所述信号处理装置将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于所述预定帧速率的低帧速率，并且生成元数据，所述元数据包括设置信息，所述设置信息指示用于复制在所述预定周期内记录的原始声音信号的复制次数和将针对通过复制所述原始声音信号而生成的多个复制的声音信号中的每一个执行的相互不同的信号处理；以及
再现装置，所述再现装置通过基于由所述设置信息指示的复制次数复制所述原始声音信号来生成所述多个复制的声音信号，对所述多个复制的声音信号中的每一个执行由所述设置信息指示的所述信号处理，并且再现多个声音信号和所述多个帧,
在紧接着所述预定周期的开始定时之后存在音量级小于预定级的静默期的情况下，复制在将所述静默期从所述预定周期排除的周期内记录的所述声音信号，并且在不存在静默期的情况下，复制在所述预定周期内记录的所述原始声音信号。
8.根据权利要求7所述的信号处理系统，其中，所述元数据格式是MPEG4-AAC，并且所述信号处理装置将所述设置信息记录在所述元数据的数据流元素区域中。
9.根据权利要求7所述的信号处理系统，其中，所述元数据格式是MPEG4-system，并且所述信号处理装置将所述设置信息记录在所述元数据的udta区域中。
10.根据权利要求7所述的信号处理系统，其中，所述元数据格式是家庭和移动多媒体平台，并且所述信号处理装置将所述设置信息记录在所述元数据的uuid区域中。
11.一种信号处理系统，所述信号处理系统包括：
信号处理装置，所述信号处理装置将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于所述预定帧速率的低帧速率，并且生成元数据，所述元数据包括设置信息，所述设置信息指示用于复制在所述预定周期内记录的原始声音信号的复制次数和将针对通过复制所述原始声音信号而生成的多个复制的声音信号中的每一个执行的相互不同的信号处理，其中在紧接着所述预定周期的开始定时之后存在音量级小于预定级的静默期的情况下，复制在将所述静默期从所述预定周期排除的周期内记录的所述声音信号，并且在不存在静默期的情况下，复制在所述预定周期内记录的所述原始声音信号；以及
编辑装置，所述编辑装置改变所述设置信息，通过基于由所改变后的设置信号指示的复制次数复制所述原始声音信号来生成所述多个复制的声音信号，并且对所述多个复制的声音信号中的每一个执行由所述设置信息指示的所述信号处理。
12.一种信号处理方法，所述信号处理方法包括：
帧速率转换过程，在所述帧速率转换过程中，帧速率转换器将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于所述预定帧速率的低帧速率；
复制过程，在所述复制过程中，复制单元复制在所述预定周期内记录的原始声音信号以生成多个复制的声音信号，所述多个复制的声音信号中的每一个与所述原始声音信号相同，其中在紧接着所述预定周期的开始定时之后存在音量级小于预定级的静默期的情况下，复制在将所述静默期从所述预定周期排除的周期内记录的所述声音信号，并且在不存在静默期的情况下，复制在所述预定周期内记录的所述原始声音信号；以及
声音信号处理过程，在所述声音信号处理过程中，声音信号处理单元针对所述多个复制的声音信号中的每一个执行不同的信号处理。
13.一种计算机可读存储介质，其上存储有程序，用于使计算机执行以下过程：
将按照预定帧速率捕获到的多个帧中在预定周期之外捕获到的帧的帧速率转换为低于所述预定帧速率的低帧速率的帧速率转换过程；
复制在所述预定周期内记录的原始声音信号以生成多个复制的声音信号的复制过程，所述多个复制的声音信号中的每一个与所述原始声音信号相同；以及
针对所述多个复制的声音信号中的每一个执行不同的信号处理的声音信号处理过程，
其中在紧接着所述预定周期的开始定时之后存在音量级小于预定级的静默期的情况下，复制在将所述静默期从所述预定周期排除的周期内记录的所述声音信号，并且在不存在静默期的情况下，复制在所述预定周期内记录的所述原始声音信号。
CN201680012073.XA 2015-03-03 2016-01-12 信号处理装置、信号处理系统和信号处理方法 Active CN107409194B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015041003 2015-03-03
JP2015-041003 2015-03-03
PCT/JP2016/050712 WO2016139971A1 (ja) 2015-03-03 2016-01-12 信号処理装置、信号処理システム、信号処理方法、および、プログラム

Publications (2)

Publication Number Publication Date
CN107409194A CN107409194A (zh) 2017-11-28
CN107409194B true CN107409194B (zh) 2020-11-13

Family

ID=56848079

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680012073.XA Active CN107409194B (zh) 2015-03-03 2016-01-12 信号处理装置、信号处理系统和信号处理方法

Country Status (3)

Country Link
US (1) US10262690B2 (zh)
CN (1) CN107409194B (zh)
WO (1) WO2016139971A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019050543A (ja) * 2017-09-12 2019-03-28 ソニーセミコンダクタソリューションズ株式会社 情報処理装置、及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101536491A (zh) * 2006-10-30 2009-09-16 索尼株式会社 图像捕捉装置和图像捕捉方法
CN101901612A (zh) * 2009-05-27 2010-12-01 珠海扬智电子有限公司 变速不变调的声音播放方法及装置
JP2011139306A (ja) * 2009-12-28 2011-07-14 Sanyo Electric Co Ltd 撮像装置及び再生装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0769780B1 (en) * 1995-10-18 2003-01-29 Matsushita Electric Industrial Co., Ltd. Information recording device and information output device
JP4133559B2 (ja) * 2003-05-02 2008-08-13 株式会社コナミデジタルエンタテインメント 音声再生プログラム、音声再生方法及び音声再生装置
EP2079231B1 (en) * 2006-10-24 2014-04-30 Sony Corporation Imaging device and reproduction control device
JP4909165B2 (ja) * 2007-04-24 2012-04-04 ルネサスエレクトロニクス株式会社 シーン変化検出装置、符号化装置及びシーン変化検出方法
JP2010178124A (ja) 2009-01-30 2010-08-12 Victor Co Of Japan Ltd 記録装置及び記録方法
JP5245919B2 (ja) * 2009-03-04 2013-07-24 富士通株式会社 情報処理装置およびプログラム
JP2011055386A (ja) * 2009-09-04 2011-03-17 Sanyo Electric Co Ltd 音響信号処理装置及び電子機器
JP5500188B2 (ja) * 2012-02-14 2014-05-21 株式会社ニコン 撮像装置
US20170140788A9 (en) * 2013-07-10 2017-05-18 Lawrence G. Ryckman Audio enhancement processing system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101536491A (zh) * 2006-10-30 2009-09-16 索尼株式会社 图像捕捉装置和图像捕捉方法
CN101901612A (zh) * 2009-05-27 2010-12-01 珠海扬智电子有限公司 变速不变调的声音播放方法及装置
JP2011139306A (ja) * 2009-12-28 2011-07-14 Sanyo Electric Co Ltd 撮像装置及び再生装置

Also Published As

Publication number Publication date
US20180040348A1 (en) 2018-02-08
CN107409194A (zh) 2017-11-28
WO2016139971A1 (ja) 2016-09-09
US10262690B2 (en) 2019-04-16

Similar Documents

Publication Publication Date Title
WO2016203866A1 (ja) 録音装置、録音システム、および、録音方法
JP6287315B2 (ja) 動画像音声同期装置、動画像音声同期方法及び動画像音声同期用コンピュータプログラム
CN107251551B (zh) 图像处理设备、图像捕获装置、图像处理方法和存储介质
JP4904914B2 (ja) ストリーム生成装置、撮像装置、およびストリーム生成方法
JPH10164514A (ja) ディジタルビデオ再生装置
KR20100030663A (ko) 디코더 장치 및 디코드 방법
US8511901B2 (en) Image recording apparatus and method
JPH0973299A (ja) Ｍｐｅｇオーディオ再生装置およびｍｐｅｇ再生装置
JP2004180290A (ja) 伝送装置と伝送方法と再生装置と再生方法およびプログラムと記録媒体
CN107409194B (zh) 信号处理装置、信号处理系统和信号处理方法
JP4096915B2 (ja) デジタル情報再生装置及び方法
JP2006050230A (ja) フレームレート変換方法、変換装置、画像信号記録装置および再生装置
JP6398694B2 (ja) 無線ｌａｎ機能を備えた携帯機器及び記録システム
JP4703733B2 (ja) 映像・音声再生装置
US10412340B2 (en) Recording device and multiplexing method
JP5401930B2 (ja) 撮像装置
JP5163005B2 (ja) 映像信号再生装置、映像信号処理装置および映像信号処理方法
JP2016009961A (ja) 再生装置
JP4196475B2 (ja) 再生装置及び方法並びに記録及び／又は再生装置及び方法
JP2004153631A (ja) デジタル映像音声記録装置
JP2005117400A (ja) ビデオカメラ
JP2014239397A (ja) デジタルカメラ
JP2012160973A (ja) 画像処理装置
JP2006054728A (ja) データ復号装置及びデータ復号方法、並びにデータ再生装置及びデータ再生方法
JP2006270502A (ja) 記録再生装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant