CN112804526B - 图像数据存储方法、设备及存储介质、芯片、模组设备 - Google Patents

图像数据存储方法、设备及存储介质、芯片、模组设备 Download PDF

Info

Publication number
CN112804526B
CN112804526B CN202011637822.2A CN202011637822A CN112804526B CN 112804526 B CN112804526 B CN 112804526B CN 202011637822 A CN202011637822 A CN 202011637822A CN 112804526 B CN112804526 B CN 112804526B
Authority
CN
China
Prior art keywords
pixel data
image
data set
determining
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011637822.2A
Other languages
English (en)
Other versions
CN112804526A (zh
Inventor
李振中
李倩茹
胡均浩
葛维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Unisoc Chongqing Technology Co Ltd
Original Assignee
Unisoc Chongqing Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Unisoc Chongqing Technology Co Ltd filed Critical Unisoc Chongqing Technology Co Ltd
Priority to CN202011637822.2A priority Critical patent/CN112804526B/zh
Publication of CN112804526A publication Critical patent/CN112804526A/zh
Priority to PCT/CN2021/134214 priority patent/WO2022142952A1/zh
Application granted granted Critical
Publication of CN112804526B publication Critical patent/CN112804526B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请实施例公开了一种图像数据存储方法、设备及存储介质、芯片、模组设备，所述方法包括：获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，参考图像和当前图像用于确定位于参考图像和当前图像之间的待插帧图像；确定待插帧图像的参考相位信息，参考相位信息用于指示待插帧图像与参考图像和当前图像之间的间隔；根据参考相位信息从第一像素数据集合和第二像素数据集合中确定目标像素数据集合，并根据参考相位信息从目标像素数据集合中确定待存储像素数据集合；对待存储像素数据集合中的像素数据进行存储。采用本申请实施例中的图像数据存储方法，能够在保证插帧效果的同时减小数据存储量。

Description

图像数据存储方法、设备及存储介质、芯片、模组设备
技术领域
本发明涉及数据存储领域，尤其涉及一种图像数据存储方法、设备及存储介质、芯片、模组设备。
背景技术
图像插帧技术是指通过在相邻两帧图像之间插入一帧图像，达到提高视频流畅度，提升用户观看感受的一种技术。通常在使用图像插帧技术时，需要存储相邻两帧的全部原始图像数据，由此导致图像数据的存储需要很大的空间，造成空间资源的紧张。因此，如何在图像插帧处理时，减小图像数据存储空间是当前研究的热点。
发明内容
本申请实施例提供了一种图像数据存储方法、设备及存储介质、芯片、模组设备，可减小数据存储量，在保证插帧效果的同时，减小存储空间。
为了解决上述技术问题，第一方面，本申请实施例提供了一种图像数据存储方法，包括：获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
对所述待存储像素数据集合中的像素数据进行存储。
第二方面，本申请实施例还提供了一种图像数据存储设备，所述设备包括：
获取模块，用于获取参考图像对应的第一类型的第一像素数据集合，以及
获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定模块，用于确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
处理模块，用于根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
所述处理模块，还用于对所述待存储像素数据集合中的像素数据进行存储。
第三方面，本申请实施例还提供了一种图像数据存储设备，包括处理器和存储器，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行第一方面所述的方法
第四方面，本申请实施例还提供了一种计算机可读存储介质，包括：所述计算机可读存储介质存储有一条或多条指令，所述一条或多条指令适于由处理器加载并执行如第一方面所述的方法。
第五方面，本申请提供了一种芯片，所述芯片，用于接收参考图像对应的第一类型的第一像素数据集合，以及接收当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
所述芯片，还用于确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
所述芯片，还用于根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
所述芯片，还用于输出所述待存储像素数据集合中的像素数据，以便于存储所述待存储像素数据集合中的像素数据。
第六方面，本申请提供了一种芯片模组，所述模组设备包括通信模组、电源模组、存储模组以及芯片模组，其中：
所述电源模组用于为所述模组设备提供电能；
所述存储模组用于存储数据和指令；
所述通信模组用于进行模组设备内部通信，或者用于所述模组设备与外部设备进行通信；
所述芯片模组用于：
通过所述通信模组获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
在所述存储模组中存储所述待存储像素数据集合中的像素数据。
实施本申请实施例，具有如下有益效果：获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合；然后，确定待插帧图像的参考相位信息，根据相位信息从第一像素数据集合和第二像素数据集合中确定目标像素数据集合，并根据参考相位信息从目标像素数据集合中确定带存储像素数据集合；最后，对待存储像素数据集合中的像素数据进行存储。可见，本申请实施例能够减小数据存储量，在保证插帧效果的同时，减小存储空间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请一个示例性实施例提供的第一种图像数据存储方法的流程示意图；
图2a是本申请一个示例性实施例提供的一种第一像素数据集合的示意图；
图2b是本申请一个示例性实施例提供的一种运动估计的示意图；
图2c是本申请一个示例性实施例提供的一种在参考图像和当前图像中体现参考相位信息的示意图；
图3是本申请一个示例性实施例提供的第二种图像数据存储方法的流程示意图；
图4a是本申请一个示例性实施例提供的另一种在参考图像和当前图像中体现参考相位信息的示意图；
图4b是本申请一个示例性实施例提供的一种在参考图像中确定待存储图像区域的示意图；
图5是本申请一个示例性实施例提供的第三种图像数据存储方法的流程示意图；
图6a是本申请一个示例性实施例提供的一种第三像素数据集合示意图；
图6b是本申请一个示例性实施例提供的一种确定第一待存储图像区域和第二待存储图像区域的示意图；
图7是本申请一个示例性实施例提供的一种图像数据存储设备的结构示意图；
图8是本申请一个示例性实施例提供的另一种图像数据存储设备的结构示意图；
图9是本申请一个示例性实施例提供的一种模组设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本发明的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
本申请实施例涉及重叠块运动补偿技术，该技术是一种减小块边界不连续性的高级块运动补偿技术，其广泛用于图像插帧计算，通过该技术可提高运动估计和运动补偿的精度以及减小分块所带来的失真(块效应等)。具体而言，重叠块运动补偿算法认为某个块的运动矢量也影响相邻块，也就是说，一个块的预测不仅仅取决于本块的运动矢量，而且也受相邻块的一系列运动矢量所影响，因此，重叠块运动补偿算法以尽量平滑块边界的约束减少块边界像素的预测误差。
本申请实施例将重叠块运动补偿技术应用到图像插帧计算中，为减小插帧处理过程中的存储量，在保证插帧效果的同时，减小存储空间，示例性提供了一种图像数据存储方法，如图1，图1是本申请一个示例性实施例提供的第一种图像数据存储方法，该方法可由图像数据存储设备执行，该设备可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)、便捷式媒体播放器(Portable MediaPlayer，PMP)、导航装置、可穿戴设备、智能手环、计步器等具有存储功能的移动设备，以及诸如数字TV、台式计算机等具有存储功能的固定设备，所述方法包括：
S101、获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，参考图像和当前图像用于确定位于参考图像和当前图像之间的待插帧图像。
本申请实施例中，参考图像可以是当前图像的前一帧图像和/或后一帧图像，待插帧图像是位于当前图像和参考图像之间的一帧图像。参考图像对应的第一类型的第一像素数据集合可以是经过处理的与参考图像相关的高频数据信息集合，具体的，所述获取参考图像对应的第一类型的第一像素数据集合，可以包括：获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合。本申请实施例中，多组像素行指的是将参考图像中的多行像素点进行分组，每组里面包括M行像素点，由此得到参考图像中多组像素行。在具体确定参考图像对应的第一类型的第一像素数据集合的过程中，确定出参考图像中每个像素点的像素值，再确定出每组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值，进而根据该差值确定出参考图像对应的第一类型的第一像素数据集合。举例来说，如图2a所示，参考图像为6*6像素大小的图像，将参考图像中的6行像素点拆分成3组像素行，每一组像素行包括相邻的2行像素点，针对每一组像素行，确定一组像素行包括的2行像素点中处于同一列的2个像素点的像素值差值，由此得到6*3像素大小的第一类型的第一像素数据集合。可以理解的是，本申请实施例中的参考图像中的多行像素点可以是整个参考图像中的所有行的像素点，也可以是参考图像中的部分行数的像素点；另外，当一组像素行中包括两行像素行以上时，求差值时，可以是同列中多个像素值相互求差值，例如一组中包括三行像素行，分别是第一行、第二行和第三行，在计算像素值差值时，同一列中通过第一行像素点的像素值与第二行像素点的像素值作差，第二像素点的像素值与第三行像素点的像素值作差，第一行像素点的像素值与第三行像素点的像素值作差。
在一种可选的实施方式中，所述获取当前图像对应的第一类型的第二像素数据集合，可以包括：获取当前图像，并将所述当前图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述当前图像对应的第一类型的第二像素数据集合。本申请实施例中，当前图像对应的第一类型的第二像素数据集合可以是经过处理的与当前图像相关的高频数据信息集合。具体的，在确定当前图像对应的第一类型的第二像素数据集合的过程中，确定出当前图像中每个像素点的像素值，再确定出每组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值，进而根据该差值确定出当前图像对应的第一类型的第二像素数据集合。
S102、确定待插帧图像的参考相位信息，参考相位信息用于指示待插帧图像与参考图像和当前图像之间的间隔。
本申请实施例中，参考相位信息可以是用于指示待插帧图像与参考图像和当前图像之间的时间间隔。例如参考图像为0.1s时的一帧图像，当前图像为0.5s时的一帧图像，要插入0.2s时的待插帧图像，参考相位信息则指的是待插帧图像与参考图像之间的时间间隔为0.1s，待插帧图像与当前图像之间的时间间隔为0.3s。
S103、根据参考相位信息从第一像素数据集合和第二像素数据集合中确定目标像素数据集合，并根据参考相位信息从目标像素数据集合中确定待存储像素数据集合。
本申请实施例中，在确定参考相位信息之后，要确定目标像素数据集合，即根据参考相位信息确定第一像素数据集合为目标像素数据集合，或者确定第二像素数据集合为目标像素数据集合，或者确定第一像素数据集合和第二像素数据集合为目标像素数据集合。在一种可选的实施方式中，所述根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，可以包括：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合。在一种可选的实施方式中，所述根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，还可以包括：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔等于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合和所述第二像素数据集合确定为目标像素数据集合。本申请实施例中，根据参考相位信息指示的待插帧图像与参考图像之间的间隔大于、小于或者等于待插帧图像与当前图像之间的间隔，确定最终的目标像素数据集合。
同时，根据参考相位信息从目标像素数据中确定待存储像素数据集合，如图2b所示，参考图像中的A块与当前图像中的C块相匹配(A块与C块之间具有相对位移)，参考相位信息指示待插帧图像与参考图像之间的间隔小于待插帧图像与当前图像之间的间隔，因此将所述第二像素数据集合确定为目标像素数据集合，如图2b、图2c所示，根据A块、C块和参考相位信息，确定出当前图像对应的第二像素数据集合中C块所在的图像区域的多行像素数据中最上面一行像素数据边界位置到位置D之间的像素数据为待存储数据集合，其中，位置D为待插帧图像中B块所在的图像区域的多行像素数据中最下面的一行像素数据的边界位置对应于当前图像中相同位置的位置D。
S104、对待存储像素数据集合中的像素数据进行存储。
在本申请实施例中，获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合；然后，确定待插帧图像的参考相位信息，根据相位信息从第一像素数据集合和第二像素数据集合中确定目标像素数据集合，并根据参考相位信息从目标像素数据集合中确定带存储像素数据集合；最后，对待存储像素数据集合中的像素数据进行存储。可见，本申请实施例能够减小数据存储量，在保证插帧效果的同时，减小存储空间。
请参见图3，图3是本申请一个示例性实施例提供的第二种图像数据存储方法，该方法可由图像数据存储设备执行，该设备可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)、便捷式媒体播放器(PortableMedia Player，PMP)、导航装置、可穿戴设备、智能手环、计步器等具有存储功能的移动设备，以及诸如数字TV、台式计算机等具有存储功能的固定设备，所述方法包括：
S301、获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，参考图像和当前图像用于确定位于参考图像和当前图像之间的待插帧图像。
S302、确定待插帧图像的参考相位信息，参考相位信息用于指示待插帧图像与参考图像和当前图像之间的间隔。
需要说明的是，本申请实施例中步骤S301-S302具体可参见上述实施例中步骤S101-S103，本申请实施例不再赘述。
S303、根据参考相位信息从第一像素数据集合和第二像素数据集合中确定目标像素数据集合。
本申请实施例中，根据参考相位信息指示的待插帧图像与参考图像之间的间隔大于、小于或者等于待插帧图像与当前图像之间的间隔，具体确定第一像素数据集合、第二像素数据集合或者第一像素数据集合和第二像素数据集合作为目标像素数据集合。
S304、确定参考图像和当前图像之间的运动向量信息。
本申请实施例中，将图像序列的当前图像分成许多互不重叠的宏块，并认为宏块内所有像素的位移量都相同，然后对每个宏块到参考图像某一给定特定搜索范围内根据一定的匹配准则找出与当前块最相似的块，即匹配块，匹配块与当前块的相对位移即为运动矢量，也就是说，确定参考图像和当前图像之间的运动向量信息就是确定参考图像中的匹配块和当前图像中的当前块的相对位移信息。
在一种可选的实施方式中，所述确定所述参考图像和所述当前图像之间的运动向量信息之后，可以包括：根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据。
S305、根据参考相位信息、参考图像和当前图像之间的运动向量信息从目标像素数据集合对应的图像中确定待存储图像区域。
本申请实施例中，举例来说，如图4a、图4b所示，参考相位信息指示待插帧图像与参考图像之间的间隔大于待插帧图像与当前图像之间的间隔，因此将参考图像对应的第一类型的第一像素数据集合作为目标像素数据集合，根据确定出的参考图像中M块和当前图像中的Q块存在相对位移，基于参考相位信息、M块的位置信息和Q块的位置信息可以确定出第一像素数据集合对应的图像中确定出待存储图像区域为，参考图像对应的第一像素数据集合中M块所在的图像区域的多行像素点中最上面一行像素点的边界位置，到待插帧图像中P块所在的图像区域的多行像素数据中最下面的一行像素点的边界位置对应于参考图像中相同位置的位置N之间的图像区域。
S306、根据目标像素数据集合中待存储图像区域对应的像素数据，确定待存储像素数据集合。
本申请实施例中，根据目标像素数据集和待存储图像区域对应的像素数据，确定待存储像素数据集合，如图4b所示，确定第一像素数据集合中对应的图像中确定待存储图像区域为M块所在的图像区域的多行像素数据中最上面一行像素数据边界位置到位置N之间的区域，进而确定出该区域之间的多行像素数据，将所述多行像素数据确定为待存储像素数据集合中的像素数据。
S307、对待存储像素数据集合中的像素数据进行存储。
在本申请实施例中，获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合；然后，确定待插帧图像的参考相位信息，根据相位信息从第一像素数据集合和第二像素数据集合中确定目标像素数据集合，确定参考图像和当前图像之间的运动向量信息；然后，根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合。可见，本申请实施例中，可根据待插帧位置动态调整待存储像素数据集合中的像素数据，且能准确确定出待存储像素数据集合中的像素数据，能减小存储数量，在保证插帧效果的同时减小存储空间。
请参见图5，图5是本申请一个示例性实施例提供的第三种图像数据存储方法，该方法可由图像数据存储设备执行，该设备可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)、便捷式媒体播放器(PortableMedia Player，PMP)、导航装置、可穿戴设备、智能手环、计步器等具有存储功能的移动设备，以及诸如数字TV、台式计算机等具有存储功能的固定设备，所述方法包括：
S501、获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，参考图像和当前图像用于确定位于参考图像和当前图像之间的待插帧图像。
S502、确定待插帧图像的参考相位信息，参考相位信息用于指示待插帧图像与参考图像和当前图像之间的间隔。
S503、根据参考相位信息从第一像素数据集合和第二像素数据集合中确定目标像素数据集合，并根据参考相位信息从目标像素数据集合中确定待存储像素数据集合。
S504、对待存储像素数据集合中的像素数据进行存储。
需要说明的是，本申请实施例中的S501-S504具体可参见上述实施例中的步骤S101-S104，本申请实施例中不在赘述。本申请中的步骤S501-S504与步骤S505-S507的执行顺序可任意排序，例如，先执行步骤S501-S504，再执行步骤S505-S507，也可先执行步骤S505-S507，再执行步骤S501-S504，当然也可同时执行。可以理解的是，步骤S501-S507中各个步骤并不代表固定的执行步骤，各个步骤的执行可以是任意顺序。
S505、获取参考图像对应的第二类型的第三像素数据集合，以及获取当前图像对应的第二类型的第四像素数据集合。
本申请实施例中，参考图像对应的第二类型的第三像素数据集合可以是经过处理的与参考图像相关的低频数据信息集合，具体的，所述获取参考图像对应的第二类型的第三像素数据集合，可以包括：获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点像素值的平均值；根据所述平均值确定所述参考图像对应的第二类型的第三像素数据集合。本申请实施例中，在具体确定参考图像对应的第二类型的第三像素数据集合的过程中，确定出参考图像中每个像素点的像素值，再确定出每组像素行包括的M行像素点中处于同一列的M个像素点像素值的平均值，进而根据该平均值确定出参考图像对应的第二类型的第三像素数据集合。举例来说，如图6a所示，参考图像为9*9像素大小的图像，将参考图像中的9行像素点拆分成3组像素行，每一组像素行包括相邻的3行像素点，针对每一组像素行，确定一组像素行包括的3行像素点中处于同一列的3个像素点像素值的平均值，由此得到9*3像素大小的第二类型的第三像素数据集合。
在一种可选的实施方式中，所述获取当前图像对应的第二类型的第四像素数据集合，可以包括：获取当前图像，并将所述当前图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点像素值的平均值；根据所述平均值确定所述当前图像对应的第二类型的第四像素数据集合。本申请实施例中，在具体确定当前图像对应的第二类型的第四像素数据集合的过程中，确定出当前图像中每个像素点的像素值，再确定出每组像素行包括的M行像素点中处于同一列的M个像素点像素值的平均值，进而根据该平均值确定出当前图像对应的第二类型的第四像素数据集合。
S506、确定参考图像中的第一待存储图像区域，以及确定当前图像中的第二待存储图像区域。
本申请实施例中，根据参考图像和当前图像之间的运动向量信息，也就是根据参考图像中的匹配块和当前图像中的当前块的相对位移信息，再根据待插帧图像的参考相位信息确定出参考图像中的第一待存储图像区域，确定出当前图像区域中的第二待存储图像区域。如图6b所示，ef之间的图像区域即为参考图像中的第一待存储图像区域，dg之间的图像区域即为当前图像中第二待存储图像区域。
在一种可选的实施方式中，所述确定参考图像中的第一待存储图像区域，以及确定当前图像中的第二待存储图像区域，可以包括：确定待存储图像区域的区域边界信息；根据所述区域边界信息确定所述参考图像中的第一待存储图像区域，以及根据所述区域边界信息确定所述当前图像中的第二待存储图像区域；其中，所述区域边界信息所指示的第一方向上的边界位置为预设的指定位置，所述区域边界信息所指示的第二方向上的边界位置是根据所述参考图像和所述当前图像之间的运动向量信息所确定的。
本申请实施例中，如图6b所示，区域边界信息所指示的第一方向上的边界位置为预设的指定位置，即可为匹配块a相对于当前块c的运动方向上，参考图像中距离匹配块a所在图像区域最远的一个指定位置m(位置m为参考图像中的第一行像素点所在的区域边界位置)或者一个指定位置n(位置n为参考图像中匹配块a所在的多行像素点区域到位置m之间的任意一行像素点区域的边界位置)，也可根据当前块c所在图像区域具体确定位置g(位置g为当前图像中的当前块c所在的多行像素点区域中的最上面一行像素点区域边界位置)。区域边界信息所指示的第二方向上的边界位置，可为参考图像中匹配块a所在的多行像素点区域中的最下面的一行像素点区域的边界位置f。在具体确定区域边界所指示的第二方向上的边界位置时，根据参考图像和当前图像之间的运动向量信息，也就是根据参考图像中的匹配块a和当前图像中的当前块c的相对位移信息，确定出最终的边界位置(匹配块a所在的多行像素点区域中的最下面的一行像素点区域的边界位置f)。可以理解的是，区域边界信息所指示的第二方向上的边界位置也可以根据参考图像和当前图像之间的运动向量信息和相位信息进行更为准确的确定。
S507、对第三像素数据集合中第一待存储图像区域所对应的像素数据，以及第四像素数据集合中第二待存储图像区域所对应的像素数据进行存储。
本申请实施例中，如图6b所示，已确定出第一待存储图像区域ef和第二待存储图像区域dg，进而在第三像素数据集合中查找与第一待存储图像区域对应的像素数据，以及在第四像素数据集合中查找与第二待存储区域对应的像素数据，将查找到的像素数据进行存储。
在本申请实施例中，获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，根据待插帧图像的参考相位信息确定出目标像素集合，并确定出待存储像素数据集合；获取参考图像对应的第二类型的第三像素数据集合，以及获取当前图像对应的第二类型的第四像素数据集合，根据参考图像中的第一待存储图像区域，以及当前图像中的第二待存储图像区域，确定出第一待存储图像区域和第二待存储图像区域所对应的像素数据；最后将待存储像素数据集合、第三像素数据集合中第一待存储图像区域所对应的像素数据、第四像素数据集合中第二待存储图像区域所对应的像素数据进行存储，从而在保证插帧效果的同时减小数据存储量，进一步可通过待插帧图像的参考相位信息对图像数据存储空间动态分配，使得现有的存储空间利用程度最大化。
图7是本申请一个示例性实施例提供的一种图像数据存储设备的结构示意图，该设备可搭载在上述方法实施例中的图像数据存储设备上，该图像数据存储设备具体可以是服务器。当然，在一些实施例中，也可搭载在终端设备上。图7所示的图像数据存储设备可以用于执行上述图1、图3和图5所描述的方法实施例中的部分或全部功能。其中，各个部分的详细描述如下：
获取模块701，用于获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定模块702，用于确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
处理模块703，用于根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
所述处理模块703，还用于对所述待存储像素数据集合中的像素数据进行存储。
在一种可选的实施方式中，处理模块703根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，具体可包括：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合。
在一种可选的实施方式中，处理模块703根据所述参考相位信息从所述参考像素数据集合中确定待存储像素数据集合，具体可包括：确定所述参考图像和所述当前图像之间的运动向量信息；根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据。
在一种可选的实施方式中，处理模块703根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述参考像素数据集合中确定待存储像素数据集合，具体可包括：根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合对应的图像中确定待存储图像区域；根据所述目标像素数据集合中所述待存储图像区域对应的像素数据，确定待存储像素数据集合。
在一种可选的实施方式中，获取模块701，还用于获取参考图像对应的第二类型的第三像素数据集合，以及获取当前图像对应的第二类型的第四像素数据集合；
确定模块702，还用于确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域；
处理模块703，还用于对所述第三像素数据集合中所述第一待存储图像区域所对应的像素数据，以及所述第四像素数据集合中所述第二待存储图像区域所对应的像素数据进行存储。
在一种可选的实施方式中，确定模块702确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域，具体包括：确定待存储图像区域的区域边界信息；根据所述区域边界信息确定所述参考图像中的第一待存储图像区域，以及根据所述区域边界信息确定所述当前图像中的第二待存储图像区域；其中，所述区域边界信息所指示的第一方向上的边界位置为预设的指定位置，所述区域边界信息所指示的第二方向上的边界位置是根据所述参考图像和所述当前图像之间的运动向量信息所确定的。
在一种可选的实施方式中，获取模块701获取参考图像对应的第一类型的第一像素数据集合，具体包括：获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合。
图7所示的图像数据存储设备中的各个模块可以分别或全部合并为一个或若干个另外的模块来构成，或者其中的某个(些)模块还可以再拆分为功能上更小的多个单元来构成，这可以实现同样的操作，而不影响本申请的实施例的技术效果的实现。上述模块是基于逻辑功能划分的，在实际应用中，一个模块的功能也可以由多个模块来实现，或者多个模块的功能由一个模块实现。在本申请的其它实施例中，存储设备也可以包括其它模块，在实际应用中，这些功能也可以由其它模块协助实现，并且可以由多个模块协作实现。
基于同一发明构思，本申请实施例中提供的图像数据存储设备解决问题的原理与有益效果与本申请方法实施例中图像数据存储方法解决问题的原理和有益效果相似，可以参见方法的实施的原理和有益效果，为简洁描述，在这里不再赘述。
参见图8，图8是本申请一个示例性实施例提供的另一种图像数据存储设备的结构示意图。该设备包括处理器801和存储器802，处理器801和存储器802通过一条或多条通信总线连接，处理器801被配置为支持终端设备执行图1、图3和图5方法中相应的功能。该处理器801可以是中央处理器(central processing unit，CPU)，网络处理器(networkprocessor，NP)，硬件芯片或者其任意组合。
存储器802用于存储程序代码等。存储器802可以包括易失性存储器(volatilememory)，例如随机存取存储器(random-access memory，RAM)；存储器802也可以包括非易失性存储器(non-volatile memory)，例如只读存储器(read-only memory，ROM)，快闪存储器(flash memory)，硬盘(hard disk drive，HDD)或固态硬盘(solid-state drive，SSD)；存储器802还可以包括上述种类的存储器的组合。
在本申请实施例中，该处理器801可以调用存储器802中存储的程序代码以执行以下操作：
获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
对所述待存储像素数据集合中的像素数据进行存储。
在一种可选的实施方式中，处理器801根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，具体包括：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合。
在一种可选的实施方式中，处理器801根据所述参考相位信息从所述参考像素数据集合中确定待存储像素数据集合，具体可包括：确定所述参考图像和所述当前图像之间的运动向量信息；根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据。
在一种可选的实施方式中，处理器801根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述参考像素数据集合中确定待存储像素数据集合，具体可包括：根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合对应的图像中确定待存储图像区域；根据所述目标像素数据集合中所述待存储图像区域对应的像素数据，确定待存储像素数据集合。
在一种可选的实施方式中，处理器801获取参考图像对应的第二类型的第三像素数据集合，以及获取当前图像对应的第二类型的第四像素数据集合；
处理器801确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域；
处理器801对所述第三像素数据集合中所述第一待存储图像区域所对应的像素数据，以及所述第四像素数据集合中所述第二待存储图像区域所对应的像素数据进行存储。
在一种可选的实施方式中，处理器801确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域，具体包括：确定待存储图像区域的区域边界信息；根据所述区域边界信息确定所述参考图像中的第一待存储图像区域，以及根据所述区域边界信息确定所述当前图像中的第二待存储图像区域；其中，所述区域边界信息所指示的第一方向上的边界位置为预设的指定位置，所述区域边界信息所指示的第二方向上的边界位置是根据所述参考图像和所述当前图像之间的运动向量信息所确定的。
在一种可选的实施方式中，处理器801获取参考图像对应的第一类型的第一像素数据集合，具体包括：获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合。
需要说明的是，所述图像数据存储设备可以执行前述方法实施例中终端设备的相关步骤，具体可参见上述各个步骤所提供的实现方式，在此不再赘述。
对于应用于或集成于计算机设备的各个装置、产品，其包含的各个模块可以都采用电路等硬件的方式实现，不同的模块可以位于终端内同一组件(例如，芯片、电路模块等)或者不同组件中，或者，至少部分模块可以采用软件程序的方式实现，该软件程序运行于终端内部集成的处理器，剩余的(如果有)部分模块可以采用电路等硬件方式实现。
本申请实施例还提供一种计算机可读存储介质，可以用于存储实现图1、图3和图5所示实施例中图像数据存储方法的计算机程序指令，上述计算机可读存储介质包括但不限于快闪存储器、硬盘、固态硬盘。
在一种可选的实施方式中，本申请实施例提供一种芯片，所述芯片用于：
接收参考图像对应的第一类型的第一像素数据集合，以及接收当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
输出所述待存储像素数据集合中的像素数据，以便于存储所述待存储像素数据集合中的像素数据。
在一种可选的实施方式中，所述芯片根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合时，具体用于：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合。
在一种可选的实施方式中，所述芯片根据所述参考相位信息从所述参考像素数据集合中确定待存储像素数据集合时，具体用于：确定所述参考图像和所述当前图像之间的运动向量信息；根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据。
在一种可选的实施方式中，所述芯片根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述参考像素数据集合中确定待存储像素数据集合时，具体用于：根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合对应的图像中确定待存储图像区域；根据所述目标像素数据集合中所述待存储图像区域对应的像素数据，确定待存储像素数据集合。
在一种可选的实施方式中，所述芯片，还用于：
接收参考图像对应的第二类型的第三像素数据集合，以及接收当前图像对应的第二类型的第四像素数据集合；确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域；对所述第三像素数据集合中所述第一待存储图像区域所对应的像素数据，以及所述第四像素数据集合中所述第二待存储图像区域所对应的像素数据进行存储。
在一种可选的实施方式中，所述芯片确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域时，具体用于：确定待存储图像区域的区域边界信息；根据所述区域边界信息确定所述参考图像中的第一待存储图像区域，以及根据所述区域边界信息确定所述当前图像中的第二待存储图像区域；其中，所述区域边界信息所指示的第一方向上的边界位置为预设的指定位置，所述区域边界信息所指示的第二方向上的边界位置是根据所述参考图像和所述当前图像之间的运动向量信息所确定的。
在一种可选的实施方式中，所述芯片接收参考图像对应的第一类型的第一像素数据集合时，具体用于：接收参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合。
需要说明的是，所述芯片可以执行前述方法实施例中终端设备的相关步骤，具体可参见上述各个步骤所提供的实现方式，在此不再赘述。
在一个实施例中，上述芯片包括至少一个处理器、至少一个第一存储器和至少一个第二存储器；其中，前述至少一个第一存储器和前述至少一个处理器通过线路互联，前述第一存储器中存储有指令；前述至少一个第二存储器和前述至少一个处理器通过线路互联，前述第二存储器中存储前述方法实施例中需要存储的数据。
对于应用于或集成于芯片的各个装置、产品，其包含的各个模块可以都采用电路等硬件的方式实现，或者，至少部分模块可以采用软件程序的方式实现，该软件程序运行于芯片内部集成的处理器，剩余的(如果有)部分模块可以采用电路等硬件方式实现。
如图9所示，图9是本申请实施例提供的一种模组设备的结构示意图，该模组设备，包括：通信模组901、电源模组902、存储模组903以及芯片模组904。
其中，所述电源模组902用于为所述模组设备提供电能；所述存储模组903用于存储数据和指令；所述通信模组901用于进行模组设备内部通信，或者用于所述模组设备与外部设备进行通信；所述芯片模组904用于：
通过所述通信模组901获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
在所述存储模组中存储所述待存储像素数据集合中的像素数据。
在一种可选的实施方式中，所述芯片模组904根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合时，具体用于：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合。
在一种可选的实施方式中，所述芯片模组904根据所述参考相位信息从所述参考像素数据集合中确定待存储像素数据集合时，具体用于：确定所述参考图像和所述当前图像之间的运动向量信息；根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据。
在一种可选的实施方式中，所述芯片模组904根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述参考像素数据集合中确定待存储像素数据集合时，具体用于：根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合对应的图像中确定待存储图像区域；根据所述目标像素数据集合中所述待存储图像区域对应的像素数据，确定待存储像素数据集合。
在一种可选的实施方式中，所述芯片模组904还用于：通过所述通信模组901获取参考图像对应的第二类型的第三像素数据集合，以及获取当前图像对应的第二类型的第四像素数据集合；确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域；对所述第三像素数据集合中所述第一待存储图像区域所对应的像素数据，以及所述第四像素数据集合中所述第二待存储图像区域所对应的像素数据进行存储。
在一种可选的实施方式中，所述芯片模组904确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域时，具体用于：确定待存储图像区域的区域边界信息；根据所述区域边界信息确定所述参考图像中的第一待存储图像区域，以及根据所述区域边界信息确定所述当前图像中的第二待存储图像区域；其中，所述区域边界信息所指示的第一方向上的边界位置为预设的指定位置，所述区域边界信息所指示的第二方向上的边界位置是根据所述参考图像和所述当前图像之间的运动向量信息所确定的。
在一种可选的实施方式中，所述芯片模组904通过所述通信模组901获取参考图像对应的第一类型的第一像素数据集合时，具体用于：通过所述通信模组901获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合。
需要说明的是，所述模组设备可以执行前述方法实施例中终端设备的相关步骤，具体可参见上述各个步骤所提供的实现方式，在此不再赘述。
对于应用于或集成于芯片模组的各个装置、产品，其包含的各个模块可以都采用电路等硬件的方式实现，不同的模块可以位于芯片模组的同一组件(例如芯片、电路模块等)或者不同组件中，或者，至少部分模块可以采用软件程序的方式实现，该软件程序运行于芯片模组内部集成的处理器，剩余的(如果有)部分模块可以采用电路等硬件方式实现。
本领域普通技术人员可以意识到，结合本申请中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时，全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中，或者通过计算机可读存储介质进行传输。计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘(Solid State Disk，SSD))等。
以上，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (9)

1.一种图像数据存储方法，其特征在于，包括：
获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，包括：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔等于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合和所述第二像素数据集合确定为目标像素数据集合；
根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合，包括：确定所述参考图像和所述当前图像之间的运动向量信息，根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据；
对所述待存储像素数据集合中的像素数据进行存储；
其中，所述获取参考图像对应的第一类型的第一像素数据集合，包括：获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合。
2.根据权利要求1所述的方法，其特征在于，所述根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合，包括：
根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合对应的图像中确定待存储图像区域；
根据所述目标像素数据集合中所述待存储图像区域对应的像素数据，确定待存储像素数据集合。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取参考图像对应的第二类型的第三像素数据集合，以及获取当前图像对应的第二类型的第四像素数据集合；
确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域；
对所述第三像素数据集合中所述第一待存储图像区域所对应的像素数据，以及所述第四像素数据集合中所述第二待存储图像区域所对应的像素数据进行存储。
4.根据权利要求3所述的方法，其特征在于，所述确定所述参考图像中的第一待存储图像区域，以及确定所述当前图像中的第二待存储图像区域，包括：
确定待存储图像区域的区域边界信息；
根据所述区域边界信息确定所述参考图像中的第一待存储图像区域，以及根据所述区域边界信息确定所述当前图像中的第二待存储图像区域；
其中，所述区域边界信息所指示的第一方向上的边界位置为预设的指定位置，所述区域边界信息所指示的第二方向上的边界位置是根据所述参考图像和所述当前图像之间的运动向量信息所确定的。
5.一种图像数据存储设备，其特征在于，所述设备包括：
获取模块，用于获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定模块，用于确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
处理模块，用于根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，并根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合；
所述处理模块，还用于对所述待存储像素数据集合中的像素数据进行存储；
在所述获取参考图像对应的第一类型的第一像素数据集合方面，所述获取模块，具体用于获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合；
在所述根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合方面，所述处理模块，具体用于若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔等于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合和所述第二像素数据集合确定为目标像素数据集合；
在所述根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合方面，所述处理模块，具体用于确定所述参考图像和所述当前图像之间的运动向量信息，根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据。
6.一种图像数据存储设备，其特征在于，包括：处理器和存储器，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如权利要求1至4中任一项所述的方法。
7.一种计算机可读存储介质，其特征在于，包括：所述计算机可读存储介质存储有一条或多条指令，所述一条或多条指令适于由处理器加载并执行如权利要求1至4中任一项所述的方法。
8.一种芯片，其特征在于，所述芯片包括至少一个处理器、至少一个第一存储器和至少一个第二存储器；其中，所述至少一个第一存储器和所述至少一个处理器通过线路互联，所述第一存储器中存储有指令，所述指令适于由所述至少一个处理器加载并执行如权利要求1至4中任一项所述的方法；所述至少一个第二存储器和所述至少一个处理器通过线路互联，所述第二存储器中存储如权利要求1至4中任一项所述方法中需要存储的数据。
9.一种模组设备，其特征在于，所述模组设备包括通信模组、电源模组、存储模组以及芯片模组，其中：
所述电源模组用于为所述模组设备提供电能；
所述存储模组用于存储数据和指令；
所述通信模组用于进行模组设备内部通信，或者用于所述模组设备与外部设备进行通信；
所述芯片模组用于：
通过所述通信模组获取参考图像对应的第一类型的第一像素数据集合，以及获取当前图像对应的第一类型的第二像素数据集合，所述参考图像和所述当前图像用于确定位于所述参考图像和所述当前图像之间的待插帧图像；
确定所述待插帧图像的参考相位信息，所述参考相位信息用于指示所述待插帧图像与所述参考图像和所述当前图像之间的间隔；
根据所述参考相位信息从所述第一像素数据集合和所述第二像素数据集合中确定目标像素数据集合，包括：若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔小于所述待插帧图像与所述当前图像之间的间隔，则将所述第二像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔大于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合确定为目标像素数据集合；若所述参考相位信息指示所述待插帧图像与所述参考图像之间的间隔等于所述待插帧图像与所述当前图像之间的间隔，则将所述第一像素数据集合和所述第二像素数据集合确定为目标像素数据集合；
根据所述参考相位信息从所述目标像素数据集合中确定待存储像素数据集合，包括：确定所述参考图像和所述当前图像之间的运动向量信息，根据所述参考相位信息、所述参考图像和所述当前图像之间的运动向量信息从所述目标像素数据集合中确定待存储像素数据集合；其中，所述待存储像素数据集合包括所述目标像素数据集合中的部分像素数据；
在所述存储模组中存储所述待存储像素数据集合中的像素数据；
其中，所述获取参考图像对应的第一类型的第一像素数据集合，包括：获取参考图像，并将所述参考图像中的多行像素点拆分成多组像素行，每一组像素行包括相邻的M行像素点，所述M为大于1的正整数；针对每一组像素行，确定一组像素行包括的M行像素点中处于同一列的M个像素点的像素值差值；根据所述像素值差值确定所述参考图像对应的第一类型的第一像素数据集合。
CN202011637822.2A 2020-12-31 2020-12-31 图像数据存储方法、设备及存储介质、芯片、模组设备 Active CN112804526B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011637822.2A CN112804526B (zh) 2020-12-31 2020-12-31 图像数据存储方法、设备及存储介质、芯片、模组设备
PCT/CN2021/134214 WO2022142952A1 (zh) 2020-12-31 2021-11-30 图像数据存储方法、设备及存储介质、芯片、模组设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011637822.2A CN112804526B (zh) 2020-12-31 2020-12-31 图像数据存储方法、设备及存储介质、芯片、模组设备

Publications (2)

Publication Number Publication Date
CN112804526A CN112804526A (zh) 2021-05-14
CN112804526B true CN112804526B (zh) 2022-11-11

Family

ID=75808837

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011637822.2A Active CN112804526B (zh) 2020-12-31 2020-12-31 图像数据存储方法、设备及存储介质、芯片、模组设备

Country Status (2)

Country Link
CN (1) CN112804526B (zh)
WO (1) WO2022142952A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112804526B (zh) * 2020-12-31 2022-11-11 紫光展锐(重庆)科技有限公司 图像数据存储方法、设备及存储介质、芯片、模组设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8532171B1 (en) * 2010-12-23 2013-09-10 Juniper Networks, Inc. Multiple stream adaptive bit rate system
CN107454428A (zh) * 2017-09-12 2017-12-08 中广热点云科技有限公司 一种视频数据的编解码预处理方法
CN109547786A (zh) * 2017-09-22 2019-03-29 阿里巴巴集团控股有限公司 视频编码、以及视频解码的方法、装置
CN111641828A (zh) * 2020-05-16 2020-09-08 Oppo广东移动通信有限公司 视频处理方法及装置、存储介质和电子设备
CN111654746A (zh) * 2020-05-15 2020-09-11 北京百度网讯科技有限公司 视频的插帧方法、装置、电子设备和存储介质
CN111741303A (zh) * 2020-06-09 2020-10-02 Oppo广东移动通信有限公司 深度视频处理方法、装置、存储介质与电子设备
CN111770332A (zh) * 2020-06-04 2020-10-13 Oppo广东移动通信有限公司 插帧处理方法、插帧处理装置、存储介质与电子设备

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011094871A1 (en) * 2010-02-05 2011-08-11 Sensio Technologies Inc. Method and apparatus of frame interpolation
JP4991890B2 (ja) * 2010-03-01 2012-08-01 株式会社東芝 補間フレーム生成装置及び方法
US20110255596A1 (en) * 2010-04-15 2011-10-20 Himax Technologies Limited Frame rate up conversion system and method
JP2013165485A (ja) * 2012-01-11 2013-08-22 Panasonic Corp 画像処理装置、撮像装置およびコンピュータブログラム
EP3103257B1 (en) * 2014-02-04 2019-06-19 Intel Corporation Techniques for frame repetition control in frame rate up-conversion
US10412462B2 (en) * 2016-11-08 2019-09-10 Ati Technologies Ulc Video frame rate conversion using streamed metadata
KR102553598B1 (ko) * 2016-11-18 2023-07-10 삼성전자주식회사 영상 처리 장치 및 그 제어 방법
CN111784734A (zh) * 2020-07-17 2020-10-16 Oppo广东移动通信有限公司 图像处理方法及装置、存储介质和电子设备
CN112804526B (zh) * 2020-12-31 2022-11-11 紫光展锐(重庆)科技有限公司 图像数据存储方法、设备及存储介质、芯片、模组设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8532171B1 (en) * 2010-12-23 2013-09-10 Juniper Networks, Inc. Multiple stream adaptive bit rate system
CN107454428A (zh) * 2017-09-12 2017-12-08 中广热点云科技有限公司 一种视频数据的编解码预处理方法
CN109547786A (zh) * 2017-09-22 2019-03-29 阿里巴巴集团控股有限公司 视频编码、以及视频解码的方法、装置
CN111654746A (zh) * 2020-05-15 2020-09-11 北京百度网讯科技有限公司 视频的插帧方法、装置、电子设备和存储介质
CN111641828A (zh) * 2020-05-16 2020-09-08 Oppo广东移动通信有限公司 视频处理方法及装置、存储介质和电子设备
CN111770332A (zh) * 2020-06-04 2020-10-13 Oppo广东移动通信有限公司 插帧处理方法、插帧处理装置、存储介质与电子设备
CN111741303A (zh) * 2020-06-09 2020-10-02 Oppo广东移动通信有限公司 深度视频处理方法、装置、存储介质与电子设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于深度学习的视频插帧算法;张倩;《智能计算机与应用》;20190701;全文 *

Also Published As

Publication number Publication date
CN112804526A (zh) 2021-05-14
WO2022142952A1 (zh) 2022-07-07

Similar Documents

Publication Publication Date Title
CN110189246B (zh) 图像风格化生成方法、装置及电子设备
CN111210389B (zh) 一种图像缩放处理方法及装置
CN110413812A (zh) 神经网络模型的训练方法、装置、电子设备及存储介质
US20220383637A1 (en) Live streaming sampling method and apparatus, and electronic device
CN112804526B (zh) 图像数据存储方法、设备及存储介质、芯片、模组设备
CN103390270A (zh) 用于帧对齐的方法、装置和计算机程序产品
CN113721879B (zh) 图像处理方法、装置、设备和计算机可读存储介质
US20170171524A1 (en) Techniques for improving stereo block matching with the pyramid method
CN110209462B (zh) 窗口排列方法、装置及设备
CN101483771B (zh) 提升帧速率的方法与装置
CN111462015A (zh) 地图轨迹的处理方法、装置、电子设备及存储介质
CN104978731A (zh) 一种信息处理方法及电子设备
CN115082356B (zh) 基于shader的视频流图像校正方法、装置和设备
US8559518B2 (en) System and method for motion estimation of digital video using multiple recursion rules
CN115550645A (zh) 帧内预测模式的确定方法、装置、存储介质及电子设备
CN115578258A (zh) 图像处理方法、装置、设备及存储介质
CN113204557B (zh) 电子表格导入方法、装置、设备及介质
CN112866572B (zh) 画面黑边矫正的方法、装置、电子装置和存储介质
US10810012B1 (en) Computer vision implementing calculations of window sums in overlapping windows
CN112770015B (zh) 一种数据处理方法及相关装置
CN112565652B (zh) 一种图像数据存储方法、存储设备及计算机可读存储介质
CN115659443B (zh) 几何形状流数据处理方法和装置、计算设备和存储介质
CN111654627B (zh) 一种数字变焦方法、装置、设备及存储介质
CN114066721B (zh) 显示方法、装置和电子设备
CN112915534B (zh) 游戏的图像计算方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant