CN115134339A - 媒体文件处理方法、装置及电子设备 - Google Patents
媒体文件处理方法、装置及电子设备 Download PDFInfo
- Publication number
- CN115134339A CN115134339A CN202210753495.XA CN202210753495A CN115134339A CN 115134339 A CN115134339 A CN 115134339A CN 202210753495 A CN202210753495 A CN 202210753495A CN 115134339 A CN115134339 A CN 115134339A
- Authority
- CN
- China
- Prior art keywords
- media file
- processing operation
- target
- resolution
- original media
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000012545 processing Methods 0.000 claims abstract description 161
- 238000000034 method Methods 0.000 claims abstract description 50
- 238000004088 simulation Methods 0.000 claims abstract description 48
- 238000004590 computer program Methods 0.000 claims description 22
- 230000000694 effects Effects 0.000 abstract description 5
- 230000008569 process Effects 0.000 description 24
- 238000013507 mapping Methods 0.000 description 9
- 230000009467 reduction Effects 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000005094 computer simulation Methods 0.000 description 3
- 230000004927 fusion Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/71—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请实施例涉及计算机技术领域，公开了一种媒体文件处理方法、装置及电子设备。所述方法应用于数字孪生设备，所述方法包括：确定原始媒体文件的分辨率；在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；对所述目标媒体文件进行仿真拟合处理。本申请实施例解决了相关技术中，数字孪生设备对于清晰度较高的媒体文件的仿真效果较差的问题。
Description
技术领域
本申请涉及计算机技术领域，具体而言，本申请涉及一种媒体文件处理方法、装置及电子设备。
背景技术
随着互联网行业的迅速发展，数字孪生技术在理论层面和应用层面均取得了快速发展，逐渐延伸到智慧城市、智慧园区、智慧交通等应用领域。具体地，数字孪生是一种仿真过程，其仿真过程中充分利用物理模型、传感器更新、运行历史等数据，集成多学科、多物理量、多尺度、多概率的数据，在虚拟空间中完成映射，从而反映相对应的实体装备的全生命周期过程。目前，媒体文件通常清晰度较高，然而数字孪生设备所能支持的纹理铺装精度有限，高清晰度纹理对于带宽将产生较大的负重和消耗，导致流畅度较差；因此，相关技术中，数字孪生设备对于清晰度较高的媒体文件的仿真效果较差。
发明内容
本申请实施例提供了一种媒体文件处理方法，以解决相关技术中，数字孪生设备对于清晰度较高的媒体文件的仿真效果较差的问题。
相应的，本申请实施例还提供了一种媒体文件处理装置、一种电子设备以及一种存储介质，用以保证上述方法的实现及应用。
为了解决上述问题，本申请实施例公开了一种媒体文件处理方法，所述方法包括：
确定原始媒体文件的分辨率；
在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；
对所述目标媒体文件进行仿真拟合处理。
可选地，所述对所述原始媒体文件进行目标处理操作，包括：
在所述目标处理操作包括所述切割处理操作的情况下，根据预设的切割粒度单位，将所述原始媒体文件切割处理得到子文件。
可选地，所述将所述原始媒体文件切割处理得到子文件之后，所述方法包括：
通过至少两个纹理网格体同时对所述子文件进行预解码处理。
可选地，所述确定原始媒体文件的分辨率之后，所述方法还包括：
在所述分辨率小于所述预设阈值的情况下，锁定传输所述原始媒体文件的I/O端口。
可选地，所述对所述原始媒体文件进行目标处理操作，包括：
在所述目标处理操作包括所述降帧处理操作的情况下，根据预设的目标帧率，对所述原始媒体文件进行降帧处理。
本申请实施例还公开了一种媒体文件处理系统，包括服务器以及数字孪生设备，所述服务器将原始媒体文件发送至所述数字孪生设备；
所述数字孪生设备用于：确定所述原始媒体文件的分辨率；
在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；
对所述目标媒体文件进行仿真拟合处理。
可选地，所述服务器包括文件管理模块、节点管理模块以及纹理管理模块；
其中，所述文件管理模块包括FTP Server模块或Http Server模块；
所述节点管理模块包括WebSocket模块；
所述纹理管理模块包括Mqtt模块。
本申请实施例还公开了一种媒体文件处理装置，应用于数字孪生设备，所述装置包括：
分辨率确定模块，用于确定原始媒体文件的分辨率；
处理模块，用于在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；
仿真模块，用于对所述目标媒体文件进行仿真拟合处理。
本申请实施例还公开了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行程序时实现本申请实施例中一个或多个所述的方法。
本申请实施例还公开了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现如本申请实施例中一个或多个所述的方法。
本申请实施例还公开了一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如本申请实施例中一个或多个所述的方法。
本申请实施例提供的技术方案带来的有益效果是：
本申请实施例中，确定原始媒体文件的分辨率，在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作，通过目标处理操作降低带宽压力，提升数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度，提升与物理实体之间的同步的能力.
本申请实施例附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本申请实施例提供的媒体文件处理方法的流程图；
图2为本申请实施例提供的第一示例的流程图；
图3为本申请实施例提供的第二示例的流程图；
图4为本申请实施例提供的媒体文件处理装置的结构示意图；
图5为本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面结合本申请中的附图描述本申请的实施例。应理解，下面结合附图所阐述的实施方式，是用于解释本申请实施例的技术方案的示例性描述，对本申请实施例的技术方案不构成限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请实施例所使用的术语“包括”以及“包含”是指相应特征可以实现为所呈现的特征、信息、数据、步骤、操作、元件和/或组件，但不排除实现为本技术领域所支持其他特征、信息、数据、步骤、操作、元件、组件和/或它们的组合等。应该理解，当我们称一个元件被“连接”或“耦接”到另一元件时，该一个元件可以直接连接或耦接到另一元件，也可以指该一个元件和另一元件通过中间元件建立连接关系。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的术语“和/或”指示该术语所限定的项目中的至少一个，例如“A和/或B”可以实现为“A”，或者实现为“B”，或者实现为“A和B”。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
参见图1，本申请实施例提供了一种媒体文件处理方法，可选地，所述方法应用于数字孪生设备；其中，数字孪生设备针对物理实体，在数字化世界中构建与其完全一致的仿真模型，通过虚拟引擎(Unreal Engine)控制仿真模型代替物理实体，以数字化的手段进行动态仿真、监测、分析和控制。
如图1中所示，该方法可以包括以下步骤：
步骤101，确定原始媒体文件的分辨率。
其中，分辨率用于度量原始媒体文件的图像帧的数据量。原始媒体文件可以是数字孪生设备即将进行数字孪生处理的媒体文件，例如服务器发送至数字孪生设备的媒体文件。
步骤102，在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作。
其中，预设阈值例如为8K分辨率(或7680×4320像素等参数)；数字孪生设备获取原始媒体文件的分辨率，在分辨率大于或等于预设阈值的情况下，对原始媒体文件进行切割处理操作和/或降帧处理操作，具体地，切割处理操作例如将原始媒体文件切割成数据量更小的子文件，例如，切割成每10秒为一个单位的子文件，以降低带宽压力。降帧处理例如降低原始媒体文件的帧率，以提升视频流畅度；比如将8K的视频折半降帧后，所需要的解码时间约等于4k原帧数视频的解码时间。
步骤103，对所述目标媒体文件进行仿真拟合处理。
可选地，数字孪生显示处理过程包括多源数据融合、数据驱动映射、仿真拟合处理等操作；在获得目标媒体文件之后，基于目标媒体文件中的数据进行仿真拟合处理，以实现物理实体和仿真模型之间的映射。
由于对原始媒体文件进行切割处理操作和/或降帧处理操作，可降低带宽压力，提高数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度；在仿真拟合过程中，在真实场景发生变化和处理的同时刻，所构造的虚拟场景中降低同步变化的延迟性，进而提高播控同步能力。
本申请实施例中，确定原始媒体文件的分辨率，在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作，通过目标处理操作降低带宽压力，提升数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度，提升与物理实体之间的同步的能力。本申请实施例解决了相关技术中，数字孪生设备对于清晰度较高的媒体文件的仿真效果较差的问题。
在一个可选实施例中，所述对所述原始媒体文件进行目标处理操作，包括：
在所述目标处理操作包括所述切割处理操作的情况下，根据预设的切割粒度单位，将所述原始媒体文件切割处理得到子文件。
其中，切割粒度单位可以是视频时长或文件大小，文件大小例如所切割得到的子文件占据内存空间大小；例如，以10秒作为一个切割粒度单位，则每个切割处理后的子文件包括播放时长为10秒的媒体文件。通过切割处理操作，将原始媒体文件碎片化，这样，在数字孪生设备读取原始媒体文件，以及对媒体文件解码过程中，可以以切割后的子文件作为传输粒度以及解码粒度，以降低带宽压力，提高数字孪生设备的动态纹理的加载能力。
在一个可选实施例中，所述将所述原始媒体文件切割处理得到子文件之后，所述方法包括：
通过至少两个纹理网格体同时对所述子文件进行预解码处理。
其中，纹理网格体即所述仿真模型，在仿真拟合过程中用于实现对仿真模型的纹理贴图渲染，得到带有纹理信息的仿真模型；纹理贴图即把纹理信息按照预设的方式映射到仿真模型表面。在所述仿真拟合处理的过程中，由于切割处理后的文件素材成为若干段的短素材集合，采用至少两个纹理网格体对所述子文件进行预解码处理，预留解码提前量，避免出现所述子文件被其他进程占用，导致无法解码而中断进程的情况。可选地，解码过程可以采用H265协议或H264协议，作为第一示例，执行解码过程如图2所示：
步骤201，注册组件；
步骤202，打开原始媒体文件封装格式；
步骤203，获取原始媒体文件的视频流信息；
步骤204，查找视频流索引位置；
步骤205，查找解码器；
其中，查找解码器的过程包括：根据视频流索引，获取解码器上下文；根据解码器上下文中的解码器ID，查找解码器；打开解码器。
步骤206，读取视频压缩数据；其中，视频压缩数据中为目标媒体文件，即原始媒体文件经过切割处理操作和/或降帧处理操作后的文件。
步骤207，判断是否为视频数据：若是，执行步骤208；否则，结束流程。
步骤208，提取一帧视频数据并解码，转换成需要的格式；
步骤209，显示或写入文件，返回步骤206。
在一个可选实施例中，所述确定原始媒体文件的分辨率之后，所述方法还包括：
在所述分辨率小于所述预设阈值的情况下，锁定传输所述原始媒体文件的I/O端口。
I/O端口即输入(Input)端口和输出(Output)端口；在所述分辨率小于所述预设阈值，例如小于8K的情况下，锁定所述I/O端口，避免所述原始媒体文件被其他进程抢占；作为第二示例，参见图3，以原始媒体文件为视频文件，预设阈值为8K为例，图3示出了本申请实施例提供的媒体文件处理方法的一应用过程，主要包括以下步骤：
步骤301，接收仿真拟合指令；
步骤302，获取原始媒体文件的第一视频帧；
步骤303，判断所述第一视频帧的分辨率是否大于或等于8K：若大于或等于8K，执行步骤304；否则，执行步骤305；
步骤304，对所述原始媒体文件进行切割处理操作和/或降帧处理操作，并绑定文件流，执行解码过程；后续执行步骤306。
步骤305，锁定传输所述原始媒体文件的I/O端口，管理原始媒体文件的传输路径，并执行步骤306。
步骤306，仿真拟合处理；
步骤307，展示仿真效果。
在一个可选实施例中，所述对所述原始媒体文件进行目标处理操作，包括：
在所述目标处理操作包括所述降帧处理操作的情况下，根据预设的目标帧率，对所述原始媒体文件进行降帧处理。
其中，对于无法进行切割处理的原始媒体文件，例如视频本身较短，但是整体解码时间需要较长，可根据预设的目标帧率，对所述原始媒体文件进行降帧处理；例如，使用基于ffmpeg(Fast Forward Mpeg)播放器对于原始媒体文件进行降帧处理；在分辨率不变的情况下，比如将8K的视频折半降帧后，所需要的解码时间约等于4k原帧数视频的解码时间。
本申请实施例中，确定原始媒体文件的分辨率，在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作，通过目标处理操作降低带宽压力，提升数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度，提升与物理实体之间的同步的能力。
作为本申请实施例另一个方面，还提供了一种媒体文件处理系统，包括服务器以及数字孪生设备；其中，数字孪生设备针对物理实体，在数字化世界中构建与其完全一致的仿真模型，通过虚拟引擎(Unreal Engine)控制仿真模型代替物理实体，以数字化的手段进行动态仿真、监测、分析和控制。
其中，所述服务器将原始媒体文件发送至所述数字孪生设备；
所述数字孪生设备用于：确定所述原始媒体文件的分辨率；
在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；
对所述目标媒体文件进行仿真拟合处理。
其中，分辨率用于度量原始媒体文件的图像帧的数据量。原始媒体文件可以是数字孪生设备即将进行数字孪生处理的媒体文件，例如服务器发送至数字孪生设备的媒体文件。
预设阈值例如为8K分辨率(或7680×4320像素等参数)；数字孪生设备获取原始媒体文件的分辨率，在分辨率大于或等于预设阈值的情况下，对原始媒体文件进行切割处理操作和/或降帧处理操作，具体地，切割处理操作例如将原始媒体文件切割成数据量更小的子文件，例如，切割成每10秒为一个单位的子文件，以降低带宽压力。降帧处理例如降低原始媒体文件的帧率，以提升视频流畅度；比如将8K的视频折半降帧后，所需要的解码时间约等于4k原帧数视频的解码时间。
可选地，数字孪生显示处理过程包括多源数据融合、数据驱动映射、仿真拟合处理等操作；在获得目标媒体文件之后，基于目标媒体文件中的数据进行仿真拟合处理，以实现物理实体和仿真模型之间的映射。
由于对原始媒体文件进行切割处理操作和/或降帧处理操作，可降低带宽压力，提高数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度；在仿真拟合过程中，在真实场景发生变化和处理的同时刻，所构造的虚拟场景中降低同步变化的延迟性，进而提高播控同步能力。
可选地，本申请实施例中，所述服务器包括文件管理模块、节点管理模块以及纹理管理模块；
其中，所述文件管理模块包括FTP Server模块(File Transport ProtocolServer，文件服务器)或Http Server模块(Hyper Text Transfer Protocol Server，网站服务器)；其中，FTP Server或Http Server模块通常比一般的个人电脑拥有更大的存储容量；
所述节点管理模块包括WebSocket模块，通过Websocket进行节点管理，比起轮询的方式更加高效以及节约资源；
所述纹理管理模块包括Mqtt(Message Queuing Telemetry Transport，消息队列遥测传输)模块；其中，Mqtt协议是一种小型传输协议，其开销很小，实现协议交换最小化，以降流量消耗。
通过FTP Server或Http Server模块、WebSocket模块以及Mqtt模块的配合，提升服务器的并发处理能力。
本申请实施例中，数字孪生设备确定原始媒体文件的分辨率，在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作，通过目标处理操作降低带宽压力，提升数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度，提升与物理实体之间的同步的能力。
基于与本申请实施例所提供的方法相同的原理，本申请实施例还提供了一种媒体文件处理装置，应用于数字孪生设备，其中，数字孪生设备针对物理实体，在数字化世界中构建与其完全一致的仿真模型，通过虚拟引擎(Unreal Engine)控制仿真模型代替物理实体，以数字化的手段进行动态仿真、监测、分析和控制。如图4所示，该装置包括：分辨率确定模块401、处理模块402以及仿真模块403。
分辨率确定模块401，用于确定原始媒体文件的分辨率。
其中，分辨率用于度量原始媒体文件的图像帧的数据量。原始媒体文件可以是数字孪生设备即将进行数字孪生处理的媒体文件，例如服务器发送至数字孪生设备的媒体文件。
处理模块402，用于在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作。
其中，预设阈值例如为8K分辨率(或7680×4320像素等参数)；数字孪生设备获取原始媒体文件的分辨率，在分辨率大于或等于预设阈值的情况下，对原始媒体文件进行切割处理操作和/或降帧处理操作，具体地，切割处理操作例如将原始媒体文件切割成数据量更小的子文件，例如，切割成每10秒为一个单位的子文件，以降低带宽压力。降帧处理例如降低原始媒体文件的帧率，以提升视频流畅度；比如将8K的视频折半降帧后，所需要的解码时间约等于4k原帧数视频的解码时间。
仿真模块403，用于对所述目标媒体文件进行仿真拟合处理。
可选地，数字孪生显示处理过程包括多源数据融合、数据驱动映射、仿真拟合处理等操作；在获得目标媒体文件之后，基于目标媒体文件中的数据进行仿真拟合处理，以实现物理实体和仿真模型之间的映射。
由于对原始媒体文件进行切割处理操作和/或降帧处理操作，可降低带宽压力，提高数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度；在仿真拟合过程中，在真实场景发生变化和处理的同时刻，所构造的虚拟场景中降低同步变化的延迟性，进而提高播控同步能力。
可选地，本申请实施例中，所述处理模块402包括：
第一处理子模块，用于在所述目标处理操作包括所述切割处理操作的情况下，根据预设的切割粒度单位，将所述原始媒体文件切割处理得到子文件。
可选地，本申请实施例中，所述装置包括：
预解码模块，用于在所述处理模块402将所述原始媒体文件切割处理得到子文件之后，通过至少两个纹理网格体同时对所述子文件进行预解码处理。
可选地，本申请实施例中，所述装置还包括：
端口锁定模块，用于在所述分辨率确定模块401确定原始媒体文件的分辨率之后，
在所述分辨率小于所述预设阈值的情况下，锁定传输所述原始媒体文件的I/O端口。
可选地，本申请实施例中，所述处理模块402包括：
第二处理子模块，用于在所述目标处理操作包括所述降帧处理操作的情况下，根据预设的目标帧率，对所述原始媒体文件进行降帧处理。
本申请实施例提供的媒体文件处理装置能够实现图1至图3的方法实施例中实现的各个过程，为避免重复，这里不再赘述。
本申请提供的媒体文件处理装置，分辨率确定模块401确定原始媒体文件的分辨率，处理模块402在所述分辨率大于或等于预设阈值的情况下，仿真模块403对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作，通过目标处理操作降低带宽压力，提升数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度，提升与物理实体之间的同步的能力。
本申请实施例的媒体文件处理装置可执行本申请实施例所提供的媒体文件处理方法，其实现原理相类似，本申请各实施例中的媒体文件处理装置中的各模块、单元所执行的动作是与本申请各实施例中的媒体文件处理方法中的步骤相对应的，对于媒体文件处理装置的各模块的详细功能描述具体可以参见前文中所示的对应的媒体文件处理方法中的描述，此处不再赘述。
基于与本申请的实施例中所示的方法相同的原理，本申请实施例还提供了一种电子设备，该电子设备可以包括但不限于：处理器和存储器；存储器，用于存储计算机程序；处理器，用于通过调用计算机程序执行本申请任一可选实施例所示的媒体文件处理方法。与现有技术相比，本申请提供的媒体文件处理方法，通过确定原始媒体文件的分辨率，在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作，通过目标处理操作降低带宽压力，提升数字孪生设备的动态纹理的加载能力、文件解码能力以及显示流畅度，提升与物理实体之间的同步的能力。
在一个可选实施例中，还提供了一种电子设备，如图5所示，图5所示的电子设备5000包括：处理器5001和存储器5003。其中，处理器5001和存储器5003相连，如通过总线5002相连。可选地，电子设备5000还可以包括收发器5004，收发器5004可以用于该电子设备与其他电子设备之间的数据交互，如数据的发送和/或数据的接收等。需要说明的是，实际应用中收发器5004不限于一个，该电子设备5000的结构并不构成对本申请实施例的限定。
处理器5001可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器5001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线5002可包括一通路，在上述组件之间传送信息。总线5002可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线5002可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器5003可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质、其他磁存储设备、或者能够用于携带或存储计算机程序并能够由计算机读取的任何其他介质，在此不做限定。
存储器5003用于存储执行本申请实施例的计算机程序，并由处理器5001来控制执行。处理器5001用于执行存储器5003中存储的计算机程序，以实现前述方法实施例所示的步骤。
其中，电子设备包括但不限于：移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图5示出的电子设备仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时可实现前述方法实施例的步骤及相应内容。
本申请实施例还提供了一种计算机程序产品，包括计算机程序，计算机程序被处理器执行时可实现前述方法实施例的步骤及相应内容。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”、“1”、“2”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除图示或文字描述以外的顺序实施。
应该理解的是，虽然本申请实施例的流程图中通过箭头指示各个操作步骤，但是这些步骤的实施顺序并不受限于箭头所指示的顺序。除非本文中有明确的说明，否则在本申请实施例的一些实施场景中，各流程图中的实施步骤可以按照需求以其他的顺序执行。此外，各流程图中的部分或全部步骤基于实际的实施场景，可以包括多个子步骤或者多个阶段。这些子步骤或者阶段中的部分或全部可以在同一时刻被执行，这些子步骤或者阶段中的每个子步骤或者阶段也可以分别在不同的时刻被执行。在执行时刻不同的场景下，这些子步骤或者阶段的执行顺序可以根据需求灵活配置，本申请实施例对此不限制。
以上所述仅是本申请部分实施场景的可选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请的方案技术构思的前提下，采用基于本申请技术思想的其他类似实施手段，同样属于本申请实施例的保护范畴。
Claims (11)
1.一种媒体文件处理方法，应用于数字孪生设备，其特征在于，包括：
确定原始媒体文件的分辨率；
在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；
对所述目标媒体文件进行仿真拟合处理。
2.根据权利要求1所述的媒体文件处理方法，其特征在于，所述对所述原始媒体文件进行目标处理操作，包括：
在所述目标处理操作包括所述切割处理操作的情况下，根据预设的切割粒度单位，将所述原始媒体文件切割处理得到子文件。
3.根据权利要求2所述的媒体文件处理方法，其特征在于，所述将所述原始媒体文件切割处理得到子文件之后，所述方法包括：
通过至少两个纹理网格体同时对所述子文件进行预解码处理。
4.根据权利要求1所述的媒体文件处理方法，其特征在于，所述确定原始媒体文件的分辨率之后，所述方法还包括：
在所述分辨率小于所述预设阈值的情况下，锁定传输所述原始媒体文件的I/O端口。
5.根据权利要求1所述的媒体文件处理方法，其特征在于，所述对所述原始媒体文件进行目标处理操作，包括：
在所述目标处理操作包括所述降帧处理操作的情况下，根据预设的目标帧率，对所述原始媒体文件进行降帧处理。
6.一种媒体文件处理系统，包括服务器以及数字孪生设备，其特征在于，
所述服务器将原始媒体文件发送至所述数字孪生设备；
所述数字孪生设备用于：确定所述原始媒体文件的分辨率；
在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；
对所述目标媒体文件进行仿真拟合处理。
7.根据权利要求6所述的媒体文件处理系统，其特征在于，所述服务器包括文件管理模块、节点管理模块以及纹理管理模块；
其中，所述文件管理模块包括FTP Server模块或Http Server模块；
所述节点管理模块包括WebSocket模块；
所述纹理管理模块包括Mqtt模块。
8.一种媒体文件处理装置，应用于数字孪生设备，其特征在于，包括：
分辨率确定模块，用于确定原始媒体文件的分辨率；
处理模块，用于在所述分辨率大于或等于预设阈值的情况下，对所述原始媒体文件进行目标处理操作，得到目标媒体文件；其中，所述目标处理操作包括：切割处理操作和/或降帧处理操作；
仿真模块，用于对所述目标媒体文件进行仿真拟合处理。
9.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法。
11.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210753495.XA CN115134339A (zh) | 2022-06-28 | 2022-06-28 | 媒体文件处理方法、装置及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210753495.XA CN115134339A (zh) | 2022-06-28 | 2022-06-28 | 媒体文件处理方法、装置及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115134339A true CN115134339A (zh) | 2022-09-30 |
Family
ID=83380451
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210753495.XA Pending CN115134339A (zh) | 2022-06-28 | 2022-06-28 | 媒体文件处理方法、装置及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115134339A (zh) |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101198053A (zh) * | 2006-12-08 | 2008-06-11 | 中兴通讯股份有限公司 | 一种编码器中的视频数据自适应分割装置 |
| US20100142842A1 (en) * | 2008-12-04 | 2010-06-10 | Harris Corporation | Image processing device for determining cut lines and related methods |
| WO2011034596A1 (en) * | 2009-09-18 | 2011-03-24 | Rutgers, The State University | High-throughput biomarker segmentation utilizing hierarchical normalized cuts |
| US20120201290A1 (en) * | 2009-11-04 | 2012-08-09 | Jun Liu | Method and system for media file compression |
| CN103269421A (zh) * | 2013-05-23 | 2013-08-28 | 广东威创视讯科技股份有限公司 | 视频图像的降帧方法和系统 |
| US20150379326A1 (en) * | 2013-01-31 | 2015-12-31 | Nec Corporation | Image resolution recognition device, method for recognizing image resolution and image resolution recognition program |
| CN106254811A (zh) * | 2016-09-12 | 2016-12-21 | 上海摩软通讯技术有限公司 | 移动终端及其视频通话的控制方法和系统 |
| EP3389269A1 (en) * | 2015-12-08 | 2018-10-17 | Alibaba Group Holding Limited | Method and apparatus for transcoding |
| CN109769142A (zh) * | 2019-01-28 | 2019-05-17 | 深圳市睿智物联科技有限公司 | 一种城市媒体墙灯光秀的视频切割方法及系统 |
| US20190335237A1 (en) * | 2018-04-25 | 2019-10-31 | Via Technologies, Inc. | System, method and control server for media display on video wall |
| US20220200917A1 (en) * | 2020-12-23 | 2022-06-23 | Cisco Technology, Inc. | Selective fidelity rates for network traffic replication by a digital twin device |
-
2022
- 2022-06-28 CN CN202210753495.XA patent/CN115134339A/zh active Pending
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101198053A (zh) * | 2006-12-08 | 2008-06-11 | 中兴通讯股份有限公司 | 一种编码器中的视频数据自适应分割装置 |
| US20100142842A1 (en) * | 2008-12-04 | 2010-06-10 | Harris Corporation | Image processing device for determining cut lines and related methods |
| WO2011034596A1 (en) * | 2009-09-18 | 2011-03-24 | Rutgers, The State University | High-throughput biomarker segmentation utilizing hierarchical normalized cuts |
| US20120201290A1 (en) * | 2009-11-04 | 2012-08-09 | Jun Liu | Method and system for media file compression |
| US20150379326A1 (en) * | 2013-01-31 | 2015-12-31 | Nec Corporation | Image resolution recognition device, method for recognizing image resolution and image resolution recognition program |
| CN103269421A (zh) * | 2013-05-23 | 2013-08-28 | 广东威创视讯科技股份有限公司 | 视频图像的降帧方法和系统 |
| EP3389269A1 (en) * | 2015-12-08 | 2018-10-17 | Alibaba Group Holding Limited | Method and apparatus for transcoding |
| CN106254811A (zh) * | 2016-09-12 | 2016-12-21 | 上海摩软通讯技术有限公司 | 移动终端及其视频通话的控制方法和系统 |
| US20190335237A1 (en) * | 2018-04-25 | 2019-10-31 | Via Technologies, Inc. | System, method and control server for media display on video wall |
| CN109769142A (zh) * | 2019-01-28 | 2019-05-17 | 深圳市睿智物联科技有限公司 | 一种城市媒体墙灯光秀的视频切割方法及系统 |
| US20220200917A1 (en) * | 2020-12-23 | 2022-06-23 | Cisco Technology, Inc. | Selective fidelity rates for network traffic replication by a digital twin device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110321958B (zh) | 神经网络模型的训练方法、视频相似度确定方法 | |
| CN105338358B (zh) | 对图像进行解码的方法及装置 | |
| CN113286005B (zh) | 抓屏方法、装置、电子设备及存储介质 | |
| US11785195B2 (en) | Method and apparatus for processing three-dimensional video, readable storage medium and electronic device | |
| CN110297944B (zh) | 分布式xml数据处理方法及系统 | |
| CN106688015B (zh) | 处理用于当解码图像时对于块的操作的参数 | |
| CN112905113A (zh) | 数据访问处理方法和装置 | |
| CN111240564B (zh) | 一种素材展示方法、装置、电子设备及存储介质 | |
| US9053526B2 (en) | Method and apparatus for encoding cloud display screen by using application programming interface information | |
| CN114035967A (zh) | 一种基于服务器的资源共享渲染方法和装置 | |
| CN115134339A (zh) | 媒体文件处理方法、装置及电子设备 | |
| CN113747063B (zh) | 一种视频传输的方法、装置、电子设备及可读存储介质 | |
| US20240177374A1 (en) | Video processing method, apparatus and device | |
| CN103891272B (zh) | 用于视频分析和编码的多个流处理 | |
| CN107436848B (zh) | 一种实现用户数据和压缩数据间转换的方法及装置 | |
| CN113099270B (zh) | 文件存储方法及解码方法、装置、存储介质、电子装置 | |
| CN111435332B (zh) | 数据处理方法及设备 | |
| WO2020114375A1 (zh) | 一种用于生成和识别二维码的方法与设备 | |
| CN111447490A (zh) | 流媒体文件处理方法及装置 | |
| CN112423104A (zh) | 直播场景下的多路音频的音频混合方法及系统 | |
| CN113992493A (zh) | 视频处理方法、系统、设备及存储介质 | |
| US9298673B2 (en) | Electronic device and information processing method | |
| US20200380345A1 (en) | Neural network chip, method of using neural network chip to implement de-convolution opeation, electronic device, and computer readable storage medium | |
| CN110311945B (zh) | 一种用于在实时视频流中呈现资源推送信息的方法与设备 | |
| WO2023174040A1 (zh) | 一种图片的处理方法及相关设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |