CN106454347A - 帧分辨率决定方法以及使用该方法的装置 - Google Patents

帧分辨率决定方法以及使用该方法的装置 Download PDF

Info

Publication number
CN106454347A
CN106454347A CN201610813992.9A CN201610813992A CN106454347A CN 106454347 A CN106454347 A CN 106454347A CN 201610813992 A CN201610813992 A CN 201610813992A CN 106454347 A CN106454347 A CN 106454347A
Authority
CN
China
Prior art keywords
mentioned
frame
pth
resolution
frame resolution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610813992.9A
Other languages
English (en)
Other versions
CN106454347B (zh
Inventor
刘伯成
吴永海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Granfei Intelligent Technology Co ltd
Original Assignee
Shanghai Zhaoxin Integrated Circuit Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Zhaoxin Integrated Circuit Co Ltd filed Critical Shanghai Zhaoxin Integrated Circuit Co Ltd
Priority to CN201610813992.9A priority Critical patent/CN106454347B/zh
Priority to US15/284,315 priority patent/US9749578B1/en
Priority to TW105136367A priority patent/TWI622286B/zh
Publication of CN106454347A publication Critical patent/CN106454347A/zh
Application granted granted Critical
Publication of CN106454347B publication Critical patent/CN106454347B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/46—Receiver circuitry for the reception of television signals according to analogue transmission standards for receiving on more than one standard at will
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/02—Diagnosis, testing or measuring for television systems or their details for colour television signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Abstract

本发明提出一种帧分辨率决定方法以及使用该方法的装置，该帧分辨率决定方法包含以下步骤：取得YUV视频文件，包含视频码流；依据视频码流的长度从帧分辨率表选择一部分的帧分辨率作为多个候选帧分辨率；执行m次循环，于每次循环中，使用候选帧分辨率中的一个取得视频码流中至少二帧的数据，并且计算帧间的相关性分数，m代表候选帧分辨率的数量；依据相关性分数，从候选帧分辨率中决定最佳帧分辨率，并输出最佳帧分辨率，使得视频解码器可依据最佳帧分辨率切分视频码流并进行解码。本发明能够提升计算的效率。

Description

帧分辨率决定方法以及使用该方法的装置
技术领域
本发明有关于一种视频处理技术，特别是一种帧分辨率决定方法以及使用该方法的装置。
背景技术
帧分辨率是指每一维度上可以显示的像素数目，通常以宽度x高度的单元像素量表示：例如，“1024x768”表示宽度为1024像素及高度为768像素。然而，有时YUV视频中并不包含帧分辨率信息。当一段YUV视频的帧分辨率未知时，视频解码器就无法解析或播放此YUV视频。因此，需要一种帧分辨率决定方法以及使用该方法的装置，用以解决如上所述的缺陷。
发明内容
本发明的实施例提出一种帧分辨率决定方法，包含以下步骤：取得YUV视频文件，YUV视频文件包含视频码流；依据视频码流的长度从帧分辨率表选择一部分的帧分辨率作为多个候选帧分辨率；执行m次循环，于每次循环中，使用候选帧分辨率中的一个取得视频码流中至少二帧的数据，并且计算取得帧间的相关性分数，m代表候选帧分辨率的数量；依据相关性分数，从候选帧分辨率中决定最佳帧分辨率，并输出最佳帧分辨率，使得视频解码器可依据最佳帧分辨率切分视频码流并进行解码。
本发明的实施例提出一种帧分辨率决定装置，至少包含处理单元。处理单元取得YUV视频文件，YUV视频文件包含视频码流；依据视频码流的长度从帧分辨率表选择一部分的帧分辨率作为多个候选帧分辨率；执行m次循环，于每次循环中，使用候选帧分辨率中的一个取得视频码流中至少二帧的数据，并且计算帧间的相关性分数，m代表上述候选帧分辨率的数量；依据相关性分数，从候选帧分辨率中决定最佳帧分辨率；以及输出最佳帧分辨率，使得视频解码器可依据最佳帧分辨率切分视频码流并进行解码。
本发明能够提升计算的效率。
附图说明
图1是依据本发明实施例的计算机装置的系统架构图。
图2是依据本发明实施例的帧分辨率决定方法流程图。
图3A及图3B是依据本发明实施例的帧分辨率决定方法流程图。
附图标记说明：110：处理单元；120：显示单元；130：输入装置；140：储存装置；150：存储器；160：通信接口；S210～S280：方法步骤。
具体实施方式
以下说明为完成发明的较佳实现方式，其目的在于描述本发明的基本精神，但并不用以限定本发明。实际的发明内容必须参考权利要求范围。
必须了解的是，使用于本说明书中的“包含”、“包括”等词，用以表示存在特定的技术特征、数值、方法步骤、操作处理、元件以及/或组件，但并不排除可加上更多的技术特征、数值、方法步骤、操作处理、元件、组件，或以上的任意组合。
于权利要求中使用如“第一”、“第二”、“第三”等词用来修饰权利要求中的元件，并非用来表示之间具有优先权顺序、先行关系，或者是一个元件先于另一个元件，或者是执行方法步骤时的时间先后顺序，而仅用来区别具有相同名字的元件。
图1是依据本发明实施例的计算机装置的系统架构图。处理单元110可使用多种方式实施，例如以专用硬件电路或通用硬件(例如，单一处理器、具平行处理能力的多处理器、图形处理器或其他具运算能力的处理器)，并且在执行程序码或软件时，提供之后所描述的功能。处理单元110包含运算逻辑单元(ALU,Arithmetic and Logic Unit)以及位移器(bitshifter)。运算逻辑单元负责执行布尔运算(如AND、OR、NOT、NAND、NOR、XOR、XNOR等)，而位移器负责位移运算及位旋转。系统架构另包含存储器150用以储存执行过程中需要的数据，例如，执行变数、数据表、操作系统状态等，以及储存装置140，用以储存各式各样的电子文件，例如，帧分辨率表(frame resolution table)、YUV视频文件(video files)等。存储器150可为动态随机存取存储器(DRAM,Dynamic Random Access Memory)，储存装置140可为硬盘装置(hard disk drive)、光盘装置(optical disk drive)、固态硬盘装置(solidstate disk drive)等。系统架构另包含通信接口160，让处理单元110可借以跟其他电子装置进行沟通。通信接口160可以是局域网(local area network,LAN)通信模块或无线局域网通信模块(WLAN)。输入装置130可包含键盘、鼠标、触控面板等。使用者可按压键盘上的硬键来输入字符，通过操作鼠标来控制光标，或者是在触控面板制造手势来控制执行中的应用程序。手势可包含单击、双击、单指拖曳、多指拖曳等，但不限定于此。显示单元120可包含显示面板(例如，薄膜液晶显示面板、有机发光二极管面板或其他具显示能力的面板)，用以显示输入的字符、数字、符号、拖曳鼠标的移动轨迹、绘制的图案或应用程序所提供的画面，提供给使用者观看。
图2是依据本发明实施例的帧分辨率决定方法流程图。此方法当相关程序码被处理单元110载入并执行时实施，用以决定YUV视频文件的帧分辨率。首先，取得YUV视频文件(步骤S210)。YUV视频文件可从储存装置140读取，或者通过通信接口160从另一电子装置取得。YUV视频文件包含标头(header)及视频码流(video stream)，而视频码流可组织为YUV444、YUV420或YUV422等格式。于此须注意的是，标头不包含帧分辨率信息。接着，依据YUV视频文件中视频码流的长度从帧分辨率表选择一部分的帧分辨率作为多个候选帧分辨率(步骤S220)。处理单元110可从储存装置140读取帧分辨率表。范例的帧分辨率表如表1所示：
表1
视频标准(standard) 宽度(W) 高度(H)
SVGA 800 600
WSVGA 1024 600
XGA 1024 768
XGA+ 1152 864
WXGA 1280 720
WXGA 1280 768
WXGA 1280 800
SXGA 1280 1024
HD 1360 768
HD 1366 768
WXGA+ 1440 900
HD+ 1600 900
UXGA 1600 1200
WSXGA+ 1680 1050
FHD 1920 1080
WUXGA 1920 1200
WQHD 2560 1440
WQXGA 2560 1600
UHD 3840 2160
其中，帧分辨率表可以实施于文件系统的电子文件、关联式数据库的数据表、文件数据库的电子文件等。帧分辨率表包含多笔纪录，每一纪录储存包含视频标准的帧分辨率信息，例如，宽度、高度等。详细来说，于步骤S220，可使用以下的公式(1)决定帧分辨率表中的每一帧分辨率是否合格成为候选帧分辨率：
L/(Wj*Hj*Rt)＝nj…rj
其中，L代表YUV视频文件中视频码流的长度(以字节为单位)，Wj代表第j个帧分辨率的宽度，Hj代表第j个帧分辨率的高度，Rt代表相应于特定视频码流格式的预设值，nj代表关联于第j个帧分辨率的商数，以及rj代表关联于第j个帧分辨率的余数。例如，当视频码流格式为YUV444时，Rt可设为1。j为介于1至k之间的整数，k代表帧分辨率表中的所有帧分辨率的数量。当视频码流格式为YUV422时，Rt可设为1。当视频码流格式为YUV420时，Rt可设为1.25。处理单元110将所有余数为0的帧分辨率当作候选帧分辨率。接着，处理单元110判断候选帧分辨率的产生是否成功(步骤S230)。详细来说，若找不出任何的候选帧分辨率，则表示帧分辨率的产生不成功。如果不成功(步骤S230中“否”的路径)，则决定取得的文件不是正确的YUV视频文件(步骤S240)。于步骤S240，可于标头储存此文件不是正确的YUV视频文件的信息。
由于视频码流中帧间信息通常具有相关性(dependency)，如果使用正确的帧分辨率切分码流，将使切分出的帧间具备高度关联性。本发明实施例利用此一特性来推测YUV视频文件的帧分辨率。详细来说，如果成功(步骤S230中“是”的路径)，执行m次循环，于每次循环中，使用一个候选帧分辨率取得视频码流中至少二帧的数据，并且计算取得帧间的相关性分数，m代表候选帧分辨率的数量(步骤S250)。依据计算出的相关性分数，从候选帧分辨率中决定最佳帧分辨率(步骤S260)，并判断最佳帧分辨率的决定是否成功(步骤S270)。若是，输出最佳帧分辨率，使得视频解码器(video decoder)可依据最佳帧分辨率切分视频码流并进行解码(步骤S280)。于步骤S280，处理单元110可将最佳帧分辨率写入标头或输出至视频解码器。否则，决定取得的文件不是正确的YUV视频文件(步骤S240)。
于一些实施例中，于步骤S250中的每个循环，处理单元110可计算切分后的第p帧及第p+1帧间的三个相关性分数。第一相关性分数表示一帧及下一帧间的Y、U及V分量的相似程度，值越大代表相似性越高。第一相关性分数可使用以下公式(2)计算：
其中，R1代表第一相关性分数，Xi(Y)代表此帧的第i个Y分量，Xi(U)代表此帧的第i个U分量，Xi(V)代表此帧的第i个V分量，Zi(Y)代表下一帧的第i个Y分量，Zi(U)代表下一帧的第i个U分量，Zi(V)代表下一帧的第i个V分量，代表此帧的Y分量的平均值，代表此帧的U分量的平均值，代表此帧的V分量的平均值，代表下一帧的Y分量的平均值，代表下一帧的U分量的平均值，以及代表下一帧的V分量的平均值。第二相关性分数表示一帧的偶数行(even rows)及下一帧的奇数行(odd rows)间的Y、U及V分量的相似程度，值越大代表相似性越高。第二相关性分数可使用以下公式(3)计算：
其中，R2代表第二相关性分数，Xi(Y)代表此帧的偶数行的第i个Y分量，Xi(U)代表此帧的偶数行的第i个U分量，Xi(V)代表此帧的偶数行的第i个V分量，Zi(Y)代表下一帧的奇数行的第i个Y分量，Zi(U)代表下一帧的奇数行的第i个U分量，Zi(V)代表下一帧的奇数行的第i个V分量，代表此帧的偶数行的Y分量的平均值，代表此帧的偶数行的U分量的平均值，代表此帧的偶数行的V分量的平均值，代表下一帧的奇数行的Y分量的平均值，代表下一帧的奇数行的U分量的平均值，以及代表下一帧的奇数行的V分量的平均值。第三相关性分数表示一帧的偶数列(even columns)及下一帧的奇数列(odd columns)间的Y分量的相似程度，值越大代表相似性越高。第三相关性分数可使用公式(4)计算：
其中，R3代表第三相关性分数，Xi(Y)代表此帧的偶数列的第i个Y分量，Zi(Y)代表下一帧的奇数列的第i个Y分量，代表此帧的偶数列的Y分量的平均值，以及代表下一帧的奇数列的Y分量的平均值。于步骤S260，决定最佳帧分辨率为其相关性分数R1至R3皆为最高，并且大于门槛值(例如，0.4)。也就是说，最佳帧分辨率的相关性分数R1高于其他候选帧分辨率的相关性分数R1且大于门槛值，最佳帧分辨率的相关性分数R2高于其他候选帧分辨率的相关性分数R2且大于门槛值，并且最佳帧分辨率的相关性分数R3高于其他候选帧分辨率的相关性分数R3且大于门槛值。于步骤S270，如果找不到相关性分数R1至R3皆为最高且大于0.4的候选帧分辨率，则判断最佳帧分辨率的决定不成功。
于另一些实施例中，于步骤S250中的每个循环，处理单元110可计算切分后的第p帧及第p+1帧间、第p+1帧及第p+2帧间、第p+2帧及第p+3帧间的第三相关性分数R3。于步骤S260，最佳帧分辨率为其于第p帧及第p+1帧间、第p+1帧及第p+2帧间、第p+2帧及第p+3帧间的第三相关性分数R3皆为最高。也就是说，最佳帧分辨率于第p帧及第p+1帧间的相关性分数R3高于其他候选帧分辨率于第p帧及第p+1帧间的相关性分数R3，最佳帧分辨率于第p+1帧及第p+2帧间的相关性分数R3高于其他候选帧分辨率于第p+1帧及第p+2帧间的相关性分数R3，并且最佳帧分辨率于第p+2帧及第p+3帧间的相关性分数R3高于其他候选帧分辨率于第p+2帧及第p+3帧间的相关性分数R3。于步骤S270，如果找不到第p帧及第p+1帧间、第p+1帧及第p+2帧间、第p+2帧及第p+3帧间的第三相关性分数R3皆为最高的候选帧分辨率，则判断最佳帧分辨率的决定不成功。
于更另一些实施例中，如上所述的相关性分数计算(步骤S250)及最佳帧分辨率的决定(步骤S260)可分为二阶段。图3A及图3B是依据本发明实施例的帧分辨率决定方法流程图。详细来说，处理单元110可执行m次循环，于每次循环中，使用一个候选帧分辨率切分出视频码流中第p帧及第p+1帧的数据，并且计算第p帧及第p+1帧间的三个相关性分数R1至R3，m代表候选帧分辨率的数量(步骤S250a)。处理单元110接着决定最佳帧分辨率为其相关性分数R1至R3皆为最高且大于0.4的候选帧分辨率(步骤S260a)。如果找到相关性分数R1至R3皆为最高且大于0.4的候选帧分辨率(步骤S270a中“是”的路径)，则继续执行步骤S280。如果找不到(步骤S270a中“否”的路径)，处理单元110可执行m次循环，于每次循环中，使用一个候选帧分辨率更切分出视频码流中第p+2帧及第p+3帧的数据，并且计算第p+1帧及第p+2帧间、第p+2帧及第p+3帧间的第三相关性分数R3(步骤S250b)。处理单元110接着决定最佳帧分辨率为其第p帧及第p+1帧间、第p+1帧及第p+2帧间、第p+2帧及第p+3帧间的第三相关性分数R3皆为最高(步骤S260b)。如果找到第p帧及第p+1帧间、第p+1帧及第p+2帧间、第p+2帧及第p+3帧间的第三相关性分数R3皆为最高的候选帧分辨率(步骤S270b中“是”的路径)，则继续执行步骤S280。如果找不到(步骤S270b中“否”的路径)，则继续执行步骤S240。
于传统的一些实施方式中，可能会使用帧分辨率表的每一个帧分辨率进行码流切分并使用演算法来检查切分后的结果是否正确。相较于传统的实施方式，本发明实施例于步骤S220先使用简单算式来剔除帧分辨率表中大部分不适当的帧分辨率，用以提升计算的效率。
虽然图1中包含了以上描述的元件，但不排除在不违反发明的精神下，使用更多其他的附加元件，能达成更佳的技术效果。此外，虽然图2及3的方法流程图采用特定的顺序来执行，但是在不违法发明精神的情况下，本领域技术人员可以在达到相同效果的前提下，修改这些步骤间的顺序，所以，本发明并不局限于仅使用如上所述的顺序。
以上所述仅为本发明较佳实施例，然其并非用以限定本发明的范围，任何熟悉本项技术的人员，在不脱离本发明的精神和范围内，可在此基础上做进一步的改进和变化，因此本发明的保护范围当以本申请的权利要求书所界定的范围为准。

Claims (18)

1.一种帧分辨率决定方法，其特征在于，由处理单元执行，包含：
取得YUV视频文件，其中上述YUV视频文件包含视频码流；
依据上述视频码流的长度从帧分辨率表选择一部分的帧分辨率作为多个候选帧分辨率；
执行m次循环，于每次循环中，使用上述候选帧分辨率中的一个候选帧分辨率取得上述视频码流中至少二帧的数据，并且计算上述帧间的相关性分数，m代表上述候选帧分辨率的数量；
依据上述相关性分数，从上述候选帧分辨率中决定最佳帧分辨率；以及
输出上述最佳帧分辨率，使得视频解码器可依据上述最佳帧分辨率切分上述视频码流并进行解码。
2.根据权利要求1所述的帧分辨率决定方法，其特征在于，上述YUV视频文件包含标头，上述标头不包含帧分辨率信息。
3.根据权利要求2所述的帧分辨率决定方法，其特征在于，于输出上述最佳帧分辨率的步骤中，包含：
将上述最佳帧分辨率写入上述标头或输出至上述视频解码器。
4.根据权利要求1所述的帧分辨率决定方法，其特征在于，于依据上述YUV视频文件的长度从帧分辨率表选择一部分的帧分辨率作为多个候选帧分辨率的步骤中，包含：
对上述帧分辨率表中的第j个帧分辨率应用以下公式：
L/(Wj*Hj*Rt)＝nj…rj
其中，j为介于1至k之间的整数，k代表上述帧分辨率表中的所有帧分辨率的数量，L代表上述YUV视频文件的上述长度，Wj代表第j个帧分辨率的宽度，Hj代表第j个帧分辨率的高度，Rt代表相应于视频码流格式的预设值，nj代表关联于第j个帧分辨率的商数，以及rj代表关联于第j个帧分辨率的余数；以及
将所有上述余数为0的帧分辨率当作上述候选帧分辨率。
5.根据权利要求1所述的帧分辨率决定方法，其特征在于，于执行m次循环的步骤中，包含：
于每次循环中，使用上述候选帧分辨率中的一个候选帧分辨率取得上述视频码流中第p帧及第p+1帧的数据；以及
计算上述第p帧及上述第p+1帧间的第一相关性分数、第二相关性分数及第三相关性分数，以及
于依据上述相关性分数，从上述候选帧分辨率中决定最佳帧分辨率的步骤中，包含：
决定上述最佳帧分辨率为上述候选帧分辨率的上述第一相关性分数、上述第二相关性分数及上述第三相关性分数为最高，并且大于门槛值。
6.根据权利要求5所述的帧分辨率决定方法，其特征在于，上述第一相关性分数表示上述第p帧及上述第p+1帧间的Y、U及V分量的相似程度，上述第二相关性分数表示上述第p帧的偶数行及上述第p+1帧的奇数行间的Y、U及V分量的相似程度，以及上述第三相关性分数表示上述第p帧的偶数列及上述第p+1帧的奇数列间的Y分量的相似程度。
7.根据权利要求6所述的帧分辨率决定方法，其特征在于，上述第一相关性分数使用以下公式计算：
R 1 = Σ ( X i ( Y ) - X ( Y ) ‾ ) ( Z i ( Y ) - Z ( Y ) ‾ ) + Σ ( X i ( U ) - X ( U ) ‾ ) ( Z i ( U ) - Z ( U ) ‾ ) + Σ ( X i ( V ) - X ( V ) ‾ ) ( Z i ( V ) - Z ( V ) ‾ ) Σ ( X i ( Y ) - X ( Y ) ‾ ) 2 Σ ( Z i ( Y ) - Z ( Y ) ‾ ) 2 Σ ( X i ( U ) - X ( U ) ‾ ) 2 Σ ( Z i ( U ) - Z ( U ) ‾ ) 2 Σ ( X i ( V ) - X ( V ) ‾ ) 2 Σ ( Z i ( V ) - Z ( V ) ‾ ) 2
R1代表上述第一相关性分数，Xi(Y)代表上述第p帧的第i个Y分量，Xi(U)代表上述第p帧的第i个U分量，Xi(V)代表上述第p帧的第i个V分量，Zi(Y)代表上述第p+1帧的第i个Y分量，Zi(U)代表上述第p+1帧的第i个U分量，Zi(V)代表上述第p+1帧的第i个V分量，代表上述第p帧的Y分量的平均值，代表上述第p帧的U分量的平均值，代表上述第p帧的V分量的平均值，代表上述第p+1帧的Y分量的平均值，代表上述第p+1帧的U分量的平均值，以及代表上述第p+1帧的V分量的平均值，上述第二相关性分数使用以下公式计算：
R 2 = Σ ( X i ( Y ) - X ( Y ) ‾ ) ( Z i ( Y ) - Z ( Y ) ‾ ) + Σ ( X i ( U ) - X ( U ) ‾ ) ( Z i ( U ) - Z ( U ) ‾ ) + Σ ( X i ( V ) - X ( V ) ‾ ) ( Z i ( V ) - Z ( V ) ‾ ) Σ ( X i ( Y ) - X ( Y ) ‾ ) 2 Σ ( Z i ( Y ) - Z ( Y ) ‾ ) 2 Σ ( X i ( U ) - X ( U ) ‾ ) 2 Σ ( Z i ( U ) - Z ( U ) ‾ ) 2 Σ ( X i ( V ) - X ( V ) ‾ ) 2 Σ ( Z i ( V ) - Z ( V ) ‾ ) 2
R2代表上述第二相关性分数，Xi(Y)代表上述第p帧的偶数行的第i个Y分量，Xi(U)代表上述第p帧的偶数行的第i个U分量，Xi(V)代表上述第p帧的偶数行的第i个V分量，Zi(Y)代表上述第p+1帧的奇数行的第i个Y分量，Zi(U)代表上述第p+1帧的奇数行的第i个U分量，Zi(V)代表上述第p+1帧的奇数行的第i个V分量，代表上述第p帧的偶数行的Y分量的平均值，代表上述第p帧的偶数行的U分量的平均值，代表上述第p帧的偶数行的V分量的平均值，代表上述第p+1帧的奇数行的Y分量的平均值，代表上述第p+1帧的奇数行的U分量的平均值，以及代表上述第p+1帧的奇数行的V分量的平均值，上述第三相关性分数使用以下公式计算：
R 3 = Σ ( X i ( Y ) - X ( Y ) ‾ ) ( Z i ( Y ) - Z ( Y ) ‾ ) Σ ( X i ( Y ) - X ( Y ) ‾ ) 2 Σ ( Z i ( Y ) - Z ( Y ) ‾ ) 2
R3代表第三相关性分数，Xi(Y)代表上述第p帧的偶数列的第i个Y分量，Zi(Y)代表上述第p+1帧的奇数列的第i个Y分量，代表上述第p帧的偶数列的Y分量的平均值，以及代表上述第p+1帧的奇数列的Y分量的平均值。
8.根据权利要求1所述的帧分辨率决定方法，其特征在于，于执行m次循环的步骤中，包含：
于每次循环中，使用上述候选帧分辨率中的一个候选帧分辨率取得上述视频码流中第p帧、第p+1帧、第p+2帧及第p+3帧的数据；以及
计算上述第p帧及上述第p+1帧间、上述第p+1帧及上述第p+2帧间、上述第p+2帧及上述第p+3帧间的第三相关性分数，以及
于依据上述相关性分数，从上述候选帧分辨率中决定最佳帧分辨率的步骤中，包含：
决定上述最佳帧分辨率为上述候选帧分辨率于上述第p帧及上述第p+1帧间、上述第p+1帧及上述第p+2帧间、上述第p+2帧及上述第p+3帧间的上述第三相关性分数皆为最高。
9.根据权利要求8所述的帧分辨率决定方法，其特征在于，上述第p帧及上述第p+1帧间的上述第三相关性分数表示上述第p帧的偶数列及上述第p+1帧的奇数列间的Y分量的相似程度，上述第p+1帧及上述第p+2帧间的上述第三相关性分数表示上述第p+1帧的偶数列及上述第p+2帧的奇数列间的Y分量的相似程度，以及上述第p+2帧及上述第p+3帧间的上述第三相关性分数表示上述第p+2帧的偶数列及上述第p+3帧的奇数列间的Y分量的相似程度。
10.一种帧分辨率决定装置，其特征在于，包含：
处理单元，取得YUV视频文件，其中上述YUV视频文件包含视频码流；依据上述视频码流的长度从帧分辨率表选择一部分的帧分辨率作为多个候选帧分辨率；执行m次循环，于每次循环中，使用上述候选帧分辨率中的一个候选帧分辨率取得上述视频码流中至少二帧的数据，并且计算上述帧间的相关性分数，m代表上述候选帧分辨率的数量；依据上述相关性分数，从上述候选帧分辨率中决定最佳帧分辨率；以及输出上述最佳帧分辨率，使得视频解码器可依据上述最佳帧分辨率切分上述视频码流并进行解码。
11.根据权利要求10所述的帧分辨率决定装置，其特征在于，包含：
储存装置，储存上述YUV视频文件及上述帧分辨率表，
其中，上述处理单元从上述储存装置读取上述YUV视频文件及上述帧分辨率表。
12.根据权利要求10所述的帧分辨率决定装置，其特征在于，包含：
储存装置，储存上述帧分辨率表；以及
通信接口，
其中，上述处理单元从上述储存装置读取上述帧分辨率表，以及通过上述通信接口从电子装置取得上述YUV视频文件。
13.根据权利要求10所述的帧分辨率决定装置，其特征在于，上述YUV视频文件包含标头，上述标头不包含帧分辨率信息。
14.根据权利要求13所述的帧分辨率决定装置，其特征在于，上述处理单元将上述最佳帧分辨率写入上述标头或输出至上述视频解码器。
15.根据权利要求10所述的帧分辨率决定装置，其特征在于，上述处理单元于每次循环中，使用上述候选帧分辨率中的一个候选帧分辨率取得上述视频码流中第p帧及第p+1帧的数据、及计算上述第p帧及上述第p+1帧间的第一相关性分数、第二相关性分数及第三相关性分数；以及决定上述最佳帧分辨率为上述候选帧分辨率的上述第一相关性分数、上述第二相关性分数及上述第三相关性分数为最高，并且大于门槛值。
16.根据权利要求15所述的帧分辨率决定装置，其特征在于，上述第一相关性分数表示上述第p帧及上述第p+1帧间的Y、U及V分量的相似程度，上述第二相关性分数表示上述第p帧的偶数行及上述第p+1帧的奇数行间的Y、U及V分量的相似程度、以及上述第三相关性分数表示上述第p帧的偶数列及上述第p+1帧的奇数列间的Y分量的相似程度。
17.根据权利要求10所述的帧分辨率决定装置，其特征在于，上述处理单元于每次循环中，使用上述候选帧分辨率中的一个候选帧分辨率取得上述视频码流中第p帧、第p+1帧、第p+2帧及第p+3帧的数据，及计算上述第p帧及上述第p+1帧间、上述第p+1帧及上述第p+2帧间、上述第p+2帧及上述第p+3帧间的第三相关性分数；以及决定上述最佳帧分辨率为上述候选帧分辨率于上述第p帧及上述第p+1帧间、上述第p+1帧及上述第p+2帧间、上述第p+2帧及上述第p+3帧间的上述第三相关性分数皆为最高。
18.根据权利要求17所述的帧分辨率决定装置，其特征在于，上述第p帧及上述第p+1帧间的上述第三相关性分数表示上述第p帧的偶数列及上述第p+1帧的奇数列间的Y分量的相似程度，上述第p+1帧及上述第p+2帧间的上述第三相关性分数表示上述第p+1帧的偶数列及上述第p+2帧的奇数列间的Y分量的相似程度，以及上述第p+2帧及上述第p+3帧间的上述第三相关性分数表示上述第p+2帧的偶数列及上述第p+3帧的奇数列间的Y分量的相似程度。
CN201610813992.9A 2016-09-09 2016-09-09 帧分辨率决定方法以及使用该方法的装置 Active CN106454347B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201610813992.9A CN106454347B (zh) 2016-09-09 2016-09-09 帧分辨率决定方法以及使用该方法的装置
US15/284,315 US9749578B1 (en) 2016-09-09 2016-10-03 Methods for determining frame resolution and apparatuses using the same
TW105136367A TWI622286B (zh) 2016-09-09 2016-11-09 幀分辨率決定方法以及使用該方法的裝置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610813992.9A CN106454347B (zh) 2016-09-09 2016-09-09 帧分辨率决定方法以及使用该方法的装置

Publications (2)

Publication Number Publication Date
CN106454347A true CN106454347A (zh) 2017-02-22
CN106454347B CN106454347B (zh) 2019-04-12

Family

ID=58168370

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610813992.9A Active CN106454347B (zh) 2016-09-09 2016-09-09 帧分辨率决定方法以及使用该方法的装置

Country Status (3)

Country Link
US (1) US9749578B1 (zh)
CN (1) CN106454347B (zh)
TW (1) TWI622286B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109348203A (zh) * 2018-08-14 2019-02-15 华勤通讯技术有限公司 获取yuv图像的分辨率的方法及电子设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107105185A (zh) * 2017-04-18 2017-08-29 深圳创维－Rgb电子有限公司 视频信号的传输方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104902275A (zh) * 2015-05-29 2015-09-09 宁波菊风系统软件有限公司 一种控制视频通信质量甜点的方法
CN104919804A (zh) * 2012-10-01 2015-09-16 微软技术许可有限责任公司 帧封装和解封较高分辨率色度采样格式
US20150326846A1 (en) * 2014-05-12 2015-11-12 DDD IP Ventures, Ltd. Systems and methods for processing video frames
CN105659618A (zh) * 2012-12-19 2016-06-08 汤姆逊许可公司 用于对图像/视频分辨率及其颜色二次采样进行自动检测的方法和装置
CN105744115A (zh) * 2014-12-24 2016-07-06 索尼公司 用于处理视频内容的方法和系统

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7346109B2 (en) * 2003-12-23 2008-03-18 Genesis Microchip Inc. Motion vector computation for video sequences
US7480334B2 (en) * 2003-12-23 2009-01-20 Genesis Microchip Inc. Temporal motion vector filtering
US8089557B2 (en) * 2007-10-04 2012-01-03 Hitachi, Ltd. Video signal processing apparatus, video signal processing method and video display apparatus
US8264587B2 (en) * 2009-01-15 2012-09-11 Nokia Corporation Increasing frame rate for imaging
CN102169706B (zh) * 2011-01-28 2015-04-29 杭州海康威视数字技术股份有限公司 Yuv文件的存储、播放方法及其装置
US9602819B2 (en) * 2011-01-31 2017-03-21 Apple Inc. Display quality in a variable resolution video coder/decoder system
US8902973B2 (en) * 2011-04-05 2014-12-02 Dialogic Corporation Perceptual processing techniques for video transcoding
US8780233B2 (en) * 2011-12-19 2014-07-15 Motorola Solutions, Inc. Method and apparatus for maintaining a minimum pixel density across an object of interest
US9305362B1 (en) * 2014-02-28 2016-04-05 Xilinx, Inc. Image stabilization
US9639762B2 (en) * 2014-09-04 2017-05-02 Intel Corporation Real time video summarization

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104919804A (zh) * 2012-10-01 2015-09-16 微软技术许可有限责任公司 帧封装和解封较高分辨率色度采样格式
CN105659618A (zh) * 2012-12-19 2016-06-08 汤姆逊许可公司 用于对图像/视频分辨率及其颜色二次采样进行自动检测的方法和装置
US20150326846A1 (en) * 2014-05-12 2015-11-12 DDD IP Ventures, Ltd. Systems and methods for processing video frames
CN105744115A (zh) * 2014-12-24 2016-07-06 索尼公司 用于处理视频内容的方法和系统
CN104902275A (zh) * 2015-05-29 2015-09-09 宁波菊风系统软件有限公司 一种控制视频通信质量甜点的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109348203A (zh) * 2018-08-14 2019-02-15 华勤通讯技术有限公司 获取yuv图像的分辨率的方法及电子设备

Also Published As

Publication number Publication date
TWI622286B (zh) 2018-04-21
TW201813388A (zh) 2018-04-01
US9749578B1 (en) 2017-08-29
CN106454347B (zh) 2019-04-12

Similar Documents

Publication Publication Date Title
Valente et al. Cross-validation and permutations in MVPA: Validity of permutation strategies and power of cross-validation schemes
CN110362723B (zh) 一种题目特征表示方法、装置及存储介质
US7739275B2 (en) System and method for selecting object metadata evolving over time
US8117204B2 (en) Video browser for navigating linear video on small display devices using a similarity-based navigation hierarchy of temporally ordered video keyframes with short navigation paths
US7581184B2 (en) System and method for visualizing the temporal evolution of object metadata
Iliinsky On beauty
JPWO2020240809A1 (ja) 学習装置、分類装置、学習方法、分類方法、学習プログラム、及び分類プログラム
Guo et al. Hyperrec: Efficient recommender systems with hyperdimensional computing
Abdullah et al. A new biclustering technique based on crossing minimization
US20050251514A1 (en) Evaluation and cluster formation based on element correlation
CN112101029B (zh) 一种基于bert模型的高校导师推荐管理方法
Yu et al. ex-vit: A novel explainable vision transformer for weakly supervised semantic segmentation
CN103761532B (zh) 基于特征相关隐式编码的标签空间降维方法及系统
Alymani et al. Graph machine learning classification using architectural 3D topological models
Glueck Sample size calculations in clinical research 2nd edition by CHOW, S.-C., SHAO, J., and WANG, H.
CN114417161B (zh) 基于异构图的虚拟物品时序推荐方法、装置、介质及设备
CN106454347A (zh) 帧分辨率决定方法以及使用该方法的装置
Ku et al. Multilevel feature fusion dilated convolutional network for semantic segmentation
Abdelhafeez et al. A novel approach toward skin cancer classification through fused deep features and neutrosophic environment
Esmaeilzadeh et al. A new method for complete ranking of DMUs
CN112183088B (zh) 词语层级确定的方法、模型构建方法、装置及设备
Wang et al. Detect-Order-Construct: A Tree Construction based Approach for Hierarchical Document Structure Analysis
Munzner et al. Visual mining of power sets with large alphabets
Sharma et al. Visual question answering model based on the fusion of multimodal features by a two-way co-attention mechanism
Shim et al. Fast and accurate interpretation of workload classification model

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20211124

Address after: Room 201, No. 2557, Jinke Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 201203

Patentee after: Gryfield Intelligent Technology Co.,Ltd.

Address before: Room 301, 2537 Jinke Road, Zhangjiang High Tech Park, Pudong New Area, Shanghai 201203

Patentee before: VIA ALLIANCE SEMICONDUCTOR Co.,Ltd.

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 11th Floor, Building 3, No. 889 Bibo Road, China (Shanghai) Pilot Free Trade Zone, Shanghai, 201200

Patentee after: Granfei Intelligent Technology Co.,Ltd.

Country or region after: China

Address before: Room 201, No. 2557, Jinke Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 201203

Patentee before: Gryfield Intelligent Technology Co.,Ltd.

Country or region before: China