JPWO2021026396A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2021026396A5
JPWO2021026396A5 JP2022506972A JP2022506972A JPWO2021026396A5 JP WO2021026396 A5 JPWO2021026396 A5 JP WO2021026396A5 JP 2022506972 A JP2022506972 A JP 2022506972A JP 2022506972 A JP2022506972 A JP 2022506972A JP WO2021026396 A5 JPWO2021026396 A5 JP WO2021026396A5
Authority
JP
Japan
Prior art keywords
video content
computer
frames
playback speed
interval
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022506972A
Other languages
Japanese (ja)
Other versions
JP2022543609A (en
Publication date
Priority claimed from US16/536,302 external-priority patent/US11025858B2/en
Application filed filed Critical
Publication of JP2022543609A publication Critical patent/JP2022543609A/en
Publication of JPWO2021026396A5 publication Critical patent/JPWO2021026396A5/ja
Pending legal-status Critical Current

Links

Description

特に断りのない限り、本明細書及び特許請求の範囲で使用される「接続される」及び「結合される」(及びそれらの派生語)という用語は、直接及び間接の両方(すなわち、他の要素又は構成を介して)の接続を可能にするものとして解釈されるべきである。さらに、本明細書及び特許請求の範囲で使用される「a」又は「an」という用語は、「少なくとも1つ」を意味すると解釈されるべきである。そして、使いやすさのために、本明細書及び特許請求の範囲で使用される「含む」及び「持つ」(及びそれらの派生語)という用語は、「備える」という言葉と言い換えが可能であり、同じ意味を有する。
以下、本発明の好ましい実施形態を項分け記載する。
実施形態1
特定のフレームレートで符号化されたビデオコンテンツの一部分にアクセスし、
前記ビデオコンテンツが表示される電子ディスプレイのリフレッシュレートを決定し、
前記ビデオコンテンツの前記フレームレートを前記電子ディスプレイの前記リフレッシュレートと同期させるためにフレームレート変換が適用される前記ビデオコンテンツの時間間隔を特定し、
前記電子ディスプレイに、ビデオコンテンツの前記特定された時間間隔を提示するコンピュータ実行方法であって、前記提示は、
ビデオコンテンツの前記特定された間隔の第1部分の再生速度を調整することで、前記特定された間隔の前記第1部分が、元のビデオフレームと複製フレームの第1シーケンスとを用いて再生されるようにし、
ビデオコンテンツの前記特定された間隔の後続部分である第2部分の再生速度を調整することで、前記特定された間隔の前記第2部分が、前記元のビデオフレームと前記複製フレームの異なるシーケンスである第2シーケンスとを用いて再生されるようにする、コンピュータ実行方法。
実施形態2
前記複製フレームの異なるシーケンスである第2シーケンスは、少なくとも最小しきい値の数の複製フレームを含む、実施形態1に記載のコンピュータ実行方法。
実施形態3
ビデオコンテンツの前記特定された間隔の前記第1部分の前記再生速度を調整することは、ビデオコンテンツの前記特定された間隔の前記第1部分の前記再生速度を上げることを含む、実施形態1に記載のコンピュータ実行方法。
実施形態4
ビデオコンテンツの前記特定された間隔の前記第2部分の前記再生速度を調整することは、ビデオコンテンツの前記特定された間隔の前記第2部分の前記再生速度を下げることを含む、実施形態1に記載のコンピュータ実行方法。
実施形態5
前記再生速度は、前記再生速度の特定された最大速度又は最遅速度の範囲内で調整される、実施形態1に記載のコンピュータ実行方法。
実施形態6
再生速度の調整は、前記ビデオコンテンツに関連付けられたプレゼンテーションタイムスタンプの変更を含む、実施形態1に記載のコンピュータ実行方法。
実施形態7
前記特定された時間間隔は1秒より長い、実施形態1に記載のコンピュータ実行方法。
実施形態8
前記特定された時間間隔は少なくとも3秒である、実施形態1に記載のコンピュータ実行方法。
実施形態9
前記再生速度は提示されているビデオフレームの種類に基づいて調整される、実施形態1に記載のコンピュータ実行方法。
実施形態10
1つ以上の1次複製フレームを含むビデオコンテンツの間隔は、特定された再生速度で自動的に再生される、実施形態9に記載のコンピュータ実行方法。
実施形態11
1つ以上の2次複製フレームを含むビデオコンテンツの間隔は、特定された再生速度で自動的に再生される、実施形態9に記載のコンピュータ実行方法。
実施形態12
複数の前記複製フレームは特定された間隔で繰り返される、実施形態1に記載のコンピュータ実行方法。
実施形態13
少なくとも1つの物理プロセッサと、
コンピュータ実行可能命令を含む物理メモリと、を備えるシステムであって、前記物理プロセッサによって実行されたとき、前記物理プロセッサに対して、
特定のフレームレートで符号化されたビデオコンテンツの一部分へのアクセスと、
前記ビデオコンテンツが表示される電子ディスプレイのリフレッシュレートの決定と、
前記ビデオコンテンツの前記フレームレートを前記電子ディスプレイの前記リフレッシュレートと同期させるためにフレームレート変換が適用される前記ビデオコンテンツの時間間隔の特定と、
前記電子ディスプレイへの、ビデオコンテンツの前記特定された時間間隔の提示と、を行わせるシステムであって、前記提示は、
ビデオコンテンツの前記特定された間隔の第1部分の再生速度を調整することで、前記特定された間隔の前記第1部分が、元のビデオフレームと複製フレームの第1シーケンスとを用いて再生されるようにし、
ビデオコンテンツの前記特定された間隔の後続部分である第2部分の再生速度を調整することで、前記特定された間隔の前記第2部分が、前記元のビデオフレームと前記複製フレームの異なるシーケンスである第2シーケンスとを用いて再生されるようにする、システム。
実施形態14
ビデオコンテンツの前記特定された間隔の各部分の前記再生速度は、参照用テーブルに格納される、実施形態13に記載のシステム。
実施形態15
ビデオコンテンツの前記特定された間隔は、前記参照用テーブルに示された再生情報に従って、前記電子ディスプレイで再生される、実施形態14に記載のシステム。
実施形態16
前記参照用テーブルには、ビデオコンテンツの前記特定された時間間隔が前記電子ディスプレイに提示されている間に適用されて、ビデオコンテンツの前記特定された時間間隔内での各フレームのプレゼンテーションタイムスタンプを調整する、1つ以上のデルタ値を含む、実施形態15に記載のシステム。
実施形態17
ビデオコンテンツの前記特定された時間間隔の前記電子ディスプレイでの提示をテストして、前記ビデオコンテンツの再生に関する1つ以上の特定の品質メトリックを検証することをさらに含む、実施形態13に記載のシステム。
実施形態18
前記ビデオコンテンツの前記フレームレートは毎秒24フレームで、前記電子ディスプレイの前記リフレッシュレートは50Hzである、実施形態13に記載のシステム。
実施形態19
前記ビデオコンテンツの前記フレームレートは毎秒24フレームで、前記電子ディスプレイの前記リフレッシュレートは60Hzである、実施形態13に記載のシステム。
実施形態20
一つ以上のコンピュータ実行可能命令を備える非一時的なコンピュータ可読媒体であって、コンピューティングデバイスの少なくとも1つのプロセッサによって実行されたときに、前記コンピューティングデバイスに対して、
特定のフレームレートで符号化されたビデオコンテンツの一部分へのアクセスと、
前記ビデオコンテンツが表示される電子ディスプレイのリフレッシュレートの決定と、
前記ビデオコンテンツの前記フレームレートを前記電子ディスプレイの前記リフレッシュレートと同期させるためにフレームレート変換が適用される前記ビデオコンテンツの時間間隔の特定と、
前記電子ディスプレイへの、ビデオコンテンツの前記特定された時間間隔の提示と、を実行させるシステムであって、前記提示は、
ビデオコンテンツの前記特定された間隔の第1部分の再生速度を調整することで、前記特定された間隔の前記第1部分が、元のビデオフレームと複製フレームの第1シーケンスとを用いて再生されるようにし、
ビデオコンテンツの前記特定された間隔の後続部分である第2部分の再生速度を調整することで、前記特定された間隔の前記第2部分が、前記元のビデオフレームと前記複製フレームの異なるシーケンスである第2シーケンスとを用いて再生されるようにする、非一時的なコンピュータ可読媒体。
Unless otherwise stated, the terms "connected" and "coupled" (and their derivatives) as used herein and in the claims refer to both direct and indirect (i.e., other (via elements or structures). Additionally, the terms "a" or "an" as used in the specification and claims are to be interpreted to mean "at least one." And, for ease of use, the terms "include" and "have" (and their derivatives) used herein and in the claims are interchangeable with the term "comprising." , have the same meaning.
Hereinafter, preferred embodiments of the present invention will be described item by item.
Embodiment 1
access a portion of the video content encoded at a particular frame rate;
determining a refresh rate of an electronic display on which the video content is displayed;
identifying a time interval of the video content for which frame rate conversion is applied to synchronize the frame rate of the video content with the refresh rate of the electronic display;
A computer-implemented method of presenting the identified time interval of video content on the electronic display, the presenting comprising:
Adjusting the playback speed of the first portion of the identified interval of video content causes the first portion of the identified interval to be reproduced using original video frames and a first sequence of duplicate frames. so that
Adjusting the playback speed of a second portion of the video content following the identified interval, wherein the second portion of the identified interval is a different sequence of the original video frames and the duplicate frames. A computer-implemented method of causing playback with a certain second sequence.
Embodiment 2
2. The computer-implemented method of embodiment 1, wherein the different sequence of duplicated frames, a second sequence, includes at least a minimum threshold number of duplicated frames.
Embodiment 3
According to embodiment 1, adjusting the playback speed of the first portion of the identified interval of video content includes increasing the playback speed of the first portion of the identified interval of video content. The described computer-implemented method.
Embodiment 4
2. According to embodiment 1, wherein adjusting the playback speed of the second portion of the identified interval of video content includes reducing the playback speed of the second portion of the identified interval of video content. The described computer-implemented method.
Embodiment 5
2. The computer-implemented method of embodiment 1, wherein the playback speed is adjusted within a specified maximum or slowest speed range of the playback speed.
Embodiment 6
2. The computer-implemented method of embodiment 1, wherein adjusting playback speed comprises changing a presentation timestamp associated with the video content.
Embodiment 7
2. The computer-implemented method of embodiment 1, wherein the specified time interval is greater than 1 second.
Embodiment 8
2. The computer-implemented method of embodiment 1, wherein the specified time interval is at least 3 seconds.
Embodiment 9
2. The computer-implemented method of embodiment 1, wherein the playback speed is adjusted based on the type of video frames being presented.
Embodiment 10
10. The computer-implemented method of embodiment 9, wherein intervals of video content containing one or more primary duplicate frames are automatically played at a specified playback speed.
Embodiment 11
10. The computer-implemented method of embodiment 9, wherein intervals of video content containing one or more secondary duplicate frames are automatically played at a specified playback speed.
Embodiment 12
2. The computer-implemented method of embodiment 1, wherein a plurality of said duplicate frames are repeated at specified intervals.
Embodiment 13
at least one physical processor;
and a physical memory containing computer-executable instructions that, when executed by said physical processor, to said physical processor:
access to a portion of video content encoded at a particular frame rate;
Determining a refresh rate of an electronic display on which the video content is displayed;
identifying a time interval of the video content over which frame rate conversion is applied to synchronize the frame rate of the video content with the refresh rate of the electronic display;
presentation of video content on the electronic display for the specified time interval, the presentation comprising:
Adjusting the playback speed of the first portion of the identified interval of video content causes the first portion of the identified interval to be reproduced using original video frames and a first sequence of duplicate frames. so that
Adjusting the playback speed of a second portion of the video content following the identified interval, wherein the second portion of the identified interval is a different sequence of the original video frames and the duplicate frames. system to be played back using a certain second sequence.
Embodiment 14
14. The system of embodiment 13, wherein the playback speed for each portion of the identified interval of video content is stored in a lookup table.
Embodiment 15
15. The system of embodiment 14, wherein the identified interval of video content is played on the electronic display according to playback information indicated in the look-up table.
Embodiment 16
The look-up table is applied while the specified time interval of video content is being presented on the electronic display to provide a presentation timestamp for each frame within the specified time interval of video content. 16. The system of embodiment 15, including one or more delta values to adjust.
Embodiment 17
14. The system of embodiment 13, further comprising testing presentation of video content on the electronic display for the identified time interval to verify one or more specific quality metrics for playback of the video content. .
Embodiment 18
14. The system of embodiment 13, wherein the frame rate of the video content is 24 frames per second and the refresh rate of the electronic display is 50 Hz.
Embodiment 19
14. The system of embodiment 13, wherein the frame rate of the video content is 24 frames per second and the refresh rate of the electronic display is 60 Hz.
Embodiment 20
A non-transitory computer-readable medium comprising one or more computer-executable instructions for, when executed by at least one processor of a computing device, to a computing device:
access to a portion of video content encoded at a particular frame rate;
Determining a refresh rate of an electronic display on which the video content is displayed;
identifying a time interval of the video content over which frame rate conversion is applied to synchronize the frame rate of the video content with the refresh rate of the electronic display;
and presenting video content to the electronic display for the specified time interval, the presenting comprising:
Adjusting the playback speed of the first portion of the identified interval of video content causes the first portion of the identified interval to be reproduced using original video frames and a first sequence of duplicate frames. so that
Adjusting the playback speed of a second portion of the video content following the identified interval, wherein the second portion of the identified interval is a different sequence of the original video frames and the duplicate frames. A non-transitory computer-readable medium to be played back with a certain second sequence.

JP2022506972A 2019-08-08 2020-08-06 frame rate conversion Pending JP2022543609A (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US16/536,302 US11025858B2 (en) 2019-08-08 2019-08-08 Frame rate conversion
US16/536,302 2019-08-08
PCT/US2020/045290 WO2021026396A1 (en) 2019-08-08 2020-08-06 Frame rate conversion

Publications (2)

Publication Number Publication Date
JP2022543609A JP2022543609A (en) 2022-10-13
JPWO2021026396A5 true JPWO2021026396A5 (en) 2023-08-15

Family

ID=72896060

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022506972A Pending JP2022543609A (en) 2019-08-08 2020-08-06 frame rate conversion

Country Status (10)

Country Link
US (3) US11025858B2 (en)
EP (1) EP4010900A1 (en)
JP (1) JP2022543609A (en)
KR (1) KR20220044491A (en)
CN (1) CN114208160A (en)
AU (1) AU2020325292B2 (en)
BR (1) BR112022002268A2 (en)
CA (1) CA3143499A1 (en)
MX (1) MX2022001554A (en)
WO (1) WO2021026396A1 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11025858B2 (en) 2019-08-08 2021-06-01 Netflix, Inc. Frame rate conversion
DE102020129908A1 (en) * 2020-11-12 2022-05-12 Mekra Lang Gmbh & Co. Kg Indirect layer system and method for adjusting a refresh rate
US11716520B2 (en) * 2021-06-25 2023-08-01 Netflix, Inc. Systems and methods for providing optimized time scales and accurate presentation time stamps
US20230088882A1 (en) * 2021-09-22 2023-03-23 Samsung Electronics Co., Ltd. Judder detection for dynamic frame rate conversion
KR20240082771A (en) * 2022-12-02 2024-06-11 삼성전자주식회사 Display apparatus, server apparatus and control method thereof

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4170808B2 (en) * 2003-03-31 2008-10-22 株式会社東芝 Information display device, information display method, and program
EP1739676A1 (en) * 2005-06-29 2007-01-03 Hitachi, Ltd. Digital broadcasting receiving device and digital information receiving device, and playback method
JP5155203B2 (en) 2008-01-22 2013-03-06 パナソニック株式会社 Playback device and playback method
US8279344B2 (en) * 2009-12-14 2012-10-02 Qnx Software Systems Limited Synchronization of video presentation by video cadence modification
US9589540B2 (en) * 2011-12-05 2017-03-07 Microsoft Technology Licensing, Llc Adaptive control of display refresh rate based on video frame rate and power efficiency
US9030481B2 (en) 2012-06-28 2015-05-12 Intel Corporation Method and apparatus for reducing power usage during video presentation on a display
US8994800B2 (en) * 2012-07-25 2015-03-31 Gopro, Inc. Credential transfer management camera system
US9858899B2 (en) * 2013-06-13 2018-01-02 Microsoft Technology Licensing, Llc Managing transitions of adaptive display rates for different video playback scenarios
US9679605B2 (en) * 2015-01-29 2017-06-13 Gopro, Inc. Variable playback speed template for video editing application
US10387099B2 (en) * 2016-07-28 2019-08-20 Intelligent Waves Llc System, method and computer program product for generating remote views in a virtual mobile device platform using efficient color space conversion and frame encoding
JP2019020530A (en) * 2017-07-13 2019-02-07 キヤノン株式会社 Signal processor, control method and program
US10741143B2 (en) * 2017-11-28 2020-08-11 Nvidia Corporation Dynamic jitter and latency-tolerant rendering
EP3503569A1 (en) * 2017-12-19 2019-06-26 Thomson Licensing Method of transmitting video frames from a video stream to a display and corresponding apparatus
US11295660B2 (en) * 2019-06-10 2022-04-05 Ati Technologies Ulc Frame replay for variable rate refresh display
US10741215B1 (en) * 2019-06-28 2020-08-11 Nvidia Corporation Automatic generation of video playback effects
US11062674B2 (en) * 2019-06-28 2021-07-13 Intel Corporation Combined panel self-refresh (PSR) and adaptive synchronization systems and methods
US11050972B1 (en) * 2019-07-02 2021-06-29 Gopro, Inc. Systems and methods for generating time-lapse videos
US11025858B2 (en) 2019-08-08 2021-06-01 Netflix, Inc. Frame rate conversion

Similar Documents

Publication Publication Date Title
US20180108311A1 (en) Method and apparatus for adjusting a screen refresh frequency and display
TWI598867B (en) Dynamic frame repetition in a variable refresh rate system
Gottschaldt Gestalt factors and repetition.
HK1087232A1 (en) Method and apparatus for representing image granularity by one or more parameters
MX2022001554A (en) Frame rate conversion.
CA3119042C (en) Techniques for identifying synchronization errors in media titles
JPWO2021026396A5 (en)
CN108259964A (en) A kind of video playing rate adjusting method and system
TWI517669B (en) Method and apparatus for image synchronization
WO2022143385A1 (en) Pulse signal-based display method and apparatus, electronic device, and medium
BR112023025359A2 (en) VIDEO PROCESSING METHOD AND APPARATUS, STORAGE DEVICE AND MEDIUM
US11513937B2 (en) Method and device of displaying video comments, computing device, and readable storage medium
KR102617850B1 (en) Frame refresh for variable rate refresh displays
JP2015529059A5 (en)
CN106534964B (en) Method and device for adjusting speech rate
OZAWA et al. Contents which yield high auditory-presence in sound reproduction
BR112022021307A2 (en) METHOD AND APPLIANCE FOR DISPLAYING IMAGE, DEVICE AND STORAGE MEDIA
TWI802072B (en) Image display apparatus and system as well as image displaying method thereof
TWI706407B (en) Driving method for dynamically adjusting frame rate and electronic device thereof
TWI743418B (en) Display, method for monitoring played content and system using the same
WO2003046892A3 (en) Method and system for dvd smooth rewind
JP2021139992A (en) Synchronization device, synchronization method, program, and recording medium
JP6347204B2 (en) REPRODUCTION CONTROL DEVICE, REPRODUCTION CONTROL METHOD, AND PROGRAM
JP2016174273A (en) Image processing device, image processing system, and program
TW200517915A (en) System and method for object tracking path generation and computer-readable medium thereof