CN104813220A - 视频显示装置和显示视频的方法 - Google Patents
视频显示装置和显示视频的方法 Download PDFInfo
- Publication number
- CN104813220A CN104813220A CN201380060347.9A CN201380060347A CN104813220A CN 104813220 A CN104813220 A CN 104813220A CN 201380060347 A CN201380060347 A CN 201380060347A CN 104813220 A CN104813220 A CN 104813220A
- Authority
- CN
- China
- Prior art keywords
- video
- frame
- rotation
- display devices
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Controls And Circuits For Display Device (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本文公开的是视频显示装置和显示视频的方法。在本文中,所述视频显示装置包括获取包括旋转信息的视频的通信单元、显示所述视频的显示单元、以及设置视频播放模式的处理器,其中,所述视频播放模式可以包括在不用基于所述旋转信息执行任何旋转补偿的情况下显示所获取的视频的自然显示模式,以及基于所述旋转信息执行所述旋转补偿来显示所获取的视频的水平显示模式,其中,当所述视频播放模式对应于所述水平显示模式时,所述视频显示装置基于所述旋转信息来执行所述视频的多个连续帧的旋转补偿,并且显示被裁切为一大小的所述视频的所述连续帧中的每个,并且其中,裁切大小是基于所述视频的所述多个连续帧的所述旋转信息来确定的。
Description
技术领域
本发明涉及视频显示装置和显示视频的方法,并且最具体地,涉及一种在显示装置上显示包括旋转信息的视频的方法。
背景技术
随着信息技术的演进,单独用户通过使用它们自己的数字装置来记录和查看运动图片已变得常见。因此,用户也许能够通过他/她自己的数字装置来查看他/她亲自记录的视频。然而,当用户亲自执行记录时,由于用户的手或手臂的摇动,数字装置还可能在视频的记录期间摇动。因此,当播放记录的视频时,由于数字装置的画面的摇动,可能将所记录的图像的不稳定查看提供给用户。
此外,当通过使用配备在数字装置本身中的防手振功能在精修图像之后查看所记录的图像时,用户可能难以感到和体验到他/她在记录时已感到的紧张或现场感。而且,与专业用户相反,当普通用户执行记录时,普通用户可能更难以对视频进行精修。因此,当通过使用数字装置来记录和查看视频时,需要能够同时提供在记录时的现场感和稳定性的直观且简单的方法。
发明内容
技术问题
因此,本发明致力于基本上消除了由于现有技术的局限和缺点而导致的一个或更多个问题的视频显示装置和显示视频的方法。
本发明的目的在于提供一种能够允许用户在用户作为用户希望查看视频时,依赖于用户的偏好而选择自然显示模式或水平显示模式中的任一个的视频显示装置和显示视频的方法。这时,本发明的目的在于在记录所选择的视频时通过自然显示模式给用户提供生动地体验。并且,本发明的另一目的在于当通过水平显示模式来播放所选择的运动图片时给用户提供查看稳定性。
本发明的另一目的在于提供一种在选择的视频正在通过使用多个视频播放模式中的至少一个来显示的同时,能够通过用户的输入或自动设定来给用户提供另一视频播放模式的视频显示装置和显示视频的方法。更具体地,本发明的目的在于在正在自然显示模式下显示所选择的视频的同时,通过用户的输入或自动设定来给用户提供水平显示模式。并且,本发明的目的在于在正在水平显示模式下显示所选择的视频的同时,通过用户的输入或自动设定来给用户提供自然显示模式。
本发明的另一个目的在于提供一种能够在设置或重设视频播放模式时简单地设置播放模式的视频显示装置和显示视频的方法。
本发明的附加的优点、目的和特征将在下面的描述中部分地阐述,并且部分地对于研究了以下部分的本领域普通技术人员而言将变得显而易见,或者可以从本发明的实践中学习到。本发明的目标和其它优点可以由在所撰写的说明书及其权利要求书以及附图中特别指出的结构来实现和获得。
问题的解决方案
为了实现这些目的和其它优点并且根据本发明的目的,如本文所具体实现和广泛描述的,根据本发明的实施方式,一种显示所记录的视频的视频显示装置包括:通信单元,该通信单元获取包括旋转信息的视频;显示单元,该显示以显示所述视频;以及处理器,该处理器设置视频播放模式,其中,所述视频播放模式可以包括在不用基于所述旋转信息执行旋转补偿的情况下显示所获取的视频的自然显示模式,以及基于所述旋转信息执行所述旋转补偿来显示所获取的视频的水平显示模式,其中,当所述视频播放模式对应于所述水平显示模式时,所述视频显示装置基于所述旋转信息来执行所述视频的多个连续帧的旋转补偿,并且显示被裁切为一大小的所述视频的所述多个连续帧中的每个,并且其中,裁切大小是基于所述视频的所述多个连续帧的所述旋转信息来确定的。
根据本发明的另一实施方式,一种显示所记录的视频的方法,该方法包括以下步骤:获取包括旋转信息的视频的步骤,其中,所述旋转信息包括关于所述视频的所述多个帧的旋转角度信息;设置视频播放模式的步骤,其中,所述视频播放模式可以包括在不用基于所述旋转信息执行旋转补偿的情况下显示所获取的视频的自然显示模式,以及基于所述旋转信息执行所述旋转补偿来显示所获取的视频的水平显示模式;以及基于所设置的视频播放模式来显示所述视频的步骤,其中,当所述视频播放模式对应于所述水平显示模式时,所述视频的多个连续帧基于所述旋转信息被旋转补偿,并且所述视频的所述连续帧中的每个被裁切为单个大小,从而被显示,以及其中,裁切大小是基于所述视频的所述多个连续帧的所述旋转信息来确定的。
发明的有益效果
显示视频的显示装置和方法可以具有以下优点。根据本发明的实施方式,自然显示模式和水平显示模式皆可以被用于单个视频,并且用户可以能够同时通过经由自然显示所显示的画面的摇动体验在对应视频的记录时的实况现场感以及经由水平显示所显示的图像的稳定显示。
另外,根据本发明的实施方式,通过使用在所选择的视频的显示期间被显示的、指示旋转信息的图标,用户可以能够在记录时生动地体验。此外,根据本发明的实施方式,通过使用视频播放设置或重设界面,用户可以容易地切换播放模式,从而增强用户方便。
附图说明
附图被包括以提供对本发明的进一步理解,并且被并入本申请并构成本申请一部分,附图例示了本发明的实施方式,并且与本说明书一起用来说明本发明的原理。附图中:
图1例示了根据本发明的实施方式的在显示装置上显示所记录的视频的示例;
图2例示了根据本发明的实施方式的在显示装置上显示所记录的视频的另一示例;
图3例示了根据本发明的示例性实施方式的与所记录的视频的各个旋转角度相应的示例性帧;
图4例示了根据本发明的示例性实施方式的在自然显示模式下显示所记录的视频的示例性情况;
图5例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的第一示例性情况;
图6例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的第二示例性情况;
图7例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的第三示例性情况;
图8例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的第四示例性情况;
图9例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的第五示例性情况;
图10例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的第六示例性情况;
图11例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的第七示例性情况;
图12例示了根据本发明的实施方式的示例性视频播放模式设置界面;
图13例示了根据本发明的实施方式的示例性视频播放模式重设界面;
图14例示了根据本发明的实施方式的指示旋转信息的图标;
图15例示了根据本发明的另一实施方式的指示旋转信息的图标;
图16例示了示出根据本发明的视频显示装置的结构的框图;
图17例示了根据本发明的第一实施方式的示出显示视频的方法的过程步骤的流程图;
图18例示了根据本发明的第二实施方式的示出显示视频的方法的过程步骤的流程图;
图19例示了示出在水平显示模式下显示图18所示的视频的方法的过程步骤的流程图;
图20例示了根据本发明的第三实施方式的示出显示视频的方法的过程步骤的流程图;以及
图21例示了根据本发明的第四实施方式的示出显示视频的方法的过程步骤的流程图。
具体实施方式
现在将详细地参照本发明的优选实施方式,其示例被例示在附图中。只要可能,相同的附图标记将在所有附图中用来指代相同或相似的部分。并且,本发明的范围和精神将不仅限于本文所呈现的示例性实施方式。
尽管本发明中使用的术语选自通常已知且使用的术语,但是其详细意义在本文的描述的相关部分中被描述。应该注意,本文所使用的术语可以依赖于本领域技术人员的意图或一般实践并且还依赖于新颖技术的出现而变化。本发明的描述中提及的术语中的一些已由本申请人以他的或她的判断选择了本文所使用的术语。此外,要求本发明不是简单地由所使用的实际术语而是由位于之内的各个术语的意义来理解。
图1例示了根据本发明的实施方式的在显示装置上显示所记录的视频的示例。根据本发明的该实施方式,显示装置110可以将从外部装置120获取的视频显示给用户130。
显示装置110可以包括具有数据显示和数据通信功能的各种类型的数字装置,诸如个人计算机(PC)、个人数字助理(PDA)、膝上型计算机、平板PC、电视接收机等。参照图1,依赖于所设置的视频播放模式,显示装置110可以处理所记录的视频,以显示150经处理的图像。显示装置110可以通过补偿与所记录的视频的各个帧相应的旋转来显示经处理的图像。将稍后参照图4至图11对此进行更详细的描述。
外部装置120可以包括能够记录视频的各种类型的数字装置。例如,外部装置120可以包括视频记录器、智能电话、PC、PDA、笔记本计算机、平板PC等。另外,外部装置还可以包括能够记录视频的其它各种类型的数字装置。在图1所示的示例中,外部装置120表示头戴式显示器(HMD)。在本文中,HMD 120可以包括摄像头(未示出)、通信单元(未示出)和传感器单元(未示出)。在本文中,传感器单元(未示出)包括重力传感器、地磁传感器、陀螺传感器、加速度传感器、倾斜传感器等。外部装置120可以通过这样的传感器单元来感测包括在视频中的多个帧的旋转信息。另外,HMD 120可以通过使用被安装在HMD 120上的摄像头(未示出)来记录视频,并且通过通信单元(未示出)将所记录的视频发送到显示装置110。而且,依赖于本发明的目的,以上描述的HMD 120可以被改变为其它各种装置或者用其它各种装置代替。例如,根据本发明的HMD 120可以包括能够由用户穿戴以便提供图像显示的各种装置,诸如眼安装显示器(Eye Mounted Display,EMD)、眼镜、目镜、眼罩、头戴式显示器(HWD)等。
另外,外部装置120和显示装置110可以通过使用各种形式的有线或无线通信装置来执行到和来自彼此的数据接收和/或发送。这时,可用的无线通信装置可以包括近场通信(NFC)、Zigbee、红外线通信、蓝牙、Wi-Fi等。并且,本发明将不仅限于以上所列举的无线通信装置。而且,外部装置120和外部装置110可以通过通用串行端口(USB)来执行数据发送。在本发明的描述中,外部装置120与显示装置110之间的通信可以通过使用以上所列举的通信装置中的任一个来执行,或者可以通过使用以上所列举的通信装置中的至少两个或更多个的组合形式来执行。
参照图1,HMD 120可以在被用户穿戴的同时执行视频140的记录。在这种情况下,因为HMD 120根据用户的移动而移动,所以通过HMD 120记录的视频可以包括旋转信息。在本文中,用户的移动可以包括步行、头部的倾斜、手的移动等。另外,旋转信息可以作为关于视频的元数据被包括。例如,旋转信息可以包括与视频的多个帧中的每个相应的旋转角度信息。旋转角度信息可以指示各个帧相对于水平状态旋转了的角度。在本文中,水平状态指代所显示的图像与地球重力的方向形成直角的状态。换句话说,水平状态可以包括当记录图像与水平线或地平线形成0°的旋转角度时的状态。水平状态还可以包括当记录图像与在记录图像中识别的水平线或地平线形成0°的旋转角度时的状态。另外,可以通过使用被包括在外部装置120中的重力传感器、地磁传感器、角度传感器等来测量旋转角度信息。此外,旋转信息可以包括记录与包括在视频中的多个帧中的每个相应的记录时间信息。记录时间信息可以指示各个帧相对于包括在视频中的多个帧中的每个的记录时间,或者记录时间信息可以指示各个帧在包括在视频中的多个帧中的时间顺序。HMD 120可以向显示单元110提供包括以上描述的旋转信息的视频。
又如,旋转信息可以包括与整个视频数据相应的旋转信息。更具体地,基于视频的记录时间流,旋转信息可以包括关于对应帧的旋转角度的变化的信息。例如,当视频的运行时间是10分钟时,旋转信息可以包括关于与10分钟视频对应的多个帧中的每个的旋转角度的变化的信息。在这种情况下,显示装置110可以使视频的帧与与对应帧的时间点相应的旋转信息相匹配,以确定各个帧的旋转角度。
此外,参照图1,HMD 120可以具有有预定范围的视角140。视角140对应于与穿戴HMD 120的用户的视场对应的预定区域。并且,视角140可以包括在预定角度范围内沿着HMD 120的正向的区域。在HMD 120前面示出的场景中,HMD 120可以记录视角140内的场景。另外,HMD 120可以给显示单元110提供视频,所述视频由在视角140范围内的场景构造。
图2例示了根据本发明的实施方式的在显示装置上显示所记录的视频的另一示例。更具体地,图2例示了根据本发明的实施方式的通过HMD 210来显示通过使用HMD 210所记录的记录视频220的示例。
参照图2,用户可以在穿戴HMD 210的同时记录视频。这时,如以上参照图1所描述的,HMD 210可以根据用户的移动而移动,并且通过HMD 210记录的视频可以包括旋转信息。
另外,HMD 210可以包括摄像头(未示出)、处理器(未示出)和传感器单元(未示出)。HMD 210可以通过摄像头(未示出)记录视角220内的视频,并且HMD 210可以利用处理器(未示出)根据视频播放模式来处理所记录的视频。并且,HMD 210可以使用传感器单元(未示出),以设置视频播放模式。将稍后参照图16更详细地描述传感器单元(未示出)。此外,用户可以在视角230内通过HMD 210查看根据视频播放模式经处理的视频。在这种情况下,穿戴HMD 210的用户可以在自然显示模式或水平显示模式下查看通过HMD 210所记录的视频。在视角230内显示的视频可以作为由HMD 210直接记录的视频而被显示,或者由HMD 210记录的视频可以在被旋转补偿之后被显示。
图3例示了根据本发明的示例性实施方式的与所记录的视频的各个旋转角度相应的示例性帧。更具体地,图3例示了构造所记录的视频的多个帧的一部分。视频由多个帧构造并且这样的帧可以对应于30个帧、60个帧等。图3所示的帧可以对应于构造由HMD记录的视频的帧的一部分。这样的帧对应于根据时间顺序记录的帧,并且如图3所示,视频的所获取的帧中的每个可以包括与各个帧的水平状态相应的旋转角度信息。
图3的(a)例示了当属于所获取的视频的帧的旋转角度为0°时的示例性情况。图3的(b)例示了当属于所获取的视频的帧的旋转角度为向左(即反时针方向)7°时的示例性情况。图3的(c)例示了当属于所获取的视频的帧的旋转角度为向左(即反时针方向)25°时的示例性情况。图3(d)例示了当属于所获取的视频的帧的旋转角度为向左(即反时针方向)45°时的示例性情况。另外,所记录的视频的多个帧可能由于各种因素(诸如用户的移动(例如,手在记录时的摇动)、风的强度等)而具有各种旋转角度。
图3所示的帧表示构造所记录的视频的多个帧的一部分,并且显示装置可以在自然显示模式下显示这样的帧,其中对应帧在不用旋转补偿加以处理的情况下被显示,或者可以在水平显示模式下显示这样的帧,其中对应帧在用旋转补偿加以处理之后被显示。将稍后参照图4至图11更详细地描述自然显示模式和水平显示模式。
图4例示了根据本发明的示例性实施方式的在自然显示模式下显示所记录的视频的示例性情况。如图4所示,视频显示装置可以在自然显示模式下显示包括旋转信息的视频,其中对应视频在不用旋转补偿加以处理的情况下被显示,所述旋转补偿基于旋转信息。因此,图4的(a)至图4的(e)所示的帧可以各自对应于构造所记录的视频的多个帧的一部分。另外,图4的(a)至图4的(e)所示的帧可以对应于根据特定时间顺序记录的帧,并且这样的帧可以对应于30个帧、60个帧等。
根据时间顺序,在图4所示的这些帧中,图4的(a)可以对应于旋转了0°的帧,图4的(b)可以对应于向左(即,反时针方向)旋转了25°的帧,图4的(c)可以对应于向左(即,反时针方向)旋转了45°的帧,图4的(d)可以对应于向左(即,反时针方向)旋转了7°的帧,以及图4的(b)可以对应于具有0°的旋转角度的帧。
如上所述,当根据本发明的视频显示装置在自然显示模式下显示视频时,通过查看画面的摇动或旋转,用户可以能够在记录时生动地体验。此外,当根据本发明的视频显示装置在自然显示模式下显示视频时,帧可以在不用任何类型的修改(诸如裁切或调整大小)加以处理的情况下被显示,并且可以在无需被放大的情况下查看记录帧。
图5至图7例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的示例性情况。图5例示了基于各个帧的旋转信息被旋转补偿以便水平地显示图4所示的帧的帧。参照图5,根据本发明的视频显示装置对构成视频的多个帧中的每个执行旋转补偿,使得能够水平地显示各个帧。这时,视频显示装置可以通过沿着实际旋转角度的相反方向并且和原始图像的实际旋转角度一样多地使各个帧旋转来执行水平显示。例如,如图5的(a)示,基于指示图4的(a)所示的帧的旋转角度是0°的旋转信息,视频显示装置可能不使图4的(a)的帧旋转。并且,如图5的(b)所示,基于指示图4的(b)所示的帧的旋转角度是向左(即,反时针方向)25°的旋转信息,视频显示装置可以使图4的(b)的帧向右(即,顺时针方向)旋转25°。并且,如图5的(c)所示,基于指示图4的(c)所示的帧的旋转角度是向左(即,反时针方向)45°的旋转信息,视频显示装置可以使图4的(c)的帧向右(即,顺时针方向)旋转45°。并且,如图5的(d)所示,基于指示图4的(d)所示的帧的旋转角度是向左(即,反时针方向)7°的旋转信息,视频显示装置可以使图4的(d)的帧向右(即,顺时针方向)旋转7°。最后,如图5的(e)所示,基于指示图4的(e)所示的帧的旋转角度是0°的旋转信息,显示装置可以不旋转图4的(e)的帧。
此外,参考图5,由于与图5的(b)、图5的(c)和图5的(d)对应的帧被旋转以得到水平显示,对应帧中的每个可以包括背景区域。由于帧被旋转,背景区域可以对应于视频未被显示在该帧内的区域。当帧具有矩形形状时背景区域可以被示出,而当帧具有圆形形状时背景区域可以不被示出。可以根据播放视频的帧的大小来确定帧的形状和大小。另选地,还可以根据记录图像的记录传感器的图像获取区域来确定帧的形状和大小。各个背景区域可以被指示为图5的(b)至图5(d)所示的阴影区域510、阴影区域520和阴影区域530。另外,背景区域在各个帧内的占有比可以依赖于对应帧的旋转角度信息而变化。当在没有修改的情况下在显示装置上显示图5的水平地显示的帧时,还可以在没有修改的情况下显示背景区域。由于背景区域的显示,用户会在查看所记录的视频时体验到不适。为了解决这个问题,将在下文中参照图6至图8详细地描述控制背景区域的方法。
图6例示了设置与图5所示的经旋转补偿的帧中的每个相应的裁切区域的示例。在本文中,裁切区域指代与请求被维持在帧中的特定记录场景对应的区域。换句话说,在记录场景内,被确定为不必要区域的区域被去除,并且剩余区域可以被称为裁切区域。裁切区域可以是控制图5所示的背景区域以便在水平显示模式下显示所记录的视频所需要的必要区域。
例如,裁切区域可以被显示为具有与原始帧的纵横比相同的纵横比的矩形区域。因此,如果初始帧的纵横比等于5:5,则裁切区域的纵横比也可以对应于5:5。参照图6,因为图6所示的各个帧的纵横比等于大约6:4,所以图6所示的各个帧的裁切区域的纵横比也可以对应于大约6:4。根据图6所示的本发明的实施方式,在图6的(a)中,因为帧不包括背景区域,所以裁切区域610可以与原始帧相同。在图6的(b)中,可以将裁切区域620设置成具有有6:4的纵横比并且不包括背景区域625的矩形形状。并且,在图6的(c)中,可以将裁切区域630设置成具有有6:4的纵横比并且不包括背景区域635的矩形形状。并且,在图6的(c)中,可以将裁切区域640设置成具有有6:4的纵横比并且不包括背景区域645的矩形形状。最后,在图6的(e)中,因为帧不包括背景区域,所以裁切区域650可以与原始帧相同。
此外,视频显示装置可以将针对视频的多个帧中的每个的裁切大小设置为某一大小。这将在视频正被显示时提供连续帧的更自然显示。例如,基于构成视频的多个帧中的每个的旋转信息,可以根据其中裁切区域被基本上设置成具有最小大小的帧来确定裁切大小。在本文中,其中裁切区域被基本上设置成具有最小大小的帧可以对应于具有被基本上设置成具有最大大小的被裁切区域的帧,以基于旋转角度信息执行多个帧中的对应帧的水平显示。这将防止背景区域在视频的显示期间被显示给用户。例如,在具有6:4的纵横比的帧中,可以基本上将裁切区域设置成在45°的旋转角度下具有最小大小。并且,在另一示例中,在具有5:5的纵横比的帧中,可以基本上将裁切区域设置成在45°的旋转角度下具有最小大小。另外,在裁切过程期间,显示装置也许能够使用旋转信息根据对应帧的纵横比来确定与基本上具有最大大小的裁切区域对应的旋转角度。参照图6,当图6所示的帧被设置成具有大约6:4的纵横比时,在图6的(a)至图6的(e)所示的帧中,图6的(c)所示的帧的裁切区域630可以对应于基本上具有最小大小的裁切区域。因此,可以基于图6的(c)的裁切区域630来确定图6所示的其它帧的裁切大小。换句话说,可以基于图6的(c)的裁切大小裁切图6所示的帧。
此外,除在构成视频的多个帧中具有基本上最小的裁切区域的至少一个帧以外,可以基于在剩余帧中具有与旋转补偿相应的基本上最小的裁切区域的帧确定裁切大小。因此,参照图6,在图6所示的帧中,图6的(c)所示的帧对应于具有基本上最大的被裁切区域的帧。并且,除图6的(c)以外,可以在水平显示模式下显示视频。在这种情况下,在图6的剩余帧中,图6的(b)所示的帧可以对应于具有与旋转补偿相应的基本上最小的裁切区域的帧。因此,可以基于图6(b)所示的帧的裁切区域620来确定图6所示的帧的裁切大小。因此,可以基于图6(b)的裁切大小裁切排除了图6(c)之外的图6所示的帧。在视频的多个帧中,除在对应视频的记录期间在异常大的旋转角度下记录的帧以外,剩余帧被转换为水平显示模式,使得视频显示装置能够在水平显示模式下更自然地显示视频。另外,当用户直接记录视频时,可以在类似的旋转角度范围内使帧旋转。当特定帧的旋转超过预定旋转角度范围时,对应帧可以被认为是具有错误记录的帧。并且,因此,排除了这样的帧可以提供视频的更自然显示。
图7例示了根据图6所示的裁切区域来裁切各个帧并且调整经裁切的帧的大小为与原始帧的大小相同的大小的示例。
例如,视频显示装置可以调整经裁切的帧的大小以适合原始帧的大小,并且然后可以组合经调整大小的帧,以显示视频。参照图7,图7所示的帧可以表示图6所示的帧,其被裁切成具有与图6的(c)所示的帧的裁切大小相同的大小,从而被调整大小为与图6的(c)所示的帧相同的比例。因此,图7所示的帧可以对应于被放大为与图6的经裁切的帧相同的比例的帧。更具体地,在水平显示模式下,视频显示装置可以通过进一步放大对应帧来显示在自然视频显示模式下播放的帧。这是因为多个帧中的每个能够在被旋转补偿和裁切之后被显示。在水平显示模式下,视频显示装置可以显示指示旋转信息的图标,使得用户能够识别原始视频或者被通知原始视频帧的旋转角度。将稍后参照图14和图15对此进行更详细的描述。
因此,通过在水平显示模式下查看视频,用户也许能够在不体验到旋转角度的水平状态下查看包括在记录时出现的旋转角度的视频帧。并且,因此,用户可以查看具有更大视觉稳定性的视频。
图8至图11例示了根据本发明的实施方式的在水平显示模式下显示所记录的视频的其它示例性情况。更具体地,视频显示装置可以基于预定标准将视频的多个帧划分成多个组,并且视频显示装置可以为各个组设置不同的视频显示模式。例如,图8例示了当显示模式被设置为水平显示模式时、并且当属于所记录的视频的各个帧的角度彼此大大不同时根据预定角度确定帧组并且水平地显示各个帧组的情况。
首先,参照图8,图8的(a)可以例示向左(即,反时针方向)旋转了85°的帧,图8的(b)可以例示向左(即,反时针方向)旋转了75°的帧,图8的(c)可以例示向左(即,反时针方向)旋转了45°的帧,图8的(d)可以例示向左(即,反时针方向)旋转了7°的帧,图8的(d)可以例示向左(即,反时针方向)旋转了3°的帧,以及图8的(f)可以例示旋转了0°的帧。而且,图8的(a)至图8的(f)所示的帧可以对应于构造所记录的视频的多个帧的一部分,并且这样的帧可以对应于被按特定时间顺序显示的帧。
在构成视频的这些帧中,当旋转了与预定旋转角度相同的角度或超过预定旋转角度的角度的帧彼此连续时,视频显示装置可以将连续帧设置为帧组(在下文中被称为“组A”)810。另外,在构成视频的这些帧中,当旋转了不超过预定旋转角度范围的角度的帧彼此连续时,视频显示装置可以设置另一帧组(在下文中被称为“组B”)820。在本文中,组A 810和组B 820可以对应于被按时间顺序记录的帧。
参照图8,图8的(a)、图8的(b)和图8的(c)所示的帧可以对应于组A 810,而图8的(d)、图8的(e)和图8的(f)所示的帧可以对应于组B 820。在这种情况下,作为用于确定帧组的标准的预定旋转角度可以对应于45°。
在另一示例中,基于多个帧中的场景的变化点,视频显示装置可以将对应帧分组为多个组。在本文中,可以基于帧之前或之后的状态改变来确定场景的变化点。帧之前和之后的状态改变可以包括帧内的颜色配准的变化。例如,视频显示装置可以基于与当视频显示装置确定场景已被完全改变(诸如淡入效果或淡出效果)时的点对应的视频帧来确定场景的变化点。淡出效果对应于期间图像变得较暗的场景的变化,而淡入效果对应于期间图像变得较明亮的场景的变化。另外,在另一示例中,视频显示装置可以基于当在视频的显示期间显示黑空白帧或白空白帧时的情况来确定场景的变化点。因此,当在视频的显示期间显示黑空白帧或白空白帧时,视频显示装置可以将放置在黑空白帧或白空白帧之前和之后的帧分组为单个组。
图9例示了根据本发明的实施方式的对图8所示的帧中的每个执行旋转补偿以得到水平显示的示例。
参照图9,图9的(a)、图9的(b)和图9的(c)所示的帧可以对应于组A 910,而图9的(d)、图9的(e)和图9的(f)所示的帧可以对应于组B 920。更具体地,如以上参照图8所描述的,组A 910可以对应于旋转了预定旋转角度或超过预定旋转角度的帧的组。并且,组B 920可以对应于不超过预定旋转角度的帧的组。如图9的(a)所示,基于指示图8的(a)所示的帧的旋转角度对应于向左(即,反时针方向)85°的旋转信息,视频显示装置可以使图8的(a)所示的帧向右(即,顺时针方向)旋转85°以得到水平显示。并且,如图9的(b)所示,基于指示图8的(b)所示的帧的旋转角度对应于向左(即,反时针方向)75°的旋转信息,视频显示装置可以使图8的(b)所示的帧向右(即,顺时针方向)旋转75°以得到水平显示。另外,如图9的(c)所示,基于指示图8的(c)所示的帧的旋转角度对应于向左(即,反时针方向)45°的旋转信息,视频显示装置可以使图8的(c)所示的帧向右(即,顺时针方向)旋转45°以得到水平显示。并且,如图9的(d)所示,基于指示图8的(d)所示的帧的旋转角度对应于向左(即,反时针方向)7°的旋转信息,视频显示装置可以使图8的(d)所示的帧向右(即,顺时针方向)旋转7°以得到水平显示。而且,如图9的(e)所示,基于指示图8的(e)所示的帧的旋转角度对应于向左(即,反时针方向)3°的旋转信息,视频显示装置可以使图8的(e)所示的帧向右(即,顺时针方向)旋转3°以得到水平显示。最后,如图9的(f)所示,基于指示图8的(f)所示的帧的旋转角度对应于0°的旋转信息,视频显示装置可能不使图8的(f)所示的帧旋转。
另外,如图9所示,随着图9的(a)至图9的(f)所示的帧中的每个被旋转以得到水平显示,未被显示在帧内的背景区域可能出现。在本文中,背景区域可以被指示为图9的(a)至图9的(e)所示的这些帧内的阴影区域911、912、913、921和922。在水平显示模式下,当视频在基于与图9的(a)至图9的(f)所示的帧中的每个相应的旋转角度仅用旋转补偿加以处理之后被显示时,用户可能由于背景区域而在集中于显示视频时有困难。为了解决这个问题,需要背景区域的控制,将参照图10和图11在下文中对此进行更详细的描述。
图10例示了根据本发明的实施方式的为各个帧组确定裁切区域的示例,其中帧组在图8中被分组并且在图9中被旋转补偿。
在构成视频的多个帧中,视频显示装置可以将旋转了预定旋转角度或超过预定旋转角度的帧(即,组A)裁切为第一大小。并且,在构成视频的多个帧中,视频显示装置可以将不超过预定旋转角度的帧(即,组B)裁切为第二大小。例如,第一大小和第二大小中的每个可以是根据旋转补偿的裁切区域基本上成为最小大小的大小。当基于与基本上具有最小大小的裁切大小对应的裁切区域裁切多个帧时,可以去除各个帧的背景区域。裁切区域可以指示将被维持在记录场景中的帧内的区域。
参照图10,图10的(a)、图10的(b)和图10的(c)可以对应于组A 1010。并且,在组A 1010情况下,与图10的(a)的裁切区域1011和图10的(b)的裁切区域1013相比,图10的(c)的裁切区域1015的大小可以是基本上最小大小。因此,与图10的(a)的被裁切区域和图10的(b)的被裁切区域相比,图10的(c)的被裁切区域可以是基本上最大大小。相对于组A 1010,视频显示装置可以基于图10的(c)所示的帧的裁切区域1015裁切剩余帧。当基于图10的(c)所示的帧的裁切区域1015裁切剩余帧时,视频显示装置可以在去除包括在组A 1010的各个帧中的背景区域1012、背景区域1014和背景区域1016之后显示帧。另外,可以按照具有与对应于6:4的原始视频帧的纵横比相同的纵横比的矩形形状裁切图10的(c)的裁切区域1015。因此,还可以按照各自具有与图10的(c)所示的帧的裁切区域的纵横比相同的纵横比的矩形形状裁切图10的(a)和图10的(b)所示的帧。
而且,参照图10,图10的(d)、图10的(e)和图10的(f)可以对应于组B 1020。并且,在组B 1020情况下,与图10的(e)的裁切区域1023和图10的(f)的裁切区域1025相比,图10的(d)的裁切区域1021的大小可以是基本上最小大小。因此,与图10的(e)的被裁切区域和图10的(f)的被裁切区域相比,图10的(d)的被裁切区域可以基本上对应于最大大小。相对于组B 1020,视频显示装置可以基于图10的(d)所示的帧的裁切区域1021裁切剩余帧。当基于图10的(d)所示的帧的裁切区域1021裁切剩余帧时,显示装置可以显示去除包括在组B 1020的各个帧中的背景区域1022和背景区域1024之后的帧。另外,可以按照具有与对应于6:4的原始视频帧的纵横比相同的纵横比的矩形形状裁切图10的(d)的裁切区域1021。因此,还可以按照各自具有与图10的(d)所示的帧的裁切区域的纵横比相同的纵横比的矩形形状裁切图10的(e)和图10的(f)所示的帧。
此外,如图10所示,组A 1010的裁切大小可以相对地小于组B 1020的裁切大小。因为属于组A 1010的帧的旋转角度大于属于组B 1020的帧的旋转角度,所以从原始帧裁切的背景区域的比例可能变得更大。
图11例示了针对各个组根据图10中所确定的裁切区域来裁切视频的各个帧并且调整经裁切的帧的大小以适合原始帧的大小的示例。例如,视频显示装置可以调整属于各个组的经裁切的帧的大小以适合相应的原始帧的大小。然后,在组合经调整大小的帧之后,视频显示装置可以显示经处理的视频。因此,视频显示装置可以在不用对在单一视频内各自具有各种旋转角度的帧执行任何放大的情况下以各种比例显示视频。
参照图11,图11的(a)、图11的(b)和图11的(c)可以对应于组A 1110。在基于图10的(c)的裁切区域被裁切之后,可以调整组A 1110的帧的大小以适合原始帧的大小。另外,图11的(d)、图11的(e)和图11的(f)可以对应于组B 1120。在基于图10的(d)的裁切区域被裁切之后,可以调整组B 1120的帧的大小以适合原始帧的大小。图11的(a)至图11的(f)可以对应于正通过沿着时间顺序记录的帧。
此外,如图10所示,图10的(a)至图10的(c)所示的帧(即,组A 1010)的裁切大小可以相对地小于图10的(d)至图10的(f)所示的帧(即,组B 1020)的裁切大小。因此,参照图11,其中帧被裁切和调整大小,与图11的(d)至图11的(f)所示的帧相比可以在更放大状态下显示图11的(a)至图11的(c)所示的帧。并且,通过查看图11中显示的帧,用户可能不能够容易地识别哪些帧具有相对更大的旋转角度。因此,在水平显示模式下,视频显示装置可以显示指示旋转信息的图标,使得用户能够识别原始视频或者被通知原始视频的旋转角度。将参照图14和图15对此进行更详细的描述。
因此,视频显示装置可能不共同地为多个帧设置单一裁切大小。在这种情况下,因为视频显示装置能够根据各种情况来调整和控制裁切区域的大小,所以与共同地执行旋转补偿相比视频显示装置能够容易地维持原始视频。
图12例示了根据本发明的实施方式的示例性视频播放模式设置界面。更具体地,图12例示了当通过视频显示装置1210来显示视频时提供视频播放模式设置界面1220的示例。例如,可以在视频的显示之前提供视频播放模式设置界面1220。在另一示例中,当已经在显示中的视频被停止或暂停时可以提供视频播放模式设置界面1220。
参照图12,视频显示装置1210可以向用户提供视频播放模式设置界面1220,使得用户能够经由通过用户的输入的手动模式或者经由预定自动模式来设置视频播放模式。在本文中,当视频显示装置1210的视频播放模式由手动模式设置时,用户的输入可以由包括在视频显示装置中的传感器单元(未示出)感测到。用户输入可以包括通过用户的手势、语音、触摸等执行的输入。而且,将稍后参照图16详细地描述传感器单元(未示出)。此外,视频显示装置1210的视频播放模式能够由自动模式设置。在本文中,当在视频的多个帧中具有最大旋转角度的帧的旋转角度与预定角度相同或超过预定角度时,可以将视频显示装置1210设置成在水平显示模式下播放视频。另外,当具有最大旋转角度的帧的旋转角度不超过预定角度时,可以将视频显示装置1210设置成在自然显示模式下播放视频。然而,预定自动模式可以依赖于设定而变化。并且,因此,本发明将不仅限于以上所描述的示例性实施方式。
参照图12,当通过视频播放模式设置界面1220检测到‘是’输入时,可以将视频显示装置1210设置为手动模式。另选地,当通过视频播放模式设置界面1220检测到‘否’输入时,可以将视频显示装置1210设置为预定自动模式。将参照图18详细地描述手动模式或预定自动模式的操作。并且,将稍后参照图17至图19更详细地描述视频播放模式的设置。
图13例示了根据本发明的实施方式的示例性视频播放模式重设界面。更具体地,图13例示了当在通过视频显示装置1310显示视频的同时重设视频播放模式时提供视频播放模式重设界面1320的示例。
参照图13,在显示视频的同时,当视频显示装置1310检测到用户输入时,视频显示装置1310可以提供用于重设视频播放模式的视频播放模式重设界面1320。在本文中,用户的输入可以由包括在视频显示装置中的传感器单元(未示出)感测到,并且这样的用户输入可以包括通过用户的手势、语音、触摸等执行的输入。而且,将稍后参照图16详细地描述传感器单元(未示出)。在另一示例中,在在自然显示模式下显示视频的同时,当在超过预定时间的时间间隔期间显示具有与预定旋转角度相同或超过预定旋转角度的旋转角度的视频的帧时,视频显示装置1310可以提供视频播放模式重设界面1320。此外,在水平显示期间,当旋转角度的变化不大时,在自然显示模式下查看视频对于用户来说可能更有趣。因此,在正在水平显示模式下显示视频的同时,当在不超过预定时间的时间间隔期间显示具有不超过预定旋转角度的旋转角度的视频的帧时,视频显示装置1310可以提供视频播放模式重设界面1320。
参照图13,当通过视频播放模式重设界面1320相对于视频播放模式的重设检测到“是”输入时,不管初始视频播放模式如何,可以将视频显示装置1310设置成从当检测到用户输入时的时间点开始将播放模式重设为另一视频播放模式。例如,在视频显示装置1310最初已在自然显示模式下显示的情况下,当相对于视频播放模式的重设检测到“是”输入时,视频显示装置1310可以从当检测到用户输入(即,“是”输入)时的时间点开始在水平显示模式下显示视频。另选地,当通过视频播放模式重设界面1320相对于视频播放模式的重设检测到“否”输入时,视频显示装置1310可以设置成维持它初始的播放模式。例如,在视频显示装置1310最初已在自然显示模式下显示的情况下,当相对于视频播放模式的重设检测到“否”输入时,视频显示装置1310可以继续在自然显示模式下显示。将稍后参照图20和图21更详细地描述这样的视频播放模式重设。
此外,当视频播放模式正被重设时,可以从当视频播放被重设时的时间点开始在视频显示装置1310的新近重设的视频播放模式下显示视频。另外,当视频播放模式正被重设时,可以重设整个视频的播放模式而不管重设时间点如何,使得视频显示装置1310能够在所重设的播放模式下显示对应视频。因此,在视频的帧中,可以更少地放大具有较小旋转角度的帧,并且可以更多放大具有较大旋转角度的帧。因此,用户也许能够用更多不同的查看方法查看视频。
图14例示了根据本发明的实施方式的指示旋转信息的图标。更具体地,视频显示装置1410可以按照预定大小并且在预定位置处显示指示旋转角度的图标1420。可以在自然显示模式下或在水平显示模式下显示指示旋转角度的这样的图标1420。例如,指示旋转角度的图标1420可以包括包括有液体物质的球状图标。在本文中,包括在球状图标中的液体物质可以根据帧的旋转角度而改变。并且,指示旋转角度的图标1420可以包括指示水平状态的第一指示符以及指示相对于第一指示符的倾斜状态的第二指示符。例如,指示旋转角度的图标1420可以由对应于第一指示符的沿着水平方向的直线以及指示对应于第二指示符的指示倾斜角度的直线构成。
参照图14,通过使用指示旋转角度的图标1420,可以向用户指示已经在相对于水平状态向左(即,反时针方向)旋转了25°的状态下记录了当前显示的帧。另外,指示旋转角度的图标1420还可以包括指示对应帧相对于视频的总体帧的时间顺序的图标(未示出)。因此,在视频的显示期间用户可以生动地体验到好像比视频的记录的实际时间更真实。
图15例示了根据本发明的另一实施方式的指示旋转信息的图标。更具体地,当视频播放模式被设置为水平显示模式时,视频显示装置1510可以显示指示旋转信息的图标1520。
参照图15,指示旋转信息的图标1520可以包括正在自然显示模式下显示的画面的显示。参照图15,可以在视频显示装置1510的右下区域处按照矩形形状显示指示旋转信息的图标1520。另外,除正在自然显示模式下显示的画面之外,指示旋转信息的图标1520可以包括指示对应帧相对于视频的总体帧的时间顺序的图标(未示出)。因此,用户也许能够在更稳定状态下在水平显示模式下查看视频,同时在记录视频时生动地体验。
图16例示了示出根据本发明的视频显示装置的结构的框图。如图16所示,根据本发明的示例性实施方式的视频显示装置1600可以包括通信单元1610、显示单元1620、处理器1630、传感器单元1640和存储器1650。
首先,通信单元1610可以执行与外部装置(未示出)和各种协议的通信,以发送和/或接收数据。在本文中,外部装置(未示出)可以包括图1中所示出的HMD。另外,通信单元1610可以经由有线通信或无线通信访问外部装置(未示出),从而能够发送和/或接收数字数据,诸如内容。而且,通信单元1610可以相对于外部装置收发(即,发送和接收)图像、声音等。为了访问有线网络,通信单元1610可以例如装配有以太网终端。此外,为了访问无线网络,通信装置1610可以例如使用各种通信标准,诸如无线LAN(WLAN)(或Wi-Fi)、无线宽带(Wibro)、世界微波接入互操作性(Wimax)、高速下行链路分组接入(HSDPA)等。
显示单元1620在显示屏幕上输出图像。更具体地,显示单元1620可以基于处理器1630的控制命令来输出视频。更具体地,显示单元1620可以基于处理器1630的控制命令在自然显示模式或水平显示模式下显示通过通信单元1610所获取的视频。
处理器1630可以执行各种内容和应用并且可以在显示装置1600内处理数据。参照图16,处理器1630可以为通过通信单元1610所获取的视频设置视频播放模式。更具体地,处理器1630首先对由外部装置所编码和提供的视频进行解码。另外,如以上参照图4所描述的,处理器1630可以将视频播放模式设置为自然显示模式,所述自然显示模式可以在没有任何进一步处理的情况下显示经解码的视频。而且,如以上参照图5至图11所描述的,处理器1630可以将视频播放模式设置为水平显示模式,所述水平显示模式显示了在对经解码的视频执行旋转补偿、裁切和调整大小之后的视频。
并且,如以上参照图12所描述的,处理器1630可以提供可以经由通过用户的输入的手动模式或者经由预定自动模式来设置视频播放模式的视频播放模式设置界面。另外,如以上参照图13所描述的,在视频正被显示的同时,并且当已检测到用户输入时,处理器1630可以提供可以重设视频播放模式的视频播放模式重设界面。另选地,如以上参照图13所描述的,在视频正被显示的同时,并且当在超过预定时间的时间间隔期间显示超过预定旋转角度的多个帧时,视频显示装置1600可以提供视频播放模式重设界面。此外,如以上参照图14和图15所描述的,处理器1630可以将视频显示装置1600设置成显示指示构成视频的多个帧的旋转信息的图标。此外,将稍后参照图17至图21更详细地描述由处理器1630所执行的操作。
传感器单元1640可以感测用户相对于显示装置1600的各种输入并且可以感测用户的环境。传感器单元1640可以包括多个感测装置。在本文中,感测装置共同地指代包括触摸传感器、音频传感器、视频传感器、全球定位系统(GPS)传感器、压力传感器、热传感器、重力传感器、地磁传感器、运动传感器、陀螺传感器、加速度传感器、红外线传感器、倾斜传感器、亮度传感器、高度传感器、气味传感器、深度传感器、弯曲传感器、成像传感器等的感测装置。在本文中,感测装置可以感测用户和用户的环境的各种输入。更具体地,传感器单元1640可以感测用户输入并且可以将所感测到的用户输入递送给处理器1630,使得处理器1630能够设置或重设视频播放模式。
可以通过使用电可擦可编程只读存储器(EEPROM)来实现存储器1650。并且,除EEPROM之外,存储器1650还可以包括存储或暂时存储数据的所有类型的存储单元。存储器1650还可以存储用于在处理器1630内处理和控制各个信号的程序,并且存储器1650还可以存储信号处理后的图像、声音或数据信号。另外,存储器1650还可以执行暂时存储从通信单元1610或传感器单元1640输入的图像、声音或数据信号的功能。此外,存储器1650可以存储从通信单元1610或传感器单元1640输入的一个或多个应用或应用的列表。
图17例示了根据本发明的第一实施方式的示出显示视频的方法的过程步骤的流程图。将在下文中详细地描述的图17的各个过程步骤可以由图16所示的显示装置1600的处理器1630控制。
首先,视频显示装置可以获取包括旋转信息的视频(S1710)。因此,视频显示装置可以获取由外部装置所记录的视频,或者可以获取由视频显示装置直接记录的视频。
视频显示装置可以设置视频播放模式(S1720)。该视频播放模式可以包括以上参照图4所描述的自然显示模式以及以上参照图5至图11所描述的水平显示模式。基于预定视频播放模式,视频显示装置可以显示相应视频(S1730)。自然显示模式可以在不用对对应视频执行旋转补偿的情况下显示所获取的视频。并且,水平显示模式可以显示基于旋转信息被旋转补偿的视频。
图18例示了根据本发明的第二实施方式的示出显示视频的方法的过程步骤的流程图。在下文中,在本文中参照图18所描述的各个过程步骤可以由图16中所示出的显示装置1600的处理器1630控制。在图18所示的实施方式中,为了简单将省略与图17所示的实施方式相同或相似的部分的详细描述。
首先,视频显示装置可以获取包括旋转信息的视频(S1810)。然后,视频显示装置可以确定是否选择需要用户输入的手动模式作为视频播放模式(S1820)。视频显示装置可以提供视频播放模式设置界面,该视频播放模式设置界面可以通过需要用户的输入的手动模式或通过预定自动模式来设置视频播放模式。
在步骤1820中,当视频播放模式被设置为手动模式时,视频显示装置可以提供用于确定是否将视频播放模式设置为水平显示模式的视频播放模式设置界面(S1830)。视频播放模式设置界面可以由以上参照图14所描述的方法提供。在步骤S1830中,当视频播放模式被设置为水平显示模式时,视频显示装置可以在水平显示模式下显示视频(S1840)。将参照图19详细地描述用于在水平显示模式下显示视频的操作。参照图19,当视频播放模式被设置为水平显示模式时,视频显示装置可以基于旋转信息对视频的多个帧执行旋转补偿(S1910)。更具体地,视频显示装置可以对所获取的视频数据进行解码,以获取将被显示的帧。然后,基于与各个帧相应的旋转角度信息,可以对对应帧进行旋转补偿。另外,可以通过使用以上参照图3至图9所描述的方法来执行步骤S1910。
相对于经旋转补偿的帧,视频显示装置可以将多个帧裁切为某一大小(S1920)。更具体地,步骤S1920可以由以上参照图5或图11所描述的方法来实现。在本文中,在视频的多个帧中,可以根据旋转补偿基于基本上具有最小裁切区域大小的帧来确定裁切大小。另外,基于旋转信息,与基本上具有最小大小的裁切区域对应的帧可以是与对于水平显示基本上具有最大大小的被裁切区域对应的帧。
而且,视频显示装置可以组合和显示经裁切的帧(S1930)。更具体地,视频显示装置可以调整经裁切的帧的每个的大小为包括在所记录的视频中的帧的大小,然后,视频显示装置可以组合和显示经调整大小的帧。此外,步骤S1930可以由以上参照图7或图11所描述的方法来实现。
此外,在步骤S1820中,当确定了视频播放模式将不被设置为手动模式时,视频显示装置可以将视频播放模式设置为自动播放模式(S1850)。当视频显示装置将视频播放模式设置为自动播放模式时,视频显示装置可以确定视频的多个帧的最大旋转角度与预定角度相同还是超过预定角度(S1860)。在多个帧的旋转角度中,当最大旋转角度等于或超过预定角度时,可以将视频显示装置设置为水平显示模式(S1870)。在视频显示模式被设置为水平显示模式的情况下,视频显示装置可以在水平显示模式下显示视频(S1840)。可以通过使用以上参照图19所描述的方法来执行过程步骤S1840。
此外,在步骤S1860中,当多个帧的最大旋转角度不超过预定角度时,可以将视频显示装置设置为自然显示模式(S1880)。因此,视频显示装置可以在不用执行任何旋转补偿的情况下在自然显示模式下显示所记录的视频(S1890)。另外,在步骤S1830中,当通过用户输入确定了视频播放模式将不被设置为水平显示模式时,可以将视频显示装置设置为自然显示模式(S1880)。在这种情况下,如上所述,视频显示装置可以在不用执行任何旋转补偿的情况下在自然显示模式下显示所记录的视频(S1890)。
图20例示了根据本发明的示出显示视频的方法的过程步骤的流程图。在下文中,在本文中参照图20所描述的各个过程步骤可以由图16中所示出的显示装置1600的处理器1630控制。另外,图20例示了示出在视频的显示期间通过使用用户的输入来重设视频显示模式的方法的过程步骤的流程图。
首先,视频显示装置在所设置的视频播放模式下显示视频(S2010)。更具体地,根据最初设置的视频播放模式,视频显示装置可以在自然显示模式或水平显示模式下播放视频。
在视频的显示期间,视频显示装置可以接收用户输入(S2020)。用户输入可以包括用户的手势或语音。例如,在自然显示模式下显示视频期间,由于视频的旋转角度中的显著改变,视频显示装置可以从希望在水平显示模式下查看对应视频的用户接收用户输入。在另一示例中,在水平显示模式下显示视频期间,视频显示装置可以从生动地希望查看对应视频的用户接收用户输入。在本文中,用户输入可以由图16中所示出的传感器单元1640感测到。
基于所接收到的用户输入,视频显示装置可以重设视频播放模式(S2030)。更具体地,基于用户希望改变被最初设置为视频显示模式的自然显示模式的输入,可以将视频显示装置的视频播放模式从自然显示模式重设为水平显示模式。例如,基于用户希望改变被最初设置为视频显示模式的水平显示模式的输入,可以将视频显示装置的视频播放模式从水平显示模式重设为自然显示模式。
根据所重设的视频播放模式,视频显示装置可以显示对应视频(S2040)。例如,视频显示装置可以重设与在重设视频播放模式的点之后的帧相应的视频播放模式并且可以在所重设的显示模式下显示对应帧。在另一示例中,不管重设视频播放模式的点如何,视频显示装置可以相对于整个视频重设视频播放模式并且可以相应地显示视频。
图21例示了根据本发明的第四实施方式的示出显示视频的方法的过程步骤的流程图。在下文中,在本文中参照图21所描述的各个过程步骤可以由图16中所示出的显示装置1600的处理器1630控制。另外,图21例示了示出在视频的显示期间通过使用预定自动模式来重设视频显示模式的方法的过程步骤的流程图。在图21所示的实施方式中,为了简单将省略与图20所示的实施方式相同或相似的部分的详细描述。
首先,视频显示装置在所设置的视频播放模式下显示视频(S2110)。更具体地,根据最初设置的视频播放模式,视频显示装置可以在自然显示模式或水平显示模式下播放视频。
在视频的显示期间,视频显示装置可以确定超过预定角度的帧是否在超过预定时间间隔的同时被连续地显示(S2120)。当超过预定角度的帧被确定为被显示而不超过预定时间间隔时,视频显示装置可以继续在最初设置的视频播放模式下显示对应视频(S2125)。例如,在自然显示模式下显示视频期间,当超过预定角度的帧被显示而不超过预定时间间隔时,视频显示装置可以继续在自然显示模式下显示对应视频。此外,除本发明的以上描述的实施方式之外,本发明还可以包括自动地重设视频播放模式的另一示例性实施方式。
此外,在步骤S2120中,当超过预定角度的帧被确定为在不超过预定时间间隔的同时被连续地显示时,视频显示装置可以重设最初设置的视频播放模式(S2130)。例如,在自然显示模式下显示视频期间,当超过预定角度的帧被确定为在不超过预定时间间隔的同时被连续地显示时,可以将视频播放模式从自然显示模式重设为水平显示模式。
并且,视频显示装置可以基于所重设的视频播放模式来显示视频(S2140)。
此外,尽管已经区分和划分了附图以便有助于对本发明的描述,但是本发明可以被设计成通过组合本发明的以上描述的实施方式中的一些来形成新的实施方式。而且,每当本领域技术人员需要时,本发明的范围包括设计可由计算机读取的记录介质,该计算机具有记录在其中的用于执行本发明的以上描述的实施方式的程序。
根据本发明的视频显示装置和显示视频的方法可能不仅限于根据本发明的示例性实施方式的以上描述的构造和方法。因此,可以完全地或部分地通过选择性地组合本发明的各个示例性实施方式来构造本发明的示例性实施方式的变化。
此外,根据本发明的视频显示方法可以作为能够由处理器读取的记录介质中的代码被实现,所述代码能够由设置在图像显示装置中的处理器读取。能够由处理器读取的记录介质包括存储能够由处理器读取的所有类型的记录装置。能够由处理器读取的记录介质的示例可以包括ROM、RAM、磁带、软盘、光学数据存储装置等。并且,还可以包括以载波(诸如经由因特网的传输)的形式实现的示例性记录介质。并且,能够由处理器读取的记录介质可以被散布在通过网络连接的计算机系统内。并且,可以通过使用分散方法来存储和执行能够由处理器读取的代码。
对于本领域技术人员将显而易见的是,在不脱离本发明的精神或范围的情况下,能够对本发明做出各种修改和变化。因此,本发明旨在涵盖此发明的修改和变化,只要它们落在所附权利要求及其等同物的范围内即可。还显而易见的是,本发明的这些变化将不与本发明的技术范围或精神单独地或分别地理解。
并且,装置发明和方法发明皆在本发明的此说明书中被描述。因此,必要时,可以补充地应用两个发明的描述。
本发明的模式
已经在用于执行本发明的最佳模式下描述了各种实施方式。
虽然为了方便已经分别地描述了附图,但是可以组合附图中描述的实施方式以实现新的实施方式。根据本公开的智能手表可能不有限地应用于实施方式的前述构造,而是通过所有或一些实施方式的组合选择性地构造以做出各种修改。
虽然已经参照示例性实施方式特别示出和描述了本公开,但是本领域技术人员应当理解,在不脱离如由以下权利要求所限定的本公开的精神和范围的情况下,可以在其中做出形式和细节上的各种修改。不应该根据本公开的技术精神或前景单独地理解这样的修改。
工业适用性
如上所述,本发明全部地或部分地适用于电子装置。
Claims (20)
1.一种显示所记录的视频的视频显示装置,该视频显示装置包括:
通信单元,该通信单元获取包括旋转信息的视频;
显示单元,该显示单元显示所述视频;以及
处理器,该处理器设置视频播放模式,
其中,所述视频播放模式包括在不用基于所述旋转信息执行旋转补偿的情况下显示所获取的视频的自然显示模式,以及基于所述旋转信息执行所述旋转补偿来显示所获取的视频的水平显示模式,
其中,当所述视频播放模式对应于所述水平显示模式时,所述视频显示装置基于所述旋转信息来执行所述视频的多个连续帧的旋转补偿,并且显示被裁切为某一大小的所述视频的所述多个连续帧中的每个,并且
其中,裁切大小是基于所述视频的所述多个连续帧的所述旋转信息来确定的。
2.根据权利要求1所述的视频显示装置,其中,所述旋转信息包括指示相对于所述视频的所述多个帧的水平状态的旋转角度的旋转角度信息。
3.根据权利要求2所述的视频显示装置,其中,所述处理器的所述旋转补偿基于所述旋转角度信息使所述视频的所述多个连续帧在所述旋转角度的相反方向上与所述旋转角度的大小一样多地旋转。
4.根据权利要求1所述的视频显示装置,其中,所述裁切大小是基于所述旋转信息基于在所述视频的所述多个帧中具有最小裁切区域的帧来确定的。
5.根据权利要求4所述的视频显示装置,其中,所述裁切大小是还基于所述视频的所述多个帧的纵横比来确定的。
6.根据权利要求1所述的视频显示装置,其中,除在所述视频的所述多个帧中具有最小裁切区域的至少一个帧以外,所述裁切大小是基于根据所述旋转补偿而具有最小裁切区域的剩余帧中的帧来确定的。
7.根据权利要求1所述的视频显示装置,其中,所述处理器提供播放模式设置界面,该播放模式设置界面被构造成根据通过用户输入的手动模式或预定自动模式来设置所述视频播放模式。
8.根据权利要求7所述的视频显示装置,其中,当根据所述预定自动模式设置所述视频播放模式时,如果在所述视频的所述多个帧中具有最大旋转角度的帧的旋转角度超过预定角度,则在所述水平显示模式下显示所述视频,并且,如果在所述视频的所述多个帧中具有最大旋转角度的帧的所述旋转角度不超过所述预定角度,则在所述自然显示模式下显示所述视频。
9.根据权利要求1所述的视频显示装置,其中,所述旋转信息包括关于所述视频的所述多个帧的所述旋转角度的变化的信息。
10.根据权利要求1所述的视频显示装置,其中,所述处理器在所述视频的所述多个帧当中,对于定位在设置所述视频播放模式的时间点之后的帧,基于所设置的视频播放模式来显示所述视频。
11.根据权利要求1所述的视频显示装置,其中,所述处理器在所述视频的所述多个帧当中,对于定位在设置所述视频播放模式的时间点之后的帧,基于所设置的视频播放模式来显示所述视频。
12.根据权利要求1所述的视频显示装置,其中,当在所述视频的显示期间检测到用户输入时,所述处理器还提供播放模式重设界面,该播放模式重设界面被构造成重设所设置的视频播放模式。
13.根据权利要求1所述的视频显示装置,其中,当超过预定角度的帧在所述视频的显示期间超过预定时间间隔的同时被显示时,所述处理器还提供播放模式重设界面,该播放模式重设界面被构造成重设所设置的视频播放模式。
14.根据权利要求7所述的视频显示装置,其中,所述用户输入包括语音输入、手势输入或触摸输入。
15.根据权利要求1所述的视频显示装置,其中,所述处理器显示指示所述视频的所述多个帧的旋转信息的图标。
16.根据权利要求15所述的视频显示装置,其中,指示所述旋转信息的所述图标包括指示水平方向的指示符以及指示旋转角度的指示符。
17.根据权利要求1所述的视频显示装置,其中,当所述视频播放模式对应于所述水平显示模式时,所述处理器调整经裁切的所述多个帧的大小并且显示经调整大小的帧。
18.根据权利要求1所述的视频显示装置,其中,所述处理器基于预定标准将所述视频的所述多个帧划分成多个帧组,并且针对所述多个帧组中的各个帧组设置所述视频播放模式。
19.根据权利要求18所述的视频显示装置,其中,所述处理器基于场景的变化点将所述视频的所述多个帧划分成所述多个帧组,并且
其中,场景的所述变化点是基于在帧之前和之后出现的变化来确定的。
20.一种显示所记录的视频的方法,该方法包括以下步骤:
获取包括旋转信息的视频的步骤,其中,所述旋转信息包括关于所述视频的所述多个帧的旋转角度信息;
设置视频播放模式的步骤,其中,所述视频播放模式包括在不用基于所述旋转信息执行旋转补偿的情况下显示所获取的视频的自然显示模式,以及基于所述旋转信息执行所述旋转补偿来显示所获取的视频的水平显示模式;以及
基于所设置的视频播放模式来显示所述视频的步骤,其中,当所述视频播放模式对应于所述水平显示模式时,所述视频的多个连续帧基于所述旋转信息被旋转补偿,并且所述视频的所述连续帧中的每个被裁切为某一大小,从而被显示,以及
其中,裁切大小是基于所述视频的所述多个连续帧的所述旋转信息来确定的。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120130962A KR101978214B1 (ko) | 2012-11-19 | 2012-11-19 | 동영상 디스플레이 장치 및 그 방법 |
KR10-2012-0130962 | 2012-11-19 | ||
US13/721,767 | 2012-12-20 | ||
US13/721,767 US9462218B2 (en) | 2012-11-19 | 2012-12-20 | Video display device and method of displaying video |
PCT/KR2013/007673 WO2014077497A1 (en) | 2012-11-19 | 2013-08-27 | Video display device and method of displaying video |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104813220A true CN104813220A (zh) | 2015-07-29 |
CN104813220B CN104813220B (zh) | 2018-07-06 |
Family
ID=50728043
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380060347.9A Expired - Fee Related CN104813220B (zh) | 2012-11-19 | 2013-08-27 | 视频显示装置和显示视频的方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9462218B2 (zh) |
EP (1) | EP2920638B1 (zh) |
KR (1) | KR101978214B1 (zh) |
CN (1) | CN104813220B (zh) |
WO (1) | WO2014077497A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110225401A (zh) * | 2019-07-12 | 2019-09-10 | 青岛一舍科技有限公司 | 一种可调整视角的视频播放方法及装置 |
CN111669638A (zh) * | 2020-02-28 | 2020-09-15 | 海信视像科技股份有限公司 | 一种视频旋转播放方法及显示设备 |
CN113079410A (zh) * | 2020-01-03 | 2021-07-06 | 三星电子株式会社 | 显示装置及其控制方法 |
WO2022142270A1 (zh) * | 2020-12-31 | 2022-07-07 | 北京达佳互联信息技术有限公司 | 视频播放方法及视频播放装置 |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9762848B2 (en) * | 2013-03-15 | 2017-09-12 | Google Inc. | Automatic adjustment of video orientation |
US9491365B2 (en) * | 2013-11-18 | 2016-11-08 | Intel Corporation | Viewfinder wearable, at least in part, by human operator |
US20150244938A1 (en) * | 2014-02-25 | 2015-08-27 | Stelios Petrakis | Techniques for electronically adjusting video recording orientation |
US9648062B2 (en) * | 2014-06-12 | 2017-05-09 | Apple Inc. | Systems and methods for multitasking on an electronic device with a touch-sensitive display |
JP6518069B2 (ja) * | 2015-01-09 | 2019-05-22 | キヤノン株式会社 | 表示装置、撮像システム、表示装置の制御方法、プログラム、及び記録媒体 |
US11269580B2 (en) * | 2017-02-13 | 2022-03-08 | Comcast Cable Communications, Llc | Guided collaborative viewing of navigable image content |
CN107027041B (zh) * | 2017-04-18 | 2019-12-27 | 深圳市智能现实科技有限公司 | 场景展示方法及装置 |
TWI633465B (zh) * | 2017-11-21 | 2018-08-21 | 瑞軒科技股份有限公司 | 虛擬實境裝置及虛擬實境裝置的操作方法 |
US11966578B2 (en) | 2018-06-03 | 2024-04-23 | Apple Inc. | Devices and methods for integrating video with user interface navigation |
JP7313865B2 (ja) * | 2019-03-29 | 2023-07-25 | キヤノン株式会社 | 撮像装置及び制御方法 |
CN112565625A (zh) * | 2019-09-26 | 2021-03-26 | 北京小米移动软件有限公司 | 视频处理方法、装置及介质 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6563535B1 (en) * | 1998-05-19 | 2003-05-13 | Flashpoint Technology, Inc. | Image processing system for high performance digital imaging devices |
GB0208654D0 (en) * | 2002-04-16 | 2002-05-29 | Koninkl Philips Electronics Nv | Image processing for video or photographic equipment |
US7324137B2 (en) | 2004-01-29 | 2008-01-29 | Naomichi Akizuki | System for automatically generating continuous developed still image from video image of inner wall of tubular object |
JP2005317062A (ja) * | 2004-04-27 | 2005-11-10 | Sanyo Electric Co Ltd | 光ディスク再生装置 |
US7386190B2 (en) | 2004-04-30 | 2008-06-10 | Corel Tw Corp. | Method for image cropping |
JP2006086870A (ja) * | 2004-09-16 | 2006-03-30 | Canon Inc | 動画像再生装置 |
EP1768387B1 (en) | 2005-09-22 | 2014-11-05 | Samsung Electronics Co., Ltd. | Image capturing apparatus with image compensation and method therefor |
KR100686310B1 (ko) | 2005-12-29 | 2007-02-22 | 엠텍비젼 주식회사 | 이미지 기울임 보정 방법, 프로세서 및 이를 위한프로그램이 기록된 기록매체 |
US20070201833A1 (en) * | 2006-02-17 | 2007-08-30 | Apple Inc. | Interface for defining aperture |
JP4926533B2 (ja) * | 2006-05-02 | 2012-05-09 | キヤノン株式会社 | 動画像処理装置、動画像処理方法及びプログラム |
US20090040308A1 (en) | 2007-01-15 | 2009-02-12 | Igor Temovskiy | Image orientation correction method and system |
EP2368440B1 (en) * | 2007-06-29 | 2014-06-04 | DSM IP Assets B.V. | Feed additive composition comprising benzoic acid and a mixture of adsorbed essential oil compounds |
CN101374198A (zh) * | 2007-08-24 | 2009-02-25 | 鸿富锦精密工业(深圳)有限公司 | 摄像装置及其影像自动正立方法 |
JP4582185B2 (ja) * | 2008-04-22 | 2010-11-17 | ソニー株式会社 | 情報処理装置及び情報処理方法 |
US8749647B2 (en) * | 2009-04-20 | 2014-06-10 | Kyocera Corporation | Image capturing device and image capturing method |
JP5487722B2 (ja) | 2009-05-25 | 2014-05-07 | ソニー株式会社 | 撮像装置と振れ補正方法 |
TW201230805A (en) | 2011-01-04 | 2012-07-16 | Aptos Technology Inc | Video playback apparatus and method |
US8611015B2 (en) * | 2011-11-22 | 2013-12-17 | Google Inc. | User interface |
US8737821B2 (en) * | 2012-05-31 | 2014-05-27 | Eric Qing Li | Automatic triggering of a zoomed-in scroll bar for a media program based on user input |
-
2012
- 2012-11-19 KR KR1020120130962A patent/KR101978214B1/ko active IP Right Grant
- 2012-12-20 US US13/721,767 patent/US9462218B2/en active Active
-
2013
- 2013-08-27 EP EP13855990.1A patent/EP2920638B1/en not_active Not-in-force
- 2013-08-27 CN CN201380060347.9A patent/CN104813220B/zh not_active Expired - Fee Related
- 2013-08-27 WO PCT/KR2013/007673 patent/WO2014077497A1/en active Application Filing
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110225401A (zh) * | 2019-07-12 | 2019-09-10 | 青岛一舍科技有限公司 | 一种可调整视角的视频播放方法及装置 |
CN110225401B (zh) * | 2019-07-12 | 2022-04-29 | 青岛一舍科技有限公司 | 一种可调整视角的视频播放方法及装置 |
CN113079410A (zh) * | 2020-01-03 | 2021-07-06 | 三星电子株式会社 | 显示装置及其控制方法 |
CN113079410B (zh) * | 2020-01-03 | 2023-05-23 | 三星电子株式会社 | 显示装置及其控制方法 |
CN111669638A (zh) * | 2020-02-28 | 2020-09-15 | 海信视像科技股份有限公司 | 一种视频旋转播放方法及显示设备 |
CN111669638B (zh) * | 2020-02-28 | 2022-07-15 | 海信视像科技股份有限公司 | 一种视频旋转播放方法及显示设备 |
WO2022142270A1 (zh) * | 2020-12-31 | 2022-07-07 | 北京达佳互联信息技术有限公司 | 视频播放方法及视频播放装置 |
Also Published As
Publication number | Publication date |
---|---|
CN104813220B (zh) | 2018-07-06 |
EP2920638A1 (en) | 2015-09-23 |
EP2920638A4 (en) | 2016-07-27 |
US20140140677A1 (en) | 2014-05-22 |
WO2014077497A1 (en) | 2014-05-22 |
EP2920638B1 (en) | 2019-04-10 |
KR20140064058A (ko) | 2014-05-28 |
KR101978214B1 (ko) | 2019-05-14 |
US9462218B2 (en) | 2016-10-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104813220A (zh) | 视频显示装置和显示视频的方法 | |
EP3736676B1 (en) | User interfaces for capturing and managing visual media | |
DK201970593A1 (en) | User interfaces for capturing and managing visual media | |
CN106688227B (zh) | 多摄像装置、多摄像方法 | |
TWI621097B (zh) | 行動裝置、操作方法及非揮發性電腦可讀取記錄媒體 | |
US20140354837A1 (en) | Electronic apparatus | |
US10593018B2 (en) | Picture processing method and apparatus, and storage medium | |
US11297224B2 (en) | Automated eyewear device sharing system | |
KR20160146281A (ko) | 전자 장치 및 전자 장치에서 이미지 표시 방법 | |
KR20150026336A (ko) | 웨어러블 디바이스 및 그 컨텐트 출력 방법 | |
US20220326823A1 (en) | Method and apparatus for operating user interface, electronic device, and storage medium | |
CN105579890A (zh) | 头戴式显示器及其控制方法 | |
WO2014185146A1 (ja) | 表示制御装置、表示制御方法および記録媒体 | |
CN105474070B (zh) | 头戴式显示设备及其控制方法 | |
JPWO2015170520A1 (ja) | 情報処理システムおよび情報処理方法 | |
CN110633380B (zh) | 图片处理界面的控制方法、装置、电子设备及可读介质 | |
JP2021052289A (ja) | 画像処理方法、プログラム、画像処理装置および画像処理システム | |
US20110110564A1 (en) | Electronic apparatus and image display | |
CN112825040A (zh) | 用户界面的显示方法、装置、设备及存储介质 | |
US20100156942A1 (en) | Display device and method for editing images | |
KR102138520B1 (ko) | 헤드 마운트 디스플레이 및 제어 방법 | |
CN103037137A (zh) | 图像再生装置及图像再生方法 | |
CN104063034A (zh) | 计算机装置及其显卡效能优化方法 | |
US11366318B2 (en) | Electronic device and control method thereof | |
CN105376479A (zh) | 图像生成装置以及图像生成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180706 Termination date: 20210827 |