CN106303706A - 基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 - Google Patents
基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 Download PDFInfo
- Publication number
- CN106303706A CN106303706A CN201610779011.3A CN201610779011A CN106303706A CN 106303706 A CN106303706 A CN 106303706A CN 201610779011 A CN201610779011 A CN 201610779011A CN 106303706 A CN106303706 A CN 106303706A
- Authority
- CN
- China
- Prior art keywords
- video
- face
- visual angle
- viewing
- virtual reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 230000000007 visual effect Effects 0.000 title claims abstract description 35
- 238000009877 rendering Methods 0.000 claims abstract description 11
- 230000008569 process Effects 0.000 claims abstract description 8
- 238000004364 calculation method Methods 0.000 claims abstract description 6
- 239000011159 matrix material Substances 0.000 claims description 10
- 239000000700 radioactive tracer Substances 0.000 claims description 8
- 230000000694 effects Effects 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 4
- 238000013507 mapping Methods 0.000 claims description 3
- 241000406668 Loxodonta cyclotis Species 0.000 claims description 2
- 238000000205 computational method Methods 0.000 claims description 2
- 241000208340 Araliaceae Species 0.000 claims 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 1
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 1
- 230000015572 biosynthetic process Effects 0.000 claims 1
- 235000008434 ginseng Nutrition 0.000 claims 1
- 230000009471 action Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610779011.3A CN106303706A (zh) | 2016-08-31 | 2016-08-31 | 基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610779011.3A CN106303706A (zh) | 2016-08-31 | 2016-08-31 | 基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106303706A true CN106303706A (zh) | 2017-01-04 |
Family
ID=57672741
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610779011.3A Pending CN106303706A (zh) | 2016-08-31 | 2016-08-31 | 基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106303706A (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107027015A (zh) * | 2017-04-28 | 2017-08-08 | 广景视睿科技(深圳)有限公司 | 基于增强现实的3d动向投影系统以及用于该系统的投影方法 |
CN107181930A (zh) * | 2017-04-27 | 2017-09-19 | 新疆微视创益信息科技有限公司 | 针对虚拟现实的监控系统及其监控方法 |
CN108053495A (zh) * | 2018-01-19 | 2018-05-18 | 姚惜珺 | 2d数字资源转化为可动态变化的3d数字资源的方法及系统 |
CN108076355A (zh) * | 2017-12-26 | 2018-05-25 | 百度在线网络技术(北京)有限公司 | 视频播放控制方法和装置 |
CN108345821A (zh) * | 2017-01-24 | 2018-07-31 | 成都理想境界科技有限公司 | 面部追踪方法及设备 |
WO2018166224A1 (zh) * | 2017-03-14 | 2018-09-20 | 深圳Tcl新技术有限公司 | 全景视频的目标追踪显示方法、装置及存储介质 |
CN108874115A (zh) * | 2017-05-11 | 2018-11-23 | 腾讯科技(深圳)有限公司 | 会话场景展示方法、装置和计算机设备 |
CN109151540A (zh) * | 2017-06-28 | 2019-01-04 | 武汉斗鱼网络科技有限公司 | 视频图像的交互处理方法及装置 |
CN109561297A (zh) * | 2017-09-26 | 2019-04-02 | 深圳市裂石影音科技有限公司 | 基于虚拟现实环境的视角处理方法和装置 |
CN109671142A (zh) * | 2018-11-23 | 2019-04-23 | 南京图玩智能科技有限公司 | 一种智能美妆方法及智能美妆镜 |
CN109788193A (zh) * | 2018-12-26 | 2019-05-21 | 武汉市澜创信息科技有限公司 | 一种摄像单元控制方法、装置、设备及介质 |
TWI678660B (zh) * | 2018-10-18 | 2019-12-01 | 宏碁股份有限公司 | 電子系統以及影像處理方法 |
CN110536726A (zh) * | 2017-04-28 | 2019-12-03 | 索尼互动娱乐股份有限公司 | Vr环境的第二屏幕虚拟窗口 |
CN110750161A (zh) * | 2019-10-25 | 2020-02-04 | 郑子龙 | 一种交互系统、方法、移动设备及计算机可读介质 |
CN111093068A (zh) * | 2018-10-23 | 2020-05-01 | 中国电信股份有限公司 | 全景视频提供方法、虚拟现实终端、平台和系统 |
CN112887793A (zh) * | 2021-01-25 | 2021-06-01 | 脸萌有限公司 | 视频处理方法、显示设备和存储介质 |
CN113170231A (zh) * | 2019-04-11 | 2021-07-23 | 华为技术有限公司 | 跟随用户运动控制播放视频内容的方法和装置 |
CN115175004A (zh) * | 2022-07-04 | 2022-10-11 | 闪耀现实(无锡)科技有限公司 | 用于视频播放的方法、装置、可穿戴设备及电子设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102271271A (zh) * | 2011-08-17 | 2011-12-07 | 清华大学 | 生成多视点视频的装置及方法 |
CN105208368A (zh) * | 2015-09-23 | 2015-12-30 | 北京奇虎科技有限公司 | 显示全景数据的方法及装置 |
CN105245838A (zh) * | 2015-09-29 | 2016-01-13 | 成都虚拟世界科技有限公司 | 一种全景视频播放方法及播放器 |
CN105843541A (zh) * | 2016-03-22 | 2016-08-10 | 乐视网信息技术(北京)股份有限公司 | 全景视频中的目标追踪显示方法和装置 |
-
2016
- 2016-08-31 CN CN201610779011.3A patent/CN106303706A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102271271A (zh) * | 2011-08-17 | 2011-12-07 | 清华大学 | 生成多视点视频的装置及方法 |
CN105208368A (zh) * | 2015-09-23 | 2015-12-30 | 北京奇虎科技有限公司 | 显示全景数据的方法及装置 |
CN105245838A (zh) * | 2015-09-29 | 2016-01-13 | 成都虚拟世界科技有限公司 | 一种全景视频播放方法及播放器 |
CN105843541A (zh) * | 2016-03-22 | 2016-08-10 | 乐视网信息技术(北京)股份有限公司 | 全景视频中的目标追踪显示方法和装置 |
Cited By (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108345821B (zh) * | 2017-01-24 | 2022-03-08 | 成都理想境界科技有限公司 | 面部追踪方法及设备 |
CN108345821A (zh) * | 2017-01-24 | 2018-07-31 | 成都理想境界科技有限公司 | 面部追踪方法及设备 |
WO2018166224A1 (zh) * | 2017-03-14 | 2018-09-20 | 深圳Tcl新技术有限公司 | 全景视频的目标追踪显示方法、装置及存储介质 |
CN107181930A (zh) * | 2017-04-27 | 2017-09-19 | 新疆微视创益信息科技有限公司 | 针对虚拟现实的监控系统及其监控方法 |
CN107181930B (zh) * | 2017-04-27 | 2020-04-14 | 新疆微视创益信息科技有限公司 | 针对虚拟现实的监控系统及其监控方法 |
CN110536726A (zh) * | 2017-04-28 | 2019-12-03 | 索尼互动娱乐股份有限公司 | Vr环境的第二屏幕虚拟窗口 |
CN110536726B (zh) * | 2017-04-28 | 2024-02-27 | 索尼互动娱乐股份有限公司 | Vr环境的第二屏幕虚拟窗口 |
WO2018196070A1 (zh) * | 2017-04-28 | 2018-11-01 | 广景视睿科技(深圳)有限公司 | 基于增强现实的3d动向投影系统以及用于该系统的投影方法 |
CN107027015A (zh) * | 2017-04-28 | 2017-08-08 | 广景视睿科技(深圳)有限公司 | 基于增强现实的3d动向投影系统以及用于该系统的投影方法 |
CN108874115A (zh) * | 2017-05-11 | 2018-11-23 | 腾讯科技(深圳)有限公司 | 会话场景展示方法、装置和计算机设备 |
CN108874115B (zh) * | 2017-05-11 | 2021-06-08 | 腾讯科技(深圳)有限公司 | 会话场景展示方法、装置和计算机设备 |
CN109151540A (zh) * | 2017-06-28 | 2019-01-04 | 武汉斗鱼网络科技有限公司 | 视频图像的交互处理方法及装置 |
CN109561297B (zh) * | 2017-09-26 | 2021-05-04 | 深圳市裂石影音科技有限公司 | 基于虚拟现实环境的视角处理方法和装置 |
CN109561297A (zh) * | 2017-09-26 | 2019-04-02 | 深圳市裂石影音科技有限公司 | 基于虚拟现实环境的视角处理方法和装置 |
CN108076355A (zh) * | 2017-12-26 | 2018-05-25 | 百度在线网络技术(北京)有限公司 | 视频播放控制方法和装置 |
CN108053495B (zh) * | 2018-01-19 | 2019-05-28 | 姚惜珺 | 2d数字资源转化为可动态变化的3d数字资源的方法及系统 |
CN108053495A (zh) * | 2018-01-19 | 2018-05-18 | 姚惜珺 | 2d数字资源转化为可动态变化的3d数字资源的方法及系统 |
TWI678660B (zh) * | 2018-10-18 | 2019-12-01 | 宏碁股份有限公司 | 電子系統以及影像處理方法 |
CN111093068A (zh) * | 2018-10-23 | 2020-05-01 | 中国电信股份有限公司 | 全景视频提供方法、虚拟现实终端、平台和系统 |
CN109671142A (zh) * | 2018-11-23 | 2019-04-23 | 南京图玩智能科技有限公司 | 一种智能美妆方法及智能美妆镜 |
CN109671142B (zh) * | 2018-11-23 | 2023-08-04 | 南京图玩智能科技有限公司 | 一种智能美妆方法及智能美妆镜 |
CN109788193A (zh) * | 2018-12-26 | 2019-05-21 | 武汉市澜创信息科技有限公司 | 一种摄像单元控制方法、装置、设备及介质 |
CN113170231A (zh) * | 2019-04-11 | 2021-07-23 | 华为技术有限公司 | 跟随用户运动控制播放视频内容的方法和装置 |
CN110750161A (zh) * | 2019-10-25 | 2020-02-04 | 郑子龙 | 一种交互系统、方法、移动设备及计算机可读介质 |
CN112887793A (zh) * | 2021-01-25 | 2021-06-01 | 脸萌有限公司 | 视频处理方法、显示设备和存储介质 |
CN112887793B (zh) * | 2021-01-25 | 2023-06-13 | 脸萌有限公司 | 视频处理方法、显示设备和存储介质 |
CN115175004A (zh) * | 2022-07-04 | 2022-10-11 | 闪耀现实(无锡)科技有限公司 | 用于视频播放的方法、装置、可穿戴设备及电子设备 |
CN115175004B (zh) * | 2022-07-04 | 2023-12-08 | 闪耀现实(无锡)科技有限公司 | 用于视频播放的方法、装置、可穿戴设备及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106303706A (zh) | 基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 | |
CN106464854B (zh) | 图像编码和显示 | |
US20110085017A1 (en) | Video Conference | |
CN103402106B (zh) | 三维图像显示方法及装置 | |
CN101587386B (zh) | 光标处理方法、装置及系统 | |
US20130038729A1 (en) | Participant Collaboration On A Displayed Version Of An Object | |
TW202013149A (zh) | 擴增實境的影像展示方法、裝置及設備 | |
WO2018067680A1 (en) | System and method of capturing and rendering a stereoscopic panorama using a depth buffer | |
US9001115B2 (en) | System and method for three-dimensional visualization of geographical data | |
CN104134235B (zh) | 真实空间和虚拟空间的融合方法和融合系统 | |
JP2005295004A (ja) | 立体画像処理方法および立体画像処理装置 | |
CN105898138A (zh) | 全景视频播放方法及装置 | |
CN105069827A (zh) | 一种采用三维模型处理视频转场的方法 | |
US9955120B2 (en) | Multiuser telepresence interaction | |
CN106296686A (zh) | 一种用静态和动态摄像机相结合对运动物体逐帧三维重构方法 | |
JP2014095808A (ja) | 画像生成方法、画像表示方法、画像生成プログラム、画像生成システム、および画像表示装置 | |
KR101198557B1 (ko) | 시청자세를 반영하는 3차원 입체영상 생성 시스템 및 방법 | |
JP2014095809A (ja) | 画像生成方法、画像表示方法、画像生成プログラム、画像生成システム、および画像表示装置 | |
CN102340633A (zh) | 一种利用多台摄像机生成鱼眼效果图片的方法 | |
CN105488801A (zh) | 球幕电影实拍和三维虚拟场景结合的方法及系统 | |
CN103702099A (zh) | 一种基于头部追踪的超大视角集成成像3d显示方法 | |
CN105898338A (zh) | 全景视频播放方法及装置 | |
CN107484036A (zh) | 一种弹幕显示方法和装置 | |
CN108234994B (zh) | 一种人眼位置确定方法及装置 | |
CN103248910A (zh) | 三维成像系统及其图像再现方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: 310053 B2010, two floor, North (two), six and 368 Road, Binjiang District, Hangzhou, Zhejiang. Applicant after: Hangzhou Dang Hong Polytron Technologies Inc Address before: 310053 B2010, two floor, North (two), six and 368 Road, Binjiang District, Hangzhou, Zhejiang. Applicant before: HANGZHOU DANGHONG TECHNOLOGY CO., LTD. |
|
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: 310053 E, 16 floor, A block, Paradise software garden, 3 West Gate Road, Xihu District, Hangzhou, Zhejiang. Applicant after: Hangzhou Dang Hong Polytron Technologies Inc Address before: 310053 B2010, two floor, North (two), six and 368 Road, Binjiang District, Hangzhou, Zhejiang. Applicant before: Hangzhou Dang Hong Polytron Technologies Inc |
|
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170104 |