CN114285933A - 一种实现手机视频、图片随人脸位置变化而变化的方法 - Google Patents
一种实现手机视频、图片随人脸位置变化而变化的方法 Download PDFInfo
- Publication number
- CN114285933A CN114285933A CN202111587068.0A CN202111587068A CN114285933A CN 114285933 A CN114285933 A CN 114285933A CN 202111587068 A CN202111587068 A CN 202111587068A CN 114285933 A CN114285933 A CN 114285933A
- Authority
- CN
- China
- Prior art keywords
- image
- change
- face
- player
- mobile phone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008859 change Effects 0.000 title claims abstract description 37
- 238000000034 method Methods 0.000 title claims abstract description 25
- 238000005516 engineering process Methods 0.000 claims abstract description 15
- 230000000694 effects Effects 0.000 claims abstract description 9
- 230000001815 facial effect Effects 0.000 claims abstract description 6
- 230000003993 interaction Effects 0.000 abstract description 3
- 230000008569 process Effects 0.000 description 6
- 230000008447 perception Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
Abstract
本申请公开了一种实现手机视频、图片随人脸位置变化而变化的方法，步骤如下：步骤一、接入面部识别sdk；步骤二、获取手机的摄像头权限；步骤三、启动sdk后在回调中获取面部锚点的变化；步骤四、插入一条影像节目，使用播放器对影像进行播放，在播放器中开放相应的rgb色值变化的接口，以及使用openvc技术对图片虚化的接口；步骤五、当面部识别sdk锚点发生变化的时候，调用rjb色值变化的接口，实现影像相应的滤镜效果；或，当面部识别sdk锚点发生变化的时候，调用播放器图片虚化的接口，实现影像相应的清晰度变化。本申请采用face++与IJK视频播放器的联动，增加了影像播放与用户的交互。
Description
技术领域
本申请涉及一种实现手机视频、图片随人脸位置变化而变化的方法，属于移动互联网终端应用技术领域。
背景技术
随着移动互联网的不断深入，生活中接触到越来越多的终端应用，终端应用在使用过程中，如果使用者未进行操作，终端应用比如影像播放是持续播放，无法与观看者产生互动；当观看者因其他事情暂时离开移动互联网终端，终端应用的使用状态会持续原有状态；比如影像播放会一直持续下去，导致使用者错过重要情节。随着人脸位置识别技术的不断发展，申请号为202010991311的发明技术方案将人脸位置跟踪引入视频会议中，同样的，人脸位置识别技术也可以用于手机影像播放的技术改进。
发明内容
本申请的目的是增加用户在播放影像过程中的动态感知。
为了达到上述目的，本申请的技术方案是提供了一种实现手机视频、图片随人脸位置变化而变化的方法，其特征在于，方法步骤如下：
步骤一、接入面部识别sdk；
步骤二、获取手机的摄像头权限；
步骤三、启动sdk后在回调中获取面部锚点的变化；
步骤四、插入一条影像节目，使用播放器对影像进行播放，在播放器中开放相应的rgb色值变化的接口，以及使用openvc技术对图片虚化的接口；
步骤五、当面部识别sdk锚点发生变化的时候，调用rjb色值变化的接口，实现影像相应的滤镜效果，即不同面部位置展示时，影像展示不同的饱和度与滤镜效果；或，当面部识别sdk锚点发生变化的时候，调用播放器图片虚化的接口，实现影像相应的清晰度变化，即不同面部位置时，影像展示清晰与不清晰的变化。
其中，所述面部识别sdk为face++面部识别sdk。
其中，所述播放器为IJK播放器。
本申请基于Face++(面部识别技术)与IJK视频播放器的联动，面部识别后将结果告知播放器，播放器可以作出不同的应变措施，增加了影像播放与用户交互能力，以及各种信息精准的投放(如广告等)，所有操作在终端完成、可以保护用户观看影像时候的隐私。
附图说明
图1为实施例中提供的实现手机视频、图片随人脸位置变化而变化的方法实现逻辑图。
具体实施方式
为使本申请更明显易懂，兹以优选实施例，并配合附图作详细说明如下。
实施例
本实施例提供的是实现手机视频、图片随人脸位置变化而变化的方法，基于面部识别技术的不断成熟，将面部识别技术引入到视频、图片(下简称为影响)播放过程中(既影像播放过程中前置摄像头开始工作)；并通过对视频播放器进行二次开发与打包，实现影像可以随着人面部的变化而产生变化，准确的说，即当面部未能被识别到的时候，手机上的影像是无法正常进行观看的，随着面部移动到慢慢聚焦识别后，影像的清晰度、颜色饱和度、滤镜效果等便会差异化呈现出来，这种呈现方式，因为可以更智能化，能够增加用户使用app过程中的整体体验与感知度。
本申请目的是构建在手机app上的影像播放方法，通过对更多的用户的行为分析，因地制宜的制定出最优的影像播放方案，如用户坐着、躺着时影像的柔和度变化；外界环境发生变化时影像的明亮、声音大小的智能变化等，从而使影像播放过程中的整体体验更好；具体的，本方法的目的包括：1、增加用户在播放影像过程中的动态感知；2、基于Face++(面部识别技术)与视频播放器的联动，即面部识别的精准度告知播放器后，播放器可以作出不同的应变措施；3、增加影像与用户交互能力，以及各种信息精准的投放(如广告等)，并且可以保护到用户观看影像时候的隐私。
为了实现上述目的，本实施例基于人脸识别技术的不断成熟，以及影像技术的不断提升，将二者技术做了结合处理；具体的技术方案如下：
1.调试工具界面生成：接入face++面部识别sdk，接入可支持编辑的IJK播放器，配置相应的Xcode配置信息，使项目可以正常的编译成功；
2.调试工具方法绑定：申请face++平台相应的appid、key、密钥等信息。调试完成，并正确启动sdk：
实现手机影像随人脸位置变化而变化的方法步骤为：
(1)接入face++面部识别sdk；
(2)获取手机的摄像头权限；
(3)启动sdk后在回调中获取到面部锚点的变化；
(4)插入一条影像节目，使用之前接入的IJK播放器对影像进行播放，在IJK播放器中开放相应的rgb色值变化的接口，以及使用openvc技术对图片虚化的接口；
(5)当面部识别sdk锚点发生变化的时候，调用rjb色值变化的接口，即可实现影像相应的滤镜效果，即不同面部位置展示时，影像展示不同的饱和度与滤镜效果；
(6)当面部识别sdk锚点发生变化的时候，调用播放器图片虚化的接口，即可实现影像相应的清晰度变化，即不同面部位置时，影像展示清晰与不清晰的变化。
上述方法相对现有的视频播放器，实现如下优点和效果：
1.可用性提升：影像随面部饱和度与色值的变化可以更好的让用户感觉到差异与舒适，影像清晰度的变化可以更好的保护用户隐私。
2.操作更加智能化：之前的影像播放都要用户自己手动去操作才用可能实现影像的一些变化，现在可以更加智能的实现该方法。
3.应用范围广：随着影像技术的井喷式发展，面部识别技术这个功能不单单只应用在影像录制阶段，可以在播放层面有更好的解读和使用。
Claims (3)
1.一种实现手机视频、图片随人脸位置变化而变化的方法，其特征在于，方法步骤如下：
步骤一、接入面部识别sdk；
步骤二、获取手机的摄像头权限；
步骤三、启动sdk后在回调中获取面部锚点的变化；
步骤四、插入一条影像节目，使用播放器对影像进行播放，在播放器中开放相应的rgb色值变化的接口，以及使用openvc技术对图片虚化的接口；
步骤五、当面部识别sdk锚点发生变化的时候，调用rjb色值变化的接口，实现影像相应的滤镜效果，即不同面部位置展示时，影像展示不同的饱和度与滤镜效果；或，当面部识别sdk锚点发生变化的时候，调用播放器图片虚化的接口，实现影像相应的清晰度变化，即不同面部位置时，影像展示清晰与不清晰的变化。
2.根据权利要求1所述的实现手机视频、图片随人脸位置变化而变化的方法，其特征在于，所述面部识别sdk为face++面部识别sdk。
3.根据权利要求1所述的实现手机视频、图片随人脸位置变化而变化的方法，其特征在于，所述播放器为IJK播放器。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111587068.0A CN114285933A (zh) | 2021-12-23 | 2021-12-23 | 一种实现手机视频、图片随人脸位置变化而变化的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111587068.0A CN114285933A (zh) | 2021-12-23 | 2021-12-23 | 一种实现手机视频、图片随人脸位置变化而变化的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114285933A true CN114285933A (zh) | 2022-04-05 |
Family
ID=80874373
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111587068.0A Pending CN114285933A (zh) | 2021-12-23 | 2021-12-23 | 一种实现手机视频、图片随人脸位置变化而变化的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114285933A (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102740154A (zh) * | 2011-04-14 | 2012-10-17 | 联发科技股份有限公司 | 应用于多媒体内容的播放方法与播放装置 |
| CN105187742A (zh) * | 2014-06-12 | 2015-12-23 | 宏祐图像科技(上海)有限公司 | 一种动态调整电视画面清晰度的方法 |
| CN106131671A (zh) * | 2016-07-01 | 2016-11-16 | 合信息技术（北京）有限公司 | 一种调节视频清晰度的方法及装置 |
| CN106686257A (zh) * | 2017-03-10 | 2017-05-17 | 广东欧珀移动通信有限公司 | 一种移动终端的控制方法、装置及移动终端 |
| CN108966010A (zh) * | 2018-07-10 | 2018-12-07 | 南阳师范学院 | 在线视频分辨率的调节方法、装置、存储介质及终端 |
| CN111859025A (zh) * | 2020-07-03 | 2020-10-30 | 广州华多网络科技有限公司 | 表情指令生成方法、装置、设备及存储介质 |
-
2021
- 2021-12-23 CN CN202111587068.0A patent/CN114285933A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102740154A (zh) * | 2011-04-14 | 2012-10-17 | 联发科技股份有限公司 | 应用于多媒体内容的播放方法与播放装置 |
| CN105187742A (zh) * | 2014-06-12 | 2015-12-23 | 宏祐图像科技(上海)有限公司 | 一种动态调整电视画面清晰度的方法 |
| CN106131671A (zh) * | 2016-07-01 | 2016-11-16 | 合信息技术（北京）有限公司 | 一种调节视频清晰度的方法及装置 |
| CN106686257A (zh) * | 2017-03-10 | 2017-05-17 | 广东欧珀移动通信有限公司 | 一种移动终端的控制方法、装置及移动终端 |
| CN108966010A (zh) * | 2018-07-10 | 2018-12-07 | 南阳师范学院 | 在线视频分辨率的调节方法、装置、存储介质及终端 |
| CN111859025A (zh) * | 2020-07-03 | 2020-10-30 | 广州华多网络科技有限公司 | 表情指令生成方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112822542A (zh) | 视频合成方法、装置、计算机设备和存储介质 | |
| US8098261B2 (en) | Pillarboxing correction | |
| CN111654715B (zh) | 直播的视频处理方法、装置、电子设备及存储介质 | |
| CN105979339B (zh) | 一种窗口显示方法及客户端 | |
| CN109327727A (zh) | 一种WebRTC中的直播流处理方法及推流客户端 | |
| US20050204287A1 (en) | Method and system for producing real-time interactive video and audio | |
| JP2015528120A (ja) | 目のトラッキングに基づくディスプレイの一部の選択的強調 | |
| TWI407790B (zh) | 影音互動系統及其方法 | |
| CN112839190B (zh) | 虚拟图像与现实场景同步视频录制或直播的方法 | |
| JP2003244425A (ja) | 伝送画像の修飾パターンの登録方法および装置ならびに再生方法および装置 | |
| CN111246270B (zh) | 一种显示弹幕的方法、装置、设备和存储介质 | |
| CN106303288A (zh) | 合成演唱视频的方法、装置及系统 | |
| CN113542624A (zh) | 生成商品对象讲解视频的方法及装置 | |
| CN113064684A (zh) | 一种虚拟现实设备及vr场景截屏方法 | |
| JP7511026B2 (ja) | 画像データの符号化方法及び装置、表示方法及び装置、並びに電子機器 | |
| CN114630057B (zh) | 确定特效视频的方法、装置、电子设备及存储介质 | |
| CN114285933A (zh) | 一种实现手机视频、图片随人脸位置变化而变化的方法 | |
| CN116708696B (zh) | 视频处理方法和电子设备 | |
| US20200005833A1 (en) | Information processing apparatus, information processing method, and non-transitory computer readable medium | |
| CN107038734A (zh) | 一种用于Windows系统的图像叠加文本的方法 | |
| CN113342240A (zh) | 课件切换方法、装置、计算机设备和存储介质 | |
| CN113489899A (zh) | 特效视频录制方法、装置、计算机设备及存储介质 | |
| CN112312062A (zh) | 多人会议记录回放的3d展示方法、存储介质及终端设备 | |
| CN113992866B (zh) | 视频制作方法及装置 | |
| Davidsen et al. | Volumetric Capture and Replay in Virtual Reality–Entering the age of immersive and volumetric analysis in CSCL |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20220405 |
|
| RJ01 | Rejection of invention patent application after publication |