CN110298317A - 目标驱动的交互式内容多媒体化空间展示系统 - Google Patents
目标驱动的交互式内容多媒体化空间展示系统 Download PDFInfo
- Publication number
- CN110298317A CN110298317A CN201910582993.0A CN201910582993A CN110298317A CN 110298317 A CN110298317 A CN 110298317A CN 201910582993 A CN201910582993 A CN 201910582993A CN 110298317 A CN110298317 A CN 110298317A
- Authority
- CN
- China
- Prior art keywords
- user
- content
- display systems
- broadcasting content
- subject matter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Signal Processing (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请涉及一种目标驱动的交互式内容多媒体化空间展示系统，其特征在于通过考虑展示系统的播放内容以及用户和展示系统之间的交互内容对展示系统进行动态调整操作，其特征在于在维持大数据的情形下，充分发挥小数据的特性；其目的在于使用户的健康程度、满意度最大化；所涉及的展示系统的内容包括播放内容的类型题材、播放内容的声音和播放内容的各个部分的明暗程度；所涉及的交互内容包括用户声音实时输入、用户面部表情实时输入、用户动作实时输入。
Description
技术领域
本发明涉及显示及大数据领域，具体是一种目标驱动的交互式内容多媒体化空间展示系统。
背景技术
现有的投影设备安装固定、一般是在靠近地面安装，这使得用户体验舒适度并没有达到最高，甚至，在电影院观影场景下，用户在价格一致的情况观影体验舒适度不尽相同；家装投影机在家居环境下有舒适的家居产品和相对自由的观影条件，能够在一定程度上提升用户体验舒适感，然而，即便如此，固定、靠近地面的安装依然限制了用户的观影心态。因此，需要提供一种能够在空中主动移动投影系统，以在自主或者受控情况下移动屏幕并在飞行器协同的工作下使屏幕平整和投影稳定，从而提升用户体验。
现有的播放平台如电视在多用户下，不能合理选择播放内容，在各种情形下播放内容也不能提升用户观影效果。例如当播放的内容为恐怖电影时，用户为小孩和成年人的需求是不同的，现有技术并没有针对用户对内容进行调整以适应不同的用户需求。现有的播放平台还存在不能在兼顾大数据的前提下还能充分发挥小数据的特性的问题。
其次，空中可主动移动要考虑飞行器之间的协同飞行，考虑屏幕的平整以保证观音效果，同时还要保证飞行器的稳定性，因此本发明还解决让平整的屏幕在空中主动或者受控移动以提供个性化的用户观影需求的问题，甚至解决编程人员编程时间太久而久坐导致的颈椎、腰问题。
体系结构
本发明是一种目标驱动的交互式内容多媒体化空间展示系统，其整体操作流程为首先播放内容为对应于某一范围的用户（例如所有的老人）所应有的效果，然后再根据用户（如残疾的老人）在观影时的用户实时声音、实时面部表情、和实时简单动作输入，调整播放内容的明暗度、声音和空间位置。
发明内容
为了解决上述技术问题，本发明提供一种目标驱动的交互式内容多媒体化空间展示系统，其展示平台可在平整条件下在空中自主或者受控移动、投影姿态调整、投影光强调整，声音播放大小调整，从而实现多用户在不同观影状态下的健康需求以及情感需求最大化。
通过考虑展示系统的播放内容以及用户和展示系统之间的交互内容对展示系统进行动态调整操作，其目的在于使用户的健康程度、满意度最大化；所涉及的展示系统的内容包括播放内容的类型题材、播放内容的声音和播放内容的各个部分的明暗程度；所涉及的交互内容包括用户声音实时输入、用户面部表情实时输入、用户动作实时输入。
所述播放内容调整参数包括大数据输入和小数据输入；其中大数据为数据库中已存在的各项数据，小数据为当前使用该系统的用户的相应的各项数据；
所述调整方式具体包括声音大小、光线强度、空间位置；其中声音大小和光线强度的调整参数取决于播放内容和交互内容；空间位置的调整参数取决于用户健康需求和播放内容的类型题材。
所述声音大小和光线强度调整参数取决因素具体为：播放内容包括有内容题材和实时播放内容；交互内容包括有用户人群类型和用户实时情感输入，其中用户情感包括用户声音、动作、用户面部表情。
所述空间位置调整参数取决因素具体为：用户健康需求包括缓解因长时间观影所造成的的肌肉群僵硬问题和眼部疲劳问题；播放内容类型题材包括适合移动观看类型题材和不适合移动观看类型题材。
所述用户声音实时输入具体为声音大小和声音内容；用户面部表情实时输入通过输入设备得到用户当前面部特征并结合已有数据库判断用户所属那种表情并输入到展示系统中；用户动作具体为已有数据库所存在的简单动作。
所述的展示系统利用多个飞行器在空中进行调整，使之不受环境位置影响。
本发明有如下有益效果：
（1）能够有效缓解用户因长时间观影所造成的肌肉群僵硬和眼部疲劳；
（2）能够根据播放内容以及用户交互内容实时调整展示系统的空间位置、光强和声音，提高用户体验感；
（3）能够在兼顾大数据前提下充分发挥小数据的特性；
（4）采用多个飞行器，使展示系统能够在空中移动，不受位置限制。
附图说明
图1是一种目标驱动的交互式内容多媒体化空间展示系统的实施流程图；
图2是一种目标驱动的交互式内容多媒体化空间展示系统的模型图。
具体实施方式
本发明为一种目标驱动的交互式内容多媒体化空间展示系统，其具体实施步骤如下：
步骤1）对应图1中001所示，提取展示系统播放内容的类型题材、声音，声音大小以等级（0~100）输入展示系统的处理中心，播放内容的类型题材结合已有数据库输入，例如教育题材，动作片题材；
步骤2）对应图1中002所示，将展示系统的展示面板划分为10×10的单元格形式，每个单元格都有不同的播放内容和明暗程度；
步骤3）对应图1中003所示，结合步骤2中的每个单元格，提取播放内容的每个单元格的明暗程度等级（0~100），其中明暗程度等级划分依据为图像灰度值，若为彩色图像，则将彩色图像转换为灰度图像；
步骤4）对应图1中004所示，通过展示系统自带的输入设备，如摄像头、麦克风等，结合已有数据库提取用户类型（幼儿、青年、成人、老人等）、实时声音大小以及内容（好、不行等）、用户面部表情（喜怒哀乐等）和简单动作（鼓掌、摇头等）；
步骤5）对应图1中005所示，建立健康模型、用户满意度模型，其中本发明的健康模型UHealth如公式1所示，本发明仅考虑因长时间观影所造成的的眼部疲劳和肌肉群僵硬；用户满意度模型USati如公式2所示，其影响参数为用户使用展示系统时所发出的实时声音、面部表情和简单动作；
公式（1）
公式（2）
其中t为用户使用展示系统的时间，f()为一单调递减函数，取值范围为[0,1]，Gradei为当前时刻对应参数的得分值（0~100），即小数据数值，Gi为大数据数值，具体为观看这一播放内容的所有人的得分值的平均数，得分值结合已有数据库判断，本发明设置负面为0，正面为100，为对应分数的权重，由训练得出；
步骤6）对应图1中006所示，结合步骤1）所得到的播放内容的类型题材，确定是否进行空间位置移动，其判断依据为是否需要集中注意力，例如当播放内容为数学的教学视频时，则不进行空间位置移动，当播放内容为动作片时，则进行空间位置移动；移动原则为每五分钟缓慢移动一次，移动方向随机取向上、下、左、右、前、后，移动距离由训练得出；
步骤7）对应图1中007所示，调整展示系统的展示面板各个单元格的明暗程度，调整参数取决于播放内容和用户类型，其调整方案如公式3所示；例如当播放内容为数学教学视频时，公式部分明暗度往上调，注释部分明暗程度往下调；当播放内容的类型为恐怖片，用户类型为老年人时，调整亮度使展示系统的展示面板的各个单元格和各个时间段的明暗程度的变化值变小，即使得恐怖片变得相对不恐怖；
公式（3）
其中△IntensityGrade为明暗度的变化值，Gradeattention为各个单元的播放内容的所需注意力的分数，FitnessUser&Type为用户类型和播放内容的类型的适应度，u，v为对应的权重；
步骤8）对应图1中008所示，调整展示系统的播放内容的声音大小，其调整方案与明暗度调整呈正相关关系。
Claims (1)
1.一种目标驱动的交互式内容多媒体化空间展示系统，其特征在于通过考虑展示系统的播放内容以及用户和展示系统之间的交互内容对展示系统进行动态调整操作，其特征在于在维持大数据的情形下，充分发挥小数据的特性；其目的在于使用户的健康程度、满意度最大化；所涉及的展示系统的内容包括播放内容的类型题材、播放内容的声音和播放内容的各个部分的明暗程度；所涉及的交互内容包括用户声音实时输入、用户面部表情实时输入、用户动作实时输入；其特征在于所述的系统利用多个飞行器在空中进行调整，使之不受环境位置影响；其具体实施步骤如下：
步骤1）提取展示系统播放内容的类型题材、声音，声音大小以等级（0~100）输入展示系统的处理中心，播放内容的类型题材结合已有数据库输入，例如教育题材，动作片题材；
步骤2）将展示系统的展示面板划分为10×10的单元格形式，每个单元格都有不同的播放内容和明暗程度；
步骤3）结合步骤2中的每个单元格，提取播放内容的每个单元格的明暗程度等级（0~100），其中明暗程度等级划分依据为图像灰度值，若为彩色图像，则将彩色图像转换为灰度图像；
步骤4）通过展示系统自带的输入设备，如摄像头、麦克风等，结合已有数据库提取用户类型、实时声音大小以及内容、用户面部表情和简单动作；
步骤5）建立健康模型、用户满意度模型，其中本发明的健康模型UHealth如公式1所示，本发明仅考虑因长时间观影所造成的的眼部疲劳和肌肉群僵硬；用户满意度模型USati如公式2所示，其影响参数为用户使用展示系统时所发出的实时声音、面部表情和简单动作；
公式（1）
公式（2）
其中t为用户使用展示系统的时间，f()为一单调递减函数，取值范围为[0,1]，Gradei为当前时刻对应参数的得分值（0~100），即小数据数值，Gi为大数据数值，具体为观看这一播放内容的所有人的得分值的平均数，得分值结合已有数据库判断，本发明设置负面为0，正面为100，为对应分数的权重，由训练得出；
步骤6）结合步骤1）所得到的播放内容的类型题材，确定是否进行空间位置移动，其判断依据为是否需要集中注意力；移动原则为每五分钟缓慢移动一次，移动方向随机取向上、下、左、右、前、后，移动距离由训练得出；
步骤7）调整展示系统的展示面板各个单元格的明暗程度，调整参数取决于播放内容和用户类型，其调整方案如公式3所示；
公式（3）
其中△IntensityGrade为明暗度的变化值，Gradeattention为各个单元的播放内容的所需注意力的分数，FitnessUser&Type为用户类型和播放内容的类型的适应度，u，v为对应的权重；
步骤8）调整展示系统的播放内容的声音大小，其调整方案与明暗度调整呈正相关关系。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910582993.0A CN110298317A (zh) | 2019-07-01 | 2019-07-01 | 目标驱动的交互式内容多媒体化空间展示系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910582993.0A CN110298317A (zh) | 2019-07-01 | 2019-07-01 | 目标驱动的交互式内容多媒体化空间展示系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110298317A true CN110298317A (zh) | 2019-10-01 |
Family
ID=68029569
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910582993.0A Pending CN110298317A (zh) | 2019-07-01 | 2019-07-01 | 目标驱动的交互式内容多媒体化空间展示系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110298317A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114355786A (zh) * | 2022-01-17 | 2022-04-15 | 北京三月雨文化传播有限责任公司 | 基于大数据的多媒体数字化展厅的调控云系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20050223237A1 (en) * | 2004-04-01 | 2005-10-06 | Antonio Barletta | Emotion controlled system for processing multimedia data |
| CN102098567A (zh) * | 2010-11-30 | 2011-06-15 | 深圳创维－Rgb电子有限公司 | 一种互动电视系统及其控制方法 |
| CN102395410A (zh) * | 2009-04-15 | 2012-03-28 | 皇家飞利浦电子股份有限公司 | 用于适应性调节用户环境的方法和系统 |
| CN102541257A (zh) * | 2010-11-12 | 2012-07-04 | 微软公司 | 基于观众的内容呈现和定制 |
| CN109491190A (zh) * | 2018-12-10 | 2019-03-19 | 海南大学 | 空中主动移动屏幕及投影系统 |
| CN109791601A (zh) * | 2016-08-23 | 2019-05-21 | 昕诺飞控股有限公司 | 人群娱乐 |
-
2019
- 2019-07-01 CN CN201910582993.0A patent/CN110298317A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20050223237A1 (en) * | 2004-04-01 | 2005-10-06 | Antonio Barletta | Emotion controlled system for processing multimedia data |
| CN102395410A (zh) * | 2009-04-15 | 2012-03-28 | 皇家飞利浦电子股份有限公司 | 用于适应性调节用户环境的方法和系统 |
| CN102541257A (zh) * | 2010-11-12 | 2012-07-04 | 微软公司 | 基于观众的内容呈现和定制 |
| CN102098567A (zh) * | 2010-11-30 | 2011-06-15 | 深圳创维－Rgb电子有限公司 | 一种互动电视系统及其控制方法 |
| CN109791601A (zh) * | 2016-08-23 | 2019-05-21 | 昕诺飞控股有限公司 | 人群娱乐 |
| CN109491190A (zh) * | 2018-12-10 | 2019-03-19 | 海南大学 | 空中主动移动屏幕及投影系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114355786A (zh) * | 2022-01-17 | 2022-04-15 | 北京三月雨文化传播有限责任公司 | 基于大数据的多媒体数字化展厅的调控云系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106354251B (zh) | 一种虚拟场景与真实场景融合的模型系统与方法 | |
| CN109416842A (zh) | 在虚拟现实和增强现实中的几何匹配 | |
| CN110444066B (zh) | 基于全息教师及环幕互动的电气设备绝缘试验培训系统 | |
| CN103428461A (zh) | 一种授课影像录制的系统和方法 | |
| US11074759B2 (en) | Apparatus, system, and method of providing a three dimensional virtual local presence | |
| CN111862711A (zh) | 一种基于5g物联虚拟现实娱乐休闲学习装置 | |
| CN105812768A (zh) | 一种3d视频在vr设备中的播放方法及系统 | |
| JP2016045814A (ja) | 仮想現実サービス提供システム、仮想現実サービス提供方法 | |
| WO2016075967A1 (ja) | 情報処理装置及び情報処理方法、並びにコンピューター・プログラム | |
| CN110298317A (zh) | 目标驱动的交互式内容多媒体化空间展示系统 | |
| CN109208949B (zh) | 一种沉浸式森林区域vr展厅 | |
| CN110275370A (zh) | 内容驱动的主动空间交互优化系统 | |
| Klaver | Spectatorial theory in the age of media culture | |
| US20230031160A1 (en) | Information processing apparatus, information processing method, and computer program | |
| WO2021079640A1 (ja) | 情報処理装置及び情報処理方法、並びに人工知能システム | |
| WO2021124680A1 (ja) | 情報処理装置及び情報処理方法 | |
| KR102498566B1 (ko) | 전력 손실을 방지할 수 있는 버스와 같은 차량에서 교육용 가상현실 컨텐츠를 제공하는 방법 및 시스템 | |
| CN105278485A (zh) | 智能居家一体化设备 | |
| US11694230B2 (en) | Apparatus, system, and method of providing a three dimensional virtual local presence | |
| Sun et al. | Adaptive Adjustment Algorithm of Subtitle Screen Brightness | |
| TWI383662B (zh) | Video playback method | |
| KR20230015800A (ko) | 버스와 같은 차량에서 동기화된 가상현실 및 증강현실 컨텐츠를 제공하는 방법 및 그러한 제공 시스템 | |
| KR20230015799A (ko) | 버스와 같은 차량에서 이동형 홀로그램 컨텐츠를 제공하는 방법 및 그러한 제공 시스템 | |
| Qianqian | Visual Design Comfort of OCULUS VR Panoramic Stereo Video Based on Image Recognition Algorithm | |
| WO2022180606A1 (en) | First person cinema |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20191001 |