CN113050915A - 一种电子设备及处理方法 - Google Patents

Abstract

本申请公开了一种电子设备及处理方法，本方案中在通过第一光学单元输出图像时，若第一音频单元获得与图像匹配的音频数据，则处理装置基于该音频数据的位置参数控制输出音频和/或第二光线集合，以实现基于音频数据的位置参数控制第一音频单元输出音频的位置，和/或，基于音频数据的位置参数控制第二光学单元输出的第二光线集合的位置。

Description

一种电子设备及处理方法

技术领域

本申请涉及控制领域，尤其涉及一种电子设备及处理方法。

背景技术

在电子设备输出由图像及与图像关联的音频组成的视频时，通常直接通过显示单元和音频单元对视频进行输出，用户的感官体验单一。

发明内容

有鉴于此，本申请提供一种电子设备及处理方法，其具体方案如下：

一种电子设备，包括：

第一光学单元，用于依据获得的图像数据输出第一光线集合，所述第一光线集合用于形成所述图像数据对应的图像；

第一音频单元，用于获得音频数据输出音频，其中，所述音频数据与所述图像数据匹配；

第二光学单元，用于依据所述音频数据输出第二光线集合；

处理装置，用于处理所述音频数据，基于所述音频数据获得位置参数，其中，所述位置参数用于控制输出所述音频和/或所述第二光线集合。

进一步的，

所述第一光学单元输出所述第一光线集合为向第一方向输出；

所述第二光学单元输出所述第二光线集合为向第二方向输出，所述第一方向与所述第二方向的角度满足不干扰条件。

进一步的，所述第一音频单元包括：

多个震动组件，设置在所述第一光学单元的第一侧的不同位置，所述第一侧是第二侧的相反侧，所述第二侧是输出所述第一光线集合的一侧；

其中，所述位置参数用于确定需要震动的震动组件以及震动参数，以使得通过所述第一音频单元中需要震动的震动组件基于所述震动参数进行震动，在特定位置输出所述音频，所述特定位置与所述需要震动的震动组件的数量、位置及所述震动参数具有预设关系。

进一步的，

所述特定位置与所述第一光学单元形成的所述图像内容匹配。

进一步的，

所述特定位置与所述第二光线集合的输出位置匹配。

进一步的，所述第二发光单元包括：

多个第二光学组件，所述多个第二光学组件的位置和/或朝向不同；

其中，所述位置参数用于确定需要切换发光状态的第二光学组件以及发光参数，基于所述发光参数控制需要输出光线的第二光学组件发光，以使得所述需要输出光线的第二光学组件输出的第二光线集合的位置与所述音频的特定位置匹配。

进一步的，所述音频数据包括三个维度的位置数据，

所述处理装置将所述三个维度的位置数据处理成与所述第一光学单元匹配的二维位置数据，基于所述二维位置数据确定所述需要震动的震动组件及震动参数。

进一步的，

所述处理装置用于基于所述音频数据的频率信息控制所述第二光学单元的发光频率；

和/或，

所述处理装置用于基于所述音频数据的音量信息控制所述第二光学单元输出的光线亮度。

一种处理方法，包括：

处理装置处理获得的音频数据，基于所述音频数据获得位置参数；

所述处理装置基于所述位置参数控制第一音频单元输出音频，和/或，控制第二光学单元输出第二光线集合；

其中，所述音频数据与图像数据匹配，所述图像数据通过第一光学单元输出的第一光线集合输出，所述第一光线集合用于形成所述图像数据对应的图像。

进一步的，所述处理装置基于所述位置参数控制第一音频单元输出音频，包括：

所述处理装置基于所述位置参数确定第一音频单元的多个震动组件中需要震动的震动组件及震动参数，控制所述需要震动的震动组件基于所述震动参数进行震动，在特定位置输出所述音频，所述特定位置与所述需要震动的震动组件的数量、位置及所述震动参数具有预设关系；

其中，所述多个震动组件设置在所述第一光学单元的第一侧的不同位置，所述第一侧是第二侧的相反侧，所述第二侧是输出所述第一光线集合的一侧。

从上述技术方案可以看出，本申请公开的电子设备及处理方法，包括：第一光学单元，用于依据获得的图像数据输出第一光线集合，第一光线集合用于形成图像数据对应的图像；第一音频单元，用于获得音频数据输出音频，音频数据与图像数据匹配；第二光学单元，用于依据音频数据输出第二光线集合；处理装置，用于处理音频数据，基于音频数据获得位置参数，位置参数用于控制输出音频和/或第二光线集合。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例公开的一种电子设备的结构示意图；

图2为本申请实施例公开的第一光学单元输出的第一光线集合与第二光学单元输出的第二光线集合匹配的示意图；

图3为本申请实施例公开的第一光线集合的第一方向与第二光线集合的第二方向不干扰的示意图；

图4为本申请实施例公开的第一光线集合的第一方向与第二光线集合的第二方向不干扰的示意图；

图5为本申请实施例公开的基于位置参数输出第二光线集合的示意图；

图6为本申请实施例公开的多个震动组件的位置关系示意图；

图7为本申请实施例公开的基于震动组件的位置、数量及震动参数确定音频的输出位置的示意图；

图8为本申请实施例公开的图像数据中的第一位置的图像内容的示意图；

图9为本申请实施例公开的在第一位置输出音频数据的示意图；

图10为本申请实施例公开的一个第二光学组件向不同方式输出光线的示意图；

图11为本申请实施例公开的采用第一方式排布的多个第二光学组件输出第一特定位置处的第二光线集合的示意图；

图12为本申请实施例公开的采用第二方式排布的多个第二光学组件输出第二特定位置处的第二光线集合的示意图；

图13为本申请实施例公开的一种处理方法的流程图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请公开了一种电子设备，其结构示意图如图1所示，包括：

第一光学单元11，第一音频单元12，第二光学单元13及处理装置14。

其中，第一光学单元用于依据获得的图像数据输出第一光线集合，第一光线集合用于形成图像数据对应的图像；

第一音频单元用于获得音频数据输出音频，其中，音频数据与图像数据匹配；

第二光学单元用于依据音频数据输出第二光线集合；

处理装置用于处理音频数据，基于音频数据获得位置参数，其中，位置参数用于控制输出音频和/或第二光线集合。

电子设备能够获得图像数据，图像数据与音频数据关联，如：电子设备获得一段视频数据，该视频数据中既包括图像数据，也包括音频数据，音频数据是与图像数据匹配的，即电子设备在输出视频数据时，通过第一光学单元输出图像，同时通过第一音频单元输出相关的音频。

电子设备获得图像数据后，将其图像数据输出至第一光学单元，第一光学单元需要基于该图像数据形成对应的图像，就需要通过第一光学单元输出相应的光线，由这些光线集合形成图像。

例如：图像数据为在需要在第一光学单元的左上角形成一个蓝色的气球，那么，就需要确定该蓝色的气球在第一光学单元上的位置和大小，基于该位置和大小确定需要输出光线的第一光学单元中的第一光学组件，并确定这些第一光学组件输出的光线的颜色、明暗程度等，基于需要输出光线的第一光学组件的位置、光线的颜色、明暗程度等参数输出光线，形成第一光线集合，该第一光线集合在第一光学单元上呈现出的就是该图像数据所对应的图像。

其中，第一光学单元即为电子设备的显示器，通过显示器显示电子设备获得的图像，若电子设备获得的是视频图像，则在通过显示器显示该视频图像中的图像时，还需要通过第一音频单元输出该视频图像中的音频。

音频数据通常都包括位置参数，该位置参数能够表明音频数据的输出位置，无论该音频数据是否输出，其都具有位置参数表明其所在的位置。

例如：音频数据为：由远及近的汽车鸣笛声，当汽车在远处时，其鸣笛声也是在远处的，当汽车在近处时，其鸣笛声也是在近处的，即汽车鸣笛的声音的输出位置是随着汽车的位置变化而变化的；若电子设备输出的是一段从左向右行驶的汽车的鸣笛声，那么，在通过第一音频单元输出时，其最初输出的鸣笛声的位置在左侧，随着汽车的位置的变化，输出的鸣笛声的位置也发生变化，其中，发生变化的就是音频数据的位置参数，随着位置参数的变化，音频数据的输出位置也会发生变化。

音频数据中本身自带有位置参数，随着位置参数的变化，其音频的输出位置发生变化，若音频数据中的位置参数不变化，则其音频的输出位置也不会发生变化。因此，在音频数据的输出过程中，基于音频数据中的位置参数确定音频的输出位置。即使音频数据未输出，其音频数据本身的位置参数仍然存在，能够确定音频数据的位置，只是并未进行输出，例如，在播放视频数据时，控制电子设备静音，即视频数据中包括音频数据，音频数据中自带有位置参数，只是其并未通过第一音频单元进行输出，但是其位置参数并未因此消失。

另外，电子设备还可以包括：第二光学单元，用于依据音频数据输出第二光线集合。

其中，第二光学单元可以为第一光学单元的氛围灯或补光灯，即在第一光学单元输出图像时，通过第二光学单元输出的光线集合为第一光学单元输出的图像做补光或氛围补充，以使得电子设备输出图像时，用户观看图像的同时有氛围灯的补充能够有更好的效果体验。

如图2所示，包括：第一光学单元21，第二光学单元22。第一光学单元中显示的图像是点亮的路灯，对应的，在第二光学单元中与路灯相关的位置处有光学组件处于点亮状态，且第二光学单元中点亮的光学组件与第一光学单元中点亮的路灯的颜色匹配，亮度匹配，即通过第二光学单元为第一光学单元的显示提升显示效果。

其中，第一光学单元输出第一光线集合为向第一方向输出，第二光学单元输出第二光线集合为向第二方向输出，第一方向与第二方向的角度满足不干扰条件。

当第一光线集合的第一方向与第二光线集合的第二方向不同时，第二光线集合仅能作为第一光线集合的氛围展示，如：第一光线集合的第一方向为向前照射，第二光线集合的第二方向为向四周照射，如：向上、向下、向左、向右，而非前后，此时第一方向与第二方向的角度为垂直，第一方向的第一光线集合与第二方向的第二光线集合并不互相造成干扰，即其光线集合并未出现交叉的情况。

如图3所示，包括：第一光学单元31，第二光学单元32，第一光学单元31的第一光线集合的方向为第一方向，第二光学单元的第二光线集合的方向为第二方向，第一方向与第二方向垂直。

当然，第一方向与第二方向的角度满足不干扰条件，也可以为：第一光线集合与第二光线集合的方向相反，如：第一光线集合的第一方向为向东，第二光线集合的第二方向为向西，此时两个方向相反，并且第一光线集合与第二光线集合并不会出现交叉的现象；如图4所示，包括：第一光学单元41，第二光学单元42，第一光学单元的第一光线集合的方向为第一方向，第二光学单元的第二光线集合的方向为第二方向，第一方向与第二方向相反。

或者，第一光线集合的第一方向与第二光线集合的第二方向之间的夹角大于90度即可保证互不干扰，满足不干扰条件。

第二光学单元中的第二光线集合也可以基于音频数据输出，即基于音频数据的位置参数输出第二光线集合，即在音频数据的位置参数所对应的位置处输出第二光线集合，如：通过音频数据的位置参数表明音频的输出位置在显示屏的第一位置，那么就使第二光学单元的光学组件输出能够展示第一位置有音频的光线集合，无论此时音频是否输出。

如图5所示，包括：第一光学单元51，第二光学单元52，在第一光学单元的第一位置(如：左下角)处有声音，第二光学单元会输出与第一位置相匹配的第二光线集合，即第二光学单元相应位置处的光学组件会点亮。

其中，需要说明的是，第二光学单元中点亮的光学组件所在的位置与第二光线集合的输出位置可以相同，也可以不同。若相同，则第二光学单元中光学组件数量较多，能够在需要某一位置有第二光线集合时，直接点亮该位置处的光学组件即可；若第二光学单元中光学组件数量较少，则在需要某一位置有第二光线集合时，需要点亮该位置处或与该位置相关的位置处的光学组件，即能够通过第二位置的光学组件实现第一位置处的第二光线集合的输出。

进一步的，在基于位置参数控制输出音频和第二光线集合时，及音频的输出位置与第二光线集合的输出位置均由音频数据中的位置参数确定，并且与第一光学单元输出的图像匹配。如图3所示，在显示屏上第一位置处显示有笑声，则该笑声的输出位置则在第一位置，对应的，第二光学单元输出的第二光线集合的输出位置也是在第一位置，实现了图像、音频与第二光线集合的匹配。

本实施例公开的电子设备，包括：第一光学单元，用于依据获得的图像数据输出第一光线集合，第一光线集合用于形成图像数据对应的图像；第一音频单元，用于获得音频数据输出音频，音频数据与图像数据匹配；第二光学单元，用于依据音频数据输出第二光线集合；处理装置，用于处理音频数据，基于音频数据获得位置参数，位置参数用于控制输出音频和/或第二光线集合。本方案中在通过第一光学单元输出图像时，若第一音频单元获得与图像匹配的音频数据，则处理装置基于该音频数据的位置参数控制输出音频和/或第二光线集合，以实现基于音频数据的位置参数控制第一音频单元输出音频的位置，和/或，基于音频数据的位置参数控制第二光学单元输出的第二光线集合的位置，从而达到在有音频数据输出时，其音频数据的输出与其本身的位置参数相关，并且会有第二光学单元输出与音频数据的位置参数相关的光线集合，提高了音频数据的输出效果，实现了音频单元与光学单元的联动输出，提高了用户体验。

本实施例公开了一种电子设备，其结构示意图如图1所示，包括：

第一光学单元11，第一音频单元12，第二光学单元13及处理装置14。

除与上一实施例相同的结构外，本实施例公开的第一音频单元12还包括：

多个震动组件，设置在第一光学单元的第一侧的不同位置，第一侧是第二侧的相反侧，第二侧是输出第一光线集合的一侧；其中，位置参数用于确定需要震动的震动组件以及震动参数，以使得通过第一音频单元中需要震动的震动组件基于震动参数进行震动，在特定位置输出音频，特定位置与需要震动的震动组件的数量、位置及震动参数具有预设关系。

第一音频单元中设置有多个震动组件，通过震动组件的震动实现音频的输出。由于音频数据是包括位置参数的，因此，在通过震动组件的震动实现音频输出时，需要通过一个或几个震动组件的组合震动实现特定位置的音频的输出。

具体的，若第一音频单元中震动组件的数量较多，能够在第一光学单元的任意位置都有对应的震动组件，即无论音频数据的位置参数表明音频需要在哪一个位置输出，该位置处都对应设置有震动组件，则只要确定音频的输出位置，即确定了需要震动的震动组件的位置，音频的输出位置与需要震动的震动组件的位置相同，只是分别位于第一光学单元的不同侧，此时每个震动组件的震动参数与音频数据的参数完全匹配；

若第一音频单元中震动组件并不足够对应第一光学单元的任意位置，即震动组件的数量有限，如：第一音频单元中包括3个震动组件、5个震动组件或6个震动组件等。

基于多个震动组件的数量、位置及震动参数能够确定出位于第一光学单元的任意位置的音频数据，具体的，相同的几个震动组件震动，当这几个震动组件的震动参数不同时，其通过震动输出的音频的输出位置不同；不同位置的震动组件震动，即使震动参数相同，其通过震动输出的音频的输出位置也是不同的；不同数量的震动组件震动，即使震动参数相同，其通过震动输出的音频的输出位置也是不同的。

例如：第一音频单元包括3个震动组件，这3个震动组件分别位于第一光学单元第一侧的不同位置，通过这3个震动组件的数量、位置的组合，以不同的震动参数，可以输出位于第一光学单元上任意位置的音频。如图6所示，包括：第一震动组件61，第二震动组件62，第三震动组件63。

第一音频组件中无论包括几个震动组件，这些震动组件的位置是固定的，如：每个震动组件都对应一个位置坐标，用于表示该震动组件的位置。

其中，特定位于与需要震动的震动组件的数量、位置及震动参数具有预设关系，而预设关系的确定可以为：预先建立数据模型，将震动组件的数量、位置、震动参数以及音频的输出位置作为模型训练参数输入至该数据中，以便得到最终的训练模型。当有音频数据输入时，基于该音频数据的位置参数以及训练模型可以确定需要震动的震动组件的数量、位置及震动参数，以便于基于确定的需要震动的震动组件的数量、位置及震动参数进行震动，从而输出位于该特定位置的音频，该特定位置的音频与音频数据的位置参数匹配。

还可以为：预先建立对应表，该对应表中记载有第一光学单元中任意位置输出音频时，其所用到的需要震动的震动组件的数量、位置及震动参数这些相关数据，当有音频数据输出时，基于音频数据的位置参数查找对应表，从对应表中查找出需要震动的震动组件的数量、位置及震动参数。

如图7所示，第一音频单元包括3个震动组件，包括第一震动组件71，第二震动组件72，第三震动组件73。当有音频数据输入，且音频数据的位置参数可以确定该音频数据需要在第一位置输出，即特定位置74，基于预先确定的训练模型或者预先存储的对应表确定要在特定位置输出音频需要震动的震动组件的数量、位置及震动参数，如：在特定位置74输出音频，其需要震动的震动组件为第一震动组件及第二震动组件，另外，震动参数可以为：震动强度、震动频率等参数信息，第一震动组件的震动强度可以为大于第二震动组件的震动强度，第一震动组件的震动频率小于第二震动组件的震动频率等。即第一震动组件以其对应的震动参数进行震动，同时，第二震动组件以第二震动组件对应的震动参数进行震动，得到的最终输出的音频为位于特定位置74的音频，即实现了通过第一音频单元中的多个震动组件的数量、位置及震动参数实现对第一光学单元上任意位置的音频输出。

进一步的，音频数据包括三个维度的位置数据。

处理装置将三个维度的位置数据处理成与第一光学单元匹配的二维位置数据，基于二维位置数据确定需要震动的震动组件及震动参数。

其中，音频数据为立体声数据，即该音频数据本身是具有X、Y、Z三个方向上的坐标数据的音频。例如：若设定与第一光学单元匹配的轴为X轴及Y轴，那么，由远及近的声音是Z轴数据在变化；如果一个人从左侧向右侧跑步，那么对应的声音也是从左侧向右侧变化，则其实际是X轴数据在发生变化。

在基于音频数据的位置参数控制输出音频和/或第二光线集合时，首先将音频数据的三维位置数据切换成二维的位置参数，即将具有X、Y、Z三个轴的坐标数据切换成与第一光学单元匹配的二维坐标数据，若与第一光学单元匹配的是X轴、Y轴，则将具有X、Y、Z三个轴的坐标数据切换成仅具有X、Y两个轴的二维坐标数据；若与第一光学单元匹配的是Y、Z轴，则将具有X、Y、Z三个轴的坐标数据切换成仅具有Y、Z两个轴的二维坐标数据。

将三维数据切换成二维位置数据，实际是直接去掉与第一光学单元不匹配的轴上的数据，仅保留另外两个与第一光学单元匹配的轴上的数据。例如：若与第一光学单元匹配的是X轴、Y轴，则将具有X、Y、Z三个轴的坐标数据去掉Z轴上的数据，而仅保留具有X、Y两个轴数据的二维坐标数据；若与第一光学单元匹配的是Y、Z轴，则将具有X、Y、Z三个轴的坐标数据去掉X轴上的数据，而仅保留具有Y、Z两个轴的二维坐标数据。

具体的，当第一音频单元中震动组件的数量足够多，通过震动组件的震动输出的音频的输出位置的精度较高，能够在第一光学单元的任意位置都有对应的震动组件时，可以直接基于音频的X、Y二维坐标数据选取与该坐标数据匹配的震动组件进行震动，使得通过震动实现的音频的位置与音频的X、Y二维坐标数据完全匹配；或者，当震动组件数量足够多，即使不能实现在第一光学单元的任意位置都有对应的震动组件，也能够在有音频时，基于该音频的二维坐标确定通过某一个震动组件震动输出声音，使得震动组件通过震动输出的声音的音频输出位置的精度达到某一预设精度阈值；

在确定需要震动的震动组件之后，还需要确定震动组件震动的相位和幅值，以保证震动输出的声音的参数与音频数据中的参数信息匹配。

当第一音频单元中震动组件的数量有限时，如：共有2个震动组件，或者，共有3个震动组件，此时，通过震动组件的震动输出的音频的输出位置的精度较低。

通过不同震动组件之间的震动延时，可以使得不同震动组件震动输出的声音更偏向于先震动的组件所在的方位。当第一音频单元中共有3个震动组件时，可以采用这三个震动组件共同震动以输出声音，也可以仅采用其中2个震动组件震动输出声音，或者，还可以仅采用其中1个震动组件震动输出声音。通过不同数量的震动组件能够输出不同位置的声音，或者，通过不同数量的震动组件能够输出位置精度不同的声音，震动组件数量越多，其输出声音的位置的精度越高。

以采用3个震动组件中的2个震动组件的震动输出声音为例：通过2个震动组件共同输出第一音频，如图7所示，第一音频的位置为A，第一个震动组件的位置为B，第二个震动组件的位置为C，其中，A、B、C三点位置均不相同，通过B点和C点的震动组件的震动输出第一音频，由于A点位置距离C点位置更近，因此，在输出声音时，位于位置C的第二个震动组件首先震动，间隔一定的延时之后，位于位置B的第一个震动组件震动，这就使得通过B点和C点的震动组件震动输出的声音是偏向位置C的；

同时，基于第一音频的参数信息调节位于B点的第一个震动组件以及位于C点的第二个震动组件震动的幅值和相位，以使得通过第二个震动组件及第三个震动组件最终输出的声音的位置较符合第一音频的位置，且输出的声音的参数较符合第一音频的参数信息。

本实施例公开的电子设备，包括：第一光学单元，用于依据获得的图像数据输出第一光线集合，第一光线集合用于形成图像数据对应的图像；第一音频单元，用于获得音频数据输出音频，音频数据与图像数据匹配；第二光学单元，用于依据音频数据输出第二光线集合；处理装置，用于处理音频数据，基于音频数据获得位置参数，位置参数用于控制输出音频和/或第二光线集合。本方案中在通过第一光学单元输出图像时，若第一音频单元获得与图像匹配的音频数据，则处理装置基于该音频数据的位置参数控制输出音频和/或第二光线集合，以实现基于音频数据的位置参数控制第一音频单元输出音频的位置，和/或，基于音频数据的位置参数控制第二光学单元输出的第二光线集合的位置，从而达到在有音频数据输出时，其音频数据的输出与其本身的位置参数相关，并且会有第二光学单元输出与音频数据的位置参数相关的光线集合，提高了音频数据的输出效果，实现了音频单元与光学单元的联动输出，提高了用户体验。

本实施例公开了一种电子设备，其结构示意图如图1所示，包括：

第一光学单元11，第一音频单元12，第二光学单元13及处理装置14。

除与上一实施例相同的结构外，本实施例公开的第一音频单元输出音频的特定位置与第一光学单元形成的图像内容匹配。

第一音频单元通过多个震动组件中的一个或多个，基于不同的位置、不同的数量以不同的震动参数进行震动，实现对任意位置的音频的输出，音频在特定位置输出，该特定位置是由音频数据的位置参数确定的，而音频数据与图像数据是匹配的。

如：电子设备获得视频文件，该视频文件中包括相互匹配的视频数据及音频数据，在图像数据中包括一个图像内容，该图像内容表明在第一光学单元的第一位置显示一个正在唱歌的小女孩，如图8所示，包括：第一位置81；那么，与图像数据对应的音频数据中，就是在第一位置输出一个小女孩唱歌的声音，如图9所示，包括第一位置81；图8中的第一位置与图9中的第一位置是同一个位置，这就使得图像数据与音频数据匹配，而其中，输出音频的位置与图像中的内容匹配，即音频是在第一位置输出的，而图像中在第一位置有正在发声的物体的图像内容，实现图像内容与音频数据的关联。并且，此时震动的震动组件的位置、数量及震动参数是基于预设关系确定的。

进一步的，特定位置与第二光线集合的输出位置匹配。

特定位置是由音频数据中的位置参数确定的，在特定位置输出音频，第二光线集合的输出位置为特定位置，从而通过第二光线集合的输出展示在该特定位置上有音频数据，无论音频当前是否已被输出，如果被输出，则通过第二光线集合的输出强化音频的输出位置，使用户明确音频是从该特定位置处输出的；如果音频未被输出，则通过第二光线集合的输出向用户展示当前视频图像中在该特定位置处有音频数据。

进一步的，第二发光单元包括：

多个第二发光组件，多个第二发光组件的位置和/或朝向不同；其中，位置参数用于确定需要切换发光状态的第二光学组件以及发光参数，基于发光参数控制需要输出光线的第二光学组件发光，以使得需要输出光线的第二发光组件输出的第二光线集合的位置与音频的特定位置匹配。

第二发光单元由多个发光组件组成，每个发光组件设置在不同的位置，或者，每个发光组件的设置位置相同，只是其发出光线的方向不同，即朝向不同，或者，发光组件的位置和朝向均不相同，从而保证在通过第二发光单元输出光线时，能够通过不同的发光组件输出光线实现不同方向不同位置的光线集合的输出。

第二光学组件的发光参数可以为：第二光学组件点亮或熄灭，或者，第二光学组件的发光颜色变化。

基于音频数据的位置参数可以确定第二光线集合的位置，即第二光线集合的位置与音频的输出位置匹配，如：音频的输出位置为第一光学单元中的第一位置，那么，第二光线集合也会在第一位置处输出，使其呈现出的效果为在第一位置处输出第二光线集合。

若第二光学组件的数量足够多，能够在第一光学单元上的任意位置处有音频输出时，均能够直接点亮或切换该位置处的第二光学组件的状态，实现通过特定位置处的第二光学组件的发光与特定位置输出音频匹配。

若第二光学组件为多个，但是其数量有限，就需要通过第二发光单元所包括的多个第二光学组件的配合实现在第一光学单元上的任意位置处有音频输出时，均能够呈现出有第二光线集合在该位置上输出的效果。

例如：如果在第二光学单元中仅有一个第二光学组件，则该第二光学组件能够向与第一光线集合的方向垂直的方向上任意角度输出光线，如图10所示，包括：第二光学组件101，从而保证无论在第一光学单元的哪一个特定位置有音频输出，需要在该特定位置处有第二光线集合输出时，通过该第二光学组件的亮度、颜色等信息实现对该特定位置的第二光线集合的输出，保证了第二光线集合的输出位置与音频的输出位置匹配。

如果第二光学组件在第一位置，而音频的输出位置在特定位置，特定位置与第一位置不同，通过第二光学组件的光线输出方向以及不同方向的光线的输出强度及颜色能够展现出特定位置输出第二光线集合的效果。

若第二光学单元中有多个第二光学组件，则通过这多个第二光学组件的组合展现特定位置输出第二光线集合的效果，具体的，可以为：第二光学组件的位置、数量及发光参数不同能够呈现出不同位置输出第二光线集合的输出效果。

首先确定多个第二光学组件的位置信息，多个第二光学组件的位置信息不同，则要实现对特定位置输出第二光线集合的输出效果，其所使用的第二光学组件的位置、数量及发光参数就会不同，例如：以第一方式排布在第一光学单元上的多个第二光学组件，与，以第二方式排布在第一光学单元上的多个第二光学组件，要实现在同一个特定位置输出第二集合光线，其所基于的第二光学组件的位置、数量及发光参数就会不同。

如图11及12所示，图11中是包括以第一方式排布多个第二光学组件111的电子设备，图12是包括以第二方式排布多个第二光学组件121的电子设备，图11中还包括第一特定位置112，图12中还包括第二特定位置122，其中，第一特定位置与第二特定位置在第一光学单元中的位置相同，通过发光组件输出的光线采用虚线方式表示。

通过第一方式排布的多个第二光学单元形成第一特定位置处输出第二光线集合，与，通过第二方式排布的多个第二光学单元形成第二特定位置处输出第二光线集合，这两种方式，其输出光线的第二光学组件的数量相同，但是发光参数不同，图11中，由于第二光学组件与第一特定位置距离较远，因此，图11中发光的第二光学组件的发光亮度较高，而图12中，由于第二光学组件与第二特定位置距离较近，因此，图12中发光的第二光学组件的发光亮度较低。

因此，对于相同特定位置输出的第二光线集合，由于其第二发光组件的排布方式不同，其位置、数量及发光参数就可能会不同；同样的，对于同一种第二发光组件排布方式的电子设备，由于特定位置的不同，其需要输出光线的第二发光组件的位置、数量及发光参数也会不同。

另外，需要说明的是，处理装置用于基于音频数据的频率信息控制第二光学单元的发光频率，和/或，处理装置用于基于音频数据的音量信息控制第二光学单元输出的光线亮度。

由于第二光学单元输出的第二光线集合是为了给音频数据做补充，以使用户通过电子设备的光学输出就能够确定在哪一个位置有音频数据需要输出，因此，第二光线集合的输出是与音频数据完全匹配的，无论是第二光线集合的输出位置与音频数据的特定位置完全匹配，还是第二光线集合的输出亮度与音频数据的输出音量完全匹配，或者，第二光线集合的输出频率与音频数据的频率完全匹配。

其中，音频数据的音量越大，则第二光学单元输出的第二光线集合的亮度越高，通过高亮度的第二光线集合使用户明确在该位置当前输出的音频的音量较大；音频数据的音量越小，第二光学单元输出的第二光线集合的亮度越低，通过低亮度的第二光线集合使用户明确在该位置当前输出的音频的音量较小，通过第二光线集合的亮度的大小，明确指示该位置处的音量的大小，以达到明确的提示效果；

例如：小女孩唱歌，其在第一光学单元的第一位置处唱歌，则其唱歌的声音在第一位置处输出，第一位置处也会输出第二光线集合，若唱歌的声音较大，则第二光线集合的亮度就会较高；若在同一个视频文件的同一帧图像中，既有小女孩唱歌的声音，也有汽车的鸣笛声，则在第一光学单元中在第一位置显示小女孩唱歌的图像内容，在第二位置显示汽车开过的图像内容，并且，在第一位置输出第一音频数据，即小女孩唱歌的声音，在第二位置输出第二音频数据，即汽车的鸣笛声，同时，在第一位置输出第一个第二光线集合，在第二位置输出第二个第二光线集合，若小女孩唱歌的声音的音量低于汽车鸣笛的音量，则第一个第二光线集合的亮度低于第二个第二光线集合的亮度。

音频数据的频率越高，则第二光学单元的发光频率越高，通过高频率输出的第二光线集合使用户明确在该位置当前输出的音频的频率较高；音频数据的频率越低，第二光学单元输出的第二光线集合的频率越低，通过低频率输出的第二光线集合使用户明确在该位置当前输出的音频的频率较低，通过第二光线集合的频率的高低，明确指示该位置处的声音频率的高低，以达到明确的提示效果。

进一步的，还可以为：基于音频数据控制第二光线集合的颜色。例如：对音频数据的音频内容进行分析，若确定该音频内容为轻松愉快的，则采用明亮的颜色输出第二光线集合等。

本实施例公开的电子设备，包括：第一光学单元，用于依据获得的图像数据输出第一光线集合，第一光线集合用于形成图像数据对应的图像；第一音频单元，用于获得音频数据输出音频，音频数据与图像数据匹配；第二光学单元，用于依据音频数据输出第二光线集合；处理装置，用于处理音频数据，基于音频数据获得位置参数，位置参数用于控制输出音频和/或第二光线集合。本方案中在通过第一光学单元输出图像时，若第一音频单元获得与图像匹配的音频数据，则处理装置基于该音频数据的位置参数控制输出音频和/或第二光线集合，以实现基于音频数据的位置参数控制第一音频单元输出音频的位置，和/或，基于音频数据的位置参数控制第二光学单元输出的第二光线集合的位置，从而达到在有音频数据输出时，其音频数据的输出与其本身的位置参数相关，并且会有第二光学单元输出与音频数据的位置参数相关的光线集合，提高了音频数据的输出效果，实现了音频单元与光学单元的联动输出，提高了用户体验。

本实施例公开了一种处理方法，其流程图如图13所示，包括：

步骤S131、处理装置处理获得的音频数据，基于音频数据获得位置参数；

步骤S132、处理装置基于位置参数控制第一音频单元输出音频，和/或，控制第二光学单元输出第二光线集合，其中，音频数据与图像数据匹配，图像数据通过第一光学单元输出的第一光线集合输出，第一光线集合用于形成图像数据对应的图像。

进一步的，第一光学单元输出第一光线集合为向第一方向输出；第二光学单元输出第二光线集合为向第二方向输出，第一方向与第二方向的角度满足不干扰条件。

进一步的，处理装置用于依据位置参数确定需要震动的震动组件及震动参数，以使得通过第一音频单元中需要震动的震动组件基于震动参数进行震动，在特定位置输出音频，特定位置与需要震动的震动组件的数量、位置及震动参数具有预设关系；其中，第一音频单元包括多个震动组件，设置在第一光学单元的的第一侧的不同位置，第一侧是第二侧的相反侧，第二侧是输出第一光线集合的一侧。

进一步的，特定位置与第一光学单元形成的图像内容匹配；

进一步的，特定位置与第二光线集合的输出位置匹配。

进一步的，处理装置基于位置参数确定需要切换发光状态的第二光学组件及发光参数，基于发光参数控制需要输出光线的第二光学组件发光，以使得需要输出光线的第二光学组件输出的第二光线集合的位置与音频的特定位置匹配。

进一步的，音频数据包括三个维度的位置数据，处理装置将三个维度的位置数据处理成与第一光学单元匹配的二维位置数据，基于二维位置数据确定需要震动的震动组件及震动参数。

进一步的，处理装置用于基于音频数据的频率信息控制第二光学单元的发光频率；和/或，处理装置用于基于音频数据的音量信息控制第二光学单元输出的光线亮度。

本实施例公开的处理方法，包括：处理装置处理获得的音频数据，基于音频数据获得位置参数；处理装置基于位置参数控制第一音频单元输出音频，和/或，控制第二光学单元输出第二光线集合，其中，音频数据与图像数据匹配，图像数据通过第一光学单元输出的第一光线集合输出，第一光线集合用于形成图像数据对应的图像。本方案中在通过第一光学单元输出图像时，若第一音频单元获得与图像匹配的音频数据，则处理装置基于该音频数据的位置参数控制输出音频和/或第二光线集合，以实现基于音频数据的位置参数控制第一音频单元输出音频的位置，和/或，基于音频数据的位置参数控制第二光学单元输出的第二光线集合的位置，从而达到在有音频数据输出时，其音频数据的输出与其本身的位置参数相关，并且会有第二光学单元输出与音频数据的位置参数相关的光线集合，提高了音频数据的输出效果，实现了音频单元与光学单元的联动输出，提高了用户体验。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种电子设备，包括：

第一光学单元，用于依据获得的图像数据输出第一光线集合，所述第一光线集合用于形成所述图像数据对应的图像；

第一音频单元，用于获得音频数据输出音频，其中，所述音频数据与所述图像数据匹配；

第二光学单元，用于依据所述音频数据输出第二光线集合；

处理装置，用于处理所述音频数据，基于所述音频数据获得位置参数，其中，所述位置参数用于控制输出所述音频和/或所述第二光线集合。

2.根据权利要求1所述的设备，其中，

所述第一光学单元输出所述第一光线集合为向第一方向输出；

所述第二光学单元输出所述第二光线集合为向第二方向输出，所述第一方向与所述第二方向的角度满足不干扰条件。

3.根据权利要求1所述的设备，其中，所述第一音频单元包括：

多个震动组件，设置在所述第一光学单元的第一侧的不同位置，所述第一侧是第二侧的相反侧，所述第二侧是输出所述第一光线集合的一侧；

其中，所述位置参数用于确定需要震动的震动组件以及震动参数，以使得通过所述第一音频单元中需要震动的震动组件基于所述震动参数进行震动，在特定位置输出所述音频，所述特定位置与所述需要震动的震动组件的数量、位置及所述震动参数具有预设关系。

4.根据权利要求3所述的设备，其中，

所述特定位置与所述第一光学单元形成的所述图像内容匹配。

5.根据权利要求3所述的设备，其中，

所述特定位置与所述第二光线集合的输出位置匹配。

6.根据权利要求5所述的设备，其中，所述第二发光单元包括：

多个第二光学组件，所述多个第二光学组件的位置和/或朝向不同；

其中，所述位置参数用于确定需要切换发光状态的第二光学组件以及发光参数，基于所述发光参数控制需要输出光线的第二光学组件发光，以使得所述需要输出光线的第二光学组件输出的第二光线集合的位置与所述音频的特定位置匹配。

7.根据权利要求3所述的设备，其中，所述音频数据包括三个维度的位置数据，

所述处理装置将所述三个维度的位置数据处理成与所述第一光学单元匹配的二维位置数据，基于所述二维位置数据确定所述需要震动的震动组件及震动参数。

8.根据权利要求1所述的设备，其中，

所述处理装置用于基于所述音频数据的频率信息控制所述第二光学单元的发光频率；

和/或，

所述处理装置用于基于所述音频数据的音量信息控制所述第二光学单元输出的光线亮度。

9.一种处理方法，包括：

处理装置处理获得的音频数据，基于所述音频数据获得位置参数；

所述处理装置基于所述位置参数控制第一音频单元输出音频，和/或，控制第二光学单元输出第二光线集合；

其中，所述音频数据与图像数据匹配，所述图像数据通过第一光学单元输出的第一光线集合输出，所述第一光线集合用于形成所述图像数据对应的图像。

10.根据权利要求9所述的方法，其中，所述处理装置基于所述位置参数控制第一音频单元输出音频，包括：

所述处理装置基于所述位置参数确定第一音频单元的多个震动组件中需要震动的震动组件及震动参数，控制所述需要震动的震动组件基于所述震动参数进行震动，在特定位置输出所述音频，所述特定位置与所述需要震动的震动组件的数量、位置及所述震动参数具有预设关系；

其中，所述多个震动组件设置在所述第一光学单元的第一侧的不同位置，所述第一侧是第二侧的相反侧，所述第二侧是输出所述第一光线集合的一侧。

Images