CN118012551A - 媒体数据生成方法及电子设备 - Google Patents
媒体数据生成方法及电子设备 Download PDFInfo
- Publication number
- CN118012551A CN118012551A CN202410022349.9A CN202410022349A CN118012551A CN 118012551 A CN118012551 A CN 118012551A CN 202410022349 A CN202410022349 A CN 202410022349A CN 118012551 A CN118012551 A CN 118012551A
- Authority
- CN
- China
- Prior art keywords
- input information
- screen
- target
- media data
- electronic device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 119
- 238000004458 analytical method Methods 0.000 claims description 88
- 230000008451 emotion Effects 0.000 claims description 54
- 238000004891 communication Methods 0.000 claims description 45
- 230000006854 communication Effects 0.000 claims description 45
- 230000004044 response Effects 0.000 claims description 25
- 238000004590 computer program Methods 0.000 claims description 13
- 230000004660 morphological change Effects 0.000 claims description 11
- 230000008569 process Effects 0.000 description 25
- 238000006243 chemical reaction Methods 0.000 description 16
- 230000005540 biological transmission Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 12
- 241000251468 Actinopterygii Species 0.000 description 11
- 238000004422 calculation algorithm Methods 0.000 description 11
- 238000012545 processing Methods 0.000 description 10
- 230000008859 change Effects 0.000 description 9
- 230000007613 environmental effect Effects 0.000 description 8
- 238000000605 extraction Methods 0.000 description 8
- 241000282326 Felis catus Species 0.000 description 7
- 238000013528 artificial neural network Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000013507 mapping Methods 0.000 description 7
- 238000005070 sampling Methods 0.000 description 7
- 238000012549 training Methods 0.000 description 6
- 238000013527 convolutional neural network Methods 0.000 description 5
- 238000003058 natural language processing Methods 0.000 description 5
- 238000007781 pre-processing Methods 0.000 description 5
- 241001465754 Metazoa Species 0.000 description 4
- 238000013135 deep learning Methods 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000001172 regenerating effect Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000012512 characterization method Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 125000004122 cyclic group Chemical group 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 238000003066 decision tree Methods 0.000 description 2
- 238000013136 deep learning model Methods 0.000 description 2
- 230000002996 emotional effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000000306 recurrent effect Effects 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 206010011469 Crying Diseases 0.000 description 1
- 206010016035 Face presentation Diseases 0.000 description 1
- 239000000370 acceptor Substances 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000001055 chewing effect Effects 0.000 description 1
- 238000007598 dipping method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000012417 linear regression Methods 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例提供了一种媒体数据生成方法,所述方法包括:响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示;将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
Description
技术领域
本申请涉及但不限于计算机领域,尤其涉及一种媒体数据生成方法及电子设备。
背景技术
相关技术中,在生成媒体数据时,输入信息与生成数据通常显示在同一个屏幕上,并且,在生成媒体数据时操作复杂,带来了不好的用户体验。
发明内容
有鉴于此,本申请实施例至少提供一种媒体数据生成方法及电子设备。
本申请实施例的技术方案是这样实现的:
一方面,本申请实施例提供一种媒体数据生成方法,所述方法包括:
响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示;
将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
再一方面,本申请实施例提供一种电子设备,包括存储器和处理器,所述存储器存储有可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述方法中的部分或全部步骤。
又一方面,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述方法中的部分或全部步骤。
又一方面,本申请实施例提供一种计算机程序产品,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序被计算机读取并执行时,实现上述方法中的部分或全部步骤。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本公开的技术方案。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本申请的实施例,并与说明书一起用于说明本申请的技术方案。
图1为本申请实施例提供的一种媒体数据生成方法的流程示意图一;
图2A为本申请实施例提供的一种第一模式下的双屏第一电子设备的示意图;
图2B为本申请实施例提供的一种第二模式下的双屏第一电子设备的示意图;
图2C为本申请实施例提供的一种第三模式下的双屏第一电子设备的示意图;
图2D为本申请实施例提供的一种第四模式下的双屏第一电子设备的示意图;
图3为本申请实施例提供的一种媒体数据生成方法的流程示意图二;
图4为本申请实施例提供的一种媒体数据生成方法的流程示意图三;
图5为本申请实施例提供的一种媒体数据生成方法的流程示意图四;
图6为本申请实施例提供的一种媒体数据生成方法的流程示意图五;
图7为本申请实施例提供的一种媒体数据生成装置的示意图;
图8为本申请实施例提供的一种电子设备的硬件实体示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面结合附图和实施例对本申请的技术方案进一步详细阐述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
需要指出,本申请实施例所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本申请实施例所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
相关技术中,在生成媒体数据时,输入信息与生成数据会显示在同一个屏幕上,并且,在生成媒体数据时操作复杂,例如,需要在第一屏幕上打开生成媒体数据的应用,将输入信息手动输入至应用后,再进行生成媒体数据的操作,操作较为复杂,带来了不好的用户体验。
本申请实施例提供一种媒体数据生成方法,一方面,通过输入模组(例如,屏幕、传感器、输入部件等)获得输入信息,拓宽了输入信息的获取场景;另一方面,将输入信息传输至显示在第一屏幕的目标应用,以通过目标应用生成媒体数据,相较于先保存输入信息或手动导入输入信息,然后在第一屏幕的应用生成媒体数据而言,在简化用户操作的同时还提高了处理效率,并且第一屏幕与输入模组可以属于相同的电子设备或不同的电子设备,拓宽了媒体数据生成方法的应用场景。本申请实施例提供的方法可以由电子设备执行,其中电子设备可以是笔记本电脑,平板电脑,台式计算机,机顶盒,移动设备(例如,移动电话,便携式音乐播放器,个人数字助理,专用消息设备,便携式游戏设备)等各种类型的终端,也可以实施为服务器。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content DeliveryNetwork,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。
图1为本申请实施例提供的一种媒体数据生成方法的流程示意图一,如图1所示,所述方法包括步骤S101至步骤S102,其中:
步骤S101,响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示。
这里,电子设备是指由集成电路、晶体管、电子管等电子元器件组成,应用电子技术软件发挥作用的设备,第一电子设备可以是任意合适的设备,例如,双屏电子设备、台式计算机等。输入模组是电子设备中可以获取输入信息的模组,输入模组可以是任意合适的模组,例如,屏幕、传感器、输入部件等。输入信息可以是任意合适的信息,例如,文本内容,音频内容、显示参数、音频参数等。
在一些实施方式中,第一电子设备通过输入模组获得输入信息的方式可以包括但不限于:通过第一电子设备或第二电子设备的第二屏幕获得输入信息、通过第一电子设备或第二电子设备的传感器获得输入信息、通过第一电子设备或第二电子设备的输入部件(如键盘、触控笔等)获得输入信息等。
步骤S102,将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
这里,目标应用是用于通过输入信息生成目标媒体数据的应用,目标应用可以是任意合适的应用,例如,生图应用,音频生成应用等。目标应用可以对输入信息进行处理,生成目标媒体数据,并且,在一些实施例中,输入模组可以是第二屏幕,在第一屏幕上生成的目标媒体数据与第二屏幕显示的输入信息的内容至少部分不同。目标媒体数据可以是任意合适的数据,例如,图像数据、音频数据等,例如,在输入信息为“吃鱼的猫”的文本内容时,目标媒体数据可以是由“猫”以及“鱼”构成的图像数据,该图像数据可以包含“猫”以及“鱼”的文本内容作为标注。
将输入信息传输至目标应用的方式可以包括但不限于:在输入模组表征为第二屏幕的情况下,可以通过数字显示接口(DisplayPort,DP)、近场通讯(Near FieldCommunication,NFC)、移动热点、串口通信等方式将输入信息传输至目标应用;在输入模组表征为传感器的情况下,可以通过通用串行总线(Universal Serial Bus,USB)、无线通信、中介设备等方式将输入信息传输至目标应用;在输入模组表征为输入部件的情况下,可以通过通用串行总线(Universal Serial Bus,USB)、无线通信、中介设备等方式将输入信息传输至目标应用,中介设备可以是任意合适的设备,例如,微控制器、嵌入式系统等。
在一些实施方式中,目标应用基于一条输入信息,可以生成多个不同的目标媒体数据,多个目标媒体数据与输入信息的内容至少部分不同。
在一些实施方式中,目标应用可以建立生成的目标媒体数据与输入信息之间的映射关系,该映射关系可以基于目标媒体数据的标识符建立,目标媒体数据的标识符可以是任意合适的符号,例如,目标媒体数据的名称等,目标媒体数据的标识符用于表征某一个目标媒体数据。
在一些实施方式中,在第一屏幕以及第二屏幕属于同一电子设备的情况下,例如,双屏电子设备,电子设备的第一屏幕可以通过数字显示接口,从第二屏幕(对应于前述输入模组)获得输入信息。数字显示接口可用于同时传输音频信息和/或视频信息,不仅传输率高,而且可靠稳定。
在一些实施方式中,在第一屏幕以及第二屏幕属于不同电子设备的情况下,例如,外接屏,电子设备的第一屏幕可以通过串口通信的方式从第二屏幕获得输入信息。串口通信是一种通过串行传输数据的通信方式,它使用两根通信线(发送端和接收端)进行双向通信,在第一屏幕与第二屏幕之间,发送端和接收端的通信线要交叉连接,以确保数据能够正确地传输。
在一些实施方式中,在某一电子设备外接传感器的情况下,采用通用串行总线连接传感器与电子设备,目标应用可以通过通用串行总线来获取传感器的输入信息。
在一些实施方式中,在输入模组为输入部件的情况下,电子设备可以通过内置的输入部件驱动程序接收来自输入部件的编码数据,进一步地,电子设备的操作系统可以将该编码数据解码为具体的输入信息,将输入信息传输至目标应用。
在一些实施方式中,目标应用具有分析功能,可以对输入信息进行语义分析和/或情感分析,将分析结果作为参考数据来生成媒体数据。
在一些实施方式中,基于输入信息的显示参数或音频参数,将显示参数或音频参数作为参考数据来生成媒体数据。
在本申请实施例中,一方面,通过输入模组(例如,屏幕、传感器、输入部件等)获得输入信息,拓宽了输入信息的获取场景;另一方面,将输入信息传输至显示在第一屏幕的目标应用,以通过目标应用生成媒体数据,相较于先保存输入信息或手动放置输入信息,然后在第一屏幕的应用生成媒体数据而言,在简化用户操作的同时还提高了处理效率,并且第一屏幕与输入模组属于相同的电子设备或不同的电子设备,拓宽了媒体数据生成方法的应用场景。
在一些实施方式中,所述步骤S101中的“获得输入信息”,可以包括步骤S101a至步骤S101c至少之一,其中:
步骤S101a,通过所述第一电子设备或第二电子设备的第二屏幕获得所述输入信息,所述第二电子设备是与所述第一电子设备建立目标通信连接的设备。
这里,存在两个屏幕,即第一屏幕与第二屏幕,此时,拥有第一屏幕的电子设备与拥有电子设备的第二屏幕可以属于第一电子设备,也可以不属于第一电子设备。例如,在使用双屏电子设备的场景下,第一屏幕与第二屏幕可以为该双屏电子设备中的两个屏幕,此时,拥有第一屏幕的电子设备与拥有第二屏幕的电子设备可以属于第一电子设备;但本申请并不限于此,在使用外接屏的场景下,拥有第一屏幕的电子设备与拥有第二屏幕的电子设备也可以不属于第一电子设备。
需要说明的是,本实施例可以通过第一电子设备的第二屏幕获得输入信息,也可以通过第二电子设备的第二屏幕获得输入信息。通过第一电子设备或第二电子设备的第二屏幕获得的输入信息均可以传输至属于第一电子设备的第一屏幕的目标应用,以通过目标应用生成目标媒体数据。
通过电子设备的第二屏幕获得输入信息的方式可以包括但不限于:检测屏幕状态、截取屏幕显示的内容等。屏幕状态可以是任意合适的状态,例如,屏幕状态变化、屏幕状态不变等,屏幕状态变化可以是屏幕显示的内容正在增加。
在一些实施方式中,在第一屏幕以及第二屏幕属于第一电子设备的情况下,第二屏幕可以检测屏幕状态,在屏幕状态为屏幕状态变化的情况下,第一屏幕的目标应用可以提取屏幕增加的内容,并且可以将该内容作为输入信息。
在一些实施方式中,在第一屏幕以及第二屏幕不属于第一电子设备的情况下,第二屏幕可以通过截图的方式,将截取的部分或全部内容作为输入信息。
步骤S101b,通过所述第一电子设备或第二电子设备的传感器获得所述输入信息,所述第二电子设备是与所述第一电子设备建立目标通信连接的设备。
这里,传感器是一种用于探测和感知物理量、环境变化或特定事件的装置。它们转化物理量或信号为电信号或数字信号,使得这些信息可以被处理和分析。传感器可以是任意合适的传感器,例如,音频传感器、压力传感器等。
在一些实施方式中,传感器探测到内容时,可以将该内容转换为电信号或数字信号,从而实现通过第一电子设备或第二电子设备的传感器获得输入信息。例如,音频传感器测量环境中的声音,将测量到的声音转换为电信号,可以将该电信号作为输入信息。
需要说明的是,本实施例可以通过第一电子设备的传感器获得输入信息,也可以通过第二电子设备的传感器获得输入信息。通过第一电子设备或第二电子设备的传感器获得的输入信息均可以传输至属于第一电子设备的第一屏幕的目标应用,以通过目标应用生成目标媒体数据。
步骤S101c,通过所述第一电子设备或第二电子设备的输入部件获得所述输入信息,所述第二电子设备是与所述第一电子设备建立目标通信连接的设备。
这里,输入部件可以是任意合适的部件,例如,键盘、鼠标、手柄等。第一屏幕可以与表征为输入部件的输入模组属于第一电子设备或不属于第一电子设备,例如,在某一电子设备外接键盘的情况下,第一屏幕可以与表征为输入部件的输入模组不属于第一电子设备;又例如,在某一电子设备同时内置手柄与屏幕的情况下,第一屏幕可以与表征为输入部件的输入模组属于第一电子设备。
通过电子设备的输入部件获得输入信息的方式可以包括但不限于:输入指令编码、解析采集信息等。
在一些实施方式中,在第一屏幕以及输入部件不属于第一电子设备的情况下,例如,输入部件为外接键盘,当用户在键盘上输入字符或命令时,键盘会将这些信息转换为电信号,该电信号代表了输入的数据和指令,键盘内部包含一个编码器,能够将键盘产生的电信号转换为电子设备能够理解的数据格式,该编码器会将键盘输入的电信号编码为特定的数据序列,将数据序列作为输入信息。
在一些实施方式中,在第一屏幕以及输入部件属于第一电子设备的情况下,例如,输入部件为手柄,手柄可以将采集到的用户操作信息(如按键、摇杆等)发送给第一电子设备的控制器,控制器接收用户操作信息,并对其进行解析和处理,将解析和处理得到的结果作为输入信息。
需要说明的是,本实施例可以通过第一电子设备的输入部件获得输入信息,也可以通过第二电子设备的输入部件获得输入信息。通过第一电子设备或第二电子设备的输入部件获得的输入信息均可以传输至运行至属于第一电子设备的第一屏幕的目标应用,以通过目标应用生成目标媒体数据。
在上述实施方式中,第二电子设备可以是与所述第一电子设备建立目标通信连接的设备,建立目标通信连接可以是通过蓝牙、Wi-Fi、移动通信技术(如LTE、5G等)、近场通信(如NFC等)、Zigbee、Z-Wave等建立的,以便实现第一电子设备和第二电子设备的数据传输、功能扩展、远程控制、辅助输入等特定功能。但本申请并不具体限定目标通信连接的类型,即本领域技术人员可以根据实际情况设置调整其类型。只要是该目标通信连接可以实现第二电子设备向第一电子设备的数据传输均可。
在本申请实施方式中,通过不同的输入部件获得输入信息,拓宽了输入信息的获取场景。
在一些实施方式中,步骤S102中的“所述输入信息传输至运行在所述第一屏幕的目标应用”,可以包括以下步骤S1021至步骤S1022中的至少之一,其中:
步骤S1021,若通过所述第一电子设备的传感器获得所述输入信息,将所述输入信息转换为所述目标应用用于生成所述媒体数据的参考数据,将转换后的参考数据传输至运行在所述第一屏幕的目标应用。
这里,可以理解的是,传感器可以捕获各种类型的数据,例如图像、声音、温度、压力、光线、位置信息等。在第一电子设备中,传感器可以包括但不限于如摄像头、麦克风、GPS、加速度计等类型。
在一些实施方式中,第一电子设备可以利用信息转换模型将输入信息转换为目标应用生成目标媒体数据时需要的参考数据。信息转换模型可以将输入信息转换为目标应用在生成目标媒体数据时所需的参考数据。这种转换可以使得目标应用能够更有效地理解和处理输入信息,进而可以根据参考数据来生成目标媒体数据。可以理解的是,信息转换模型可以是在第一电子设备本地部署的模型,也可以是第一电子设备调用的云端模型,且,信息转换模型可以是图像处理模型、语音识别模型、环境数据分析模型等,但本申请并不具体限定信息转换模型的类型,即本领域技术人员可以根据实际情况设置调整其类型。只要是该信息转换模型可以实现将输入信息转换为目标应用在生成目标媒体数据时所需的参考数据均可。
例如,在一种可能的情况下,输入信息可以是传感器获得的图像信息,信息转换模型可以是图像识别和处理模型,用于从图像中提取特征或进行图像增强。在另一种可能的情况下,输入信息可以是传感器获得的声音信息,信息转换模型可以是语音识别模型,用于将语音转换为文字或命令。在又一种可能的情况下,输入信息可以是传感器获得的位置信息,信息转换模型可以是地理信息处理模型,用于地图导航或位置追踪。
又例如,在一种可能的情况下,输入信息可以是通过光传感器获得的图像信息,信息转换模型可以是图像处理模型,如卷积神经网络(Convolutional Neural Network,CNN)。信息转换模型可以提取的光传感器获得的图像信息中的图像特征(如物体识别、场景理解等)。进而可以将信息转换模型提取后的图像特征传输至目标应用,以通过目标应用使用这些图像特征的参考数据来生成目标媒体数据。
在另一种可能的情况下,输入信息可以是通过麦克风等传感器获得的声音信息。信息转换模型可以是语音识别模型,如循环神经网络(Recurrent Neural Network,RNN)。该模型能够处理声音信息,例如转录文本或提取音频特征等。然后,这些转录的文本或者提取的声音特征可以作为参考数据传输至目标应用,以通过目标应用使用这些声音特征的参考数据生成与该声音特征相关的目标媒体内容。
在又一种可能的情况下,输入信息可以是通过环境传感器(如温度、湿度传感器等)获得的环境数据。信息转换模型可以是环境数据分析模型,该模型可以分析和处理这些环境参数,如温度趋势、湿度水平。提取的环境数据可以作为参考数据被传输至目标应用,以通过目标应用生成与该环境数据相关的信息图表或预测视频等。
需要说明的是,本申请并不具体限定输入信息、信息转换模型的具体类型,上述情况仅为示例性的说明输入信息、信息转换模型可以以哪些类型存在,但并不仅限于上述实施例中记载的情况。
步骤S1022,若通过在所述第一电子设备的第二屏幕上运行的第一应用获得所述输入信息,通过所述目标应用与所述第一应用之间的目标接口,将在所述第一应用获得的输入信息传输至所述目标应用。
这里,可以理解的是,第一应用可以是用于收集和处理特定类型数据的应用,例如文字记录应用、社交媒体应用、新闻应用或其他信息聚合应用。第一应用能够从其用户界面获取输入信息,并可以通过第一电子设备调用目标应用的接口将从第一应用中获得的输入信息传输至目标应用。
其中,目标应用与第一应用之间的目标接口可以实现目标应用与第一应用的数据传输,举例而言,目标接口可以是应用程序编程接口(Application ProgrammingInterface,API)、进程间通信(Inter-Process Communication,IPC)、远程过程调用(Remote Procedure Call,RPC)、消息队列(Message Queuing,MQ)、Web服务(WebService)、共享内存(Shared Memory)、数据库接口(Database Interface)等,但本申请并不具体限定目标接口的类型,即本领域技术人员可以根据实际情况设置调整其类型。只要是该目标接口可以实现目标应用与第一应用的数据传输均可。
例如,在一种可能的情况下,第一应用可以是社交媒体平台,从第一应用中获得的输入信息可以包括但不限于用户行为趋势、热门话题或用户生成内容等。目标应用可以使用这些输入信息作为参考,生成与之相关的目标媒体数据。
在另一种可能的情况下,第一应用也可以是新闻聚合器,从第一应用中获得的输入信息可以包括但不限于最新新闻和事件报道等。目标应用也可以使用这些输入信息作为参考,生成与之相关的目标媒体数据。
在又一种可能的情况下,第一应用还可以是文字记录应用,从第一应用中获得的输入信息可以包括但不限于显示在文字记录应用界面的文字信息、绘画信息等。目标应用也可以使用这些输入信息作为参考,生成与之相关的目标媒体数据。
需要说明的是,本申请并不具体限定第一应用的具体类型,上述情况仅为示例性的说明第一应用的可以以哪些类型存在,但并不仅限于上述实施例中记载的情况。
在本申请实施方式中,通过目标应用接收参考数据或输入信息,在不同的应用场景下,细化了输入信息传输至目标应用的过程,提高了传输输入信息的准确性。
在一些实施方式中,所述步骤S102可以包括步骤S11至步骤S14中的之一,其中:
步骤S11,通过所述目标应用对所述输入信息进行语义分析,将得到的语义分析结果作为参考数据来生成所述目标媒体数据。
这里,语义分析可以通过自然语言处理(Natural Language Processing,NLP),用于从输入信息中提取语义信息,得到语义分析结果,以便电子设备能够理解文本的含义。语义分析可以分为词汇级语义分析以及句子级语义分析。实现语义分析的方法可以包括但不限于统计学习方法、深度学习方法等。统计学习方法是一种基于概率模型的方法,通过对大量样本进行训练,以便电子设备能够理解输入信息的含义。深度学习方法是一种基于神经网络的方法,通过对大量样本进行训练,以便电子设备能够理解输入信息的含义。
在一些实施方式中,在语义分析为词汇级语义分析时,可以通过词义消歧以及词语语义相似度计算实现语义分析。词义消歧是自然语言处理中的基本问题之一,用于获悉某个词的多种含义并根据当前的上下文确认该词对应的某一种含义。词语语义相似度是指两个词语在不同的上下文中可以互相替换使用而不改变文本的句法语义结构的程度。在实施时,通过词义消歧以及词语语义相似度计算,得到语义分析的结果,将语义分析结果作为参考数据,生成目标媒体数据。
在一些实施方式中,在语义分析为句子级语义分析时,可以通过浅层语义分析以及深层语义分析实现语义分析。浅层语义分析主要围绕句子中的谓词,为每个谓词找到相应的语义角色,谓词为句子中谓语部分中的主要的词,在数理逻辑中表示一个个体的性质和两个或两个以上个体间关系的词。深层语义分析将整个句子转化为某种形式化表示。在实施时,通过浅层语义分析的语义角色标注(Semantic Role Labeling,SRL),找出句子中谓词的相应语义角色成分,包括核心语义角色(如施事者、受事者等)和附属语义角色(如地点、时间、方式、原因等),并且通过深层语义分析将整个句子转化为某种形式化表示,得到语义分析的结果,将语义分析结果作为参考数据,生成目标媒体数据。
步骤S12,通过所述目标应用对所述输入信息进行情感分析,将得到的情感分析结果作为参考数据来生成所述目标媒体数据。
这里,情感分析是自然语言处理中的主要内容,可以对带有情感色彩的主观性输入信息进行分析、处理、归纳和推理。实现情感分析的方法可以包括但不限于关键词识别、统计方法、概念级技术等。关键词识别可以利用文本中出现的清楚定义的影响词,例如,“开心”、“难过”、“伤心”、“害怕”、“无聊”等,来影响情感分析结果。统计方法可以进行潜在语意分析来影响情感分析结果。概念级技术可以深度解析输入信息,获得输入信息中比较微妙的情绪表达,例如,分析一些没有明确表达相关内容的输入信息。
在一些实施方式中,可以通过对输入信息进行预处理、特征提取、已训练模型等实现情感分析。已训练模型可以是由包含正面词语、负面词语、否定词语、程度副词等情感词语构成的模型。首先,可以对输入信息进行预处理,包括去除标点符号等,简化输入信息,便于进行后续分析;其次,可以提取输入信息中的关键信息作为输入信息的特征,例如,主题、观点等;最后,可以通过训练模型,判断输入信息的特征的整体情感倾向,得到情感分析的结果,将情感分析结果作为参考数据,生成目标媒体数据。
步骤S13,基于所述输入信息的显示参数,将所述显示参数作为参考数据来生成所述目标媒体数据。
这里,显示参数可以是任意合适的参数,例如,颜色、透明度、色调、分辨率、屏幕刷新率等。在一些实施方式中,根据输入信息中的显示参数,可以确定目标媒体数据的透明度、颜色、刷新率等,显示参数决定了目标媒体数据的基本特征,目标媒体数据的基本特征可以包括但不限于目标媒体数据的透明度、颜色、刷新率等。在生成目标媒体数据时,目标媒体数据的基本特征可以与显示参数是对应的,例如,显示参数包含参数“黄色”,对应的,目标媒体数据的颜色也为黄色。
步骤S14,基于所述输入信息的音频参数,将所述音频参数作为参考数据来生成所述目标媒体数据。
这里,音频参数可以是任意合适的参数,例如,频率、音色、声道、采样率、比特深度等。在一些实施方式中,根据输入信息的音频参数,可以确定目标媒体数据的频率、音色、声道、采样率、比特深度等,音频参数决定了目标媒体数据的基本特征,目标媒体数据的基本特征包括但不限于目标媒体数据的频率、音色、声道、采样率、比特深度等。在生成目标媒体数据时,目标媒体数据的基本特征与音频参数是对应的,例如,音频参数包含参数“500Hz(赫兹)”,对应的,目标媒体数据的频率也可以为500Hz。
在本申请实施方式中,通过语义分析结果、情感分析结果、显示参数或音频参数来生成目标媒体数据,提高了生成媒体数据的准确性。
在一些实施方式中,所述步骤S102可以包括步骤S21至步骤S24,其中:
步骤S21,若所述输入信息包括文本内容,对所述文本内容进行语义分析和/或情感分析,将分析得到的语义主题特征、内容类别和情感特征中的至少之一作为参考数据来生成所述目标媒体数据。
这里,文本内容表征输入信息包括文本信息。语义主题特征可以为文本内容中表征文本内容对应的主题特征,例如,人类、花朵等。内容类别可以为文本内容中表征文本内容对应的类别,例如,动物、植物等。情感特征可以为文本内容中表征文本内容对应的情感特征,例如,开心、悲伤、生气等。在对文本内容进行语义分析和情感分析时,可以先进行语义分析,也可以先进行情感分析。对文本内容进行语义分析和/或情感分析的方法可以前述步骤S11和/或步骤S12。
示例性地,若当前的文本内容为“这里有一只很开心的小猫,这个小猫正在吃鱼”,对该文本内容进行语义分析和情感分析,分析得到文本内容的语义主题特征为猫咪以及鱼、内容类别为动物、情感特征为开心,可以将文本内容的语义主题特征、内容类别和/或情感特征作为参考数据来生成目标媒体数据。其中,生成的目标媒体数据可以有多种可能的情况:
例如,在一种可能的情况下,生成的目标媒体数据可以是图片,该图片可以表达出一只拟人化的小猫正在开心地笑,并且手里拿着一条鱼,嘴巴上还沾着鱼鳞的情景。这种图片可以通过目标应用利用图像生成算法,结合上述参考数据,设计出符合文本描述的场景和情感表达。
在另一种可能的情况下,生成的目标媒体数据也可以是视频,该视频可以通过动画来表达出小猫开心地吃鱼的场景。例如,在视频中,小猫可以在轻快的音乐下跳跃、摆弄鱼,并展示出享受美食的幸福表情。这个视频可以将文本的语义主题、内容类别和情感特征转化为动态画面和声音,提供更生动、更具吸引力的内容体验。
在又一种可能的情况下,生成的目标媒体数据也可以是音频,该音频可以表达出小猫开心地吃鱼的声音,如吃鱼时的咀嚼声、满足的喵喵叫声等。这种音频可以捕捉和强调文本中的情感特征,通过声音的温度和节奏感给听众带来身临其境的体验。
通过以上方式,文本内容的语义主题特征、内容类别和情感特征可以被理解和分析,并且可以转化为具体、多样化的目标媒体数据,目标媒体数据能以不同的形式呈现给用户,丰富用户的感官体验,并可以有效地传达原始文本所蕴含的信息和情感。
步骤S22,若所述输入信息包括音频内容,对所述音频内容进行语义分析和/或情感分析,将分析得到的语义主题特征、情感特征和音频参数中的至少之一作为所述参考数据来生成所述目标媒体数据。
这里,音频内容表征输入信息为音频信息。语义主题特征可以为音频内容中表征音频内容对应的主题特征,例如,花朵、女孩等。内容类别可以为音频内容中表征音频内容对应的类别,例如,植物、动物等。情感特征可以为音频内容中表征音频内容对应的情感特征,例如,轻快、悲伤等。在对音频内容进行语义分析和情感分析时,可以先进行语义分析,也可以先进行情感分析。对音频内容进行语义分析和/或情感分析的方法可以参考前述步骤S11和/或步骤S12。
示例性地,若当前的音频内容为“小女孩摔倒了,难过的哭泣”,对该音频内容进行语义分析和情感分析,分析得到音频内容的语义主题特征为女孩以及摔倒,内容类别为动物,情感特征为难过,可以将音频内容的语义主题特征、内容类别和情感特征中的至少之一作为参考数据来生成目标媒体数据。其中,生成的目标媒体数据类型可以与前述步骤S21中生成的目标媒体数据类型相似或相同,本申请再次不再赘述。
步骤S23,若所述输入信息包括输入内容的显示参数,将所述显示参数的颜色、透明度和色调中的至少之一作为所述参考数据来生成所述目标媒体数据。
这里,显示参数决定了目标媒体数据的基本特征,在生成目标媒体数据时,目标媒体数据的基本特征可以与显示参数是对应的。示例性地,若当前的输入信息为一张图片,该图片内容可以表征出“一只黄色的,透明度为30%的小狗”的内容,此时,显示参数可以为黄色和/或30%的透明度,目标应用可以将显示参数的颜色和透明度中的至少之一作为参考数据来生成目标媒体数据。生成的目标媒体数据也可以是黄色和/或30%的透明度的目标媒体数据。
步骤S24,若所述输入信息包括输入语音的音频参数,将所述音频参数的频率、音色和声道中的至少之一作为所述参考数据来生成所述目标媒体数据。
这里,音频参数决定了媒体数据的基本特征,在生成目标媒体数据时,媒体数据的基本特征可以与音频参数是对应的。示例性地,若当前的输入信息为一段音频,该音频内容可以表征出“钢琴乐曲,频率为600-700Hz,采用双声道播放”的内容,此时,音频参数的频率可以为600-700Hz、音色为美声、声道为双声道,可以将音频参数的频率、音色和声道中的至少之一作为参考数据来生成目标媒体数据。
在本申请实施例中,通过输入信息对应的不同内容或参数,对应多种不同的参考数据,细化了采用参考数据生成目标媒体数据的过程,进而提高了生成媒体数据的准确性。
在一些实施方式中,所述方法还包括步骤S103,其中:
步骤S103,基于获得的参考数据,更新所述目标应用。
这里,参考数据可以是任意合适的数据,例如,情感特征、语义主题特征、颜色等。更新目标应用的方法可以包括但不限于机器学习、深度学习等。例如,机器学习可以是指利用参考数据对目标应用进行优化和更新的方法,在获得多个参考数据后,确定获得的参考数据集,对参考数据集进行特征提取、选择和转换,利用适合的机器学习的算法对目标应用进行训练,可以对目标应用进行更新,机器学习的算法包括但不限于决策树、支持向量机、神经网络等,在选择算法时,回归问题可以使用线性回归、决策树等算法;分类问题可以使用支持向量机、神经网络等算法;又例如,深度学习是指通过学习参考数据的内在规律和表示层次来更新目标应用,在获得多个参考数据后,确定获得的参考数据集,对参考数据集进行预处理,例如,归一化、特征缩放等,利用适合的深度学习模型对目标应用进行训练,可以对目标应用进行更新,深度学习模型包括但不限于卷积神经网络、循环神经网络等,在选择模型时,序列数据可以选择循环神经网络,在对图像数据进行分割、分类、检测时可以选择卷积神经网络。
在一些实施方式中,在输入信息包括文本内容的情况下,可以对文本内容进行语义分析和/或情感分析,可以将分析得到的文本内容的语义主题特征、内容类别和情感特征中的至少之一作为参考数据,利用适合的算法对训练目标应用,对目标应用进行更新。
在一些实施方式中,在输入信息包括音频内容的情况下,可以对音频内容进行语义分析和/或情感分析,可以将分析得到的音频内容的语义主题特征、情感特征和音频参数中的至少之一作为参考数据,利用适合的算法对训练目标应用,对目标应用进行更新。
在一些实施方式中,在输入信息包括输入内容的显示参数的情况下,可以将显示参数的颜色、透明度和色调中的至少之一作为参考数据,利用适合的算法训练目标应用,对目标应用进行更新。
在一些实施方式中,在输入信息包括输入语音音频参数的情况下,可以将音频参数的频率、音色和声道中的至少之一作为参考数据,利用适合的算法训练目标应用,对目标应用进行更新。
在本申请实施例中,可以通过参考数据更新目标应用,能够使得目标应用更加智能,在目标应用不断更新的过程中,能够获取更多的参考数据,能够提高基于参考数据生成媒体数据的速度。
在一些实施方式中,所述步骤S102可以包括步骤S31至步骤S35中的至少之一,其中:
步骤S31,响应于所述输入信息处于正在输入状态,按预设时间间隔将获得的输入信息传输至所述目标应用。
这里,正在输入状态可以表征此时输入模组处于工作状态,例如,传感器正在探测和感知物理量、键盘正在工作、输入文字页面的光标正在闪烁等。预设时间间隔可以是任意合适的时间,例如,10s(秒,Second)、1分钟等。在预设时间间隔达到时,可以将获得的输入信息从输入模组传输至目标应用,输入信息从输入模组传输至目标应用的方式可以参照前述步骤S102的具体实施方式。
步骤S32,响应于所述输入信息从正在输入状态切换为输入完成状态,将获得的输入完成状态的输入信息传输至所述目标应用。
这里,输入完成状态表征此时输入模组处于非工作状态,例如,传感器完成探测和感知物理量、第二屏幕的屏幕状态不变化、输入文字页面的光标消失或不再闪烁等。在输入信息从正在输入状态切换为输入完成状态时,可以将获得的输入信息从输入模组传输至目标应用,输入信息从输入模组传输至目标应用的方式可以参照前述步骤S102的具体实施方式。
步骤S33,响应于对所述输入信息的目标操作,将所述目标操作选定的输入信息传输至所述目标应用。
这里,目标操作可以是任意合适的操作,例如,选取第二屏幕显示的部分内容、提取传感器探测的内容等。目标操作可以通过区域截图、信息提取等方法实现。例如,对第二屏幕显示的内容进行区域截图,完成目标操作,又例如,对传感器探测的全部内容进行信息提取,得到传感器探测的部分内容,完成目标操作。
步骤S34,响应于所述第一电子设备的形态发生变化,将所述第一电子设备在形态变化前获得的输入信息传输至所述目标应用。
这里,电子设备的形态发生变化可以是指电子设备的外观形态发生改变,该形态变化可以是任意合适的变化,例如,折叠,打开,伸缩等。更具体地,该形态变化可以是双屏电子设备的模式转换、折叠屏的屏幕变化等。双屏电子设备的模式可以包括但不限于第一模式、第二模式,第三模式、第四模式等,其中,第一模式表征双屏电子设备处于笔记本形态;第一模式表征双屏电子设备处于书本形态;第一模式表征双屏电子设备处于帐篷形态;第一模式表征双屏电子设备处于平板形态。例如,双屏电子设备从第四模式变化为第二模式,此时,双屏电子设备的形态会从平板的折叠状态变化为书本的打开状态。
图2A为本申请实施例提供的一种第一模式下的双屏电子设备的示意图,如图2A所示,双屏电子设备20包含第一屏幕21,第二屏幕22,第二屏幕22上可以搭载键盘23,其中,第一屏幕21与第二屏幕22可以为上下关系。
图2B为本申请实施例提供的一种第二模式下的双屏电子设备的示意图,如图2B所示,双屏电子设备20包含第一屏幕21,第二屏幕22,其中,第一屏幕21与第二屏幕22可以为左右关系。
图2C为本申请实施例提供的一种第三模式下的双屏电子设备的示意图,如图2C所示,双屏电子设备20包含第一屏幕21,第二屏幕22,其中,第一屏幕21与第二屏幕22可以为上下关系。
图2D为本申请实施例提供的一种第四模式下的双屏电子设备的示意图,如图2D所示,双屏电子设备20包含第一屏幕21。其中,第一屏幕21可以进行分屏,得到第一左屏幕以及第一右屏幕。
在电子设备的形态变化时,例如,在双屏电子设备的书本模式下,可以从第二屏幕22获取输入信息,在双屏电子设备从书本模式转换为平板模式时,目标应用可以在第一屏幕21的第一左屏幕显示,第二屏幕22可以将获得的输入信息,传递给第一屏幕21。
步骤S35,响应于所述第一电子设备与第二电子设备建立通信连接,将在所述第一电子设备获得的所述输入信息传输至所述目标应用。
这里,在互联设备的场景下,第一电子设备与第二电子设备可以通过串行通信接口、无线通信协议、总线结构等建立通信连接。串行通信接口是一种电子设备与终端设备之间进行通信的接口标准,例如,RS-232、RS-485等,通过串行通信接口,电子设备与终端设备可以实现点对点的通信连接;无线通信协议用于在无线环境中实现设备之间的通信连接,例如,蓝牙、移动通信网络等,电子设备与终端设备可以通过无线通信协议建立通信连接,实现输入信息的传输;网络协议是用于在不同网络设备之间进行通信的规则和标准,例如,传输控制协议(Transmission Control Protocol,TCP)、超文本传输协议(Hyper TextTransfer Protocol,HTTP)等,第一电子设备与第二电子设备之间可以通过网络协议建立通信连接,实现输入信息的传输。
在本申请实施例中,可以通过输入信息的不同状态、目标操作、第一电子设备的形态变化或第一电子设备与第二电子设备建立的通信连接将输入信息传输至目标应用,丰富了传输输入信息的多种场景,进而提高了将输入信息传输至目标应用的准确性。
图3为本申请实施例提供的一种媒体数据生成方法的流程示意图二,如图3所示,所述输入模组包括第二屏幕,所述方法包括步骤S301至步骤S304,其中:
步骤S301,响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示。
步骤S302,将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
这里,上述步骤S301至步骤S302分别对应前述步骤S101至步骤S102,在实施时,可以参照前述步骤S101至步骤S102的具体实施方式。
步骤S303,响应于对所述第一屏幕显示的目标媒体数据的选定操作,在所述第二屏幕区别显示选定的媒体数据对应的输入信息,和/或,基于选定的媒体数据在所述第一屏幕重新生成目标媒体数据。
这里,第一屏幕显示的目标媒体数据可以是任意合适的数据,例如,图像数据、音频数据等。第二屏幕显示的输入信息可以是任意合适的信息,例如,文本内容、音频内容、图形内容等。第一屏幕显示的目标媒体数据与第二屏幕显示的输入信息的内容至少部分不同。目标媒体数据的选定操作是从第一屏幕显示的目标媒体数据中选择一个或多个媒体数据的操作,选定操作可以是任意合适的操作,例如,通过键盘的选定操作、通过光标的选定操作等。区别显示可以是指在第二屏幕,选定的媒体数据对应的输入信息与其他输入信息的显示方式不同,该显示方式可以是任意合适的方式,例如,加粗显示、突出显示等。目标媒体数据对应的输入信息可以是通过该目标媒体数据与输入信息之间的映射关系确定的,通过该映射关系可以确定选定媒体数据对应的输入信息。在一些实施方式中,在第一屏幕重新生成的已选定的媒体数据与原第一屏幕显示的目标媒体数据的内容至少部分不同。
在一些实施方式中,在重新生成选定媒体数据时,目标应用可以重新建立生成的选定的媒体数据与输入信息之间的映射关系,该映射关系可以基于目标媒体数据的标识符建立,目标媒体数据的标识符可以是任意合适的符号,例如,目标媒体数据的名称等。
步骤S304,响应于对所述第二屏幕显示的输入信息的选定操作,在所述第一屏幕区别显示选定输入信息对应的媒体数据,和/或,在所述第一屏幕重新生成选定输入信息对应的目标媒体数据。
这里,第一屏幕显示的目标媒体数据可以是任意合适的数据,例如,图像数据、音频数据等,第二屏幕显示的输入信息可以是任意合适的信息,例如,文本内容、音频内容、图形内容等,第一屏幕显示的目标媒体数据与第二屏幕显示的输入信息的内容至少部分不同。输入信息的选定操作可以是从第二屏幕显示的输入信息中选择一个输入信息的操作,选定操作可以是任意合适的操作,例如,通过键盘的选定操作、通过光标的选定操作等。区别显示可以是指在第一屏幕,选定输入信息对应的目标媒体数据与其他目标媒体数据的显示方式不同,该显示方式可以是任意合适的方式,例如,加粗显示、突出显示等。输入信息对应的目标媒体数据是通过该输入信息与目标媒体数据之间的映射关系确定的,通过该映射关系可以确定选定输入信息对应的目标媒体数据。在一些实施方式中,在第一屏幕重新生成的选定目标媒体数据与原第一屏幕显示的目标媒体数据的内容至少部分不同。
在本申请实施例中,通过不同的选定操作突出显示目标媒体数据或输入信息,重新生成目标媒体数据,使得用户可以找到输入信息对应的目标媒体数据,优化了用户体验。
图4为本申请实施例提供的一种媒体数据生成方法的流程示意图三,如图4所示,所述方法包括步骤S401至步骤S403,其中:
步骤S401,响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示。
步骤S402,将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
这里,上述步骤S401至步骤S402分别对应前述步骤S101至步骤S102,在实施时,可以参照前述步骤S101至步骤S102的具体实施方式。
步骤S403,基于所述目标媒体数据的类型和/或数量,确定输出所述目标媒体数据的目标输出模组,将所述目标媒体数据通过对应的目标输出模组输出,所述目标输出模组包括以下至少之一:显示输出模组;音频输出模组。
这里,目标媒体数据的类型可以是任意合适的类型,例如,图像、音频、文字等。目标媒体数据的数量可以是任意合适的数量,例如,1、3、4等。显示输出模组可以输出视频数据、图像数据、文字等,显示输出模组可以是任意合适的模组,例如,屏幕、投影仪等。音频输出模组可以输出音频数据,音频输出模组可以是任意合适的模组,例如,扬声器、耳机等。示例性地,若目标媒体数据包括一个图像数据,确定一个显示输出模组为目标输出模组,将一个图像数据通过目标输出模组输出。
在一些实施方式中,在通过显示输出模组输出图像数据或视频数据时,在显示之前,需要先对图像数据或视频数据进行预处理,例如,缩放、滤波、色彩调整等,以适应显示输出模组的配置参数。
在一些实施方式中,在通过显示输出模组输出目标媒体数据时,可以对预处理后的图像数据或视频数据进行编码处理;进一步,可以将编码后的图像数据或视频数据发送到显示输出模组的显示驱动芯片(Display Driver IC,DDIC),显示驱动芯片在接收编码后的目标媒体数据后,可以将其转换为适用于显示输出模组的目标媒体数据的格式,然后在显示输出模组输出目标媒体数据。
在一些实施方式中,在通过音频输出模组输出音频数据时,在输出之前,可以对音频数据进行预处理,例如,均衡、降噪、音量调整等,以满足用户的需求。
在一些实施方式中,在通过音频输出模组输出音频数据时,可以对预处理后的音频数据进行编码处理,编码的方式可以包括但不限于脉冲编码调制(Pulse CodeModulation,PCM)、更先进的音频编码(Advanced Audio Coding,AAC)等;进一步,将编码后的音频数据转换为模拟信号,音频输出模组中的数模转换器(Digital to AnalogConverter,DAC),将数字音频信号转换为模拟音频信号;最后,通过音频输出模组中的放大器输出模拟音频信号。
在本申请实施例中,通过目标媒体数据的类型和/或数量确定目标输出模组,提高了电子设备在包含多个输出模组的场景下,输出媒体数据的准确性。
图5为本申请实施例提供的一种媒体数据生成方法的流程示意图四,如图5所示,所述方法包括步骤S501至步骤S504,其中:
步骤S501,响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示。
步骤S502,将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
这里,上述步骤S501至步骤S502分别对应前述步骤S101至步骤S102,在实施时,可以参照前述步骤S101至步骤S102的具体实施方式。
步骤S503,获得所述目标输出模组的配置参数。
这里,目标输出模组的配置参数可以用于表征目标输出模组的特性,配置参数可以是任意合适的参数。例如,对于显示输出模组,该配置参数可以是分辨率、位深度、颜色格式、颜色空间等中的至少一种。又例如,对于音频输出模组,该配置参数可以是声道参数、采样率、位深度等中的至少一种。
步骤S504,基于所述配置参数,将与所述目标输出模组对应的所述目标媒体数据的属性信息调整至与所述配置参数相匹配的属性信息。
这里,目标输出模组可以包括以下至少之一:显示输出模组、音频输出模组。目标媒体数据的属性信息可以是任意合适的信息,例如,对于显示输出模组,该属性信息可以是分辨率、位深度、颜色格式、颜色空间等的其中至少一种;又例如,对于音频输出模组,该属性信息可以是声道参数、采样率、位深度等的其中至少一种。
在一些实施方式中,在目标输出模组包含显示输出模组的情况下,可以基于显示输出模组的分辨率、位深度、颜色格式、颜色空间中的至少一种配置参数,将目标媒体数据的分辨率、位深度、颜色格式、颜色空间中的至少一种属性信息调整至与配置参数相匹配的属性信息。
在一些实施方式中,在目标输出模组包含显示输出模组的情况下,基于音频输出模组的声道参数、采样率、位深度中的至少一种配置参数,将所述目标媒体数据的声道参数、采样率、位深度中的至少一种属性信息调整至与所述配置参数相匹配的属性信息。
步骤S505,基于所述目标媒体数据的类型和/或数量,确定输出所述目标媒体数据的目标输出模组,将所述目标媒体数据通过对应的目标输出模组输出,所述目标输出模组包括以下至少之一:显示输出模组、音频输出模组。
这里,上述步骤S505对应前述步骤S403,在实施时,可以参照前述步骤S403的具体实施方式。
在本申请实施例中,通过目标输出模组的配置参数改变目标媒体数据的属性信息,使得目标媒体数据的输出能够适应目标输出模组,提高了输出媒体数据的准确性,进而能够给用户带来更好的用户体验。
在一些实施方式中,所述步骤S503包括步骤S51至步骤S56,其中:
步骤S51,若所述目标媒体数据包括一张图像,将该图像输出至所述第一屏幕或输出至第二电子设备的第二屏幕或第三屏幕。这里,显示输出模组可以是任意合适的模组,例如,屏幕、投影仪等。将图像数据通过显示输出模组输出的过程可以前述步骤S403的具体实施方式。
步骤S52,若所述目标媒体数据包括多张图像,将所述多张图像按照预设时间间隔依次输出至所述第一屏幕,或输出至第二电子设备的第二屏幕或第三屏幕。
这里,多个图像数据的内容至少部分不同。预设时间间隔可以是任意合适的时间,例如,10s、5s等。在预设时间间隔达到时,依次通过显示输出模组输出多个图像数据中的各个图像数据,将图像数据通过显示输出模组输出的过程可以参照前述步骤S403的具体实施方式。
步骤S53,若所述目标媒体数据包括音频数据,将所述音频数据通过第一电子设备和/或第二电子设备的音频输出模组输出。
这里,音频输出模组可以输出音频数据,音频输出模组可以是任意合适的模组,例如,扬声器、耳机等。将音频数据通过音频输出模组输出的过程可以参照前述步骤S403的具体实施方式。
步骤S54,若所述目标媒体数据包括音频数据,将所述音频数据通过第一电子设备和/或第二电子设备的音频输出模组输出,以及,将基于所述音频数据生成的图像数据通过第一电子设备和/或第二电子设备的显示屏幕输出。
这里,音频输出模组可以输出音频数据,音频输出模组可以是任意合适的模组,例如,扬声器、耳机等。将音频数据作为参考数据,基于音频数据的音频参数,将音频参数的频率、音色和声道中的至少之一作为参考数据来生成图像数据。将音频数据通过音频输出模组输出的过程可以参照前述步骤S403的具体实施方式;将音频数据作为参考数据生成图像数据的过程可以参照前述步骤S14的具体实施方式,将图像数据通过显示输出模组输出的过程可以参照前述步骤S403的具体实施方式。
步骤S55,若所述目标媒体数据包括图像数据以及音频数据,将所述音频数据通过第一电子设备和/或第二电子设备的音频输出模组输出,将所述图像数据通过一电子设备和/或第二电子设备的显示屏幕输出。
这里,音频输出模组可以输出音频数据,音频输出模组可以是任意合适的模组,例如,扬声器、耳机等。显示输出模组可以是任意合适的模组,例如,屏幕、投影仪等。将音频数据通过音频输出模组输出的过程可以参照前述步骤S403的具体实施方式;将图像数据通过显示输出模组输出的过程可以参照前述步骤S403的具体实施方式。
步骤S56,若所述目标媒体数据包括图像数据,将所述图像数据转换为描述所述图像数据的音频数据,以通过第一电子设备和/或第二电子设备的音频输出模组进行输出。
这里,音频输出模组可以输出音频数据,音频输出模组可以是任意合适的模组,例如,扬声器、耳机等。将图像数据转换为描述图像数据的音频数据的方式可以包括但不限于图像预处理、特征提取、数据编码等。将音频数据通过音频输出模组输出的过程可以参照前述步骤S403的具体实施方式;将图像数据通过显示输出模组输出的过程可以参照前述步骤S403的具体实施方式。
在一些实施方式中,首先,可以通过图像预处理,将图像数据转换为灰度图像;其次,通过特征提取从图像数据中提取特征点,进行特征提取的方式可以包括但不限于通过方向梯度直方图(Histogram of Oriented Gradient,HOG)、局部二值模式(Local BinaryPattern,LBP)等,例如,通过HOG,将图像数据分成小的连通区域,然后采集连通区域中各像素点的梯度的或边缘的方向直方图,最后把这些直方图组合起来就可以得到多个特征点,得到图像特征;最后,可以将提取的图像特征通过音频生成算法编码为音频数据,音频生成算法可以包括但不限于线性预测编码(Linear Predictive Coding,LPC)、傅里叶变换等,例如,通过LPC,将特征点变为差分方程,然后通过局部最小化实际采样和线性预测采样之间的差值平方和,即可得到音频数据。
需要说明的是,在上述步骤S51至步骤S56中,图像可以通过显示模组输出,显示模组可以是第一屏幕、第二电子设备的第二屏幕、第二电子设备的第三屏幕或第二电子设备的第N个屏幕等,但本申请并不具体限定用于输出该一张图像的显示模组,即本领域技术人员可以根据实际情况设置调整其类型。
又一需要说明的是,在上述步骤S51至步骤S56中,音频模组可以是第一电子设备的音频模组,也可以是第二电子设备的音频模组,并且,音频模组可以是第一电子设备或第二电子设备中的多个音频模组,也可以是第一电子设备或第二电子设备中的一个音频模组,但本申请并不具体限定音频模组的类型,即本领域技术人员可以根据实际情况设置调整其类型。
在本申请实施例中,通过不同的目标媒体数据选择不同的输出方式,并且对于生成的目标媒体数据,可以进行再次生成目标媒体数据的操作,兼容了媒体数据生成方法的多种场景,优化了输出媒体数据的过程。
下面说明本申请实施例提供的媒体数据生成方法在实际场景中的应用,以双屏电子设备(对应前述第一电子设备)生成图像数据为例进行说明。
相关技术中,在生成媒体数据时,输入信息与生成数据会显示在同一个屏幕上,并且,在生成媒体数据时操作复杂,例如,需要在第一屏幕上打开生成媒体数据的应用,将输入信息手动输入至应用后,再进行生成媒体数据的操作,操作较为复杂,带来了不好的用户体验。
本申请实施例提供一种媒体数据生成方法,通过屏幕获得输入信息,将输入信息传输至显示在第一屏幕的目标应用,以通过目标应用生成媒体数据,相较于输入信息需要先保存输入信息或手动导入输入信息在第一屏幕,然后在第一屏幕的应用生成媒体数据而言,在简化用户操作的同时还提高了处理效率,能够给用户带来更好的用户体验。
图6为本申请实施例提供的一种媒体数据生成方法的流程示意图五,如图6所示,所述方法包括步骤S601至步骤S604,其中:
步骤S601,双屏电子设备的第二屏幕获得并显示输入信息;
步骤S602,将输入信息传输至显示在第一屏幕的目标应用,以通过目标应用生成图像数据并将图像数据显示在第一屏幕;
步骤S603,在双屏电子设备的模式发生变化的情况下,基于模式变化后第一屏幕的配置参数,改变图像数据的属性信息。
这里,双屏电子设备的模式发生变化时指双屏电子设备的外观形态发生改变,该形态变化可以是任意合适的变化,例如,折叠,打开等。双屏电子设备的模式可以包括但不限于笔记本模式(对应于前述第一模式)、书本模式(对应于前述第二模式),帐篷模式(对应于前述第三模式)、平板模式(对应于前述第四模式)等,例如,双屏电子设备从平板模式变化为书本模式,此时,双屏电子设备的形态会从折叠状态变化为打开状态。第一屏幕的配置参数可以包括但不限于分辨率、图像比例、颜色格式、颜色空间等。
在双屏电子设备的模式发生变化时,会根据改变后模式的第一屏幕的配置参数,改变图像数据的属性信息,例如,双屏电子设备从书本模式变化为笔记本模式,图像比例从9:16变化为16:9。这里,在图像比例从9:16变化为16:9时,会利用扩图技术,将图片扩充成内容相似,但是上下内容更丰富,左右内容缩减的图片,可以进行对图片的进行元素提取以及元素重构的过程,将图片进行扩充。
在一些实施方式中,通过第二屏幕圈选笔记,可以生成媒体数据(例如,缩略图等)直接展示在第一屏幕中并且旋转缩略图的角度,方便进行面对面演示。
在一些实施方式中,通过在第一应用(例如,文档编辑应用等)中选定输入信息,可以在第一屏幕中生成媒体数据(例如,缩略图等)与选定的输入信息各自通过各自的显示模组进行显示,方便两者进行对照。
在一些实施方式中,选定生成的图像数据可以直接链接到对应的输入信息,可以针对生成的图像数据,进行再生成,并对生成的图像数据进行替换。
需要说明的是,本申请并不具体限定媒体数据生成方法的应用场景,即本领域技术人员可以根据实际情况设置调整其类型。上述情况仅为示例性的说明本申请中的媒体数据生成方法可以以哪些形式来应用,但并不仅限于上述实施例中记载的情况。
基于上述的实施例,本申请实施例提供一种媒体数据生成装置,图为本申请实施例提供的一种信息处理装置的示意图,如图7所示,所述媒体数据生成装置700包括获取模块701以及传输模块702,其中:
获取模块701,用于响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示;
传输模块702,用于将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
在一些实施方式中,所述获取模块701,还用于:通过所述第一电子设备或第二电子设备的第二屏幕获得所述输入信息;通过所述第一电子设备或第二电子设备的传感器获得所述输入信息;通过所述第一电子设备或第二电子设备的输入部件获得所述输入信息;其中,所述第二电子设备是与所述第一电子设备建立目标通信连接的设备。
在一些实施方式中,所述传输模块702,还用于:若通过所述第一电子设备的传感器获得所述输入信息,将所述输入信息转换为所述目标应用用于生成所述媒体数据的参考数据,将转换后的参考数据传输至运行在所述第一屏幕的目标应用;若通过在所述第一电子设备的第二屏幕上显示的第一应用获得所述输入信息,所述第一电子设备通过调用所述目标应用的接口,将在所述第一应用获得的所述输入信息传输至运行在所述第一屏幕的目标应用。
在一些实施方式中,所述传输模块702,还用于:通过所述目标应用对所述输入信息进行语义分析,将得到的语义分析结果作为参考数据来生成所述目标媒体数据;通过所述目标应用对所述输入信息进行情感分析,将得到的情感分析结果作为参考数据来生成所述目标媒体数据;基于所述输入信息的显示参数,将所述显示参数作为参考数据来生成所述目标媒体数据;基于所述输入信息的音频参数,将所述音频参数作为参考数据来生成所述目标媒体数据。
在一些实施方式中,所述传输模块702,还用于:若所述输入信息包括文本内容,对所述文本内容进行语义分析和/或情感分析,将分析得到的语义主题特征、内容类别和情感特征中的至少之一作为参考数据来生成所述目标媒体数据;若所述输入信息包括音频内容,对所述音频内容进行语义分析和/或情感分析,将分析得到的语义主题特征、情感特征和音频参数中的至少之一作为参考数据来生成所述目标媒体数据;若所述输入信息包括输入内容的显示参数,将所述显示参数的颜色、透明度和色调中的至少之一作为所述参考数据来生成所述目标媒体数据;若所述输入信息包括输入语音的音频参数,将所述音频参数的频率、音色和声道中的至少之一作为所述参考数据来生成所述目标媒体数据。
在一些实施方式中,所述传输模块702,还用于:响应于所述输入信息处于正在输入状态,按预设时间间隔将获得的输入信息传输至所述目标应用;响应于所述输入信息从正在输入状态切换为输入完成状态,将获得的输入完成状态的输入信息传输至所述目标应用;响应于对所述输入信息的目标操作,将所述目标操作选定的输入信息传输至所述目标应用;响应于所述第一电子设备的形态变化,将所述单元电子设备在形态变化前获得的所述输入信息传输至所述目标应用;响应于所述第一电子设备与终端设备建立通信连接,将在所述第一电子设备获得的所述输入信息传输至所述目标应用。
在一些实施方式中,所述输入模组包括第二屏幕,所述传输模块702,还用于:响应于对所述第一屏幕显示的所述目标媒体数据的选定操作,在所述第二屏幕区别显示选定的目标媒体数据对应的输入信息,和/或,基于选定的目标媒体数据在所述第一屏幕重新生成以所述选定的目标媒体数据为参考数据的目标媒体数据;响应于对所述第二屏幕显示的输入信息的选定操作,在所述第一屏幕区别显示选定输入信息对应的目标媒体数据,和/或,在所述第一屏幕重新生成选定输入信息对应的目标媒体数据。
在一些实施方式中,所述媒体数据生成装置700还包括确定模块703,用于基于所述目标媒体数据的类型和/或数量,确定输出所述目标媒体数据的目标输出模组,将所述目标媒体数据通过对应的目标输出模组输出,所述目标输出模组包括以下至少之一:显示输出模组、音频输出模组。
在一些实施方式中,所述确定模块703,还用于:若所述目标媒体数据包括一个图像数据,将一个图像数据通过显示输出模组输出,所述显示输出模组为第一屏幕;若所述目标媒体数据包括多个图像数据,将多个图像数据按照预设时间间隔,依次通过显示输出模组输出多个图像数据中的各个图像数据,所述显示输出模组为第一屏幕;若所述目标媒体数据包括音频数据,将所述音频数据通过一个或多个音频输出模组输出,所述音频输出模组为所述第一电子设备的音频输出模组;若所述目标媒体数据包括音频数据,将所述音频数据通过一个或多个音频输出模组输出,并且,将所述音频数据作为参考数据生成图像数据通过显示输出模组输出,所述音频输出模组为所述第一电子设备的音频输出模组,所述显示输出模组为第一屏幕;若所述目标媒体数据包括图像数据以及音频数据,将所述音频数据通过一个或多个音频输出模组输出,将所述图像数据通过显示输出模组输出,所述音频输出模组为所述第一电子设备的音频输出模组,所述显示输出模组为第一屏幕;若所述目标媒体数据包括图像数据,将所述图像数据转换为描述所述图像数据的音频数据,并且,通过音频输出模组输出,所述音频输出模组为所述第一电子设备的音频输出模组,所述显示输出模组为第一屏幕。
以上装置实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请装置实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。
需要说明的是,本申请实施例中,如果以软件功能模块的形式实现上述方法,并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一台电子设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。这样,本申请实施例不限制于任何特定的硬件和软件结合。
本申请实施例提供一种电子设备,包括存储器和处理器,所述存储器存储有可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述方法。其中,本实施例提供的电子设备可以是本申请提供方法中的第一电子设备。
本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述方法。所述计算机可读存储介质可以是瞬时性的,也可以是非瞬时性的。
本申请实施例提供一种计算机程序产品,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序被计算机读取并执行时,实现上述方法中的部分或全部步骤。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software DevelopmentKit,SDK)等等。
需要说明的是,图8为本申请实施例提供的一种电子设备的硬件实体示意图,如图所示,该电子设备800的硬件实体包括:处理器801、通信接口802和存储器803,其中:
处理器801通常控制电子设备800的总体操作。
通信接口802可以使电子设备通过网络与其他终端或服务器通信。
存储器803配置为存储由处理器801可执行的指令和应用,还可以缓存待处理器801以及电子设备800中各模块待处理或已经处理的数据(例如,图像数据、音频数据、语音通信数据和视频通信数据),可以通过闪存(FLASH)或随机访问存储器(Random AccessMemory,RAM)实现。处理器801、通信接口802和存储器803之间可以通过总线804进行数据传输。
这里需要指出的是:以上存储介质和设备实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请存储介质和设备实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本申请的各种实施例中,上述各步骤/过程的序号的大小并不意味着执行顺序的先后,各步骤/过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本申请各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。
Claims (10)
1.一种媒体数据生成方法,所述方法包括:
响应于第一电子设备通过输入模组获得输入信息,所述输入信息在第一屏幕上不显示;
将所述输入信息传输至运行在所述第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,所述目标媒体数据与所述输入信息的内容至少部分不同,所述第一屏幕和/或所述输入模组属于或不属于所述第一电子设备。
2.根据权利要求1所述的方法,其中,通过输入模组获得输入信息,包括以下至少之一:
通过所述第一电子设备或第二电子设备的第二屏幕获得所述输入信息;
通过所述第一电子设备或第二电子设备的传感器获得所述输入信息;
通过所述第一电子设备或第二电子设备的输入部件获得所述输入信息;
其中,所述第二电子设备是与所述第一电子设备建立目标通信连接的设备。
3.根据权利要求2所述的方法,所述将所述输入信息传输至运行在所述第一屏幕的目标应用,包括以下至少之一:
若通过所述第一电子设备的传感器获得所述输入信息,将所述输入信息转换为所述目标应用用于生成所述媒体数据的参考数据,将转换后的参考数据传输至运行在所述第一屏幕的目标应用;
若通过在所述第一电子设备的第二屏幕上运行的第一应用获得所述输入信息,通过所述目标应用与所述第一应用之间的目标接口,将在所述第一应用获得的输入信息传输至所述目标应用。
4.根据权利要求1所述的方法,所述将输入信息传输至运行在第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,包括以下至少之一:
通过所述目标应用对所述输入信息进行语义分析,将得到的语义分析结果作为参考数据来生成所述目标媒体数据;
通过所述目标应用对所述输入信息进行情感分析,将得到的情感分析结果作为参考数据来生成所述目标媒体数据;
基于所述输入信息的显示参数,将所述显示参数作为参考数据来生成所述目标媒体数据;
基于所述输入信息的音频参数,将所述音频参数作为参考数据来生成所述目标媒体数据。
5.根据权利要求4所述的方法,所述将所述输入信息传输至显示在第一屏幕的目标应用,以通过所述目标应用生成目标媒体数据,包括:
若所述输入信息包括文本内容,对所述文本内容进行语义分析和/或情感分析,将分析得到的语义主题特征、内容类别和情感特征中的至少之一作为参考数据来生成所述目标媒体数据;
若所述输入信息包括音频内容,对所述音频内容进行语义分析和/或情感分析,将分析得到的语义主题特征、情感特征和音频参数中的至少之一作为所述参考数据来生成所述目标媒体数据;
若所述输入信息包括输入内容的显示参数,将所述显示参数的颜色、透明度和色调中的至少之一作为所述参考数据来生成所述目标媒体数据;
若所述输入信息包括输入语音的音频参数,将所述音频参数的频率、音色和声道中的至少之一作为所述参考数据来生成所述目标媒体数据。
6.根据权利要求1所述的方法,所述将所述输入信息传输至显示在第一屏幕的目标应用,包括以下至少之一:
响应于所述输入信息处于正在输入状态,按预设时间间隔将获得的输入信息传输至所述目标应用;
响应于所述输入信息从正在输入状态切换为输入完成状态,将获得的输入完成状态的输入信息传输至所述目标应用;
响应于对所述输入信息的目标操作,将所述目标操作选定的输入信息传输至所述目标应用;
响应于所述第一电子设备的形态发生变化,将所述第一电子设备在形态变化前获得的输入信息传输至所述目标应用;
响应于所述第一电子设备与第二电子设备建立通信连接,将所述第一电子设备获得的输入信息传输至所述目标应用。
7.根据权利要求1所述的方法,所述输入模组包括第二屏幕,所述方法还包括以下至少之一:
响应于对所述第一屏幕显示的目标媒体数据的选定操作,在所述第二屏幕区别显示选定的媒体数据对应的输入信息,和/或,基于选定的媒体数据在所述第一屏幕重新生成目标媒体数据;
响应于对所述第二屏幕显示的输入信息的选定操作,在所述第一屏幕区别显示选定输入信息对应的媒体数据,和/或,在所述第一屏幕重新生成选定输入信息对应的目标媒体数据。
8.根据权利要求1至7所述的方法,所述方法还包括:
基于所述目标媒体数据的类型和/或数量,确定输出所述目标媒体数据的目标输出模组,将所述目标媒体数据通过对应的目标输出模组输出,所述目标输出模组包括以下至少之一:显示输出模组、音频输出模组。
9.根据权利要求8所述的方法,所述基于目标媒体数据的类型和/或数量,确定输出所述目标媒体数据的目标输出模组,将所述目标媒体数据通过对应的目标输出模组输出,包括:
若所述目标媒体数据包括一张图像,将该图像输出至所述第一屏幕或输出至第二电子设备的第二屏幕或第三屏幕;
若所述目标媒体数据包括多张图像,将所述多张图像按照预设时间间隔依次输出至所述第一屏幕,或输出至第二电子设备的第二屏幕或第三屏幕;
若所述目标媒体数据包括音频数据,将所述音频数据通过第一电子设备和/或第二电子设备的音频输出模组输出;
若所述目标媒体数据包括音频数据,将所述音频数据通过第一电子设备和/或第二电子设备的音频输出模组输出,以及,将基于所述音频数据生成的图像数据通过第一电子设备和/或第二电子设备的显示屏幕输出;
若所述目标媒体数据包括图像数据以及音频数据,将所述音频数据通过第一电子设备和/或第二电子设备的音频输出模组输出,将所述图像数据通过一电子设备和/或第二电子设备的显示屏幕输出;
若所述目标媒体数据包括图像数据,将所述图像数据转换为描述所述图像数据的音频数据,以通过第一电子设备和/或第二电子设备的音频输出模组进行输出。
10.一种电子设备,包括存储器和处理器,所述存储器存储有可在处理器上运行的计算机程序,所述处理器执行所述程序时实现权利要求1至9中任一项所述方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410022349.9A CN118012551A (zh) | 2024-01-05 | 2024-01-05 | 媒体数据生成方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410022349.9A CN118012551A (zh) | 2024-01-05 | 2024-01-05 | 媒体数据生成方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118012551A true CN118012551A (zh) | 2024-05-10 |
Family
ID=90947060
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410022349.9A Pending CN118012551A (zh) | 2024-01-05 | 2024-01-05 | 媒体数据生成方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118012551A (zh) |
-
2024
- 2024-01-05 CN CN202410022349.9A patent/CN118012551A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106662920B (zh) | 交互式视频生成 | |
AU2014331209A1 (en) | Method for dialogue between a machine, such as a humanoid robot, and a human interlocutor; computer program product; and humanoid robot for implementing such a method | |
US20190371319A1 (en) | Method for human-machine interaction, electronic device, and computer-readable storage medium | |
WO2021149929A1 (ko) | 클라우드 기반 음성결합을 이용한 맞춤형 동영상 제작 서비스 제공 시스템 | |
CN115485039A (zh) | 用于支持游戏脚本的创建的系统和方法 | |
CN113672086A (zh) | 一种页面处理方法、装置、设备及介质 | |
CN113850898A (zh) | 场景渲染方法及装置、存储介质及电子设备 | |
CN116682411A (zh) | 语音合成方法、语音合成系统、电子设备及存储介质 | |
CN117809680A (zh) | 一种服务器、显示设备及数字人交互方法 | |
CN117292022A (zh) | 基于虚拟对象的视频生成方法、装置及电子设备 | |
US20240257802A1 (en) | Acoustic-based linguistically-driven automated text formatting | |
KR102462685B1 (ko) | 웹툰 제작 보조 장치 | |
CN118012551A (zh) | 媒体数据生成方法及电子设备 | |
CN113111664B (zh) | 文本的生成方法、装置、存储介质及计算机设备 | |
JP2005128711A (ja) | 感性情報推定方法および文字アニメーション作成方法、これらの方法を用いたプログラム、記憶媒体、感性情報推定装置、文字アニメーション作成装置 | |
KR102388465B1 (ko) | 가상 콘텐츠 생성 방법 | |
KR20220138669A (ko) | 개인화 오디오 정보를 제공하기 위한 전자 장치 및 방법 | |
CN116226411B (zh) | 一种基于动画的互动项目的交互信息处理方法和装置 | |
CN113823329B (zh) | 数据处理方法以及计算机设备 | |
JP7548633B1 (ja) | セグメント検索装置及びプログラム | |
US20240347045A1 (en) | Information processing device, information processing method, and program | |
US20240193839A1 (en) | Automatically generating a custom artificially intelligent (ai) character based on a user-provided description of the ai character | |
US20240320519A1 (en) | Systems and methods for providing a digital human in a virtual environment | |
CN118428336A (zh) | 低代码应用的生成方法、装置、电子设备及存储介质 | |
KR20220137437A (ko) | 전자 장치 및 전자 장치의 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |