CN115103054A - 信息处理方法、装置、电子设备及介质 - Google Patents

信息处理方法、装置、电子设备及介质 Download PDF

Info

Publication number
CN115103054A
CN115103054A CN202111118055.9A CN202111118055A CN115103054A CN 115103054 A CN115103054 A CN 115103054A CN 202111118055 A CN202111118055 A CN 202111118055A CN 115103054 A CN115103054 A CN 115103054A
Authority
CN
China
Prior art keywords
video
information
message
frame
image sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111118055.9A
Other languages
English (en)
Other versions
CN115103054B (zh
Inventor
滕孝军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Hangzhou Co Ltd
Original Assignee
Vivo Mobile Communication Hangzhou Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Hangzhou Co Ltd filed Critical Vivo Mobile Communication Hangzhou Co Ltd
Priority to CN202111118055.9A priority Critical patent/CN115103054B/zh
Priority to PCT/CN2022/119576 priority patent/WO2023045856A1/zh
Publication of CN115103054A publication Critical patent/CN115103054A/zh
Application granted granted Critical
Publication of CN115103054B publication Critical patent/CN115103054B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种信息处理方法、装置、电子设备及介质,属于信息处理技术领域。该方法包括:在播放第一视频的情况下,接收第一通讯消息;在所述第一视频的播放窗口中,输出第一提示消息,所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。

Description

信息处理方法、装置、电子设备及介质
技术领域
本申请属于信息处理技术领域,更具体地,涉及一种信息处理方法、装置、电子设备及介质。
背景技术
随着智能手机普及以及网络技术的提高,使用智能手机观看小视频、电影等越来越普及,同时,人们对于观看视频的体验要求也越来越高。
但是,目前使用视频播放应用程序观看视频过程中,如果有外部信息来了,需要切换至该外部信息对应的应用程序,完成信息的读取和回复后才能返回到该视频播放应用程序,操作繁琐,且影响用户的观影体验。
发明内容
本申请实施例的目的是提供一种信息处理方法、装置、电子设备及介质,能够解决在观看视频时回复信息操作繁琐的问题。
第一方面,本申请实施例提供一种信息处理方法,其包括:
在播放第一视频的情况下,接收第一通讯消息;
在所述第一视频的播放窗口中,输出第一提示消息,所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。
第二方面,本申请实施例提供一种信息处理装置,其包括:
接收模块,用于在播放第一视频的情况下,接收第一通讯消息;
输出模块,用于在所述第一视频的播放窗口中,输出第一提示消息,所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
在本申请实施例中,其在观看第一视频的过程中,当接收到第一通讯消息时,会在该第一视频的播放窗口中输出第一提示消息,由于该第一提示消息包括第一视频信息,并且,该第一视频信息的内容是根据第一通讯消息的内容确定的,从而使得用户在观看第一视频的过程中,如果接收到第一通讯消息,不需要切换至该第一通讯消息对应的应用程序,可直接通过第一视频信息进行第一通讯消息的查看,用户无需进行任何操作就可知晓第一通讯消息的内容,提升了用户的观影体验。
附图说明
图1为本申请实施例提供的一种信息处理方法的流程示意图;
图2a-图2c为本申请实施例提供的电子设备的界面显示示意图;
图3为本申请实施例提供的一种信息处理装置的结构示意图;
图4为本申请实施例提供的电子设备的结构示意图;
图5为本申请另一实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的信息处理方法进行详细地说明。
请参看图1,其是本申请实施例提供的一种信息处理方法的流程图。该方法可以应用于电子设备中,该电子设备可以为手机、平板电脑、笔记本电脑等。如图1所示,该方法可以包括步骤1100~步骤1200,以下予以详细说明。
步骤1100,在播放第一视频的情况下,接收第一通讯消息。
第一视频为用户使用视频播放类应用程序正在播放的视频。该视频可以是短视频、电视剧、电影等。
第一通讯消息为第一账号向在电子设备登录的第二账号发送的消息。
在一个例子中,第一账号和第二账号可以均为登录同一社交软件应用程序的不同账号。例如,第二账号为在电子设备中登录社交软件应用程序1的账号,第一账号为在另一电子设备中登录社交软件应用程序1的账号。
在另一例子中,第一账号和第二账号可以均为不同的手机号码。例如,第二账号为电子设备中所插入的SIM卡的号码,第一账号为另一电子设备中所插入的SIM卡的号码。
示例性地,用户使用视频播放类应用程序正在播放第一视频,并且,第一视频播放的帧图像为图2a所示图像。此时,接收到在另一电子设备中登录社交软件应用程序1的第一账号向在电子设备中登录社交软件应用程序1的第二账号发送的消息“XX,请回家吃饭!”,该“XX,请回家吃饭!”即为第一通讯消息,可以理解的是,该第一通讯消息中还包括有该社交软件应用程序1的应用信息,例如可以是该社交软件应用程序1的名称,以便用户后续向第一账号回复消息。
在播放第一视频的情况下,接收第一通讯消息之后,进入:
步骤1200,在所述第一视频的播放窗口中,输出第一提示消息。
所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。
第一视频信息可以包括第一文字信息、第一语音信息和第一插帧图像序列。所述第一文字信息和所述第一语音信息的内容是根据所述第一通讯消息的内容确定的,所述第一插帧图像序列包括至少一帧所述第一视频的视频帧。也可以理解为,第一视频信息为插播在第一视频中的一小段视频,通过播放第一视频信息,无需切换至相应的应用程序,也可以实现用户及时知晓第一通讯消息的内容。
本实施例中,在接收到第一通讯消息之后,便可对第一通讯消息进行解析,生成与第一通讯消息对应的第一文字信息和第一语音信息。这里,为了便于将第一通讯消息对应的文字信息和语音信息与后续用户输入的文字信息和语音信息进行区别。其将第一通讯消息对应的文字信息和语音信息分别称之为第一文字信息和第一语音信息,而将后续用户输入的文字信息和语音信息称之为第二文字信息和第二语音信息。
以上第一文字信息可作为所生成的第一视频信息的字幕信息。以上第一语音信息可作为所生成的第一视频信息的语音信息。
继续上述示例,第一通讯消息包括“XX,请回家吃饭!”,在此,通过对该第一通讯消息进行解析,可以生成第一文字信息“XX,请回家吃饭!”,以及第一语音信息“XX,请回家吃饭!”。
本实施例中,在第一视频信息包括第一文字信息、第一语音信息和第一插帧图像序列的情况下,本步骤1200中在所述第一视频的播放窗口中,输出第一提示消息可以进一步包括:在所述第一视频的播放窗口中,播放所述第一语音信息和所述第一插帧图像序列,并显示所述第一文字信息。
继续上述示例,第一通讯消息包括“XX,请回家吃饭!”,在此,可以在第一视频的播放窗口中,播放第一语音信息“XX,请回家吃饭!”和第一插帧图像序列,该第一插帧图像序列中的其中一个插帧图像可以如图2b所示,并显示第一文字信息“XX,请回家吃饭!”。
根据本步骤,其在第一视频的播放窗口中,不仅播放第一插帧图像序列和第一语音信息,还可以显示第一文字信息,实现在不打断用户观影的前提下使得用户能够知晓第一通讯消息的内容,提升了用户的观影体验。
本实施例中,在执行本步骤1200中在所述第一视频的播放窗口中,输出第一提示消息之前,本公开的信息处理方法还可以进一步包括如下步骤:在所述第一视频的第一视频帧之后插入所述第一插帧图像序列,所述第一视频帧是所述接收第一通讯消息时,在所述播放窗口中显示的视频帧。
第一插帧图像序列中包括至少一帧插帧图像。并且,第一插帧图像序列位于第一视频的第一视频帧之后。
第一插帧图像序列可以是由第一视频的第一视频帧和第二视频帧经过智能插帧算法所计算出的图像序列,其中,第二视频帧为该第一视频中该第一视频帧的下一视频帧。例如可以利用光流法计算出第一视频帧和第二视频帧之间的中间视频帧序列,作为该第一插帧图像序列。又例如,也可以是利用光流法结合深度学习计算出第一视频帧和第二视频帧之间的中间视频帧序列,作为该第一插帧图像序列。当然,还可以是利用其它智能插帧算法来计算出该第一插帧图像序列,本实施例在此不做限定。
第一插帧图像序列还可以是与第一视频无关的其他图像序列,在此,该第一插帧图像序列可以是以画中画的形式在播放窗口中播放,也可以是在播放窗口中新增一个悬浮窗口播放等,本实施例并不具体限定第一插帧图像序列的播放形式。并且,该第一插帧图像序列可以是插入到第一视频的任意两个视频帧之间,在播放完第一视频信息之后,从第一视频帧开始继续播放第一视频即可。
示例性地,由于在接收到第一通讯消息“XX,请回家吃饭!”时播放窗口中显示的视频帧为图2a所示的视频帧,在此,可以将图2a所示视频帧作为第一视频帧。图2c为第一视频中第一视频帧的下一视频帧,在此,可以将图2c所示视频帧作为第二视频帧。可以基于光流法计算出该第一视频帧和第二视频帧之间的中间视频帧序列,作为第一插帧图像序列,图2b所示为该第一插帧图像序列中的任意一个插帧图像。
根据本步骤,其在接收第一通讯消息时,在播放窗口中显示的视频帧之后插入第一插帧图像序列,基于该第一插帧图像序列生成第一视频信息,使得在第一视频中通过智能视频插帧的形式,让第一视频中的对象通过台词的方式读出该第一通讯消息,无需切换至相应的应用程序,也可以实现用户及时知晓第一通讯消息的内容。
本实施例中,在执行本步骤1200中在所述第一视频的播放窗口中,输出第一提示消息之前,本公开的信息处理方法还可以进一步包括如下步骤2100:将所述第一文字信息、所述第一语音信息和所述第一插帧图像序列的时间戳进行对齐。
本实施例中,本步骤2100中将所述第一文字信息、所述第一语音信息和所述第一插帧图像序列的时间戳进行对齐可以进一步包括如下步骤2110~2130:
步骤2110,识别第一视频帧中的目标对象。
目标对象为播放第一视频中的第一视频帧时处于说话状态的对象。
具体地,可以是在接收到第一通讯消息的情况下,对包括接收到第一通讯消息时第一视频所播放的第一视频帧之前的目标数量个视频帧进行识别,以确定出第一视频帧中的处于说话状态的对象作为目标对象。该目标数量可以是根据实际应用场景和实际需求设置的数值。
继续上述示例,当接收到第一通讯消息“XX,请回家吃饭!”时,第一视频中播放的第一视频帧为图2a所示视频帧,该第一视频帧中处于说话状态的对象为女生,在此,该女生作为第一视频帧中的目标对象。并且,该女生所说的话为“害怕!”,此时,对应该第一视频的播放时间点可以为:1:00分。
步骤2120,获取显示第一视频帧的第一时间戳、显示第一视频帧对应的字幕信息的第二时间戳、及目标对象说话的第三时间戳。
第一时间戳为显示第一视频帧的时间戳。第二时间戳为显示第一视频帧所对应的字幕信息的时间戳。第三时间戳为目标对象说话时的时间戳。
本步骤2120中,为了使得第一视频中的视频帧、字幕信息以及语音信息进行同步显示,电子设备通常会对视频帧所对应的时间戳、字幕信息所对应的时间戳以及语音信息所对应的时间戳进行对齐,即时间戳同步处理,使得视频帧、字幕信息和语音信息同步显示以播放第一视频。
步骤2130,根据第一时间戳得到显示第一插帧图像序列的第四时间戳,根据第二时间戳得到显示第一文字信息的第五时间戳,以及根据第三时间戳确定第一语音信息的第六时间戳,并对第四时间戳、第五时间戳和第六时间戳进行对齐。
具体地,本步骤2130中是先根据第一时间戳,确定显示第一插帧图像序列的第四时间戳,根据第二时间戳,确定显示第一文字信息的第五时间戳,以及根据第三时间戳,确定第一语音信息的第六时间戳。进而对第四时间戳、第五时间戳和第六时间戳进行对齐即时间戳同步处理,使得将第一文字信息和第一语音信息添加至第一插帧图像序列,生成第一视频信息。
第四时间戳为显示第一插帧图像序列的时间戳。第五时间戳为显示第一文字信息的显示时间戳。第六时间戳为播放第一语音信息的时间戳。
也就是说,对第四时间戳、第五时间戳和第六时间戳进行时间戳同步处理,便可根据第一文字信息、第一语音信息和第一插帧图像序列生成第一视频信息。
具体地,将第一文字信息转换为字幕信息加入字幕通道,将第一语音信息加入到语音通道,进而与第一插帧图像序列生成第一视频信息,在将第一语音信息加入到语音通道之前,可以进行变声处理,让第一语音信息的音色与第一视频中的某一对象的音色相同。
在本申请的其他实施例中,还可以是只播放第一插帧图像序列和对应的字幕信息,或者是只播放第一插帧图像序列和对应的第一语音信息。继续上述示例,由于接收到第一通讯消息“XX,请回家吃饭!”时,第一视频中显示的第一视频帧(图2a)时处于说话状态的对象为第一视频帧中的女生,并且,该女生所说的话为“害怕!”,对应该第一视频的播放时间点为:1:00。此时,在根据第四时间戳、第五时间戳和第六时间戳进行时间戳同步处理,以将第一插帧图像序列、第一文字信息和第一语音信息生成第一视频信息,如图2b所示,该第一视频信息的字幕信息为“XX,请回家吃饭!”,该第一视频信息中该女生说话为“XX,请回家吃饭!”,并且,该第一视频信息的播放时间点可以为1:09分。
根据以上步骤,其是根据第一插帧图像序列、第一文字信息和第一语音信息生成第一视频信息,由于第一文字信息和第一语音信息对应于第一通讯消息,从而使得用户可以高效直观地查看该第一通讯消息。
根据本实施例,其在观看第一视频的过程中,当接收到第一通讯消息时,会在该第一视频的播放窗口中输出第一提示消息,由于该第一提示消息包括第一视频信息,并且,该第一视频信息的内容是根据第一通讯消息的内容确定的,从而使得用户在观看第一视频的过程中,如果接收到第一通讯消息,不需要切换至该第一通讯消息对应的应用程序,可直接通过第一视频信息进行第一通讯消息的查看,用户无需进行任何操作就可知晓第一通讯消息的内容,提升了用户的观影体验。
在一个实施例中,在执行以上步骤1200在所述第一视频的播放窗口中,输出第一提示消息之后,本公开实施例的信息处理方法还可以进一步包括:从第二视频帧开始,继续播放第一视频。第二视频帧为第一视频中第一视频帧的下一视频帧。
根据本实施例,其在播放完第一视频信息之后,会关闭该第一视频信息,并恢复第一视频中第二视频帧的播放。
示例性地,该第二视频帧为图2c所示视频帧,未输出第一提示信息之前该第二视频帧的播放时间点例如为1:04分。当在该第二视频帧之前插入第一视频信息,由于该第一视频信息的播放时间点为1:09分,在此,当第一提示信息输出完毕,该第二视频帧对应的播放时间点顺延至1:09分之后,该第二视频帧中男生所说的话为“不用害怕”。
根据本实施例,其在输出第一提示信息后,会恢复第一视频的播放,从而将用户消息读取和视频的显示效果联动起来,带给用户沉浸式的观看体验。
在一个实施例中,其在执行以上步骤1200中在所述第一视频的播放窗口中,输出第一提示消息之后,本公开实施例的信息处理方法还进一步包括如下步骤3100~3400:
步骤3100,接收用户的第一输入。
该第一输入可以为:用户对第一视频的播放窗口的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。
本实施例中,本步骤3100中接收用户的第一输入可以进一步包括:接收用户对所述播放窗口的第一输入。
可以理解的是,在输出第一提示信息之后,电子设备会从第二视频帧开始,继续播放第一视频,在此,用户针对该第一视频的播放窗口实施触控输入,该触控输入可以是双击输入。
示例性地,第一视频的播放窗口中播放图2c所示的第二视频帧,此时,用户可以双击该第二视频帧中的女生。
步骤3200,响应于所述第一输入,生成第二视频信息。
本实施例中,本步骤3200中响应于所述第一输入,生成第二视频信息可以进一步包括如下步骤3210~步骤3240:
步骤3210,响应于所述第一输入,显示消息回复窗口。
该消息回复窗口中包括文字输入框和语音输入框,通过该文字输入框便可输入文字信息,通过该语音输入框便可输入语音信息。
继续上述示例,用户双击图2c所示的第二视频帧中的女生之后,便可在该第二视频帧上弹出对话框作为该消息回复窗口。
步骤3220,接收用户对所述消息回复窗口的第二输入。
该第二输入可以为:用户对消息回复窗口的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。继续上述示例,在第二视频帧上弹出对话框,该对话框包括文本输入框和语音输入框,例如可以在文本输入框内输入文字“好的”,以及,通过长按语音输入框以输入语音“好的”。
步骤3230,响应于所述第二输入,确定第二文字信息和第二语音信息。
继续上述示例,电子设备可确定通过文本输入框内输入的文字“好的”作为第二文字信息,以及确定通过语音输入框输入的语音“好的”作为第二语音信息。
步骤3240,将所述第二文字信息、所述第二语音信息和第二插帧图像序列进行合成,得到所述第二视频信息。
所述第二插帧图像序列包括至少一帧所述第一视频的视频帧。
第二插帧图像序列中包括至少一帧插帧图像。并且,第二插帧图像序列位于第一视频的第二视频帧之后。
第二插帧图像序列是由第一视频的第二视频帧和第三视频帧经过智能插帧算法所计算出的图像序列。其中,第三视频帧为该第一视频中该第二视频帧的下一视频帧。例如可以利用光流法计算出第二视频帧和第三视频帧之间的中间视频帧序列,作为该第二插帧图像序列。又例如,也可以是利用光流法结合深度学习计算出第二视频帧和第三视频帧之间的中间视频帧序列,作为该第二插帧图像序列。当然,还可以是利用其它智能插帧算法来计算出该第二插帧图像序列,本实施例在此不做限定。
具体地,可以是先获取第二视频帧对应的时间戳、该第二视频帧所匹配字幕信息对应的时间戳以及目标对象说话的语音时间戳,并根据第二视频帧对应的时间戳,确定第二插帧图像序列对应的时间戳。根据第二视频帧所匹配字幕信息对应的时间戳,确定第二文字信息对应的时间戳,以及,根据目标对象说话的语音时间戳,确定第二语音信息对应的时间戳。进而对第二插帧图像序列对应的时间戳、第二文字信息对应的时间戳和第二语音信息对应的时间戳进行时间戳同步处理,并将第二文字信息、第二语音信息和第二插帧图像序列合成以生成第二视频信息。
具体地,通过将第二插帧图像序列对应的时间戳、第二文字信息对应的时间戳和第二语音信息对应的时间戳进行时间戳同步处理,并将第二文字信息、第二语音信息和第二插帧图序列像合成,将第二文字信息转换为字幕信息加入字幕通道,将第二语音信息加入到语音通道,进而与第二插帧图像序列生成第二视频信息。
在本申请的其他实施例中,还可以是只生成第二插帧图像序列和对应的字幕信息,或者是只生成第二插帧图像序列和对应第二语音信息。
根据以上步骤,其提供了一个自定义的消息回复方式,可以把插帧视频回复给第一通讯消息的通讯对象,通讯对象可以直接通过该第二视频信息便可查看用户回复的消息,增加消息交互的趣味性,也增加了视频观看者的沉浸式体验,不用切换出视频进行消息交互。
步骤3300,将所述第二视频信息发送至所述第一通讯消息的通讯对象。
第一通讯消息的通讯对象可以为在另一电子设备中登录社交软件应用程序1的第一账号。
第一通讯消息的通讯对象也可以为在另一电子设备中所插入的SIM卡的号码。
继续上述示例,在将第二文字信息、第二语音信息和第二插帧图像序列进行对齐,得到第二视频信息的字幕信息为“好的”,该第二视频信息中该女生说话为“好的”,并将该第二视频信息发送至在另一电子设备中登录社交软件应用程序1的第一账号,以供第一账号读取该用户回复的消息。
根据本实施例,其支持在第一视频中生成第二视频信息,并将该第二视频信息发送至第一通讯消息的通讯对象,通讯对象可以直接通过该第二视频信息便可查看用户回复的消息,增加消息交互的趣味性。
需要说明的是,本申请实施例提供的信息处理方法,执行主体可以为信息处理装置,或者该信息处理装置中的用于执行信息处理方法的控制模块。本申请实施例中以信息处理装置执行信息处理方法为例,说明本申请实施例提供的信息处理装置。
与上述实施例相对应,参见图3,本申请实施例还提供一种信息处理装置300,包括:
接收模块310,用于在播放第一视频的情况下,接收第一通讯消息。
提示模块320,用于在所述第一视频的播放窗口中,输出第一提示消息,所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。
在本申请实施例中,其在观看第一视频的过程中,当接收到第一通讯消息时,会在该第一视频的播放窗口中输出第一提示消息,由于该第一提示消息包括第一视频信息,并且,该第一视频信息的内容是根据第一通讯消息的内容确定的,从而使得用户在观看第一视频的过程中,如果接收到第一通讯消息,不需要切换至该第一通讯消息对应的应用程序,可直接通过第一视频信息进行第一通讯消息的查看,用户无需进行任何操作就可知晓第一通讯消息的内容,提升了用户的观影体验。
在一个实施例中,在所述第一视频信息包括第一文字信息、第一语音信息和第一插帧图像序列的情况下,所述提示模块320,具体用于:在所述第一视频的播放窗口中,播放所述第一语音信息和所述第一插帧图像序列,并显示所述第一文字信息;其中,所述第一文字信息和所述第一语音信息的内容是根据所述第一通讯消息的内容确定的,所述第一插帧图像序列包括至少一帧所述第一视频的视频帧。
在本申请实施例中,其在第一视频的播放窗口中,不仅播放第一插帧图像序列和第一语音信息,还可以显示第一文字信息,无需切换至相应的应用程序,也可以实现用户及时知晓第一通讯消息的内容。
在一个实施例中,装置300还包括插入模块,该插入模块,用于在所述第一视频的播放窗口中,输出第一提示消息之前,在所述第一视频的第一视频帧之后插入所述第一插帧图像序列,所述第一视频帧是所述接收第一通讯消息时,在所述播放窗口中显示的视频帧。
在本申请实施例中,其在接收第一通讯消息时,在播放窗口中显示的视频帧之后插入第一插帧图像序列,基于该第一插帧图像序列生成第一视频信息,使得在第一视频中通过智能视频插帧的形式,让第一视频中的对象通过台词的方式读出该第一通讯消息,无需切换至相应的应用程序,也可以实现用户及时知晓第一通讯消息的内容。
在一个实施例中,装置300还包括对齐模块,该对齐模块,用于在所述在所述第一视频的播放窗口中,输出第一提示消息之前,将所述第一文字信息、所述第一语音信息和所述第一插帧图像序列的时间戳进行对齐。
在本申请实施例中,其是根据第一插帧图像序列、第一文字信息和第一语音信息生成第一视频信息,由于第一文字信息和第一语音信息对应于第一通讯消息,从而使得用户可以高效直观地查看该第一通讯消息,还可以增加信息交互的趣味性。
在一个实施例中,装置300还包括生成模块和发送模块。
接收模块310,还用于接收用户的第一输入。
该生成模块,用于生成第二视频信息。
该发送模块,用于将所述第二视频信息发送至所述第一通讯消息的通讯对象。
在本申请实施例中,其支持在第一视频中生成第二视频信息,并将该第二视频信息发送至第一通讯消息的通讯对象,通讯对象可以直接通过该第二视频信息便可查看用户回复的消息,增加消息交互的趣味性。
在一个实施例中,接收模块310,具体用于:接收用户对所述播放窗口的第一输入。
该生成模块,具体用于:响应于所述第一输入,显示消息回复窗口;接收用户对所述消息回复窗口的第二输入;响应于所述第二输入,确定第二文字信息和第二语音信息;将所述第二文字信息、所述第二语音信息和第二插帧图像序列进行合成,得到所述第二视频信息,所述第二插帧图像序列包括至少一帧所述第一视频的视频帧。
在本申请实施例中,其提供了一个自定义的消息回复方式,可以把插帧视频回复给第一通讯消息的通讯对象,通讯对象可以直接通过该第二视频信息便可查看用户回复的消息,增加消息交互的趣味性,也增加了视频观看者的沉浸式体验,不用切换出视频进行消息交互。
本申请实施例中的信息处理装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的信息处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的信息处理装置能够实现上述方法实施例实现的各个过程,为避免重复,这里不再赘述。
与上述实施例相对应,可选地,如图4所示,本申请实施例还提供一种电子设备400,包括处理器401,存储器402,存储在存储器402上并可在所述处理器401上运行的程序或指令,该程序或指令被处理器401执行时实现上述信息处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图5为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备500包括但不限于:射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、以及处理器510等部件。
本领域技术人员可以理解,电子设备500还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器510逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器510,用于在播放第一视频的情况下,接收第一通讯消息;显示单元506,用于在所述第一视频的播放窗口中,输出第一提示消息,所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。
在一个实施例中,在所述第一视频信息包括第一文字信息、第一语音信息和第一插帧图像序列的情况下。显示单元506,用于播放所述第一语音信息和所述第一插帧图像序列,并显示所述第一文字信息;其中,所述第一文字信息和所述第一语音信息的内容是根据所述第一通讯消息的内容确定的,所述第一插帧图像序列包括至少一帧所述第一视频的视频帧。
本申请实施例中,其在观看第一视频的过程中,当接收到第一通讯消息时,会在该第一视频的播放窗口中输出第一提示消息,由于该第一提示消息包括第一视频信息,并且,该第一视频信息的内容是根据第一通讯消息的内容确定的,从而使得用户在观看第一视频的过程中,如果接收到第一通讯消息,不需要切换至该第一通讯消息对应的应用程序,可直接通过第一视频信息进行第一通讯消息的查看,用户无需进行任何操作就可知晓第一通讯消息的内容,提升了用户的观影体验。
在一个实施例中,处理器510,用于在所述第一视频的第一视频帧之后插入所述第一插帧图像序列,所述第一视频帧是所述接收第一通讯消息时,在所述播放窗口中显示的视频帧。
在本申请实施例中,其在第一视频的播放窗口中,不仅播放第一插帧图像序列和第一语音信息,还可以显示第一文字信息,无需切换至相应的应用程序,也可以实现用户及时知晓第一通讯消息的内容。
在一个实施例中,处理器510,还用于在所述第一视频的第一视频帧之后插入所述第一插帧图像序列,所述第一视频帧是所述接收第一通讯消息时,在所述播放窗口中显示的视频帧。
在本申请实施例中,其在接收第一通讯消息时,在播放窗口中显示的视频帧之后插入第一插帧图像序列,基于该第一插帧图像序列生成第一视频信息,使得在第一视频中通过智能视频插帧的形式,让第一视频中的对象通过台词的方式读出该第一通讯消息,无需切换至相应的应用程序,也可以实现用户及时知晓第一通讯消息的内容。在一个实施例中,处理器510,还用于将所述第一文字信息、所述第一语音信息和所述第一插帧图像序列的时间戳进行对齐。
在本申请实施例中,其是根据第一插帧图像序列、第一文字信息和第一语音信息生成第一视频信息,由于第一文字信息和第一语音信息对应于第一通讯消息,从而使得用户可以高效直观地查看该第一通讯消息。在一个实施例中,用户输入单元507,用于接收用户的第一输入;处理器510,用于响应于所述第一输入,生成第二视频信息;将所述第二视频信息发送至所述第一通讯消息的通讯对象。
在本申请实施例中,其支持在第一视频中生成第二视频信息,并将该第二视频信息发送至第一通讯消息的通讯对象,通讯对象可以直接通过该第二视频信息便可查看用户回复的消息,增加消息交互的趣味性。
在一个实施例中,用户输入单元507,用于接收用户对所述播放窗口的第一输入;显示单元506,用于响应于所述第一输入,显示消息回复窗口;用户输入单元507,用于接收用户对所述消息回复窗口的第二输入;处理器510,用于响应于所述第二输入,确定第二文字信息和第二语音信息;将所述第二文字信息、所述第二语音信息和第二插帧图像序列进行合成,得到所述第二视频信息,所述第二插帧图像序列包括至少一帧所述第一视频的视频帧。
在本申请实施例中,其提供了一个自定义的消息回复方式,可以把插帧视频回复给第一通讯消息的通讯对象,通讯对象可以直接通过该第二视频信息便可查看用户回复的消息,增加消息交互的趣味性,也增加了视频观看者的沉浸式体验,不用切换出视频进行消息交互。应理解的是,本申请实施例中,输入单元504可以包括图形处理器(GraphicsProcessing Unit,GPU)5041和麦克风5042,图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元506可包括显示面板5061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板5061。用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071,也称为触摸屏。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器509可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器510可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器510中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述信息处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述信息处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

1.一种信息处理方法,其特征在于,所述方法包括:
在播放第一视频的情况下,接收第一通讯消息;
在所述第一视频的播放窗口中,输出第一提示消息,所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。
2.根据权利要求1所述的方法,其特征在于,在所述第一视频信息包括第一文字信息、第一语音信息和第一插帧图像序列的情况下,所述在所述第一视频的播放窗口中,输出第一提示消息,包括:
在所述第一视频的播放窗口中,播放所述第一语音信息和所述第一插帧图像序列,并显示所述第一文字信息;
其中,所述第一文字信息和所述第一语音信息的内容是根据所述第一通讯消息的内容确定的,所述第一插帧图像序列包括至少一帧所述第一视频的视频帧。
3.根据权利要求2所述的方法,其特征在于,所述在所述第一视频的播放窗口中,输出第一提示消息之前,还包括:
在所述第一视频的第一视频帧之后插入所述第一插帧图像序列,所述第一视频帧是所述接收第一通讯消息时,在所述播放窗口中显示的视频帧。
4.根据权利要求3所述的方法,其特征在于,所述在所述第一视频的播放窗口中,输出第一提示消息之前,还包括:
将所述第一文字信息、所述第一语音信息和所述第一插帧图像序列的时间戳进行对齐。
5.根据权利要求1所述的方法,其特征在于,所述在所述第一视频的播放窗口中,输出第一提示消息之后,还包括:
接收用户的第一输入;
响应于所述第一输入,生成第二视频信息;
将所述第二视频信息发送至所述第一通讯消息的通讯对象。
6.根据权利要求5所述的方法,其特征在于,所述接收用户的第一输入,包括:
接收用户对所述播放窗口的第一输入;
所述响应于所述第一输入,生成第二视频信息,包括:
响应于所述第一输入,显示消息回复窗口;
接收用户对所述消息回复窗口的第二输入;
响应于所述第二输入,确定第二文字信息和第二语音信息;
将所述第二文字信息、所述第二语音信息和第二插帧图像序列进行合成,得到所述第二视频信息,所述第二插帧图像序列包括至少一帧所述第一视频的视频帧。
7.一种信息处理装置,其特征在于,所述装置包括:
接收模块,用于在播放第一视频的情况下,接收第一通讯消息;
提示模块,用于在所述第一视频的播放窗口中,输出第一提示消息,所述第一提示消息包括第一视频信息,所述第一视频信息的内容是根据所述第一通讯消息的内容确定的。
8.根据权利要求7所述的装置,其特征在于,在所述第一视频信息包括第一文字信息、第一语音信息和第一插帧图像序列的情况下,所述提示模块,具体用于:
在所述第一视频的播放窗口中,播放所述第一语音信息和所述第一插帧图像序列,并显示所述第一文字信息;
其中,所述第一文字信息和所述第一语音信息的内容是根据所述第一通讯消息的内容确定的,所述第一插帧图像序列包括至少一帧所述第一视频的视频帧。
9.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1-6中任一项所述的信息处理方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1-6中任一项所述的信息处理方法的步骤。
CN202111118055.9A 2021-09-22 2021-09-22 信息处理方法、装置、电子设备及介质 Active CN115103054B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111118055.9A CN115103054B (zh) 2021-09-22 2021-09-22 信息处理方法、装置、电子设备及介质
PCT/CN2022/119576 WO2023045856A1 (zh) 2021-09-22 2022-09-19 信息处理方法、装置、电子设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111118055.9A CN115103054B (zh) 2021-09-22 2021-09-22 信息处理方法、装置、电子设备及介质

Publications (2)

Publication Number Publication Date
CN115103054A true CN115103054A (zh) 2022-09-23
CN115103054B CN115103054B (zh) 2023-10-13

Family

ID=83287774

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111118055.9A Active CN115103054B (zh) 2021-09-22 2021-09-22 信息处理方法、装置、电子设备及介质

Country Status (2)

Country Link
CN (1) CN115103054B (zh)
WO (1) WO2023045856A1 (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107241655A (zh) * 2017-06-30 2017-10-10 广东欧珀移动通信有限公司 一种视频播放方法、装置、存储介质和终端
CN110944224A (zh) * 2019-11-29 2020-03-31 维沃移动通信有限公司 视频播放方法及电子设备
CN112565868A (zh) * 2020-12-04 2021-03-26 维沃移动通信有限公司 视频播放方法、装置及电子设备
CN112637409A (zh) * 2020-12-21 2021-04-09 维沃移动通信有限公司 内容输出方法、装置和电子设备
CN112866782A (zh) * 2020-12-30 2021-05-28 北京五八信息技术有限公司 视频播放方法、视频播放装置及电子设备
US20210258644A1 (en) * 2020-03-31 2021-08-19 Baidu Online Network Technology (Beijing) Co., Ltd. Video playing method, apparatus, electronic device and storage medium

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102075337A (zh) * 2009-11-20 2011-05-25 腾讯科技(深圳)有限公司 一种即时通信消息显示方法和相关装置
CN106550276A (zh) * 2015-09-22 2017-03-29 阿里巴巴集团控股有限公司 视频播放过程中多媒体信息的提供方法、装置和系统
CN108415753A (zh) * 2018-03-12 2018-08-17 广东欧珀移动通信有限公司 用户界面显示方法、装置及终端
CN108733291B (zh) * 2018-04-12 2020-06-23 珠海格力电器股份有限公司 一种通知消息的处理方法及装置
CN109460174A (zh) * 2018-11-09 2019-03-12 维沃移动通信有限公司 一种信息处理方法及终端设备
CN110830650B (zh) * 2019-10-30 2022-03-25 深圳传音控股股份有限公司 一种终端的提醒方法、终端及计算机存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107241655A (zh) * 2017-06-30 2017-10-10 广东欧珀移动通信有限公司 一种视频播放方法、装置、存储介质和终端
CN110944224A (zh) * 2019-11-29 2020-03-31 维沃移动通信有限公司 视频播放方法及电子设备
US20210258644A1 (en) * 2020-03-31 2021-08-19 Baidu Online Network Technology (Beijing) Co., Ltd. Video playing method, apparatus, electronic device and storage medium
CN112565868A (zh) * 2020-12-04 2021-03-26 维沃移动通信有限公司 视频播放方法、装置及电子设备
CN112637409A (zh) * 2020-12-21 2021-04-09 维沃移动通信有限公司 内容输出方法、装置和电子设备
CN112866782A (zh) * 2020-12-30 2021-05-28 北京五八信息技术有限公司 视频播放方法、视频播放装置及电子设备

Also Published As

Publication number Publication date
WO2023045856A1 (zh) 2023-03-30
CN115103054B (zh) 2023-10-13

Similar Documents

Publication Publication Date Title
CN112306607B (zh) 截图方法和装置、电子设备和可读存储介质
CN109729420A (zh) 图片处理方法及装置、移动终端及计算机可读存储介质
CN112099714B (zh) 截图方法、装置、电子设备及可读存储介质
CN112711366A (zh) 图像生成方法、装置和电子设备
CN113593614B (zh) 图像处理方法及装置
CN109947988B (zh) 一种信息处理方法、装置、终端设备及服务器
CN112422735B (zh) 信息提示方法及装置
CN113938759A (zh) 文件分享方法和文件分享装置
CN113220365A (zh) 控制方法和控制装置
CN112711368A (zh) 操作指导方法、装置及电子设备
CN107679205B (zh) 多媒体数据播放方法、装置、计算机设备及存储介质
CN112383666B (zh) 内容发送方法、装置和电子设备
CN113364915B (zh) 信息显示方法、装置和电子设备
CN115103054B (zh) 信息处理方法、装置、电子设备及介质
CN115718581A (zh) 信息显示方法、装置、电子设备和存储介质
CN115086747A (zh) 信息处理方法、装置、电子设备和可读存储介质
CN113347478B (zh) 显示方法和显示装置
CN112637409B (zh) 内容输出方法、装置和电子设备
CN112202958B (zh) 截图方法、装置及电子设备
CN113778596A (zh) 远程协助方法、装置和电子设备
CN113946456A (zh) 信息分享方法和信息分享装置
CN112866475A (zh) 图像发送方法、装置和电子设备
CN113905125A (zh) 视频显示方法、装置及电子设备
CN113518143A (zh) 界面输入源切换方法、装置和电子设备
CN112035032B (zh) 表情添加方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant