CN114253446A - 一种内容的显示方法和电子设备 - Google Patents

一种内容的显示方法和电子设备 Download PDF

Info

Publication number
CN114253446A
CN114253446A CN202110901727.7A CN202110901727A CN114253446A CN 114253446 A CN114253446 A CN 114253446A CN 202110901727 A CN202110901727 A CN 202110901727A CN 114253446 A CN114253446 A CN 114253446A
Authority
CN
China
Prior art keywords
page
electronic device
content
user
acquiring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110901727.7A
Other languages
English (en)
Inventor
罗红磊
肖冬
王小梅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN114253446A publication Critical patent/CN114253446A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种内容的显示方法及电子设备,涉及终端技术领域,该方法包括:获取第一页面,所述第一页面包括由第一对象记录的第一内容,获取所述第一对象的面部图像,存储所述第一对象的面部图像以及所述第一页面,获取第二对象的面部图像,将所述第一对象的面部图像与所述第二对象的面部图像进行比对,若所述第一对象的面部图像与所述第二对象的面部图像匹配,显示所述第一页面,以使得所述第二对象对所述第一内容继续进行记录,以提高书写效率。

Description

一种内容的显示方法和电子设备
技术领域
本申请涉及终端技术领域,尤其涉及一种内容的显示方法和电子设备。
背景技术
随着手机和平板等移动设备应用的普及化,对设备输入方式的研究也越来越细化。手指的操作在移动设备上尤其局限性,由于手指较粗所以很难在尺寸较小的屏幕上进行精确书写和快速书写。于是,催生了各种各样应用于触摸屏的手写笔,包括但不限于电容笔、电磁笔以及电阻笔等等。
相比传统的键盘和手指输入方式,手写笔的出现大大的提高了移动终端的使用效率,也丰富了人们的应用场景。但是,如何快速进入书写状态,提升书写效率,为行业内改进的痛点。
发明内容
本申请提供了一种内容的显示方法和电子设备,本申请还提供一种计算机可读存储介质,以提供一种内容的显示方法,如何进入书写状态。
第一方面,本申请提供了一种内容的显示方法,应用于电子设备,包括:
一种内容的显示方法,应用于电子设备,包括:
获取第一页面,第一页面包括由第一对象记录的第一内容;该第一页面可以为图2B所示页面。
获取第一对象的面部图像;
存储第一对象的面部图像以及第一页面;
获取第二对象的面部图像;
将第一对象的面部图像与第二对象的面部图像进行比对;
若第一对象的面部图像与第二对象的面部图像匹配,显示第一页面,以使得第二对象对第一内容继续进行记录。
进一步地,包括:
若第一对象的面部图像与第二对象的面部图像不匹配,新建第二页面,使得第二对象在第二页面记录第二内容。该第二页面可以为图2D所示页面。
进一步地,获取第二对象的面部图像之前,还包括:
显示第三页面;所述第三页面可以为黑屏页面。即电子设备进入黑屏。
获取第二对象的面部图像包括:
检测第二对象用于将第三页面切换回第一页面的第一操作;其中检测第二对象用于将第三页面切换回第一页面的第一操作,可以指示检测到第二对象用于退出黑屏的操作。
响应于检测到的第一操作,获取第二对象的面部图像。
进一步地,还包括:
获取显示第三页面的第一时刻;
获取与第一操作对应的第二时刻;
若第一时刻和第二时刻之间的差值大于预设时长,新建第四页面,使得第二对象在第四页面记录第三内容。
进一步地,还包括:
获取第一页面的内容存储容量;
判断第一页面的内容存储容量是否大于预设容量阈值;
若第一页面的内容存储容量大于预设容量阈值,新建第五页面,使得第二对象在第五页面记录第四内容。
进一步地,电子设备包括第一页面及第六页面,第六页面包括第二对象记录的第五内容,还包括:
检测用于合并第一页面和第六页面的第二操作;
响应于检测到的第二操作,生成第七页面,第七页面包括第一内容和第五内容。
一种电子设备,包括处理器和存储设备,存储器存有应用程序,应用程序由处理器运行时,使得电子设备执行以下步骤:
获取第一页面,第一页面包括由第一对象记录的第一内容;
获取第一对象的面部图像;
存储第一对象的面部图像以及第一页面;
获取第二对象的面部图像;
将第一对象的面部图像与第二对象的面部图像进行比对;
若第一对象的面部图像与第二对象的面部图像匹配,显示第一页面,以使得第二对象对第一内容继续进行记录。
进一步地,应用程序由处理器运行时,使得电子设备执行获取第二对象的面部图像的步骤之前,还包括以下步骤:
若第一对象的面部图像与第二对象的面部图像不匹配,新建第二页面,使得第二对象在第二页面记录第二内容。
进一步地,应用程序由处理器运行时,使得电子设备还执行以下步骤:
显示第三页面;
获取第二对象的面部图像包括:
检测第二对象用于将第三页面切换回第一页面的第一操作;
响应于检测到的第一操作,获取第二对象的面部图像。
进一步地,应用程序由处理器运行时,使得电子设备还执行以下步骤:
获取显示第三页面的第一时刻;
获取与第一操作对应的第二时刻;
若第一时刻和第二时刻之间的差值大于预设时长,新建第四页面,使得第二对象在第四页面记录第三内容。
进一步地,应用程序由处理器运行时,使得电子设备还执行以下步骤:
获取第一页面的内容存储容量;
判断第一页面的内容存储容量是否大于预设容量阈值;
若第一页面的内容存储容量大于预设容量阈值,新建第五页面,使得第二对象在第五页面记录第四内容。
进一步地,电子设备包括第一页面及第六页面,第六页面包括第二对象记录的第五内容,应用程序由处理器运行时,使得电子设备还执行以下步骤:
检测用于合并第一页面和第六页面的第二操作;
响应于检测到的第二操作,生成第七页面,第七页面包括第一内容和第五内容。
第三方面,本申请提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行如第一方面所述的方法。
第四方面,本申请提供一种计算机程序,当所述计算机程序被计算机执行时,用于执行第一方面所述的方法。
在一种可能的设计中,第四方面中的程序可以全部或者部分存储在与处理器封装在一起的存储介质上,也可以部分或者全部存储在不与处理器封装在一起的存储器上。
第五方面,本申请提供了一种内容的显示装置,包括:
第一获取模块,用于获取第一页面,第一页面包括由第一对象记录的第一内容;
第二获取模块,用于获取第一对象的面部图像;
存储模块,用于存储第一对象的面部图像以及第一页面;
第三获取模块,用于获取第二对象的面部图像;
比对模块,用于将第一对象的面部图像与第二对象的面部图像进行比对;
第一显示模块,若第一对象的面部图像与第二对象的面部图像匹配,显示第一页面,以使得第二对象对第一内容继续进行记录。
进一步地,包括:
第一新建模块,用于若第一对象的面部图像与第二对象的面部图像不匹配,新建第二页面,使得第二对象在第二页面记录第二内容。
进一步地,获取第二对象的面部图像之前,还包括:
第二显示模块,用于显示第三页面;
第三获取模块,还用于检测第二对象用于将第三页面切换回第一页面的第一操作,
响应于检测到的第一操作,获取第二对象的面部图像。
进一步地,还包括:
第四获取模块,用于获取显示第三页面的第一时刻;
第五获取模块,用于获取与第一操作对应的第二时刻;
第二新建模块,用于若第一时刻和第二时刻之间的差值大于预设时长,新建第四页面,使得第二对象在第四页面记录第三内容。
进一步地,还包括:
第六获取模块,用于获取第一页面的内容存储容量;
判断模块,用于判断第一页面的内容存储容量是否大于预设容量阈值;
第三新建模块,若第一页面的内容存储容量大于预设容量阈值,新建第五页面,使得第二对象在第五页面记录第四内容。
进一步地,电子设备包括第一页面及第六页面,第六页面包括第二对象记录的第五内容,还包括:
检测模块用于检测用于合并第一页面和第六页面的第二操作;
生成模块,用于响应于检测到的第二操作,生成第七页面,第七页面包括第一内容和第五内容。
附图说明
图1为本申请实施例提供的一种电子设备100的结构示意图;
图2A-2F为本申请实施例提供的电子设备100的图形界面;
图3A-3I为本申请实施例提供的电子设备100的图形界面;
图4A为本申请实施例提供硬件和软件框架的示例图;
图4B为本申请另一实施例提供硬件和软件框架的示例图;
图5A为本申请实施例提供的一种内容的显示方法的流程图;
图5B为本申请另一实施例提供的一种内容的显示方法的流程图;
图5C为本申请另一实施例提供的一种内容的显示方法的流程图;
图6为本申请另一实施例提供的一种内容的显示方法的流程图;
图7A-7C为本申请实施例提供的电子设备100的图形界面;
图8A-8D为本申请实施例提供的电子设备100的图形界面;
图9A-9C为本申请实施例提供的电子设备100的图形界面;
图10A-10C为本申请实施例提供的电子设备100的图形界面。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
随着手机和平板等移动设备应用的普及化,对设备输入方式的研究也越来越细化。手指的操作在移动设备上尤其局限性,由于手指较粗所以很难在尺寸较小的屏幕上进行精确书写和快速书写。于是,催生了各种各样应用于触摸屏的手写笔,这些书写笔包括但不限于电容笔、电磁波以及电阻笔等。
相比传统的键盘和手指输入方式,手写笔的出现大大的提高了移动终端的使用效率,也丰富了人们的应用场景。但是,如何快速进入书写状态,提升书写效率,为行业内改进的痛点。
如图1所示,为本申请实施例提供的一种电子设备100的结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他终端,例如AR设备等。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为终端供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备100的各种功能应用以及数据处理。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动终端平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别终端姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
参照图2A-图2F,具体涉及本申请实施中电子设备100的图形界面,具体为第一应用202的图形界面。
现有的手机和平板等移动设备可提供一些用于记录文字等信息的应用,具体地,用户能够通过手写笔在相关应用上记录自己所需的内容,业内通常称之为“提笔速记”。示例性地,该相关应用可以为备忘录等应用,备忘录等应用在本申请上下文中可以称为第一应用。
图2A具体示出了本申请第一应用202的主页面的示例图。如图2A所示,用户在第一应用202创建了多个笔记,如笔记208以及笔记210等,每个笔记可以包含用户所记载的内容。
进一步地,用户在图2A中可以点击控件204,电子设备100可以响应点击操作,创建新的笔记212。参见图2B,具体为用户新创建的笔记212的示例图,用户可以对创建的笔记进行命名,例如笔记212的名称可以为“听课笔记”。用户可以通过书写笔206在笔记212中书写,图2B中笔记212具体示出了用户在时间为8:06所书写的内容。在相关技术中为了节省功耗,当用户打开笔记212后,若在预设时间段不碰触电子设备100的显示屏,电子设备100会进入低功耗模式,例如如图2C所示,电子设备100的屏幕可从图2B所示内容进入黑屏模式,以减少电量消耗。用户可再次打开电子设备100,例如用户通过手写笔206笔尖单击电子设备100的显示屏幕,可重新打开电子设备100,相关技术中,为了保护用户隐私,当用户重新打开电子设备100时,基于信息安全性诉求,并不显示图2B所示的图形界面,而是重新创建并显示第一应用新创建的笔记214(如图2D所示)或者其他新的页面,也就是说,即使用户很想在图2B中所示的用户界面继续书写或者记录,第一应用也会创建新的笔记214,强制进入新的页面,以防止其他人看见用户在笔记212记载的内容。但是,在这种情况下,用户不能立刻基于图2B所示页面进行续写,可能造成信息记录零散,这对用户体验不够友好。
而本申请提供的电子设备100,当检测到用户在第一应用中的笔记内进行记录时,可实时地获取用户的生物特征信息,并将该笔记与用户的生物特征信息相互映射,即将记录笔记的用户的生物特征信息与该笔记相互对应,生物特征信息可以具体包括用户的面部信息、虹膜信息等,该生物特征信息可以称为第一生物特征信息。
进一步地,用户在记录笔记过程中,电子设备会进入低功耗模式(如黑屏),电子设备100检测到用户的打开电子设备的操作时,获取用户的生物特征信息,该生物特征信息可以称为第二生物特征信息,电子设备100可以将第一生物信息和上文第二生物信息进行匹配,当第一生物信息和第二生物信息相匹配时,即记载上述笔记的用户与当前打开电子设备100的用户为同一用户,不需要创建新的笔记,来保护隐私,可直接显示该笔记的内容。示例性地,当用户1在记载图2B所示的笔记212时,电子设备采集到用户1的第一特征信息(如面部)并存储该第一生物特征信息。电子设备100在显示图2B的过程中,用户1在预设时间段未碰触电子设备100的显示屏幕,电子设备100可能会进入低功耗模式,如黑屏,当一段时间后,用户1使用书写笔206点击电子设备100的屏幕时(用于打开电子设备100),电子设备100检测到用户的打开电子设备100的操作,使用摄像头等硬件装置,采集用户1的第二生物特征信息(如面部),若是第一生物特征信息与第二生物特征信息匹配,电子设备100直接显示图2B所示的笔记212的内容。但是,若第一生物特征信息与第二生物特征信息不匹配,则创建新的笔记214,即进入图2D所示的页面,而不显示笔记212的内容。
在本申请的另一个实施例中,电子设备100当检测到用户在第一应用中的笔记内进行记录时,还可以实时地获取辅助信息,该辅助信息用于辅助电子设备100进行决策是否进入特定模式,当电子设备100处于该特定模式时,确定电子设备100不进入低功耗模式。示例性地,电子设备100当检测到用户在第一应用中的笔记212内进行记录时,可以获取辅助信息,如电子设备采集的声音信息或用户的运动信息(显示屏幕前是否存在用户运动),并基于当前环境信息判断是否进入特定模式,示例性地,若电子设备100检测到的声音信息中包括“上课”或“开会”等词语时,用户很可能会频繁地使用笔记,电子设备可以延迟或不进入低功耗模式,避免用户反复打开电子设备100。或者,示例性地,电子设备100若检测到用户一直在电子设备显示屏前,也可不进入低功耗模式。具体地,电子设备可以实时地判断电子设备显示屏的用户是否为目标用户,该目标用户即为记载笔记的用户,若电子设备显示屏前的用户一直为目标用户,则不仅如此低功耗模式,该判断过程可以通过电子设备的低功耗摄像头实时地采集图像实现。
在本申请的另一个实施例中,电子设备100还可以实时地检测并获取其他应用的信息,来决策是否进入低功耗模式。示例性地,电子设备100可以检测日历应用或者邮件应用或者会议议程等应用。当电子设备100检测到用户在某个时间段具有会议时,电子设备100可以决策,用户在该时间段使用该第一应用时,电子设备100不进入低功耗模式。
此外,本申请实施例提供的第一应用,还可以具有自动调节笔记页面的功能。参见图2D,具体为用户在图2B的基础上所述记载的内容,当第一应用检测到用户记载的容量大于预设容量阈值时,可以直接在笔记212创建新的一页,以使得用户能够继续进行记录,不需要用户手动翻页。
进一步地,本申请提供的电子设备100还具有合并各个笔记的功能,下面参见图3A-3I,对电子设备100合并笔记的过程进行示例性说明。
图3A示例性地示出了第一应用202的主页面,主页面中包括多个笔记,如笔记208或210等。进一步地,用户可以长按第一应用的主页面,进入图3B所示的图形界面。图3B中包括选择控件218和合并控件216。用户可以通过点击选择控件218,选择需要合并的笔记。示例性地,用户点击位于笔记208的选择控件和位于笔记210上的选择控件,确定对笔记208和笔记210进行合并,在选择完成后,用户可点击合并控件216,对笔记208和笔记210进行合并,如图3C所示,第一应用形成了合并后的笔记220。
需要说明的是,笔记208和笔记210的内容合并可以通过多种方式完成。下面地参见图3D-3F对笔记208和笔记210的一种合并方式进行说明。
图3D所示图形界面可以具体为笔记208的内容,图3E所示图形界面可以具体为笔记210所示内容。其中笔记208的形成时间早于笔记210的形成时间。当电子设备检测到用户对笔记208和笔记210合并操作时,可以基于笔记208的形成时间和笔记210的形成时间,将笔记208和笔记210的内容进行合并,示例性地,参见图3F,合并后笔记220中,包括原笔记208的内容和原笔记210的内容,并且笔记208的内容在笔记210的内容前显示。
下面地参见图3D-3F对笔记208和笔记210的另一个合并方式进行说明。
图3G所示图形界面可以具体为笔记208的内容,图3H所示图形界面可以具体为笔记210所示内容。其中笔记208的内容具有编号,笔记210的内容也具有编号,笔记208的形成时间早于笔记210的形成时间。当电子设备检测到用户对笔记208和笔记210合并操作时,可以基于笔记208的形成时间和笔记210的形成时间和/或笔记中内容的编号,将笔记208和笔记210的内容进行合并,示例性地,参见图3I,合并后笔记220中,包括原笔记208的内容和原笔记210的内容,按着编号进行显示。
在上述实施例中,电子设备100可以基于通过OCR(光学字符识别)识别,通过检测暗、亮的模式确定每个笔记中的文字形状,然后用字符识别方法将形状翻译成计算机文字识别出标题顺序和内容,将标题顺序后的备忘录内容按照顺序合并,空白处做清空和裁剪,并入到笔记220内。
下面参见图4A具体为本申请一个实施例中电子设备100的硬件和软件框架,用于执行本申请方案的物理硬件主要包括CPU和集线器两大模块,软件框架主要包括应用层、框架层、HAL层以及驱动层等,其中,本申请方案的具体流程,通过CPU和集线器模块基于软件框架执行。具体地,本申请应用层可以具体包括智能监控应用,智能监控应用具体包括第一应用、智能亮屏模块和智能灭屏模块,其中,智能亮屏模块用于监测电子设备100是否亮屏,以及智能灭屏模块用于监测电子设备100是否灭屏。
应用层还包括AI Engine(artificial intelligence Engine智能引擎),AIEngine可以具体包括决策引擎、情景感知模块以及环境感知模块。智能引擎可根据集线器(Sensor Hub)输出的器件检测信息,对用户的面部、运动状态、背景、环境信息检测,并做详细分析,然后输出第一应用调出请求,第一应用调出请求用于基于智能引擎的判断结果,调取第一应用的笔记内容或者创建新的笔记等。
Framework层可以包括检测单元,检测单元可以具体为HIAI Client,HIAI Client可包括表情检测、运动状态检测、背景检测单元,HIAI Client主要用于对用户的表情、运动状态(是否运动)以及用户所处背景进行检测。HIAI Client还用于接收AI情景感知,用于接收上述第一应用的的调出请求,并执行相应的处理流程,最终由第一应用显示相应的页面。
Kernal层包括AONN神经网络(Always on Neural Network,持续神经网络分析),HAL层还包括HIAI Server、运动服务等。Kernal层和HAL层还包括人脸解锁模块,电子设备100可以人脸解锁模块,共同实现人脸解锁。
Sensor Hub集线器包括AOAI Tiny(Always on AI Tiny,持续智能检测分析小单元)、AOAI Service(Always on AI,智能检测分析服务)、以及低功耗摄像头和驱动等。低功耗摄像头可以实时地获取用户的面部图像或者运动状态等信息,并将获取的用户的面部图像或者运动状态等信息发送给应用层的智能引擎,使智能引擎对面部图像或者运动状态等信息进行分析,决策是否进入低功耗模式,或者决策在电子设备100亮屏时是否创建新的笔记等。
下面参见图4B具体为本申请一个实施例中电子设备100的硬件和软件框架,与图4A不同的地方在于,图4B中,应用层中智能监控应用还包括日历应用、邮件应用或者其他日历日程应用,智能引擎可以实时地获取日历应用或者邮件应用的日历日程,从而判断是否进入特定模式,该特定模式指示电子设备100处于特定模式过程中,若用户使用第一应用,电子设备可不进入低功耗模式。示例性地,电子设备100获取到日历应用中,在特定时间段用户安排有会议,在该特定时间段时,若用户打开第一应用,则电子设备进入特定模式,应用层AI engine识别到用户进入特定模式时,可决策电子设备100不进入低功模式。
在另一个示例中,电子设备100集线器通过Camera识别室内人和物的状态,例如摄像头前会议桌、白板等特征物体,上报到Camera服务单元,AOAI持续智能检测分析小单元获取摄像头的信息后,做服务信息处理。智能引擎根据Sensor Hub输出的器件检测信息做表情、运动、背景检测做详细分析,然后由AI引擎中的模式识别判定,符合会议和课堂场景的场景模型时,可以自动决策进入特定模式。
进一步地,在图4B中,集线器还包括音频模块和低功耗音设,通过语音频设备,识别现场是否具有“会议”和“上课”等相关语音语义内容,AOAI语音检测模块获取音频信息后,做服务信息处理,然后由AI引擎中的模式识别判定,符合会议和课堂场景的场景模型时,可以自动确定进入特定模式。
在一个实施例中,电子设备100可以在进入特定模式后的预设时间段,退出特定模式,重新进行检测电子设备100是否进入特定模式,以保证电子设备100长时间处于特定模式,产生较大功耗。参见图5A,具体为本申请一个实施例中提供的内容的显示方法的流程图,该显示方法可以应用上述电子设备100,具体包括:
步骤502A,电子设备100的摄像头获取生物特征信息。
示例性地,电子设备100可以通过摄像头获取用户的生物特征信息,该生物特征信息称为第二生物特征信息。
具体地,电子设备在检测到用户打开电子设备100的操作时,通过摄像头获取用户的生物特征信息。用户打开电子设备100的操作用于将电子设备100由黑屏模式进入亮屏模式。也就是说,电子设备100在检测到用户打开电子设备100的操作前,处于黑屏模式。黑屏模式具体可以参见图2C。电子设备100在进入图2C所示的黑屏前,如图2B所示,第一应用可以处于打开状态,并且第一应用的页面中记载有内容,示例性地,该内容由用户1在第一应用记载。用户1在第一应用记载图2B的内容时,电子设备100可以采集用户1的生物特征信息,该生物特征信息可以称为用户1的第一生物特征信息。
生物特征信息可以具体为面部信息、虹膜信息等。
步骤504A,判断是否为同一用户。
判断是否为同一用户是指通过判断第一生物特征信息与第二生物特征信息,确定打开电子设备100的用户是否为用户1,第一生物特征信息与第二生物特征信息一致,则确定打开电子设备100的用户为用户1。
步骤506A,若是同一用户,启动续写流程。
上述启动续写流程是指,电子设备100亮屏时,再次进入图2B所示的页面,使得用户1能够进行续写。
步骤510A,若不是同一用户,显示第一应用的新页面。
当打开电子设备100的用户与用户1不是同一用户,为了保护用户1在图2B所记载的内容被泄露,可以直接显示第一应用新的页面。需要说明的是。本申请中新的页面可以包括笔记的页面。
步骤508A,启动续写流程后,电子设备100显示图2B所示页面,使用户1进行续写。
参见图5B,具体为本申请另一个实施例中提供的内容的显示方法的流程图。
步骤502B,电子设备100获取辅助信息,该辅助信息可以包括电子设备100所能采集到的声音信息、电子设备100显示屏幕前的用户背景信息、用户的运动信息等等。
步骤504B,电子设备100可以基于环境信息,判断是否进入特定模式。
示例性地,若声音信息中包括“上课”或者“会议”等信息时,则进入特定模式(步骤506B)。
步骤508B,若是基于辅助信息,判断不进入特定模式,电子设备100可以获取用户的生物特征信息。示例性地,电子设备100可以执行图5A所示的方法。
参见图5C,具体为本申请另一个实施例中提供的内容的显示方法的流程图。
步骤502C,电子设备100检测到用户的合并操作,该合并操作用于合并两个笔记,可以理解为合并两个页面。
示例性地,该合并操作可以参见图3A-3C。
步骤502C,电子设备100判断合并的笔记或者页面对应的生物特征信息是否一致。
上文已经示出,每个笔记都包括对应的生物特征信息,为了保证记录的一致性,电子设备100可以支持合并生物特征信息一致的笔记。
也就是说,若是电子设备100判断合并的笔记或者页面对应的生物特征信息一致,则执行合并操作(步骤506C)。
为了解决上述技术问题,本申请提供了一种内容的显示方法,参见图6,具体涉及本发明一个实施例提供的一种内容的显示方法的流程图。方法可用于上述电子设备100。需要说明的是。
步骤602,电子设备获取第一页面,第一页面包括由第一对象记录的第一内容
本申请所示的方法可在上述电子设备运行,第一对象(用户)在第一应用上创建了第一页面,并在第一页面上记载了用户所需要的第一内容。在一个实施例中,该第一内容可通过手写的方式记录,例如,用户通过手写笔进行记录。该手写笔包括但不限于电容笔、电磁波以及电阻笔等。
示例性地,参见图7A,涉及本申请一个实施例示出的内容的显示方法的用户界面示例图。具体地,图7A为电子设备第一应用中上述第一页面的示例图。其中,该第一页面所包含的内容为第一内容。
示例性地,参见图2B,涉及本申请一个实施例示出电子设备100的用户界面,该第一页面可以具体为笔记212的页面,第一内容可以为图2B中用户的内容。该第一对象即为记载第一内容的用户。
步骤604,电子设备获取第一对象的面部图像;
上述电子设备包括但不限于智能手机、平板等终端设备。该面部图像中包括第一对象的生物特征信息,该生物特征信息可以成为第一生物特征信息。
在一个实施例中,在用户第一页面中记录上述第一内容时,电子设备可以通过摄像头,获取用户的面部图像。在一个示例中,电子设备可通过低功耗摄像头实时地获取用户的面部图像,需要说明的是,该低功耗摄像头可以在终端黑屏或者亮屏的情况下,一直处于开启状态,以实时地获取用户的面部图像。
在另一个示例中,可以将电子设备设置为在预设条件下获取第一对象的面部图像,例如,电子设备在用户将第一页面切换为其他页面时获取用户的面部图像,需要说明的是,该其他页面包括其他应用的用户界面或者电子设备的黑屏时的页面等等。例如,本申请中第一对象已经在第一页面记录了第一内容,用户中途去做其他事情,将手机锁屏,手机在检测到用户的锁屏指令时,获取第一对象的面部图像,即当手机进入锁屏或者黑屏状态时获取第一对象的面部图像。或者,电子设备在检测到第一对象将第一页面切换为应用程序的页面的操作时,获取第一对象的面部图像。或者,电子设备在用户记录第一内容时获取第一对象的面部图像。
步骤606,电子设备存储第一对象的面部图像以及第一页面。
在一个实施例中,电子设备可以存储步骤304获取的面部图像以及第一页面,例如,实时地将上述步骤中的面部图像以及第一页面进行存储。需要说明的是,电子设备所述存储第一页面包含存储所述第一页面内的第一内容,可根据用户需求记录或者删除,即该第一内容是动态变化的。
步骤608,电子设备获取第二对象的面部图像
在一个实施例中,电子设备可以实时地获取第二对象的面部图像,具体地,可以通过低功耗摄像头实时地获取该第二对象的面部图像。
在另一个实施例,以将电子设备设置为在预设条件下获取第二对象的面部图像。例如,电子设备可以在检测到用户从其他页面切换回第一页面时,获取第二电子设备的面部图像。需要说明的是,该其他页面包括但不限于电子设备处于黑屏时的界面,即黑屏界面,该其他页面还包括其他应用的界面。例如,在上述步骤304的示例中,用户中途去做其他事情,将手机的用户界面关闭,手机在检测到用户的关闭指令时,获取第一对象的面部图像,即当手机进入黑屏状态时获取第一对象的面部图像。当用户完成事情,回到电子设备前时打开电子设备时,电子设备在检测到第二对象退出黑屏的操作时,通过其摄像头获取第二对象的面部图像。在另一个示例中,用户正在使用其他应用,电子设备实时地检测用户切换回第一页面的操作,当检测到该切换回第一页面的操作时,获取第二对象的面部图像。
需要说明的是,在电子设备在获取第一对象的面部图像时,第一页面处于打开状态。在电子设备在获取第二对象的面部对象的图像时,显示第一页面的相关应用处于启动状态,该启动状态指示该显示第一页面的应用一直处于运行状态。例如,用户可以在使用其他应用时,随时切换回第一页面。或者,电子设备在进入黑屏前,电子设备的用户界面处于第一页面。当电子设备处于黑屏时,该应用依然在后台运行,当检测到用户退出黑屏的操作时,可根据设置继续显示上述页面在黑屏前的内容。
在一个实施例中,电子设备虽然检测到了第二对象退出黑屏的操作或者检测用户从其他应用页面切换回第一页面的操作,但其摄像头无法获取第二对象的面部图像,例如,第二对象故意遮挡自己的面部等情况,在这种情况下,电子设备无需进行后续步骤,处于安全性诉求,相关应用可直接新建一个页面,进行记录,以保证用户的隐私。
步骤610,将第一对象的面部图像与第二对象的面部图像进行比对
具体地,可以通过深度学习、图像识别等方法,将第一对象的面部图像和第二对象的面部图像进行比对。示例性地,通过直方图的方法进行图像比对,具体地,分别计算两幅面部图像的直方图,并将直方图进行归一化,然后按照某种距离度量的标准进行相似度的测量。或者,通过数学上的矩阵分解来进行面部图像比对,具体地,图像本身就是一个矩阵,可以依靠数学上矩阵分解的一些知识来获取矩阵中一些代表这个矩阵元素值和分布的一些鲁棒性特征来对图像的相似度进行计算,例如通过奇异值分解(SVD分解)和非负矩阵分解(NMF分解)进行图像比对。
步骤612,若第一对象的面部图像与第二对象的面部图像匹配,显示第一页面,以使得第二对象对第一内容继续进行记录。
若第一对象的面部图像与第二对象的面部图像匹配,说明在第一页面记录第一内容的用户和再次要进入第一页面的对象是一个人,可以显示第一页面,以使用户继续对第一内容记录。需要说明的是,再次要进入第一页面的对象指示上述第二对象。
示例性地,参见图7B,图7B为用户在图7A所示的第一页面的基础上,继续对第一内容进行继续记录的示意图。电子设备通过图形比对,确定图7A中记录第一内容的第一对象与第二对象为同一人,直接显示图7A所示的第一页面,使得用户继续记录,从而得到图7B所示的第一内容,提高了用户的快捷体验诉求和书写效率。在一个实施例中,若第一对象的面部图像与第二对象的面部图像不匹配,新建第二页面,即若是第二次欲进入第一页面的操作时另外一个人,则相关应用创建第二页面,第二页面是一个空白页,使得用户在第二页面上进行记录。
在一个实施例中,电子设备可以通过电子设备内的一些应用、传感器件或者音频设备等实时地采集目标信息,以判断电子设备所处的环境。例如,通过音频设备采集到的声音信息中包含“上课”、“开会”等词语时,判定用户处于上课或者开会等场景中,可设置电子设备的第一页面可以一直保持续写状态,该续写状态指示在预定时间内切换回第一页面时,不用对获取第二对象的面部图像进行判断,而直接显示第一页面,使得用户继续进行记录。在一个示例中,该目标信息还可以包括电子设备中日历或邮件等应用中所记录的会议议程。
在一个实施例中,电子设备可以获取用户从第一页面切换为其他页面时的时间,以及获取用户从其他页面切换或第一页面的时间,该其他页面包括其他应用的用户界面或者电子设备的黑屏时的页面等等。电子设备可以计算两次时间的间隔,若是两次时间的间隔过大,例如大于某一时间阈值,可以在相关应用,新建一个页面,使得用户在新页面进行记录。需要说明的是,该步骤的目的是,当电子设备判断出用户已经长时间不使用该应用,用户很可能要记录的内容与第一页面的内容冲突或者不同,所以新建一个页面,以使得用户进行记录。当然,如果用户仍然想对第一页面的内容进行记录,可以返回该应用的主页面,重新选择该第一页面。
本申请通过将判定前后两次用户操作是否为同一人,即通过图像比对判定前后两次人脸识别是否匹配,若是同一人,将电子设备设置为继续续写,即继续进入上述第一页面,使用户能够继续对第一内容进行记录,若不是同一人,则新建空白页,既能保障用户的信息安全诉求,同时还能满足用户的快捷体验诉求,提升了速记信息的信息密度。
在一个实施例中,本申请实施例所示的内容的显示方法还包括以下步骤,获取第一页面的内容存储容量;判断第一页面的内容存储容量是否大于预设容量阈值;若第一页面的内容存储容量大于预设容量阈值,新建第五页面,使得第二对象在第五页面记录第四内容。具体地,可在相关应用中设置每个记录页面所能够容纳用户所书写的内容的最大存储容量,电子设备可以实时地获取用户在当前记录页面的记录内容的存储容量,然后将该存储容量与最大存储容量进行比较,若是大于该最大存储容量,可以在第一页面后新建一个页面,以使得用户继续记录第一内容。该步骤中,可以保证用户记录的便利性,例如,用户在第一页面持续记录,当已经将该第一页面记录满时,相关应用可以自动翻页,以使得用户继续记录,方便用户记录的同时,提高了用户的体验度。
具体地,参见图7C,具体涉及当第一页面的内容的存储容量大于页面预设的最大容量时新建的记录页面的示例图,用户可在第一页面的基础上,在新的页面继续记录该第一内容。
在一个实施例中,本申请实施例所示的内容的显示方法还包括以下步骤,检测用于合并第一页面和第六页面的第二操作,响应于检测到的第二操作,生成第七页面,所述第七页面包括第一内容和所述第五内容。
具体地,电子设备的相关应用中包括多个记录着不同内容的页面,不同页面之间的内容可以进行合并,并且进行合并的每个页面的内容在新的页面中进行显示。
下面参照图8A8D,对上述将不同页面的内容进行合并的相关操作进行说明。
电子设备可以实时地检测用户对不同页面的内容的合并操作,若检测到该操作时,电子设备在相关界面为用户页面提供合并的选项,以完成不同内容之间的合并,并且在新的页面将合并的后的内容进行显示。
具体参见图8A,用户在相关页面实施触发动作,以进行不同页面的内容的合并,示例性地,用户界面示出了所有包含记录内容的页面,用户可以主动触发合并内容的动作。例如,用户可通过手指按压某个包含记录内容的页面,当按压时间超过预设时长时,显示合并选项。
参见图8B,具体示出了内容合并选项,根据用户的选择,电子设备可以对用户选中的每个页面的内容进行合并。参见图8C,电子设备的相关应用还可以查询用户是否进行合并,以提醒用户是否选择错误。参见图8D,电子设备在执行操作后,生成一个新的页面,该新的页面包括执行合并的每个页面的内容。
下面参照图9A-9C对本申请一个实施例示出的内容的合并的方法进行解释和说明
在一个实施例中,在对不同的页面的内容进行合并时,可以基于每个页面的内容形成的时间顺序进行合并以及显示。例如,参见图9A用户界面中所示的页面,在该页面中,内容的形成先后顺序分别为方框902的内容、方框904的内容、方框906的内容以及方框910的内容。参见图9B为用户界面中另一页面,在图9B的页面中的内容的形成时间早于方框910的内容,且晚于方框906的内容。参见图9C,具体为参见图9A中的页面和图9B中的页面进行合并后,形成的新的页面的示意图,在该新的页面中,图9A中页面的内容和图9B中页面内容按着其形成的先后顺序,在新的页面中显示。用户可以在新的页面中,对内容进行继续记录或者编辑。
下面参照图10A-10C对本申请另一个实施例示出的内容的合并的方法进行解释和说明
在该实施例中,当用户对不同的页面的内容进行合并时,可以基于页面内容的序号顺序进行合并以及显示。
具体地,参见图10A所示的页面的内容的标题序号顺序分别为“1”“2”“3”“5”,图10B所示的页面的内容的标题序号为“4”。当用户对图10A所示的页面和图10B所示的页面的内容进行合并时,合并后的内容记录在在新生成的页面,具体的显示顺序可以如图10C所示,即根据标题顺序进行显示。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (14)

1.一种内容的显示方法,应用于电子设备,其特征在于,包括:
获取第一页面,所述第一页面包括由第一对象记录的第一内容;
获取所述第一对象的面部图像;
存储所述第一对象的面部图像以及所述第一页面;
获取第二对象的面部图像;
将所述第一对象的面部图像与所述第二对象的面部图像进行比对;
若所述第一对象的面部图像与所述第二对象的面部图像匹配,显示所述第一页面,以使得所述第二对象对所述第一内容继续进行记录。
2.根据权利要求1所述的显示方法,其特征在于,包括:
若所述第一对象的面部图像与所述第二对象的面部图像不匹配,新建第二页面,使得所述第二对象在所述第二页面记录第二内容。
3.根据权利要求1所述的显示方法,其特征在于,所述获取第二对象的面部图像之前,还包括:
显示第三页面;
所述获取第二对象的面部图像包括:
检测第二对象用于将所述第三页面切换回所述第一页面的第一操作;
响应于检测到的第一操作,获取所述第二对象的面部图像。
4.根据权利要求3所述的显示方法,其特征在于,还包括:
获取显示所述第三页面的第一时刻;
获取与所述第一操作对应的第二时刻;
若所述第一时刻和所述第二时刻之间的差值大于预设时长,新建第四页面,使得所述第二对象在所述第四页面记录第三内容。
5.根据权利要求1所述的显示方法,其特征在于,还包括:
获取所述第一页面的内容存储容量;
判断所述第一页面的内容存储容量是否大于预设容量阈值;
若所述第一页面的内容存储容量大于所述预设容量阈值,新建第五页面,使得所述第二对象在所述第五页面记录第四内容。
6.根据权利要求1所述的显示方法,其特征在于,所述电子设备包括所述第一页面及第六页面,所述第六页面包括所述第二对象记录的第五内容,还包括:
检测用于合并所述第一页面和第六页面的第二操作;
响应于检测到的第二操作,生成第七页面,所述第七页面包括所述第一内容和所述第五内容。
7.一种电子设备,包括处理器和存储设备,其特征在于,所述存储器存有应用程序,所述应用程序由所述处理器运行时,使得所述电子设备执行以下步骤:
获取第一页面,所述第一页面包括由第一对象记录的第一内容;
获取所述第一对象的面部图像;
存储所述第一对象的面部图像以及所述第一页面;
获取第二对象的面部图像;
将所述第一对象的面部图像与所述第二对象的面部图像进行比对;
若所述第一对象的面部图像与所述第二对象的面部图像匹配,显示所述第一页面,以使得所述第二对象对所述第一内容继续进行记录。
8.根据权利要求7所述的电子设备,其特征在于,所述应用程序由所述处理器运行时,使得所述电子设备执行所述获取第二对象的面部图像的步骤之前,还包括以下步骤:
若所述第一对象的面部图像与所述第二对象的面部图像不匹配,新建第二页面,使得所述第二对象在所述第二页面记录第二内容。
9.根据权利要求7所述的电子设备,其特征在于,所述应用程序由所述处理器运行时,使得所述电子设备还执行以下步骤:
显示第三页面;
所述获取第二对象的面部图像包括:
检测第二对象用于将所述第三页面切换回所述第一页面的第一操作;
响应于检测到的第一操作,获取所述第二对象的面部图像。
10.根据权利要求7所述的电子设备,其特征在于,所述应用程序由所述处理器运行时,使得所述电子设备还执行以下步骤:
获取显示所述第三页面的第一时刻;
获取与所述第一操作对应的第二时刻;
若所述第一时刻和所述第二时刻之间的差值大于预设时长,新建第四页面,使得所述第二对象在所述第四页面记录第三内容。
11.根据权利要求7所述的电子设备,其特征在于,所述应用程序由所述处理器运行时,使得所述电子设备还执行以下步骤:
获取所述第一页面的内容存储容量;
判断所述第一页面的内容存储容量是否大于预设容量阈值;
若所述第一页面的内容存储容量大于所述预设容量阈值,新建第五页面,使得所述第二对象在所述第五页面记录第四内容。
12.根据权利要求7所述的电子设备,其特征在于,所述电子设备包括所述第一页面及第六页面,所述第六页面包括所述第二对象记录的第五内容,所述应用程序由所述处理器运行时,使得所述电子设备还执行以下步骤:
检测用于合并所述第一页面和第六页面的第二操作;
响应于检测到的第二操作,生成第七页面,所述第七页面包括所述第一内容和所述第五内容。
13.一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在所述电子设备上运行时,使得所述电子设备执行如权利要求1-6中任一项所述的显示方法。
14.一种计算机程序产品,其特征在于,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1-6中任一项所述的显示方法。
CN202110901727.7A 2020-09-23 2021-08-06 一种内容的显示方法和电子设备 Pending CN114253446A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202011011495X 2020-09-23
CN202011011495 2020-09-23

Publications (1)

Publication Number Publication Date
CN114253446A true CN114253446A (zh) 2022-03-29

Family

ID=80791230

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110901727.7A Pending CN114253446A (zh) 2020-09-23 2021-08-06 一种内容的显示方法和电子设备

Country Status (1)

Country Link
CN (1) CN114253446A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722308A (zh) * 2011-03-29 2012-10-10 联想(北京)有限公司 显示方法和电子设备
US20160065648A1 (en) * 2014-08-29 2016-03-03 Samsung Electronics Co., Ltd. Electronic device and method of executing function thereof
CN105554226A (zh) * 2014-10-31 2016-05-04 宇龙计算机通信科技(深圳)有限公司 一种模式切换方法、系统及终端
CN109525791A (zh) * 2018-09-21 2019-03-26 华为技术有限公司 信息记录方法及终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722308A (zh) * 2011-03-29 2012-10-10 联想(北京)有限公司 显示方法和电子设备
US20160065648A1 (en) * 2014-08-29 2016-03-03 Samsung Electronics Co., Ltd. Electronic device and method of executing function thereof
CN105554226A (zh) * 2014-10-31 2016-05-04 宇龙计算机通信科技(深圳)有限公司 一种模式切换方法、系统及终端
CN109525791A (zh) * 2018-09-21 2019-03-26 华为技术有限公司 信息记录方法及终端

Similar Documents

Publication Publication Date Title
CN110134316B (zh) 模型训练方法、情绪识别方法及相关装置和设备
CN113795817A (zh) 一种分屏显示的操作方法及电子设备
CN112492193B (zh) 一种回调流的处理方法及设备
WO2021052139A1 (zh) 手势输入方法及电子设备
CN111742539B (zh) 一种语音控制命令生成方法及终端
CN114115512B (zh) 信息显示方法、终端设备及计算机可读存储介质
CN112740152A (zh) 手写笔检测方法、系统及相关装置
CN115589051B (zh) 充电方法和终端设备
CN112651510A (zh) 模型更新方法、工作节点及模型更新系统
CN110691165A (zh) 一种导航操作方法及电子设备
CN113709304B (zh) 一种智能提醒方法及设备
CN113467735A (zh) 图像调整方法、电子设备及存储介质
CN113407300B (zh) 应用误杀评估方法及相关设备
CN113380240B (zh) 语音交互方法和电子设备
CN114120987B (zh) 一种语音唤醒方法、电子设备及芯片系统
CN115393676A (zh) 手势控制优化方法、装置、终端和存储介质
CN114253446A (zh) 一种内容的显示方法和电子设备
CN113918003A (zh) 检测皮肤接触屏幕时长的方法、装置及电子设备
CN113050864A (zh) 一种截屏方法及相关设备
CN114463762B (zh) 一种数据的处理方法和装置
CN114006976B (zh) 一种界面显示方法及终端设备
WO2022217969A1 (zh) 一种在应用中启用功能的方法及装置
CN113973152A (zh) 一种未读消息快速回复方法及电子设备
CN114205318A (zh) 头像显示方法及电子设备
CN115695636A (zh) 一种智能语音交互的方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination