CN115145416A - 智能化切换笔型的方法、装置、设备及存储介质 - Google Patents

智能化切换笔型的方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN115145416A
CN115145416A CN202110343519.XA CN202110343519A CN115145416A CN 115145416 A CN115145416 A CN 115145416A CN 202110343519 A CN202110343519 A CN 202110343519A CN 115145416 A CN115145416 A CN 115145416A
Authority
CN
China
Prior art keywords
pen
stylus
stylus pen
user
handwriting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110343519.XA
Other languages
English (en)
Inventor
曹诗勇
张飞雨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202110343519.XA priority Critical patent/CN115145416A/zh
Priority to PCT/CN2022/083827 priority patent/WO2022206785A1/zh
Publication of CN115145416A publication Critical patent/CN115145416A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/04162Control or interface arrangements specially adapted for digitisers for exchanging data with external devices, e.g. smart pens, via the digitiser sensing hardware
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means

Abstract

本申请提供一种智能化切换笔型的方法、装置、设备及存储介质,涉及电子设备领域。该方法包括:获取用户手持手写笔时的按压点的位置、以及手写笔的倾斜角;根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,识别用户的握笔姿势;将手写笔在终端设备中的虚拟笔型切换为与识别到的用户的握笔姿势相匹配的第一笔型。该方法可以在用户手持手写笔与终端设备进行交互时,识别用户的握笔姿势,并根据用户的握笔姿势智能化地切换手写笔在终端设备中的虚拟笔型。

Description

智能化切换笔型的方法、装置、设备及存储介质
技术领域
本申请实施例涉及电子设备领域,尤其涉及一种智能化切换笔型的方法、装置、设备及存储介质。
背景技术
手写笔也称为触控笔,是一种能够与手机、平板电脑等支持手写功能的终端设备配合使用,供用户在终端设备上实现手写输入操作的电子设备。例如,终端设备可以包括触摸屏,用户可以手持手写笔在终端设备的触摸屏上进行书写、绘画等触控操作,终端设备可以响应于手写笔在触摸屏上的触控操作,在终端设备上生成相应的笔迹,如:笔迹可能是线条、文字等。从而,用户可以通过手写笔与终端设备完成交互操作。
目前,很多终端设备的手写功能还可以支持多种笔型的切换。当用户使用手写笔在终端设备上进行触控操作时,用户可以主动在终端设备上进行选择,将手写笔的笔型切换为不同的类型。当手写笔的笔型被切换为不同的类型时,终端设备响应于手写笔在触摸屏上的触控操作,在终端设备上生成的笔迹可以相应变为与笔型匹配的类型。
但是,上述终端设备中实现切换手写笔的笔型的方案需要依赖于用户主动在终端设备的UI界面进行点击或触摸等触控操作,终端设备的手写功能不够智能。
发明内容
本申请实施例提供一种智能化切换笔型的方法、装置、设备及存储介质,可以在用户手持手写笔与终端设备进行交互时,识别用户的握笔姿势,并根据用户的握笔姿势智能化地切换手写笔在终端设备中的虚拟笔型。
第一方面,本申请实施例提供一种智能化切换笔型的方法,所述方法包括:获取用户手持手写笔时的按压点的位置、以及所述手写笔的倾斜角;根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势;将所述手写笔在终端设备中的虚拟笔型切换为与识别到的用户的握笔姿势相匹配的第一笔型。
示例性地,用户的握笔姿势包括但不限于钢笔握笔姿势、圆珠笔握笔姿势、铅笔握笔姿势、马克笔握笔姿势、毛笔握笔姿势、水彩笔握笔姿势。第一笔型相应可以包括以下任意一种:钢笔、圆珠笔、铅笔、马克笔、毛笔、以及水彩笔。
该方法能够在用户手持手写笔与终端设备进行交互时,根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,识别到用户的握笔姿势,并将手写笔在终端设备中的虚拟笔型切换为与识别到的用户的握笔姿势相匹配的第一笔型。从而可以实现对手写笔在终端设备中的虚拟笔型进行智能化切换,终端设备的手写功能可以更加智能化。当用户手持手写笔与终端设备进行交互时,可以给用户带来更加具有代入感的交互体验。
例如,用户使用手写笔在手机上完成一幅素描作品后,想要进行落款签名时,可以直接用钢笔握笔姿势握住手写笔。此时,手机可以将手写笔的笔型切换为钢笔,从而用户使用手写笔在手机上书写的虚拟笔迹为钢笔笔迹,可以完成钢笔签名落款。
在一种可能的设计中,所述手写笔上设置有第一至第N压力传感器,N为大于0的整数。所述获取用户手持手写笔时的按压点的位置,包括:获取所述第一压力传感器至所述第N压力传感器中的每个压力传感器采集的压力信息;根据所述第一压力传感器至所述第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持所述手写笔时的按压点的位置。
在一种可能的设计中,手写笔中还可以设置有重力传感器,重力传感器可以用于获取手写笔的倾斜角。
其他可能的设计中,重力传感器还可以被替换为陀螺仪、倾角传感器等,在此不作限制。
可选地,所述根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势,包括:根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势。
一种实施方式中,上述根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势,包括:从预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,查询对应的按压点的位置、以及手写笔的倾斜角,与用户手持手写笔时的按压点的位置、以及手写笔的倾斜角相同的握笔姿势,作为识别到的用户的握笔姿势。
另一种实施方式中,上述根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势,包括:根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,选取按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,对应的按压点的位置、以及手写笔的倾斜角与用户手持手写笔时的按压点的位置、以及手写笔的倾斜角最相似的一种握笔姿势作为识别到的用户的握笔姿势。
示例性地,可以采用预设的相似度计算算法计算用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与对应关系中包含的每种按压点的位置、以及手写笔的倾斜角的组合之间的相似度。在计算相似度时,按压点的位置可以占第一权重,手写笔的倾角可以占第二权重,第一权重和第二权重的和为1。
第一权重和第二权重可以相同,也可以不同。例如,第一权重可以为60%,第二权重可以为40%。本申请实施例对第一权重和第二权重的大小不作限制。
又一种实施方式中,预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系也可以通过一个神经网络模型实现。上述根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势,包括:通过预设的神经网络模型,根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势。
具体地,神经网络模型根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角输出的用户的握笔姿势可以包括至少一种,同时,神经网络模型在输出每种握笔姿势时,还可以输出握笔姿势的置信度,置信度为0至1范围内的值。本实施方式中,可以从至少一种握笔姿势中选择置信度最大的一种握笔姿势作为识别得到的用户的握笔姿势。
可选地,所述方法还包括:根据手写笔的倾斜角,将终端设备上生成的手写笔的虚拟笔迹的效果切换为第一效果。
其中,手写笔的倾斜角不同时,第一效果不同。第一效果可以是指终端设备上生成的手写笔的笔迹的粗细和轻重效果。
例如,以第一笔型为钢笔为例,当手写笔的倾斜角为60度时终端设备上生成的手写笔的笔迹,相较于手写笔的倾斜角为80度时终端设备上生成的手写笔的笔迹而言,可以更粗、视觉效果更重一些。
可选地,所述方法还包括:获取终端设备的倾斜角。
所述根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,识别用户的握笔姿势,包括:根据手写笔的倾斜角、以及终端设备的倾斜角,得到手写笔与终端设备之间的相对倾斜角;根据用户手持手写笔时的按压点的位置、以及手写笔与终端设备之间的相对倾斜角,识别用户的握笔姿势。
根据用户手持手写笔时的按压点的位置、以及手写笔与终端设备之间的相对倾斜角,识别到的用户的握笔姿势可以更加准确。
示例性地,终端设备的倾斜角可以通过终端设备中的重力传感器、陀螺仪、倾角传感器等中的一种或多种进行获取。
可选地,所述方法还包括:根据所述手写笔与所述终端设备之间的相对倾斜角,将所述终端设备上生成的所述手写笔的虚拟笔迹的效果切换为第一效果。
第二方面,本申请实施例提供一种智能化切换笔型的装置,该装置可以用于实现上述第一方面所述的智能化切换笔型的方法。该装置的功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块或单元,例如,数据获取模块,姿势识别模块,笔型切换模块等。
其中,数据获取模块,用于获取用户手持手写笔时的按压点的位置、以及所述手写笔的倾斜角。姿势识别模块,用于根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势。笔型切换模块,用于将所述手写笔在终端设备中的虚拟笔型切换为与识别到的用户的握笔姿势相匹配的第一笔型。
一种实施方式中,所述姿势识别模块,具体用于根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势。
另一种实施方式中,所述数据获取模块,还用于获取所述终端设备的倾斜角。所述姿势识别模块,具体用于根据所述手写笔的倾斜角、以及所述终端设备的倾斜角,得到所述手写笔与所述终端设备之间的相对倾斜角;根据用户手持所述手写笔时的按压点的位置、以及所述手写笔与所述终端设备之间的相对倾斜角,识别用户的握笔姿势。
可选地,所述装置还包括:效果切换模块。
一种实施方式中,所述效果切换模块,用于根据所述手写笔的倾斜角,将所述终端设备上生成的所述手写笔的虚拟笔迹的效果切换为第一效果。
另一种实施方式中,所述效果切换模块,用于根据所述手写笔与所述终端设备之间的相对倾斜角,将所述终端设备上生成的所述手写笔的虚拟笔迹的效果切换为第一效果。
在一种可能的设计中,所述手写笔上设置有第一至第N压力传感器,N为大于0的整数。所述数据获取模块,具体用于获取所述第一压力传感器至所述第N压力传感器中的每个压力传感器采集的压力信息;根据所述第一压力传感器至所述第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持所述手写笔时的按压点的位置。
在一种可能的设计中,手写笔中还可以设置有重力传感器,重力传感器可以用于获取手写笔的倾斜角。
其他可能的设计中,重力传感器还可以被替换为陀螺仪、倾角传感器等,在此不作限制。
示例性地,用户的握笔姿势包括但不限于钢笔握笔姿势、圆珠笔握笔姿势、铅笔握笔姿势、马克笔握笔姿势、毛笔握笔姿势、水彩笔握笔姿势。
可选地,所述第一笔型包括以下任意一种:钢笔、圆珠笔、铅笔、马克笔、毛笔、以及水彩笔。
第三方面,本申请实施例提供一种电子设备,包括:处理器,用于存储处理器可执行指令的存储器;处理器被配置为执行所述指令时,使得电子设备实现如第一方面所述的智能化切换笔型的方法。
可选地,该电子设备可以是手写笔、或者终端设备,又或者服务器、计算机等。
其中,终端设备包括但不限于可以支持手写功能的交互式电子白板、手机、可穿戴设备(例如智能手表、智能手环器等)、平板电脑、笔记本电脑、台式计算机、便携式电子设备(如膝上型计算机,Laptop)、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、智能电视(如智慧屏)、车载电脑、智能音箱、增强现实(augmented reality,AR)设备、虚拟现实(virtualreality,VR)设备、以及其他带有显示屏的智能设备等。终端设备的示例性实施例包括但不限于搭载
Figure BDA0002999985960000041
Linux或者其它操作系统的便携式或非便携式的电子设备。便携式电子设备包括但不限于智能手机、智能耳机、平板电脑、具备无线通讯功能的可穿戴电子设备(如智能手表、智能手环、智能戒指、智能眼镜)等。本申请实施例对终端设备的具体产品形态不作限制。
第四方面,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序指令;当计算机程序指令被电子设备执行时,使得电子设备实现如第一方面所述的智能化切换笔型的方法。
第五方面,本申请实施例还提供一种计算机程序产品,包括计算机可读代码,当所述计算机可读代码在电子设备中运行时,使得电子设备实现前述第一方面所述的智能化切换笔型的方法。
上述第二方面至第五方面所具备的有益效果,可参考第一方面中所述,在此不再赘述。
应当理解的是,本申请中对技术特征、技术方案、有益效果或类似语言的描述并不是暗示在任意的单个实施例中可以实现所有的特点和优点。相反,可以理解的是对于特征或有益效果的描述意味着在至少一个实施例中包括特定的技术特征、技术方案或有益效果。因此,本说明书中对于技术特征、技术方案或有益效果的描述并不一定是指相同的实施例。进而,还可以任何适当的方式组合本实施例中所描述的技术特征、技术方案和有益效果。本领域技术人员将会理解,无需特定实施例的一个或多个特定的技术特征、技术方案或有益效果即可实现实施例。在其他实施例中,还可在没有体现所有实施例的特定实施例中识别出额外的技术特征和有益效果。
附图说明
图1为一种平板电脑的手写界面的示意图;
图2为本申请实施例提供的应用场景的示意图;
图3为本申请实施例提供的终端设备的结构示意图;
图4为本申请实施例提供的手写笔的结构示意图;
图5为本申请实施例提供的智能化切换笔型的方法的流程示意图;
图6为本申请实施例提供的钢笔握笔姿势的示意图;
图7为本申请实施例提供的一种铅笔握笔姿势的示意图;
图8为本申请实施例提供的另一种铅笔握笔姿势的示意图;
图9为本申请实施例提供的又一种铅笔握笔姿势示意图;
图10为本申请实施例提供的又一种铅笔握笔姿势示意图;
图11为本申请实施例提供的一种水彩笔握笔姿势示意图;
图12为本申请实施例提供的另一种水彩笔握笔姿势示意图;
图13为本申请实施例提供的又一种水彩笔握笔姿势示意图;
图14为本申请实施例提供的又一种水彩笔握笔姿势示意图;
图15为本申请实施例提供的又一种水彩笔握笔姿势示意图;
图16为本申请实施例提供的智能化切换笔型的方法的另一流程示意图;
图17为本申请实施例提供的智能化切换笔型的方法的又一流程示意图;
图18为本申请实施例提供的智能化切换笔型的方法的又一流程示意图;
图19为本申请实施例提供的智能化切换笔型的装置的结构示意图;
图20为本申请实施例提供的智能化切换笔型的装置的另一结构示意图。
具体实施方式
以下实施例中所使用的术语只是为了描述特定实施例的目的,而并非旨在作为对本申请的限制。如在本申请的说明书和所附权利要求书中所使用的那样,单数表达形式“一个”、“一种”、“所述”、“上述”、“该”和“这一”旨在也包括例如“一个或多个”这种表达形式,除非其上下文中明确地有相反指示。还应当理解,在本申请以下各实施例中,“至少一个”、“一个或多个”是指一个或两个以上(包含两个)。字符“/”一般表示前后关联对象是一种“或”的关系。
在本说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。术语“连接”包括直接连接和间接连接,除非另外说明。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。
在本申请实施例中,“示例性地”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性地”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性地”或者“例如”等词旨在以具体方式呈现相关概念。
手写笔也称为触控笔,是一种能够与手机、平板电脑等支持手写功能的终端设备配合使用,供用户在终端设备上实现手写输入操作的电子设备。例如,终端设备可以包括触摸屏,用户可以手持手写笔在终端设备的触摸屏上进行书写、绘画等触控操作,终端设备可以响应于手写笔在触摸屏上的触控操作,在终端设备上生成相应的笔迹,如:笔迹可能是线条、文字等。从而,用户可以通过手写笔与终端设备完成交互操作。可以理解的,终端设备上生成的笔迹为虚拟笔迹。
目前,很多终端设备的手写功能还可以支持多种笔型的切换。当用户使用手写笔在终端设备上进行触控操作时,用户可以主动在终端设备上进行选择,将手写笔的笔型切换为不同的类型。当手写笔的笔型被切换为不同的类型时,终端设备响应于手写笔在触摸屏上的触控操作,在终端设备上生成的笔迹可以相应变为与笔型匹配的类型。同样可以理解的,本申请中所述的手写笔的笔型为虚拟笔型。
示例性地,以终端设备为平板电脑为例,一些实现方式中,平板电脑可以通过其上部署的某个应用程序(如画板、备忘录等)显示用户界面(user interface,UI),配合手写笔为用户提供手写功能。该UI界面可以称为手写界面。图1为一种平板电脑的手写界面的示意图。如图1所示,当平板电脑为用户提供手写功能时,手写界面中可以包括一个工具栏110。工具栏110中可以包括多种笔型对应的选择功能控件(或称为选择按钮),每种笔型对应的选择功能控件可以以该种笔型对应的虚拟笔头的形式显示,如工具栏110中包括的圆珠笔按钮111、钢笔按钮112、铅笔按钮113、马克笔按钮114、毛笔按钮115、水彩笔按钮116等。用户可以主动在平板电脑的屏幕(触控屏)上点击其中任意一种笔型对应的虚拟笔头(即点击任意一种笔型对应的选择功能控件),平板电脑可以响应于用户点击某种笔型对应的虚拟笔头的操作,将手写笔的笔型切换为该种笔型。之后,当用户使用手写笔在终端设备上进行触控操作时,终端设备响应于手写笔在触摸屏上的触控操作,在终端设备上生成的笔迹可以为该种笔型的笔迹。
例如,用户可以点击圆珠笔按钮111,平板电脑可以响应于用户点击圆珠笔按钮111的操作,将手写笔的笔型切换为圆珠笔。之后,当用户使用手写笔在终端设备上进行触控操作时,终端设备响应于手写笔在触摸屏上的触控操作,在终端设备上生成的笔迹可以为圆珠笔的笔迹。
类似地,当手写笔的笔型被切换为钢笔、或者铅笔、或者马克笔、或者毛笔、又或者水彩笔等其他类型时,终端设备响应于手写笔在触摸屏上的触控操作,在终端设备上生成的笔迹可以相应变为铅笔的笔迹、马克笔的笔迹、毛笔的笔迹、水彩笔的笔迹等,在此不再一一赘述。
可以看到,目前终端设备中实现切换手写笔的笔型的方案需要依赖于用户主动在终端设备的UI界面进行点击或触摸等触控操作(可以称为UI操作),终端设备的手写功能不够智能。
在此背景技术下,本申请实施例提供了一种智能化切换笔型的方法。该方法可以在用户手持手写笔与终端设备进行交互时,识别用户的握笔姿势,并根据用户的握笔姿势智能化地切换手写笔的笔型。通过该方法可以使得终端设备的手写功能更加智能化,当用户手持手写笔与终端设备进行交互时,可以给用户带来更加具有代入感的交互体验。
下面对本申请实施例提供的智能化切换笔型的方法进行具体说明。
示例性地,图2为本申请实施例提供的应用场景的示意图。如图2所示,本申请实施例的应用场景可以包括:终端设备200和手写笔300。图2中示例性地以终端设备200为手机为例。终端设备200和手写笔300可以通过有线或无线的方式建立连接。
可选地,终端设备200和手写笔300采用无线方式建立连接时采用的无线通信协议可以为无线保真(wireless fidelity,Wi-Fi)协议、蓝牙(bluetooth)协议、ZigBee协议、近距离无线通信(near field communication,NFC)协议,各种蜂窝网协议等,在此不作具体限制。
可选地,本申请实施例中,终端设备200包括但不限于可以支持手写功能的交互式电子白板、手机、可穿戴设备(例如智能手表、智能手环器等)、平板电脑、笔记本电脑、台式计算机、便携式电子设备(如膝上型计算机,Laptop)、超级移动个人计算机(ultra-mobilepersonal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、智能电视(如智慧屏)、车载电脑、智能音箱、增强现实(augmented reality,AR)设备、虚拟现实(virtual reality,VR)设备、以及其他带有显示屏的智能设备等。终端设备200的示例性实施例包括但不限于搭载
Figure BDA0002999985960000071
Linux或者其它操作系统的便携式或非便携式的电子设备。便携式电子设备包括但不限于智能手机、智能耳机、平板电脑、具备无线通讯功能的可穿戴电子设备(如智能手表、智能手环、智能戒指、智能眼镜)等。本申请实施例对终端设备200的具体产品形态不作限制。
示例性地,以终端设备200为手机为例,图3为本申请实施例提供的终端设备的结构示意图。如图3所示,手机可以包括处理器210,外部存储器接口220,内部存储器221,通用串行总线(universal serial bus,USB)接口230,充电管理模块240,电源管理模块241,电池242,天线1,天线2,移动通信模块250,无线通信模块260,音频模块270,扬声器270A,受话器270B,麦克风270C,耳机接口270D,传感器模块280,按键290,马达291,指示器292,摄像头293,显示屏294,以及用户标识模块(subscriber identification module,SIM)卡接口295等。
处理器210可以包括一个或多个处理单元,例如:处理器210可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是手机的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器210中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器210中的存储器为高速缓冲存储器。该存储器可以保存处理器210刚用过或循环使用的指令或数据。如果处理器210需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器210的等待时间,因而提高了系统的效率。
在一些实施例中,处理器210可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,SIM接口,和/或USB接口等。
外部存储器接口220可以用于连接外部存储卡,例如Micro SD卡,实现扩展手机的存储能力。外部存储卡通过外部存储器接口220与处理器210通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器221可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器210通过运行存储在内部存储器221的指令,从而执行手机的各种功能应用以及数据处理。
内部存储器221还可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如本申请实施例中所述的第一应用)等。存储数据区可存储手机使用过程中所创建的数据(比如图像数据,电话本)等。此外,内部存储器221可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
充电管理模块240用于从充电器接收充电输入。充电管理模块240为电池242充电的同时,还可以通过电源管理模块241为手机供电。电源管理模块241用于连接电池242,充电管理模块240,以及处理器210。电源管理模块241也可接收电池242的输入为手机供电。
手机的无线通信功能可以通过天线1,天线2,移动通信模块250,无线通信模块260,调制解调处理器以及基带处理器等实现。天线1和天线2用于发射和接收电磁波信号。手机中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
手机可以通过音频模块270,扬声器270A,受话器270B,麦克风270C,耳机接口270D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
传感器模块280可以包括压力传感器280A,陀螺仪传感器280B,气压传感器280C,磁传感器280D,加速度传感器280E,距离传感器280F,接近光传感器280G,指纹传感器280H,温度传感器280J,触摸传感器280K,环境光传感器280L,骨传导传感器280M等。
显示屏294用于显示图像,视频等。显示屏294包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,手机可以包括1个或N个显示屏294,N为大于1的正整数。例如,显示屏294可以用于显示应用程序界面。
手机通过GPU,显示屏294,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏294和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器210可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
可以理解的是,图3所示的结构并不构成对手机的具体限定。在一些实施例中,手机也可以包括比图3所示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置等。又或者,图3所示的一些部件可以以硬件,软件或软件和硬件的组合实现。
另外,当终端设备200是可穿戴设备、平板电脑、笔记本电脑、台式计算机、便携式电子设备、UMPC、上网本、PDA、智能电视、车载电脑、智能音箱、AR设备、VR设备、以及其他带有显示屏的智能设备等其他终端设备时,终端设备200的具体结构也可以参考图3所示。示例性地,其他终端设备可以是在图3给出的结构的基础上增加或减少了组件,在此不再一一赘述。
示例性地,图4为本申请实施例提供的手写笔的结构示意图。如图4所示,本申请实施例中,手写笔300至少可以包括:多个压力传感器,如:第一压力传感器310、第二压力传感器311、…、第N压力传感器312等(N为大于0的整数),重力传感器320、处理器330、以及通信模块340。可以理解的,图4所示的结构中,第二压力传感器311与第N压力传感器312之间还可以包括第三压力传感器、第四压力传感器、第五压力传感器等,未再一一示出和标号。
其中,第一压力传感器310至第N压力传感器312可以设置于手写笔300的笔尖、笔身、笔尾等区域,每个压力传感器的位置可以不同。第一压力传感器310至第N压力传感器312中的每个压力传感器可以用于采集其所在位置的压力信息,并传输给处理器330。重力传感器320可以设置于手写笔300中,如笔头或笔身内部,用于采集手写笔的倾斜角,并传输给处理器330。可以理解的,重力传感器320采集的手写笔的倾斜角是指手写笔相对于水平面的夹角,其大小在0度至90度之间(包括0度和90度)。
处理器330可以根据每个压力传感器采集的压力信息,确定出该压力传感器所在位置是否为按压点(或称为握笔触点),从而得到用户手持手写笔时的所有按压点的位置。
具体地,当用户手持手写笔时,用户的手与手写笔上的部分位置会有接触,手与手写笔接触的点可以称为按压点,手与手写笔未接触的点可以称为非按压点。压力传感器采集到的压力信息是电流或电压信号,该电流或电压信号可以转化为相应的压力值。对于第一压力传感器310至第N压力传感器312中而言,当用户手持手写笔时,按压点位置处的压力传感器采集到的压力值一般大于0(不接近于0),非按压点位置处的压力传感器采集到的压力值一般等于0(或接近于0)。如果某个压力传感器采集的压力值大于0(不接近于0),则处理器330可以确定该压力传感器所在位置为按压点。如果某个压力传感器采集的压力值等于0(或接近于0),则处理器330可以确定该压力传感器所在位置为非按压点。
处理器330在得到用户手持手写笔时的按压点的位置后,可以将用户手持手写笔时的按压点的位置、以及手写笔的倾斜角发送给通信模块340。通信模块340用于与终端设备200通信。手写笔300可以通过通信模块340将用户手持手写笔时的按压点的位置、以及手写笔的倾斜角发送给终端设备200。
示例性地,按压点的位置可以表示为按压点在手写笔300上的坐标。例如,可以将手写笔300沿着平行于笔身的方向展开为一个平面,然后以该平面的左下角(也可以是左上角、右下角、右上角或平面中的任意一个点)作为原点(0,0,0)建立平面坐标系。按压点在该平面坐标系中的坐标即可以作为按压点在手写笔300上的坐标。
可选地,通信模块340与终端设备200之间可以采用上述提到的有线或无线的方式建立连接,实现通信。例如,通信模块340可以是蓝牙模块、NFC芯片、Wi-Fi芯片等,此处不再详述。
需要说明的是,上述图4所示的结构仅为对手写笔300的示例性说明,手写笔300还可以包括电池、电源管理模块、扬声器等其他结构或内部电路,在此不作限制。另外,在其他实施例中,上述重力传感器320还可以被替换为陀螺仪、倾角传感器等可以检测手写笔的倾斜角的器件,或者,手写笔还可以通过重力传感器320、陀螺仪、倾角传感器等器件中的两个或两个以上的组合检测倾斜角,在此也不作限制。本申请实施例中仅以重力传感器320为例进行说明。
本申请实施例中,终端设备200在接收到手写笔300发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角后,可以根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势,然后根据用户的握笔姿势智能化地切换手写笔的笔型。
示例性地,以终端设备为手机为例,图5为本申请实施例提供的智能化切换笔型的方法的流程示意图。如图5所示,该方法可以包括S501-S506。
S501、手写笔获取第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角。
具体地,手写笔获取第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角的方式可以参考上述关于图4的描述中所述。
S502、手写笔根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置。
S503、手写笔向手机发送用户手持手写笔时的按压点的位置、以及手写笔的倾斜角。
相应地,手机接收用户手持手写笔时的按压点的位置、以及手写笔的倾斜角。
S504、手机根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势。
示例性地,用户的握笔姿势包括但不限于钢笔握笔姿势、圆珠笔握笔姿势、铅笔握笔姿势、马克笔握笔姿势、毛笔握笔姿势、水彩笔握笔姿势等。本申请实施例对握笔姿势的类型不作限制。
可以理解的,当用户手持手写笔时的握笔姿势不同时,按压点的位置、以及手写笔的倾斜角可能不同。
本申请实施例中,可以预先采集用户采用不同的握笔姿势手持手写笔时的按压点的位置、以及手写笔的倾斜角,并建立按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系。手机根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势可以是指:手机根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持手写笔时的按压点的位置、以及手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势。
示例性地,手机可以从预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,查询对应的按压点的位置、以及手写笔的倾斜角,与手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角相同的握笔姿势,作为识别到的用户的握笔姿势。
例如,以钢笔握笔姿势为例,典型的钢笔握笔姿势可以包括“擫、押、钩、格、抵”。图6为本申请实施例提供的钢笔握笔姿势的示意图。如图6所示,当用户采用钢笔握笔姿势手持手写笔时,图6中所述的拇指601的作用为擫,食指602的作用为押,中指603的作用为钩,无名指604的作用为格,小指605的作用为抵。当用户采用如图6所示的钢笔握笔姿势手持手写笔时,用户的拇指601擫手写笔的位置、食指602押手写笔的位置、中指603钩手写笔的位置、无名指604格手写笔的位置、以及小指605抵手写笔的位置均为用户手持手写笔时的按压点。
假设用户采用如图6所示的钢笔握笔姿势手持手写笔时,用户的拇指601擫手写笔的位置为按压点1、食指602押手写笔的位置为按压点2、中指603钩手写笔的位置为按压点3、无名指604格手写笔的位置为按压点4、小指605抵手写笔的位置为按压点5,手写笔的倾斜角为第一角度(如75度、80度等),则本申请实施例中,可以预先采集按压点1、按压点2、按压点3、按压点4和按压点5的位置,以及第一角度。可以理解的,采集按压点1、按压点2、按压点3、按压点4和按压点5的位置的方式,可以参考前述实施例中所述,按压点1、按压点2、按压点3、按压点4和按压点5的位置可以用其在手写笔上的坐标进行表示,在此不再赘述。在采集到到按压点1、按压点2、按压点3、按压点4和按压点5的位置,以及第一角度后,可以建立按压点1、按压点2、按压点3、按压点4和按压点5的位置,以及第一角度与钢笔握笔姿势之间的对应关系。也即,本申请实施例预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中包括:按压点1、按压点2、按压点3、按压点4和按压点5的位置,以及第一角度对应的握笔姿势为钢笔握笔姿势。
之后,S503中手写笔向手机发送的用户手持手写笔时的按压点的位置为按压点1、按压点2、按压点3、按压点4和按压点5,以及手写笔的倾斜角为第一角度时,S504中手机可以根据按压点1、按压点2、按压点3、按压点4和按压点5,以及第一角度,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,识别出用户的握笔姿势为钢笔握笔姿势。例如,手机可以从预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,查询得到钢笔握笔姿势对应的按压点的位置为按压点1、按压点2、按压点3、按压点4和按压点5,手写笔的倾斜角为第一角度,从而可以识别出用户的握笔姿势为钢笔握笔姿势。
类似地,本申请实施例中,预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,还可以包括但不限于:按压点的位置、以及手写笔的倾斜角与圆珠笔握笔姿势之间的对应关系,按压点的位置、以及手写笔的倾斜角与铅笔握笔姿势之间的对应关系,按压点的位置、以及手写笔的倾斜角与马克笔握笔姿势之间的对应关系,按压点的位置、以及手写笔的倾斜角与毛笔握笔姿势之间的对应关系,按压点的位置、以及手写笔的倾斜角与水彩笔握笔姿势之间的对应关系等,在此不作限制。
需要说明的是,预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,用于表示按压点的位置的坐标,应当与用于表示S502中手写笔所确定的用户手持手写笔时的按压点的位置的坐标处于同一坐标系下。
手机在根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别出用户的握笔姿势后,即可根据用户的握笔姿势,确定出与用户的握笔姿势相匹配的第一笔型,并将手写笔的笔型切换为第一笔型。例如,可以执行S505和S506。
S505、手机根据用户的握笔姿势,确定与用户的握笔姿势相匹配的第一笔型。
S506、手机将手写笔的笔型切换为第一笔型。
以S504中手机识别出用户的握笔姿势为上述钢笔握笔姿势为例,则S505中手机可以确定出与钢笔握笔姿势相匹配的第一笔型为钢笔。从而,手机可以将手写笔的笔型切换为钢笔。之后,当用户使用手写笔在手机上进行触控操作时,手机响应于手写笔在触摸屏上的触控操作,在手机(显示屏或触摸屏)上生成的笔迹可以为钢笔的笔迹。
类似地,当S504中手机识别出用户的握笔姿势为圆珠笔握笔姿势、或者铅笔握笔姿势、或者马克笔握笔姿势、或者毛笔握笔姿势、又或者水彩笔握笔姿势时,则S505中手机相应可以确定出与用户的握笔姿势相匹配的第一笔型为圆珠笔、或者铅笔、或者马克笔、或者毛笔、又或者水彩笔,在此也不再一一赘述。
由上所述,本申请实施例中,手写笔上可以设置有第一压力传感器至第N压力传感器,以及重力传感器。手写笔可以获取第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角,并根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置。之后,手写笔可以向终端设备发送用户手持手写笔时的按压点的位置、以及手写笔的倾斜角。终端设备接收到用户手持手写笔时的按压点的位置、以及手写笔的倾斜角后,可以根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势,并将手写笔的笔型切换为与用户的握笔姿势相匹配的第一笔型。从而,终端设备可以根据用户的握笔姿势智能化地切换手写笔的笔型。通过该方法可以使得终端设备的手写功能更加智能化,当用户手持手写笔与终端设备进行交互时,可以给用户带来更加具有代入感的交互体验。
例如,用户使用手写笔在手机上完成一幅素描作品后,想要进行落款签名时,可以直接用钢笔握笔姿势握住手写笔。此时,手机可以按照前述实施例所述的逻辑将手写笔的笔型切换为钢笔,从而用户使用手写笔在手机上书写的笔迹为钢笔笔迹,可以完成钢笔签名落款。
需要说明的是,本申请实施例中,按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,一种按压点的位置以及手写笔的倾斜角的组合,只对应一种握笔姿势;不同的按压点的位置以及手写笔的倾斜角的组合,可以对应同一种握笔姿势。也即,一种握笔姿势可以对应多种按压点的位置以及手写笔的倾斜角的组合。
例如,用户想要使用手写笔进行素描时,适合手写笔的笔型一般为铅笔。在不同的素描场景中,用户手持手写笔时的按压点的位置和/或手写笔的倾斜角可能不同。但本申请实施例中,按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,不同的素描场景下用户手持手写笔时的按压点的位置和手写笔的倾斜角,对应的握笔姿势均为铅笔握笔姿势。
示例性地,图7至图10依次示出了本申请实施例提供的四种(以四种为例)不同的铅笔握笔姿势。请参考图7至图10所示,图7中所示的铅笔握笔姿势一般可以用于描绘一些清晰的轮廓;图8中所示的铅笔握笔姿势一般可以用于在初始阶段画大面积阴暗;图9中所示的铅笔握笔姿势一般可以用于后期明暗的描绘;图10中所示的铅笔握笔姿势一般可以用于色调比较重的部分的描绘。
可以看到,对于图7至图10所示的四种铅笔握笔姿势而言,用户手持手写笔时的手写笔的按压点的位置、以及手写笔的倾斜角可能会不同(包括:按压点的位置不同、或者手写笔的倾斜角不同、或者按压点的位置和手写笔的倾斜角均不同)。假设图7所示的铅笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合1,图8所示的铅笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合2,图9所示的铅笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合3,图10所示的铅笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合4,则本申请实施例中,在建立按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系时,组合1、组合2、组合3、以及组合4对应的握笔姿势均为铅笔握笔姿势。终端设备在接收到组合1、组合2、组合3、以及组合4中的任意一种时,查询按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,所确定出的用户的握笔姿势均为铅笔握笔姿势。终端设备可以将手写笔的笔型切换为与铅笔握笔姿势相匹配的铅笔。
又例如,用户想要使用手写笔画水彩画时,适合手写笔的笔型一般为水彩笔。在不同的水彩画绘画方式中,用户手持手写笔时的按压点的位置和/或手写笔的倾斜角也可能不同。但本申请实施例中,按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,不同的水彩画绘画方式下用户手持手写笔时的按压点的位置和手写笔的倾斜角,对应的握笔姿势均为水彩笔握笔姿势。
示例性地,图11至图15依次示出了本申请实施例提供的五种(以五种为例)不同的水彩笔握笔姿势。请参考图11至图15所示,图11中所示的水彩笔握笔姿势一般为经典的(常用)水彩笔绘画方式;图12中所示的水彩笔握笔姿势为一种按压式绘画方式;图13中所示的水彩笔握笔姿势为远端式绘画方式;图14中所示的水彩笔握笔姿势为另一种按压式绘画方式;图15中所示的水彩笔握笔姿势为ZISA绘画方式。
可以看到,对于图11至图15所示的五种水彩笔握笔姿势而言,用户手持手写笔时的手写笔的按压点的位置、以及手写笔的倾斜角也可能会不同(同样可以包括:按压点的位置不同、或者手写笔的倾斜角不同、或者按压点的位置和手写笔的倾斜角均不同)。假设图11所示的水彩笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合5,图12所示的水彩笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合6,图13所示的水彩笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合7,图14所示的水彩笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合8,图15所示的水彩笔握笔姿势中按压点的位置、以及手写笔的倾斜角为组合9,则本申请实施例中,在建立按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系时,组合5、组合6、组合7、组合8、以及组合9对应的握笔姿势均为水彩笔握笔姿势。终端设备在接收到组合5、组合6、组合7、组合8、以及组合9中的任意一种时,查询按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,所确定出的用户的握笔姿势均为水彩笔握笔姿势。终端设备可以将手写笔的笔型切换为与水彩笔握笔姿势相匹配的水彩笔。
应当理解,本申请实施例对按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,每种握笔姿势对应的按压点的位置、以及手写笔的倾斜角的组合的数量并不作限制,可以是一种组合,也可以是两种或两种以上的组合。
可选地,本申请实施例中,终端设备从预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,查询对应的按压点的位置、以及手写笔的倾斜角,与手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角相同的握笔姿势时,如果对应关系中不存在对应的按压点的位置、以及手写笔的倾斜角,与手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角相同的握笔姿势,则终端设备也可以不执行后续的笔型切换过程。此时,用户可以主动在终端设备上进行交互操作,对手写笔的笔型进行切换(具体请参考前述实施例中所述)。
可选地,本申请实施例中,当用户采用某种握笔姿势手持手写笔与终端设备进行交互时,按压点的位置、以及手写笔的倾斜角可能不一定与预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,该种握笔姿势对应的按压点的位置、以及手写笔的倾斜角完全相同。对此,本申请实施例中,终端设备在根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,查询按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,识别用户的握笔姿势时,也可以是选取按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,对应的按压点的位置、以及手写笔的倾斜角与手写笔发送的按压点的位置、以及手写笔的倾斜角最相似的一种握笔姿势作为识别到的用户的握笔姿势。
也即,本申请实施例中,预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,每一种按压点的位置、以及手写笔的倾斜角的组合,均为预先采集标准值(或称为参考值或基准)。终端设备根据手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,查询按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系的过程,实际可以理解为计算手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与对应关系中包含的按压点的位置、以及手写笔的倾斜角之间的相似度的过程(或称为进行拟合的过程)。
示例性地,终端设备中可以预置有相似度计算算法,终端设备可以通过该相似度计算算法计算手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与对应关系中包含的每种按压点的位置、以及手写笔的倾斜角的组合之间的相似度。然后,终端设备可以确定与手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角之间的相似度最大的一种组合对应的握笔姿势为识别到的用户的握笔姿势。
可选地,在计算相似度时,按压点的位置可以占第一权重,手写笔的倾角可以占第二权重,第一权重和第二权重的和为1。第一权重和第二权重可以相同,也可以不同。例如,第一权重可以为60%,第二权重可以为40%。本申请实施例对第一权重和第二权重的大小不作限制。
举例说明,假设手写笔发送的用户手持手写笔时的按压点的位置包括:按压点1、按压点2、按压点3、以及按压点4的坐标,手写笔的倾斜角为第二角度;按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系中,某种按压点的位置、以及手写笔的倾斜角的组合(为方便描述,下面称为第一组合)为:按压点的位置包括坐标1、坐标2、坐标3、以及坐标4,手写笔的倾斜角为第三角度。则终端设备计算手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与第一组合之间的相似度的过程可以如下。
1)根据按压点1、按压点2、按压点3、以及按压点4的坐标绘制第一线条;
2)根据坐标1、坐标2、坐标3、以及坐标4绘制第二线条;
3)计算第一线条和第二线条之间的第一相似度;
例如,可以计算第一线条和第二线条之间的余弦距离、马氏距离、欧氏距离等,作为第一线条和第二线条之间的第一相似度。
4)计算第三角度和第二角度之间的第二相似度。
例如,可以通过下述公式(1)计算第三角度和第二角度之间的相似度。
Figure BDA0002999985960000141
其中,ρ表示第三角度和第二角度之间的第二相似度;α表示第三角度;β表示第二角度;|α-β|表示第三角度和第二角度的差值的绝对值。
5)通过下述公式(2)计算手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与第一组合之间的相似度。
δ=∈×τ1+ρ×τ2 公式(2)
其中,δ表示手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与第一组合之间的相似度;∈表示第一相似度;τ1表示第一权重;ρ表示第三角度和第二角度之间的第二相似度;τ2表示第二权重。
应当理解,上述相似度计算过程仅为示例性说明,本申请实施例对相似度算法的具体实现逻辑不作限制。
可选地,另外一些实施例中,终端设备在计算得到手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与对应关系中包含的每种按压点的位置、以及手写笔的倾斜角的组合之间的相似度后,如果其中的最大相似度小于第一阈值,则终端设备也可以不将与手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角之间的相似度最大的这种组合对应的握笔姿势作为识别到的用户的握笔姿势。此时,用户可以主动在终端设备上进行交互操作,对手写笔的笔型进行切换(具体请参考前述实施例中所述)。
换言之,本申请实施例中,终端设备也可以只有在确定手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,与对应关系中包含的按压点的位置、以及手写笔的倾斜角的组合之间的最大相似度大于或等于第一阈值时,才将与手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角之间的相似度最大的这种组合对应的握笔姿势作为识别到的用户的握笔姿势。可以理解的,终端设备计算得到的相似度的值应当在0至1的范围内。
示例性地,第一阈值可以是0.75、0.8、0.9等,本申请对第一阈值的大小不作限制。
可选地,还有一些实施例中,预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系也可以通过一个神经网络模型实现。例如,可以将预先采集的用户采用不同的握笔姿势手持手写笔时的按压点的位置、以及手写笔的倾斜角作为样本输入,将对应的握笔姿势作为样本输出,对神经网络进行训练,得到神经网络模型。该神经网络模型即表示了按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,具有根据手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,输出与手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角对应的用户的握笔姿势的功能。
该神经网络模型可以预置在终端设备中。终端设备根据手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,查询按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系的过程,也可以是指:终端设备将手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角输入神经网络模型,获取神经网络模型的输出结果的过程。
其中,神经网络模型根据手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角输出的用户的握笔姿势可以包括至少一种,同时,神经网络模型在输出每种握笔姿势时,还可以输出握笔姿势的置信度,置信度为0至1范围内的值。终端设备在得到神经网络模型输出的至少一种握笔姿势、以及每种握笔姿势的置信度后,可以从至少一种握笔姿势中选择置信度最大的一种握笔姿势作为识别得到的用户的握笔姿势。
例如,假设终端设备将手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角输入神经网络模型后,神经网络模型输出的握笔姿势为钢笔握笔姿势、铅笔握笔姿势,其中,钢笔握笔姿势的置信度为0.8,铅笔握笔姿势的置信度为0.6,则终端设备可以确定根据手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,识别到的用户的握笔姿势为钢笔握笔姿势。
可选地,本申请实施例中,终端设备在得到神经网络模型根据手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,输出的至少一种握笔姿势及握笔姿势的置信度后,如果其中的最大置信度小于第二阈值,则终端设备也可以不将置信度最大的握笔姿势这种握笔姿势作为识别得到的用户的握笔姿势。此时,用户同样可以主动在终端设备上进行交互操作,对手写笔的笔型进行切换(具体请参考前述实施例中所述)。
换言之,本申请实施例中,终端设备也可以只有在确定神经网络模型输出的至少一种握笔姿势的置信度中的最大置信度大于或等于第二阈值时,才将置信度最大的这种握笔姿势作为识别到的用户的握笔姿势。
示例性地,第二阈值也可以是0.75、0.8、0.9等,第二阈值的大小可以与上述第一阈值相同,也可以不同。本申请对第二阈值的大小不作限制。
以上实施例主要说明了终端设备根据手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,识别用户的握笔姿势,以及根据用户的握笔姿势将手写笔的笔型切换为与用户的握笔姿势相匹配的第一笔型的过程。
可选地,本申请实施例中,终端设备将手写笔的笔型切换为第一笔型后,还可以根据手写笔发送的手写笔的倾斜角,将终端设备上生成的手写笔的笔迹的效果(也可以称为手写笔的笔刷效果),切换为不同的粗细和轻重效果,如第一效果。
示例性,以终端设备为手机为例,图16为本申请实施例提供的智能化切换笔型的方法的另一流程示意图。如图16所示,该方法可以包括:
S1601-S1606:S1601-S1606分别与上述的S501-S506相同,此处不再赘述。
S1607、手机根据手写笔发送的手写笔的倾斜角,将手机上生成的手写笔的笔迹的效果切换为第一效果。
可以理解,手写笔的倾斜角不同时,第一效果不同,也即,手机上生成的手写笔的笔迹的粗细和轻重效果不同。
例如,以第一笔型为钢笔为例,当手写笔的倾斜角为60度时终端设备上生成的手写笔的笔迹,相较于手写笔的倾斜角为80度时终端设备上生成的手写笔的笔迹而言,可以更粗、视觉效果更重一些。
在一种可能的设计中,本申请实施例中,也可以预先建立倾斜角与第一效果之间的对应关系,如:可以通过采集用户手持实际的钢笔、铅笔等进行书写或绘画时,不同的倾斜角下生成的笔迹的效果,建立该对应关系并预置在终端设备中。然后,终端设备可以根据手写笔发送的手写笔的倾斜角,查询预先建立的倾斜角与第一效果之间的对应关系,将终端设备上生成的手写笔的笔迹的效果切换为第一效果。
可选地,当用户使用手写笔与终端设备进行交互时,终端设备与水平方向可能本身就存在一定的倾斜角。而上述实施例中,手写笔上的重力传感器测量得到的手写笔的倾斜角仅仅为手写笔相对于水平方向的倾斜角。所以,单纯基于手写笔的倾斜角实现前述实施例所述的方案可能欠缺准确性。
鉴于此,本申请实施例中,终端设备在接收到手写笔发送的用户手持手写笔时的按压点的位置、以及手写笔的倾斜角后,也可以根据终端设备自身的倾斜角,先计算得到手写笔与终端设备之间的相对倾斜角。然后,终端设备可以根据手写笔发送的用户手持手写笔时的按压点的位置,以及计算得到的手写笔与终端设备之间的相对倾斜角,识别用户的握笔姿势。其中,终端设备自身的倾斜角的范围在0度至90度之间,相对倾斜角的范围也在0度至90度之间。
例如,假设终端设备接收到手写笔发送的手写笔的倾斜角为45度,终端设备测量得到的自身的倾斜角为15度,则终端设备可以计算得到手写笔与终端设备之间的相对倾斜角为60度。
可以理解的,对于终端设备根据手写笔发送的用户手持手写笔时的按压点的位置,以及计算得到的手写笔与终端设备之间的相对倾斜角,识别用户的握笔姿势的方案,上述S504中所述的预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系应当也相应变为按压点的位置、以及手写笔与终端设备之间的相对倾斜角与握笔姿势之间的对应关系。
具体地,预先建立按压点的位置、以及手写笔与终端设备之间的相对倾斜角与握笔姿势之间的对应关系的过程,可以参考前述实施例中所述的预先建立按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系的过程。终端设备根据手写笔发送的用户手持手写笔时的按压点的位置,以及手写笔与终端设备之间的相对倾斜角,查询按压点的位置、以及手写笔与终端设备之间的相对倾斜角与握笔姿势之间的对应关系,识别用户的握笔姿势的过程,也可以参考前述实施例中所述的终端设备根据手写笔发送的用户手持手写笔时的按压点的位置,以及手写笔的倾斜角,查询按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,识别用户的握笔姿势的过程。在此均不再赘述。
类似地,上述S1607中终端设备(如手机)也可以根据计算得到的手写笔与终端设备之间的相对倾斜角,将手机上生成的手写笔的笔迹的效果切换为第一效果。具体原理与前述S1607中所述的根据手写笔发送的手写笔的倾斜角,将手机上生成的手写笔的笔迹的效果切换为第一效果的原理相同,不再赘述。
可以理解的,上述实施例中,终端设备在计算手写笔与终端设备之间的相对倾斜角之前,需要先获取自身的倾斜角。可选地,本申请实施例中,终端设备获取自身的倾斜角的过程与前述手写笔获取手写笔的倾斜角的过程类似。例如,终端设备可以通过自身的重力传感器、或者陀螺仪(传感器)、又或者倾角传感器等获取自身的倾斜角,在此也不作限制。
还需要说明的是,前述实施例中所述的终端设备与手写笔的交互过程仅为示例性说明,本申请实施例对该智能化切换笔型的方法中部分计算步骤的执行主体并不作限制。
示例性地,以终端设备为手机为例,图17为本申请实施例提供的智能化切换笔型的方法的又一流程示意图。如图17所示,该方法可以包括:
S1701、手写笔获取第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角。
S1702、手写笔向手机发送第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角。
相应地,手机接收第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角。
S1703、手机根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置。
具体原理与前述实施例中手写笔根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置的原理相同,不再赘述。
S1704、手机根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势。
S1705、手机根据用户的握笔姿势,确定与用户的握笔姿势相匹配的第一笔型。
S1706、手机将手写笔的笔型切换为第一笔型。
S1707、手机根据手写笔发送的手写笔的倾斜角,将手机上生成的手写笔的笔迹的效果切换为第一效果。
可以看到,图17所示的流程中,手写笔在获取到第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角后,可以将第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角发送给终端设备(手机)。然后,终端设备可以根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置。
也即,根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置的步骤的执行主体可以是手写笔,也可以是终端设备。
示例性地,同样以终端设备为手机为例,图18为本申请实施例提供的智能化切换笔型的方法的又一流程示意图。如图18所示,该方法可以包括:
S1801、手写笔获取第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息、以及重力传感器采集的手写笔的倾斜角。
S1802、手写笔根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置。
S1803、手写笔根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势。
S1804、手写笔向手机发送识别到的用户的握笔姿势、以及手写笔的倾斜角。
例如,手写笔可以向手机发送第一消息,第一消息包括识别到的用户的握笔姿势的类型,如:钢笔握笔姿势、铅笔握笔姿势等。
相应地,手机接收识别到的用户的握笔姿势、以及手写笔的倾斜角。
S1805、手机根据用户的握笔姿势,确定与用户的握笔姿势相匹配的第一笔型。
S1806、手机将手写笔的笔型切换为第一笔型。
S1807、手机根据手写笔发送的手写笔的倾斜角,将手机上生成的手写笔的笔迹的效果切换为第一效果。
可以看到,图18所示的流程中,手写笔根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置后,可以直接根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势。然后,手写笔向终端设备发送识别到的用户的握笔姿势、以及手写笔的倾斜角。从而,终端设备可以根据用户的握笔姿势进行后续切换笔型的步骤,以及根据手写笔的倾斜角进行后续切换笔迹效果的步骤。
也即,根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势的步骤的执行主体可以是终端设备,也可以是手写笔。
可以理解的,上述图17和图18所示的流程中,根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角识别用户的握笔姿势的步骤,同样可以被替换为根据用户手持手写笔时的按压点的位置、以及手写笔与终端设备之间的相对倾斜角识别用户的握笔姿势。但应当注意,对于其中图18所示的流程而言,由于识别用户的握笔姿势的步骤是由手写笔完成的,所以,手写笔根据用户手持手写笔时的按压点的位置、以及手写笔与终端设备之间的相对倾斜角识别用户的握笔姿势之前,终端设备应当先向手写笔发送终端设备的倾斜角,以使得手写笔可以根据手写笔的倾斜角和终端设备的倾斜角计算出手写笔与终端设备之间的相对倾斜角。具体原理也请参考前述实施例中所述,此处不再赘述。
可选地,本申请还有一些实施例中,该智能化切换笔型的方法中部分计算步骤的执行主体还可以是除手写笔和终端设备之外的其他设备,如:第一设备。终端设备和手写笔与第一设备之间可以进行通信,将数据发送给第一设备进行计算。第一设备的具体计算过程与前述实施例中手写笔和终端设备上的计算过程相同。
示例性地,第一设备可以包括计算机、服务器等,在此也不作限制。
对应于前述实施例中所述的智能化切换笔型的方法,本申请实施例还提供一种智能化切换笔型的装置,可以应用于终端设备。该装置的功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块或单元。
例如,图19为本申请实施例提供的智能化切换笔型的装置的结构示意图。如图19所示,该智能化切换笔型的装置可以包括:数据获取模块1901,姿势识别模块1902,笔型切换模块1903。
其中,数据获取模块1901,用于获取用户手持手写笔时的按压点的位置、以及手写笔的倾斜角。姿势识别模块1902,用于根据用户手持手写笔时的按压点的位置、以及手写笔的倾斜角,识别用户的握笔姿势。笔型切换模块1903,用于将手写笔在终端设备中的虚拟笔型切换为与识别到的用户的握笔姿势相匹配的第一笔型。
在一种可能的设计中,手写笔上可以设置有第一至第N压力传感器,N为大于0的整数。数据获取模块1901,具体用于获取第一压力传感器至所述第N压力传感器中的每个压力传感器采集的压力信息;根据第一压力传感器至第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持手写笔时的按压点的位置。
可选地,第一笔型包括以下任意一种:钢笔、圆珠笔、铅笔、马克笔、毛笔、以及水彩笔。
可选地,用户的握笔姿势包括但不限于钢笔握笔姿势、圆珠笔握笔姿势、铅笔握笔姿势、马克笔握笔姿势、毛笔握笔姿势、水彩笔握笔姿势等。
一种实施方式中,姿势识别模块1902,具体可以用于根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势。
预先建立按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系的过程请参考前述方法实施例中所述,不再赘述。
可选地,数据获取模块1901,还可以用于获取所述终端设备的倾斜角。另一种实施方式中,姿势识别模块1902,具体可以用于根据所述手写笔的倾斜角、以及所述终端设备的倾斜角,得到所述手写笔与所述终端设备之间的相对倾斜角;根据用户手持所述手写笔时的按压点的位置、以及所述手写笔与所述终端设备之间的相对倾斜角,识别用户的握笔姿势。
可选地,图20为本申请实施例提供的智能化切换笔型的装置的另一结构示意图。如图20所示,该智能化切换笔型的装置还可以包括:效果切换模块1904。
一种实施方式中,效果切换模块1904,可以用于根据手写笔的倾斜角,将终端设备上生成的手写笔的虚拟笔迹的效果切换为第一效果。
另一种实施方式中,效果切换模块1904,可以用于根据所述手写笔与所述终端设备之间的相对倾斜角,将所述终端设备上生成的所述手写笔的虚拟笔迹的效果切换为第一效果。
可以理解的,该智能化切换笔型的装置中,各模块的具体实现原理,可以参考前述实施例中所述。
应理解以上装置中单元或模块(以下均称为单元)的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且装置中的单元可以全部以软件通过处理元件调用的形式实现;也可以全部以硬件的形式实现;还可以部分单元以软件通过处理元件调用的形式实现,部分单元以硬件的形式实现。
例如,各个单元可以为单独设立的处理元件,也可以集成在装置的某一个芯片中实现,此外,也可以以程序的形式存储于存储器中,由装置的某一个处理元件调用并执行该单元的功能。此外这些单元全部或部分可以集成在一起,也可以独立实现。这里所述的处理元件又可以称为处理器,可以是一种具有信号的处理能力的集成电路。在实现过程中,上述方法的各步骤或以上各个单元可以通过处理器元件中的硬件的集成逻辑电路实现或者以软件通过处理元件调用的形式实现。
在一个例子中,以上装置中的单元可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个专用集成电路(application specific integrated circuit,ASIC),或,一个或多个数字信号处理器(digital signal process,DSP),或,一个或者多个现场可编辑逻辑门阵列(field programmable gate array,FPGA),或这些集成电路形式中至少两种的组合。
再如,当装置中的单元可以通过处理元件调度程序的形式实现时,该处理元件可以是通用处理器,例如CPU或其它可以调用程序的处理器。再如,这些单元可以集成在一起,以片上系统(system-on-a-chip,SOC)的形式实现。
在一种实现中,以上装置实现以上方法中各个对应步骤的单元可以通过处理元件调度程序的形式实现。例如,该装置可以包括处理元件和存储元件,处理元件调用存储元件存储的程序,以执行以上方法实施例所述的方法。存储元件可以为与处理元件处于同一芯片上的存储元件,即片内存储元件。
在另一种实现中,用于执行以上方法的程序可以在与处理元件处于不同芯片上的存储元件,即片外存储元件。此时,处理元件从片外存储元件调用或加载程序于片内存储元件上,以调用并执行以上方法实施例所述的方法。
例如,本申请实施例还可以提供一种装置,如:电子设备,可以包括:处理器,用于存储该处理器可执行指令的存储器。该处理器被配置为执行上述指令时,使得该电子设备实现如前述实施例所述的智能化切换笔型的方法。该存储器可以位于该电子设备之内,也可以位于该电子设备之外。且该处理器包括一个或多个。
示例性地,该电子设备可以是手写笔、或者终端设备,又或者服务器、计算机等。
其中,终端设备包括但不限于可以支持手写功能的交互式电子白板、手机、可穿戴设备(例如智能手表、智能手环器等)、平板电脑、笔记本电脑、台式计算机、便携式电子设备(如膝上型计算机,Laptop)、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、智能电视(如智慧屏)、车载电脑、智能音箱、增强现实(augmented reality,AR)设备、虚拟现实(virtualreality,VR)设备、以及其他带有显示屏的智能设备等。终端设备的示例性实施例包括但不限于搭载
Figure BDA0002999985960000211
Linux或者其它操作系统的便携式或非便携式的电子设备。便携式电子设备包括但不限于智能手机、智能耳机、平板电脑、具备无线通讯功能的可穿戴电子设备(如智能手表、智能手环、智能戒指、智能眼镜)等。本申请实施例对终端设备的具体产品形态不作限制。
在又一种实现中,该装置实现以上方法中各个步骤的单元可以是被配置成一个或多个处理元件,这里的处理元件可以为集成电路,例如:一个或多个ASIC,或,一个或多个DSP,或,一个或者多个FPGA,或者这些类集成电路的组合。这些集成电路可以集成在一起,构成芯片。
例如,本申请实施例还提供一种芯片,该芯片可以应用于上述电子设备。芯片包括一个或多个接口电路和一个或多个处理器;接口电路和处理器通过线路互联;处理器通过接口电路从电子设备的存储器接收并执行计算机指令,以实现如前述实施例所述的智能化切换笔型的方法。
本申请实施例还提供一种计算机程序产品,包括计算机可读代码,当计算机可读代码在电子设备中运行时,使得电子设备实现如前述实施例所述的智能化切换笔型的方法。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,如:程序。该软件产品存储在一个程序产品,如计算机可读存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
例如,本申请实施例还可以提供一种计算机可读存储介质,其上存储有计算机程序指令。当计算机程序指令被电子设备执行时,使得电子设备实现如前述实施例所述的智能化切换笔型的方法。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种智能化切换笔型的方法,其特征在于,所述方法包括:
获取用户手持手写笔时的按压点的位置、以及所述手写笔的倾斜角;
根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势;
将所述手写笔在终端设备中的虚拟笔型切换为与识别到的用户的握笔姿势相匹配的第一笔型。
2.根据权利要求1所述的方法,其特征在于,所述根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势,包括:
根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,查询预先建立的按压点的位置、以及手写笔的倾斜角与握笔姿势之间的对应关系,确定与用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角对应的握笔姿势作为识别到的用户的握笔姿势。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
根据所述手写笔的倾斜角,将所述终端设备上生成的所述手写笔的虚拟笔迹的效果切换为第一效果。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述终端设备的倾斜角;
所述根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势,包括:
根据所述手写笔的倾斜角、以及所述终端设备的倾斜角,得到所述手写笔与所述终端设备之间的相对倾斜角;
根据用户手持所述手写笔时的按压点的位置、以及所述手写笔与所述终端设备之间的相对倾斜角,识别用户的握笔姿势。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
根据所述手写笔与所述终端设备之间的相对倾斜角,将所述终端设备上生成的所述手写笔的虚拟笔迹的效果切换为第一效果。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述手写笔上设置有第一至第N压力传感器,N为大于0的整数;
所述获取用户手持手写笔时的按压点的位置,包括:
获取所述第一压力传感器至所述第N压力传感器中的每个压力传感器采集的压力信息;
根据所述第一压力传感器至所述第N压力传感器中的每个压力传感器采集的压力信息,确定用户手持所述手写笔时的按压点的位置。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述第一笔型包括以下任意一种:
钢笔、圆珠笔、铅笔、马克笔、毛笔、以及水彩笔。
8.一种智能化切换笔型的装置,其特征在于,所述装置包括:
数据获取模块,用于获取用户手持手写笔时的按压点的位置、以及所述手写笔的倾斜角;
姿势识别模块,用于根据用户手持所述手写笔时的按压点的位置、以及所述手写笔的倾斜角,识别用户的握笔姿势;
笔型切换模块,用于将所述手写笔在终端设备中的虚拟笔型切换为与识别到的用户的握笔姿势相匹配的第一笔型。
9.一种电子设备,其特征在于,包括:处理器,用于存储所述处理器可执行指令的存储器;
所述处理器被配置为执行所述指令时,使得所述电子设备实现如权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序指令;其特征在于,
当所述计算机程序指令被电子设备执行时,使得电子设备实现如权利要求1-7任一项所述的方法。
CN202110343519.XA 2021-03-30 2021-03-30 智能化切换笔型的方法、装置、设备及存储介质 Pending CN115145416A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110343519.XA CN115145416A (zh) 2021-03-30 2021-03-30 智能化切换笔型的方法、装置、设备及存储介质
PCT/CN2022/083827 WO2022206785A1 (zh) 2021-03-30 2022-03-29 智能化切换笔型的方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110343519.XA CN115145416A (zh) 2021-03-30 2021-03-30 智能化切换笔型的方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN115145416A true CN115145416A (zh) 2022-10-04

Family

ID=83404221

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110343519.XA Pending CN115145416A (zh) 2021-03-30 2021-03-30 智能化切换笔型的方法、装置、设备及存储介质

Country Status (2)

Country Link
CN (1) CN115145416A (zh)
WO (1) WO2022206785A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3120022B2 (ja) * 1995-06-29 2000-12-25 シャープ株式会社 ペン入力装置
CN101334699B (zh) * 2008-08-01 2010-10-13 广东威创视讯科技股份有限公司 一种无线电子笔及其笔迹粗细自调节方法
CN102591481A (zh) * 2011-01-13 2012-07-18 国立成功大学 数字绘图电子笔、数字绘图系统及其使用方法
CN103218065B (zh) * 2013-04-17 2016-12-28 合肥华恒电子科技有限责任公司 一种自动变更笔触类型的手写输入装置

Also Published As

Publication number Publication date
WO2022206785A1 (zh) 2022-10-06

Similar Documents

Publication Publication Date Title
US9335835B2 (en) Method and apparatus for providing user interface
EP2720126B1 (en) Method and apparatus for generating task recommendation icon in a mobile device
US9773158B2 (en) Mobile device having face recognition function using additional component and method for controlling the mobile device
CN111382624B (zh) 动作识别方法、装置、设备及可读存储介质
EP2743819A2 (en) Terminal and method for providing user interface using a pen
US10733959B2 (en) Method for configuring input interface and electronic device using same
KR20130088104A (ko) 비접촉 방식의 인터페이스를 제공하기 위한 휴대 장치 및 방법
US9378427B2 (en) Displaying handwritten strokes on a device according to a determined stroke direction matching the present direction of inclination of the device
US11461949B2 (en) Electronic device for providing avatar and operating method thereof
US11029841B2 (en) Electronic device for generating augmented reality emoji and method thereof
US20150109200A1 (en) Identifying gestures corresponding to functions
US11545061B2 (en) Electronic device for displaying screen through display in low-power mode and operating method thereof
KR102410654B1 (ko) 가상 현실 및 증강 현실용 인풋 디바이스
KR20210017081A (ko) 객체에 대응하는 그래픽 요소 표시 방법 및 장치
CN104636017A (zh) 一种无线式智能终端控制设备及其控制方法
US20180286089A1 (en) Electronic device and method for providing colorable content
US20230350566A1 (en) Electronic apparatus and method for processing input from stylus pen in electronic apparatus
EP3710910B1 (en) Multi-panel computing device having integrated magnetic coupling structure(s)
CN115145416A (zh) 智能化切换笔型的方法、装置、设备及存储介质
WO2023024536A1 (zh) 一种绘图方法、装置、计算机设备及存储介质
EP4170545A1 (en) Method and device for aligning handwriting
EP4195005A1 (en) Electronic device and operation method of electronic device
CN115803747A (zh) 用于将手写转换为文本的电子装置及其方法
JP6828134B2 (ja) 情報処理装置、方法およびプログラム
US9292107B1 (en) Mobile telephone as computer mouse

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination