CN114510909A - 一种基于终端设备的数据选择方法与电子设备 - Google Patents

一种基于终端设备的数据选择方法与电子设备 Download PDF

Info

Publication number
CN114510909A
CN114510909A CN202011182593.XA CN202011182593A CN114510909A CN 114510909 A CN114510909 A CN 114510909A CN 202011182593 A CN202011182593 A CN 202011182593A CN 114510909 A CN114510909 A CN 114510909A
Authority
CN
China
Prior art keywords
data
mask
user
different types
data objects
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011182593.XA
Other languages
English (en)
Inventor
张飞雨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202011182593.XA priority Critical patent/CN114510909A/zh
Publication of CN114510909A publication Critical patent/CN114510909A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/543User-generated data transfer, e.g. clipboards, dynamic data exchange [DDE], object linking and embedding [OLE]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例提供一种基于终端设备的数据选择方法与电子设备,应用于终端设备中,终端设备接收并响应第一用户操作,在包含多种不同类型的数据对象的编辑显示界面中显示用于选中所述数据对象的标识;所述第一用户操作用于指示用户要对所述编辑显示界面中的数据对象进行选中操作,所述多种不同类型的数据对象分别由对应的控件管理;接收第二用户操作;所述第二用户操作是用户在所述编辑显示界面中选中至少两种不同类型的数据对象的操作;响应所述第二用户操作,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态;对选中状态的所述至少两种不同类型的数据对象进行处理。

Description

一种基于终端设备的数据选择方法与电子设备
技术领域
本申请涉及终端技术领域,尤其涉及一种基于终端设备的数据选择方法与电子设备。
背景技术
目前,智能终端设备发展的越来越便携,比如手机、平板电脑等智能设备便携性都很好,使得智能设备的普及性越来越高。
在一些智能终端设备中,可以实现基于富文本编辑能力进行备忘录记录、便签记录等,以实现随时随地的记录信息并编辑信息。其中,富文本编辑能力可以实现多种不同类型的数据记录以及对数据样式的编辑。然而,基于Android平台的备忘录记录、便签记录等当前并不支持对多种不同类型的数据对象的同时选中处理,而是仅支持一次只能对一段文本对象或一个图片对象的选中操作,无法支持对文本对象和图片对象的同时选中操作。故此,在这种情况下,若需要实现对多种不同类型的数据对象进行复制粘贴处理时,则需要分别针对每种不同类型的数据对象分别进行选中操作,并依次对选中的数据对象分别进行复制粘贴处理,从而导致用户操作复杂,效率较低。
发明内容
本申请提供一种基于终端设备的数据选择方法与电子设备,用于实现用户对多种不同类型的数据对象的同时选中操作,从而提升用户对终端设备中不同类型的数据对象进行选中操作的效率,并提升用户体验。
第一方面,本申请实施例提供了一种基于终端设备的数据选择方法,所述终端设备接收并响应第一用户操作,在包含多种不同类型的数据对象的编辑显示界面中显示用于选中所述数据对象的标识;所述第一用户操作用于指示用户要对所述编辑显示界面中的数据对象进行选中操作,所述多种不同类型的数据对象分别由对应的控件管理;其次,所述终端设备接收第二用户操作;所述第二用户操作是用户在所述编辑显示界面中选中至少两种不同类型的数据对象的操作;然后,所述终端设备响应所述第二用户操作,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态;最后,所述终端设备对选中状态的所述至少两种不同类型的数据对象进行处理。
该方法的有益效果为,在多种不同类型的数据对象分别由对应的控件管理的场景下,终端设备通过接收到用于指示用户进行选中操作的第一用户操作,以及响应于指示用户对至少两种不同类型的数据对象的选中操作的第二用户操作,实现了在终端设备上可以选中多种不同类型的数据对象,将选中的数据对象设置为选中状态,从而满足了用户对于多种不同类型的数据对象进行选中操作时的操作效率,进而提升了用户体验。
在一种可能的设计中,所述标识包括提示弹窗,所述提示弹窗中包含第一控件,所述第一控件用于选中不同类型的数据对象。
该设计的有益效果为,基于终端设备实现选中多种不同类型的数据对象的一种可能的实施方式为,本申请可以通过对于指定控件的点击实现对编辑显示界面中多种不同类型的数据对象的全部选中,而无需像相关技术中需要对每一种类型的数据对象都执行一次选中操作,从而较好地提高了用户对于不同类型的数据对象的选中效率。
在一种可能的设计中,所述标识包括第一移动光标、第二移动光标;所述第一移动光标位于显示所述至少两种不同类型的数据对象的起始位置、所述第二移动光标位于显示所述至少两种不同类型的数据对象的结束位置;接收第二用户操作,具体实施为:接收所述用户对所述第一移动光标和/或第二移动光标的拖动操作;接收对所述第一移动光标和第二移动光标之间拖动过的区域的长按操作;或者,若所述标识还包括提示弹窗,所述提示弹窗中包含第二控件,接收对所述第二控件的点击操作;其中,所述长按操作或所述点击操作用于选中所述拖动过的区域中包含的不同类型的数据对象。
该设计的有益效果为,基于终端设备实现选中至少两种不同类型的数据对象的另一种可能的实施方式,本申请中可以通过在编辑显示界面中显示用于确定选中区域的两个移动光标,并且通过对两个移动光标的拖动,确定两个移动光标之间的区域包含的数据对象为用户选中的数据,并且本申请实施时,可以通过对移动光标的拖动操作,实现对多种不同类型的数据对象的同时选中操作,而无需像相关技术中分别对不同类型的数据对象分别进行多次选中操作,从而通过本申请采用的设计可以提高用户对多种不同类型的数据对象的选中效率。
在一种可能的设计中,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态,具体实施为,根据所述第二用户操作,绘制蒙版;通过所述蒙版覆盖所述至少两种不同类型的数据对象,使得所述至少两种不同类型的数据对象显示为选中状态。
该设计的有益效果为,本申请实施时通过绘制蒙版实现对用户选中数据对象的显示效果的展示,通过绘制蒙版可以实现更直观的确定用户操作对应的选中数据对象,并且还可以基于绘制的蒙版确定选中数据对象的数据内容。
在一种可能的设计中,绘制蒙版,具体实施为,将所述第一移动光标被拖动到的第一位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二移动光标被拖动到的第二位置坐标作为所述待绘制蒙版的结束位置坐标;根据所述起始位置坐标和结束位置坐标绘制蒙版。
该设计的有益效果为,若用户通过对移动光标的拖动操作实现对多种不同类型的数据对象的选中操作,在绘制蒙版的实施过程中,通过获取两个移动光标的位置坐标来作为绘制的蒙版的开始坐标和结束坐标,进而给出了一种绘制蒙版的具体实现方式,并且保证了绘制的蒙版更准确的反映用户操作对应的选中数据对象。
在一种可能的设计中,绘制蒙版,具体实施为,获取所述编辑显示界面中位于首位的第一类型数据对象的起始位置坐标,以及位于末位的第二类型数据对象的结束位置坐标;将所述第一类型数据对象的起始位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二类型数据对象的结束位置坐标作为待绘制蒙版的结束位置坐标;根据所述起始位置坐标和结束位置坐标绘制蒙版。
该设计的有益效果为,若用户通过对指定控件的点击操作实现对编辑显示界面中多种不同类型的数据对象的选中操作,在绘制蒙版的实施过程中,基于选中编辑显示界面中的全部类型的数据对象,因此通过获取在编辑显示界面中位于首位的数据对象的起始位置坐标,以及位于末位的数据对象的结束位置坐标,从而给出了一种绘制蒙版的具体实现方式,并且准确的将用户选中的数据对象设置为选中状态。
在一种可能的设计中,所述方法还包括,获取所述蒙版覆盖的至少两种不同类型的数据对象的数据内容,并对所述数据内容进行打包之后得到选中数据包;若接收到对所述选中数据包的粘贴指令,解析所述选中数据包;将解析到的数据内容显示在所述粘贴指令所指示的粘贴位置上。
该设计的有益效果为,本申请实施例中,首先根据用户操作确定用户选中数据对象的选中区域,然后根据确定的选中区域获取选中数据内容,并将选中数据内容进行存储,用于响应于粘贴指令,实现复制粘贴的用户操作。通过本申请实施方式,可以便携、快速的实现对多种不同类型的数据对象的复制粘贴操作,从而提高了用户效率,提升用户体验。
第二方面,本申请实施例还提供一种电子设备,所述电子设备包括存储器和一个或多个处理器;其中,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令;当所述计算机指令被所述处理器执行时,使得所述电子设备执行以下步骤:接收并响应第一用户操作,在包含多种不同类型的数据对象的编辑显示界面中显示用于选中所述数据对象的标识;所述第一用户操作用于指示用户要对所述编辑显示界面中的数据对象进行选中操作,所述多种不同类型的数据对象分别由对应的控件管理;接收第二用户操作;所述第二用户操作是用户在所述编辑显示界面中选中至少两种不同类型的数据对象的操作;响应所述第二用户操作,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态;对选中状态的所述至少两种不同类型的数据对象进行处理。
在一种可能的设计中,所述标识包括提示弹窗,所述提示弹窗中包含第一控件,所述第一控件用于选中不同类型的数据对象。
在一种可能的设计中,所述标识包括第一移动光标、第二移动光标;所述第一移动光标位于显示所述至少两种不同类型的数据对象的起始位置、所述第二移动光标位于显示所述至少两种不同类型的数据对象的结束位置;所述电子设备执行接收第二用户操作时,具体执行:接收所述用户对所述第一移动光标和/或第二移动光标的拖动操作;接收对所述第一移动光标和第二移动光标之间拖动过的区域的长按操作;或者,若所述标识还包括提示弹窗,所述提示弹窗中包含第二控件,接收对所述第二控件的点击操作;其中,所述长按操作或所述点击操作用于选中所述拖动过的区域中包含的不同类型的数据对象。
在一种可能的设计中,所述电子设备执行将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态时,具体执行:根据所述第二用户操作,绘制蒙版;通过所述蒙版覆盖所述至少两种不同类型的数据对象,使得所述至少两种不同类型的数据对象显示为选中状态。
在一种可能的设计中,所述电子设备执行绘制蒙版时,具体执行:将所述第一移动光标被拖动到的第一位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二移动光标被拖动到的第二位置坐标作为所述待绘制蒙版的结束位置坐标;根据所述起始位置坐标和结束位置坐标绘制蒙版。
在一种可能的设计中,所述电子设备执行绘制蒙版时,具体执行:获取所述编辑显示界面中位于首位的第一类型数据对象的起始位置坐标,以及位于末位的第二类型数据对象的结束位置坐标;将所述第一类型数据对象的起始位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二类型数据对象的结束位置坐标作为待绘制蒙版的结束位置坐标;根据所述起始位置坐标和结束位置坐标绘制蒙版。
在一种可能的设计中,当所述指令被所述电子设备执行时,使得所述电子设备还执行:获取所述蒙版覆盖的至少两种不同类型的数据对象的数据内容,并对所述数据内容进行打包之后得到选中数据包;若接收到对所述选中数据包的粘贴指令,解析所述选中数据包;将解析到的数据内容显示在所述粘贴指令所指示的粘贴位置上。
需要说明的是,本申请实施例第二方面提供的电子设备的各个设计的有益效果请参考第一方面任一种可能的设计的有益效果,此处不再赘述。
第三方面,本申请实施例还提供一种基于终端设备的数据选择装置,该基于终端设备的数据选择装置包括执行上述第一方面中任一种可能实现方式中的方法的模块/单元。这些模块/单元可以通过硬件实现,也可以通过硬件执行相应的软件实现。
第四方面,提供了一种计算机可读存储介质,计算机可读介质存储有计算机程序(也可以称为代码,或指令)当其在计算机上运行时,使得计算机执行上述第一方面中任一种可能实现方式中的方法。
第五方面,提供了一种计算机程序产品,计算机程序产品包括:计算机程序(也可以称为代码,或指令),当计算机程序被运行时,使得计算机执行上述第一方面中任一种可能实现方式中的方法。
第六方面,还提供一种电子设备上的图形用户界面,该电子设备具有显示屏、一个或多个存储器、以及一个或多个处理器,所述一个或多个处理器用于执行存储在所述一个或多个存储器中的一个或多个计算机程序,所述图形用户界面包括所述电子设备执行本申请实施例第一方面任一可能的实现方式时显示的图形用户界面。
附图说明
图1a为一种备忘录中记录的文本对象的界面示意图;
图1b为一种备忘录中记录的图片对象的界面示意图;
图1c为相关技术中进行数据选择的界面图之一;
图1d为相关技术中进行数据选择的界面图之二;
图2a为本申请实施例提供的一种终端设备的硬件架构的示意图;
图2b为本申请实施例提供的终端设备的软件结构框图;
图3为本申请实施例提供的一种基于终端设备的数据选择方法的界面图之一;
图4为本申请实施例提供的一种基于终端设备的数据选择方法的界面图之二;
图5a为本申请实施例提供的一种基于终端设备的数据选择方法的界面图之三;
图5b为本申请实施例提供的一种基于终端设备的数据选择方法的界面图之四;
图6为本申请实施例提供的一种基于终端设备的数据选择方法的界面图之五;
图7为本申请实施例提供的一种基于终端设备的数据选择方法的流程示意图;
图8为本申请实施例提供的一种基于终端设备的数据选择装置的结构示意图。
具体实施方式
随着社会的快速发展,移动终端设备例如手机越来越普及。手机不但具有通信功能、还具有强大的处理能力、存储能力、照相功能、数据编辑功能等。因此,手机不仅可以作为一种通信工具,更是用户的移动数据库,它可以实现用户随时随地进行数据记录或对已记录的数据进行编辑等操作,编辑指包括但不限于为复制粘贴、删除操作等。因此,基于移动终端设备的可移动性和便捷性,通过移动终端设备对不同类型的数据对象进行存储或编辑功能,可以适用于用户的各种文件创作、数据记录等场景。
本申请实施例可以应用于诸如手机、平板电脑、可穿戴设备(例如,手表、手环、头盔、耳机等)、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、智能家居设备(例如,智能电视,智能音箱,智能摄像头等)等电子设备。可以理解的是,本申请实施例对电子设备的具体类型不作任何限制。
上述电子设备中可以安装各种功能的应用(application,在下文中简称App),比如微信、邮箱、微博、备忘录、便签、WPS和word等App。在本申请实施例中,重点关注电子设备中安装的比如备忘录、便签、WPS和word等App中的数据对象选中和编辑等方面的操作。如图1a所示,为在手机界面中打开备忘录App后,选择的一个备忘录文件的显示界面的示意图,用户可以在备忘录App中创建不同的记录项,用于记录不同的信息。这些信息可以为文本数据、也可以为图像数据,还可以为音频数据或视频数据等,下文中将不同的数据类型称为不同类型的数据对象,比如文本对象、图像对象、音频对象和视频对象等。如图1a所示,展示的是备忘录中记录的为文本对象。当然还可以为图1b所示的图片对象,本申请这里对数据对象的类型不做具体限定。
基于背景技术的描述,结合图1c、图1d所示,如果备忘录App的一个备忘录文件的显示界面中既记录有文本对象也记录有图片对象,则用户对这个显示界面中的内容进行选中时,选中文本对象时就选中不了图片对象,选中图片对象时就选中不了文本对象,即用户不能同时选中文本对象和图片对象,这样就导致在对备忘录文件的显示界面中的所有不同类型的数据对象内容进行复制粘贴时,需要用户多次进行选中操作,因此用户操作复杂,效率较低。
背景技术中存在不支持对多种不同类型的数据对象的同时选中处理的这一问题的原因在于,基于Android原生控件与富文本编辑能力的结合进行的备忘录记录、便签记录等时,其中每种数据类型具有其对应的控件,然而各数据类型对应的控件仅能实现对应的数据类型的数据对象的独立管理和编辑。例如,文本控件仅可实现对文本对象的管理和编辑,如图1c中所显示的仅支持对文本对象进行选中操作。图片控件仅可实现对图片对象的管理和编辑,如图1d中所显示的仅支持对图片对象的选中操作。故而在单次选中操作中无法实现对多个不同类型的数据对象的同时选中操作。
因此,当一篇备忘录文件中存在多种不同类型的数据对象时,例如有文本、图片、语音、动态图像、视频等类型的数据对象时,若要实现对该备忘录文件中的多种不同类型的数据对象的全部选中操作,则需要针对每种类型的数据对象分别进行选中操作来实现,从而可能导致需要执行多次操作才能实现全部选中,因此造成操作复杂度提升,且用户体验变差。
有鉴于此,本申请实施例提供一种基于终端设备的数据选择方法,用以在终端设备中进行选中操作时,避免不能同时选中多种不同类型的数据对象的问题,可以实现用户对终端设备中的备忘录、便签等App中记录的不同数据对象的同时选中操作,提升复制粘贴数据的效率,从而提升用户体验。
本申请实施例可以应用到的电子设备的示例性实施例包括但不限于搭载
Figure BDA0002750589040000061
Figure BDA0002750589040000062
或者其它操作系统的便携式电子设备。上述便携式电子设备也可以是其它便携式电子设备,诸如具有触敏表面(例如触控面板)的膝上型计算机(Laptop)等。
图2a示出了一种可能的终端设备的结构图。参阅图2a所示,所述终端设备100包括:射频(Radio Frequency,RF)电路110、电源120、处理器130、存储器140、输入单元150、显示单元160、音频电路170、通信接口180、以及无线保真(wireless fidelity,WiFi)模块190等部件。本领域技术人员可以理解,图2a中示出的终端设备的结构并不构成对终端设备的限定,本申请实施例提供的终端设备可以包括比图示更多或更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面结合图2a对所述终端设备100的各个构成部件进行具体的介绍:
所述RF电路110可用于通信或通话过程中,数据的接收和发送。特别地,所述RF电路110在接收到基站的下行数据后,发送给所述处理器130处理;另外,将待发送的上行数据发送给基站。通常,所述RF电路110包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(low noise amplifier,LNA)、双工器等。
此外,RF电路110还可以通过无线通信与网络和其他设备进行通信。所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(global system ofmobile communication,GSM)、通用分组无线服务(general packet radio service,GPRS)、码分多址(code division multiple access,CDMA)、宽带码分多址(wideband codedivision multiple access,WCDMA)、长期演进(long term evolution,LTE)、电子邮件、短消息服务(short messaging service,SMS)等。
WiFi技术属于短距离无线传输技术,所述终端设备100通过WiFi模块190可以连接访问接入点(access point,AP),从而实现数据网络的访问。所述WiFi模块190可用于通信过程中,数据的接收和发送。
所述终端设备100可以通过所述通信接口180与其他设备实现物理连接。可选的,所述通信接口180与所述其他设备的通信接口通过电缆连接,实现所述终端设备100和其他设备之间的数据传输。
由于在本申请实施例中,所述终端设备100能够实现通信业务,向其他联系人发送信息,因此所述终端设备100需要具有数据传输功能,即所述终端设备100内部需要包含通信模块。虽然图2a示出了所述RF电路110、所述WiFi模块190、和所述通信接口180等通信模块,但是可以理解的是,所述终端设备100中存在上述部件中的至少一个或者其他用于实现通信的通信模块(如蓝牙模块),以进行数据传输。
例如,当所述终端设备100为手机时,所述终端设备100可以包含所述RF电路110,还可以包含所述WiFi模块190;当所述终端设备100为计算机时,所述终端设备100可以包含所述通信接口180,还可以包含所述WiFi模块190;当所述终端设备100为平板电脑时,所述终端设备100可以包含所述WiFi模块。
所述存储器140可用于存储软件程序以及模块。所述处理器130通过运行存储在所述存储器140的软件程序以及模块,从而执行所述终端设备100的各种功能应用以及数据处理。可选的,所述存储器140可以主要包括存储程序区和存储数据区。其中,存储程序区可存储操作系统(主要包括内核层、系统层、应用程序框架层和应用程序层等各自对应的软件程序或模块)。其中,应用程序层可以包含各种应用的,比如具有富文本编辑功能的备忘录应用;存储数据区可存储比如各种图片、视频文件等多媒体文件等,例如备忘录应用中记录的多种不同类型的数据对象。
此外,所述存储器140可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
所述输入单元150可用于接收用户输入的数字或字符信息等多种不同类型的数据对象的编辑操作,以及产生与所述终端设备100的用户设置以及功能控制有关的键信号输入。可选的,输入单元150可包括触控面板151以及其他输入设备152。
其中,所述触控面板151,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在所述触控面板151上或在所述触控面板151附近的操作),并根据预先设定的程序驱动相应的连接装置。可选的,所述触控面板151可以包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给所述处理器130,并能接收所述处理器130发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种不同类型实现所述触控面板151。本申请实施例中,所述触控面板151可以用于接收本申请提供的一种基于终端设备的数据选择方法中所涉及到的各种用户操作。
可选的,所述其他输入设备152可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
所述显示单元160可用于显示由用户输入的信息或提供给用户的信息以及所述终端设备100的各种菜单。所述显示单元160即为所述终端设备100的显示系统,用于呈现界面,实现人机交互。所述显示单元160可以包括显示面板161。可选的,所述显示面板161可以采用液晶显示屏(liquid crystal display,LCD)、有机发光二极管(organic light-emitting diode,OLED)等形式来配置。
进一步的,所述触控面板151可覆盖所述显示面板161,当所述触控面板151检测到在其上或附近的触摸操作后,传送给所述处理器130以确定触摸事件的类型,随后所述处理器130根据触摸事件的类型在所述显示面板161上提供相应的视觉输出。
虽然在图2a中,所述触控面板151与所述显示面板161是作为两个独立的部件来实现所述终端设备100的输入和输入功能,但是在某些实施例中,可以将所述触控面板151与所述显示面板161集成而实现所述终端设备100的输入和输出功能。
所述处理器130是所述终端设备100的控制中心,利用各种接口和线路连接各个部件,通过运行或执行存储在所述存储器140内的软件程序和/或模块,以及调用存储在所述存储器140内的数据,执行所述终端设备100的各种功能和处理数据,从而实现基于所述终端的多种业务。本申请实施例中,处理器130来控制实现同时对备忘录、便签等App中不同类型的数据对象的选中操作。
可选的,所述处理器130可包括一个或多个处理单元。可选的,所述处理器130可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统的任务,调制解调处理器主要处理无线通信编码和解码的任务。可以理解的是,上述调制解调处理器也可以不集成到所述处理器130中。
所述终端设备100还包括用于给各个部件供电的电源120(比如电池)。可选的,所述电源120可以通过电源管理系统与所述处理器130逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗等功能。
如图2a所示,终端设备100还包括音频电路170、麦克风171和扬声器172,可提供用户与终端设备100之间的音频接口。音频电路170可用于将音频数据转换为扬声器172能够识别的信号,并将信号传输到扬声器172,由扬声器172转换为声音信号输出。麦克风171用于收集外部的声音信号(如人说话的声音、或者其它声音等),并将收集的外部的声音信号转换为音频电路170能够识别的信号,发送给音频电路170。音频电路170还可用于将麦克风171发送的信号转换为音频数据,再将音频数据输出至RF电路110以发送给比如另一终端,或者将音频数据输出至存储器140以便后续进一步处理。例如,本申请实施例中,当在备忘录App中进行语音对象的编辑时,则通过麦克风171收集用户的语音数据,并将收集的语音数据转换为音频电路170能够识别的信号后,通过音频电路170将识别到的信号转换为音频数据输出至存储器140中存储。
尽管未示出,所述终端设备100还可以包括至少一种传感器、摄像头等,在此不再赘述。
本申请实施例涉及的操作系统(operating system,OS),是运行在终端设备(或称电子设备)上的最基本的系统软件。以智能手机为例,操作系统可以是安卓(android)系统或IOS系统。以下实施例以Android系统为例进行介绍。本领域技术人员可以理解,其它操作系统中,也可以采用类似的方法实现。
终端设备的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以采用分层架构的Android系统为例,示例性说明终端设备的软件结构。图2b示出了本申请实施例提供的Android系统的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为五层,从上至下分别为应用程序层,应用程序框架(framework)层,安卓运行时(Android runtime)和系统库,硬件抽象层,以及内核层。
应用程序层是操作系统的最上一层,可以包括一系列应用程序包。如图2b所示,应用程序层可以包括操作系统的原生应用程序和第三方应用程序,其中,操作系统的原生应用程序可以包括用户界面(user interface,UI)、相机、设置、手机管家、音乐、短信息、通话、备忘录等,第三方应用程序可以包括地图,音乐,视频、word、便签等。下文中提到的应用,可以是终端设备出厂时已安装的操作系统的原生应用,也可以是用户在使用终端设备的过程中从网络下载或从其他终端设备获取的第三方应用。
在本申请一些实施例中,应用程序层可以用于实现编辑界面的呈现,上述编辑界面可以用于用户实现本申请实施例中重点关注的比如备忘录、便签、WPS和word等App中的数据对象选中和编辑等方面的操作。例如,用户可以在备忘录App的编辑界面中进行针对数据对象的编辑操作,还可以在编辑完数据对象之后实现对数据对象的选中操作等。示例性的,上述编辑界面可以为终端设备100的触摸面板上所显示的备忘录App的编辑界面,例如图1a~1d中显示的用户界面。
一种可能的实现方式中,应用程序可以使用Java语言开发,通过调用应用程序框架层所提供的应用程序编程接口(application programming interface,API)来完成,开发者可以通过应用程序框架层来与操作系统的底层(例如硬件抽象层、内核层等)进行交互,开发自己的应用程序。该应用程序框架层主要是操作系统的一系列的服务和管理系统。
应用程序框架层为应用程序层的应用程序提供应用编程接口和编程框架。应用程序框架层包括一些预定义函数。如图2b所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文本的文本控件,显示图片的图片控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文本的视图以及显示图片的视图。又例如,本申请实施例重点关注到的备忘录、便签等App图标的显示界面,以及进一步包括备忘录、便签等App中进行数据内容编辑的编辑界面。
电话管理器用于提供终端设备100的通信功能,例如通话状态显示的管理(包括接通,挂断等)。资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知消息的到达,通知信息可以在显示界面短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
在本申请一些实施例中,该应用程序框架层主要负责调用与硬件抽象层之间通信的服务接口,以将进行的文档编辑的请求传递到硬件抽象层,所述请求还包含有文档编辑服务的预定义编程,用于实现本申请需要的对多种不同类型的数据对象的同时选中的需求;还负责进行文档编辑信息的管理,如触发对文档编辑服务的数据对象的管理(文本对象、图片对象、语音对象、视频对象等),对登录认证的用户名和密码进行管理等。示例性的,文档编辑服务可以包括用于管理本申请实施例中涉及到的复制粘贴处理所需要的各种模块。
例如,文档编辑服务包括第一用户操作拦截模块、蒙版绘制模块、数据打包模块、数据解析模块以及界面适配器等。文档编辑服务还可以包括配置文件。
其中,上述第一用户操作拦截模块用于执行拦截第一用户操作,其中第一用户操作用于指示终端设备用户要对数据对象进行选中操作,以避免终端设备按照现有技术处理流程直接根据第一用户操作在软件结构中通过软件接口进行通信,进行对第一用户操作的反馈,以致不能按照本申请实施例的方案执行。
上述蒙版绘制模块主要负责根据用户发来的用于指示要选中数据对象的第一用户操作、以及用户发来的具体要选中哪些数据对象的第二用户操作进行响应,以解决现有技术存在的无法支持多种不同类型的数据对象的同时选中操作的问题。所述蒙版绘制模块根据用户发来的具体要选中哪些数据对象的第二用户操作来绘制蒙版,再根据绘制的蒙版确定用户选中的数据对象有哪些,本申请这里主要关注用户选中的数据对象包括至少两种以上数据对象类型的情况。
上述数据打包模块主要负责根据蒙版绘制模块确定要绘制的蒙版覆盖尺寸后,根据确定的蒙版覆盖尺寸确定蒙版要覆盖到的数据对象的范围,从而从内容提供器获取被覆盖到的数据对象的内容后,对获取的内容进行打包,以作为粘贴操作所需要的数据包。
上述数据解析模块主要负责在检测到用户的粘贴指令之后,将数据打包模块生成的数据包进行解析,从而将解析得到的数据内容显示到粘贴指令所指示的粘贴位置上。
其中,上述界面适配器用于为上层编辑界面提供服务,例如,当用户进行复制粘贴操作时,当界面适配器确定要粘贴的内容要粘贴到的同一应用中的不同文档、或粘贴到的不同的应用中时,界面适配器可以在显示界面中提供对应的粘贴位置,以使用户从粘贴位置中确定合适的更为准确的粘贴位置。
此外,本申请实施例中,应用程序框架层还可以包含文件观察器、WI-FI服务,这两个模块主要负责配合文档编辑服务以提供复制粘贴功能。例如,WI-FI服务用于监控复制粘贴操作的粘贴位置对应的目标应用,从而实现对目标应用的调用。
安卓运行时(Android Runtime)包括核心库和虚拟机。Android Runtime负责安卓系统的调度和管理。安卓系统的核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。以java举例,虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:OpenGL ES),二维(2D)图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供2D和3D图层的融合。媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。例如,通过媒体库管理本申请中音频对象编辑时所产生的语音或视频对象。三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。2D图形引擎是2D绘图的绘图引擎。
在本申请一些实施例中,系统库还可以包括:文档编辑服务密码、文档编辑服务配置文件,用于负责提供与应用程序框架层进行通信的服务接口,还负责管理文档编辑服务所需要的配置文件、密码等。文档编辑服务配置文件可用于存储文档编辑服务的信息,文档编辑服务密码可用于存储需要进行数据对象编辑的用户登录相应文档或文件时需要的认证用户名和登录密码等信息。
硬件抽象层(hardware abstraction layer,HAL)是应用程序框架层的支撑,是连接应用程序框架层与内核层的重要纽带,其可通过应用程序框架层为开发者提供服务。
示例性的,可以通过在硬件抽象层配置第一进程来实现本申请实施例中文档编辑服务的功能,第一进程可以是在硬件抽象层中单独构建的子进程。其中,第一进程可以包括文档编辑服务配置接口、文档编辑服务控制器等模块。其中,文档编辑服务配置接口是与应用程序框架层进行通信的服务接口。其中,文档编辑服务控制器用于对文档编辑服务配置接口进行监控,例如,对文档编辑服务是否需要进行鉴权进行控制等,还负责监控终端设备中输入的数据是否需要缓存或有更新,当输入的数据需要缓存或者有更新时,可以通知应用程序框架层进行相应数据的缓存或更新,以保证显示界面显示的是最新的数据。硬件抽象层中还可以包含有守护进程,该守护进程可以用于缓存第一进程中的数据,守护进程也可以是在硬件抽象层中单独构建的子进程。
内核层可以是Linux内核(linux kernel)层,是硬件和软件之间的抽象层。内核层有许多与终端设备相关的驱动程序,至少包含显示驱动;基于Linux的帧缓冲驱动;作为输入设备的键盘驱动;基于内存技术设备的Flash驱动;照相机驱动;音频驱动;蓝牙驱动;WI-FI驱动等,本申请实施例对此不做任何限制。Linux内核层用于提供操作系统的核心系统服务,如安全性、内存管理、进程管理、网络协议栈和驱动模型等都基于Linux内核实现。在本申请一些实施例中,Linux内核依赖于本地文件系统,通过文档编辑服务可以访问该本地文件系统,通过硬件抽象层的文档编辑服务配置接口可以对本地文件系统中的文档进行配置。
通常终端设备可以同时运行多个应用。较为简单的,一个应用对应一个进程,较为复杂的,一个应用对应多个进程。每个进程具备一个进程号(进程ID)。
以用户在触摸面板上进行触摸操作为例,触摸面板检测第一触摸操作,会产生相应的硬件中断,操作系统的内核层接收到触摸操作后,会将所述第一触摸操作(包括触摸坐标,触摸对应的时间戳等信息)加工成第一用户操作(用于指示用户要选中编辑显示界面中的数据对象)存储在内核层中的设备节点中。若应用程序框架层中的第一用户操作拦截模块从内核层的设备节点读取到第一用户操作之后,会拦截第一用户操作指示的此次操作,并通知蒙版绘制模块启动蒙版的绘制。
当触摸面板继续接收到第二触摸操作后,通过内核层将第二触摸操作继续加工成第二用户操作(用于指示用户具体要选中编辑显示界面中的哪些数据对象),并将第二用户操作也存储在内核层的设备节点中。应用程序框架层从内核层的设备节点中读取第二用户操作,并将该第二用户操作进行翻译、封装等处理,将处理后的该第二用户操作分发到感兴趣的应用或软件模块,以使感兴趣的应用或软件模块对其接收到的第二用户操作做出响应。比如蒙版绘制模块根据第二用户操作,确定用户的连续选中区域的起始坐标位置和结束坐标位置,并根据确定的起始坐标位置和结束坐标位置进行蒙版的绘制,以确定用户选中的至少一个数据对象所在的区域。再比如,数据打包模块可以对蒙版绘制模块绘制的蒙版覆盖到的一个或多个数据对象进行获取并打包。又比如,视图系统中包含的各控件可以对各自负责的数据对象进行控制等。
结合上述图2a中对终端设备的硬件框架的介绍,以及图2b中对终端设备的软件框架的介绍,下面针对多种不同类型的数据对象的同时选中操作的场景,示例性说明终端设备100执行本申请实施例中提出的基于终端设备的数据选择方法的软件以及硬件的工作原理。
应理解,本申请实施例中“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一(项)个”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a、b或c中的至少一项(个),可以表示:a,b,c,a和b,a和c,b和c,或a、b和c,其中a、b、c可以是单个,也可以是多个。
本申请实施例涉及的多个,是指大于或等于两个。
另外,需要理解的是,在本申请的描述中,“第一”、“第二”等词汇,仅用于区分描述的目的,而不能理解为指示或暗示相对重要性,也不能理解为指示或暗示顺序。
此外,本申请实施例中,“终端”、“终端设备”、“设备”、“电子设备”、“手机”等可以混用,即指可以用于实现本申请实施例的各种设备。在下文的介绍中,将以手机中的备忘录App为例进行介绍。应理解,手机的硬件架构可以如图2a所示,软件架构可以如图2b所示,其中,手机中的软件架构对应的软件程序和/或模块可以存储在存储器140中,处理器130可以运行存储器140中存储的软件程序和应用以执行本申请实施例提供的基于终端设备的数据选择方法的流程。
为了便于理解本申请提供的基于终端设备的数据选择方法,以下结合图3中所示的用户界面,对采用本申请提供的方法可以达到的界面处理效果进行说明。
首先,为了方便理解,下面对以下说明界面处理效果过程中可能涉及的名词进行解释:
(1)第一用户操作:用于指示用户要对编辑显示界面中显示的数据对象内容进行选中操作,第一用户操作可以是用户的第一触摸操作,比如用户对触摸面板的第一触摸操作可以指示用户准备对备忘录文件中的一个数据对象或多个数据对象执行选中操作。
(2)第一触摸操作:可以是第一用户操作的一种具体体现形式,当然第一用户操作还可以有其他的体现形式,比如用户直接操作终端设备的键盘、或者向终端设备直接发出语音指示等,本申请这里不做限定。第一触摸操作可以是用户通过手机的触摸面板进行触摸操作实现的。其中,所述第一触摸操作包括但不限于:长按事件、双击事件、点击屏幕指定控件事件等,本申请这里不做限定。
(3)第二用户操作:用于指示用户对编辑显示界面中显示的数据对象内容中的具体哪些数据对象内容进行选中操作,第二用户操作可以是用户的第二触摸操作。比如用户对触摸面板执行第一触摸操作指示用户准备对备忘录文件中的一个数据对象或多个数据对象执行选中操作后,终端设备会弹出提示弹窗,提示弹窗中可以包括“全选、剪贴、复制、粘贴、分享”等信息,且每个信息分别配置有对应的控件,具体如图3所示。用户如果点击“全选”控件,则可以表示用户触发第二触摸操作,终端设备可以根据用户的第二触摸操作,对编辑显示界面中的全部数据对象执行全选操作。
(4)第二触摸操作:可以是第二用户操作的一种具体体现形式,当然第二用户操作还可以有其他的体现形式,比如用户直接操作终端设备的键盘、或者向终端设备直接发出语音指示等,本申请这里不做限定。第二触摸操作可以是用户通过手机的触摸面板选择相应控件或移动选中光标等实现的,也就是说所述第二触摸操作包括但不限于:点击屏幕中的指定控件、拖动光标等,本申请这里不做限定。
参阅图3中的31所示,在手机备忘录文件的编辑显示界面上,手机通过触摸面板接收用于表示用户进行选中操作的第一用户操作(比如用户长按备忘录App的当前编辑显示界面),手机响应于该第一用户操作,在编辑显示界面上生成用于指示进行下一步操作的提示弹窗,该提示弹窗中包括“全选、剪贴、复制、粘贴、分享”等控件;手机还可以在编辑显示界面中显示移动光标,该移动光标可以被用户拖动,以选中相应的数据对象内容,图3的31中示例性的使用黑色水滴状表示移动光标,当然在具体实施时,移动光标还可以使用其他形状,比如三角形、椭圆形等,本申请这里不做限定。
手机响应第一用户操作确定用户要进行选中数据对象的操作之后,若接收到用户的第二用户操作,则根据第二用户操作确定用户选中操作所选中的数据对象种类,并获取所述选中操作所选中的数据内容,以及后续在接收到用户选择的粘贴指令之后,将所述选中操作所选中的不同数据对象和内容进行同步粘贴。
其中,所述第二用户操作可以是根据用户的第二触摸操作生成的,所述第二触摸操作包含几种可能的实施方式:
一种可能的实施方式中,如图3中的32a所示,用户可以通过点击提示弹窗中的“全选”控件来触发所述第二触摸操作。实施时,手机接收并响应于基于所述第二触摸操作生成的第二用户操作,确定选中操作包含的数据内容为该备忘录APP编辑显示界面中的全部数据对象,则手机将编辑显示界面中包含的全部类型的数据对象(比如图3中的33a包含的文本对象和图片对象)变换为全部选中状态,选中状态可以为在图3中为全部数据对象覆盖上阴影薄膜效果。通过采用该实施方式,若手机接收到用户对提示弹窗中“全选”控件的点击操作之后,可以实现对编辑显示界面中包括的全部类型的数据对象进行同时选中操作,不需要再像现有技术一样,假设在一个编辑显示界面中包含多种类型的数据对象时,一次只能选取其中一种类型的数据对象,从而通过本申请提供的实施方式可以简化用户选中数据对象的操作流程,提高用户使用体验。
另一种可能的实施方式中,用户可以通过拖动手机根据第一触摸操作生成的移动光标,从而实现选中编辑显示界面中显示的部分或全部类型的数据对象,即第二触摸操作可以是用户手动拖动移动光标。示例性的,如图3中的32b所示,用户向下拖动右侧的移动光标直至图片对象的尾端,则手机会将用户选中的部分文本和图片变更为阴影薄膜形式显示,如图3中的33b所示,以表示为被选中状态。然后当手机接收到用户在编辑显示界面包含的提示弹窗中点击“剪切”控件时,则可以确定本次选中操作对应的选中数据,以及手机会将被选中的部分文本和图片同步复制到剪切板进行缓存。
在上述实施方式中,也可以通过移动光标和提示弹窗中的“剪切”控件等实现用户对编辑显示界面显示的各种不同类型的数据对象进行同时选中操作,进而可以避免再像现有技术中一样,在用户选中一种类型的数据对象时,如果接下来要选中的数据对象类型和已经选中的数据对象类型不同,而无法继续向前或向后继续拖动移动光标以进行选中不同类型的数据对象的同时选中操作问题。通过本申请提供的实施方式,可以简化用户选中数据对象的操作流程,提高用户使用体验。
此外,手机在将被选中数据对象内容同步复制到剪切板进行缓存的触发方式,除了以上介绍到的通过用户点击提示弹窗中的“剪切”控件的实施方式之外,用户还可以对同时选中的不同数据对象进行长按操作和拖拽操作,以实现将同时选中的不同类型的数据对象一次性移动到其他位置,简化用户操作,因此当手机通过触摸面板接收到用户对于选中数据对象的长按操作和拖拽操作,也可以用来表示手机接收到对选中数据对象复制到剪切板进行缓存的指令。参阅图4中的1所示,当用户同时选中部分文本“这是文本控件”、图片以及音频文件之后,可以通过对选中数据的显示区域的长按操作,并可以继续同时将选中的这三种不同类型的数据对象进行拖拽,比如拖拽到编辑显示界面的最前端显示位置,拖拽后的效果可以如图4中的2所示,可见被选中的不同数据对象可以一次性改变在编辑显示界面中的显示位置,不需要再像现有技术一样,需要先对文本对象进行拖拽,再对图片对象进行拖拽,然后再对音频对象进行拖拽,才能将这三个不同类型的数据对象移动到其他位置,通过本申请提供的实施方式可以较好简化用户的操作。
基于前述对采用本申请提供的方法可以达到的界面处理效果进行说明的内容,以下介绍本申请提供的基于终端设备的数据选择方法的实现过程,以用来说明如何采用本申请提供的方法达到前述介绍到的图3至图4的界面处理效果,从而可以较好简化用户的操作流程,提高用户体验。
本申请提供方法的设计思想是:通过蒙版绘制模块来确定用户的选中操作在备忘录App等应用程序的编辑显示界面中对应的选中区域范围,并根据确定的选中区域范围绘制蒙版覆盖尺寸;其次可以根据绘制的蒙版覆盖尺寸与编辑显示界面中包含的各类型的数据对象的区域范围分别进行比较,以逐一确定各类型的数据对象是否被所述蒙版覆盖尺寸所覆盖到,进而确定蒙版覆盖尺寸覆盖到了具体哪些数据对象;然后可以再获取蒙版覆盖尺寸覆盖到的数据对象内容。
根据以上介绍到的设计思想可知,本申请先通过蒙版绘制模块确定用户的选中区域,且根据选中区域绘制蒙版,然后再获取被蒙版覆盖到的数据对象内容,以实现对获取到的数据对象内容执行同时选中操作,从而可以实现同时对多种不同类型的数据对象的选中操作。在本申请的设计思想基础上,以下通过两个主要方面(包括确定用户的选中区域、获取覆盖到的数据内容)对本申请提供的方法进行说明,如下:
一、确定用户的选中区域
在不同类型的数据对象分别由对应的控件管理的场景下,目前现有技术中存在无法支持对多种不同类型的数据对象同时选中的问题。
为了解决该问题,本申请实施例提供的基于终端设备的数据选择方法,在确定用户的选中区域的实施过程中,通过两部分的实施方式来实现支持对多种不同类型的数据对象的同时选中操作。其中,两部分的实施方式包括:第一部分是避免应用程序框架层根据现有技术进行响应;第二部分是采用本申请方法之后,应用程序框架层的响应过程,具体的实现方式如下:
第一部分:终端设备通过如图2b中应用程序框架层的第一用户操作拦截模块对第一用户操作进行拦截。
其中,所述终端设备之所以需要对第一用户操作进行拦截,是为了避免应用程序框架层在读取到所述第一用户操作之后,按照现有技术处理流程对所述第一用户操作进行处理。即,应用程序框架层接收到第一用户操作之后,确定第一用户操作触发位置对应的数据类型,然后会直接通知该数据类型对应的控件对该第一用户操作进行响应,从而导致后续用户继续确定对具体哪些数据对象进行选中操作时,只能限制于该类型的数据对象内执行,从而无法实现多种不同类型的数据对象的同时选中操作,比如前述内容中介绍到的图1c、图1d所示的界面处理效果。
上述实施方式中,终端设备通过第一用户操作拦截模块对第一用户操作进行拦截的一种可能的实施方式为:在所述第一用户操作拦截模块中存在自定义的ViewGroup(用于容纳多种不同控件的容器)对象,通过所述ViewGroup对象实现对多种不同类型的控件统一管理。
示例性的,当终端设备根据第二用户操作确定用户的选中操作包含哪些类型的数据对象之后,再通过自定义的ViewGroup对象通知被选中操作覆盖到的这些类型的数据对象的控件,以使各控件对其管理类型的数据内容进行管理,比如各控件将其管理类型的数据对象中被选中数据内容提供给数据打包模块进行选中数据打包等。
由以上实施例可确定,终端设备通过采用自定义的ViewGroup对象实现对各不同类型控件进行集中管理的实施方式,可以避免应用程序框架层直接响应于第一用户操作而执行对一种类型控件的单独调用,因而导致无法实现对多种不同类型的数据对象的同时选中操作问题出现。
第二部分,终端设备通过如图2b中应用程序框架层的蒙版绘制模块进行蒙版绘制。
其中,所述蒙版用于指示在备忘录App等应用程序的编辑显示界面上用户选中操作对应的选中区域范围。
示例性的,当终端设备接收到第一用户操作之后,确定第一用户操作对应的触发位置,并可以通过蒙版绘制模块将该触发位置涉及到的数据内容设定为选中状态,从而可以实现在编辑显示界面上将该涉及到的数据内容显示为覆盖阴影薄膜效果。例如图3中的31所示,基于第一用户操作的触发位置为“文”字上方,则蒙版绘制模块可以绘制覆盖“文”字的蒙版,从而实现将“文”字设定为选中状态,即在终端设备的编辑显示界面上将“文”字对应显示为阴影薄膜效果。
其次,若终端设备接收到第二用户操作之后,确定第二用户操作对应的选中区域范围。以用户通过点击图3中的32a所示的“全选”控件操作触发的第二用户操作为例,第二用户操作对应的选中区域范围为编辑显示界面中的全部类型的数据对象,则蒙版绘制模块绘制可以覆盖编辑显示界面中全部数据对象的蒙版,从而实现将全部数据对象设定为选中状态,即在终端设备显示界面上全部数据对象的内容均显示为阴影薄膜效果,比如图3中的33a的显示界面效果。
以下介绍如何实现绘制蒙版的实施方式,其中,根据前述介绍到生成第二用户操作的实施方式不同,蒙版绘制模块绘制蒙版的实施方式也存在区别,如下:
一种可能的实施方式中,若第二用户操作是用户通过第二触摸操作生成的,且第二触摸操作的实施方式为用户通过点击提示弹窗中的“全选”控件触发的,则可以确定蒙版绘制模块绘制的蒙版用于将编辑显示界面包含的全部数据对象内容的区域范围设定为选中状态,即需要绘制可以覆盖编辑显示界面中包含的全部数据对象内容的蒙版。
实施时,在终端设备进行蒙版的绘制时,由于第二触摸操作是为了实现全选操作,则终端设备将编辑显示界面中显示的第一个数据对象的起始坐标位置确定为蒙版的起始坐标位置;以及,将编辑显示界面中显示的最后一个数据对象的结束坐标位置确定为蒙版的结束坐标位置。然后,蒙版绘制模块根据蒙版的起始坐标位置和结束坐标位置绘制蒙版。
示例性的,假设通过(left,top)来表示蒙版的起始坐标位置,以及通过(right,bottom)来表示蒙版的结束坐标位置,例如,参阅图5a所示的内容,根据2可确定编辑显示界面包含文本对象和图片对象,则终端设备获取文本对象的起始坐标位置作为所述(left,top),并且获取图片对象的结束坐标位置作为所述(right,bottom)。然后,终端设备通过蒙版绘制模块根据确定的起始坐标位置(left,top)和结束坐标位置(right,bottom)得到如图5a中的1所绘制的蒙版。在蒙版绘制完成之后,应用程序框架层将绘制的蒙版传输到应用程序层的备忘录App等应用程序的用户界面中进行显示,从而实现将编辑显示界面中包含的全部数据对象内容设定为选中状态,比如图5a中的2所示的界面处理效果。
另一种可能的实施方式中,若第二用户操作是用户通过第二触摸操作生成的,且第二触摸操作为用户通过拖动根据第一触摸操作生成的移动光标确定的,则蒙版绘制模块绘制的蒙版根据移动光标移动过的区域确定。在这种场景下,选中区域范围可以为编辑显示界面中包含的全部或部分数据内容的区域范围,即根据移动光标移动过的区域来确定。
实施时,在终端设备的编辑显示界面上,显示有表示起始位置的光标(假设为第一移动光标)以及结束位置的光标(假设为第二移动光标),在蒙版绘制模块进行蒙版绘制时,将所述第一移动光标的坐标确定为待绘制蒙版的起始坐标位置,及将所述第二移动光标的坐标确定为待绘制蒙版的结束坐标位置。然后,蒙版绘制模块将确定的待绘制蒙版的起始坐标位置和结束坐标位置之间的区域确定为绘制的蒙版。
此外,由于触摸操作(第一触摸操作、第二触摸操作)的触摸位置一般为一个触摸点(例如长按事件、拖动移动光标的起始点和结束点),因此为了更准确的反映用户触摸操作所对应要选中的数据对象,在接收到触摸操作对应的触摸点之后,对所述触摸点进行取整操作,以保证用户选中操作的准确性。具体实施时,终端设备在用户编辑显示界面中的数据对象内容时,可以存储编辑显示界面中各类型的数据对象分别对应一个显示区域的矩形块,并且存储有矩形块的起始坐标点和结束坐标点(例如,编辑显示界面中包含的文本对象、图片对象等都分别存储有其对应矩形块的起始坐标点结束坐标点),以及为包括多个数据对象单位的指定类型的数据对象也存储有各数据单位的起始坐标点和结束坐标点(例如文本对象中各个文本单位也都分别具有对应矩形块的起始坐标点和结束坐标点)。
上述实施方式中,基于各类型的数据对象、及指定类型的数据对象的各数据单位都分别存储有对应矩形块的起始坐标点和结束坐标点,则在接收到触摸点坐标后,确定所述触摸点坐标处于的数据单位或数据对象的矩形块显示区域,然后将根据该数据单位或数据对象的起始坐标点和结束坐标点确定的显示区域作为所述触摸点的取整结果。示例性的,若第一移动光标最后触摸位置处于图片对象的显示区域内,则确定所述图片对象的取整结果对应矩形块的起始坐标位置作为所述第一移动光标位置;若第二移动光标最后触摸位置处于一个文字的显示区域内,则确定该文字的取整结果对应矩形块的结束坐标位置作为所述结束移动坐标位置。
由上述实施方式可得到,基于预先存储的各数据对象及数据对象单位各自对应矩形块的起始位置坐标及结束位置坐标,通过对用户触摸操作所对应的触摸点自动进行取整计算,避免了仅根据触摸操作对应的触发点位置进行蒙版的绘制,可能产生由于触摸操作位置的任意性从而导致的进行蒙版绘制的复杂性,进而影响对选中状态的显示结果以及获取覆盖到的数据对象内容的困难性,比如假设选中数据对象内容中包含半个文本或半张图片的数据选择是无意义的。
示例性的,例如,参阅图5b中的2所包含的两个移动光标,其中从上到下出现的第一个移动光标表示为起始位置光标(可以通过第一移动光标来表示),出现的第二个移动光标表示为结束位置光标(可以通过第二移动光标来表示)。终端设备接收用户对所述第一移动光标和所述第二移动光标的拖动操作之后,获取所述第一移动光标被拖动到的第一位置,以及所述第二移动光标被拖动到的第二位置,其中,第一移动光标的第一位置、第二移动光标的第二位置可以是对拖动操作进行取整之后得到的位置;然后,将所述第一移动光标的第一位置的坐标作为蒙版的起始坐标位置(left,top),以及,将所述第二移动光标的第二位置的坐标作为蒙版的结束坐标位置(right,bottom),进而终端设备的蒙版绘制模块根据所述起始坐标位置(left,top)和所述结束坐标位置(right,bottom)得到如图5b中的1所绘制的蒙版。在蒙版绘制完成之后,应用程序框架层将绘制的蒙版传输到应用程序层的备忘录App等应用程序的用户界面中进行显示,从而实现通过绘制的蒙版将编辑显示界面中选中操作包含的数据对象内容设定为选中状态,比如图5b中的2所示的界面处理效果,即在编辑显示界面中,用户选中操作包含的部分文本“文本控件这是文本控件这是文本控件这是文本控件”以及图片显示为阴影薄膜效果,以表示为选中状态。
在上述绘制蒙版的各实施方式中,蒙版绘制模块为了根据起始坐标位置和结束坐标位置更准确地绘制蒙版,因此在进行蒙版的绘制时,在确定起始坐标位置(left,top)和结束坐标位置(right,bottom)之后,一种可能的实施方式为:蒙版绘制模块根据起始坐标位置和结束坐标位置,通过为选中区域范围绘制多个矩形块,然后由所述多个矩形块得到绘制的蒙版。其中,所述多个矩形块包括:根据起始坐标位置及对所述起始坐标位置的取整结果确定第一矩形块、根据结束坐标位置及对所述结束坐标位置的取整结果确定第二矩形块、以及根据所述选中区域范围内除所述第一矩形块、所述第二矩形块之外的区域范围确定第三矩形块。
示例性的,参阅图6所示的显示界面,假设起始坐标位置为(2,1),结束坐标位置为(17,17),则绘制的蒙版包括如图中所述的第一矩形块、第二矩形块及第三矩形块。
其中,一方面,终端设备确定第一矩形块的实施方式如下:
终端设备通过前述介绍的对第一移动光标的触摸点进行取整之后,得到第一移动光标的位置,也即蒙版的起始坐标位置。在终端设备对该触摸点进行取整计算时,可确定取整之后的区域位置为一个文字对应的区域位置,在确定该文字的起始坐标(2,1)和结束坐标(3,2)后,且以该文字对应的区域为开始到行末坐标点(3,17)确定所述第一矩形块,即根据起始坐标(2,1)和结束坐标(3,17)得到所述第一矩形块。
另一方面,终端设备确定第二矩形块的实施方式如下:
与确定第一矩形块的原理类似,终端设备通过前述介绍的对第二移动光标的触摸点进行取整之后,得到第二移动光标的位置,也即蒙版的结束坐标位置。在终端设备对该触摸点进行取整计算时,可确定取整之后的区域位置为一条语音对应的区域位置,在确定该语音的起始坐标(16,0)和结束坐标(17,17)后,且以该语音对应的区域为结束到行初坐标点(16,0)确定所述第二矩形块(在该实施方式下,行初坐标点即该语音的起始坐标点),即根据起始坐标(16,0)和结束坐标(17,17)得到所述第二矩形块。
又一方面,终端设备确定第三矩形块的实施方式如下:
除所述第一矩形块和第二矩形块确定的区域范围之外,将根据蒙版起始坐标位置和结束坐标位置确定的用户选中区域中剩余部分区域确定为所述第三矩形块,例如图6中所述的第三矩形块。
需要说明的是,以上实施方式中的“第一”、“第二”、“第三”仅是用作根据不同方式确定的矩形块的区分。并且,可以理解的是,如图6中所示的内容仅是一种可能的场景,根据选中区域范围的大小,矩形块的表现形式可能不同。例如,若用户选中区域范围比较小时,第三矩形块可以不存在,即选中区域范围除所述第一矩形块和所述第二矩形块之外不存在剩余区域;或者,若用户选中区域更小时,第一矩形块和第二矩形块可能位于同一行中,在这种场景下,由于确定第一矩形块及第二矩形块时必须满足位于所述选中区域范围内,因此根据第一矩形块和第二矩形块的重叠区域确定为用户选中区域,相当于根据所述蒙版起始坐标和结束坐标确定的矩形块。
综上所述,通过上述的实施方式,可以避免应用程序框架层直接响应于第一用户操作而执行的仅能对一种类型的控件进行单独选中调用,从而导致只能实现一种类型的数据选择。并且本申请中通过实现接收到第二用户操作之后执行的对选中操作中包含的至少一种类型的数据对象对应控件的选中调用,从而实现了对多种不同类型的数据对象的同时选择。
二、获取覆盖到的数据内容
由于一般用户进行选中操作是为了后续进行对选中数据的粘贴操作,基于第一部分介绍的确定用户的选中区域的实施方式绘制蒙版覆盖尺寸之后,为了实现对选中数据的粘贴操作,终端设备还需要根据绘制好的蒙版覆盖尺寸,确定用户选中操作覆盖到的数据对象内容,并将被覆盖到的数据内容进行打包和汇总得到选中数据包,以便于后续执行粘操作。
实施时,终端设备的编辑显示界面中包含的每种类型的数据对象均具有对应的区域范围,为了确定蒙版覆盖到的数据对象,将各类型的数据对象的区域范围与蒙版覆盖尺寸逐一进行比较,从而确定所述各类型的数据对象是否包含在所述蒙版覆盖尺寸中。例如,通过如下表1所示的内容,示例性的说明可能存在的几种比较结果:
表1
Figure BDA0002750589040000181
其中,根据表1中的内容,可确定各类型的数据对象的位置范围与蒙版位置范围的比较结果主要存在三种:
(1)全部覆盖:若数据对象的起始坐标位置和结束坐标位置都属于绘制的蒙版覆盖到的位置范围内,则可确定该类型的数据对象的全部数据内容均被蒙版覆盖到,例如以上表1中的数据对象2的区域范围。
(2)未被覆盖:若数据对象的起始坐标位置和结束坐标位置都不属于绘制的蒙版覆盖到的位置范围内,则可确定该类型的数据对象的全部数据内容均未被蒙版覆盖到,例如以上表1中的数据对象4的区域范围。
(3)部分覆盖:若指定类型的数据对象包含多个数据单位,例如文本对象,则可能出现被部分覆盖的比较结果。基于存储的各个数据单位的起始坐标点和结束坐标点,则继续比较该指定类型下的各个数据单位是否被蒙版覆盖到,从而实现将被蒙版覆盖到的部分数据单位作为被覆盖的数据内容。
示例性的,在该比较结果下,还包括两种可能的场景:一种场景是前半部分数据内容未被覆盖到,仅覆盖到后半部分的数据内容,例如,进行多个不同类型的数据对象的选择时,覆盖到的第一个数据对象出现在蒙版起始位置的情况,比如以上表1中的数据对象1的区域范围,或者参阅图6中的2所示的文本对象即为覆盖后半部分的数据内容的显示界面效果。另一种场景是后半部分的数据内容未被覆盖到,覆盖到前半部分,例如,进行多个不同类型的数据对象的选择时,覆盖到的最后一个数据对象出现在蒙版结束位置的情况,比如以上表1中的数据对象3的区域范围。
实施时,若根据以上实施方式确定被蒙版覆盖到的数据之后,根据各类型的数据对象被蒙版覆盖到的比较结果提取被覆盖到的数据对象的数据内容。实施为,通过各类型的数据对象对应控件确定对应的被覆盖的部分或全部数据内容,并将被覆盖的数据内容提供给数据打包模块,从而使得数据打包模块对各控件确定的选中数据内容进行打包,以得到用于响应粘贴指令的选中数据包。示例性的,若确定文本对象被部分覆盖到,则通过文本控件筛选出被覆盖到的部分文本数据单位内容,若确定图片对象被全部覆盖到,则通过图片控件确定出被覆盖到的全部图片数据内容。
其中,数据打包模块从各类型控件中分别获取选中数据内容时的数据格式为“int:type String:data”,其中type用于表示控件类型,data用于表示被选中数据内容。例如,从文本控件获取选中数据内容的数据格式表示为:int:text String:xxx,从图片控件获取选中数据内容格式表示为:int:image String:xxx(URI(uniform resourceidentifier,统一资源标志符)),当获取的数据大小很大时,则可先获取表示该选中数据内容定位位置的URI,当在终端设备的用户界面中进行显示时,再通过该URI获取对应定位位置的数据内容,从而提高数据传输的效率。
示例性的,结合图3中的33a所示,可确定其中文本对象中的全部文本单位内容均被覆盖到,因此获取该段文本对象的全部文本数据;并且图片对象也被全部覆盖,则也获取该被覆盖的图片数据。
或者,结合图3中的33b所示,也可能存在文本对象中的部分文本内容被覆盖到,因此根据绘制的蒙版的尺寸确定被覆盖到的部分文本数据,即获取文本对象中的“文本控件这是文本控件这是文本控件这是文本控件”的文本数据;而图片对象被全部覆盖,则获取该被覆盖的图片对象的图片数据。
通过以上确定用户选中区域的实施方式,以及获取覆盖到的数据内容的实施方式,可以实现同时对多种不同类型的数据对象的选中操作,从而解决现有技术中存在的需要分别针对每种不同类型的数据对象分别进行选中操作,并依次对选中的数据对象分别进行复制粘贴处理,从而导致用户操作复杂,效率较低的问题。因此,通过本申请提供的方法可较好提升用户体验。
此外,若接收到用户的粘贴指令,则响应于所述粘贴指令将上述实施方式中打包生成的选中数据包进行解析得到选中数据,然后将所述选中数据内容显示在粘贴指令所指示的位置上。示例性的,沿用图4所示的界面处理效果,若响应到用户通过拖拽操作实现将选中的多种不同类型的数据对象移动到该备忘录App的起始位置,则确定粘贴指令所指示的粘贴位置为编辑显示界面的起始位置,在将基于前述介绍的实施例得到的选中数据包通过应用程序框架层中的数据解析模块进行解析之后,将解析到的选中数据内容显示在粘贴指令所指示的粘贴位置处,即编辑显示界面的起始位置,例如图4中1表示用户的拖拽操作,实现将选中的多种不同类型的数据对象移动至备忘录App的编辑显示界面的起始位置,而2显示的是粘贴完成之后的用户显示界面。
通过以上实施例的介绍,可通过本申请提供的数据选择方法,实现针对多种不同类型的数据对象的同时选中操作及粘贴操作,通过一次用户操作即可实现对于至少两种不同类型的数据对象的同时选中操作以及粘贴操作,由此可提升用户对终端设备中不同数据对象进行选中操作的效率,提升用户体验。
为了更清楚地理解本申请提供的基于终端设备的数据选择方法的实施过程,参阅图7,为本申请一种可能的实施例提供的一种基于终端设备的数据选择方法的流程示意图,包括:
步骤701:若终端设备在触摸面板上检测到第一触摸操作,通过终端设备的内核层将所述第一触摸操作加工为第一用户操作。
其中,第一用户操作用于指示用户要对编辑显示界面中显示的数据对象内容进行选中操作。示例性的,第一触摸操作是触发生成第一用户操作的一种具体体现形式,当然第一用户操作还可以通过其他方式触发,比如声音控制、滑动操作等。
步骤702:当终端设备的内核层将所述第一用户操作发送到应用程序框架层之后,终端设备通过应用程序框架层中包含的第一用户操作拦截模块拦截所述第一用户操作,并且通过应用程序框架层中包含的蒙版绘制模块根据所述第一用户操作进行蒙版的绘制。
其中,终端设备根据第一用户操作进行蒙版的绘制,用于根据第一用户操作得到初始蒙版,从而可以使得用户基于所述初始蒙版执行第二触摸操作,从而生成第二用户操作。示例性的,参阅图3中32b所示的蒙版即为根据第一用户操作绘制的初始蒙版。
步骤703:若终端设备在触摸面板上检测到第二触摸操作,通过终端设备的内核层将所述第二触摸操作加工为第二用户操作。
其中,第二用户操作用于指示用户对编辑显示界面中显示的数据对象内容中的具体哪些数据对象进行选中操作。示例性的,第二触摸操作是触发生成第二用户操作的一种具体体现形式,当然第二用户操作还可以通过其他方式触发,比如声音控制、滑动操作等。
步骤704:当终端设备的内核层将所述第二用户操作发送到应用程序框架层之后,终端设备通过应用程序框架层中包含的所述蒙版绘制模块根据所述第二用户操作进行蒙版的绘制。
其中,终端设备根据第二用户操作进行蒙版的绘制,用于根据第二用户操作得到用户选中操作所对应的目的蒙版,从而根据所述目的蒙版确定用户选中操作对应的选中数据。实施时,终端设备根据第二用户操作绘制蒙版时,可以通过所述步骤702得到的初始蒙版为基准进行绘制,参阅图3中33b所示的蒙版即为在32b中所示的初始蒙版的基础上,响应于用户对移动光标的拖动操作之后所确定的位置而得到的。
步骤705:基于根据所述第二用户操作绘制的蒙版,终端设备遍历各类型的数据对象的区域范围与所述蒙版覆盖尺寸之间的覆盖状态。
其中,所述覆盖状态包括几种可能的比较结果:全部覆盖、未被覆盖、部分覆盖,确定覆盖状态的具体实施方式已经在前述内容中说明,在此不再赘述。
步骤706:基于得到的各类型的数据对象与所述蒙版之间的覆盖状态,各类型的数据对象对应的管理控件分别将被所述蒙版覆盖到的数据内容筛选出来。
其中,各类型的数据对象分别具有各自的管理控件,例如文本对象的数据内容由文本控件进行管理及编辑等、图片对象的数据内容由图片控件进行管理及编辑等。
步骤707:终端设备通过应用程序框架层中包含的数据打包模块获取各类型的管理控件筛选出来的被覆盖到的数据内容,并对所述被覆盖到的数据内容进行打包得到选中数据包。
步骤708:若终端设备在触摸面板上检测到粘贴操作,通过终端设备的内核层将所述粘贴操作加工为粘贴指令。
步骤709:当终端设备的内核层将所述粘贴指令发送到应用程序框架层之后,终端设备通过应用程序框架层中包含的数据解析模块选中数据包,然后将解析得到的数据内容显示在所述粘贴指令指示的粘贴位置上。
基于以上实施例,本申请实施例还提供了一种基于终端设备的数据选择装置,该装置应用于终端设备中,用于实现本申请以上实施例提供的一种基于终端设备的数据选择方法。参阅图8,所述装置800包括:收发单元801、处理单元802。
所述收发单元801,用于接收第一用户操作;所述处理单元802,用于响应第一用户操作,在包含多种不同类型的数据对象的编辑显示界面中显示用于选中所述数据对象的标识;所述第一用户操作用于指示用户要对所述编辑显示界面中的数据对象进行选中操作,所述多种不同类型的数据对象分别由对应的控件管理;所述收发单元801,还用于接收第二用户操作;所述第二用户操作是用户在所述编辑显示界面中选中至少两种不同类型的数据对象的操作;所述处理单元802,用于响应所述第二用户操作,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态;并且对选中状态的所述至少两种不同类型的数据对象进行处理。
在一种可能的设计中,所述标识包括提示弹窗,所述提示弹窗中包含第一控件,所述第一控件用于选中不同类型的数据对象。
在一种可能的设计中,所述标识包括第一移动光标、第二移动光标;所述第一移动光标位于显示所述至少两种不同类型的数据对象的起始位置、所述第二移动光标位于显示所述至少两种不同类型的数据对象的结束位置;所述收发单元801,用于接收第二用户操作时,具体用于:接收所述用户对所述第一移动光标和/或第二移动光标的拖动操作;接收对所述第一移动光标和第二移动光标之间拖动过的区域的长按操作;或者,若所述标识还包括提示弹窗,所述提示弹窗中包含第二控件,接收对所述第二控件的点击操作;其中,所述长按操作或所述点击操作用于选中所述拖动过的区域中包含的不同类型的数据对象。
在一种可能的设计中,所述处理单元802,用于将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态,具体用于:根据所述第二用户操作,绘制蒙版;通过所述蒙版覆盖所述至少两种不同类型的数据对象,使得所述至少两种不同类型的数据对象显示为选中状态。
在一种可能的设计中,所述处理单元802,用于绘制蒙版,具体用于:将所述第一移动光标被拖动到的第一位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二移动光标被拖动到的第二位置坐标作为所述待绘制蒙版的结束位置坐标;根据所述起始位置坐标和结束位置坐标绘制蒙版。
在一种可能的设计中,所述处理单元802,用于绘制蒙版,具体用于:获取所述编辑显示界面中位于首位的第一类型数据对象的起始位置坐标,以及位于末位的第二类型数据对象的结束位置坐标;将所述第一类型数据对象的起始位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二类型数据对象的结束位置坐标作为待绘制蒙版的结束位置坐标;根据所述起始位置坐标和结束位置坐标绘制蒙版。
在一种可能的设计中,所述处理单元802,还用于:获取所述蒙版覆盖的至少两种不同类型的数据对象的数据内容,并对所述数据内容进行打包之后得到选中数据包;若接收到对所述选中数据包的粘贴指令,解析所述选中数据包;将解析到的数据内容显示在所述粘贴指令所指示的粘贴位置上。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请实施例的具体实施方式,但本申请实施例的保护范围并不局限于此,任何在本申请实施例揭露的技术范围内的变化或替换,都应涵盖在本申请实施例的保护范围之内。因此,本申请实施例的保护范围应以所述权利要求的保护范围为准。

Claims (15)

1.一种基于终端设备的数据选择方法,其特征在于,应用于终端设备中,包括:
接收并响应第一用户操作,在包含多种不同类型的数据对象的编辑显示界面中显示用于选中所述数据对象的标识;所述第一用户操作用于指示用户要对所述编辑显示界面中的数据对象进行选中操作,所述多种不同类型的数据对象分别由对应的控件管理;
接收第二用户操作;所述第二用户操作是用户在所述编辑显示界面中选中至少两种不同类型的数据对象的操作;
响应所述第二用户操作,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态;
对选中状态的所述至少两种不同类型的数据对象进行处理。
2.根据权利要求1所述的方法,其特征在于,所述标识包括提示弹窗,所述提示弹窗中包含第一控件,所述第一控件用于选中不同类型的数据对象。
3.根据权利要求1所述的方法,其特征在于,所述标识包括第一移动光标、第二移动光标;所述第一移动光标位于显示所述至少两种不同类型的数据对象的起始位置、所述第二移动光标位于显示所述至少两种不同类型的数据对象的结束位置;
接收第二用户操作,包括:
接收所述用户对所述第一移动光标和/或第二移动光标的拖动操作;
接收对所述第一移动光标和第二移动光标之间拖动过的区域的长按操作;或者,
若所述标识还包括提示弹窗,所述提示弹窗中包含第二控件,接收对所述第二控件的点击操作;
其中,所述长按操作或所述点击操作用于选中所述拖动过的区域中包含的不同类型的数据对象。
4.根据权利要求2或3所述的方法,其特征在于,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态,包括:
根据所述第二用户操作,绘制蒙版;
通过所述蒙版覆盖所述至少两种不同类型的数据对象,使得所述至少两种不同类型的数据对象显示为选中状态。
5.根据权利要求4所述的方法,其特征在于,绘制蒙版,包括:
将所述第一移动光标被拖动到的第一位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二移动光标被拖动到的第二位置坐标作为所述待绘制蒙版的结束位置坐标;
根据所述起始位置坐标和结束位置坐标绘制蒙版。
6.根据权利要求4所述的方法,其特征在于,绘制蒙版,包括:
获取所述编辑显示界面中位于首位的第一类型数据对象的起始位置坐标,以及位于末位的第二类型数据对象的结束位置坐标;
将所述第一类型数据对象的起始位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二类型数据对象的结束位置坐标作为待绘制蒙版的结束位置坐标;
根据所述起始位置坐标和结束位置坐标绘制蒙版。
7.根据权利要求4所述的方法,其特征在于,所述方法还包括:
获取所述蒙版覆盖的至少两种不同类型的数据对象的数据内容,并对所述数据内容进行打包之后得到选中数据包;
若接收到对所述选中数据包的粘贴指令,解析所述选中数据包;
将解析到的数据内容显示在所述粘贴指令所指示的粘贴位置上。
8.一种电子设备,其特征在于,所述电子设备包括存储器和一个或多个处理器;其中,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令;当所述计算机指令被所述处理器执行时,使得所述电子设备执行以下步骤:
接收并响应第一用户操作,在包含多种不同类型的数据对象的编辑显示界面中显示用于选中所述数据对象的标识;所述第一用户操作用于指示用户要对所述编辑显示界面中的数据对象进行选中操作,所述多种不同类型的数据对象分别由对应的控件管理;
接收第二用户操作;所述第二用户操作是用户在所述编辑显示界面中选中至少两种不同类型的数据对象的操作;
响应所述第二用户操作,将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态;
对选中状态的所述至少两种不同类型的数据对象进行处理。
9.根据权利要求8所述的电子设备,其特征在于,所述标识包括提示弹窗,所述提示弹窗中包含第一控件,所述第一控件用于选中不同类型的数据对象。
10.根据权利要求9所述的电子设备,其特征在于,所述标识包括第一移动光标、第二移动光标;所述第一移动光标位于显示所述至少两种不同类型的数据对象的起始位置、所述第二移动光标位于显示所述至少两种不同类型的数据对象的结束位置;
所述电子设备执行接收第二用户操作时,具体执行:
接收所述用户对所述第一移动光标和/或第二移动光标的拖动操作;
接收对所述第一移动光标和第二移动光标之间拖动过的区域的长按操作;或者,
若所述标识还包括提示弹窗,所述提示弹窗中包含第二控件,接收对所述第二控件的点击操作;
其中,所述长按操作或所述点击操作用于选中所述拖动过的区域中包含的不同类型的数据对象。
11.根据权利要求9或10所述的电子设备,其特征在于,所述电子设备执行将所述编辑显示界面的所述至少两种不同类型的数据对象设置为选中状态时,具体执行:
根据所述第二用户操作,绘制蒙版;
通过所述蒙版覆盖所述至少两种不同类型的数据对象,使得所述至少两种不同类型的数据对象显示为选中状态。
12.根据权利要求11所述的电子设备,其特征在于,所述电子设备执行绘制蒙版时,具体执行:
将所述第一移动光标被拖动到的第一位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二移动光标被拖动到的第二位置坐标作为所述待绘制蒙版的结束位置坐标;
根据所述起始位置坐标和结束位置坐标绘制蒙版。
13.根据权利要求11所述的电子设备,其特征在于,所述电子设备执行绘制蒙版时,具体执行:
获取所述编辑显示界面中位于首位的第一类型数据对象的起始位置坐标,以及位于末位的第二类型数据对象的结束位置坐标;
将所述第一类型数据对象的起始位置坐标作为待绘制蒙版的起始位置坐标,以及将所述第二类型数据对象的结束位置坐标作为待绘制蒙版的结束位置坐标;
根据所述起始位置坐标和结束位置坐标绘制蒙版。
14.根据权利要求11所述的电子设备,其特征在于,当所述指令被所述电子设备执行时,使得所述电子设备还执行:
获取所述蒙版覆盖的至少两种不同类型的数据对象的数据内容,并对所述数据内容进行打包之后得到选中数据包;
若接收到对所述选中数据包的粘贴指令,解析所述选中数据包;
将解析到的数据内容显示在所述粘贴指令所指示的粘贴位置上。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括程序指令,当所述程序指令在终端设备上运行时,使得所述终端设备执行如权利要求1至7任一项所述的方法。
CN202011182593.XA 2020-10-29 2020-10-29 一种基于终端设备的数据选择方法与电子设备 Pending CN114510909A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011182593.XA CN114510909A (zh) 2020-10-29 2020-10-29 一种基于终端设备的数据选择方法与电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011182593.XA CN114510909A (zh) 2020-10-29 2020-10-29 一种基于终端设备的数据选择方法与电子设备

Publications (1)

Publication Number Publication Date
CN114510909A true CN114510909A (zh) 2022-05-17

Family

ID=81546988

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011182593.XA Pending CN114510909A (zh) 2020-10-29 2020-10-29 一种基于终端设备的数据选择方法与电子设备

Country Status (1)

Country Link
CN (1) CN114510909A (zh)

Similar Documents

Publication Publication Date Title
JP7414842B2 (ja) コメント追加方法及び電子デバイス
US10275295B2 (en) Method and apparatus for presenting clipboard contents on a mobile terminal
EP2778870B1 (en) Method and apparatus for copying and pasting of data
CN111049935B (zh) 远程控制电子设备的系统及其电子设备
KR102481065B1 (ko) 애플리케이션 기능 구현 방법 및 전자 디바이스
CN110168487B (zh) 一种触摸控制方法及装置
WO2021115194A1 (zh) 一种应用图标的显示方法及电子设备
US11681432B2 (en) Method and terminal for displaying input method virtual keyboard
US20230342104A1 (en) Data Transmission Method and Device
CN110032324A (zh) 一种文本选中方法及终端
CN113127773A (zh) 页面处理方法、装置、存储介质及终端设备
CN108780400A (zh) 数据处理方法及电子设备
CN111176766A (zh) 一种通信终端及组件显示方法
CN111506237A (zh) 终端及应用中操作功能启动方法
WO2022089102A1 (zh) 一种控制方法、装置及电子设备
CN114721761A (zh) 一种终端设备、应用图标管理方法和存储介质
KR20140028223A (ko) 주소록 제공 방법 및 장치
JP7319431B2 (ja) アプリケーション機能の実施方法及び電子装置
CN114510909A (zh) 一种基于终端设备的数据选择方法与电子设备
CN114595449A (zh) 一种安全扫描方法及装置
CN111880698A (zh) 智能终端的信息处理方法、装置、电子设备和存储介质
CN115061758B (zh) 应用的显示方法、终端、电子设备以及存储介质
CN112230906B (zh) 列表控件的创建方法、装置、设备及可读存储介质
CN113268187B (zh) 一种图片聚合显示的方法和装置及设备
CN112929858B (zh) 一种门禁卡的模拟方法和终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination