CN109085993B

CN109085993B - 为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法

Info

Publication number: CN109085993B
Application number: CN201810938052.1A
Authority: CN
Inventors: 段玉聪; 张欣悦; 朱东海
Original assignee: Hainan University
Current assignee: Hainan University
Priority date: 2018-08-17
Filing date: 2018-08-17
Publication date: 2019-08-02
Anticipated expiration: 2038-08-17
Also published as: CN109085993A

Abstract

本发明为便携式移动终端用户提供可自定义自适应的多功能交互区域，交互区域分为单面屏和双面屏两种类别的交互区域，用户可以自由绘制外观，包括大小，颜色，位置和形状，此后用户可以自定义每个交互区域的对应指令和触发方式，用户完成自定义后，本发明给出了将形状分为完整和不完整的识别区域范围的方法，并对范围内和范围外进行编码；同时，系统会根据用户的信息和用户的自定义为其提供智能推荐，用户的信息包括用户的性别、年龄、心情、习惯等；本发明属于计算机配件技术与软件工程交叉领域。

Description

为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法

技术领域

本发明是为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法，本发明属于计算机配件技术与软件工程交叉领域。

背景技术

日常生活中便携式移动终端，如手机已经几乎成为人手一部的产品，在使用屏幕上的交互区域时会出现不方便的情况，第一，以手机键盘为例，所有键盘都是按照系统设置好的模式布局，键盘的大小，形状等已经固定，唯一灵活的个性化设置也只能更改背景图片；第二，在各个键盘间切换很繁琐，尽管已有系统提供了便捷切换方式，但这种便捷切换方式使用依旧不便，例如在使用了中文键盘后想切换到表情符号键盘，却直接进入了英文键盘，无法在第一时间满足使用者的目标需求；第三，便携式移动终端没有提供交互区域简单迅速地完成使用者的目标需求，例如，使用者想在主页一键完成图标的整理，或者背景的设置，这些都是目前的交互区域的短板；第四，目前的交互区域没有智能地根据使用者的心情和情绪推荐合适的交互区域外观；本发明为便携式移动终端用户提供为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法，交互区域分为单面屏和双面屏两种类别的交互区域，用户能够自由绘制外观，包括大小，颜色，位置和形状，此后用户能够自定义每个交互区域的对应指令和触发方式，用户完成自定义后，本发明给出了将形状分为完整和不完整的情况的识别区域范围的方法，并对范围内和范围外进行编码；同时，系统会根据用户的信息和用户的自定义为其提供智能推荐，用户的信息包括用户的性别、年龄、心情、习惯等。

发明内容

体系结构

图1给出了可绘制定义推荐的多功能的交互区域的体系结构图；多功能交互区域分为单面屏和双面屏两种类别的交互区域，用户能够自由绘制外观，包括大小，颜色，位置和形状，用户绘制外观后，按形状的完整和不完整识别外观范围，对范围进行编码；此后用户能够自定义每个交互区域的对应指令和触发方式，同时，系统会根据用户的信息和用户的自定义为其提供智能推荐，用户的信息包括用户的性别、年龄、心情、习惯等；

自定义部分DIY：DIY部分包括外观定义DIY_IND和指令定义DIY_OR两部分；用户（U）在可视化窗口上自由绘制交互区域DIY_IND，DIY_IND ={IND_Num，IND_Size，IND_CL，IND_RelLoc，IND_FI}， IND_Num是自定义交互区域的编号，方便区分不同的DIY_IND，每一个DIY_IND能够表示多个指令 DIY_OR内容；IND_Size是交互区域的大小，由像素集合来衡量，像素集合构成一个区域，区域内的所有像素都可触发交互区域进而执行用户指令DIY_OR；IND_CL指交互区域的颜色，IND_CL= {px，RGB（red，green，blue）}，px指像素，RGB由R（red），G（green），B（blue）三种颜色的比例来配色，每一项的值能够是0~255之间的整数，也能够是0%~100%的百分数；IND_RelLoc是指交互区域DIY_IND的相对于屏幕的相对位置，在用户对DIY_IND进行拖拉后，记录DIY_IND移动后的最终所在像素位置；IND_FI指交互区域的形状，记录用户自定义后的区域形状；形状包括图2所示的个体和群体的情形，表1展示的是自定义交互区域的例子，完整COM和不完整ICOM，COM 指封闭的图形，COM分为内部COM_IN和外部COM_OUT，如表1中的例子1和例子2；ICOM指点不封闭的图形，分为点ICOM_P，如表1中的例子2，线ICOM_L，如表1中的例子4，区域ICOM_A，如表1中的例子5，例子6和例子7；点线结合ICOM_P∪ICOM_L，如表1中的例子8；点和区域结合ICOM_P∪ICOM_A，如表1中的例子9，例子10和例子11；线和区域结合ICOM_P∪ICOM_A，如表1中的例子12和例子 13；区域ICOM_A分为内部（）和外部（），如例子14到17所示；以上所述都为个体（SOL）形式，当出现群体（GRO）的图形是如表1的例子18所示，通过投影的方式，找到每个图形的中心点，再通过聚类方法获取新的中心点，根据外源数据挖掘得到中心点发散的距离，在识别部分中确定具体的图形范围；

指令部分（DIY_OR）： DIY_OR={IND_NUM，OR_DES，OR_TRI}，IND_NUM是自定义交互区域的编号，方便区分不同的DIY_IND，每一个DIY_IND能够表示多个指令内容；OR_DES指自定义区域要执行的指令内容；因为本专利不限定屏幕的类型，所以OR_TRI指自定义区域所要执行的指令内容的触发方式；

识别部分（IDEN）：识别部分是为了识别在用户自定义绘制出图形后的区域范围，在自定义部分的形状（IND_FI）部分将图形分为了如图2所示的分支情况，算法1展示了多功能交互区域确定用户自定义形状的范围；

在表1中展示了自定义交互区域例子及根据算法1识别的结果，识别结果范围如灰色虚线圈所示；插值处理是对原图像的像素进行重新分布，从而改变像素数量的方法，在算法1中用插值处理选择信息较好的像素作为增加、弥补空白像素的空间，而并非只使用临近的像素；在算法1中的第10行精确识别如表1中的例子6所示，极大化识别如表1中的例子7所示，用精确识别或者极大化识别由用户自定义；

表1 自定义交互区域例子及识别结果

触发部分（TH）：在不同类型的屏幕上有不同的触发形式，当在屏幕（不限定屏幕类别）上进入编码为0的区域，则为触发成功，交互区域开始工作；在双面屏中，触发可从相对于正面屏幕的背面屏幕进行，或者由两面屏幕一起进行，又或者从正面屏幕触发从背面屏幕显示；触发能够由压力的不同、接触交互区域的次数、接触交互区域的时间长短等等方式发生；所有形式全部都由用户自定义；在触发成功后，用户选择一个自定义区域，会显示出指令，每个自定义区域能够按用户的需求表示多种不同的指令；例如表1中的例子1触发后，让用户选择进行“删除第三条信息”、“屏幕变亮”、“回复社交软件第一个好友的消息”等，几种指令出现的方式能够通过拖拽等各种方式实现；

推荐部分REC：用户（U）表示为{U_ID，U_Min，U_Sex，U_Age，U_Mood，U_Hab，DIY_IND}，U_ID表示用户的编号，每个用户的编号独一无二；U_Min表示用户的民族，U_Sex表示用户的性别，U_Age表示用户的年龄；U_Mood指用户的情绪，U_Hab 是指用户的使用习惯，后经机器学习分析用户的自定义风格；DIY_IND指用户使用的自定义交互区域；根据用户的信息，通过特征模型得到适合用户的推荐内容CON_REC。

有益效果：

本发明方法提出了为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法，有如下优点：

1）本发明提出的交互区域实现了个性化，能够让用户通过绘制来自定义交互区域的外观和执行指令的内容等；

2）本发明提出的交互区域能够根据用户的信息等为用户推荐交互区域的外观和指令设置等；

3）本发明提出的交互区域由用户自定义，符合用户的使用习惯，用户能够简单迅速地完成目标指令需求。

附图说明

图1是为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法的体系图；

图2是为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法的形状部分的详细体系图；

图3是为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法的具体实施流程图。

具体实施方式

为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法的具体流程如下：

步骤1）对应图3中001所示，进入自定义部分DIY，自定义部分分为交互区域DIY_IND和指令DIY_OR两部分；

步骤2）对应图3中002所示，用户在可视化窗口上自由绘制交互区域DIY_IND，DIY_IND={IND_Num，IND_Size，IND_CL，IND_RelLoc，IND_FI}，IND_Num是自定义交互区域的编号，方便区分不同的DIY_IND，每一个DIY_IND能够表示多个指令DIY_OR内容；

步骤3）对应图3中003所示，记录用户自定义交互区域的颜色IND_CL，IND_CL指交互区域的颜色，IND_CL={px，RGB（red，green，blue）}，px指像素，RGB由R（red），G（green），B（blue）三种颜色的比例来配色，每一项的值是0~255之间的整数，或者是0%~100%的百分数；

步骤4）对应图3中004所示，记录用户自定义交互区域相对于屏幕的位置IND_RelLoc，在用户对DIY_IND进行拖拉后，记录DIY_IND移动后的最终所在像素位置；

步骤5）对应图3中005所示，记录范围内交互区域的大小IND_Size，由像素集合来衡量，像素集合构成一个区域，区域内的所有像素都可触发交互区域进而执行用户指令DIY_OR；

步骤6）对应图3中006所示，记录交互区域的形状IND_FI，形状包括个体和群体的情形，表1展示的是自定义交互区域的例子，完整COM和不完整ICOM，COM指封闭的图形，COM分为内部COM_IN和外部COM_OUT，如表1中的例子1和例子2；ICOM指点不封闭的图形，分为点ICOM_P，如表1中的例子2，线ICOM_L，如表1中的例子4，区域ICOM_A，如表1中的例子5，例子6和例子7；点线结合ICOM_P∪ICOM_L，如表1中的例子8；点和区域结合ICOM_P∪ICOM_A，如表1中的例子9，例子 10和例子11；线和区域结合（ICOM_P∪ICOM_A），如表1中的例子12和例子13；区域ICOM_A分为内部（）和外部（），如表1例子14到17所示；以上所述都为个体（SOL）形式，当出现群体（GRO）的图形是如表1的例子18所示，通过投影的方式，找到每个图形的中心点，再通过聚类方法获取新的中心点，根据外源数据挖掘得到中心点发散的距离，在识别部分中确定具体的图形范围；

步骤7）对应图3中007所示，自定义指令部分DIY_OR，DIY_OR={IND_NUM，OR_DES，OR_TRI}，IND_NUM是自定义交互区域的编号，方便区分不同的DIY_IND，每一个DIY_IND能够表示多个指令内容；OR_DES指自定义区域要执行的指令内容；OR_TRI指自定义区域所要执行的指令内容的触发方式；

步骤8）对应图3中008所示，用户自定义指令的内容OR_DES，用户选择一个自定义区域，会显示出指令内容，每个自定义区域能够按用户的需求表示多种不同的指令；例如一个交互区域触发后，让用户选择进行“删除第三条信息”、“屏幕变亮”、“回复社交软件第一个好友的消息”等指令中的哪一个指令，几种指令出现的方式都由用户自定义，例如选择一个交互区域后，将所有OR_DES线性显示出来，再由用户自己选择其中的一个OR_DES执行；也能够将所有OR_DES围绕DIY_IND按圆圈排开，用户自己选择其中的一个圆圈执行……SW_Way由用户自定义；

步骤9）对应图3中009所示，用户自定义指令的触发方式OR_TRI，在不同类型的屏幕上有不同的触发形式，当在屏幕上进入编码为0的区域，则为触发成功，交互区域开始工作；在双面屏中，触发相对于正面屏幕的背面屏幕进行，或者由两面屏幕一起进行，或者从正面屏幕触发从背面屏幕显示；触发由压力的不同、接触交互区域的次数或接触交互区域的时间长短方式发生；所有形式全部都由用户自定义；

步骤10）对应图3中010所示，在确定步骤1）到步骤9）的所有自定义内容后，进入智能推荐部分REC，因为智能推荐是为用户量身打造，所以在用户允许后，获取用户的信息，用户（U）={U_ID，U_Min，U_Sex，U_Age，U_Mood，U_Hab，DIY_IND}，U_ID表示用户的编号，每个用户的编号独一无二；U_Min表示用户的民族，U_Sex表示用户的性别，U_Age表示用户的年龄；U_Mood指用户的情绪，U_Hab是指用户的使用习惯，后经机器学习分析用户的自定义风格；DIY_IND指用户使用的自定义交互区域；

步骤11）对应图3中011所示，根据用户的信息，通过特征模型得到适合用户的推荐内容CON_REC；CONREC包括DIY_IND中的所有部分；

步骤12）对应图3中0012所示，进入识别部分IDEN，识别在用户自定义绘制出图形后的区域范围，在自定义部分的形状IND_FI部分将图形分为了如图2所示的分支情况，算法1展示了多功能交互区域如何确定用户自定义形状的范围并进行编码；

在表1中展示了自定义交互区域例子及根据算法1识别的结果，识别结果范围如灰色虚线圈所示；插值处理是对原图像的像素进行重新分布，从而改变像素数量的方法，在算法1中用插值处理选择信息较好的像素作为增加、弥补空白像素的空间，而并非只使用临近的像素；精确识别指将像素最为集中的部分识别为目标范围，极大化识别涵盖极大数量像素点所在的区域；

步骤13）对应图3中0013所示，用户流畅使用自定义交互区域。

Claims

1.一种为便携式移动终端用户提供可自定义自适应的多功能交互区域的方法，交互区域分为单面屏和双面屏两种类别的交互区域，用户能够自由绘制外观，包括大小，颜色，位置和形状，此后用户能够自定义每个交互区域的对应指令和触发方式，用户完成自定义后，给出了分为完整和不完整的情况的识别外观范围的方法，并对范围内的和范围外进行编码；同时，根据用户的信息和用户的而自定义为其提供智能推荐，用户的信息包括用户的性别、年龄、心情或习惯；可自定义自适应的多功能交互区域的具体流程如下：

步骤1）进入自定义部分DIY，自定义部分分为交互区域DIY_IND和指令DIY_OR两部分；

步骤2）用户在可视化窗口上自由绘制交互区域DIY_IND，DIY_IND ={IND_Num，IND_Size，IND_CL，IND_RelLoc，IND_FI}，IND_Num是自定义交互区域的编号，方便区分不同的DIY_IND，每一个DIY_IND能够表示多个指令DIY_OR内容；

步骤3）记录用户自定义交互区域的颜色IND_CL，IND_CL指交互区域的颜色，IND_CL={px，RGB（red，green，blue）}，px指像素，RGB由R（red），G（green），B（blue）三种颜色的比例来配色，每一项的值是0~255之间的整数，或者是0%~100%的百分数；

步骤4）记录用户自定义交互区域相对于屏幕的位置IND_RelLoc，在用户对DIY_IND进行拖拉后，记录DIY_IND移动后的最终所在像素位置；

步骤5）记录范围内交互区域的大小IND_Size，由像素集合来衡量，像素集合构成一个区域，区域内的所有像素都可触发交互区域进而执行用户指令DIY_OR；

步骤6）记录交互区域的形状IND_FI；形状包括个体和群体的情形，自定义交互区域包括完整COM和不完整ICOM，COM指封闭的图形，COM分为图形内部COM_IN和图形外部COM_OUT；ICOM指点不封闭的图形，除了COM之外都为ICOM，ICOM又细分为点ICOM_P，线ICOM_L，区域ICOM_A，点线结合ICOM_P∪ICOM_L，点和区域结合ICOMP∪ICOMA以及线和区域结合ICOM_P∪ICOM_A，以上所述都为个体SOL形式，与SOL相对应的是群体GRO的图形

步骤7）自定义指令部分DIY_OR，DIY_OR={IND_NUM，OR_DES，OR_TRI}，IND_NUM是自定义交互区域的编号，方便区分不同的DIY_IND，每一个DIY_IND能够表示多个指令内容；OR_DES指自定义区域要执行的指令内容；OR_TRI指自定义区域所要执行的指令内容的触发方式；

步骤8）用户自定义指令的内容OR_DES，用户选择一个自定义区域，会显示出指令内容，每个自定义区域按用户的需求表示多种不同的指令；一个交互区域触发后，让用户选择进行“删除第三条信息”、“屏幕变亮”、“回复社交软件第一个好友的消息”指令中的任一个指令，几种指令出现的方式能够通过拖拽方式实现，由用户自定义；

步骤9）用户自定义指令的触发方式OR_TRI，在不同类型的屏幕上有不同的触发形式，当在屏幕上进入编码为0的区域，则为触发成功，交互区域开始工作；在双面屏中，触发相对于正面屏幕的背面屏幕进行，或者由两面屏幕一起进行，或者从正面屏幕触发从背面屏幕显示；触发由压力的不同、接触交互区域的次数或接触交互区域的时间长短方式发生；所有形式全部都由用户自定义；

步骤10）智能推荐部分REC，因为智能推荐是为用户量身打造，所以在用户允许后，获取用户的信息，用户（U）={U_ID，U_Min，U_Sex，U_Age，U_Mood，U_Hab，DIY_IND}，U_ID表示用户的编号，每个用户的编号独一无二；U_Min表示用户的民族，U_Sex表示用户的性别，U_Age表示用户的年龄；U_Mood指用户的情绪，U_Hab 是指用户的使用习惯，后经机器学习分析用户的自定义风格；DIY_IND指用户使用的自定义交互区域；

步骤11）根据用户的信息，通过特征模型得到适合用户的推荐内容CON_REC；CON_REC包括DIY_IND中的所有部分；

步骤12）识别部分IDEN识别在用户自定义绘制出图形后的区域范围，在步骤6）中已经详细讨论了形状IND_FI的划分；算法1展示了多功能交互区域如何确定用户自定义形状的范围并进行编码；

插值处理是对原图像的像素进行重新分布，从而改变像素数量的方法，在算法1中用插值处理选择信息较好的像素作为增加、弥补空白像素的空间，而并非只使用临近的像素；精确识别指将像素最为集中的部分识别为目标范围，极大化识别涵盖极大数量像素点所在的区域。