CN101002175B - 在移动设备应用个性化方面使用上下文本体的方法和设备 - Google Patents

在移动设备应用个性化方面使用上下文本体的方法和设备 Download PDF

Info

Publication number
CN101002175B
CN101002175B CN200580027307XA CN200580027307A CN101002175B CN 101002175 B CN101002175 B CN 101002175B CN 200580027307X A CN200580027307X A CN 200580027307XA CN 200580027307 A CN200580027307 A CN 200580027307A CN 101002175 B CN101002175 B CN 101002175B
Authority
CN
China
Prior art keywords
context
user
value
rule
action
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200580027307XA
Other languages
English (en)
Other versions
CN101002175A (zh
Inventor
帕尼·科尔皮帕阿
若纳·阿克基拉
朱阿·克拉
萨米·龙凯南
伊尔卡·康萨拉
雅尼·芒特伊雅尔维
于尔波·蒂奥默拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Technologies Oy
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Oyj filed Critical Nokia Oyj
Publication of CN101002175A publication Critical patent/CN101002175A/zh
Application granted granted Critical
Publication of CN101002175B publication Critical patent/CN101002175B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Abstract

一种包括至少部分地由用户指定的用户界面的移动终端，该移动终端包括用户界面指定单元，该用户界面指定单元根据编程的数据处理器操作以便与用户协作来选择一起形成一种规则的至少一个触发和动作；以便根据分层信息模型自动地生成包括一组可用的事件的目录结构；以便与用户协作来从可用的一组事件选择至少一个触发值，以及响应于被满足的至少一个触发值，定义将要由移动终端执行的动作。

Description

在移动设备应用个性化方面使用上下文本体的方法和设备
技术领域
本发明一般地涉及软件工具，并且更特别地，作为非限制性的例子，涉及可用于开发针对小屏幕设备(例如蜂窝电话)的用户界面(UI)的软件工具，其中UI涉及具有相关词表模型(vocabulary model)的上下文本体。 
背景技术
当前的和未来的移动终端可以至少部分地被认为是用于第三方应用的平台，并且将支持数量不断增长的应用和附件。这些需求将更多地强调移动终端的用户界面方面。 
使应用性态适于上下文的概念在文献中已经收到了显著的关注。尽管上下文感知计算的目标是有根据的并且已经导致开发可感知情况并且适当地适配它们的动作的设备，但存在一个根本性的问题，即，由人类展示的上下文感知与计算系统展示的上下文感知完全不同(参见，例如，Erickson，T，Some problems with the notion ofcontext-aware computing，Communication of ACM，45(2)，(2002)，102-104)。基于上下文的硬编码全自动动作很少有用，并且不正确的自动动作的发生会令人失望。Greenberg已经指出(Greenberg，S.，Context as a dynamic construct，Human-Computer Interaction，16(2001)，257-268)并不总是可以将先验经验(priori)列举为上下文的有限集，其与真实世界上下文匹配。即使找到这样的集合并且其现今是有效的，其也因为“社会和物理环境中的内部和外部变化”而在任何其他时间可能是不适当的。此外，从给定的上下文确定适当的动作可能是困难的。 
然而，不必将全自动动作瞄准为上下文感知的仅有目的。M
Figure 05827307X_0
ntyj
Figure 05827307X_1
rvi等人(M
Figure 05827307X_2
ntyj
Figure 05827307X_3
rvi，J.，K
Figure 05827307X_4
ns
Figure 05827307X_5
l
Figure 05827307X_6
，L，Tuomela，U.，H
Figure 05827307X_7
kkil
Figure 05827307X_8
，J.，Context-Studio-Tool for Personalizing Context-Aware Applications inMobile Terminals，Proc，Australasian Computer Human InteractionConference 2003，(2003)，64-73)已经建议针对基于上下文的适配使用自动化系统的分类。可以区分上下文相关动作的自动化的三种不同等级：人工、半自动和全自动。人工动作表示由用户基于上下文信息做出的动作，该上下文信息由设备(或用户)检测。在半自动等级中，用户可基于由设备检测出的上下文预先定义应用动作，或从由设备基于上下文提出的动作中选择。在全自动等级中，应用根据由设备检测出的上下文来自动地做出(预先编程的)动作。 
半自动适配模型部分地克服了由Greenberg确认的关于基于上下文确定合适的动作的问题。如果事件动作性态由终端用户而不是由应用开发者来定义，则可实现更大程度的个性化和灵活性。当环境随着时间的过去改变时，如果需要的话，则通过允许用户改变事件动作配置来实现进一步的灵活性。 
Ranganathan和Campbell(Ranganathan，A.，Campbell，R.，Aninfrastructure for context-awareness based on first order logic，Personaland Ubiquitous Computing Journal 7，施普林格，(2003)，353-364)为定义基于上下文的应用动作而引入基于一阶逻辑规则的模型和分布式框架。作为另外的工作，作者确认开发图形界面，这使得用户能够从可用的上下文和动作选择规则的元素，而不是写一阶逻辑。Sohn和Dey(Sohn，T.，Dey，A.，2003 ICAP：An Informal Tool for InteractivePrototyping of Context-Aware Applications，Ext. abstracts  CH103，(2003)，974-975)引入非正式的基于笔的工具，该工具允许用户定义收集上下文信息的输入设备和支持响应的输出设备。输入和输出可被组合进规则并且以工具进行测试。然而，该工具不是针对小屏幕移动终端和设备设计的，而基于显式信息模型生成的用户界面元素也不是针对小屏幕移动终端和设备设计的。作者将支持设计者和终 端用户二者以创建和修改上下文感知应用的目的确定为进一步的工作。Dey等人(Dey，A.，Hamid，R.，Beckmann，C.，Li，I.，Hsu，D，aCAPpella：Programming by Demonstration of Context-AwareApplications，Proc.CHI 2004，ACM，(2004))利用通过演示编程方法进行实验以便原型制作上下文感知应用。作者开发出一种工具，该工具允许用户通过上下文的示例模型来训练和批注，该上下文的示例模型可以与动作绑定。同样，工具的用户界面不是针对小屏幕移动设备设计的。另外，该焦点不同于与本发明更为相关的焦点，本发明涉及用于在UI中显示本体的上下文的可缩放模型，其中用户可自由地选择上下文。 
可将上下文本体应用于列举可被用于激活动作的所有可能的上下文事件。关于本体的许多定义是可用的(参见Gomez-Perez，A.，Fernandez-Lopez，M.，Corcho，O.，Ontological Engineering，施普林格，(2003)，第403页.)。如这里所应用的，本体的目的是表达信息，使得对于人类来说可轻易地理解该信息，并且可由机器读取该信息。上下文信息的人类可理解性使得移动设备终端用户能够配置上下文感知功能下文信息的机器可读性使得能够基于本体动态地形成用户界面元素。此外，本体便于将规则描述为上下文交换协议(CEP)XML脚本，其可由推理引擎执行(Lakkala，H.，Context ScriptSpecification，(2003)，第22页，可从：http://www.mupe.net处得到，下文称为Lakkala 2003b)。文献中已经出现许多的上下文模型和本体，例如(Schmidt，A.，Aidoo，K.A.，Takaluoma，A.，Tuomela，U.，Laerhoven，K.，Van deVelde，W.，Advanced interaction in context，Proc.1stInternational symposium on handheld and ubiquitous computing，1999，施普林格，(1999)；Henricksen，K.，Induiska J.，Rakotonirainy，A.，Modeling Context Information in Pervasive Computing Systems，Proc.International Conference on Pervasive Computing 2002，LNCS 2414，施普林格，(2002)；以及Wang，X.，Zhang，D.，Gu，T.，Pung，H，，Ontology Based Context Modeling and Reasoning using OWL，Proc. Workshop on Context Modeling and Reasoning at IEEE InternationalConference on Pervasive Computing and Communication，(2004)，18-22)。 
上面提到的上下文工作室是用于基于半自动上下文的适配的应用个性化工具。利用图形用户界面执行应用个性化，该图形用户界面允许用户将上下文映射到应用动作。上下文工作室概念由M
Figure 05827307X_9
ntyj
Figure 05827307X_10
rvi等人(2003)引入，其还针对工具的概念验证提出可用性估计。该估计结果指示测试人员能够总结应用特定上下文的设置的原理，但是它们难于表达有效用户定义的情况。使用方案中的上下文的主题思想在测试人员之间会变化，影响他们的选择。此外，主题难于构建涉及多个布尔运算符的使用的规则。 
因此期望克服在早期的上下文工作室研究中发现的至少一些可用性问题。 
此外，早期原型的用户界面不是专门针对于通常结合移动设备的小屏幕而设计。屏幕空间的缺乏需要用于信息呈现和导航的不同方法。 
发明内容
根据本发明的示例性实施方式，上述的和其他的问题被克服，并且其他的优势被实现。 
在本发明的一个方面中，提供一种具有用户界面的移动终端，该用户界面至少部分地由用户指定。例如蜂窝电话、或PDA、或游戏设备、或数码照相机的移动终端具有用户界面指定单元，该单元根据编程的数据处理器操作：以便与用户协作来选择一起形成一种规则的至少一个触发和动作；以便根据分层的信息模型来自动地生成包括一组可用的事件的目录结构；以便与用户协作来从可用的一组事件选择至少一个触发值并且定义响应于满足至少一个触发值而将要由移动终端执行地动作。 
根据移动终端内生成的值，例如根据由移动终端传感器生成的一 个值，可满足至少一个触发值，和/或根据移动终端外部生成的值，可满足至少一个触发值。 
在一个非限制性的实施方式中，从另一个用户外部地获得规则脚本，并且在另一个非限制性的实施方式中，从第三方规则脚本提供商外部地获得规则脚本，例如通过空中被下载。 
在本发明的另外的非限制性方面，提供存储在计算机可读介质上的计算机程序产品，并且其包括用以引导数据处理器来响应于输入从而为移动终端定义用户界面的程序指令。计算机程序产品包括程序指令，其用以选择至少一个触发和动作，该触发和动作一起形成一种规则；用以根据分层信息模型自动地生成可用事件的目录结构；用以从事件的可用集选择至少一个触发值并且相应地定义将要由移动终端执行的动作。 
还提供用于为设备指定用户界面的至少一个方面的方法和工具。 
附图说明
在下面的本发明的详细描述中，当结合附图阅读时，本发明实施方式的上述和其他方面将变得更加明显，其中： 
图1表示用于创建包含上下文类型和上下文值的词表的模型； 
图2示出上下文类型和一组上下文值的例子； 
图3示出上下文工作室规则编辑视图的例子，以及相应的CEP脚本的例子。 
图4表示基于设备分类传感器的上下文词表示例上下文类型的表1； 
图5表示电话分类动作词表示例动作类型的表2； 
图6示出根据分层信息模型的示例性使用的规则组件和映射设备UI； 
图7表示创建规则的多步骤处理； 
图8表示可用于实施本发明的移动设备的简化框图； 
图9是根据可由数据处理器在操作程序的控制下执行从而为图8 的移动设备定义用户界面的方法的简化逻辑流程图。 
具体实施方式
在本发明的示例性实施方式中利用了上下文和动作词表模型、规则模型和上下文框架(参见Korpip
Figure 05827307X_11
Figure 05827307X_12
，P.，Mntyj
Figure 05827307X_14
rvi，J.，Kela，J.，H.，Malm，E-J，Managing Context Information in Mobile Devices，IFEEPervasive Computing Magazine special issue：Dealing with Uncertainty2(3)，IEEE Computer Society，(2003)，42-51，下文为Korpip
Figure 05827307X_15
等人.2003)。这些模型实现规则和可扩展上下文词表的动态管理，并且在运行时实现自动地生成用户界面的元素。 
本发明的示例性实施方式针对基于传感器的移动上下文使用本体模型(参见Korpip
Figure 05827307X_18
，P.，M
Figure 05827307X_19
ntyj
Figure 05827307X_20
rvi，J.，An Ontology for MobileDevice Sensor-Based Context Awareness，Proc.4th International andInterdisciplinary Conference on Modeling and Using Context2003，LNAI 2680，施普林格，(2003)，451-459，下文称为Korpip
Figure 05827307X_21
Figure 05827307X_22
，P.&M
Figure 05827307X_23
ntyj
Figure 05827307X_24
rvi，J.，同时参见Korpip
Figure 05827307X_25
Figure 05827307X_26
等人，2003)，并且提出更为详细的词表模型作为先前模型的增强。 
如上面所陈述的，本体的目的可以是表达信息，使得可以轻易地由人类理解并由机器读取。正如这里所使用的，本体可以被理解为能够包括用户所期望的任何组件或抽象(例如，设备、时刻、位置等)。一般地，基于域语义上的“深度”和限制(公理、约束)的程度可将本体划分为轻量级和重量级。应用在本发明的示例性和非限制性实施方式中的本体可以被认为是轻量级本体，其包括概念、概念分类(词表)和描述概念的属性(结构)。此外，可根据形式的等级来表征本体：高度非正式(自然语言)、半非正式、半正式和严格正式。因为其以“自然语言的受限和结构形式”来表达(Gomez-Perez等人.2003)，所以可使用在本发明中的本体被认为是半非正式。然而，本发明不限于仅结合轻量级本体或半非正式本体使用。 
应用在这里还称作为用户界面个性化工具的上下文工作室中的上下文本体具有两个部分：结构和词表。结构定义了在不同的域和应用之间使用的上下文的公共属性。词表是应用相关或域相关的可扩展上下文概念化，其针对终端用户以及应用程序员的可理解性和简单性。针对新的域开发了新的词表。 
本体结构被定义为一组属性。在本发明的示例性和非限制性实施方式中，利用六个属性来描述每个上下文(对象)，即上下文类型、上下文值、源、可信度、时间戳和属性(参见Korpip
Figure 05827307X_27
，P.& M
Figure 05827307X_29
ntyj
Figure 05827307X_30
rvi，J.，2003)。定义上下文词表涉及定义多组上下文类型和上下文值(参见作为非限制性例子的图6)。对理解本发明没有密切关系的其他属性将不在这里做进一步地讨论。 
根据域或应用需要设计本体词表。词表设计是为上下文类型和上下文值属性定义人类可理解的域特定或应用特定的值。关于实现本发明，优选的而不是限制的是这些值分类和描述可能的真实世界情况，使得信息有用于应用并且人类可理解。 
参照图1和图2，定义上下文类型1来命名和分类上下文值。上下文类型1类似变量名，而上下文值2类似该变量的一组值。图1示出针对一个上下文类型1和针对该上下文类型1的一组上下文值2的示例性词表模型。图2表示针对该词表的一个上下文描述的非限制性例子。上下文类型1可具有一个或多个概念(例如，概念1，...概念N)，并且每个上下文类型1可具有一个或多个上下文值(值1，...值M)。对于每一个上下文类型1，在某个时刻的上下文实例可具有这些值(1-M)中的一个值。不同的上下文类型可具有至少一个公共的概念。因此，可以并且可用于形成上下文类型1概念的树分层，其中叶节点代表上下文值2。分层可用于对上下文树的多个分支的查询和预订，而不是仅一条路径。 
优选地从一般到特殊对上下文类型概念分类，使得更为一般的概念朝着根的左侧而更为特殊的概念朝着叶的右侧。在这种方式下，上下文类型1可具有公共的、更为一般地概念，但由更为特殊的概 念隔开。 
为了简化和便于使用，优选地避免长的上下文类型。例如，作为非限制性的例子，作为最大值，上下文类型1可具有三或四个概念。例如，如果上下文类型1概念被模型化为用户界面中的文件夹，则导航深的文件夹分层可以是慢的处理。另一个方面，上下文类型2应该是足够的特殊以使得它们具有规模小的一组值2。至少在用户界面中，如果用户必须从一组值中选择，则规模太大的一组值2是难于处理的。在本发明的示例性实施方式中，每个上下文值2具有与某个应用潜在的关联性。 
图4中示出的表1提出了描述从加速和触摸传感器数据抽象出的设备分类上下文的上下文词表的一个例子。可以注意到在表1的第一行中以文本的形式描述了图2的示例上下文，其中两个概念(设备、方位)与涉及天线和显示器方位(例如，上、下、左、右)的六个值关联。 
通过利用上下文词表模型可表示出基于上下文1将要执行的动作。在本发明的示例性实施方式中，利用两个属性来定义动作，动作类型3和动作值4，其以类似于上下文类型1和上下文值2如何描述上下文的方式来描述动作。图5中示出的表2提出针对动作类型电话：应用：配置；电话：操纵杆；电话：小键盘和关联的动作值4的动作词表的例子。此外，外部设备可通告它们的动作，其可被动态地包括，作为上下文工作室动作词表。 
本体词表模型实现从词表生成上下文工作室用户界面的元素。分层词表是可扩展和可修改的，并且这些特性可由生成的UI继承。在没有分层概念的情况下，上下文值的扁平列表将轻易地增大，大到无法实现可用的交互作用。 
命名惯例 
优选地将上下文工作室的上下文管理设计成利用上下文框架(参见Korpip
Figure 05827307X_31
等人2003)。合适的命名可以被认为是必需的，尤其在描述属性、上下文类型、上下文值和源，这些对于添加到上下文管 理器“黑板”的每个上下文对象来说是需要的。这些属性也被用于从上下文管理器访问上下文信息。在命名上下文类型中将考虑到两个主要方面。首先，合适的命名应向用户反映上下文的意思，该用户通常是应用开发人员或个性化工具的用户。命名优选地揭示了上下文的使用。第二，正确命名惯例的使用确保上下文信息的用户能够完全使用由上下文管理器提供的功能。 
当将上下文类型构建成包含从一般概念到特殊概念的元素的路径时，可利用表示更大的上下文信息子集的局部上下文类型来访问上下文信息。已经在上面指出的上下文交换协议(CEP)中利用了该命名惯例，其中对上下文类型分层的子集的引用被表示为通配符(参见Lakkala，H.，Context Exchange Protocol Specification，(2003)，第28页.可从：http://www.mupe.net获得，下文称为Lakkala 2003 a)。此外，CEP建议厂商特定的上下文类型以命名该厂商的前缀开始来进行命名，例如“x-vendor_name：”，跟着是常规的上下文类型定义。 
一组上下文值可以是数字的或符号的。如果上下文值被描述为数字的，则对于应用使用，它们优选地应该具有对于人类来说明确的意思，例如以度数表示的环境温度。如果使用原始的数字测量值，则不需要命名上下文值集合，并且可以常规地使用上下文类型1。如果为了应用个性化而由用户定义了上下文值2，则优选的它们是人类可理解的符号，并且集合中值的数目应该少到足以允许从集合中选择值来用作规则中的条件。当需要规模小的一组值时，数字的值可以被划分成命名的间隔，例如温度值可以是“高于20”。存在将数字的值抽象成符号值的几个其他的方法(例如，参见Korpip
Figure 05827307X_33
Figure 05827307X_34
等人，2003)。 
在词表中没有描述上下文源属性，但如果对于同一个上下文类型1存在许多的上下文提供者，并且如果客户端对起源于特定源的上下文感兴趣，则其是需要的。为了避免不同的上下文信息提供者之间的命名冲突，关于源的命名策略是所期望的。源的分类可以被表示为：终端内部和终端外部。作为两个非限制性的例子，终端内部源 可以以前缀“终端：”或“电话：”开始来命名，跟着是源的描述，例如传感器名称。如果终端源具有多个元素，则优选的以类似于上下文类型1来命名，其中命名形成一个路径，例如“终端：传感器：加速”。终端外部源可以被命名为标识提供者的协议声明，例如“http://context_provider.com/context_type”(参见Lakkala 2003a)。 
上下文工作室规则 
上下文工作室使得用户能够指定将上下文连接到动作的规则。一旦规则在移动设备中是有效的，如规则中所指定的，上下文促成动作。规则条件部分元素被称为触发。触发可以是用于激活动作的任何事件或声明。触发是上下文词表的实例。上下文类型1(变量名)和上下文值2(变量值)一起定义触发。动作可以是当一组触发发生时，可以被激活的任何应用、功能或事件，其中触发集合具有至少一个成员。规则动作部分元素被称为动作。为了清晰，一个规则可包含一个动作。动作类型3和动作值4定义一个动作。 
规则是将一组触发连接到动作的表述。在本发明的示例性实施方式中，规则包含一个动作元素和至少一个触发元素。规则是这样的形式：IF触发，THEN动作。为了使得对于用户简化规则的指定，优选的是用于连接的仅有的运算符是AND。包含多个触发的规则的一个例子如下：IF触发1 AND触发2 AND触发3，THEN动作。在本发明的示例性实施方式中，通过允许用户为同一个动作指定额外的并行规则来实施运算符OR。然而，注意到在本发明的其他实施方式中，在同一个规则中也可以使用运算符的混合(例如，OR和AND，和/或其他的布尔运算符)。另外在本发明的示例性实施方式中，允许用户做出不完整的规则，即，可以省略动作部分或触发部分。不完整的规则利用如UI中禁止的图标来表示。 
上下文工作室针对规则采用CEP上下文脚本表示(Lakkala 2003a，2003b)。上下文脚本是半正式XML描述，其可被用于描述规则。针对下述示例规则，在图3中表示出被描述为上下文脚本的规则的非限制性例子： 
If设备是静止的并且显示器朝下，then将电话音频配置设置成“会议”。 
该示例的规则将使得：如果设备方位是显示器朝下并且设备是静止的，则设备配置被设置为“会议”。如所示出的，在用户界面中可显示出符合脚本规范和上下文工作室规则形式的规则。因此，可以使用由其他人定义的规则，并且可以完成通过空中与其他用户的交换规则脚本，如可以是通过空中从规则源进行规则脚本的下载。然而，一些规则可以是个人的并因此不可由其他人使用。例如，个人的家的位置绑定到位置坐标，则在其他人的家的情况下，该描述将不是有效的(除非，例如，用户的另一个家庭成员位于同一个位置处)。应该注意到图3中示出的字体不需要按比例绘制。 
可以在UI规则视图中创建、查看和编辑规则脚本。图3示出在示例的CEP脚本中给定的规则的视图。上下文工作室中的上下文管理优选地基于针对移动设备的基于黑板的上下文框架(参见Korpip
Figure 05827307X_35
Figure 05827307X_36
 等人2003)并利用推断引擎对规则脚本进行估计，该推断引擎被称为使用上下文管理器的脚本引擎(Lakkala 2003a)。上下文脚本模型和推断引擎支持条件运算，例如与、或、非、等于、不等于、小于、大于、小于或等于、大于或等于和在范围以内。在示例性的在线系统中，上下文管理器从上下文源和抽象器接收所有的上下文信息，并且在这些上下文中改变时向脚本引擎指示，这些上下文在由上下文工作室生成、由用户利用图形UI定义的规则脚本中使用。脚本引擎为改变的上下文估计规则，并且如在规则中所定义的，激励规则可用于激活应用动作或平台事件。 
用户界面 
上下文工作室规则优选地由用户使用图形用户界面(GUI)来指定，该图形用户界面也可简单地表示为用户界面(UI)，符合半自动适配模型的概念。用户界面是上下文本体的应用。触发和动作的表示是基于本体词表模型的。可基于本体和规则模型自动地和动态地生成UI中的触发、动作和规则视图元素。本体分层可以被转化为 UI中的文件夹-文件模型表示从而促进用户导航。根据词表分层，上下文和动作类型概念可以被表示为文件夹和子文件夹。上下文和动作值对应于文件夹概念中的文件。在运行时可以扩展和修改词表，并且可以相应地更新UI。新的上下文和动作类型表示为UI中新的路径，并且新的上下文和动作值表示为文件夹中的新的文件。 
在本发明的实施方式的使用的非限制性例子中，UI是针对小尺寸屏幕设计的一种UI，例如在手持移动设备和终端中所遇到的，例如但不限于蜂窝电话、游戏设备、数码照相机、音乐存储和播放装置、个人数字助理(PDA)和具有有限显示屏幕区域的其他设备和终端。 
假设作为非限制性的例子，用户导航设备分类上下文词表以便为在更早的例子中给定的规则找到正确的触发。用户沿路径设备\移动并且在选择手势类型上下文值轻叩之后，视图将返回到如图7的示例中所示出的规则编辑视图。在UI中可以以类似的方式显示和导航动作分层。 
其中用户可期望构建规则的两个示例性方案如下： 
方案1：你经常呼叫你最好的朋友Mike。当你在开车或骑自行车时多次呼叫他时，你想能够快速的呼叫而不需要看着电话。电话识别“摇动”活动。现在你想确定当你摇动电话时，它开始呼叫Mike。 
方案2：你经常要与你的朋友在夜总会度过晚上。当你在俱乐部时，你希望你的电话转到“户外”配置使得当你接收呼叫或消息时能够听见，所以你定义自动的配置改变。结果是提醒音量被自动地增加到户外配置水平的音量。 
可通过在图3的规则编辑窗口处选择合适的定义来构建对应于这些示例性方案的合适规则。通过在“触发”和“动作”分层文件夹结构中导航可找到选择的值。还针对图6做出参考，图6示出根据分层模型的触发、动作部分、分层信息模型(例如，设备＝＞活动＝＞摇动/倾斜/旋转)和得到的UI的自动生成的非限制性例子。 
在用于基于半自动上下文适配的应用个性化工具(在这里也被称 为上下文工作室)的实施方式中，UI被设计成使用上下文本体。本体词表分层优选地，但不是限制地在UI中转换为文件夹-文件模型表示。具有增强的词表模型的本体提供可伸缩的信息表示，以及UI中上下文和动作信息的轻松导航，并且根据词表中的改变来启动直接更新UI。 
另外，本体支持作为正式规则模型的上下文脚本的使用。 
基于上述的描述可以理解到，本发明的示例性实施方式基于不同的信息源实现移动终端应用和附件的平台相关动态个性化。个性化优选的由终端用户执行，用户与具有图形用户界面的工具交互，根据来自可用的信息源的描述生成该图形用户界面的元素。关于个性化的示例信息源包括手势、终端事件、传感器事件、外部网络源、标签、位置、在场等。将要被控制的示例应用包括由外部设备、配置、终端控制通告的功能，并且一般地，包括任何的可用终端应用功能。 
如上所述的本发明的示例性实施方式提供用于描述来自信息源和应用动作的事件的模型。个性化工具的图形用户界面的元素可以被自动地和动态地生成，同时保持工具高的可用性。 
本发明的示例性实施方式解决了移动终端用户的需要，这些移动终端用户在使用潜在的大量可用的应用和附件中具有不同的喜好。因此，将使得终端应用和附件的使用可变得更为容易地由用户利用最少的交互进行配置。终端应用和附件的使用也将变得更加的灵活。 
作为类比，可能需要配置更多的“软键”。根据本发明的非限制性的实施方式，“软键”可以被认为是激活任意终端应用功能或由附件所通告的功能的任意事件。 
本发明的示例性实施方式使得用户能够统一地描述用于激活动作以及用于统一地描述终端应用或附件的动作的事件(例如，“软键”)。该模型促进表达信息使得可以轻易地被人类理解并由机器读取。人类可理解性使得移动终端用户能够个性化移动终端。期望的机器可读性功能实现动态地形成用户界面元素。此外，模型实现 用户指定条件动作规则的正式描述，由此促进平台无关的个性化。在示例性的实施方式中，规则从由用户利用图形UI(GUI)指定的图形描述生成。 
在这点上再次针对图6和图7做出参考。图6表示模型的简化的、非限制性示例规则组件，而图7表示基于由模型词表生成的目录分层的规则的形成。在图7中，用户选择至少一个触发和动作，该触发和动作一起形成一种规则。作为触发定义的一个例子，根据分层信息模型(参见图6)自动地生成可用的触发事件的目录结构；用户从可用的一组触发中选择一种类型的触发值(在本情况下是“手势”)并且接着选择具体的手势触发值(在本情况下是“轻叩”)。可相应地定义动作。 
通过本发明的使用实现的优势包括但无需限于基于任何可用的事件促进终端应用和附件功能的动态配置、功能的平台无关的个性化、UI元素的动态生成、信息模型和结果生成的UI模型的可伸缩性、提供来自外部源(例如，其他用户或第三方规则脚本提供者)的规则脚本的能力、使用多个例如传感器的源作为应用控制的事件的能力、以及为应用控制指定手势的能力。 
在一个方面中，本发明至少部分地基于上述的上下文工作室提供本体工具，该上下文工作室是用于基于半自动上下文适配从而实施上下文感知功能的应用个性化工具。在本发明的实施方式中，针对小屏幕移动设备的终端用户进一步开发上下文工作室。借助于增强的词表模型，上下文本体被用于提供UI中可伸缩的表示和轻松的上下文和动作信息的导航。本体词表分层被转换为图形用户界面中的文件夹-文件模型表示。在示例性的实施方式中，根据对本体词表的扩展和修改，可在在线系统中自动地、直接地更新UI元素。规则模型被用于允许在用户界面中系统地管理和呈现上下文动作规则。 
本发明的示例性实施方式进一步开发了上下文工作室概念，或更一般地，为小屏幕移动设备的终端用户开发了用于基于半自动上下文适配的应用个性化工具，使得导航和信息呈现更为优化地针对小 屏幕上的使用而设计。上下文本体和词表模型实现自动地和动态地生成用户界面元素。本体分层被转换成针对用户界面的目录模型表示，由此促进导航。对本体词表的扩展和修改可以被自动地更新到UI。规则模型被用于允许在用户界面中系统地管理和呈现规则。 
图8表示设备100的非限制性实施方式的简化框图，该设备100诸如是移动设备，例如可用于实施本发明的示例性实施方式的移动通信终端。合适的移动设备的非限制性的例子包括但不限于蜂窝电话、个人数字助理(PDA)、便携式计算机、例如数码照相机的图像捕捉设备、游戏设备、音乐存储和播放装置以及包含此类功能的组合的手持单元或终端。移动设备100包括与存储器104(其至少一部分可以是用于存储定义的规则的非易失性存储器(NVM)设备)连接的数据处理器102，该存储器104至少存储用于数据处理器102的操作程序(OP)104A，其中假设操作程序104A根据本发明的实施方式实现方法的执行。移动设备100还包括用户接口106，其包括用于显示UI的显示屏幕106A(或等同的数据呈现设备)和至少一个数据输入(DE)设备106B，例如小键盘或键盘，或定向设备、或触摸屏、或数据输入设备的组合。通过这些组件的使用，使得用户能够定义如通过图1到图7的示例中所示出的规则，接着这些规则被存储在存储器104中。移动设备100还包括至少一个传感器108，例如加速计和/或温度计和/或机械开关和/或位置确定子系统(例如GPS接收机)，其能够感知移动设备100的某个内部和/或环境条件从而为触发状态确定提供数据输入(例如，为了在三维空间中确定移动设备100的方位和/或活动)。注意到这些组件中的至少一些，例如数据处理器102和用户接口106可以物理地位于移动设备100的远端，例如在台式PC或工作站中，以及可以将利用外部用户界面定义的任何规则通过有线或无线的外部连接110输入到移动设备100从而存储在存储器104中。注意上面提到的脚本还可通过有线或无线的外部连接110输入到移动设备100。 
存储器104可以是适合于本地技术环境和可以利用任何合适的 数据存储技术来实施的任何类型，例如基于半导体的存储设备、磁性存储设备和系统、光存储设备和系统、固定存储器和可移动存储器。数据处理器102可以是适合于本地技术环境的任何类型，并且作为非限制性的例子，可以包括一个或多个通用计算机、专用计算机、微处理器、数字信号处理器(DSP)和基于多核的处理器架构的处理器。 
图9是根据一种方法的简化逻辑流程图，该方法可由数据处理器102在操作程序104A的控制下执行从而为移动终端或设备100定义用户界面。该方法包括选择一起形成一种规则的至少一个触发和动作(块A)；根据分层信息模型自动地生成可用事件的目录结构(块B)；从可用的一组事件选择至少一个触发值(块C)；以及定义将要由移动终端或设备100相应地执行的一个动作(块D)。 
本发明的示例性实施方式可由移动设备100的数据处理器执行的计算机软件来实施，例如数据处理器102、或通过硬件、或通过软件和硬件的组合来执行。另外，在这点上，应该注意到图9的逻辑流程图的各种块可代表程序步骤，或互连的逻辑电路、块和功能，或程序步骤和逻辑电路、块和功能的组合。 
鉴于上述的描述，当结合附图和所附权利要求书阅读时，各种修改和适配对于相关领域的技术人员来说将变得明显。但作为一些例子，本领域技术人员可尝试使用其他类似的或等效的触发、动作和移动终端类型。然而，本发明的教导的所有这些和类似的修改仍将落入到本发明的范围内。 
另外，本发明的示例性实施方式的一些功能可在没有其他功能的相应使用的情况下使用以获得优势。同样的，上述的描述应该被认为仅仅是本发明的原理的示例而不是对其的限制。 

Claims (14)

1.一种用于用户针对设备定义用户界面的至少一个方面的方法，包括：
根据分层信息模型自动地显示可用触发事件的目录结构，其中所述用户从可用的一组触发选择至少一个触发值；
根据分层信息模型自动地显示可用动作的另一目录结构，其中所述用户选择可用动作；
根据至少一个选择的触发值和选择的动作生成规则，其中动作将要由所述设备执行。
2.根据权利要求1所述的方法，其中根据由所述设备生成的一个值，所述至少一个触发值被满足。
3.根据权利要求1所述的方法，其中根据由传感器生成的一个值，所述至少一个触发值被满足，所述传感器包括所述设备的一部分。
4.根据权利要求1所述的方法，其中根据所述设备外部生成的一个值，所述至少一个触发值被满足。
5.根据权利要求1所述的方法，其中规则脚本从另一个用户外部地获得。
6.根据权利要求1所述的方法，其中规则脚本从第三方规则脚本提供者外部地获得。
7.一种用于用户针对设备定义用户界面的至少一个方面的装置，包括：
用于根据分层信息模型自动地显示可用触发事件的目录结构的装置，其中所述用户从可用的一组触发选择至少一个触发值；
用于根据分层信息模型自动地显示可用动作的另一目录结构的装置，其中所述用户选择可用动作；
用于根据至少一个选择的触发值和选择的动作生成规则的装置，其中动作将要由所述设备执行。
8.根据权利要求7所述的装置，其中根据由所述设备生成的一个值，所述至少一个触发值被满足。
9.根据权利要求7所述的装置，其中根据由传感器生成的一个值，所述至少一个触发值被满足，所述传感器包括所述设备的一部分。
10.根据权利要求7所述的装置，其中根据所述设备外部生成的一个值，所述至少一个触发值被满足。
11.根据权利要求7所述的装置，其中规则脚本从另一个用户外部地获得。
12.根据权利要求7所述的装置，其中规则脚本从第三方规则脚本提供者外部地获得。
13.根据权利要求7所述的装置，其中从图形描述生成规则，所述图形描述由所述用户利用图形用户界面指定。
14.根据权利要求7所述的装置，包括用于自动地和动态地生成用户界面元素的上下文本体和词表模型，并且其中本体分层被转换为用于所述用户界面的目录模型表示。
CN200580027307XA 2004-07-01 2005-06-29 在移动设备应用个性化方面使用上下文本体的方法和设备 Expired - Fee Related CN101002175B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US58519104P 2004-07-01 2004-07-01
US60/585,191 2004-07-01
PCT/IB2005/001855 WO2006006028A1 (en) 2004-07-01 2005-06-29 Method, apparatus and computer program product to utilize context ontology in mobile device application personalization

Publications (2)

Publication Number Publication Date
CN101002175A CN101002175A (zh) 2007-07-18
CN101002175B true CN101002175B (zh) 2013-04-03

Family

ID=35783553

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200580027307XA Expired - Fee Related CN101002175B (zh) 2004-07-01 2005-06-29 在移动设备应用个性化方面使用上下文本体的方法和设备

Country Status (8)

Country Link
US (1) US8407593B2 (zh)
JP (1) JP4498417B2 (zh)
KR (2) KR20070024737A (zh)
CN (1) CN101002175B (zh)
BR (1) BRPI0513210A8 (zh)
HK (1) HK1102514A1 (zh)
RU (1) RU2355022C2 (zh)
WO (1) WO2006006028A1 (zh)

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9393487B2 (en) * 2002-07-27 2016-07-19 Sony Interactive Entertainment Inc. Method for mapping movements of a hand-held controller to game commands
US8570378B2 (en) 2002-07-27 2013-10-29 Sony Computer Entertainment Inc. Method and apparatus for tracking three-dimensional movements of an object using a depth sensing camera
US20050193370A1 (en) * 2004-02-27 2005-09-01 Goring Brian R. System and method for interactive wireless applications with conditional UI controls and screen navigation
US7271825B2 (en) * 2004-11-04 2007-09-18 Sony Corporation Kinesiological model-based gestural augmentation of voice communication
US20070213045A1 (en) * 2006-03-10 2007-09-13 Jonas Gunnar Hermansson Electronic equipment with data transfer function using motion and method
US20070211573A1 (en) * 2006-03-10 2007-09-13 Hermansson Jonas G Electronic equipment with data transfer function using motion and method
US20070259685A1 (en) * 2006-05-08 2007-11-08 Goran Engblom Electronic equipment with keylock function using motion and method
US7986917B2 (en) * 2006-07-10 2011-07-26 Sony Ericsson Mobile Communications Ab Method and system for data transfer from a hand held device
US20080020733A1 (en) * 2006-07-21 2008-01-24 Tomas Karl-Axel Wassingbo Mobile electronic device with motion detection authentication
US7791594B2 (en) * 2006-08-30 2010-09-07 Sony Ericsson Mobile Communications Ab Orientation based multiple mode mechanically vibrated touch screen display
KR100793057B1 (ko) * 2006-09-01 2008-01-10 한국전자통신연구원 이기종 센서 네트워크 기반의 정보 서비스 생성을 위한ｕｓｎ 미들웨어 장치 및 그 방법과, 그를 이용한 정보서비스 제공 시스템
JP5176300B2 (ja) * 2006-09-22 2013-04-03 富士通株式会社 電子機器、その制御方法及びその制御プログラム
US8224310B2 (en) * 2006-11-15 2012-07-17 Motorola Mobility, Inc. Method and system for managing an electronic device
US8391786B2 (en) * 2007-01-25 2013-03-05 Stephen Hodges Motion triggered data transfer
US20080207125A1 (en) * 2007-02-27 2008-08-28 Motorola, Inc. Method and Apparatus to Facilitate Conforming a Wireless Personal Communications Device to a Local Social Standard
US8375072B1 (en) * 2007-04-12 2013-02-12 United Services Automobile Association (Usaa) Electronic file management hierarchical structure
US8396909B1 (en) * 2007-04-12 2013-03-12 United Services Automobile Association (Usaa) Electronic file management hierarchical structure
US20080280642A1 (en) * 2007-05-11 2008-11-13 Sony Ericsson Mobile Communications Ab Intelligent control of user interface according to movement
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US9760839B1 (en) 2007-07-25 2017-09-12 United Services Automobile Association (Usaa) Electronic recording statement management
US8677285B2 (en) * 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
US8630646B2 (en) * 2008-03-07 2014-01-14 Telefonaktiebolaget L M Ericsson (Publ) Systems and methods for application configuration in a client device
US8170186B2 (en) * 2008-04-07 2012-05-01 Sony Mobile Communications Ab Electronic device with motion controlled functions
US20090273586A1 (en) * 2008-04-30 2009-11-05 Sony Ericsson Mobile Communications Ab Device and method for composing and handling messages
US9208306B2 (en) 2008-08-08 2015-12-08 Assa Abloy Ab Directional sensing mechanism and communications authentication
AU2009279402B2 (en) * 2008-08-08 2015-08-27 Assa Abloy Ab Directional sensing mechanism and communications authentication
US9773362B2 (en) 2008-08-08 2017-09-26 Assa Abloy Ab Directional sensing mechanism and communications authentication
US20100095251A1 (en) * 2008-10-15 2010-04-15 Sony Ericsson Mobile Communications Ab Linkage between motion sensing and position applications in a portable communication device
US8489569B2 (en) * 2008-12-08 2013-07-16 Microsoft Corporation Digital media retrieval and display
CN101763328B (zh) * 2008-12-25 2014-01-15 鸿富锦精密工业（深圳）有限公司 数据传输系统及其方法
US8311577B2 (en) * 2009-06-15 2012-11-13 International Business Machines Corporation Proactive control of mobile communications devices
US20110028194A1 (en) * 2009-07-31 2011-02-03 Razer (Asia-Pacific) Pte Ltd System and method for unified-context mapping of physical input device controls to application program actions
KR20110074017A (ko) * 2009-12-24 2011-06-30 삼성전자주식회사 멀티미디어 기기 및 그 동작 제어 방법
US8150859B2 (en) * 2010-02-05 2012-04-03 Microsoft Corporation Semantic table of contents for search results
US8983989B2 (en) * 2010-02-05 2015-03-17 Microsoft Technology Licensing, Llc Contextual queries
US8260664B2 (en) * 2010-02-05 2012-09-04 Microsoft Corporation Semantic advertising selection from lateral concepts and topics
US8903794B2 (en) * 2010-02-05 2014-12-02 Microsoft Corporation Generating and presenting lateral concepts
US20110231395A1 (en) * 2010-03-19 2011-09-22 Microsoft Corporation Presenting answers
CN101883107B (zh) * 2010-06-18 2014-06-04 华为技术有限公司 实现上下文感知业务应用的方法和相关装置
ITRM20100486A1 (it) * 2010-09-20 2010-12-20 Lozzo Giordano Da Metodo per la visualizzazione e la navigazione/esplorazione di informazioni relazionali riconducibili a grafi su piattaforme di tipo mobile (iphone smartphone mobilephone pda)
CN103109258B (zh) * 2010-09-22 2017-05-24 日本电气株式会社 信息显示装置、显示方法、终端装置
US8644519B2 (en) * 2010-09-30 2014-02-04 Apple Inc. Electronic devices with improved audio
EP2451141B1 (en) 2010-11-09 2018-11-07 BlackBerry Limited Methods and apparatus to display mobile device contents
WO2012129663A1 (en) * 2011-03-31 2012-10-04 C.T. Consultants Inc. Framework for context-aware systems and methods
US8811648B2 (en) 2011-03-31 2014-08-19 Apple Inc. Moving magnet audio transducer
KR20120127987A (ko) * 2011-05-16 2012-11-26 삼성전자주식회사 통화 모드 전환 방법 및 장치
US20130312284A1 (en) * 2011-05-27 2013-11-28 Nike, Inc. Article of Footwear Having Welded Upper
US8521848B2 (en) * 2011-06-28 2013-08-27 Microsoft Corporation Device sensor and actuation for web pages
US9311426B2 (en) * 2011-08-04 2016-04-12 Blackberry Limited Orientation-dependent processing of input files by an electronic device
US8879761B2 (en) 2011-11-22 2014-11-04 Apple Inc. Orientation-based audio
US9207957B2 (en) 2012-04-06 2015-12-08 Accenture Global Services Limited Adaptive architecture for a mobile application based on rich application, process, and resource contexts and deployed in resource constrained environments
US20130290926A1 (en) * 2012-04-30 2013-10-31 Rheti Inc. Semantic code binding to enable non-developers to build apps
CN102681784A (zh) 2012-05-09 2012-09-19 中兴通讯股份有限公司 基于传感器操作移动终端的方法和装置、移动终端
KR102070196B1 (ko) * 2012-09-20 2020-01-30 삼성전자 주식회사 사용자 디바이스에서 상황 인식 서비스 제공 방법 및 장치
US10042603B2 (en) * 2012-09-20 2018-08-07 Samsung Electronics Co., Ltd. Context aware service provision method and apparatus of user device
US8942410B2 (en) 2012-12-31 2015-01-27 Apple Inc. Magnetically biased electromagnet for audio applications
US10649619B2 (en) * 2013-02-21 2020-05-12 Oath Inc. System and method of using context in selecting a response to user device interaction
KR102139931B1 (ko) * 2013-03-14 2020-07-31 삼성전자주식회사 연역적 추론과 귀납적 추론을 결합한 상황 인지 장치 및 방법
CN103235686A (zh) * 2013-03-29 2013-08-07 北京智谷睿拓技术服务有限公司 应用管理方法及装置
CN103558947A (zh) * 2013-11-26 2014-02-05 广东欧珀移动通信有限公司 一种触控终端开关机的方法及触控终端
EP2881899B1 (de) 2013-12-09 2018-09-12 Deutsche Telekom AG System und Verfahren zur automatisierten Aggregation von Beschreibungen individueller Objektvarianten
US20150350141A1 (en) * 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US9760345B2 (en) 2014-07-26 2017-09-12 Alfonso Diez Recursive ontology-based systems engineering
WO2016022496A2 (en) 2014-08-06 2016-02-11 Apple Inc. Reduced-size user interfaces for battery management
CN104182232B (zh) * 2014-08-22 2017-12-15 华为技术有限公司 一种创建上下文感知应用的方法及用户终端
CN115665320A (zh) 2014-09-02 2023-01-31 苹果公司 电话用户界面
US9525943B2 (en) 2014-11-24 2016-12-20 Apple Inc. Mechanically actuated panel acoustic system
US10110394B2 (en) 2015-05-11 2018-10-23 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling the same
US11514058B2 (en) 2017-03-17 2022-11-29 Microsoft Technology Licensing, Llc Context rules for a graph
US11307752B2 (en) * 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11216065B2 (en) * 2019-09-26 2022-01-04 Lenovo (Singapore) Pte. Ltd. Input control display based on eye gaze
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
AU2020458145A1 (en) * 2020-07-10 2023-02-02 Telefonaktiebolaget Lm Ericsson (Publ) Method and device for obtaining user input
KR20220077446A (ko) * 2020-12-02 2022-06-09 삼성전자주식회사 오토메이션 서비스를 지원하는 전자 장치
US11635885B2 (en) 2020-12-02 2023-04-25 Samsung Electronics Co., Ltd. Electronic device for supporting automation services
CN113384899B (zh) * 2021-07-05 2022-10-04 在线途游（北京）科技有限公司 基于规则的运营方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0982959A3 (en) * 1998-08-26 2000-09-13 Nokia Mobile Phones Ltd. Mobile telephone user interface for short messages
US6128012A (en) * 1996-09-19 2000-10-03 Microsoft Corporation User interface for a portable data management device with limited size and processing capability
CN1405691A (zh) * 2001-08-13 2003-03-26 鸿富锦精密工业（深圳）有限公司 利用过滤器为无线设备进行个性化资料抄写的方法
EP0936794A3 (en) * 1998-02-13 2003-05-07 Nokia Corporation Radio communications device with emergency services

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5283856A (en) * 1991-10-04 1994-02-01 Beyond, Inc. Event-driven rule-based messaging system
JP3245348B2 (ja) * 1996-06-05 2002-01-15 富士重工業株式会社 車両用故障診断装置
US6049831A (en) * 1996-11-08 2000-04-11 Gte Laboratories Incorporated System for transmitting network-related information where requested network information is separately transmitted as definitions and display information
US7278106B1 (en) * 1998-07-14 2007-10-02 Computer Associates Think, Inc. Method and apparatus for interacting with a source code control system
US6842877B2 (en) * 1998-12-18 2005-01-11 Tangis Corporation Contextual responses based on automated learning techniques
JP2000293289A (ja) * 1999-04-09 2000-10-20 Hitachi Ltd 携帯型端末装置
US6460180B1 (en) * 1999-04-20 2002-10-01 Webtv Networks, Inc. Enabling and/or disabling selected types of broadcast triggers
WO2001086592A2 (en) * 2000-05-09 2001-11-15 Hnc Software Inc. Approach for generating rules
WO2002099597A2 (en) * 2001-06-07 2002-12-12 Unwired Express, Inc. Method and system for providing context awareness
US6973620B2 (en) * 2001-09-06 2005-12-06 International Business Machines Corporation Method and apparatus for providing user support based on contextual information
US7203635B2 (en) * 2002-06-27 2007-04-10 Microsoft Corporation Layered models for context awareness
DE10305168A1 (de) 2003-01-31 2004-08-26 Volkswagen Ag Benutzerschnittstelle für eine Bedienung von Mobiltelefonen insbesondere in Kraftfahrzeugen
KR100521865B1 (ko) * 2003-05-02 2005-10-17 에스케이 텔레콤주식회사 대화형 인터페이스를 이용한 정보제공 시스템 및 방법
AU2004258349B2 (en) * 2003-07-22 2010-11-11 Kinor Technologies Inc. Information access using ontologies
EP1526457B1 (en) * 2003-10-22 2013-03-13 Sony Deutschland GmbH Context-aware automatic service discovery and execution engine in mobile ad-hoc networks
JP2007537512A (ja) * 2004-04-30 2007-12-20 マイクロソフト コーポレーション エンドユーザルールロジックを定義し、実行するルールフレームワーク
US20060128012A1 (en) * 2004-12-03 2006-06-15 Treena Arinzeh Substrate recognition by differentiable human mesenchymal stem cells

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6128012A (en) * 1996-09-19 2000-10-03 Microsoft Corporation User interface for a portable data management device with limited size and processing capability
EP0936794A3 (en) * 1998-02-13 2003-05-07 Nokia Corporation Radio communications device with emergency services
EP0982959A3 (en) * 1998-08-26 2000-09-13 Nokia Mobile Phones Ltd. Mobile telephone user interface for short messages
CN1405691A (zh) * 2001-08-13 2003-03-26 鸿富锦精密工业（深圳）有限公司 利用过滤器为无线设备进行个性化资料抄写的方法

Also Published As

Publication number Publication date
JP2008504779A (ja) 2008-02-14
BRPI0513210A8 (pt) 2018-04-24
KR20070024737A (ko) 2007-03-02
RU2355022C2 (ru) 2009-05-10
KR100971164B1 (ko) 2010-07-20
WO2006006028A8 (en) 2007-08-09
KR20090031780A (ko) 2009-03-27
CN101002175A (zh) 2007-07-18
US20060005156A1 (en) 2006-01-05
HK1102514A1 (en) 2007-11-23
RU2007102691A (ru) 2008-08-10
BRPI0513210A (pt) 2008-04-29
WO2006006028A1 (en) 2006-01-19
US8407593B2 (en) 2013-03-26
JP4498417B2 (ja) 2010-07-07

Similar Documents

Publication Publication Date Title
CN101002175B (zh) 在移动设备应用个性化方面使用上下文本体的方法和设备
CN108432190B (zh) 应答消息推荐方法及其设备
Dey � Context-Aware Computing
CN106797547B (zh) 操作系统对位置卡的支持
US9219812B2 (en) Mobile terminal
US20170124751A1 (en) Offering menu items to a user
Korpipää et al. Utilising context ontology in mobile device application personalisation
CN101821731B (zh) 通用模型编辑框架
US7506259B1 (en) System and method for dynamic mapping of abstract user interface to a mobile device at run time
US8942679B2 (en) Method and system for providing pattern based enterprise applications for organizing, automating, and synchronizing processes for mobile communication devices
CN112230909B (zh) 小程序的数据绑定方法、装置、设备及存储介质
CN103229141A (zh) 管理用户界面中的工作空间
CN102640101A (zh) 用于提供用户接口的方法及装置
CN108549568A (zh) 应用入口处理方法、装置、存储介质及电子设备
Dumas et al. Design guidelines for adaptive multimodal mobile input solutions
Cardoso et al. PuReWidgets: a programming toolkit for interactive public display applications
CN111722779A (zh) 人机交互方法、终端及计算机可读存储介质
Vermeulen et al. Intelligibility required: How to make us look smart again
Kornilova Adaptive user interface patterns for mobile applications
Kölker et al. A Framework for Context-dependent User Interface Adaptation.
Schlegel et al. Model-based ubiquitous interaction concepts and contexts in public systems
Mugellini et al. Memodules as tangible shortcuts to multimedia information
Yeh et al. Interactive Gigapixel Prints: Large Paper Interfaces for Visual Context, Mobility, and Collaboration
Andreassen et al. Activity-based Interaction Models for Next Generation Mobile Devices
Maaniitty Intelligent Mobile User Interface

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1102514

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1102514

Country of ref document: HK

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160111

Address after: Espoo, Finland

Patentee after: Technology Co., Ltd. of Nokia

Address before: Espoo, Finland

Patentee before: Nokia Oyj

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130403

Termination date: 20170629

CF01 Termination of patent right due to non-payment of annual fee