CN101288042A - 利用分割的图像创建和操作用户界面的方法 - Google Patents

利用分割的图像创建和操作用户界面的方法 Download PDF

Info

Publication number
CN101288042A
CN101288042A CNA2006800380536A CN200680038053A CN101288042A CN 101288042 A CN101288042 A CN 101288042A CN A2006800380536 A CNA2006800380536 A CN A2006800380536A CN 200680038053 A CN200680038053 A CN 200680038053A CN 101288042 A CN101288042 A CN 101288042A
Authority
CN
China
Prior art keywords
image
computer program
button
action
program code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006800380536A
Other languages
English (en)
Inventor
F·拉姆斯坦
E·汉森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Mobile Communications AB
Original Assignee
Sony Ericsson Mobile Communications AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Ericsson Mobile Communications AB filed Critical Sony Ericsson Mobile Communications AB
Publication of CN101288042A publication Critical patent/CN101288042A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了一种用于创建和使用电子设备的图形用户界面的方法和计算机程序产品。在一些方法中，照片被提供作为数字图像，并且该图像的分割部分被定义为图像按钮，通过链接5动作至该分割部分的坐标数据，由该电子设备响应于在该图像按钮上的单击而被执行。代表图像按钮的可单击区域的分割部分可以通过在该数字图像上运行图像分割应用程序来定义，以定义覆盖照片中所描绘的对象的各个分割部分。将被执行的动作可以与该对象相关，例如人，由10图像按钮覆盖，图像按钮例如呈现与该对象相关的信息或初始化与该对象相关的通信地址的通信。

Description

利用分割的图像创建和操作用户界面的方法
技术领域
本发明涉及利用分割的图像作为输入或输出界面以管理、检测、或控制动作和事件的方法，所述输入或输出界面用于例如具有通信能力的电子设备，所述电子设备包括但不限于移动电话、网络连接的计算机，以及在诸如可编程远程控制器的家用设备中。
背景技术
诸如移动电话和计算机的电子设备典型地既包括以按键或按钮形式的用户输入接口，又包括以一个或多个显示器形式的用户输出界面。通常通过扬声器和麦克风还包括音频接口，假如安装了适当的软件，其也可以被用于在电子设备中进行音量控制动作或选择。然而，数据或信息输出主要是受到包括该显示器的图形用户界面的影响。
图形用户界面一般是现实的抽象版本，例如一个人可以被表示成列表中的一个电话号码，而列表中其它电话号码代表其他人。如果你可以读，这对于效率和管理原因是有利的。然而，这种抽象意味着现实的其它品质被丢失，在日常生活中的特定瞬间或一群人的临时星座更难于在移动设备中表现。
近年来很流行个性化个人移动电话的外观。彩色显示器的引入强烈地增加了能够个性化的领域的数目。在一段时间已经能够将铃声信号与电话薄中的联络信息相关联。在因特网上的计算机游戏和讨论论坛中，所谓的化身的使用也可以被看成是用来代表用户，其中例如卡通图的头像被用来代表用户。
今天，高分辨率的彩色显示器甚至被包括在非常小型电子设备中，例如移动电话，并且越来越常见数码相机或者被包括在该电子设备中或者可连接至该电子设备用于捕获图片和在显示器上呈现它们。使用例如电子邮件、MMS、或存储棒，存储在电子设备中的数字图像可以被传送或传输给其它的用户设备用于共享或打印输出。然而，事实上使用在电子设备显示器上显示的图像被限制到纯粹表示图像本身，或用视频用于视频会议。
发明内容
提供了一种改进的方式以管理与在照片中所捕获的人物、地点或其它对象有关的动作或事件，其中在电子设备的显示器上呈现的该照片的数字图像被分割以致于该图像的分割部分(segment)被设置作为用于输入或输出信息或控制信号目的的按钮。这样提供了一种直观并且简明的方式用于控制与可以由图像表示的具体对象相关的动作。
根据本发明的第一实施例，用于为电子设备创建用户界面的方法，包括提供照片作为数字图像，定义作为该数字图像的分割部分的图像区域，并且通过将动作链接到该图像区域来定义图像按钮，当该图像呈现在显示器上时响应于激活该图像区域执行该动作。
根据进一步的实施例，定义该图像区域包括在该数字图像上运行图像分割应用程序以定义覆盖在该照片中描绘的对象的各个分割部分，并且选择由该图像分割识别的分割部分作为该图像区域。
根据进一步的实施例，定义该图像区域包括将一个或多个图像区域标记项放置在该图像中，并且定义该图像区域为由一个或多个图像区域标记项覆盖的区域。
根据进一步的实施例，对象被描绘在该图像按钮的图像区域中，并且该方法进一步包括为该图像按钮存储计算机程序代码，包括与该对象相关联的数据。
根据进一步的实施例，该动作包括呈现与该对象相关联的数据有关的信息。
根据进一步的实施例，该信息包括与该对象相关联的通信地址。
根据进一步的实施例，该数据包括与该对象相关的通信地址，并且将被执行的动作包括初始化从该电子设备到该通信地址的通信。
根据进一步的实施例，该对象是人，并且该计算机程序代码包括该人的虚拟名片。
根据进一步的实施例，该方法进一步包括存储计算机程序代码，包括具有用于该数字图像的图像数据的标签，定义该图像按钮的图像区域的标签，和定义与该图像按钮相关的内容的标签。
根据进一步的实施例，该图像区域覆盖在该图像中的对象，并且该方法进一步包括为描述该对象类型信息的该图像按钮存储计算机程序代码。
根据进一步的实施例，该方法进一步包括为该图像区域存储坐标数据。
根据本发明的第二个实施例，用于操作电子设备的用户界面的方法，包括在电子设备的显示器上将照片显示为数字图像，其中该数字图像的一分割部分被定义为图像按钮，其用于响应激活以执行预先定义的动作、检测该图像按钮的激活、和在该电子设备中执行该预先确定的动作。
根据进一步的实施例，对象被描绘在照片中，其中所述分割部分被定义为图像按钮，并且用于该图像按钮的计算机程序代码被存储在该电子设备的存储器内，包括与该对象相关联的数据，执行该预先确定的动作的步骤包括访问存储器以检索与该对象相关联的数据，并且在显示器上呈现与该数据相关的信息。
根据进一步的实施例，该对象是人，并且该计算机程序代码包括该人的虚拟名片，该方法进一步包括在显示器上呈现与该人相关联的联络信息。
根据进一步的实施例，其中该存储的计算机程序代码包括与该对象相关联的通信地址，执行该预先确定的动作的步骤包括在显示器上呈现与该对象相关联的通信地址。
根据进一步的实施例，其中对象被描绘在照片中，其中所述分割部分被定义为图像按钮，并且用于该图像按钮的计算机程序代码被存储在该电子设备的存储器内，包括与该对象相关的通信地址，执行该预先确定的动作的步骤包括访问存储器以检索该通信地址，并且初始化从该电子设备到该通信地址的通信。
根据本发明的第三个实施例，用于操作图形用户界面的计算机程序产品包括可由具有显示器的电子设备中的处理器执行的计算机程序代码。该计算机程序代码包括具有用于照片的数字图像的图像数据的标签，为作为图像按钮的数字图像的分割部分定义坐标数据的标签，和定义与该图像按钮相关的内容的标签，其中该内容包括计算机程序代码，用于响应检测到该图像按钮的激活由该电子设备执行预先确定的动作。
根据进一步的实施例，该分割部分覆盖在该图像中的对象，该计算机程序代码进一步包括定义该对象类型信息的标签。
根据进一步的实施例，该分割部分覆盖在该图像中的对象，该计算机程序代码进一步包括定义预先确定的动作的标签。
根据进一步的实施例，该计算机程序代码进一步包括多个标签，每一个标签定义多个预先确定的动作。
根据进一步的实施例，该动作包括访问电子设备的存储器以检索与该对象相关联的数据，并且在显示器上呈现与该数据相关的信息。
根据进一步的实施例，该对象是人，并且该计算机程序代码包括该人的虚拟名片。该动作包括在显示器上呈现与该人相关联的联络信息。
根据进一步的实施例，该计算机程序产品进一步包括计算机程序代码，所述计算机程序代码包括与该对象相关联的通信地址。该动作包括在显示器上呈现与该对象相关的该通信地址。
根据进一步的实施例，该计算机程序代码包括与该对象相关联的通信地址。该动作包括访问电子设备的存储器以检索通信地址，并且初始化从该电子设备到该通信地址的通信。
附图说明
所包含的附图提供对本发明的进一步理解并且被合并构成本申请的一部分，其阐述本发明的某些实施例。在附图中：
图1A-1C示意性示出利用传统计算机程序实现的图片的图像分割；
图2A-2C示意性示出利用根据本发明某些实施例的图像分割在人数字图像中图像按钮的创建和使用；
图3示出根据本发明某些实施例的创建图像按钮的方法的流程图；
图4示出根据本发明某些实施例的使用图像按钮的方法的流程图；
图5A-5B示意性示出在与游戏联合的实施例中在数字图像中图像按钮的使用；
图6A-6C示意性示出根据本发明某些实施例的在可控家用设备的数字图像中图像按钮的创建和使用；
图7示意性示出根据本发明某些实施例的使用电子设备触发与图6A-6C的家用设备相关的动作、使用图像按钮的情景；
图8示出包括多个项目的台式机的图像，其可以根据本发明的某些实施例被分割并链接到动作以形成图像按钮；
图9示意性示出根据本发明某些实施例的使用可选项定义该图像按钮的图像域的图像按钮的创建；
图10A和10B示出由在图9中所描述过程的不同实施例定义的作为结果的图像按钮；和
图11示意性示出电子设备的图形用户界面系统，其中可以操作根据本发明某些实施例操作的图像按钮。
具体实施方式
以下将参照附图更加充分地描述本发明的实施例，在其中本发明的实施例将被示出。然而，本发明可以以各种不同的形式实现并且不应该理解为限于此处提出的实施例。而是，这些实施例被提供用来对本发明作彻底和完全的揭示，并且将向本领域技术人员充分阐释本发明的范围。相同的附图标记始终表示相同的元素。
此处使用术语的目的仅仅是为了描述特定实施例而不是意图限制本发明。正如在此处所使用的那样，除非特别表达出来，否则单数形式“一个”、“一”、“这个”也同样意指复数形式。还应该理解：术语“包括”、“包括”、“包含”和/或“包含”在此处使用时是指定所述特征、整体、步骤、操作、元素和/或组件的存在，但是不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其组合的存在或附加。
除非被另外定义，否则在此所使用的所有术语(包括技术术语和科学术语)具有与本发明所属领域的普通技术人员所通常理解的意思相同的含义。还应当理解此处使用的术语应当被解释为具有与它们在本说明书上下文和相关技术中的含义一致的含义，并将不按照理想化或过分正式意义进行解释，除非特别指出在此如此定义之外。
以下参考根据本发明各个实施例的方法、装置(系统)和/或计算机程序产品的流程图和/或结构图来描述本发明。应该理解流程图和/或结构图的每一块、以及流程图和/或结构图中的方块组合可以通过计算机程序指令实现。这些计算机程序指令可以提供给通用计算机、专用计算机、和/或其它可编程数据处理装置的处理器以产生机器，如此经由计算机和/或其它可编程数据处理装置的处理器执行的指令生成用于实现流程图和/或一个结构图块(或多个结构图块)中所指定的功能/动作的装置。
这些计算机程序指令还可以存储在计算机可读存储器中，其可以指示计算机或其它可编程数据处理装置按照特定的方式运行，如此存储在计算机可读存储器中的指令生成包括指令的产品，其中所述指令实现流程图和/或一个结构图块(或多个结构图块)中所指定的功能/动作。
计算机程序指令还可以被装载到计算机或其它可编程数据处理装置上以使得一系列操作步骤在该计算机或其它可编程装置上执行，从而生成计算机执行的处理，如此在计算机或其它可编程装置上执行的指令提供用于实现流程图和/或一个结构图块(或多个结构图块)中所指定的功能/动作的步骤。
相应地，本发明可以被实现为硬件和/或软件(包括固件、常驻软件、微代码，等等)的形式。而且，本发明可以采用计算机可用的或计算机可读的存储介质上的计算机程序产品的形式，其具有在由指令执行系统使用或与指令执行系统相结合的介质中实现的计算机可用的或计算机可读的程序代码。在本文的上下文中，计算机可用的或者计算机可读的介质可以是任何介质，其可以包括、存储、通信、传播或传送由指令执行系统、装置或设备使用或者与之结合使用的程序。
计算机可用的或计算机可读的介质可以是但不局限于电、磁、光、电磁、红外、或半导体系统、装置、设备、或传播介质。计算机可读介质的更多具体的例子(非详尽列表)将包括如下：具有一条或多条线路的电连接、便携式计算机磁盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦可编程只读存储器(EPROM或快闪存储器)、光纤、以及便携式光盘只读存储器(CD-ROM)。注意计算机可用的或计算机可读的介质甚至可以是纸张或另一适合的介质，于其上印刷有程序，因为程序例如可以经由纸张或其它介质的光扫描而以电子方式被获取，然后编译、解释、或按照其它适合的方式处理，如果是必需的话，然后储存在计算机存储器中。
当前描述涉及具有用于呈现图像的显示器的电子设备领域，并且其还具有根据已定义的方案能够检测和处理用户输入信号的控制处理机制。典型地，这样的控制处理机制包括微处理器系统，其包括相关的存储器和软件，被设计用来检测输入信号和依照这些信号初始化动作，例如响应举起电话命令建立连接、响应按下带有符号的按键将该符号呈现在显示器上、等等。本发明的实施例此处被描述成可在以移动电话形式的电子设备中使用。然而，应当注意的是其它类型的电子设备，包括显示器和控制处理机制例如微处理器系统，可被用作实现本发明实施例的平台，包括台式计算机、膝上型计算机、通信器、电子组织者、PDA(个人数字助理)、带有显示器的可编程远程控制器、和数码相机。
本发明的某些实施例或许来源于发明人的实现，其中如果某人可以使用照相机给人或瞬间照相并且使用这个照片作为用于管理的使能器并且初始化代表真实世界动作的事件，这样能够增进用户的经验和对电子设备的使用增加新的品质。根据本发明的某些实施例，在图像中被选择的对象，例如人或电子装置，被相互分离出来和从背景中分离出来，并且分离出来的对象的图像区域接着被编程作为用于用户输入或输出的图像按钮。该图像按钮响应用户的激活。怎样构成激活是选择适用于正在讨论的本申请的技术的问题。一种方式是在触敏式显示器上显示该图像按钮，在其上激活可以通过使用手指、触针或类似物在显示器上点击由该图像按钮覆盖的表面区域实现。另一选择，但是其中不必包括触敏式显示器，而是将该图像按钮显示在显示器上，在其上光标依靠光标控制设备而被移动，光标控制设备例如是鼠标、操纵杆、慢跑球或类似物。图像按钮的激活接着通过将光标置于由图像按钮覆盖的区域内、并按下选择键例如软键来完成。对用户可能优选的还是滚动动作以标记在显示器上呈现的两个或更多图像按钮，并且接着由选择键激活两个或所有被标记的图像按钮。以下展示的描述，词语激活、单击和按下将在不同时机被使用。然而，需要注意的是，除非特别指出，这既可以是由用户直接在触敏式显示器上激活执行又可以通过使用其它用于标记和激活呈现在显示器上的图像按钮的控制装置执行，而且本发明可应用于任何用以激活图像按钮的这种装置。
图像按钮可以被链接到与由该图像按钮代表的对象有关的信息，这样其响应于激活将这些信息在显示器上或以可听见方式呈现。可选地，或附加地，该图像按钮可以响应于激活建立与由该图像按钮代表的对象的连接。该图像按钮还可以高亮显示以响应除按下该图像按钮之外的其它动作，例如从一幅图像的一群人中出来的一个人的分离图像被高亮显示以表明有来自那个人的来电。其它例子将在以下给出。
图像分割是相当成熟的技术用来将图像中的对象从其背景中分离出来。现有若干个已知方法用于执行对象分离，例如阈值技术、基于边缘的方法、基于区域的技术、连接-保持松弛法和面部识别。几个这些技术可以与本发明的实施例相结合使用。图1A示出一个女人的照片，被存储为数字图像。在图1B中，图1A的图像已利用用于彩色图像分割的计算机程序所分割。在图1C中该被分割图像的轮廓图像被示出。被用作分割的计算机程序的现有技术是基于均值偏移算法，用于估计密度梯度的简单的非参数过程，并且是由美国、NJ08855、Piscatawy、罗格斯大学电气和计算机工程系的Dorin Comaniciu和Peter Meer提供，San Juan、Puerto rico于1997年6月发表在Proceedings of IEEE Conference的计算机视觉和模式识别、第750-755页。使用该技术例如可能执行图1A中的图像分割以提供图1C的轮廓信息，从中可以选择和仅高亮显示该女人的眼睛。以相应的方式，一群人的图片可以被分割以将他们中的每个互相分开。根据本发明的一些实施例，图像的一个或多个分割部分接着被链接到存储在该电子设备中的数据，例如用于在分割部分描述的对象的状态或信息数据，或与那个对象有关的命令。
本发明的示例性实施例现在将参考附图进行描述。
图2A纯示意性示出有五个人的一组图像。利用图像分割程序，各个图像部分21、22、23、24和25被定义，每一个代表一群人中的一个，如图2B所示。正如可以从图1的例子中看出，每个人可以获得多于一个的分割部分，而在图2B的简单例子中每个人仅有一个分割部分。这可以通过简单地选择覆盖一个人的所有分割部分并且将它们链接到一个总的分割部分获得，以与多个对象在标准的绘图应用程序中相同的方式，例如在Word，可以被分组。每一部分21-25的图像区域接着被链接到相关的数据或命令，以便创建五个图像按钮。在优选实施例中，该图像按钮与触敏式显示器一起使用，这样当图2A的图片在其上呈现时并且已定义图像部分21-25的其中一个通过按下被激活时，与那个图像部分的对象相关的信息或动作被呈现或触发。在可选实施例中，无需触敏式显示器，图像按钮的激活通过将光标控制设备例如鼠标、操纵杆、慢跑球或类似物操纵的显示光标放置在该图像按钮的图像部分，并按下选择键而实现。
在图2C中，表示中间的人的图像部分23，已被选择。响应于该选择，图像部分23在其它图像部分之上被高亮显示。高亮显示可以通过褪色、模糊或变黑非选择图像部分并且可能是整个背景实现。图像按钮的激活可根据情况触发不同的动作，并且不同的例子将在以下给出。
图3示意性示出了创建图像按钮的主要过程步骤。
在步骤301，利用数码相机或模拟相机捕获图像，并且随后数字化模拟图片，以提供数字图像。
在步骤302，该图像被存储到带有显示器的电子设备中，例如计算机或移动电话。用于捕获图像的照相机也可以被包括在该电子设备中。
在步骤303，该数字图像被分割，目的是为了将在图像中代表不同对象的图像部分彼此分开或从背景中分离出来。这利用图像分割计算机程序实现，其同样也是一个很公知的技术。
在步骤304，一个或多个动作被链接到分离出来的图像部分，其中被分离出来的图像部分通过定义图像中的域充当图像按钮，其可以被激活以自动执行已链接的动作。该动作可以仅仅是信息的呈现，或发出命令以初始化例如通话。
在电子通信设备中，例如移动电话或网络连接的计算机，对于其他人的联络信息经常被存储并且被存储在联络列表中，例如电子电话簿。存储在这样的联络列表中的联络信息典型地包括电话号码和电子邮件地址。在一个实施例中，依照本发明的某些实施例这样的联络列表被链接到图像按钮。这样实施例的例子参照图2-4被描述。
特定组(例如公司部门)的5个成员被捕获在图片中，如图2所示。该图像被存储在电子设备中，其还可以是已经被用于捕获该图像，例如带有内置照相机的移动电话。
数字图像的分割被执行以用于为5个人的每一个标识单独的图像按钮，如图2B所示的。优选地，被用来进行图像分割的计算机程序还适合做出分割建议，通过消除或合并比预定像素尺寸小的细节，并集中于定义大的细节。这是一种在计算机程序代码中的简单设置方式，其可以很容易地由技术人员处理。
每个图像按钮被链接到已存储或已链接到电子设备中的联络列表中的一个位置。图像按钮的动作接着被编程以使得例如通过在它们上单击，图像按钮的激活，自动地建立与在该图像按钮上描绘的那个人的通信连接，通过例如拨打事先存储的电话号码的电话或打开至那个人的新电子邮件地址，如同在联络列表中定义的。
图4示出了用于在这个例子中概述的情形使用图像按钮的一种方式。
在步骤401，依照本发明的某些实施例如同参考图3中给出的已经准备好的图像，包括一个或多个图像按钮，被呈现在电子设备的显示器上。此处需要注意的是带有图像按钮的图像无需真正地在它们被创建的电子设备中使用。相反，图像按钮可充分地共享给其它用户和设备，如同将要被详细解释的。
在步骤402，一个图像按钮，通过在显示器是触敏式显示器时通过在显示器上直接按下定义图像按钮的图像部分，或者通过使用光标和选择按钮被激活。该激活触发链接到图像按钮的动作。
简单的实施例直接转到步骤406，其中自动建立与预置通信地址的通信被初始化。这可以是建立电话通话，或打开寻址到网络地址的文本消息窗口。典型地，该通信地址是在定义该图像按钮的图像部分中呈现的人的地址。
现在有与他人通信有许多不同的方式，使用普通电话、移动电话、传真、电子邮件、SMS、MMS、IP电话等等。在步骤405呈现的一个实施例中，正如在步骤402中的图像按钮的激活因此设计为显示具有可用选项的菜单，例如用以与正在讨论的人联系的不同方式和地址，在其后那些选项的其中之一可被选择。在选择其中一个选项后该过程接着进行步骤406。
在一个更常规的实施例中，在步骤402的图像按钮的第一次激活在步骤403产生呈现菜单的动作，包括多个选项，其中一个可以建立通信。
在步骤404选择那个选项进入步骤405或者进入步骤406，取决于呈现在图像按钮上的人是否有多于一个的通信地址，并且用于处理图像按钮的应用软件是否被编程成第一次显示步骤405的菜单或是在步骤405直接进入一个事先设定的通信地址。
链接到图片的联络列表的提供和使用提供了一种视觉上的吸引和跟踪联络信息的直觉方式。例如用户可能希望向一群人中的多个人发送消息。如果那群人聚集在一幅图像中，如同图2A中的图像，其被分割和存储在用户的电子设备中，这样用户可以写一条文本消息并且接着写地址然后通过激活感兴趣接收者的图像按钮将该条消息发送给该群人的一个可选择子集。
以相应的方式，可以通过使用图像按钮建立到多接收者的电话通话。作为例子，适用于这个目的的特殊键或软键可被用作标准PC键盘的shift按钮。因此，通过按下该特殊键并且接着激活选定数目的图像按钮，那么选定数目的图像按钮将高亮显示并且要么直接激活或者在按下确认键后激活。多个键的激活建立与所选图像按钮上描绘的人的电话通信链路，假设他们都是可用并且能对该通话做出反应。例如这可以被用于建立与多个会议参加者的会议通话。可选地，建立与选定人的PTT(一键通)连接。这种方式，每次初始方的一人以及由该方呼叫的其它人，可以在其他人听时立刻说话。
依照本发明的一个实施例，该图像按钮还可以被用来指示进入的消息，例如电话通话或文本消息。如果进入消息的通信地址之前已经存储在接收电子设备的联络列表中，链接到那个通信地址的图像按钮可以被触发以在该电子设备的显示器上显示，优选地是与可听信号一起。
将图像按钮特征与电子通信设备的联络表链接起来的进一步实施例可以包括定位。假设用于已经给予用户获得某群其他用户的位置信息的权利，例如一个朋友集，位置信息可以被请求或自动地发送给该查询用户的设备。当接收到该位置信息时，被分割的图像例如在图2C中的一个图像可以被用于高亮显示已经被发现在预置的区域内出现的一群人，例如在相同通信网络小区的覆盖区域内。
在本发明的另一个实施例中，图像按钮可以由网络经营者或网络服务提供商使用，用于游戏、买卖和呈现信息。参照图5A和5B描述一个这样的实施例。
在图5A中，运动团队的一些成员被示意性示出，尽管不像在图2A中那么详述。该团队是由mp3播放器的制造商组织的，并且图5A的图片显示团队成员51正拿着他们自己的mp3播放器模型52。图5A的图像被分割并且随后一个或多个覆盖各个团队玩家的被分离出来的图像部分依照本发明的一些实施例被链接到一个或多个动作，并且被分割和链接的图像被用于交易目的。如同一个例子，该制造商可以通过分发该数字分割和数据链接的图像安排组合彩票和广告的活动。用户可以在MMS中接收图5A的图像，并且在电子设备的显示器上观看它，例如移动电话。文本串随同该图像一起被显示，其可以显示该mp3的模型52、制造公司、和他们组织的优秀团体。此外，该文本串将包括由问题提供的竞赛题，其可以通过激活其中一个图像按钮来回答。典型地，该问题可以是“上一季谁得分最多？仔细思考并按下你的选择！值1
Figure A20068003805300151
”。
在图5B中，处理在其上显示图像的该电子设备的用户通过按下图像按钮53做出选择，其碰巧是正确答案。图像按钮53的激活触发了链接到其上的预先定义的动作。典型地，激活可以触发被选玩家的图像部分53以高亮显示，如在图中所示，并且还将用户选择的结果在以文本串或可听消息形式中呈现，例如：“是，约翰史密斯是正确的玩家！你已经赢得我们的新mp3播放器。”实际地址和递送事宜可以以多种方式解决。图像按钮的激活优选还可以自动触发扣除该指示数目。存在处理扣除网络服务的不同的已知方式，并且如果该竞赛题是由网络经营者提供或与网络经营者一致，费用被加到该用户的标准定购账户中。
在本发明的另一个实施例中，分割图像可以被用作数字邀请卡。例如，参加同学聚会的邀请可以包括毕业照的原始图像，在其中每个学生都已经被分割开以为每个人提供图像按钮，之后信息被链接到每个图像按钮，所述信息例如姓名、目前居住地点和职业、等等。当覆盖那个学生的图像按钮例如通过单击被激活时与特定学生相关的信息因此被自动检索并且被显示。
在一个可选实施例中，该图像按钮被用于物体而不是人。图6A示出了照有电视机61、连接至该电视机61的DVD记录器62、和放在电视桌64上的灯63的照片。该照片被存储为数字图像，并且随后被分割以为该电视机61识别一个图像按钮65、为该DVD记录器62识别一个图像按钮66、和为该灯63识别一个图像按钮67。不同的动作接着被链接到每个图像按钮。典型地，当激活其中一个按钮时触发的第一个动作可以是显示与该图像按钮的对象有关的菜单选项，如同在以上整个过程中参照步骤403所述的。对于图像按钮65，该菜单可以例如包括对电视机61的开/关和频道选择。对于图像按钮66，该菜单可以包括开/关、播放/停止/跳读、和用于编程该DVD记录器62以特定定时准则读取和存储媒体信号的菜单选项。对于图像按钮67，该菜单可以包括开/关和定时器功能。
图像按钮65-67在图6A的图像中可以是可见的，例如作为细的轮廓、或完全是不可见的。当其中一个图像按钮通过激活它被选择，例如图像按钮66，对应的按钮优选在图像中高亮显示，例如通过在图6C中的框架。同时，相关联的菜单被呈现(未示出)在图6C的图像中或邻近图6C的图像，或者在同一个电子设备的另一个显示器上。
图7示意性示出了结合图6A-6C描述的图像按钮是如何被使用的。用户有电子设备71，其包括显示器、键盘形式的用户输入接口和光标控制机制或触敏式显示器、响应用户输入选择以触发动作的数据处理系统、和信号收发器装置。典型地，电子设备71是移动电话，其不仅适宜于通过基站的移动网络(例如GSM或WCDMA网络)通信，还适宜于通过短距离无线通信例如WLAN、或直接无线通信例如通过IR或利用像蓝牙的无线电通信。图6A的图像，和将预先设定的动作与分开的图像按钮65-67链接的相关控制数据一起被存储在电子设备71中。该用户可以将包含该图像按钮的图像显示在电子设备71的显示器上。激活其中一个图像按钮将触发相关的动作。被选择的动作还包括发送信号以控制或检索来自由该图像按钮代表的对象的信息。例如，如果电视机按钮65例如通过被单击来激活，并且选择了接通电源，则自动地或在电子设备71的显示器所显示的菜单中进行选择之后，电子设备71必须将接通电源命令中继至该电视机61。这可以通过使用电子设备71的收发器装置连接发送信号、直接至信号接收装置，典型地在电视机61中的天线和相关电子设备来实现。可选地，信号中继站72，例如路由器、集线器或转换器，可以从该电子设备71接收该信号。该中继站72接着，通过导线捆绑(wire-bound)或无线连接，发送接通电源信号至该电视机61。以同样方式，当你远离家时电子设备71可以被用于控制DVD记录器62，以记录你不想错过的节目，或例如控制该灯63并且还可能控制该电视机61在选定的夜间时刻打开以防止潜在的夜贼。中继站72可以被连接到家用电话线路，并且从而还可以通过因特网被连接。此外，中继站72优选地还具有信号传送能力，如此用于对象61-63的状态信息可以被发送至该电子设备71以显示给该用户。
图8示出了另一个实施例，在用户台式计算机的图像中。该图像包括计算机81、调制解调器82、网络照相机83、和包括数码相机的移动电话84，移动电话84被放在支座中。依照本发明的某些实施例，这些不同的对象可以被分割并且链接到不同的动作，作为图像按钮。对移动电话83的一个这样的动作可以例如是发送图像至计算机81。
相同的电子设备从而可以被用作远程控制设备以用于许多不同的装置，例如在图7和8中所示的那些。众所周知电子设备越复杂和越多样化，就越难以以清楚的方式进行分类和呈现不同可使用的应用，并且既然菜单项一般都是非常简单的，在各种不同级浏览大量菜单既浪费时间又易于出错。对于小型装置来说，例如移动电话，其具有相对小的显示器，这尤其是所述情况。本发明的某些实施例为图形用户界面提供了一种解决方案，其合并图像的直观和直接方式特征和内置的按钮，预先设定或者直接引向被链接的动作，或者引向与在图像按钮上描绘的对象有关的正确的子菜单。
通过利用已知的图像分割技术来分离图像中的对象，例如人可以被分割。通过将被分割区域的坐标存储为多边形，它可以在随后的阶段被用来在该图像中标注或标识那个区域。如果你使用这个图片和该区域信息，就可能创建可以被用于触敏式屏幕或普通屏幕的按钮。整个图像接着可以被保存成一种格式，其描述该对象的区域并且也包括该特定对象的信息，例如当该对象是计算机时为IP号码或当该对象是人时为虚拟名片。服务的质量和其它功能当然同样可以被包括。在图像中定义对象区域之后，该图像可以以类可扩展标记语言(xml-like)的格式被存储，其包含该图像本身和按钮。
将图像加到可扩展标记语言(xml)文档中可以以Base64二进制格式编码该图像来实现。不同的按钮可以作为按钮标签被存储在该可扩展标记语言文件中，例如图2B或6B的图像按钮。当该数据应当从该文件中提取出来时则需要特定的“图像按钮生成器”-解析器。利用从该可扩展标记语言文件中解析的信息，具有高亮显示按钮的图像可以被显示。从解析的动作中功能被添加到该按钮。
下面是按钮文件的例子。
这是包含按钮的可扩展标记语言文件的开始标签：
<createdButtons>
这个标签包含以base64编码格式的实际图像：
<buttonimage_dt:dt＝“binary.base64”>450394gvi98sklv743mv934jhdf4j</button_image>
此处是按钮标签：
<button>...</button>
<button>...</button>
...
这是包含按钮的可扩展标记语言文件的结束标签：
</createdButtons>
下面是连接至人的按钮的例子，例如按钮21-25：
<button>
这个标签描述按钮的区域，例如具有其坐标的多边形：
<buttonarea>10，15，11，18，13，17，17，12</buttonarea>
这是用于描述按钮内容的开始标签：
<content>
这个描述什么类型的对象连接到该按钮，在这种情况中是人：
<objectType>person</objectType>
这个人的虚拟名片信息：
<vcard>
BEGIN:VCARD
VERSION:2.1
N:Smith；John
TEL；WORK:+4646123456
TEL；HOME:+4646789101
EMAIL；INTERNET；PREFjohn@johnsmith.com
TEL；CELL:+46701234567
END:VCARD
</vCard>
连接至这个按钮的动作
    <nbrOfActions>12</nbrOfActions>
    <action>voiceCall</action>
    <action>videoCall</action>
    <action>InstantMessage</action>
    <action>SMS</action>
    <action>MMS</action>
    <action>e-mail</action>
    <action>deleteObject</action>
    <action>addAction</action>
    <action>removeAction</action>
    <action>activate Button</action>
    <action>deactivate Button</action>
    </content>
<button>
下面是连接至膝上型计算机的按钮的例子：
<button>
    <buttonarea>10，15，11，18，13，17，17，12</buttonarea>
    <content>
    <objectType>laptop</objectType>
<objectDescription>
<computerName>LittlePapa</computerName>
<IP_Address>10.123.456.789</IP_Address>
<Bluetooth_Address>aAAFFEEDBAC</Bluetooth_Address>
</objectDescription>
<nbrOfActions>9</nbrOfActions>
<action>ExchangeFiles</action>
<action>Remote Control</action>
<action>RemoreScreen</action>
<action>deleteObject</action>
<action>addAction</action>
<action>removeAction</action>
<action>activate Button</action>
<action>deactivate Button</action>
</content>
<button>
在一个实施例中，创建的可扩展标记语言按钮文件从一个电子设备传送至另外一个电子设备，也在后一个电子设备中使用。作为例子，人A已经创建了包含可以在移动电话的显示器上显示的按钮图像的按钮文件，和在图像中的一个或多个分开的按钮区域，具有相关内容。该按钮文件的代码因此确定哪个动作被触发以响应该图像按钮的激活。人A从多个朋友的数字照片中已经创建了正在讨论的图像按钮，并且希望那些朋友可以使用相同类型的接口用于呼叫、发送消息或检索有关那群人的信息。人A因此创建数字消息，例如MMS或将按钮文件作为附件的电子邮件，并经移动电话网络将它发送至至少所描绘朋友中的人B。一旦在人B的移动电话中接收，人B安装该按钮文件的软件。通过包含在按钮文件中的代码，或通过手动调整，现在接收的该图像按钮被链接至人B的移动电话中的联络列表，并且因此准备使用。
在本发明的一个实施例中，用于识别图像按钮区域的手动解决方案被应用。如果没有图像分割或面部识别技术可用或因为某种原因不能工作，用户替代被呈现为框架或具有不同形状的框架集。这些框架可以例如是圆形、方形、矩形，其是可伸缩的或以不同尺寸被提供，这可以被应用于该图像。这使得从选择一个图像形成图像按钮仍然是可能的。图9示意性示出了图片91，类似于图2A中的一个图片，如同以图像按钮生成器模式设置的在电子设备的显示器上显示。在这种情况下，电子设备中没有可用的图像分割软件，并且替代的多个可用的图像区域标记框架已经被显示在显示器上。这些框架包括矩形92和椭圆93，其可以被变形、伸缩和旋转。在图像91中，用户使用可选择的框架92和93通过多个框架94去覆盖人的图像部分至左边，以为了创建图像按钮的域。在随后的步骤中，所使用的框架94被链接在一起至一个图像域95，如在图10A中所示，优选的通过在图像按钮生成器应用程序中构造“链接框架”命令。该聚集的域95现在定义至左边人的图像按钮的区域，依照本发明的某些实施例例如信息的呈现或事件的触发的图像按钮动作被链接至左边。典型地，图像的所有对象、或如在这种情况中的人，通过重复图9和10的处理可以被分离地形成图像按钮。在较低复杂度和易于使用的实施例中，仅仅框架92被给出，例如矩形。该框架可以伸缩或不能伸缩。在图10B中，示出了这样的实施例，其中单独的框架96被放置并且在高度和宽度伸缩以尽可能好的适应至左边的人。尽管那个框架没有遵循很完美地与图像按钮相关的图像区域的轮廓，它仍然提供了有利的解决方案。优选地，该图像按钮当其由光标或类似物标记时被高亮显示，并且显而易见的是，正在讨论的该图像按钮涉及基本占据图像按钮的整个区域的那个人。
然而在另一个实施例中，定义图像按钮的图像区域可以当图像中的图像按钮在显示器上显示时通过为其画轮廓来实现。对于触敏式显示器，这可以通过在显示器上移动触针或手指来实现。可选方案是使用光标和光标控制设备，例如鼠标或操纵杆。
图11示意性揭露了电子设备的图形用户界面，在其上用于使用根据本发明某些实施例的图像按钮的方法可以被使用。该电子设备可以例如是移动电话或计算机。显示器101可通信地连接至微处理器单元102，其依次至少包括计算机处理器CPU和内部存储器MEM。该微处理器单元的硬件进一步与计算机程序产品相关联，其中计算机程序产品包括用于通过使用根据本发明某些实施例的图形用户界面处理在显示器101上呈现信息的软件，和用于检测在显示器上显示的数字图像的分割部分上的单击和响应该检测的单击执行预先确定的动作的软件。为了输入数据至该微处理器单元102，例如为了创建图像按钮或为了操作该电子设备，某些形式的数据输入装置也被连接到此，例如键盘或小键盘103和/或光标控制设备104，例如鼠标、跟踪球或操纵杆。该微处理器单元102还可以连接至外部存储器或数据库105，在诸如移动电话的通信终端的实施例中，存储器105可以是或对应于用户识别模块SIM，该模块可连接至该终端。根据本发明的某些实施例，该计算机程序产品包括计算机程序代码，其可以被存储在该微处理器单元102的存储器MEM中并且当由该微处理器单元执行时，根据在前面附图中所描述的，其触发该微处理器单元在显示器101上呈现图形用户界面，具有响应单击的图像按钮。该微处理器单元102优选地被连接至用于发送和接收数据的收发器单元106。传输设备优选地被连接至收发器单元106，该传输设备例如是用于无线电通信的天线107，或可选地为用于塞绳连接(cordconnection)至其它电子设备的电缆连接器、记忆棒接口、或红外接口。
本发明的各种实施例已经通过适当的方法步骤和在不同的实施例中用于创建和使用图像按钮的操作模式进行了描述。本发明的某些实施例可以使之容易地和直观地从我们的周围使用熟悉的元素并将它们构造成按钮或动作区域。数字或真实世界的对象或图像可以增进用户的经验。尤其是在与触摸屏连接时，它将会比许多其它的解决方案给予更直接的交互并且给予个人接触到的图形用户界面。这可以被用于将动作连接至每个人或一群人以支持通信和例如提高虚拟名片功能。
本发明的某些实施例可有利地用于捕获和存储与任意或短期遭遇相关的信息。一个人可以例如是临时与一群人一起旅行，其不久之后有被遗忘的可能。传统地，你可以给你的临时朋友照相并交换电话号码或地址以为将来使用。然而，该照片可能会被遗失并且存储在你的移动电话中或写在一张纸上的联络信息之后的那个人往往被淡忘。这样，本发明的某些实施例提供了唯一的解决方案，用于将图像链接至与被包括在图像中的人或对象相关的信息。捕获一群朋友的数字图像，分割该图像以创建图像按钮，并且接着添加身份和联络信息至所述人，意味着该图像和信息被链接和存储在一起。该按钮文件接着可以被发送至用于安全存储的地方，例如至带回家的计算机，并且也可以被发送给照片中的其他人。这样，遗失或遗忘关于那些人的信息的风险被最小化。此外，一个简单的共享功能优选地被包括，其可用于这种情景。通过在图像中标记所有的图像按钮和给出共享命令，例如通过使用软键并在菜单中选择“共享给所有人”的命令，带有图像按钮的图像被自动地发送给图像中存在的所有联络人。发送可以预先设置以实现到某特定地址类型，例如通过电子邮件或MMS，或这个选项可以被提供给用户以响应于使得共享给所有人命令。除了使用移动电话的照相机是一个有吸引力的方式外，本发明的实施例对于非基于文本交互例如对于一些不能读或小孩的人群也是有用的。此外，图像的使用以十分有效的方式渡过了任何语言障碍，并且本发明的实施例因此可以十分适宜于增进全球通信。
所描述的实施例包括呈现，或直接连接至，在已定义的图像按钮中所描绘的人的通信地址。应当注意的是，尽管这样，其它类型的对象也可以具有联系通信地址，例如描绘的带有相关电话号码、蓝牙地址或IP地址的通信设备，或例如具有电话号码、电子邮件地址、传真号码等等的公司或协会的建筑物。

Claims (24)

1、一种为电子设备创建用户界面的方法，包括：
提供照片作为数字图像；
定义图像区域，其为该数字图像的分割部分；和
通过将动作链接到该图像区域来定义图像按钮，当该图像被呈现在显示器上时响应于该图像区域的激活而执行该动作。
2、根据权利要求1所述的方法，其中定义所述图像区域包括：
在该数字图像上运行图像分割应用程序以定义覆盖该照片中所描绘的对象的各个分割部分；和
将由所述图像分割确定的分割部分选择作为所述图像区域。
3、根据权利要求1所述的方法，其中定义所述图像区域包括：
将一个或多个图像区域标记项放置在该图像中；和
将该图像区域定义为由所述一个或多个图像区域标记项覆盖的区域。
4、根据权利要求1所述的方法，其中对象被描绘在该图像按钮的图像区域中，并且进一步包括为该图像按钮存储计算机程序代码，该计算机程序代码包括与所述对象相关的数据。
5、根据权利要求4所述的方法，其中所述动作包括呈现与所述数据有关的信息，所述数据与所述对象相关联。
6、根据权利要求4所述的方法，其中所述信息包括与所述对象相关的通信地址。
7、根据权利要求4所述的方法，其中所述数据包括与所述对象相关的通信地址，并且将被执行的所述动作包括初始化从该电子设备到所述通信地址的通信。
8、根据权利要求4所述的方法，其中所述对象是人，并且所述计算机程序代码包括所述人的虚拟名片。
9、根据权利要求1所述的方法，进一步包括存储计算机程序代码，所述计算机程序代码包括用于该数字图像的具有图像数据的标签，定义该图像按钮的图像区域的标签，和定义与该图像按钮相关的内容的标签。
10、根据权利要求9所述的方法，其中所述图像区域覆盖在该图像中的对象，该方法进一步包括为该图像按钮存储计算机程序代码，用于为所述对象描述类型信息。
11、根据权利要求9所述的方法，进一步包括为该图像区域存储坐标数据。
12、一种用于操作电子设备的用户界面的方法，包括：
在电子设备的显示器上将照片显示为数字图像，其中该数字图像的分割部分被定义为图像按钮，其用于响应激活以执行预先定义的动作；
检测该图像按钮的激活；和
在所述电子设备中执行所述预先确定的动作。
13、根据权利要求12所述的方法，其中对象被描绘在照片中，其中所述分割部分被定义为所述图像按钮，并且用于该图像按钮的计算机程序代码被存储在该电子设备的存储器内，该计算机程序代码包括与所述对象相关的数据，其中执行所述预先确定的动作的步骤包括：
访问所述存储器以检索与所述对象相关的数据；和
在所述显示器上呈现与所述数据相关的信息。
14、根据权利要求13所述的方法，其中所述对象是人，并且所述计算机程序代码包括所述人的虚拟名片，该方法进一步包括在所述显示器上呈现与所述人相关的联络信息。
15、根据权利要求13所述的方法，其中该存储的计算机程序代码包括与所述对象相关的通信地址，执行所述预先确定的动作的步骤包括在所述显示器上呈现与所述对象相关的所述通信地址。
16、根据权利要求12所述的方法，其中对象被描绘在照片中，其中所述分割部分被定义为所述图像按钮，并且用于该图像按钮的计算机程序代码被存储在该电子设备的存储器内，该计算机程序代码包括与所述对象相关的通信地址，其中执行所述预先确定的动作的步骤包括：
访问所述存储器以检索所述通信地址；和
初始化从该电子设备到所述通信地址的通信。
17、一种用于操作图形用户界面的计算机程序产品，该计算机程序产品包括可由具有显示器的电子设备中的处理器执行的计算机程序代码，该计算机程序代码包括：
包括用于照片的数字图像的图像数据的标签；
为作为图像按钮的数字图像的分割部分定义坐标数据的标签；和
定义与该图像按钮相关的内容的标签，其中所述内容包括计算机程序代码，用于由所述电子设备执行预先定义的动作以响应检测到该图像按钮的激活。
18、根据权利要求17所述的计算机程序产品，其中所述分割部分覆盖图像中的对象，该计算机程序代码进一步包括为所述对象定义类型信息的标签。
19、根据权利要求17所述的计算机程序产品，其中所述分割部分覆盖图像中的对象，该计算机程序代码进一步包括定义所述预先定义的动作的标签。
20、根据权利要求19所述的计算机程序产品，该计算机程序代码进一步包括多个标签，每一个标签定义多个预先定义的动作。
21、根据权利要求19所述的计算机程序产品，其中所述动作包括：
访问该电子设备的存储器以检索与所述对象相关的数据；和
在所述显示器上呈现与所述数据相关的信息。
22、根据权利要求19所述的计算机程序产品，其中所述对象是人，并且所述计算机程序代码包括所述人的虚拟名片，其中所述动作包括在所述显示器上呈现与所述人相关的联络信息。
23、根据权利要求19所述的计算机程序产品，进一步包括计算机程序代码，其包括与所述对象相关的通信地址，其中所述动作包括在所述显示器上呈现与所述对象相关的所述通信地址。
24、根据权利要求19所述的计算机程序产品，进一步包括计算机程序代码，其包括与所述对象相关的通信地址，其中所述动作包括：
访问该电子设备的存储器以检索所述通信地址；和
初始化从该电子设备到所述通信地址的通信。
CNA2006800380536A 2005-10-14 2006-10-05 利用分割的图像创建和操作用户界面的方法 Pending CN101288042A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/250,883 US20070086773A1 (en) 2005-10-14 2005-10-14 Method for creating and operating a user interface
US11/250,883 2005-10-14

Publications (1)

Publication Number Publication Date
CN101288042A true CN101288042A (zh) 2008-10-15

Family

ID=37421114

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006800380536A Pending CN101288042A (zh) 2005-10-14 2006-10-05 利用分割的图像创建和操作用户界面的方法

Country Status (4)

Country Link
US (1) US20070086773A1 (zh)
EP (1) EP1938176A1 (zh)
CN (1) CN101288042A (zh)
WO (1) WO2007042460A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102577348A (zh) * 2009-08-24 2012-07-11 三星电子株式会社 发送图像的方法以及应用该方法的图像拾取设备
CN113016011A (zh) * 2018-09-26 2021-06-22 佳殿玻璃有限公司 用于基底、涂覆品、中空玻璃单元等的增强现实系统和方法

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
US8117268B2 (en) * 2006-04-05 2012-02-14 Jablokov Victor R Hosted voice recognition system for wireless devices
US8510109B2 (en) 2007-08-22 2013-08-13 Canyon Ip Holdings Llc Continuous speech transcription performance indication
JP4823135B2 (ja) * 2006-05-22 2011-11-24 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 情報処理装置、情報処理方法、情報処理プログラム、及び携帯端末装置
US9241056B2 (en) * 2006-06-22 2016-01-19 Sony Corporation Image based dialing
US8478250B2 (en) 2007-07-30 2013-07-02 Bindu Rama Rao Interactive media management server
US8380175B2 (en) * 2006-11-22 2013-02-19 Bindu Rama Rao System for providing interactive advertisements to user of mobile devices
US11256386B2 (en) 2006-11-22 2022-02-22 Qualtrics, Llc Media management system supporting a plurality of mobile devices
US7983611B2 (en) * 2006-11-22 2011-07-19 Bindu Rama Rao Mobile device that presents interactive media and processes user response
US8700014B2 (en) 2006-11-22 2014-04-15 Bindu Rama Rao Audio guided system for providing guidance to user of mobile device on multi-step activities
US10803474B2 (en) 2006-11-22 2020-10-13 Qualtrics, Llc System for creating and distributing interactive advertisements to mobile devices
JP2008158788A (ja) * 2006-12-22 2008-07-10 Fujifilm Corp 情報処理装置および情報処理方法
US9973450B2 (en) 2007-09-17 2018-05-15 Amazon Technologies, Inc. Methods and systems for dynamically updating web service profile information by parsing transcribed message strings
US8352264B2 (en) 2008-03-19 2013-01-08 Canyon IP Holdings, LLC Corrective feedback loop for automated speech recognition
US8144944B2 (en) * 2007-08-14 2012-03-27 Olympus Corporation Image sharing system and method
US8072432B2 (en) * 2008-01-15 2011-12-06 Sony Ericsson Mobile Communications Ab Image sense tags for digital images
EP2106105A1 (en) * 2008-03-25 2009-09-30 Mobinnova Hong Kong Limited Phone dialing method
US20100056188A1 (en) * 2008-08-29 2010-03-04 Motorola, Inc. Method and Apparatus for Processing a Digital Image to Select Message Recipients in a Communication Device
JP2010134785A (ja) * 2008-12-05 2010-06-17 Toshiba Corp 顔認証を利用した情報処理方法および情報表示装置
CN102025827A (zh) * 2009-09-22 2011-04-20 鸿富锦精密工业（深圳）有限公司 通信装置及其基于照片显示的通话方法
US20130047124A1 (en) * 2010-02-23 2013-02-21 Henry John Holland Menu System
KR101728703B1 (ko) * 2010-11-24 2017-04-21 삼성전자 주식회사 휴대 단말기 및 그 휴대 단말기에서 배경 이미지 활용 방법
US20130187862A1 (en) * 2012-01-19 2013-07-25 Cheng-Shiun Jan Systems and methods for operation activation
US9047795B2 (en) 2012-03-23 2015-06-02 Blackberry Limited Methods and devices for providing a wallpaper viewfinder
EP2642384B1 (en) * 2012-03-23 2016-11-02 BlackBerry Limited Methods and devices for providing a wallpaper viewfinder
US20130323706A1 (en) * 2012-06-05 2013-12-05 Saad Ul Haq Electronic performance management system for educational quality enhancement using time interactive presentation slides
US20140344857A1 (en) * 2013-05-17 2014-11-20 Aereo, Inc. User Interface for Video Delivery System with Program Guide Overlay
KR20150025293A (ko) * 2013-08-28 2015-03-10 삼성전자주식회사 화면 구성 방법 및 그 전자 장치
EP3149662A4 (en) * 2014-05-30 2018-05-23 The Regents of The University of Michigan Brain-computer interface for facilitating direct selection of multiple-choice answers and the identification of state changes
EP2990923A1 (en) * 2014-08-28 2016-03-02 Samsung Electronics Co., Ltd Image display device and method
EP3672478A4 (en) 2017-08-23 2021-05-19 Neurable Inc. BRAIN COMPUTER INTERFACE WITH HIGH SPEED EYE TRACKING
US10664050B2 (en) 2018-09-21 2020-05-26 Neurable Inc. Human-computer interface using high-speed and accurate tracking of user interactions
CN112804445B (zh) * 2020-12-30 2022-08-26 维沃移动通信有限公司 显示方法、装置和电子设备
US20220318334A1 (en) * 2021-04-06 2022-10-06 Zmags Corp. Multi-link composite image generator for electronic mail (e-mail) messages

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5406389A (en) * 1991-08-22 1995-04-11 Riso Kagaku Corporation Method and device for image makeup
US5491783A (en) * 1993-12-30 1996-02-13 International Business Machines Corporation Method and apparatus for facilitating integrated icon-based operations in a data processing system
US5721851A (en) * 1995-07-31 1998-02-24 International Business Machines Corporation Transient link indicators in image maps
US5874966A (en) * 1995-10-30 1999-02-23 International Business Machines Corporation Customizable graphical user interface that automatically identifies major objects in a user-selected digitized color image and permits data to be associated with the major objects
WO2001016669A2 (en) * 1999-08-30 2001-03-08 Iterated Systems, Inc. Data management
EP1305893A4 (en) * 2000-07-10 2003-09-24 Viven Ltd BROADCASTING CONTENT ON CELLULAR TELEPHONES
US6943774B2 (en) * 2001-04-02 2005-09-13 Matsushita Electric Industrial Co., Ltd. Portable communication terminal, information display device, control input device and control input method
KR100430054B1 (ko) * 2001-05-25 2004-05-03 주식회사 씨크롭 리니어 지문 검출센서를 이용한 지문획득 방법
JP3864246B2 (ja) * 2001-05-30 2006-12-27 インターナショナル・ビジネス・マシーンズ・コーポレーション 画像処理方法、画像処理システムおよびプログラム
JP4051978B2 (ja) * 2002-03-27 2008-02-27 日本電気株式会社 携帯電話機
US20030211856A1 (en) * 2002-05-08 2003-11-13 Nokia Corporation System and method for facilitating interactive presentations using wireless messaging
US8611919B2 (en) * 2002-05-23 2013-12-17 Wounder Gmbh., Llc System, method, and computer program product for providing location based services and mobile e-commerce
US7716715B2 (en) * 2003-01-10 2010-05-11 Shaobo Kuang Interactive media system
US20040145574A1 (en) * 2003-01-29 2004-07-29 Xin Zhen Li Invoking applications by scribing an indicium on a touch screen
JP4059802B2 (ja) * 2003-04-17 2008-03-12 株式会社サピエンス 画像表示方法
US20050071761A1 (en) * 2003-09-25 2005-03-31 Nokia Corporation User interface on a portable electronic device
US20050076013A1 (en) * 2003-10-01 2005-04-07 Fuji Xerox Co., Ltd. Context-based contact information retrieval systems and methods
US7996470B2 (en) * 2003-10-14 2011-08-09 At&T Intellectual Property I, L.P. Processing rules for digital messages
US7317449B2 (en) * 2004-03-02 2008-01-08 Microsoft Corporation Key-based advanced navigation techniques
US7469060B2 (en) * 2004-11-12 2008-12-23 Honeywell International Inc. Infrared face detection and recognition system
KR100832800B1 (ko) * 2007-02-03 2008-05-27 엘지전자 주식회사 후보 전화번호를 제공하는 이동통신 단말기 및 그 제어방법
US8711102B2 (en) * 2007-06-15 2014-04-29 Microsoft Corporation Graphical communication user interface with graphical position user input mechanism for selecting a display image

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102577348A (zh) * 2009-08-24 2012-07-11 三星电子株式会社 发送图像的方法以及应用该方法的图像拾取设备
CN102577348B (zh) * 2009-08-24 2016-06-15 三星电子株式会社 发送图像的方法以及应用该方法的图像拾取设备
US9912870B2 (en) 2009-08-24 2018-03-06 Samsung Electronics Co., Ltd Method for transmitting image and image pickup apparatus applying the same
CN113016011A (zh) * 2018-09-26 2021-06-22 佳殿玻璃有限公司 用于基底、涂覆品、中空玻璃单元等的增强现实系统和方法

Also Published As

Publication number Publication date
EP1938176A1 (en) 2008-07-02
US20070086773A1 (en) 2007-04-19
WO2007042460A1 (en) 2007-04-19

Similar Documents

Publication Publication Date Title
CN101288042A (zh) 利用分割的图像创建和操作用户界面的方法
CN204856601U (zh) 连续性
US8775526B2 (en) Iconic communication
JP5460995B2 (ja) 携帯端末機及びその動作制御方法
US8375327B2 (en) Iconic communication
CN110134484B (zh) 消息图标的显示方法、装置、终端及存储介质
KR102480325B1 (ko) 사용자 구성가능한 그래픽 구조들의 공유
US7669135B2 (en) Using emoticons, such as for wireless devices
Ballard Designing the mobile user experience
US11115524B1 (en) Communication device
JP6060109B2 (ja) チャットサービス提供方法及び装置
CN109691073A (zh) 包括多个显示器的电子设备及其操作方法
CN109981908A (zh) 用于增强的用户交互的图像数据
US20180338026A1 (en) Voice communication method
CN103197874A (zh) 电子装置及在电子装置属于不同状态同步显示内容的方法
EP1853987A1 (en) Offering menu items to a user
CN102763079A (zh) 用自定义控件取代键盘的应用程序编程接口(api)
CN111565143B (zh) 即时通信方法、设备及计算机可读存储介质
US20220131822A1 (en) Voice communication method
KR20180021316A (ko) 문자 입력 및 컨텐츠 추천을 위한 통합 키보드
CN113448468A (zh) 电子设备和由电子设备执行的处理信息的方法
CN102486717A (zh) 信息处理设备和图像显示方法
CN110324485A (zh) 基于通信接收方偏好切换通信模式的设备、方法和系统
CN110471589A (zh) 信息显示方法及终端设备
CN101375230A (zh) 用于修改对本原应用的输入以呈现修改的输出的游戏设备、方法和计算机程序产品

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20081015