CN100435079C - 移动终端,鼠标应用程序,以及利用移动终端作为无线鼠标装置的方法 - Google Patents

移动终端,鼠标应用程序,以及利用移动终端作为无线鼠标装置的方法 Download PDF

Info

Publication number
CN100435079C
CN100435079C CNB2006100641985A CN200610064198A CN100435079C CN 100435079 C CN100435079 C CN 100435079C CN B2006100641985 A CNB2006100641985 A CN B2006100641985A CN 200610064198 A CN200610064198 A CN 200610064198A CN 100435079 C CN100435079 C CN 100435079C
Authority
CN
China
Prior art keywords
camera unit
short
mouse
portable terminal
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2006100641985A
Other languages
English (en)
Other versions
CN1991709A (zh
Inventor
椎名敬
田中亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sinai Putelake Co
Sony Corp
Original Assignee
Sony Ericsson Mobile Communications Japan Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Ericsson Mobile Communications Japan Inc filed Critical Sony Ericsson Mobile Communications Japan Inc
Publication of CN1991709A publication Critical patent/CN1991709A/zh
Application granted granted Critical
Publication of CN100435079C publication Critical patent/CN100435079C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • G06F3/0317Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/02Details of telephonic subscriber devices including a Bluetooth interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/04Details of telephonic subscriber devices including near field communication means, e.g. RFID

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • Telephone Function (AREA)
  • Telephone Set Structure (AREA)
  • Selective Calling Equipment (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明提供一种具有对物体成像的摄像机单元的移动终端。该移动终端包括移动判断单元,在鼠标模式中根据通过摄像机单元顺序拍摄的图像之间的变化确定移动终端主体移动的方向和距离;短距离无线通信单元,以及控制单元,控制短距离无线通信单元通过短距离无线方式将表示由移动判断单元确定的方向和距离的信息发送到操作装置,其包括显示单元并且根据接收到的表示方向和距离的信息控制在显示单元上显示的指示符。

Description

移动终端,鼠标应用程序,以及利用移动终端作为无线鼠标装置的方法
相关申请的交叉引用
本发明包含关于2005年10月24日在日本特许厅提交的日本专利申请JP2005-309146的主题,其整个内容在此结合作为参考。
技术领域
本发明涉及适用于移动装置的移动终端,例如移动电话,个人手持电话系统(PHS),以及个人数字助理(PDA),这些装置分别具有摄像功能和无线通信功能,例如基于蓝牙(注册商标)或者红外数据连接关系(IrDA)的短距离无线通信功能,或者基于射频识别信息(RFID)的非接触无线通信功能。更具体的是,本发明涉及一种作为上述的移动装置、可以具有无线鼠标功能的移动终端,鼠标应用程序,以及利用该移动终端作为无线鼠标装置的方法。
背景技术
日本未经审查的专利申请公开2004-164559(专利文献1)公开了一种移动终端,其中在显示单元中显示的指示符(pointer)可以根据通过为终端主体提供的摄像机所拍摄的图像之间的变化(shift)而移动。
在此移动终端中,当指向模式(pointing mode)被规定时,摄像机依次拍摄操作桌表面的图像,移动终端被放置在所述操作桌上并且被操作。两个依次拍摄的图像被比较,从而获得两个图像之间的变化。根据该变化确定移动终端所移动的方向和距离。在显示单元上显示的指示符根据该方向和距离移动。因而,在为移动终端提供的显示单元上显示的指示符可以被移动。
通常,当携带一个笔记本式个人计算机时,用户也携带一个专用的鼠标装置。用户将该鼠标装置连接到计算机,然后在远处使用该计算机。
发明内容
不利地是,用户在笔记本式个人计算机之外还携带鼠标装置是不方便的,因为所要携带的物品数目增加。
在专利文献1所公开的移动终端中,在显示单元上显示的指示符被移动并且显示单元被合并在该移动终端中。换句话说,在移动终端的显示单元上显示的指示符被控制。不利地是,移动远离移动终端的台式或者笔记本式个人计算机的监视器上显示的指示符很困难。
考虑到上述缺点而做出本发明。期望提供一种能够移动物理上与移动终端分离的显示器上所显示的指示符的移动终端,鼠标应用程序,以及利用移动终端作为无线鼠标装置的方法。利用该移动终端,消除了与例如笔记本式个人计算机一起携带专用鼠标装置的需要。
根据本发明的一个实施例,提供一种具有对物体进行成像的摄像机单元的移动终端,包括:移动判断单元,在鼠标模式中根据通过摄像机单元顺序拍摄的图像之间的变化确定移动终端主体所移动的方向和距离;短距离无线通信单元;以及控制单元,用于控制短距离无线通信单元通过短距离无线方式发送表示由移动判断单元确定的所述方向和距离的信息到一个操作装置,该操作装置包括显示单元并且根据接收到的表示方向和距离的信息控制在显示单元上显示的指示符。
根据本发明的另一实施例,提供一种鼠标应用程序,其允许计算机用作:移动判断控制装置,用于控制移动判断装置根据通过摄像机单元顺序拍摄的图像之间的变化确定具有摄像机单元的主体移动的方向和距离;以及短距离无线通信控制装置,用于控制短距离无线通信装置通过短距离无线方式发送表示通过允许计算机用作移动判断控制装置而确定的方向和距离的信息到一个操作装置,该操作装置包括显示装置并且根据接收到的表示方向和距离的信息控制在显示装置上显示的指示符。
根据本发明的另一实施例,提供一种利用移动终端作为无线鼠标装置的方法,该方法包括步骤:通过包含在该移动终端中的摄像机单元顺序拍摄的图像之间的变化确定移动终端的主体移动的方向和距离;以及通过短距离无线方式发送表示确定的方向和距离的信息到一个操作装置,该操作装置包括显示装置并根据接收到的表示方向和距离的信息控制在显示装置上显示的指示符。
根据本发明的上述实施例,移动终端的主体所移动的方向和距离根据借助于包含在该移动终端中的摄像机单元顺序拍摄的图像之间的变化而确定。表示所确定的方向和距离的信息通过短距离无线方式发送到操作装置,该操作装置包括显示单元并根据接收到的信息移动在该显示单元上显示的指示符。因而,该移动终端可以被用作无线鼠标装置。
根据本发明的实施例,移动终端可以用作无线鼠标装置。因此,不必在例如笔记本式个人计算机之外携带专用鼠标装置。
附图说明
图1是根据本发明的一个实施例的一种移动电话的框图;
图2A到2C是根据本实施例移动电话的外部视图;
图3是示出根据本实施例作为无线鼠标装置操作的移动电话的示意图;
图4是鼠标模式操作的流程图,其中根据本实施例的移动电话用作无线鼠标装置;
图5是一个示意图,示出了根据本实施例的移动电话用作无线鼠标装置并且使用该移动电话移动在个人计算机的监视器上显示的指示符的状态;
图6是根据本实施例在移动电话的鼠标模式中计算运动矢量的处理过程的流程图;以及
图7A和7B是说明根据本实施例在移动电话的鼠标模式中计算运动矢量的处理过程的示意图。
具体实施方式
本发明可以被用于一种具有摄像功能和无线通信功能的移动电话,例如具有几十厘米的无线电通信距离的基于射频识别信息(RFID)的非接触通信功能或者具有几十米的无线电通信距离的基于蓝牙(注册商标)或者红外数据连接关系(IrDA)的短距离无线通信功能。
移动电话的结构
电学结构
参考图1,根据本发明的一个实施例的一种移动电话包括天线1,通信电路2,扬声器单元3,麦克风单元4,显示单元5,以及操作单元6。通信电路2通过天线1与基站进行无线通信。扬声器单元3产生声学输出,例如呼入(来电)响铃声和接收到的语音。麦克风单元4采集将被发送的语音。显示单元5显示图像,例如活动图像和静止图像,和文本。操作单元6用于预定输入操作。
该移动电话进一步包括发光单元7(发光二极管(LED)),摄像机单元8,振动单元9,短距离无线通信天线10,以及短距离无线通信单元11。该发光单元7使用光来指示呼入和呼出。摄像机单元8拍摄所需物体的静止或者活动图像。振动单元9振动移动电话的主体来向用户通知来电。短距离无线通信天线10和短距离无线通信单元11例如具有几十米的无线通信距离。在移动电话用作无线鼠标装置的鼠标模式中,短距离无线通信单元11通过短距离无线通信天线10以无线电方式发送关于运动矢量的信息(运动矢量信息),运动矢量相应于移动电话的移动。
另外,该移动电话包括运动矢量计算单元12,存储器13,以及控制单元14。在鼠标模式中,运动矢量计算单元12计算相应于移动电话的移动的运动矢量来产生运动矢量信息。存储器13存储用于通信处理的通信处理程序(通信程序),各种应用程序,当移动电话用作音乐播放器时将被播放的音乐数据,日程表,电话簿,发送和接收到的电子邮件的数据,以及呼叫的呼叫历史和电子邮件。控制单元14控制整个移动电话的操作。
存储在存储器13中的应用程序的例子包括音乐播放器程序,摄像机控制程序,鼠标应用程序,以及短距离无线通信程序。当用户使用移动电话作为音乐播放器时该音乐播放器程序被启动。当用户使用摄像机单元8拍摄所需物体时该摄像机控制程序被启动。当用户使用移动电话作为无线鼠标装置时该鼠标应用程序被启动。该短距离无线通信程序用于在鼠标应用程序执行期间通过运动矢量计算单元12所产生的运动矢量信息的短距离无线传输。
外部结构
图2A是根据本实施例的移动电话的主视图。图2B是该移动电话的后视图。图2C是该移动电话的侧视图。参考图2A到2C,该移动电话是一种滑动型的,即上、下部分20和21是可以相对彼此在部分20和21的纵向方向上滑动的。
上部分20包括显示单元5,可旋转操作单元22,挂机键23,摘机键24,第一软键25,以及第二软键26。可旋转的操作单元22靠近显示单元5的下侧端被放置。挂机键23和摘机键24被配置成使得可旋转操作单元22被设置在其间。第一软键25远离显示单元5设置在挂机键23下方。第二软键26远离显示单元5设置在摘机键24下方。下部分21包括主操作单元,例如数字键盘。当上、下部分20和21相对彼此滑动时,该主操作单元被露出。
可旋转操作单元22包括输入键27,轻推表盘(jog dial)28,以及可旋转操作键29。该轻推表盘28与输入键27同心并围绕输入键27。可旋转操作键29也与输入键27同心并围绕轻推表盘28。
输入键27是按压型的。可旋转操作键29是可360度旋转的。轻推表盘28是按压型的。该轻推表盘28的上、下、右、左、右上、左下部分可以被按压。
参考图2B,下部分21包括摄像机单元8和用于照明的发光单元30。发光单元30靠近摄像机单元8。摄像机单元8和发光单元30在非成像模式中被摄像机盖31遮盖。在成像模式中,摄像机盖31在下部分21的纵向滑动来露出摄像机单元8和发光单元30。
当用户使用移动电话作为无线鼠标装置时,用户手持该移动电话,使得用户的手掌位于上部分20的显示单元5上,中指放在第一软键25上,食指放在第二软键26上,如图3中通过虚线示出。
当鼠标应用程序被启动时,第一软键25用作右点击键而第二软键26用作左点击键。该鼠标应用程序提供一种″键-和-摄像机(键+摄像机)模式″和一种″键模式″。在键+摄像机模式中,该移动电话的主体的移动根据通过摄像机单元8拍摄的图像被确定,来移动指示符。在键模式中,轻推表盘28用作方向键来移动指示符。
在用户选择了键+摄像机模式的情况下,用户在如上面所述那样手持移动电话时移动移动电话的主体,因而移动了指示符。用户使用中指操作第一软键25、等同于右点击,并且使用食指操作第二软键26、等同于左电击。
在用户选择了键模式的情况下,用户当如上所述那样手持移动电话时用食指或者中指按压轻推表盘28因而移动了指示符。用户使用中指操作第一软键25、等同于右点击,并且使用食指操作第二软键26、等同于左点击。
关于键+摄像机模式和键模式,用户可以通过按压图2A和3所示的鼠标模式改变键33将所选择的方式切换到另一模式。控制单元14设置键+摄像机模式作为默认模式。然后每当该鼠标模式改变键33被按下时,鼠标模式在键+摄像机模式和键模式之间切换。
在键+摄像机模式中,移动电话所移动的方向和距离根据通过摄像机单元8拍摄的图像来确定,如下面将要描述的。因此,该移动电话可以象普通鼠标装置一样在一个平面上二维移动来移动指示符。另外,该移动电话可以在所要求的空间中三维移动来移动指示符。
在移动电话象普通鼠标装置一样在一个平面上二维移动以便移动指示符的情况下,如图2C所示,该摄像机单元8的摄像机盖31与操作平面接触(移动电话在该操作平面上放置并操作),因而在摄像机单元8和操作平面之间提供了一个合适的空隙。该空隙等于摄像机盖31的厚度。因此,即使当摄像机单元8接近操作平面的时候,操作平面的良好的图像也可以被拍摄。
在本实施例中,摄像机单元8设置在下部分21上。摄像机单元8可以设置在上部分20或者设置在上部分20或者下部分21中任何一个的侧面。
无线鼠标操作
当使用该移动电话作为无线鼠标装置时,用户通过操作单元6从功能选择菜单中选择鼠标功能。当控制单元14检测鼠标功能的选择时,单元14读出存储在存储器13中的鼠标应用程序并开始图4流程图所示的处理过程。
在该流程开始的时候,控制单元14执行初始化来清除通过摄像机单元8拍摄的图像和在鼠标应用程序的先前执行中计算的数值,然后进行到步骤S2。
如上所述,当激活鼠标应用程序时,控制单元14设置键+摄像机模式为默认模式。在键+摄像机模式中,主体的移动根据通过摄像机单元8拍摄的图像来确定,从而移动指示符。可以通过按压鼠标模式改变键33在键+摄像机模式和键模式之间切换鼠标模式,在键模式中使用轻推表盘28作为方向键移动指示符。
在步骤S2中,控制单元14检测鼠标模式改变键33的按压是否存在,从而确定是否给出了改变鼠标模式的指令。当控制单元14没有检测到鼠标模式改变键33的按压时,这意味着用户没有给出改变鼠标模式的指令。该控制单元14进行步骤S3的处理来执行默认设置的键+摄像机模式。
如果控制单元14检测到鼠标模式改变键33的按压时,这意味着用户给出了改变鼠标模式的指令。因此,该控制单元14将默认的键+摄像机模式改变为键模式并进行步骤S9的处理。
在控制单元14进行步骤S3的处理来执行键+摄像机模式的情况下,控制单元14启动摄像机单元8并且进行步骤S4的处理。当摄像机单元8被启动时,发光单元30可以被打开。为了支持通过摄像机单元8拍摄图像,用户可以根据环境光的亮度打开发光单元30。
在步骤S4,控制单元14控制运动矢量计算单元12比较通过摄像机单元8拍摄的连续帧图像(帧),并且计算先前和当前帧之间的变化。在步骤S5中,控制单元14确定所述帧之间是否存在变化。
如上所述,在键+摄像机模式中,移动电话的主体进行二维或者三维移动。当移动电话的主体被二维操作时,例如,摄像机单元8拍摄鼠标垫或者桌面的图像。当移动电话的主体被三维操作时,摄像机单元8拍摄外界例如办公室的图像。控制单元14根据通过摄像机单元8拍摄的图像确定先前和当前帧之间的变化。
如果在步骤S5确定先前和当前帧之间不存在变化,这意味着移动电话的主体没有移动。因此,控制单元14返回步骤S4的处理并且继续确定所述帧之间的变化。
另一方面,如果在步骤S5确定先前和当前帧之间存在变化,这意味着移动电话的主体已经移动。控制单元14进行步骤S6的处理并且控制短距离无线通信单元11发送关于相应于帧之间的变化的运动矢量的信息,该变化通过运动矢量计算单元12被计算。
因此,例如如图5所示,运动矢量信息从移动电话40的短距离无线通信单元11通过短距离无线通信天线10和短距离无线通信天线43之间的短距离无线链路发送到短距离无线通信单元42,该短距离无线通信单元42外部连接到(或者内置于)桌面个人计算机41。
该桌面个人计算机41在该方向上通过该距离移动在监视器44上显示的指示符P,所述方向和距离由通过短距离无线通信单元42和短距离无线通信天线43所接收到的运动矢量信息规定。因而,监视器44上的指示符P可以响应于移动电话的二维或者三维移动而移动。
在运动矢量信息的发送之后,控制单元14进行步骤S7的处理并且检测是否存在鼠标模式改变键33上的按压。如果控制单元14检测到在鼠标模式改变键33上的按压,则这意味着用户给出了将键+摄像机模式改变为键模式的指令。然后,该处理进行到步骤S9。
另一方面,如果控制单元14没有检测到鼠标模式改变键33上的任何按压,则单元14进行步骤S8的处理并且确定是否给出了结束当前鼠标模式的指令。当确定给出了该指令时,控制单元14结束图4的流程。当确定没有给出该指令时,控制单元14返回步骤S4的处理并且继续确定上述帧之间的变化。因此,对连续的帧顺序地互相比较、直到用户给出结束鼠标模式(亦即当移动电话用作无线鼠标装置时)的指令。监视器44上指示符P的移动根据帧之间的变化被控制。
除确定移动电话主体的移动之外,控制单元14还监控图3所示的第一软键25或者第二软键26上的按压是否存在,该监控在图4的流程中未示出。当检测到第一软键25的按压时,控制单元14控制短距离无线通信单元11通过短距离无线方式发送相应于右点击的命令到桌面个人计算机41的短距离无线通信单元42。当检测到第二软键26的按压时,控制单元14控制短距离无线通信单元11通过短距离无线方式发送相应于左点击的命令到桌面个人计算机41的短距离无线通信单元42。
当在步骤S2或者S7检测到鼠标模式改变键33的按压之后进行步骤S9的处理时,控制单元14将鼠标模式从键+摄像机模式改变到键模式并且确定图3的轻推表盘28是否被操作。
换句话说,在如上所述的键模式中,用户借助于用作方向键的轻推表盘28来移动指示符P。因此,当鼠标模式变化到键模式时,控制单元14在步骤S9中检测轻推表盘28上的操作是否存在。
在轻推表盘28上没有检测到操作的事实意味着用户没有给出移动指示符P的指令。因此,当没有检测到轻推表盘28上的操作时,控制单元14进行步骤S12的处理来确定是否给出了改变鼠标模式的指令,然后进行步骤S13的处理来确定是否给出了结束鼠标模式的指令。
另一方面,检测到轻推表盘28上的操作的事实意味着用户给出了移动指示符P的指令。按压轻推表盘28的上、下、左、右、右上或者左下部分指定指示符P的移动方向。轻推表盘28被按下并且被保持的时间段(在下文中,称为按压-保持时间),表示了指示符P将要移动的距离。
因此,在步骤S10,控制单元14控制运动矢量计算单元12确定通过操纵轻推表盘28指定的移动方向,例如上、下、左、右、右上或者左下,根据轻推表盘28的按压-保持时间计算出指示符P将要移动的距离,并且产生关于相应于确定的方向和计算的距离的运动矢量的信息。在步骤S11,控制单元14控制短距离无线通信单元11通过短距离无线方式发送通过运动矢量计算单元12产生的运动矢量信息。
因此,监视器44上的指示符P在通过操作轻推表盘28规定的方向上以相应于轻推表盘28的按压-保持时间的距离而移动。
在运动矢量信息的发送之后,控制单元14进行步骤S12的处理并且检测鼠标模式改变键33上的按压是否存在。如果控制单元14检测到在鼠标模式改变键33上的按压,则这意味着用户给出了将模式从键模式改变到键+摄像机模式的指令。然后,该处理返回到步骤S3。
另一方面,如果控制单元14没有检测到鼠标模式改变键33上的任何按压,处理进行到步骤S13。控制单元14确定是否给出了结束当前鼠标模式的指令。如果控制单元14确定该指令被给出,则单元14结束图4所示流程的处理。如果控制单元14确定没有给出该指令,则单元14返回步骤S9的处理并且继续检测轻推表盘28上的操作是否存在。因而,监视器44上的指示符P响应于轻推表盘28上的按压而移动,直到用户给出结束鼠标模式(亦即当该用户使用移动电话作为无线鼠标装置时)的指令。
在键模式中,控制单元14象在上述键+摄像机模式情况下一样监视图3中的第一软键25或者第二软键26上的按压是否存在。当检测到第一软键25上的按压时,控制单元14控制短距离无线通信单元11通过短距离无线方式发送相应于右点击的命令到桌面个人计算机41的短距离无线通信单元42。当检测到第二软键26上的按压时,控制单元14控制短距离无线通信单元11通过短距离无线方式发送相应于左点击的命令到桌面个人计算机41的短距离无线通信单元42。
确定变化的操作
下面将详细说明在图4的流程图中的步骤S4中确定帧之间的变化的操作。图6是确定帧之间的变化的操作(处理)的流程图。图6的流程在启动鼠标应用程序时将键+摄像机模式设置为默认模式的时候开始,或者,在鼠标模式响应于用户按压鼠标模式改变键33而从键模式改变为键+摄像机模式时开始。
在键+摄像机模式开始后,在步骤S21,控制单元14执行初始化以清除运动矢量计算单元12的计算结果。该处理进行到步骤S22。
在步骤S22,控制单元14控制运动矢量计算单元12开始装载通过摄像机单元8拍摄的图像,对例如先前帧的中心块和当前帧中的预定块进行比较,从而获得像素值,例如,每一个像素和块中相对应像素之间的亮度上的差异。
例如,在移动电话的显示单元5中的有效像素的长宽比,如图7A所示是120×160像素,即″QQVGA(Quarter Quarter Video Graphics Array,四分之一的四分之一的视频图形阵列)大小。参考图7A和7B,每个块长宽各是5个像素,即每个块具有5x5像素的大小(25像素)。
运动矢量计算单元12将先前帧分离为多个块,每个块具有5x5像素的大小。在这些块中,位于先前帧中央的块被设置为″比较块″。原因如下:通常,所需物体被摄像机单元8成像为使得该物体位于整个图像的中央。在此例子中,在先前帧中央的块被设置为比较块。运动矢量计算单元12将比较块的每一个像素和当前帧的第一块的相应像素进行比较来确定像素值的差值。
在步骤S23,控制单元14监控运动矢量计算单元12的计算状态来确定先前帧中的比较块和当前帧中的第一块之间的像素值差值的确定是否完成。如果该确定没有完成,则处理返回步骤S22。控制单元14控制运动矢量计算单元12继续确定,直到先前帧中的比较块的每一像素和当前帧中的第一块的相应像素之间的像素值差值完成。
另一方面,如果该确定完成,则控制单元14进行步骤S24的处理并且控制运动矢量计算单元12计算在步骤S22确定的25个差值的和。
在步骤S24,控制单元14控制运动矢量计算单元12出较在步骤S24计算的最新的和与先前计算的和。在步骤S26,确定最新的和是否小于先前的和。
在先前帧中的比较块和当前帧中的第一块之间的像素值差值的和被计算出之后,先前的和不存在。在此情况下,控制单元14返回步骤S22的处理并且控制运动矢量计算单元12计算比较块和当前帧中的第二块之间的像素值差值的和。
在涉及第二块的差值的和被计算出之后,在步骤S26中对涉及第二块的差值的和与涉及第一块的差值的和进行比较。
当在步骤S26确定涉及当前帧中的第二块的差值的和(最新和)小于涉及当前帧中的第一块的差值的和(先前和)时,控制单元14进行步骤S27的处理。另一方面,当在步骤S26确定最新和大于先前和时,控制单元14进行步骤S28的处理。
在步骤S27,控制单元14使得存储器13临时存储具有小于第一块的和的第二块的位置信息。然后,处理进行到步骤S28。
在步骤S28,控制单元14确定比较块和QQVGA大小帧的24×32个块中的每一个块之间的和的比较是否完成。如果该比较没有完成,则控制单元14将处理返回到步骤S22。当确定涉及所有块的比较完成时,控制单元14进行步骤S29的处理。
换言之,控制单元14设置先前帧中央的块为比较块并且顺序地将先前帧中的比较块的每一个像素与当前帧中的第一、第二、第三...以及最后块的每一个的相应像素进行比较。在比较完成之后,具有最小差值和的块(最小和块)被确定为具有与比较块相同图像的块。
在步骤S29,控制单元14控制运动矢量计算单元12计算运动矢量,该运动矢量表示从相应于先前帧中的比较块的一个点到相应于当前帧中的最小和块的一个点的方向和距离,并且如图7所示产生关于该运动矢量的信息。然后控制单元14结束图6的流程。如上所述,所获得的运动矢量信息在图4的步骤S6中以短距离无线方式被发送到桌面个人计算机41的短距离无线通信单元42。这样,在监视器44上显示的指示符P被移动。
在鼠标模式中接收到来电时的操作
当根据本实施例的移动电话在被用作无线鼠标装置时接收到来电或者电子邮件时,该鼠标模式中的移动电话在监视器44上显示消息来向用户通知来电或者电子邮件的接收。另外,当用户执行预定操作时,该移动电话提供免提对话或者显示电子邮件。
具体地,当移动电话在被用作无线鼠标装置时接收到来电或者电子邮件时,控制单元14控制短距离无线通信单元11在鼠标模式执行期间通过短距离无线方式发送关于指示接收的消息,例如:″接收到来电″或者″接收到电子邮件″的数据。当接收到来电时,控制单元14进一步控制短距离无线通信单元11除了消息数据之外还通过短距离无线方式发送关于免提对话图标的数据。当接收到电子邮件时,控制单元14控制短距离无线通信单元11通过短距离无线方式发送关于显示电子邮件的图标的数据。从而,该消息和图标在监视器44上显示。
该用户可以从监测器44上显示的消息识别出来电或者电子邮件的接收。为了回复该来电,用户将上述键+摄像机模式或者键模式中在监测器44上显示的指示符P,移动到为免提时话显示的图标。或者,为了读取收到的电子邮件,用户将指示符P移动到为电子邮件显示的显示图标。然后,用户双击例如图3所示的第二软键26。此操作等同于双击左点击键。
移动电话中的控制单元14根据通过短距离无线发送到桌面个人计算机41的运动矢量信息监视指示符P在监视器44上的位置,并且也监视第二软键26的状态来确定在指示符P移动到图标之上后是否双击了左点击键。
当确定指示符P被移动并且位于该图标上,并且在来电接收之后双击了左点击键时,控制单元14控制扬声器装置3和麦克风单元4以将每个放大器的增益设置为一个用于在鼠标模式执行期间的免提通话的值,从而提供一种摘机状态。因此,当使用移动电话作为无线鼠标装置时用户可以进行免提通话。
当在电子邮件接收之后检测到将指示符P移动到图标上并且双击左点击键的操作时,控制单元14在鼠标模式执行期间控制移动电话的显示单元5显示接收到的电子邮件的文本。这样,当使用移动电话作为无线鼠标装置时,用户可以读出接收到的电子邮件。
在上述说明中,接收到的电子邮件在显示单元5上显示。控制单元14可以通过短距离无线方式将关于在接收到的电子邮件中的文本的信息发送到桌面个人计算机41,并且该文本可以在监视器44上显示。
优点
从上述说明可以显而易见地看出,根据本发明本实施例的移动电话具有如下优点:
1.该移动电话可以移动在个人计算机上显示的指示符。
2.通常,在携带笔记本式个人计算机时,有必要随着计算机携带一种专用鼠标装置。根据本实施例,因为移动电话可以被用作鼠标装置,携带专用鼠标装置的问题被解决。
3.除电话功能、电子邮件功能、音乐播放器功能、广播接收机功能、以及摄像机功能之外,可以将鼠标功能添加到移动电话,改善了移动电话的多功能性。
4.因为指示符P的移动的位置信息根据通过摄像机单元8拍摄的图像而产生,该移动电话可以像已知的鼠标装置一样二维地移动,从而移动指示符P。另外,该移动电话可以被三维移动来移动指示符P。换言之,该移动电话可以被用作空中鼠标装置。因此,该移动电话可以用作一种与位置无关的鼠标装置。
5.因为鼠标功能可以使用现有摄像功能实现,所以没有必要给移动电话的主体增加一种新的特殊部件。因此,该移动电话可以包括鼠标功能同时保持主体的合适大小。因此,用户可以使用移动电话作为鼠标装置同时用一只手持有具有合适大小的主体的移动电话,从而以高操作性移动指示符P。另外,用户可以象操作通常使用的鼠标装置那样操作移动电话。
6.发光单元30具有闪光功能来支持在暗处拍摄图像。该移动电话因此可以在暗处被用作鼠标装置。
7.当移动电话被用作鼠标装置时发生例如来电或者电子邮件的接收的事件时,指示该事件的发生的消息可以在个人计算机41的监视器44上被显示。因此,该移动电话当用作鼠标装置时可以向用户通知该来电或者电子邮件的接收。
8.处理事件的图标与指示事件发生的消息一起被显示在个人计算机的显示屏幕上。当指示符P移动到图标之上并且预定的操作,例如双击被检测到时,该处理被执行。在收到来电的情况下,移动电话进入免提通话模式。在接收到电子邮件的情况下,移动电话的显示单元5显示接收到的电子邮件。用户因此可以在使用移动电话作为鼠标装置时进行免提通话或者读出接收到的电子邮件。
修改
在上述实施例中,本发明被用于移动电话。本发明可以用于其他移动终端,例如PHS和PDA。在此情况下,可以获得如上所述相同的优点。
本领域技术人员可以理解的是,可以根据设计需求以及其他因素作出各种修改、组合、子组合以及改变,它们处于所附权利要求及其等同物的范围之内。

Claims (4)

1.一种具有对物体进行成像的摄像机单元的移动终端,包括:
移动判断装置,用于在鼠标模式中根据通过摄像机单元顺序拍摄的图像之间的变化来确定移动终端主体移动的方向和距离,其中所述移动终端在鼠标模式下被用作无线鼠标;
短距离无线通信装置;以及
控制装置,用于对短距离无线通信装置进行控制,从而通过短距离无线方式将表示由移动判断装置确定的方向和距离的信息发送到操作装置,所述操作装置包括显示装置并且根据接收到的表示所述方向和距离的信息控制显示在显示装置上的指示符的移动,
其中摄像机单元包括具有预定厚度的摄像机盖,当没有使用该摄像机单元时,该摄像机单元被摄像机盖遮盖,而当使用该摄像机单元时,该摄像机单元不被所述摄像机盖遮盖,以及
当该移动终端在鼠标模式中二维移动时,摄像机盖的厚度在摄像机单元和操作平面之间提供预定的空隙,以便允许摄像机单元以良好的状况拍摄操作平面的表面的图像,其中移动终端在所述操作平面上放置并且被操作。
2.如权利要求1所述的移动终端,进一步包括:
无线通信装置,用于与无线基站进行无线通信,其中
当无线通信装置检测到来电或者电子邮件的接收时,控制装置对短距离无线通信装置进行控制,从而通过短距离无线方式将表示来电或者电子邮件的接收的信息发送到所述操作装置以进行显示。
3.如权利要求2所述的移动终端,其中
当在来电接收之后检测到用户所给出的预定按键指令时,控制装置执行控制以便在鼠标模式执行期间提供免提通话,或者
当在电子邮件接收之后检测到用户所给出的预定按键指令时,控制装置控制包含在移动终端中的显示装置以便在鼠标模式执行期间显示接收到的电子邮件,或者控制短距离无线通信装置以便通过短距离无线方式将接收到的电子邮件发送到所述操作装置。
4.一种使用移动终端作为无线鼠标装置的方法,该方法包括步骤:
根据通过包含在移动终端中的摄像机单元顺序拍摄的图像之间的变化确定移动终端的主体移动的方向和距离;以及
通过短距离无线方式将表示所确定的方向和距离的信息发送到操作装置,该操作装置包括显示装置并且根据接收到的表示方向和距离的信息控制在显示装置上显示的指示符的移动,
其中摄像机单元包括具有预定厚度的摄像机盖,当没有使用该摄像机单元时,该摄像机单元被摄像机盖遮盖,而当使用该摄像机单元时,该摄像机单元不被所述摄像机盖遮盖,以及
当该移动终端在鼠标模式中二维移动时,摄像机盖的厚度在摄像机单元和操作平面之间提供预定的空隙,以便允许摄像机单元以良好的状况拍摄操作平面的表面的图像,其中移动终端在所述操作平面上放置并且被操作。
CNB2006100641985A 2005-10-24 2006-10-24 移动终端,鼠标应用程序,以及利用移动终端作为无线鼠标装置的方法 Expired - Fee Related CN100435079C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2005309146 2005-10-24
JP2005309146A JP4262712B2 (ja) 2005-10-24 2005-10-24 携帯端末装置、マウスアプリケーションプログラム、及び携帯端末装置をワイヤレスマウス装置として用いる方法
JP2005-309146 2005-10-24

Publications (2)

Publication Number Publication Date
CN1991709A CN1991709A (zh) 2007-07-04
CN100435079C true CN100435079C (zh) 2008-11-19

Family

ID=37728371

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2006100641985A Expired - Fee Related CN100435079C (zh) 2005-10-24 2006-10-24 移动终端,鼠标应用程序,以及利用移动终端作为无线鼠标装置的方法

Country Status (5)

Country Link
US (1) US7809401B2 (zh)
EP (1) EP1785819A3 (zh)
JP (1) JP4262712B2 (zh)
KR (1) KR20070044354A (zh)
CN (1) CN100435079C (zh)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8920343B2 (en) 2006-03-23 2014-12-30 Michael Edward Sabatino Apparatus for acquiring and processing of physiological auditory signals
KR100799766B1 (ko) * 2006-10-25 2008-02-01 엠텍비젼 주식회사 포인터 이동 제어 장치
KR100827067B1 (ko) * 2007-01-22 2008-05-02 삼성전자주식회사 카메라를 구비한 휴대용 무선 단말기와 그를 이용한 마우스실행 방법
DE102007052734B4 (de) * 2007-06-27 2010-12-30 Universität Tübingen Vorrichtung und Verfahren zur abhör- und manipulationssicheren Verschlüsselung für Online-Accounts
US8144780B2 (en) * 2007-09-24 2012-03-27 Microsoft Corporation Detecting visual gestural patterns
GB2458881A (en) * 2008-03-19 2009-10-07 Robert William Albert Dobson Interface control using motion of a mobile device
US20100066672A1 (en) * 2008-09-15 2010-03-18 Sony Ericsson Mobile Communications Ab Method and apparatus for mobile communication device optical user interface
KR101554958B1 (ko) * 2009-03-06 2015-09-22 삼성전자주식회사 비주얼 코드를 이용한 원격 조작 방법 및 그 방법을 수행하는 장치
US8949860B2 (en) 2010-01-08 2015-02-03 Adobe Systems Incorporated Methods and systems for using a mobile device for application input
KR101107352B1 (ko) * 2010-02-01 2012-01-19 주식회사 엘지유플러스 이동 통신 단말기 및 상기 이동 통신 단말기를 제어하는 방법
JP5682818B2 (ja) * 2011-03-04 2015-03-11 カシオ計算機株式会社 携帯端末装置
JP5629242B2 (ja) 2011-06-10 2014-11-19 京セラ株式会社 通信端末
CN102393794A (zh) * 2011-07-05 2012-03-28 信源通科技(深圳)有限公司 通过手持终端实现鼠标功能的系统以及方法
WO2013103968A2 (en) * 2012-01-06 2013-07-11 Ergowerx International, Llc Touchscreen controller
US20130324035A1 (en) * 2012-06-01 2013-12-05 Nvidia Corporation Methodology for using smartphone in desktop or mobile compute environment
CN102857593A (zh) * 2012-10-30 2013-01-02 巫少芬 一种便携式无线光电鼠标手机
CN103856704B (zh) * 2012-11-29 2018-08-10 联想(北京)有限公司 一种移动终端3d拍摄的方法和装置
CN103049106B (zh) * 2012-12-11 2016-04-13 广东欧珀移动通信有限公司 一种移动终端作为鼠标的实现方法及装置
CN103200327B (zh) * 2013-04-08 2017-10-31 上海斐讯数据通信技术有限公司 一种在手机上实现鼠标功能的方法
US9107513B2 (en) * 2013-07-16 2015-08-18 Amirmasood Asfa Baby walker system with a braking mechanism for movement control
CN103399657B (zh) * 2013-07-31 2016-09-28 小米科技有限责任公司 鼠标指针的控制方法、装置及终端设备
JP2015103109A (ja) * 2013-11-26 2015-06-04 京セラドキュメントソリューションズ株式会社 情報入力システム、携帯端末装置、及びコンピューター
CN103677317B (zh) * 2013-12-11 2018-09-11 Tcl光电科技(惠州)有限公司 实现光标控制的移动终端及其实现光标控制的方法
JP6107840B2 (ja) * 2015-01-15 2017-04-05 カシオ計算機株式会社 端末装置及びプログラム
EP3568975A1 (en) 2017-01-13 2019-11-20 Harman International Industries, Incorporated Integrated audio/video collaboration system for video conference meetings
US10891489B2 (en) * 2019-04-08 2021-01-12 Nedelco, Incorporated Identifying and tracking words in a video recording of captioning session

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6285354B1 (en) * 1998-11-30 2001-09-04 Micron Technology, Inc. Combination mouse and telephone handset
CN1395401A (zh) * 2001-06-21 2003-02-05 日本电气株式会社 便携电话机
CN1469265A (zh) * 2002-06-28 2004-01-21 ��ʿͨ�����ӵ��Թɷ����޹�˾ 基于计算机的便携式装置
WO2005011236A1 (de) * 2003-07-23 2005-02-03 Siemens Aktiengesellschaft Mobiles kommunikationsendgerät als computer-maus einsetzbar

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0879353A (ja) 1994-09-09 1996-03-22 Hitachi Ltd 電話機一体型位置入力装置
JPH11112617A (ja) 1997-09-30 1999-04-23 Casio Comput Co Ltd 通信端末、該通信端末への着信を報知する該通信端末と別体の携帯端末及びこれら通信端末と該通信端末と別体の携帯端末とで構成される携帯端末システム
JP2001022515A (ja) 1999-06-25 2001-01-26 Kyu Choi Byun 電話機マウス
JP2002271665A (ja) 2001-03-12 2002-09-20 Sanyo Electric Co Ltd 携帯電話機及び携帯電話機用レンズカバー
JP4190935B2 (ja) 2002-09-27 2008-12-03 富士フイルム株式会社 携帯端末装置
KR100963758B1 (ko) * 2003-02-14 2010-06-14 엘지전자 주식회사 무선 마우스 기능을 구비한 이동 통신 단말기
US20040189609A1 (en) * 2003-03-25 2004-09-30 Estes Charles D. Optical pointing device and method therefor
JP2004318823A (ja) * 2003-03-28 2004-11-11 Seiko Epson Corp 情報表示システム、情報処理装置、ポインティング装置および情報表示システムにおけるポインタマーク表示方法
KR20050090619A (ko) * 2004-03-09 2005-09-14 브이케이 주식회사 무선 마우스 기능을 구비한 이동전화기
JP2005258486A (ja) 2004-03-09 2005-09-22 Mitsubishi Electric Corp 端末装置及び座標位置特定方法及びプログラム
KR100466855B1 (ko) * 2004-03-23 2005-01-15 에스케이 텔레콤주식회사 촬영 기능을 가지는 카메라 부착 이동 통신 단말기의 촬상신호를 이용한 사용자 인터페이스 방법 및 시스템
KR200366964Y1 (ko) * 2004-07-31 2004-11-09 (주)모비솔 외부기기 제어용 포인팅 장치를 구비하는 이동통신 단말기
JP2007096742A (ja) * 2005-09-29 2007-04-12 Sony Corp 入力装置および入力装置の制御方法、ならびに、音声通信装置および音声通信方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6285354B1 (en) * 1998-11-30 2001-09-04 Micron Technology, Inc. Combination mouse and telephone handset
CN1395401A (zh) * 2001-06-21 2003-02-05 日本电气株式会社 便携电话机
CN1469265A (zh) * 2002-06-28 2004-01-21 ��ʿͨ�����ӵ��Թɷ����޹�˾ 基于计算机的便携式装置
WO2005011236A1 (de) * 2003-07-23 2005-02-03 Siemens Aktiengesellschaft Mobiles kommunikationsendgerät als computer-maus einsetzbar

Also Published As

Publication number Publication date
EP1785819A2 (en) 2007-05-16
KR20070044354A (ko) 2007-04-27
CN1991709A (zh) 2007-07-04
US7809401B2 (en) 2010-10-05
JP2007123962A (ja) 2007-05-17
JP4262712B2 (ja) 2009-05-13
EP1785819A3 (en) 2012-04-25
US20070091167A1 (en) 2007-04-26

Similar Documents

Publication Publication Date Title
CN100435079C (zh) 移动终端,鼠标应用程序,以及利用移动终端作为无线鼠标装置的方法
KR101598335B1 (ko) 휴대 단말기 및 그 동작방법
CN101655769A (zh) 便携式终端及其驱动方法
CN100435103C (zh) 电子通讯装置的应用程序切换系统及方法
CN101452356A (zh) 输入装置、显示装置、输入方法、显示方法及程序
CN101382855A (zh) 移动终端及其触摸识别方法
CN103164155A (zh) 显示处理装置
KR100719904B1 (ko) 광신호를 이용한 입력 장치와 그 방법 및 광신호를이용하여 신호를 입력하는 휴대단말기
KR20100128630A (ko) 휴대용 기기의 입력 수단으로 사용되는 이동 단말 및 그 이동 단말을 이용한 입력 방법
CN109413157A (zh) 消息屏蔽方法及装置
JP4685708B2 (ja) 携帯端末装置
WO2003077098A1 (fr) Appareil de communication mobile, commande d'afficheur, methode et programme relatifs a cet appareil de communication mobile
CN104866353B (zh) 显示按钮的方法及装置
US20040189609A1 (en) Optical pointing device and method therefor
KR100617695B1 (ko) 카메라 내장형 이동통신단말기에 있어서 포인팅제어방법
KR100756027B1 (ko) 휴대폰 무선 발신 기능을 갖는 개인용 단말기
KR101353415B1 (ko) 펜마우스형 단말기
JP2005258734A (ja) 携帯端末及び文字入力方法
KR101156212B1 (ko) 이동통신 단말기의 유저 인터페이스에서 공통 단축키지원방법
KR100628095B1 (ko) 가전제품의 포인터를 제어하는 이동통신 단말기 및 방법
KR101585476B1 (ko) 이동단말기 및 그 제어방법
WO2010004373A1 (en) Navigation key for use in mobile communication terminal and a mobile communication terminal comprising the same
KR101220133B1 (ko) 휴대단말기의 메뉴 제어 방법
KR101482114B1 (ko) 사용자 인터페이스 변경기능을 제공하는 휴대 단말기 및 그제어방법
JP2001166875A (ja) 情報通信機器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: SONY ERICSSON MOBILE COMMUNICATIONS CO., LTD.

Free format text: FORMER OWNER: SONY ERICSSON MOBILE COMMUNICATIONS JAPAN CO., LTD.

Effective date: 20100122

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20100122

Address after: Longde, Sweden

Patentee after: Sony Mobile Communication AB

Address before: Tokyo, Japan

Patentee before: SONY ERICSSON MOBILE COMMUNICATIONS JAPAN, Inc.

C56 Change in the name or address of the patentee
CP01 Change in the name or title of a patent holder

Address after: Longde, Sweden

Patentee after: Sony Mobile Communications AB

Address before: Longde, Sweden

Patentee before: Sony Mobile Communication AB

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160307

Address after: California, USA

Patentee after: Sinai Putelake Co.

Address before: Tokyo, Japan

Patentee before: SONY MOBILE COMMUNICATIONS Inc.

Effective date of registration: 20160307

Address after: Tokyo, Japan

Patentee after: SONY MOBILE COMMUNICATIONS Inc.

Address before: Longde, Sweden

Patentee before: Sony Mobile Communications AB

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20081119

Termination date: 20191024