CN109791728B - 用于在家用电器与移动设备之间交换信息的方法 - Google Patents

用于在家用电器与移动设备之间交换信息的方法 Download PDF

Info

Publication number
CN109791728B
CN109791728B CN201780058951.6A CN201780058951A CN109791728B CN 109791728 B CN109791728 B CN 109791728B CN 201780058951 A CN201780058951 A CN 201780058951A CN 109791728 B CN109791728 B CN 109791728B
Authority
CN
China
Prior art keywords
information
mobile device
household appliance
user interface
optical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780058951.6A
Other languages
English (en)
Other versions
CN109791728A (zh
Inventor
里卡尔多·福伊拉
詹卢卡·文图里尼
亚历克斯·维罗利
马西莫·诺斯特罗
劳伦特·让纳托
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electrolux Appliances AB
Original Assignee
Electrolux Appliances AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electrolux Appliances AB filed Critical Electrolux Appliances AB
Publication of CN109791728A publication Critical patent/CN109791728A/zh
Application granted granted Critical
Publication of CN109791728B publication Critical patent/CN109791728B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/04Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2823Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24CDOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00Stoves or ranges heated by electric energy
    • F24C7/08Arrangement or mounting of control or safety devices
    • F24C7/082Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
    • F24C7/083Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on tops, hot plates
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/24Pc safety
    • G05B2219/24097Camera monitors controlled machine
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2613Household appliance in general
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/285Generic home appliances, e.g. refrigerators

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Optical Communication System (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

本发明涉及一种用于在家用电器(1)与移动设备(2)之间交换信息的方法,该方法包括以下步骤:在该家用电器(1)的图形用户界面(3)上提供光学信息(S10);优选地,基于在该移动设备(2)的图形用户界面(5)上显示的一个或多个标记(4)或基于提供的光学信息的非时变部分将该移动设备(2)相对于该家用电器(1)对准(S11);在该移动设备(2)处通过利用该移动设备(2)的相机(6)捕捉在该家用电器(1)上提供的所述光学信息来接收光学信息(S12);处理该移动设备(1)上的所述接收到的光学信息以便得出所述接收到的光学信息中所包含的信息消息(S13);在该移动设备(2)的用户界面上提供所述信息消息或与所述信息消息相关联的信息(S14)。

Description

用于在家用电器与移动设备之间交换信息的方法
本发明总体上涉及家用电器领域。更具体地,本发明涉及一种用于在家用电器与移动设备之间交换信息的方法。
背景技术
例如炉子或烤箱等家用电器通常包括向使用者提供例如运行信息或警告等信息的图形用户界面(GUI)。但是,所述GUI的能力有限,即仅可以向使用者或维修技术员提供有限量的信息。
发明内容
本发明的实施例的目的是提供一种用于在家用电器与移动设备之间交换信息的方法,该方法使得能够通过使用移动设备提供的用户界面来提供更广泛的信息。该目的是通过独立权利要求的特征来实现的。从属权利要求中给出了优选实施例。若无另外明确指明,本发明的多个实施例可以彼此自由组合。
根据一方面,本发明涉及一种用于在家用电器与移动设备之间交换信息的方法。所述方法包括以下步骤:
-在该家用电器的图形用户界面上提供光学信息;
-优选地,基于在该移动设备的图形用户界面上显示的一个或多个标记或基于提供的光学信息的非时变部分将该移动设备相对于该家用电器对准;在该移动设备处通过利用该移动设备的相机捕捉在该家用电器上提供的所述光学信息来接收光学信息;
-处理该移动设备上的所述接收到的光学信息以便得出所述接收到的光学信息中所包含的信息消息;
-在该移动设备的用户界面上提供所述信息消息或与所述信息消息相关联的信息。
有利地,基于上述方法步骤能够在家用电器上使用有限的GUI用于将信息传输到移动设备。所述信息由移动设备处理以便使相应使用者获得更复杂和/或广泛的信息消息。
根据实施例,所述一个或多个标记包括框或框的多段。由此限定移动设备的GUI的一部分,在该部分中,移动设备的相机接收到的某种信息(以下被称为光学参考信息)必须对准以便能够以所需准确度处理接收到的光学信息。
根据实施例,所述一个或多个标记是拐角标记。所述拐角标记可以包括被安排在移动设备的GUI的一部分的相反拐角上的一对或多对标记。所述拐角标记可以在GUI上限定方形、矩形、或多边形部分,在该部分中,必须在所述对准过程期间安排某些光学参考信息。
根据实施例,对准的步骤包括:借助于该移动设备的所述相机捕捉该家用电器处的光学参考信息、以及安排该移动设备和/或在该移动设备处执行缩放动作,使得所述光学参考信息显示在该移动设备的图形用户界面上并且所述光学参考信息(ORI)配合到所述一个或多个标记中。例如,所述对准可以通过使移动设备移动来执行,使得光学参考信息在一个或多个标记内正确地对准并且覆盖GUI部分的由一个或多个标记围绕或指示的全部或至少一个重要部分。由此能够使得信息处理可以具有希望的准确性。
根据实施例,所述光学参考信息包括该家用电器的图形用户界面的固定区域,或者参考信息暂时地显示在该家用电器的图形用户界面上。因此换言之,光学参考信息可以由永久或仅暂时可获得的信息限定。例如,光学参考信息可以是七段显示器的外轮廓。
根据实施例,该光学参考信息由固定的、永久存在的标志构建,该标志特别地是印记、凸起、或标识。所述标志可以安排在相对于GUI部分的某一位置上,该GUI部分示出有待被移动设备接收的光学信息。因此能够使用所述标志来将移动设备对准以便实现希望的信息辨识准确性。
根据实施例,在所述对准期间,该家用电器的示出了所述光学信息的图形用户界面部分显示在该移动设备的图形用户界面上、并且配合到该移动设备的所述图形用户界面的区域中,所述区域被所述一个或多个标记限定。因此,待接收的光学信息直接用于将移动设备对准。
根据实施例,所述固定的、永久存在的标志配合到该移动设备的图形用户界面的区域中,该区域被所述一个或多个标记限定。因此,相应使用者/技术员可以容易地辨识出的标志用于支持所述对准。
根据实施例,在该家用电器的图形用户界面上显示的所述光学信息是非时变的。因此,换言之,固定信息代码可以在家用电器的GUI上显示,该固定信息代码由移动设备接收并且处理。
根据其他实施例,在该家用电器的图形用户界面上显示的所述光学信息包括时变信息。换言之,可以在GUI上显示信息序列。所述移动设备可以捕捉所述时变信息的多个图像和/或视频序列以便从所述多个图像和/或视频序列中得出所述信息消息。在使用家用电器的显示部分来提供所述光学信息的情况下,所述显示部分可以提供二进制编码信息(例如,七段显示器的接通/断开)或使用高级编码方案(例如,将七段显示器的条选择性地接通/断开以便显示不同数字或字符)的信息。
根据实施例,该相机接收到的所述信息被实时或几乎实时处理成数字信息。所述信息处理可以由移动设备中安装的应用控制。
根据实施例,该家用电器的图形用户界面包括被适配用于显示一个或多个数字的七段显示器、或用于提供所述光学信息的一个或多个发光二极管。在使用发光二极管的情况下,通过将所述发光二极管接通/断开(通/断键控调制)来向手机提供信息。在使用七段显示器的情况下,可以使用通/断键控调制或更精细的编码方案(例如,选择性地激活七段显示器的条)。
根据实施例,所述得出的信息消息包括关于错误代码、警告、或使用统计的信息。由此,可以简化技术员所执行的故障排除。
根据实施例,在将该移动设备对准之后手动地或自动地开始处理所述接收到的光学信息。所述手动激活可以通过按压某一按钮或触敏显示器的区域来执行。自动开始可以在辨识出移动设备恰当对准之后执行。
根据实施例,所述光学信息包括含有错误校正信息的数字编码信息序列。基于所述错误校正信息可以实施错误校正方案。所述错误校正方案可以例如是汉明码(hammingcode)。基于所述错误校正信息能够辨识并且修正传输误差。
根据实施例,基于该七段显示器的点状部分使该移动设备上的信息处理与该家用电器上的信息提供同步。例如,七段显示器的所述点状部分可以提供周期性出现(闪烁)的光学信号,该光学信号用于恢复帧结构的同步性、相应地在移动设备内的数据处理的同步性。
根据实施例,所述光学信息包括基于帧结构传输的数字编码信息序列,该帧结构包括该数字编码信息的数据段在其中传输的多个时隙。单帧可以包括两个或更多个数据段,每个数据段被包括在时隙中。数据段可以包括两个或更多个比特的待传输的数字信息。优选地,数据段包括在某一时间点显示在七段显示器上的单一数字中包括的数字信息。因此,换言之,帧结构的每个时隙指的是在某一时间点显示在七段显示器上的某一数字。
根据实施例,七段显示器的第一子集条用于提供用于对准目的的光学参考信息(ORI)。例如,第一子集条在家用电器的GUI上连续地显示,由此向移动设备提供参考信息,该参考信息可以用于确定七段显示器的一个或多个数字的取向并且得出关于待传输的所述数字信息被包括在捕捉到的光学信息中的信息。
根据实施例,七段显示器的第二子集条、特别地七段显示器的两条或更多条用于在该家用电器的图形用户界面上提供数字编码信息。例如,七段显示器的条被选择性地接通/断开,其中,某一条(通/断)的状态代表数字信息的比特。由此,数字信息可以从捕捉到的光学信息中提取出来。
根据实施例,该七段显示器的一个数字在所述帧结构的时隙中提供两个或更多个比特的数字信息。例如,七段显示器的状态可以与帧结构的时隙同步地改变。在七段显示器上提供的当前数字中所包括的数字信息的比特可以与所述时隙相关联,在该时隙中,已经在家用电器的GUI上提供了所述数字。由此,在七段显示器上提供的数字序列根据帧结构可以被转化成比特序列。
根据实施例,该移动设备基于光学字符辨识算法提取出包含在所捕捉到的光学信息中的符号。更详细地,OCR算法可以辨识出在移动设备的相机所捕捉到的图像中包括的一个或多个数字。所述经辨识的图像可以被转化成数字信息(例如,比特序列)。
根据进一步方面,本发明涉及一种家用电器,该家用电器包括用于提供光学信息的图形用户界面。该家用电器可以被适配成基于根据上述实施例中的一个所述的方法与移动设备交换信息。
本披露中使用的术语“基本上”或“大致”是指与准确值偏差+/-10%、优选地+/-5%,和/或呈对功能而言无关紧要的变化形式的偏差。
附图说明
从以下详细说明和附图中将容易理解本发明的这些不同方面,包括其具体特征和优点,在附图中:
图1示出了家用电器的示例性示意顶视图;
图2示出了家用电器的图形用户界面的安排以及从所述图形用户界面接收示例性光学信息的移动设备;
图3示出了恰当对准以便接收光学信息的移动设备;
图4展示了基于流程图用于在家用设备与移动设备之间交换信息的方法;
图5示出了流程图,展示了在家用设备与移动设备之间交换信息所执行的一系列步骤;
图6展示了随后时隙中的数据段的安排以便通过传输通道按顺序传输信息;
图7展示了包括七个条状部分和一个点的七段显示器;
图8展示了七段显示器提供的第一符号,该第一符号提供第一比特元组;
图9展示了七段显示器提供的第二符号,该第二符号提供第二比特元组;并且
图10展示了包括多个连续时隙的帧结构中的比特元组的安排。
具体实施方式
现在将参照这些附图对本发明进行更全面的描述,在附图中示出了多个示例性实施例。然而,本发明不应该被解释为局限于在此阐述的这些实施例。贯穿以下说明,当适用时,使用类似的附图标记来表示类似的元件、部件、物件或特征。
图1示出了在当前情况下为电炉的家用电器1的示意图。但是,本领域技术人员可以识别出本发明还可以被包括在例如烤箱、干燥机、洗碗机等其他家用电器中。
家用电器1包括图形用户界面3。例如,图形用户界面(GUI)可以包括用于提供光学信息的显示器或可以包括触敏显示器,该触敏显示器用于提供光学信息并且通过某些触碰动作接收来自使用者的指令(通/断切换、改变加热功率、操作定时器等)。根据实施例,GUI3可以包括用于提供一个或多个数字的一个或多个七段显示器。替代性地,GUI 3可以是数字屏幕或可以包括用于所述提供信息的一个或多个发光二极管(LED)。
图2展示了家用电器1的GUI 3的实施例以及放置在图形用户界面3附近的移动设备2。移动设备2可以是例如智能手机、平板电脑、掌上电脑(PDA)等。所述移动设备2还可以包括GUI 5(例如,触敏显示器)、以及用于捕捉图像和/或视频序列的相机6。
家用电器1的GUI 3可以被适配成在其GUI 3上提供光学信息。在GUI 3仅提供显示复杂信息的有限能力的情况下,可以用编码方式提供信息。例如,可以在GUI 3上显示错误代码。替代性地,通过时变数字模式、例如通过将LED接通/断开或使用按照某一代码模式控制的一个或多个七段显示器来提供信息。但是,使用者或技术员可能无法直接理解此类编码信息。因此,所述移动设备2执行的解码操作可能是必要的。
如上所述,所述移动设备2包括相机6。所述相机6可以用于捕捉一个或多个图像、相应地捕捉提供所述光学信息的所述GUI 3的一部分的视频序列。如图2所示,基于相机6,所述GUI 3的至少一部分可以被所述相机6记录下来。记录下的信息可以在移动设备2的GUI5上显示。
为了能够充分准确地捕捉所述光学信息,执行某一对准过程。如图3所示,在GUI 5上可以显示一个或多个标记4。所述标记可以是例如多边形框、圆形、椭圆形、以及框、圆形或椭圆形的多个区段等。在本实施例中,在对角相反位置上提供一对标记4,所述标记4是拐角标记、优选地包括L形状。基于所述标记4,可以对移动设备2执行按希望对准。根据本发明的“对准”指的是将光学参考信息(ORI)正确定位到和/或其尺寸适配到GUI 5的由所述标记4限定的一部分中的任何过程。特别地,“对准”意味着移动设备2的位置变化和/或在移动设备2处执行的缩放动作。
所述光学参考信息(ORI)可以由在家用电器1处可获得的任何信息构建而成。更具体地,所述光学参考信息(ORI)可以是在GUI 3上显示的暂时信息或可以是永久存在的信息,例如印花、凸起等。在图2的实例中,七段显示器8构建所述光学参考信息(ORI)。但是,根据其他实施例,在家用电器1处可获得的标识9也可以用作光学参考信息(ORI)。
基于光学参考信息ORI,可以将移动设备2对准使得待接收的光学信息可以按希望的准确度获得。图3示出了移动设备2的GUI,七段显示器8在此对准到一对标记4中。例如,所述对准必须执行成使得GUI 5的某一部分或细节配合到一个或多个标记4(参见图3)限定的区域中。
图4展示了基于流程图用于在家用电器1与移动设备2之间交换信息的方法。
作为第一步骤,在家用电器1的GUI 3上提供光学信息(S10)。所述光学信息可以在接收触发之后提供。所述触发可以通过在家用电器1处开始信息提供例程(例如,用于显示错误信息、使用统计、或警告的例程)来构建而成。特别地,触发可以包括推动家用电器的按钮或触碰区。但是,根据其他实施例,所述信息提供可以在(导致警告的)错误或意外情况发生之后自动地开始。
为了接收在GUI 3上显示的所述光学信息,移动设备2基于一个或多个标记4对准(S11)。可以进行所述对准,使得光学参考信息(ORI)正确地定位在GUI 5的一部分中,所述部分由所述一个或多个标记4限定。
值得提及的是,移动设备2的某一应用(APP)可以被执行用于处理/解码接收到的光学信息。因此,在执行所述对准步骤之前,所述应用可以在移动设备2上启动。
在对准移动设备2之后,可以在移动设备处接收光学信息(S12)。更详细地,基于相机6,可以捕捉一个或多个图像或视频序列。在使用特定应用的情况下,所述应用可以与相机6相互作用以便捕捉所述图像和/或视频序列。
信息交换可以通过家用电器1启动(例如在接收触发之后)。信息可以由家用电器1以编码形式提供。可以存在信息提供的不同方式。例如,GUI 3的一部分可以通过例如提供包括字母和/或数字的错误或警告代码来提供所述编码信息。根据实施例,七段显示器8可以提供所述字母和/或数字。但是,二进制编码也是可以的(即七段显示器8),一个或多个发光二极管或任何光发射机(例如某一显示部分)可以通过接通/断开来提供光学信息、由此提供光学信息序列。在七段显示器8的情况下,断开的所有段可以是0并且接通的所有段可以是1。根据其他实施例,GUI 3可以提供以编码方式包括信息消息的字母/数字序列。
接收到的光学信息由移动设备2处理(S13)。更详细地,光学信息由安装在移动设备2上的应用处理。所述处理可以包括将接收到的光学信息解码以便得出信息消息或信息内容。所述信息处理可以实时或几乎实时执行。所述信息消息或内容或从所述信息消息或内容中得出的信息(例如通过将信息消息或内容转化成更复杂的信息)可以在移动设备2的用户界面上提供(S14)。所述用户界面可以被适配用于提供听觉信息(例如,借助于扬声器)或光学信息(例如在GUI 5上显示)。
技术员出于服务或维护目的或家用电器使用者为了接收使用数据或操作信息,可以使用提出的方法。
图5展示了在将信息从家用电器传输到移动设备期间执行的、以及在移动设备上向家用电器的技术员或使用者提供信息的步骤。在第一步骤中,有效载荷信息由家用电器(20)的控制实体提供。所述有效载荷信息可以包括或可以是技术员或家用电器的使用者应该接收到的信息。例如,所述有效载荷信息可以是错误信息、关于家用电器的当前状态的信息等。
为了保护待传输的有效载荷信息在通过传输通道传输所述有效载荷信息期间不出现错误,错误校正方案可以应用到有效载荷信息(S21)。更详细地,错误校正信息可以添加到有效载荷信息中以便在传输错误(例如比特失效等)的情况下能够恢复有效载荷信息。例如,一个或多个错误校正比特可以添加到有效载荷比特中。可以使用任何错误校正方案。例如,汉明码可以是优选的错误校正方案,因为实施方式复杂度低并且在比特率与校正能力之间有好的平衡。
有效载荷信息和错误校正信息(以下被称为受保护有效载荷)可以映射到单一符号或一系列符号(S22)。所述符号可以是在用户界面上提供的、优选地在GUI 3上显示的图形字符或数字。
所述符号可以经由传输通道传输(S23)。根据本发明的“传输通道”可以包括通过移动设备2的相机6记录所述一个或多个符号并且优选地还包括符号的接收和辨识过程。
借助于相机6接收符号之后(S24),可以将符号解码(S25)。所述解码过程可以包括相机6捕捉到的一个或多个图像内或视频序列内的一个或多个图形符号的辨识过程。此外,所述解码过程还可以包括将辨识出的图形符号转化为一个或多个比特的过程,所述比特表示受保护有效载荷的至少一部分。
将接收到的符号解码之后,错误校正方案可以移除(S26)。更详细地,受保护有效载荷中包括的错误校正信息可以用于执行有效载荷的错误校正。由此,可以消除受保护有效载荷中包括的传输错误。
最后,错误被校正的有效载荷可以转化为人类使用者或技术员可以直接接收和理解的信息(S27)。例如,所述信息可以是在移动设备2的GUI5上提供的图形信息、或音频信息。
步骤S20到S22由家用电器执行,步骤S24到S27由移动设备执行,S23部分地由家用电器并且部分地由移动设备执行。
为了传输信息,可以使用时域空间复用编码算法。图6示出了被分段为时隙的时间段T。通过使用所述时域空间复用编码算法,受保护有效载荷数据可以用分段方式传输,即受保护有效载荷数据的数据段在彼此之后传输。在图6中,“数据1”和“数据2”形成此类数据段。在本实例中有n个数据段(其中n是自然数)的一组数据段可以表示代表待传输某种信息的码字。所述n个数据段覆盖时间段T,在该时间段中传输完整的码字。
图7示出了七段显示器,该七段显示器包括用于显示光学符号的七个条A到G以及一个点DP。使用七段显示器,条A到G可以用于基于条A到G是打开或关闭的信息来创建码字。例如,所有条A到G可以用于创建码字的比特。替代性地,仅有第一子集条可以用于创建码字的比特,并且第二子集信息可以用于辨识七段显示器在捕捉到的光学信息中的空间对准。
点DP可以用于同步性问题。更详细地,点DP可以根据某一模式接通/断开以便实现移动设备2的数据处理相对于家用电器的GUI 3上的数据提供的同步。但是,七段显示器8的其他条/段也可以用于同步性。例如,数字编码可以被选择成使得两个连续符号总是不同的。由此,可以基于符号本身的跳动实现同步性。
图8和图9示出了根据实例的借助于七段显示器提供数字信息。在家用电器1上提供的七段显示器8的第一子集条可以用于辨识所述显示器在捕捉到的信息内的空间对准。根据图7的实施例,条A、D、E、F、G(形成“E”)可以用于辨识空间对准。例如,第一子集条可以在整个信息提供期间连续打开。基于第一子集条,可以实现移动设备6相对于家用电器1的GUI 3的某种对准,以相应地辨识七段显示器在相机6捕捉到的光学信息内的空间对准。更详细地,基于第一子集条,例如通过改变移动设备的位置、相应地改变缩放系数使得第一子集条与在移动设备2的GUI 5上提供的相应对准信息(例如标记4)匹配,可以将移动设备2对准。
因而,第一子集条可以构建上述光学参考信息(ORI)。
剩余的条可以形成用于在七段显示器8上提供所述受保护有效载荷信息的另一子集条。在本实例中,根据图7的条B和C用于提供所述受保护有效载荷信息。
将另一子集条中的条进行时变切换可以用于对受保护有效载荷信息进行编码传输。根据本实例,两个比特的信息在根据图6的时隙中提供的数据段中传输。取决于根据图7的条B、C的切换,以下比特元组是可能的:(b1=0,b2=0);(b1=0,b2=1);(b1=1,b2=0)以及(b1=1,b2=1),其中图8示出了表示比特元组(b1=0,b2=0)的符号,并且图9示出了表示比特元组(b1=0,b2=1)的符号。
假设码字包括4比特的有效载荷和4比特的错误校正信息,4个符号的序列必须在家用电器1的GUI 3上显示、由相机6捕捉并且处理以便在移动设备2处接收码字。
图10示出了此类码字的比特元组的安排,其中比特b1到b4表示有效载荷比特,并且比特p1到p4表示错误校正信息。通过在随后的时隙中在家用电器1的GUI 3上显示四个符号来传输有效载荷信息,相应比特元组(b1,b2)(b3,b4)(p1,p2)以及(p3,p4)以时间扩展方式传输。时间段T之后(在当前情况下跨越四个时隙),在移动设备处接收到一个码字。
为了满足奈奎斯特判据(Nyquist criterion),相机6的采样率、即图像捕捉频率应该是在家用电器1的GUI 3上提供的符号所采用的符号率的至少两倍。例如,假如相机6能够每秒记录24个图像,那么必须执行每秒有至少12个时隙的时分复用方案。
有效载荷信息的比特传输率可以基于以下方程确定:
比特PL/秒=fps*符号/时隙*比特/符号*比特PL/比特enc
其中,
比特PL/秒:是有效载荷比特的比特率;
fps:是时隙率(每秒的时隙);
符号/时隙:是每个时隙的符号个数;
比特PL:码字中包括的有效载荷比特的个数;
比特enc:码字中包括的编码比特的个数。
参考根据图8到图10的上述实施例并且假设时隙率为12时隙/秒,有效载荷比特的比特率可以是12比特/秒。
上述实施例仅使用七段显示器的两条进行数据传输。但是,可以使用最多达七条进行数据传输,由此增大有效载荷比特率。
在下文中,将进一步详细描述在移动设备上运行的应用。如前所述,应用被适配用于捕捉图像序列或视频序列,其捕捉率被适配成在家用电器1的GUI 3上显示的符号的符号率。
此外,应用必须辨认并且解码相机6捕捉到的图像中的符号。例如,应用可以使用符号辨识例程来确定哪个符号已经被相机捕捉到。所述符号辨识例程可以例如使用OCR(光学字符辨识)算法来确定符号。确定符号之后,应用可以将辨识出的符号转化成与辨识出的符号相关联的比特序列。由此恢复受保护有效载荷。
通过基于受保护有效载荷中包括的错误校正信息执行错误校正,所述受保护有效载荷可以被转化成有效载荷信息。
最后,形成码字或码字一部分的有效载荷信息可以转化成人类使用者可以理解的信息。信息可以被提供在用户界面上、例如在移动设备2的GUI 5上。
应注意的是,说明书和附图仅展示了所提出的方法和家用电器的原理。本领域技术人员将能够实施体现本发明的原理的尽管没有在此明确地描述或示出的各种安排。
附图标记清单
1 家用电器
2 移动设备
3 (家用电器的)图形用户界面
4 标记
5 图形用户界面(移动设备)
6 相机
7 标志
8 七段显示器
9 标识
DP 点
ORI 光学参考信息
T 时间段

Claims (22)

1.一种用于在家用电器(1)与移动设备(2)之间交换信息的方法,该方法包括以下步骤:
-在该家用电器(1)的图形用户界面(3)上提供光学信息(S10);
-基于一个或多个标记(4)或者基于提供的光学信息的非时变部分将该移动设备(2)相对于该家用电器(1)对准(S11);
-在该移动设备(2)处通过利用该移动设备(2)的相机(6)捕捉在该家用电器(1)上提供的所述光学信息来接收光学信息(S12);
-处理在该移动设备(2)上接收到的光学信息,以便通过该移动设备(2)得出接收到的光学信息中所包含的信息消息(S13);
-在该移动设备(2)的用户界面上提供所述信息消息(S14),
其中,该家用电器(1)的图形用户界面(3)包括被适配用于显示一个或多个数字的七段显示器(8),以及
其中,所述七段显示器(8)的第一子集条用于提供用于对准目的的光学参考信息ORI。
2.根据权利要求1所述的方法,其中,所述一个或多个标记(4)包括框或框的多段。
3.根据权利要求1或2所述的方法,其中,所述一个或多个标记(4)是拐角标记。
4.根据以上权利要求1或2所述的方法,其中,对准的步骤包括:借助于该移动设备(2)的所述相机(6)捕捉该家用电器(1)上的光学参考信息ORI、以及安排该移动设备(2)和/或在该移动设备(2)处执行缩放动作,使得所述光学参考信息ORI显示在该移动设备(2)的图形用户界面(5)上并且所述光学参考信息ORI配合到所述一个或多个标记中。
5.根据权利要求4所述的方法,其中,所述光学参考信息ORI包括该家用电器(1)的图形用户界面(3)的固定区域,或者参考信息暂时地显示在该家用电器(1)的图形用户界面(3)上。
6.根据权利要求4所述的方法,其中,该光学参考信息ORI由固定的、永久存在的标志(7)构建。
7.根据权利要求6所述的方法,其中,该标志(7)是印记、凸起、或标识。
8.根据权利要求1或2所述的方法,其中,在所述对准期间,该家用电器(1)的示出了所述光学信息的图形用户界面部分显示在该移动设备(2)的图形用户界面(5)上、并且配合到该移动设备(2)的所述图形用户界面(5)的区域中,所述区域被所述一个或多个标记(4)限定。
9.根据权利要求6所述的方法,其中,所述固定的、永久存在的标志(7)配合到该移动设备(2)的图形用户界面(5)的区域中,该区域被所述一个或多个标记(4)限定。
10.根据权利要求1或2所述的方法,其中,在该家用电器(1)的图形用户界面(3)上显示的所述光学信息是非时变的。
11.根据权利要求1或2所述的方法,其中,在该家用电器(1)的图形用户界面(3)上显示的所述光学信息包括时变信息。
12.根据权利要求1或2所述的方法,其中,该相机(6)接收到的信息被实时或几乎实时处理成数字信息。
13.根据权利要求1或2所述的方法,其中,所述得出的信息消息包括关于错误代码、警告、或使用统计的信息。
14.根据权利要求1或2所述的方法,其中,在将该移动设备(2)对准之后手动地或自动地开始处理所述接收到的光学信息。
15.根据权利要求1或2所述的方法,其中,所述光学信息包括含有错误校正信息的数字编码信息序列。
16.根据权利要求1所述的方法,其中,基于该七段显示器(8)的点状部分(DP)使该移动设备上的信息处理与该家用电器上的信息提供同步。
17.根据权利要求1或2所述的方法,其中,所述光学信息包括基于帧结构传输的数字编码信息序列,该帧结构包括该数字编码信息的数据段在其中传输的多个时隙。
18.根据权利要求1或2所述的方法,其中,七段显示器(8)的第二子集条用于在该家用电器(1)的图形用户界面(3)上提供数字编码信息。
19.根据权利要求18所述的方法,该第二子集条是七段显示器(8)的两条或更多条。
20.根据权利要求17所述的方法,其中,七段显示器(8)的一个数字在所述帧结构的时隙中提供两个或更多个比特的数字信息。
21.根据权利要求1或2所述的方法,其中,该移动设备(2)基于光学字符辨识OCR算法提取出包含在所捕捉到的光学信息中的符号。
22.一种家用电器(1),包括用于提供光学信息的图形用户界面(3),该家用电器(1)被适配成基于根据以上权利要求中任一项所述的方法与移动设备(2)交换信息。
CN201780058951.6A 2016-11-09 2017-10-04 用于在家用电器与移动设备之间交换信息的方法 Active CN109791728B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP16197962.0A EP3321910B1 (en) 2016-11-09 2016-11-09 Method for exchanging information between a household appliance and a mobile device v
EP16197962.0 2016-11-09
PCT/EP2017/075228 WO2018086803A1 (en) 2016-11-09 2017-10-04 Method for exchanging information between a household appliance and a mobile device

Publications (2)

Publication Number Publication Date
CN109791728A CN109791728A (zh) 2019-05-21
CN109791728B true CN109791728B (zh) 2021-12-14

Family

ID=57326191

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780058951.6A Active CN109791728B (zh) 2016-11-09 2017-10-04 用于在家用电器与移动设备之间交换信息的方法

Country Status (5)

Country Link
US (1) US10742437B2 (zh)
EP (3) EP3321910B1 (zh)
CN (1) CN109791728B (zh)
AU (3) AU2017358416B2 (zh)
WO (1) WO2018086803A1 (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1643826A (zh) * 2002-01-24 2005-07-20 艾默生电气公司 通过发光二极管实现电器设备通信的系统和方法
CN101751767A (zh) * 2008-12-08 2010-06-23 先进国际有限公司 智能型家电控制系统
CN101908186A (zh) * 2009-06-08 2010-12-08 北京西阁万投资咨询有限公司 一种信息系统
CN102542460A (zh) * 2010-12-30 2012-07-04 广州闪购软件服务有限公司 一种基于二维码的购物方法
CN103221963A (zh) * 2010-11-23 2013-07-24 艾科星科技公司 使用动态矩阵代码产生促进电子装置的用户支持
CN103685612A (zh) * 2012-09-26 2014-03-26 西门子公司 用于传输地址信息、诊断信息和/或配置信息的方法、基础设施设备以及诊断设备
WO2015090825A1 (de) * 2013-12-18 2015-06-25 BSH Hausgeräte GmbH System mit einem haushaltsgerät und einem funktionsmodul, haushaltsgerät, funktionsmodul und entsprechendes verfahren

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107092614B (zh) * 2010-08-09 2021-04-20 Sk 普兰尼特有限公司 集成图像搜索终端、设备及其服务方法
TW201222241A (en) * 2010-11-26 2012-06-01 Askey Computer Corp Test assist device
WO2014107681A1 (en) * 2013-01-04 2014-07-10 Awyse, Inc. System and method for providing augmented reality on mobile devices
US10657808B2 (en) * 2013-03-15 2020-05-19 John Lindsay Vehicular communication system
ITMI20131455A1 (it) * 2013-09-05 2015-03-06 Aldo Ciavatta Metodo e apparato per la visualizzazione da remoto di contenuti informativi dinamici
US20160323108A1 (en) * 2015-04-29 2016-11-03 International Business Machines Corporation Accessing Content by Processing Secure Optical Codes
US20180247287A1 (en) * 2015-08-19 2018-08-30 Omnyway, Inc. Methods and systems for performing a mobile-to-business anywhere ecommerce transaction using a mobile device
US20180247298A1 (en) * 2015-09-10 2018-08-30 Omnyway, Inc. Methods and systems for communicating scanned item information between merchant equipment for scanning or selecting an item and a mobile device
US10615994B2 (en) * 2016-07-09 2020-04-07 Grabango Co. Visually automated interface integration

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1643826A (zh) * 2002-01-24 2005-07-20 艾默生电气公司 通过发光二极管实现电器设备通信的系统和方法
CN101751767A (zh) * 2008-12-08 2010-06-23 先进国际有限公司 智能型家电控制系统
CN101908186A (zh) * 2009-06-08 2010-12-08 北京西阁万投资咨询有限公司 一种信息系统
CN103221963A (zh) * 2010-11-23 2013-07-24 艾科星科技公司 使用动态矩阵代码产生促进电子装置的用户支持
CN102542460A (zh) * 2010-12-30 2012-07-04 广州闪购软件服务有限公司 一种基于二维码的购物方法
CN103685612A (zh) * 2012-09-26 2014-03-26 西门子公司 用于传输地址信息、诊断信息和/或配置信息的方法、基础设施设备以及诊断设备
WO2015090825A1 (de) * 2013-12-18 2015-06-25 BSH Hausgeräte GmbH System mit einem haushaltsgerät und einem funktionsmodul, haushaltsgerät, funktionsmodul und entsprechendes verfahren

Also Published As

Publication number Publication date
EP3539112A1 (en) 2019-09-18
AU2022204055B2 (en) 2024-03-14
EP3321910B1 (en) 2022-09-14
AU2022204055A1 (en) 2022-06-30
US10742437B2 (en) 2020-08-11
CN109791728A (zh) 2019-05-21
US20190319816A1 (en) 2019-10-17
EP4123614A1 (en) 2023-01-25
AU2017358416B2 (en) 2022-03-10
EP3321910A1 (en) 2018-05-16
AU2024203912A1 (en) 2024-06-27
AU2017358416A1 (en) 2019-04-04
WO2018086803A1 (en) 2018-05-17
EP3539112B1 (en) 2022-09-21

Similar Documents

Publication Publication Date Title
CN105450299B (zh) 信号的编解码方法及系统
MY174793A (en) Methods and apparatus employing fec codes with permanent inactivation of symbols for encoding and decoding processes
RU2010114716A (ru) Мультиплексные маяковые символы для системы беспроводной связи
AU2003268933A1 (en) Message authentication code based on error correcting code
WO2010151043A3 (en) Methods and apparatus to encode bandwidth request message
CN109791728B (zh) 用于在家用电器与移动设备之间交换信息的方法
Fath et al. Wireless data transmission using visual codes
US7990292B2 (en) Method for transmission of a digital message from a display to a handheld receiver
JP2017002898A (ja) 真空装置の遠隔診断
CN105791527A (zh) 一种移动终端通信录的传输方法及装置
Marcu et al. Flicker free VLC system with automatic code resynchronization using low frame rate camera
CN100479001C (zh) 电视遥控器按键的语音提示方法
US9160601B2 (en) Frame structure for a QAM system
Nguyen et al. Novel 2D-sequential color code system employing image sensor communications for optical wireless communications
CN102841928A (zh) 网间文件安全发送、接收方法及装置
CA2612978A1 (en) Synchronous one-bit interface protocol or data structure
WO2001010039A3 (de) Verfahren zum erzeugen von zuverlässigkeitsinformationen für die kanaldecodierung in einem funkempfänger sowie entsprechender funkempfänger
CN108123721B (zh) 编码方法及装置
Kim et al. Transmission methods using RS codes to improve spatial relationship of images in reversible data hiding systems
CN208112666U (zh) 一种经济科信息展示用ppt演示系统
CN113352318B (zh) 一种智能机器人通信链路自检选择方法
CN103677230A (zh) 数据传输装置
EP1965497B8 (en) Distributed arithmetic coding method
CN103065456B (zh) 一种带摇控器功能的键盘
CN102270289A (zh) 点击方式实现身份认证的电子装置、系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant