CN105723635A - 家用电器及移动终端 - Google Patents

家用电器及移动终端 Download PDF

Info

Publication number
CN105723635A
CN105723635A CN201480062596.6A CN201480062596A CN105723635A CN 105723635 A CN105723635 A CN 105723635A CN 201480062596 A CN201480062596 A CN 201480062596A CN 105723635 A CN105723635 A CN 105723635A
Authority
CN
China
Prior art keywords
information
electrical appliance
household electrical
sound
mobile terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480062596.6A
Other languages
English (en)
Other versions
CN105723635B (zh
Inventor
申泰东
李株完
金洛榕
李承勋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020130111223A external-priority patent/KR102243641B1/ko
Priority claimed from KR1020130111222A external-priority patent/KR102080514B1/ko
Priority claimed from KR1020140060574A external-priority patent/KR102198182B1/ko
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN105723635A publication Critical patent/CN105723635A/zh
Application granted granted Critical
Publication of CN105723635B publication Critical patent/CN105723635B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2823Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2827Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B11/00Transmission systems employing sonic, ultrasonic or infrasonic waves
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/284Home automation networks characterised by the type of medium used
    • H04L2012/2841Wireless
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/285Generic home appliances, e.g. refrigerators

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)
  • Selective Calling Equipment (AREA)
  • Telephone Function (AREA)

Abstract

公开了一种家用电器及移动终端。所述家用电器包括驱动单元;被配置为输出声音的声学输出模块;被配置为从外部源接收声音的麦克风;被配置为当家用电器正在被操作时存储与家用电器相关的信息的存储器;被配置为基于声学通信模式将包含与家用电器相关的信息的声音输出到声学输出模块或者从经由麦克风接收到的声音提取指定信息的声学通信单元;以及被配置为根据由声学通信单元提取的信息来控制驱动单元的控制器。经由声学通信实现家用电器与移动终端之间的信息传送。

Description

家用电器及移动终端
技术领域
本发明涉及一种家用电器及移动终端,并且更具体地,涉及一种能够在家用电器与移动终端之间传送信息的家用电器及移动终端。
背景技术
在放置于建筑物中的家用电器中,为了方便用户,冰箱执行食物储存功能,衣物处理装置执行衣物处理功能,空调执行室内温度控制功能,以及烹调电器执行食物烹调功能。
同时,随着各种通信技术的发展,已经研究出经由与家用电器进行通信来提高用户的便利性的各种措施。
发明内容
技术问题
本发明的目的是提供一种使得能够经由声学通信在家用电器与移动终端之间传送信息的家用电器及移动终端。
解决问题的方案
根据本发明的一个实施例,上述和其它目的可以通过提供一种家用电器实现,所述家用电器包括:驱动单元;被配置为输出声音的声学输出模块;被配置为从外部源接收声音的麦克风;被配置为当家用电器正在被操作时存储与家用电器相关的信息的存储器;被配置为基于声学通信模式将包含与家用电器相关的信息的声音输出到声学输出模块或者从经由麦克风接收到的声音提取指定信息的声学通信单元;以及被配置为根据由声学通信单元提取的信息来控制驱动单元的控制器。
根据本发明的另一个实施例,提供一种移动终端,包括:被配置为显示指定屏幕的显示器;被配置为输出声音的声学输出模块;被配置为从外部源接收声音的麦克风;被配置为基于声学通信模式将包含与屏幕相关的信息的声音输出到声学输出模块或者从通过麦克风接收到的声音提取指定信息的声学通信单元;以及被配置为控制由声学通信单元提取的信息在显示器上的显示的控制器。
发明的有益效果
从上面的描述显而易见的是,根据本发明的一个实施例,家用电器可以经由声学通信接收包含与在移动终端上显示的屏幕相关的信息的声音并执行对应于接收到的信息的操作。因此,家用电器可以以用户期望的方式被简单地操作。
根据本发明的替代实施例,当家用电器正在被操作时,家用电器可以存储家用电器相关信息并经由声学通信输出包含所存储的信息的声音。因此,家用电器可以简单地传送用户期望的信息。
根据本发明的一个实施例,移动终端可以经由声学通信输出包含与显示在其上的屏幕相关的信息的声音。然后,家用电器可以接收声音,并从接收到的声音提取信息。因此,移动终端设备可以简单地将用户期望的信息传送到家用电器,这可以提高用户的便利性。
根据本发明的一个替代实施例,移动终端可以经由声学通信从家用电器接收包含与显示在其上的屏幕相关的信息的声音。因此,移动终端可以简单地从家用电器接收用户期望的信息,这可以提高用户的便利性。
根据本发明的另一个实施例,当接收到的声音的强度是指定值或更大时或者当所提取的服务集标识符的误码率是指定值或更小时,移动终端可以从家用电器接收包含服务集标识符的声音并基于服务集标识符将指定接入点设备的网络信息输出到家用电器。因此,家用电器可以基于接收到的网络信息简单地执行家用电器的网络设置。此外,可以增强信息传送的安全性。
此外,当接收到的声音的强度是指定值或更大时或者当所提取的服务集标识符的误码率是指定值或更小时,移动终端可以输出包含网络信息的声音,并且家用电器可以基于网络信息简单地执行家用电器的网络设置。
此外,移动终端可以存储从家用电器接收到的家用电器的产品信息。此后,在远程控制后,移动终端可以基于产品信息远程访问家用电器。
根据本发明的又一个实施例,家用电器可以从外部源接收声音,并从声音提取信息。当所提取的信息包括与另一个家用电器相关的信息时,家用电器可以输出包含相关信息的声音。这样,在家用电器之间共享包含在声音中的信息是可能的,这可以提高用户的便利性。
更具体地,包含信息的声音可以经由邻近目标家用电器的至少一个家用电器输出,并且最后,目标家用电器可以接收相关信息。
当包含在从另一个家用电器接收到的声音中的信息包括操作控制命令时,目标家用电器可以执行对应的操作。此外,当包含在声音中的信息包含语音备忘录时,家用电器可以在存储器中存储语音备忘录,从而执行各种操作。用这种方式,可以提高用户的便利性。
附图说明
通过以下结合附图的详细描述可以更清楚地理解本发明的上述和其它的目的、特征和其它优点,在附图中:
图1是示出根据本发明的一个实施例的通信系统的配置的一个示例的视图。
图2a到图2e是在移动终端与家用电器之间的声学通信的各种示例的示意图;
图3a是示出图1的家用电器的内部配置的一个示例的简要框图;
图3b是示出图1的家用电器的内部配置的另一个示例的简要框图;
图4a到图4d是用于说明图1的声学通信的参考视图;
图5是示出图1的服务器的内部配置的框图;
图6是示出图1的移动终端的内部配置的框图;
图7是示出根据本发明的一个实施例的移动终端的操作方法的流程图;
图8是示出根据本发明的一个实施例的家用电器的操作方法的流程图;
图9到图13e是用于说明图7或图8的操作方法的参考视图;
图14是示出根据本发明的另一个实施例的移动终端的操作方法的流程图;
图15是示出根据本发明另一个实施例的家用电器的操作方法的流程图;
图16a到图22c是用于说明图14或图15的操作方法的参考视图;
图23是示出根据本发明的另一个实施例的移动终端的操作方法的流程图;
图24a到图27d是用于说明图23的操作方法的参考视图;
图28是示出根据本发明的又一个实施例的家用电器的操作方法的流程图;
图29是示出根据本发明的又一个实施例的家用电器的操作方法的流程图;以及
图30到图35b是用于说明图28或图29的操作方法的参考视图。
具体实施方式
以下,将参照附图对本发明进行详细描述。
相对于在以下说明书中使用的构成要素,考虑到说明书准备的便利,提供或者混用后缀“模块”和“单元”,并且不具有或不用作不同的意思。因此,后缀“模块”和“单元”可以彼此混用。
图1是示出根据本发明的一个实施例的通信系统的配置的一个示例的视图。
参见附图,根据本发明的一个实施例的通信系统(由附图标记10指定),可以包括家用电器200、移动终端600和服务器500。
特别地,对于本发明的一些实施例,家用电器200和移动终端600可以执行声学通信(或声音通信)。
在本发明的一些实施例中,声学通信意指输出可听频带的声音和将指定信息数据添加到声音里。信息数据的这种添加需要信号调制。在本发明的一些实施例中,假设基于复数调制重叠变换(MCLT)进行信号调制。
更具体地,移动终端600可以经由声学通信使用声音输出模块653输出包含与在移动终端600上显示的屏幕相关的信息的声音。然后,家用电器200可以使用麦克风223接收输出声音,然后提取包含在声音中的信息来接收对应的信息。这样,移动终端600可以简单地将相关的信息传送到家用电器200,这可以提高用户的便利性。
在一个示例中,在移动终端600上显示的屏幕示出与家用电器相关的电力信息的情况下,移动终端600可以输出包含与家用电器相关的电力信息的声音。
在另一个示例中,在移动终端600上显示的屏幕示出与家用电器相关的食谱的情况下,移动终端600可以输出包含食谱信息的声音。
在另一个示例中,在移动终端600上显示的屏幕示出与家用电器相关的驱动程序或驱动程序列表的情况下,移动终端600可以输出包含与家用电器相关的驱动程序信息的声音。
在另一个示例中,在移动终端600上显示的屏幕示出与家用电器相关的固件的情况下,移动终端600可以输出包含与家用电器相关的固件信息的声音。
在又一个示例中,在移动终端600上显示的屏幕示出接入点设备列表屏幕的情况下,移动终端600可以输出包含与接入点设备相关的网络信息的声音。
同时,移动终端600可以经由声学通信接收从麦克风223输出的包含预先存储在家用电器200中的信息的声音。然后,移动终端600可以从接收到的声音提取对应的信息,从而简单地接收来自家用电器200的相关信息,这可以提高用户的便利性。
为此,家用电器200可以频繁地存储家用电器相关信息。例如,家用电器200在存储器260中存储家用电器相关信息,诸如操作状态信息、操作历史信息、产品信息、故障信息、电力消耗信息、储存物品信息、食谱信息等。
这里,假设当前正在操作家用电器,则操作状态信息可以包括操作持续时间、到目前为止的操作时间、剩余操作时间、当前操作类型等。
操作历史信息可以包括特定期间家用电器的操作历史。
例如,操作历史信息可以包括冰箱200a的门打开/关闭历史、洗衣机200b的常用操作程序、洗衣机200b的操作期间的用水量、空调200c执行冷却操作的次数、冷却温度设定、空调200c的内部被清洁的次数、烹调电器200d的常用程序和常选冷却时间、清扫器200e执行清扫操作的次数、清扫器200e的清扫时间区域和清扫程序。
产品信息可以包括家用电器产品(冰箱,洗衣机等)的种类、产品制造日期、产品序列号、安装在产品中的固件的种类/版本等。
当家用电器发生故障时,故障信息可以包括关于家用电器的故障部件的信息、故障发生时间以及关于发生故障时正在被执行的操作的信息。
电力消耗信息可以包括所消耗的电量、取决于所消耗的电量的成本等。
储存物品信息可以包括,在冰箱200a的情况下,储存在冰箱200a中的食物的种类、所储存的食物的位置、食物的量、食物的到期日期、食物的入库日期等。食谱信息可以包括,在冰箱200a的情况下,对应于储存在冰箱200a中的食物的种类的可能的烹调食谱。可替代地,食谱信息可以包括可以由烹调电器200d烹调的食谱。
同时,移动终端600可以在移动终端600上显示从家用电器200接收的信息。这样,用户可以容易地检查接收到的信息。
此外,移动终端600可以将从家用电器200接收到的信息传送到服务器500,并接收传送结果。这样,用户可使用移动终端600简单地管理家用电器200。
在一个示例中,在移动终端600从家用电器200接收故障信息的情况下,移动终端600可以将故障信息传送到服务器500,并从服务器500接收故障结果信息。
在另一个示例中,在移动终端600从家用电器200接收产品信息的情况下,移动终端600可以将产品信息传送到服务器500,并从服务器500接收产品结果信息。
在又一个示例中,在移动终端600从家用电器200接收电力消耗信息的情况下,移动终端600可以将电力消耗信息传送到服务器500,并从服务器500接收节电操作信息或电力信息。这里,电力信息可以是关于电价、高峰时间电力、非高峰时间电力和实时电力信息。
通过如上所述的声学通信,移动终端600和家用电器200可以分别只使用声学输出模块和麦克风简单地传送和接收信息。特别地,家用电器200无需单独的无线通信模块(诸如,WiFi模块),并因此可降低家用电器200的制造成本。
家用电器200是用于个人使用的电子设备,并且例如,可以是冰箱200a、洗衣机200b、空调200c、烹调电器200d或清扫器200e。此外,家用电器200可以包括电视机等。
移动终端600可以是蜂窝电话、智能电话、膝上型计算机、平板PC等。
图2a到图2e是在移动终端与家用电器之间的声学通信的各种示例的示意图。
图2a示例出在移动终端600与冰箱200a之间的声学通信的实施。图2b示例出在移动终端600与洗衣机200b之间的声学通信的实施。图2c示例出在移动终端600与空调200c之间的声学通信的实施。图2d示例出在移动终端600与烹调电器200d之间的声学通信的实施。图2e示例出在移动终端600与清扫器200e之间的声学通信的实施。
如在图2a到图2e中示例性示出的,可以进行从移动终端输出的声音的声学通信、从家用电器输出的声音的声学通信和它们的组合。
图3a是示出图1的家用电器的内部配置的一个示例的简要框图。
参见附图,家用电器200可以包括用于用户输入的输入单元220、用于显示例如家用电器200的操作状态的显示单元230、用于与其它外部设备进行通信的通信单元222、用于驱动家用电器200的驱动单元245、用于接收远程控制信号的远程控制信号接收器257、存储器260以及用于内部控制的控制器270。
输入单元220可以包括各种按钮以操作家用电器200。例如,输入单元220可以包括电源开/关按钮、启动/停止按钮等。来自输入单元220的按钮操作信号可以被传送到控制器270。
在一个示例中,在冰箱200a的情况下,驱动单元245可以包括冷藏室驱动单元和冷冻室驱动单元。
在另一个示例中,在洗衣机200b的情况下,驱动单元245可以包括用于驱动盛水桶或滚筒的驱动单元。
在另一个示例中,在空调200c的情况下,驱动单元245可以包括室外单元压缩机驱动单元、室外单元风扇驱动单元和室内单元风扇驱动单元。
在另一个示例中,在烹调电器200d的情况下,驱动单元245可以包括用于将微波输出到腔室中的微波驱动单元。
在又一个示例中,在清扫器200e的情况下,驱动单元245可以包括风扇电机驱动装置。
通信单元222可以包括用于使能声学通信的声学通信单元217和无线通信单元218。下面将参照图4a到图4d对声学通信单元217进行描述。
无线通信单元218使能无线通信,诸如Zigbee、WiFi等。特别地,无线通信单元218可以经由诸如WiFi等无线通信连接到接入点设备,并且可以与接入点设备进行数据交换。
例如,显示单元230可以在控制器270的控制下显示家用电器200的操作状态。为此,显示单元230可以包括发光二极管(LED)显示单元。可替代地,例如,显示单元230可以包括液晶显示器(LCD)单元,用于显示信息。
存储器260可以存储用于家用电器200的一般性操作的数据。同时,存储器260可以包括语音识别算法。
麦克风223可以接收用户语音,并将用户语音转换成电信号以将其传送到控制器270。
声学输出模块253将来自控制器270的电信号转换成音频信号并将其输出。为此,声学输出模块253可以包括例如扬声器。
远程控制信号接收器257可以接收用于操作家用电器200的远程控制信号。远程控制信号可以是来自远程控制设备或移动终端的红外(IR)信号。可替代地,远程控制信号可以是射频(RF)信号。
远程控制信号接收器257可以处理接收到的远程控制信号以将其传送到控制器270。例如,电源开/关信号、操作启动/停止信号等可以被传送到控制器270。
控制器270可以控制家用电器200的一般性操作。控制器270可以控制输入单元220、显示单元230、通信单元222、驱动单元245、远程控制信号接收器257、存储器260等的操作。
图3b是示出图1的家用电器的内部配置的另一个示例的简要框图。
参见附图,尽管示出家用电器的内部配置的图3b的框图类似于示出家用电器的内部配置的图3a的框图,但它们之间的区别在于另外设置了微型计算机221。
在家用电器包括显示单元230的情况下,可以包括显示微型计算机221以控制显示单元230。在这种情况下,控制器270用作主微型计算机并且被安装在与显示微型计算机221不同的电路板上。
在如本实施例中的家用电器包括声学通信单元217以使能声学通信的情况下,通信单元222,更具体地,声学通信单元217可以被安装在与显示微型计算机221相同的电路板上。这样,如图3b示例性示出的,声学通信单元217主要由显示微型计算机221控制,并通过控制器270(即主微型计算机270)进行二次控制。
图4a到图4d是用于说明图1的声学通信的参考视图。
首先,图4a示出移动终端600输出声音以及家用电器200经由声学通信接收输出声音。
为此,移动终端600可以包括声学通信单元617和声学输出模块653,并且家用电器200可以包括麦克风223和声学通信单元217。
移动终端600的声学通信单元617从控制器680接收数字声音并将指定数据添加到数字声音,以输出调制后的声音。然后,声学输出模块653经由可听频带的声学通道输出调制后的声音。
家用电器200的麦克风223接收从移动终端600输出的声音。然后,麦克风223将接收到的声音传送到声学通信单元217。声学通信单元217从声音提取数据。
这样,可以在移动终端600与家用电器200之间进行简化的信息数据交换。
同时,以与图4a相反的顺序,家用电器200可以输出声音,并且移动终端600可以经由声学通信接收输出声音,并且家用电器200和移动终端600可以执行双向声学通信。
*用这种方式,除声学通信单元617和声学输出模块653之外,移动终端600可以包括麦克风623,并且除麦克风223和声学通信单元217之外,家用电器200可以包括声学输出模块253。
图4b是示出移动终端600的声学通信单元617和家用电器200的声学通信单元217的内部配置的框图。
为了输出声音,移动终端600的声学通信单元617可以包括变频器410、数据插入器415、逆变器420和多路转换器425。
变频器410可以接收待输出的时域音频信号,并执行音频信号的频率转换。频率转换可以以帧为单位来执行,并且具体地,可以是基于复数调制重叠变换(MCLT)。
根据每帧重叠,MCLT可以有利地消除在帧边界处的块效应。
数据插入器415作用为将指定数据添加或插入到频率转换后的音频信号。即,数据经过调制被添加到音频信号。更具体地,数据可以通过在每个转换频率的基础上改变各种系数(幅度、相位等)之间的相位系数被添加。例如,可变相位系数可具有0度或180度的值。这样,可以区分要添加的数据。
逆变器420对插入有信息数据的音频信号执行逆变换。当变频器410执行MCLT时,逆变器420执行逆MCLT,并输出时域声音信号。
变频器410、数据插入器415和逆变器420可以在每帧的基础上执行对应的操作。
多路转换器425对经逆变换的音频信号进行多路转换并输出。即,多路转换器425对帧执行多路转换以依次输出声音。
声学输出模块253输出经多路转换的声音。为此,声学输出模块253可以包括至少一个扬声器。
家用电器200经由麦克风223接收声音并将声音转换成电信号。然后,家用电器200的声学通信单元217可以包括同步器430、变频器435和数据提取器440。
同步器430对接收到的音频信号进行同步。即,同步器430可以对经多路转换的音频信号进行同步,然后将其分成帧单元。
变频器435可以接收待输出的时域音频信号,并对音频信号执行频率转换。频率转换可以以帧为单位来执行,并且具体地,可以基于复数调制重叠变换(MCLT)。
数据提取器440从经频率转换的音频信号提取被添加的数据。如上所述,因为数据是通过在每个频率基础上改变各系数之间的相位系数被添加的,所以数据提取器440可以通过相位系数提取数据。特别地,当相位系数具有0度或180度的值时,可以基于相位系数的值来提取数据。
所提取的数据可以被传送到家用电器200的控制器270。
基于MCLT的声学通信使能数据的添加,同时保持类似于计划被最初输出的音频信号的声音。此外,基于MCLT的声学通信可以根据每帧重叠有利地减少在帧边界处的块效应。
图4c是图4b的声学通信单元617的操作和音频波的示意图。
参见示出待输出的音频信号400的附图,待输出的音频信号400可以基于时域被分成多个帧FR1到FR4。附图示出第一帧FR1中的第一音频信号400a、第二帧FR2中的第二音频信号400b、第三帧FR3中的第三音频信号400c和第四帧FR4中的第四音频信号400d。
变频器410在每帧的基础上对音频数据执行频率转换。具体地,变频器410执行基于MCLT的频率转换。
然后,数据插入器415在每帧的基础上将指定数据添加到经频率转换的音频信号。具体地,数据插入器415通过在每个转换的频率的基础上改变各系数(幅度、相位等)之间的相位系数来添加数据。
逆变器420在每帧的基础上对插入有信息数据的音频信号执行逆变换。这样,逆变器420输出时域声音信号。
类似于第一音频信号400a到第四音频信号400d,附图在每帧的基础上示出第一声音信号401a到第四声音信号401d。如从图中可以理解的,第一声音信号401a到第四声音信号401d是类似于计划被最初输出的音频信号。
*多路转换器425可以在每帧的基础上对添加有数据的声音信号进行多路转换以输出一个声音信号。
同时,虽然图4a到图4c示出移动终端600输出包含指定信息的声音,并且家用电器200接收对应的声音并从声音提取指定信息,但也可以是相反的情况。
即,家用电器200可以输出包含指定信息的声音并且移动终端600可以接收对应的声音并从声音提取指定信息。
在这种情况下,家用电器200的声学通信单元217可以包括变频器410、数据插入器415、逆变器420以及多路转换器425,并且移动终端600的声学通信单元617可以包括同步器430、变频器435和数据提取器440。
图4d示出移动终端600包括声学生成单元618以及家用电器200包括声学检测单元218。
图4d的移动终端600中的声学生成单元618类似于图4b的移动终端600中的声学通信单元617,但不同之处在于其生成音频数据并将输入数据添加到生成的音频数据中以将其输出。即,声学生成单元618可以生成音频数据,而不是从控制器680等接收音频数据。为此,除声学通信单元617的变频器410、数据插入器415、逆变器420和多路转换器425之外,声学生成单元618也可以包括单独的音频发生器(未示出)。
例如,声学生成单元618可以通过使用36个乐音组织四个弦来生成大约168,000个声音。然后,声学生成单元618可将数据添加到声音中。
接着,家用电器200中的声学检测单元218等同于图4b的家用电器200中的声学通信单元217。即,为了从接收到的声音提取数据,声音检测单元218可以包括同步器430、变频器435和数据提取器440。
图5是示出图1的服务器的内部配置的框图。
参见附图,服务器500可以包括通信模块530、存储单元540和处理器520。
通信模块530可以从移动终端600接收家用电器相关信息。然后,通信模块530可以将对应于接收到的家用电器相关信息的结果信息传送到移动终端600。
为此,通信模块530可以包括互联网模块或移动通信模块。
存储单元540可以存储接收到的家用电器相关信息,并且包括用于生成对应于家用电器相关信息的结果信息的数据。
在一个示例中,在家用电器相关信息是家用电器的故障信息的情况下,存储单元540可以存储用于家用电器的故障诊断的数据。
在另一个示例中,在家用电器相关信息是家用电器的产品信息的情况下,存储单元540可以存储接收到的用于家用电器的产品注册的产品信息。
在又一个示例中,在家用电器相关信息是家用电器的电力消耗信息的情况下,存储单元540可以存储电价信息、高峰时间电力信息、非高峰时间电力信息、实时电力信息等。
处理器520可以控制服务器500的一般性操作。
具体地,在从移动终端600接收到家用电器相关信息时,处理器520可以控制对应于家用电器相关信息的结果信息的生成。然后,处理器520可以控制将所生成的结果信息传送到移动终端600。
在一个示例中,在家用电器相关信息是家用电器的故障信息的情况下,处理器520可以使用存储在存储单元540中的故障诊断数据生成家用电器的故障诊断结果信息。
在另一个示例中,在家用电器相关信息是家用电器的产品信息的情况下,处理器520可以生成家用电器的产品注册结果信息。
在又一个示例中,在家用电器相关信息是家用电器的电力消耗信息的情况下,处理器520可以控制将存储在存储单元540中的电价信息、高峰时间电力信息、非高峰时间电力信息、实时电力信息等传送到移动终端600。
同时,服务器500可以是由家用电器200的制造商管理的服务器或者由出售与家用电器200相关的应用的商店的经营者管理的服务器。
图6是示出图1的移动终端的内部配置的框图。
参见图6,移动终端600可以包括无线通信单元610、音频/视频(A/V)输入单元620、用户输入单元630、感测单元640、输出单元650、存储器660、接口单元670、控制器680和电源单元690。
例如,无线通信单元610可以包括广播接收模块611、移动通信模块613、无线互联网模块615、声学通信单元617和全球定位系统(GPS)模块619。
广播接收模块611可以接收至少一个广播信号,并通过广播频道从外部广播管理服务器广播相关信息。在这种情况下,广播频道可以包括卫星频道、地面频道等。
经由广播接收模块611接收到的广播信号和/或广播相关信息可以被存储在存储器660中。
移动通信模块613与基站、外部终端和移动通信网络上的服务器中的至少一个执行无线电信号的传送和接收。这里,无线电信号可以包括语音呼叫信号、图像呼叫信号或者基于文本/多媒体消息传送和接收的各种类型的数据。
无线互联网模块615是用于无线互联网连接的模块。无线互联网模块615可以内部或外部地耦接到移动终端600。例如,无线互联网模块615可以执行基于WiFi的无线通信或基于WiFidirect的无线通信。
声学通信单元617可以执行声学通信。声学通信单元617可以在声学通信模式下将指定信息数据添加到待输出的音频数据中,从而输出声音。此外,声学通信单元617可以从在声学通信模式下从外部源接收的声音提取指定信息数据。下面将参照图4a到图4d对其详细说明进行描述。
短程通信技术的示例可以包括蓝牙、射频识别(RFID)、红外数据协会(IrDa)、超宽带(UWB)、紫蜂等。
GPS模块619可以从多个GPS卫星接收位置信息。
A/V输入单元620用于输入音频信号或视频信号并且可以包括例如摄像头621和麦克风623。
用户输入单元630用于生成由用户输入以控制终端的操作的关键输入数据。为此,用户输入单元630可以包括键盘、圆顶开关、触摸板(静压/静电)等。特别地,在触摸垫被层叠到显示器651之上的情况下,其可以被称为触摸屏。
感测单元640可以感测移动终端600的当前状态,诸如移动终端600的打开/关闭状态、移动终端600的位置、用户触摸的存在等,并生成感测信号以控制移动终端600的操作。
例如,感测单元640可以包括接近传感器641、压力传感器643和运动传感器645。例如,运动传感器645可以使用加速计、陀螺仪传感器、重力传感器等感测移动终端600的运动或位置。特别地,陀螺仪传感器用于测量角速度,并且可以感测偏离参考方向的方位(角度)。
例如,输出单元650可以包括显示器651、声学输出模块653、警报器655和触觉模块657。
显示器651显示并输出在移动终端600中处理的信息。
如上所述,在显示器651和触摸板彼此层叠以构造触摸屏的情况下,显示器651可以不仅用作输出设备,而且还用作经由用户触摸使得能够输入信息的输入设备。
声学输出模块653输出存储在存储器660中或从无线通信单元610接收的音频数据。声学输出模块653可以包括扬声器、蜂鸣器等。
报警器655用于输出信号,以通知移动终端600的事件的发生。例如,报警器655可以输出振动信号。
触觉模块657生成用户可以感知的各种触觉效果。由触觉模块657生成的触觉效果的代表性示例是振动。
存储器660可以存储用于处理和控制控制器680的程序,并且可以起到临时存储输入或输出数据(例如,电话簿、消息、静止图像和运动图像)的作用。
*接口单元670用作相对于连接到移动终端600的所有外部电器的接口。接口单元670可以从这些外部电器接收数据或者将接收到的电力传送到移动终端600的各个内部部件。接口单元670还可以执行移动终端600的内部数据到外部电器的传送。
控制器680通常控制上述单元的操作,以控制移动终端600的一般性操作。例如,控制器680可以执行与语音呼叫、数据通信、图像呼叫等相关的操作的控制和处理。此外,控制器680可以包括用于多媒体再现的多媒体再现模块681。多媒体再现模块681可以是控制器680中的硬件,或可以是与控制器680分离的软件。
在控制器680的控制下,在接收到外部电力或内部电力时,电源单元690提供操作各个部件所需的电力。
同时,如图6示例性示出的移动终端600的框图是基于本发明的一个实施例。框图的各个部件可以根据实际实施的移动终端600的规格被集成、添加或省略。例如,两个或多个部件可以根据需要被组合成单个部件或者单个部件可以根据需要被分成两个或多个部件。此外,部件的功能在本文中被阐述仅用于说明本发明的实施例并且部件的具体操作和配置不应当被解释为限制本发明的范围。
图7是示出根据本发明的一个实施例的移动终端的操作方法的流程图。图8是示出根据本发明的一个实施例的家用电器的操作方法的流程图,以及图9到图13e是用于说明图7或图8的操作方法的参考视图。
首先,参见图7,移动终端600在其显示器上显示指定屏幕(S710)。应注意,图9的步骤S910对应于图7的步骤S710。
特别地,响应于用户输入,移动终端600的控制器680控制对应的屏幕的显示器。
例如,在用户输入被输入以查看电力信息的情况下,电力信息屏幕可以被显示。电力信息屏幕可以在执行与家用电器相关的应用程序之后被显示,但不限于此。电力信息屏幕可以在用户直接访问电力供应公司的服务器以查看电力信息的情况下被显示。
图10a示出在移动终端600上显示电力信息屏幕610。附图示出电力信息屏幕610示出在对应的高峰时间处的高峰时间信息和价格信息。此外,电力信息屏幕610还可以示出非高峰时间电力信息、实时电力信息等。
接着,移动终端600判断移动终端600是否处于声学通信模式(S720)。在判断为声学通信模式后,移动终端600输出包含与在其上显示的屏幕相关的信息的声音(S730)。应注意,图9的步骤S920对应于图7的步骤S720和图8的步骤S820,并且图9的步骤S930对应于图7的步骤S730和图8的步骤S830。
图10b示出设置在移动终端600中的特定键601的选择。此选择可以允许移动终端600进入声学通信模式。可替代地,与所示出的不同的是,移动终端600可以在移动终端600中选择声学通信应用程序后进入声学通信模式。
如上面参照图4a到图4d所描述的,在进入声学通信模式后,移动终端600可以输出通过将信息数据添加到音频信号中获取的声音。特别地,移动终端600可以输出添加了与在移动终端600上显示的屏幕相关的信息的声音。
图10c示出移动终端600将与洗衣机200b相关的电力信息Spow传送到洗衣机200b。这样,洗衣机200b可以简单地从移动终端600获取电力信息。
接着,家用电器200从接收到的声音提取与在移动终端600上显示的屏幕相关的信息(S835)。然后,家用电器200基于所提取的与在移动终端600上显示的屏幕相关的信息执行对应的操作(S840)。应注意,图9的步骤S935和步骤S940分别对应于图8的步骤S835和步骤S840。
如以上参照图4a到图4d所描述的,在进入声学通信模式后,家用电器200可以从接收到的声音提取与屏幕相关的信息。然后,家用电器200的控制器270可以基于与屏幕相关的信息控制对应的操作的执行。
图10d示出基于图10c接收到的电力信息Spow实施洗衣机200b的节电驱动。
例如,洗衣机200b可以在除从13:00到15:00的高峰时间之外的时间被驱动,或者洗衣机200b可以在整个洗涤周期中,较少电力消耗的洗涤或漂洗过程与高峰时间重叠并且较大电力消耗的脱水或烘干过程绝对不与高峰时间重叠的方式被驱动。
图10a到图10d示出在移动终端600进入声学通信模式同时显示电力信息屏幕的情况下,电力信息Spow被传送到洗衣机200b并且洗衣机200b执行对应于接收到的电力信息Spow的节电操作。
应当理解的是,不同于图10a到图10d所示的,本发明的实施例的各种变化是可能的。
图11a到图11e示出在移动终端600进入声学通信模式同时显示食谱相关屏幕的情况下,移动终端600可以输出包含食谱信息Sreci的声音,并且烹调电器200d可以从接收到的声音提取食谱信息Sreci并执行对应于所提取的食谱信息Sreci的操作。
图11a示出移动终端600执行与烹调电器200d相关的应用程序,并显示与烹调电器200d相关的应用程序屏幕1110。
图11b示出移动终端600显示与烹调电器200d相关的应用程序屏幕的食谱相关屏幕1120。在附图中,示出与“苹果派”相关的食谱屏幕。
接着,图11c示出在移动终端600上显示食谱相关屏幕1120的状态下选择移动终端600的特定键601。这样,移动终端600可以进入声学通信模式。可替代地,不同于所示出的,移动终端600可以在选择移动终端600中的声学通信应用程序后进入声学通信模式。
因此,如图11d所示,移动终端600可以在声学通信模式下输出包含与“苹果派”相关的食谱信息Sreci的声音。这里,食谱信息可以包括烹调时间信息、烹调程序信息、烹调类型信息等。
如图11e所示,烹调电器200d基于从接收到的声音提取的与“苹果派”相关的食谱信息Sreci执行与“苹果派”相关的烹调操作。这样,用户可以通过直接按下或不按下烹调启动按钮而无需进行额外设置简单地烹调期望的食物(“苹果派”)。
图12a到图12e示出在移动终端600进入声学通信模式同时显示洗涤程序屏幕的情况下,移动终端600可以输出包含洗涤程序信息的声音,并且洗衣机200b可以从接收到的声音提取洗涤程序信息Scos并执行对应于所提取的洗涤程序信息Scos的操作。
图12a示出移动终端600执行与洗衣机200b相关的应用程序,并且显示与洗衣机200b相关的应用程序屏幕1210。
虽然附图示出与洗衣机200b相关的应用程序屏幕1210包括固件项和洗涤程序项1215,但各种变化也是可能的。
当选择洗涤程序项1215时,如图12b所示,移动终端600可以显示与洗衣机200b相关的应用程序屏幕的洗涤程序屏幕1220。附图示出与“程序a”相关的洗涤程序屏幕1220包括60分钟的洗涤过程、20分钟的漂洗过程和10分钟的脱水过程。
接着,图12c示出在移动终端600上显示洗涤程序屏幕1220的状态下选择移动终端600的特定键601。这样,移动终端600可以进入声学通信模式。可替代地,不同于图中所示的,移动终端600可以在选择移动终端600中的声学通信应用程序后进入声学通信模式。
因此,如图12d所示,移动终端600可以在声学通信模式下输出包含与“程序a”相关的洗涤程序信息Scos的声音。这里,与“程序a”相关的洗涤程序信息可以包括时间信息,诸如60分钟的洗涤过程、20分钟的漂洗过程和10分钟的脱水过程。
图12e示出洗衣机200b基于从接收到的声音提取的与“程序a”相关的洗涤程序信息Scos执行与“程序a”相关的操作。这样,用户可以简单地通过直接按下或不按下启动按钮而无需进行额外设置执行与所期望的洗涤程序(“程序a”)相关的洗涤。
图13a到图13e示出在移动终端600进入声学通信模式同时显示远程控制屏幕(更具体地,相对于空调200c的远程控制屏幕)的情况下,移动终端600可以输出空调远程控制信息Son,并且空调200c可以从接收到的声音提取空调远程控制信息Son并执行对应于所提取的空调远程控制信息Son的操作。
图13a示出移动终端600相对于家用电器200执行远程控制应用程序,并显示相对于家用电器200的远程控制屏幕1210。
在这种情况下,远程控制屏幕1210可以包括多个家用电器项以使能多个家用电器的远程控制。虽然附图通过示例的方式示出机器人清扫器项1312和空调项1315,但各种其它示例也是可能的。
如图13b所示,当选择空调项1315时,移动终端600可以显示相对于空调200c的远程控制屏幕1320。虽然附图示出相对于空调200c的远程控制屏幕1320包括电源项1325、温度调节项等,但是也可以显示各种其它项,诸如空气调节方向项、除湿操作项、操作时间调节项等。
同时,图13b示出电源项1325的选择或聚焦。
接着,图13c示出在移动终端600上显示相对于空调200c的远程控制屏幕1320且电源项1325被选择或聚焦的状态下选择移动终端600的特定键601。这样,移动终端600可以进入声学通信模式。可替代地,不同于图中所示的,移动终端600可以在选择移动终端600中的声学通信应用程序后进入声学通信模式。
因此,如图13c所示,移动终端600可以在声学通信模式下输出包含电源接通信息Son的声音。
图13d基于从接收到的声音提取的电源接通信息Son示出空调200c被打开。这样,空调200c可以经由接收到的声音被远程控制而无需单独的无线通信模块。远程控制可以被应用到除空调200c之外的所有的家用电器。
同时,可以执行相对于家用电器的固件升级。
虽然在图10a到图13d中未示出,但是在移动终端600上显示的屏幕是接入点设备列表屏幕的情况下,移动终端600可以在声学通信模式下输出包含相对于接入点设备的网络信息的声音。
用这种方式,在家用电器200包括诸如WiFi模块等通信模块的情况下,家用电器200可以使用接收到的网络信息简单地无线连接到邻近接入点(AP)设备,这可以提高用户的便利性。
图14是示出根据本发明的另一个实施例的移动终端的操作方法的流程图。图15是示出根据本发明的另一个实施例的家用电器的操作方法的流程图。图16a到图22c是用于说明图14或图15的操作方法的参考视图。
首先,参见图15,家用电器200判断家用电器200的电源是否处于接通状态(S1500)。在判断为接通状态后,家用电器200在其存储器中存储家用电器相关信息(S1501)。
当家用电器200的电力处于接通状态时,家用电器200的控制器可以存储家用电器相关信息,诸如,操作状态信息、操作历史信息、产品信息、故障信息、电力消耗信息、存储物品信息、食谱信息等。特别地,家用电器相关信息可以被存储在家用电器200中的存储器260中。
例如,在洗衣机200b正在执行洗涤操作的情况下,关于洗衣机的操作时间和操作程序的信息、关于洗衣机是否故障的信息等可以被存储在洗衣机200b中的存储器260中。
同时,在家用电器200的操作期间,家用电器相关信息可以被周期性地存储在存储器260中。
可替代地,在家用电器200的初始操作阶段,家用电器相关信息可以以第一周期间隔存储在存储器260中,此后,以比所述第一周期间隔短的第二周期间隔存储在存储器260中。
接着,参见图14,响应于用户输入,移动终端600显示指定屏幕(S1420)。这里,响应于用户输入等,存在包括网页屏幕或应用程序屏幕的指定屏幕的各种示例。
图16a示出移动终端600显示监测屏幕1620。该监测屏幕1620可以是在从与家用电器相关的应用程序的执行屏幕选择监测项之后显示的屏幕。
接着,移动终端600判断家用电器是否处于声学通信模式(S1440)。在判断为声学通信模式后,移动终端600从家用电器接收包含指定信息的声音(S1445)。然后,移动终端600从接收到的声音提取指定信息,更具体地,提取与在移动终端600上显示的屏幕相关的信息(S1447)。然后,移动终端600显示所提取的信息(S1450)。
这里,图15的步骤S1540对应于图14的步骤S1440,并且图15的步骤S1545对应于图14的步骤S1445。
同时,图14的步骤S1440可以被省略。即,当在屏幕显示步骤S1420之后执行声音接收步骤S1445时,可以自动进入声学通信模式。
图16a示出在洗衣机200b的操作期间在移动终端600上显示监测屏幕1620。洗衣机200b可以在其操作期间在存储器中周期性地存储操作状态信息。
如图16a示例性示出的,当选择洗衣机200b的特定键201b时,洗衣机200b可以进入声学通信模式。
因此,如图16b示例性示出的,洗衣机200b可以在声学通信模式下输出包含指定信息的声音。在这种情况下,包含在声音中的信息可以包括洗衣机200b的产品信息、操作状态信息等。在附图中,为了方便起见,示出包含操作状态信息Sstp的声音的输出。
移动终端600可以从洗衣机200b接收声音,并从接收到的声音提取指定信息。特别地,可以提取与在移动终端600上显示的监测屏幕1620相关的操作状态信息。用这种方式,移动终端600可以从洗衣机200b简单地获取与显示屏幕相关的信息。
然后,移动终端600可以显示从家用电器接收到的信息。
图16c示出在移动终端600上显示洗衣机200b的操作状态信息Sstp。
附图示出在移动终端600上显示指示正在执行脱水的信息1630、剩余时间信息1635和总进度时间信息1637,但各种变化是可能的。
图17a到图17d示出在洗衣机200b进入声学通信模式的情况下,在移动终端600显示诊断屏幕的状态下,洗衣机200b输出包含其故障信息Sdia的声音,并且移动终端600从接收到的声音提取洗衣机200b的故障信息Sdia并使用所提取的故障信息Sdia访问服务器500以接收故障诊断结果信息。
图17a示出在移动终端600上显示诊断屏幕1720。
如图17a所示,洗衣机200b可以在选择洗衣机200b的特定键201b之后进入声学通信模式。
因此,如图17b所示,洗衣机200b可以在声学通信模式下输出包含指定信息的声音。在这种情况下,包含在声音中的信息可以包括洗衣机200b的产品信息、操作状态信息故障诊断结果信息等。在附图中,为了方便起见,示出包含故障诊断结果信息Sres的声音的输出。
移动终端600可以从洗衣机200b接收声音,并从接收到的声音提取指定信息。特别地,移动终端600可以提取与在移动终端600上显示的诊断屏幕1720相关的故障诊断结果信息Sres。用这种方式,移动终端600可以从洗衣机200b简单地获取与显示屏幕相关的信息。
图17c示出在显示器上显示基于所提取的洗衣机的故障诊断结果信息Sres的故障结果信息1730。
附图示出短语“排水孔冻结”被显示为的洗衣机的故障结果信息1730。用这种方式,用户可以简单地检查洗衣机的故障原因,这可以提高用户的便利性。
除洗衣机的故障结果信息1730之外,移动终端600还可以显示服务(AS)请求项1735。
当由图17c中的用户输入选择AS请求项1735时,如图17d示例性示出的,可以显示AS请求屏幕1740。因此,用户可以在检查故障结果信息之后立即请求AS,这可以提高用户的便利性。
图18a到图18c示出在冰箱200a进入声学通信模式的情况下,在移动终端600显示监测屏幕的状态下冰箱200a输出包含冰箱200a的操作状态信息Sst的声音,并且移动终端600从接收到的声音提取冰箱200a的操作状态信息Sst并且显示所提取的操作状态信息Sst。
图18a示出显示与冰箱200a相关的监测屏幕1820。
如图18a所示,冰箱200a可以在选择冰箱200a的特定键201a后进入声学通信模式。
因此,如图18b所示,冰箱200a可以在声学通信模式下输出包含指定信息的声音。在这种情况下,包含在声音中的信息可以包括冰箱200a的产品信息、操作状态信息等。在附图中,为了方便起见,示出包含操作状态信息Sst的声音的输出。
移动终端600可以从冰箱200a接收声音,并从接收到的声音提取指定信息。特别地,移动终端600可以提取与在移动终端600上显示的监测屏幕1820相关的操作状态信息Sst。用这种方式,移动终端600可以从冰箱200a简单地获取与显示屏幕相关的信息。
图18c基于所提取的操作状态信息Sst示出冰箱200a的操作状态信息屏幕1830。这里,冰箱200a的操作状态信息屏幕1830包括冷冻室温度信息、冷藏室温度信息、涡轮冷冻操作信息、智能节电操作信息、关于门被打开或关闭的次数的信息以及用电信息,但各种变化是可能的。用户可以经由冰箱200a的操作状态信息屏幕1830简单地检查冰箱200a的操作状态。
图19a到图19c示出在冰箱200a进入声学通信模式的情况下,在移动终端600显示与食物管理相关的魔法空间屏幕的状态下,冰箱200a输出包含关于储存在冰箱200a中的食物的食物储存信息Sfood的声音,并且移动终端600从接收到的声音提取食物储存信息Sfood并显示所提取的食物储存信息Sfood。
图19a示出显示与冰箱200a相关的魔法空间屏幕1920。
如图19a所示,冰箱200a可以在选择冰箱200a的特定键201a后进入声学通信模式。
因此,如图19b所示,冰箱200a可以在声学通信模式下输出包含指定信息的声音。在这种情况下,包含在声音中的信息可以包括冰箱200a的产品信息和操作状态信息、关于储存在冰箱200a中的食物的食物储存信息Sfood等。在附图中,为了方便起见,示出包含关于储存在冰箱200a中的食物的食物储存信息Sfood的声音的输出。
移动终端600可以从冰箱200a接收声音,并从接收到的声音提取指定信息。特别地,移动终端600可以提取关于储存在与在移动终端600上显示的魔法空间屏幕1920相关的冰箱200a中的食物的食物储存信息Sfood。用这种方式,移动终端600可以从冰箱200a简单地获取与显示屏幕相关的信息。
图19c示出基于所提取的食物储存信息Sfood显示冰箱200a的魔法空间屏幕1930。这里,魔法空间屏幕1930模拟冰箱的门被打开的情况的屏幕。可以使用关于储存在冰箱200a中的食物的种类和位置等的信息来显示魔法空间屏幕1930。此外,魔法空间屏幕1930还可以显示关于食物的有效期和食物的入库日期等的信息。用户可以经由魔法屏幕空间1930简单地查看关于储存在冰箱200a中的食物的信息,该魔法屏幕空间1930示出关于储存在冰箱200a中的食物食物储存信息Sfood。
图20a到图20c示出在冰箱200a进入声学通信模式的情况下,在移动终端600显示食谱相关屏幕的状态下,冰箱200a基于存储在其中的食物输出包含食谱信息Sreci的声音,并且移动终端600从接收到的声音提取食谱信息Sreci并且将所提取的食谱信息Sreci传送到服务器500,从而从服务器500接收与对应的食谱相关的内容Svod。
图20a示出显示与冰箱200a相关的食谱相关屏幕2020。
如图20a所示,冰箱200a可以在选择冰箱200a的特定键201a后进入声学通信模式。
因此,如图20b所示,冰箱200a可以在声学通信模式下输出包含指定信息的声音。在这种情况下,包含在声音中的信息可以包括冰箱200a的产品信息、操作状态信息、食谱信息Sreci等。在附图中,为了方便起见,示出包含食谱信息Sreci的声音的输出。
这里,食谱信息Sreci可以是基于关于储存在冰箱200a中的食物的信息由冰箱200a生成的食谱信息。
移动终端600可以从冰箱200a接收声音,并从接收到的声音提取指定信息。特别地,移动终端600可以提取与移动终端600上显示的食谱相关屏幕2020相关的食谱信息Sreci。用这种方式,移动终端600可以从冰箱200a简单地获取与显示屏幕相关的信息。
然后,如图20c所示,移动终端600可将所提取的食谱信息Sreci传送到服务器500并从服务器500接收与对应的食谱相关的内容Svod。这里,接收到的内容Svod可以是视频。
移动终端600可再现和显示接收到的内容Svod。这可以允许用户在尝试基于关于储存在冰箱200a中的食物的信息烹调食物时简单地观看与对应的食谱相关的内容Svod。用这种方式,用户可以在厨房中直接一边参考食谱一边烹调食物,这可以提高用户的便利性。
图21a到图21c示出在清扫器200e进入声学通信模式的情况下,在移动终端600在其上显示监测屏幕的状态下,清扫器200e输出包含清扫器200e的操作状态信息Sst的声音,并且移动终端600从接收到的声音提取清扫器200e的操作状态信息Sst并显示所提取的操作状态信息Sst。
图21a示出在移动终端600上显示与清扫器200e相关的监测屏幕2120。
如图21a所示,清扫器200e可以在选择清扫器200e的特定按键201e后进入声学通信模式。
因此,如图21b所示,清扫器200e可以在声学通信模式下输出包含指定信息的声音。在这种情况下,包含在声音中的信息可以包括清扫器200e的产品信息、操作状态信息、故障诊断结果信息等。在附图中,为了方便起见,示出包含操作状态信息Sst的声音的输出。
移动终端600可以从清扫器200e接收声音,并从接收到的声音提取指定信息。特别地,移动终端600可以提取与在移动终端600上显示的监测屏幕2120相关的操作状态信息Sst。用这种方式,移动终端600可以从清扫器200e简单地获取与显示屏幕相关的信息。
图21c示出基于所提取的操作状态信息Sst的清扫器200e的操作状态信息屏幕2130。这里,清扫器200e的操作状态信息屏幕2130包括清扫器移动路径信息、清扫器巡逻停止项、充电项、清扫项、巡逻项等,但各种变化是可能的。用户可以经由清扫器200e的操作状态信息屏幕2130简单地检查清扫器200e的操作状态。
图22a到图22c示出在空调200c进入声学通信模式的的情况下,在移动终端600显示监测屏幕的状态下,空调200c输出包含空调200c的操作状态信息Sst的声音,并且移动终端600从接收到的声音提取空调200c的操作状态信息Sst,并显示所提取的操作状态信息Sst。
图22a示出空调200c从用于远程控制空调200c的远程控制设备210c接收远程控制信号Sre。
为此,空调200c可以包括远程控制信号接收器(未示出)。远程控制信号接收器(未示出)可以被设置在图3a或图3b的通信单元222中。
空调200c可以在接收远程控制信号Sre后执行对应的操作。例如,空调200c可以响应于电源接通信号被打开或者可以响应于温度设定信号执行温度设定。这样,空调200c可以执行各种操作,诸如室内制冷,除湿等。
如图22a所示,空气调节机200c可以在选择用于空调200c的远程控制的远程控制设备210c的特定键201c后进入声学通信模式。
因此,如图22b所示,空调200c可以在声学通信模式下输出包含指定信息的声音。在这种情况下,包含在声音中的信息可以包括空调200c的产品信息、操作状态信息、故障诊断结果信息等。在附图中,为了方便起见,示出包含操作状态信息Sst的声音的输出。
移动终端600可以从空调200c接收声音,并从接收到的声音提取指定信息。在这种情况下,当移动终端600显示监测屏幕2220时,移动终端600可以在接收到的信息中提取与在移动终端600上显示的监测屏幕2220相关的操作状态信息Sst。用这种方式,移动终端600可以从空调200c简单地获取与显示屏幕相关的信息。
图22c示出基于所提取的操作状态信息Sst的空调200c的操作状态信息屏幕2230。这里,空调200c的操作状态信息屏幕2230示出室内温度信息、目标温度信息、操作时间信息、智能节电操作信息、关于机器人清扫器执行清扫操作的次数的信息、以及用电信息,但各种变化是可能的。用户可以经由空调200c的操作状态信息屏幕2230简单地检查空调200c的操作状态。
特别地,通过设置远程控制设备210c,可以使用移动终端600简单地检查远程控制空调200c的操作状态。
应注意,由远程控制设备210c对空调200c的远程控制和由移动终端600的远程控制结果的检查可以应用到除空调200c之外的其它家用电器。
图23是示出根据本发明的另一个实施例的移动终端的操作方法的流程图,以及图24a到图27d是用于说明图23的操作方法的参考视图。
首先,参见图23,移动终端600输出用于注册家用电器的服务集标识符(SSID)请求信号(S2310)。
例如,移动终端600可以经由红外(IR)通信或上述声学通信输出SSID请求信号。
家用电器200可以在接收到SSID请求信号后输出SSID。特别地,家用电器200可以经由声学通信从声学输出模块253输出包含SSID的声音。
应注意,可以选择性地执行步骤S2310。例如,在家用电器200包括无线通信开关的情况下,家用电器200可以在对应的开关被操作时输出SSID。特别地,包含SSID的声音可以经由声学通信从声学输出模块253输出。
可替代地,在步骤S2310之前,移动终端600可以响应于用户操作执行用于家用电器的产品注册或网络注册的应用程序。在执行对应的应用程序之后,移动终端600可以响应于用户操作输出接入点(AP)模式进入信号。
图24a示出在移动终端600上显示用于冰箱注册的屏幕810。例如,移动终端600可以在选择屏幕810中的WiFi注册项(未示出)后输出SSID请求信号。
图24b示出经由声学通信输出SSID请求信号。
即,移动终端600可以从声学输出模块653输出包含SSID请求的声音Soa。
在这种情况下,家用电器200可以经由麦克风223接收包含SSID请求的声音Soa并对接收到的声音执行信号处理。
特别地,当包含SSID请求的声音Soa的强度(例如,以分贝计)是指定值或更大(例如,以分贝计)时或者当所提取的SSID请求的误码率(BER)是指定值或更小时,家用电器200的控制器270可以判断接收到的声音是有效声音或者包含有效信息。
附图示出家用电器200和移动终端600在短距离的范围区域1中。在这种情况下,范围区域1可以对应于声音的强度为指定值或更大或者误码率是指定值或更小的范围。家用电器200和移动终端600在短距离被判断为接收到的信息是有效的,并且家用电器200和移动终端600在远距离被判断为接收到的信息是无效的。基于此判断,能够在多个移动终端600中仅选择有效的移动终端600。同样地,能够在多个家用电器中仅选择有效的家用电器。用这种方式,可以增强家用电器200与移动终端600之间的信息传送的安全性。
同时,家用电器200的控制器270可以控制声学输出模块253,以便响应于SSID请求信号输出包含SSID的声音。
接着,移动终端600从家用电器接收包含SSID的声音(S2315)。然后,移动终端600从声音提取SSID(S2320),并判断接收到的声音的强度是否为指定值或更大或者所提取的SSID的误码率(BER)是否为指定值或更小(S2325)。当接收到的声音是有效的时,移动终端600基于SSID访问家用电器200(S2328)。
图24c示出响应于SSID请求信号输出包含SSID的声音Sob。
在这种情况下,移动终端600可以经由麦克风623接收包含SSID的声音Sob并对接收到的声音Sob执行信号处理。
更具体地,移动终端600的声学通信单元617可以使用同步器、变频器和数据提取器从接收到的声音提取SSID。
同时,当接收到的声音Sob的强度(例如,以分贝计)是指定值或更大或者当所提取的家用电器的SSID的误码率(BER)是指定值或更小时,移动终端600的控制器680可以判断包含家用电器的SSID的接收到的声音Sob是有效声音或者包含有效信息。
然后,移动终端600的控制器680可以控制无线通信模块615,以基于SSID访问家用电器200。用这种方式,移动终端600和家用电器200可以进入双向数据交换可能状态。特别地,移动终端600和家用电器200可以保持WiFi接入状态以使能无线通信。
接着,移动终端600将指定接入点设备的网络信息输出到家用电器(S2330)。
例如,移动终端600的控制器680可以控制声学输出模块253,以便输出包含对应于SSID的接入点设备的网络信息的声音。
接入点设备的网络信息可以是关于由用户选择的网络的信息、最后使用的接入点设备、最经常使用的接入点设备或当前使用的接入点设备。
*同时,接入点设备的网络信息可以是关于无线网络的信息。
图24d示出包含接入点设备的网络信息的声音Soc的输出。
在这种情况下,当接收到的声音Sob的强度(例如,以分贝计)是指定值或更大或者当所提取的家用电器的SSID的误码率(BER)是指定值或更小时,家用电器200的控制器270可以判断包含接入点设备的网络信息的接收的声音Soc是有效声音或者包含有效信息。
然后,家用电器200的控制器270可以响应于有效网络信息访问对应的接入点设备。特别地,家用电器200的控制器270可以控制无线通信单元218,从而经由诸如WiFi等无线通信访问对应的接入点设备。
图24e示出家用电器200访问接入点设备300。
在网络信息输出的另一个示例中,移动终端600的控制器680可以控制无线通信模块615,以便基于SSID用无线电信号传送接入点设备的网络信息。
这样,家用电器200可以经由无线通信单元218接收接入点设备的网络信息,并将其传送到控制器270。此后,控制器270可以基于接入点设备的网络信息控制对应的接入点设备的访问。
同时,在保持移动终端600与家用电器200之间的连接的同时,移动终端600可以将产品信息请求信号传送到家用电器200。这样,家用电器200可以将家用电器200的产品信息(产品名称、型号名称等)传送到移动终端600。在这种情况下,产品信息可以经由无线通信或声学通信被传送。
接着,移动终端600可以接收家用电器200的产品信息(S2335),并在存储器660中存储产品信息(S2340)。
特别地,如图24a示例性示出的,在执行冰箱注册的应用程序的期间,结合应用程序存储产品信息是可能的。
图25a示出所存储的产品信息(诸如产品名称和型号名称)被显示在冰箱注册屏幕905上。
在这种情况下,移动终端600还可以接收与由用户输入的冰箱相关的名称信息。附图示出将名称“coo”输入到输入窗口906。
这样,与冰箱相关的名称信息(诸如“coo”)和产品信息可以结合应用程序被一起存储。
然后,如图25b示例性示出的,当在执行冰箱远程控制应用程序后,在远程控制屏幕910中选择由“coo”表示的项912时,远程控制信号Srem等通过接入点设备300被传送到放置在房屋中的冰箱200a。这样,可以简单地执行远程控制。
移动终端600可以将接收到的家用电器200的产品信息(产品名称、型号名称等)传送到服务器500,以使能产品注册的实施。
图26a示出通过接入点设备300将产品信息Spr(诸如,例如产品名称或型号名称)从移动终端600传送到服务器500。这样,可以简单地执行远程控制。
移动终端600可以经由用户输入单元630接收与家用电器200相关的名称信息,并将家用电器200的名称信息和产品信息(产品名称、型号名称等)传送到服务器500,以便使能产品注册的实施。
图26b示出通过接入点设备300将产品信息Spr(诸如产品名称或型号名称)和名称信息Sna从移动终端600传送到服务器500。这样,可以简单地执行远程控制。
通过用户选择,移动终端600可以改变相对于声音的强度的指定值或者相对于误码率的指定值,这是在判断家用电器的有效性时使用的。
此外,通过用户选择,家用电器200可以改变相对于声音的强度的指定值或者相对于误码率的指定值,这是在判断移动终端的有效性时使用的。
接着,图27a到图27d示出移动终端600输出包含关于预先存储的接入点设备的网络信息的声音,特别地,用于具有无线通信单元218(更具体地,WiFi模块)的家用电器200。
首先,图27a示出在移动终端600上显示的接入点设备列表屏幕2700。接入点设备列表屏幕2700可以包括预先存储的接入点设备的项或者当前可访问的接入点设备的项。
在由用户选择具体接入点设备项2705的情况下,如图27b示例性示出的,可以显示在声学通信模式下指示关于所选择的接入点设备的网络信息的输出的对象2715。同时,可以经由选择特定键或特定项来实现进入声学通信模块。
然后,如图27c示例性示出的,移动终端600可以经由声学输出模块653输出包含关于所选择的接入点设备的网络信息Snet的声音。
这样,家用电器200可以经由麦克风223接收声音并从接收到的声音提取关于特定接入点设备的网络信息Snet。
然后,如图27d示例性示出的,家用电器200可以使用所提取的关于特定接入点设备的网络信息Snet来访问对应的接入点设备300并且还可以访问指定的服务器500。
图28是示出根据本发明的又一个实施例的家用电器的操作方法的流程图,图29是示出根据本发明的又一个实施例的家用电器的操作方法的流程图,以及图30到图35b是用于说明图28或图29的操作方法的参考视图。
首先,参见图28,第一家用电器200a可以进入声学通信模式(S2810)。应注意,图30的步骤S3010对应于图12的步骤S2810。
这里,声学通信模式可以指第一家用电器200a经由麦克风223接收声音的模式。第一家用电器200a的控制器270可以控制麦克风223,使得麦克风223在选择第一家用电器200a的特定键后被激活。
接着,第一家用电器200a可以经由麦克风223接收声音(S2812)。应注意,图30的步骤S3012对应于图28的步骤S2812。
当声音在第一家用电器200a的麦克风223的激活状态下从另一个家用电器或移动终端被输出时,麦克风223可以接收输出的声音。
接着,家用电器从接收到的声音提取信息(S2815)。应注意,图30的步骤S3015对应于图28的步骤S2815。
如上所述,声学通信单元217可以包括同步器430、变频器435和数据提取器440,用于从接收到的声音提取数据。数据可以在实施同步和频率转换后被提取。
接着,第一家用电器200a判断所提取的信息数据是否包含关于与其邻近的另一个家用电器的信息(S2816)。当所提取的信息数据包含关于另一个家用电器的信息时,从第一家用电器200a或邻近的家用电器输出包含所提取的信息的声音(S2820)。应注意,图30的步骤S3016和步骤S3020可以分别对应于图28的步骤S2816和步骤S2820。
控制器270或声学通信单元217判断所提取的信息数据是否包含关于另一个家用电器的信息。例如,在所提取的信息数据包含另一个邻近家用电器(例如,烹调电器或电视机)的名称,或者包含与另一个家用电器的主要操作相关的术语(例如,广播收看、广播节目或温度)的情况下,控制器270或声学通信单元217可以确定将包含相关信息的声音输出到相关家用电器。
在控制器270或声学通信单元217确定将所提取的信息数据传送到另一个家用电器之后,声学通信单元217可以在声学通信模式下生成包含所提取的信息数据的声音。
为此,如上所述,声学通信单元217可以包括变频器410、数据插入器415、逆变器420和多路转换器425。用这种方式,声学通信单元217输出通过将所提取的信息数据添加到待输出的音频数据获取的声音。输出的声音包含与另一个家用电器相关的信息。
接着,参见图29,第二家用电器200b从第一家用电器200a接收声音(S2920)。应注意,图30的步骤S3020可以对应于图29的步骤S2920。
第二家用电器200b的麦克风223可以从第一家用电器200a接收声音。
接着,第二家用电器200b从接收到的声音提取信息(S2923)。应注意,图30的步骤S3023可以对应于图29的步骤S2923。
如上所述,第二家用电器200b中的声学通信单元217可以包括同步器430、变频器435和数据提取器440,用于从接收到的声音提取数据。可以在实施同步和频率转换之后提取数据。
接着,第二家用电器200b可以判断所提取的信息数据是否是操作控制命令(S2925)。当所提取的信息数据是操作控制命令时,第二家用电器200b被控制为根据操作控制命令来执行操作(S2930)。应注意,图30的步骤S3025和步骤S3030可以分别对应于图29的步骤S2925和步骤S2930。
例如,在所提取的信息数据是“打开洗衣机”的情况下,洗衣机(即第二家用电器200b)可被打开。更具体地,当洗衣机在待机电力模式下被打开时,洗衣机的显示单元、输入单元等可以被激活。
接着,在步骤S2925中判断所提取的信息数据不是操作控制命令后,可以执行步骤S2935和随后的(多个)步骤。
第二家用电器200b可以判断所提取的信息数据是否是语音备忘录(S2935)。当所提取的信息数据是语音备忘录时,第二家用电器200b可以在存储器260中存储语音备忘录(S2940)。然后,在输入再现命令后,再现和输出所存储的语音备忘录。应注意,图30的步骤S3035和步骤S3040可以对应于图29的步骤S2935和步骤S2940。
用这种方式,当所提取的信息数据是语音备忘录“我今天有一个聚会,请洗涤放置在洗衣机中的衣物”,第二家用电器200b的控制器可以控制在存储器260中的语音备忘录的存储。
第二家用电器200b的控制器可以控制指示接收语音备忘录的消息的输出。这有助于用户直观地识别语音备忘录的接收。
然后,当用户在第二家用电器200b的输入单元220上按下特定按钮时,重现和输出存储在存储器中的语音备忘录1030是可能的。用这种方式,用户可以简单地检查所存储的备忘录。
图31a到图31c示出在冰箱200a与洗衣机200b之间共享的数据。
图31a示出用户900使用移动终端600执行远程控制。特别地,图31a示出用户驱动远程控制应用程序来选择由“打开洗衣机”表示的项。这样,移动终端600可以在声学通信模式下输出包含诸如“打开洗衣机”的信息数据的声音Sc。因此,冰箱200a可以接收包含诸如“打开洗衣机”的信息数据的声音Sc。然后,冰箱200a可以从接收到的声音Sc中提取信息数据。
在所提取的信息数据中包含关于另一个家用电器的信息而不是关于冰箱200a的信息的情况下,冰箱200a可以输出包含所提取的信息数据的声音。
图31b示出冰箱200a基于接收到的声音输出包含诸如“打开洗衣机”的信息数据的声音Sc。特别地,图31b示出冰箱200a将声音Sc输出到邻近的洗衣机200b。
接着,图31c示出洗衣机200b基于包含在接收到的声音Sc中的相关信息数据被打开。在这种情况下,可以输出指示打开洗衣机200b的语音消息或文本消息。
图32a到图32c示出在冰箱200a与电视机200f之间共享的数据。
图32a示出用户900使用移动终端600执行远程控制。特别地,图32a示出用户驱动远程控制应用程序来选择由“电视频道9”表示的远程控制项。
这样,移动终端600可以在声学通信模式下输出包含诸如“电视频道9”的信息数据的声音S3。用这种方式,冰箱200a可以接收包含诸如“电视频道9”的信息数据的声音S3。然后,冰箱200a可以从接收到的声音S3中提取信息数据。
在所提取的信息数据包含关于另一个家用电器的信息而不是关于冰箱200a的信息的情况下,冰箱200a可以输出包含所提取的信息数据的声音。
图32b示出冰箱200a基于接收到的声音输出包含诸如“电视频道9”的信息数据的声音S3。特别地,图32b示出冰箱200a将声音S3输出到邻近的电视机200f。
接着,图32c示出基于包含在接收到的声音S3中的信息数据,已显示频道11的广播图像3220的电视机200f开始显示频道9的广播图像3230。这样,站在冰箱200a前方的用户可以简单地切换电视频道。
图33a到图33c示出在冰箱200a与空调200c之间共享的数据。
图33a示出用户900使用移动终端600执行远程控制。特别地,图33a示出用户驱动远程控制应用程序来选择由“温度下降”表示的远程控制项。这样,移动终端600可以在声学通信模式下输出包含诸如“温度下降”的信息数据的声音Sg。因此,冰箱200a可以接收包含诸如“温度下降”的信息数据的声音Sg,并从接收到的声音Sg中提取信息数据。
在所提取的信息数据包含关于另一个家用电器的信息而不是关于冰箱200a的信息的情况下,冰箱200a可以输出包含所提取的信息数据的声音。
图33b示出冰箱200a基于接收到的声音输出包含诸如“温度下降”的信息数据的声音Sg。特别地,图33b示出冰箱200a将声音Sg输出到邻近的空调200c。
接着,图33c示出空调200c基于包含在接收到的声音Sg中的相关信息数据开始冷却操作以降低室内温度并朝向用户900释放冷却的空气。用这种方式,站在冰箱200a前方的用户可以简单地降低客厅的温度。
图34a到图34c示出在烹调电器200d与电视机200f之间共享的数据。
图34a示出用户900使用移动终端600执行远程控制。特别地,图34a示出用户驱动远程控制应用来选择由“通知节目“a””表示的项。这样,移动终端600可以在声学通信模式下输出包含诸如“通知节目“a””的信息数据的声音S6。因此,烹调电器200d可以接收包含诸如“通知节目“a””的信息数据的声音S6,并从接收到的声音S6中提取信息数据。
在所提取的信息数据包含关于另一个家用电器的信息而不是关于烹调电器200d的信息的情况下,烹调电器200d可以输出包含所提取的信息数据的声音。
图34b示出烹调电器200d基于接收到的声音输出包含诸如“通知节目“a””的信息数据的声音S6。特别地,图34b示出将声音S28输出到邻近的电视机200f。
接着,图34c示出电视机200f基于包括在接收到的声音S6中的信息数据显示节目引导图像3420,并且由“节目“a””表示的项3425被突出显示。即,电视机200f的控制器可以基于包含在接收到的声音S6中的信息数据识别节目“a”的开始时间。
此外,电视机200f中的控制器可以打开电视机200f或在节目“a”的开始时间切换电视频道。
*图34d示出显示对应的广播图像3430和语音消息3435,以在节目“a”的开始时间输出指示对应的节目的开始。用这种方式,站在烹调电器200d前方的用户可以简单地观看期望的电视节目
图35a和图35b示出在多个家用电器产品之间共享的数据。
图35a示出房屋中的多个家用电器的布置的一个示例。在房屋中,洗衣机200b可以位于最外面的位置,冰箱200a和烹调电器200d可以位于邻近于洗衣机200b的厨房中,电视机200f可以位于邻近于厨房的客厅中,以及空调200c可以位于电视机200f附近。
在房屋内的家用电器的布置中,当站立在洗衣机200b的前方的用户900使用移动终端600选择由“打开空调”表示的远程控制项时,移动终端600可以在声学通信模式下输出包含诸如“打开空调”的信息数据的声音Sc。
这样,邻近移动终端600的洗衣机200b可以接收包含诸如“打开空调”的信息数据的声音Sc,然后从接收到的声音Sc中提取信息数据。
在所提取的信息数据包含关于另一个家用电器的信息而不是关于洗衣机200b的信息的情况下,洗衣机200b可以输出包含诸如“打开空调”的信息数据的声音Sc。
这样,邻近洗衣机200b的冰箱200a可以接收包含诸如“打开空调”的信息数据的声音Sc,然后从接收到的声音Sc中提取信息数据
在所提取的信息数据包含关于另一个家用电器的信息而不是关于冰箱200a的信息的情况下,冰箱200a可以输出包含诸如“打开空调”的信息数据的声音Sc。
这样,邻近冰箱200a的烹调电器200d可以接收包含诸如“打开空调”的信息数据的声音Sc,然后从接收到的声音Sc中提取信息数据。
在所提取的信息数据包含关于另一个家用电器的信息而不是关于烹调电器200d中的信息的情况下,烹调电器200d中可以输出包含诸如“打开空调”的信息数据的声音Sc。
这样,邻近烹调电器200d的电视机200f可以接收包含诸如“打开空调”的信息数据的声音Sc,然后从接收到的声音Sc中提取信息数据。
在所提取的信息数据包含关于另一个家用电器的信息,而不是关于电视机200f的信息时,电视机200f可以输出包含诸如“打开空调”的信息数据的声音Sc。
这样,邻近电视机200f的空调200c可以接收包含诸如“打开空调”的信息数据的声音Sc,然后从接收到的声音Sc中提取信息数据。
在所提取的信息数据包含关于空调200c的信息的情况下,空调200c可以对应于诸如“打开空调”的信息数据执行操作。即,空调200c可以被打开。用这种方式,所有上述设备可以仅使用其麦克风和声学输出模块来共享相关信息而不使用单独的通信模块。
图35b类似于图35a,但不同之处在于从冰箱200a输出的包含诸如“打开空调”的信息数据的声音Sc被电视机200f而不是被烹调电器200d接收,并且电视机200f输出包含诸如“打开空调”的信息数据的声音Sc。
例如,在烹调电器200d未被打开的情况下,冰箱200a可以提高待输出声音的音量,以允许对应的声音行进更远的距离。这样,电视机200f可以接收包含诸如“打开空调”的信息数据的声音Sc。
另一方面,在另一个家用电器未输出包含相关数据的声音的情况下,对应的家用电器可以输出指示未输出声音的声音。这可激活用于邻近的家用电器之间的数据交换的ACK功能。
根据本发明的家用电器和移动终端不应当限于上述实施例的配置和方法,并且全部或部分实施例可以彼此选择性地组合以实现各种变化。
此外,根据本发明的操作移动终端或家用电器的方法可以实施为可以写入处理器可读记录介质上并且因此可由移动终端或家用电器中设置的处理器读取的代码。处理器可读记录介质可以是以处理器可读方式存储数据的任何类型的记录设备。处理器可读记录介质的示例可以包括ROM、RAM、CD-ROM、磁带、软盘和光学数据存储设备。此外,处理器可读记录介质包括载波(例如,通过互联网的数据传送)。此外,处理器可读记录介质可以分布在连接至网络的多个计算机系统上,使得处理器可读代码以分散的方式被写入于此并且由此执行。
虽然已公开了本发明的优选实施例用于说明的目的,但是本领域技术人员将理解,在不偏离所附权利要求书公开的本发明的范围和精神的情况下,各种修改、添加和替换是可能的。
工业实用性
本发明可以应用于家用电器和移动终端,并且更具体地,应用于一种使得能够在家用电器与移动终端之间传送信息的家用电器及移动终端。

Claims (20)

1.一种家用电器,包括:
驱动单元;
声学输出模块,被配置为输出声音;
麦克风,被配置为从外部源接收声音;
存储器,被配置为当所述家用电器正在被操作时存储与所述家用电器相关的信息;
声学通信单元,被配置为基于声学通信模式将包含与所述家用电器相关的信息的声音输出到所述声学输出模块或者从经由所述麦克风接收到的声音提取指定信息;以及
控制器,被配置为根据由所述声学通信单元提取的信息来控制所述驱动单元。
2.根据权利要求1所述的家用电器,其中所述声学通信单元包括:
同步器,被配置为对接收到的声音信号进行同步;
变频器,被配置为对同步后的声音信号执行频率转换;以及
数据提取器,被配置为从经频率转换的声音信号提取与屏幕相关的信息。
3.根据权利要求2所述的家用电器,其中所述变频器被配置为基于复数调制重叠变换(MCLT)对所述声音信号执行频率转换。
4.根据权利要求1所述的家用电器,其中所存储的信息包括:与所述家用电器相关的操作状态信息、操作历史信息、产品信息、故障信息、电力消耗信息、存储物品信息或食谱信息。
5.根据权利要求1所述的家用电器,还包括:远程控制信号接收单元,被配置为从远程控制设备接收远程控制信号,
其中所述控制器被配置为控制对应于所述远程控制信号的操作的实施,并且在所述声音被输出后,所述控制器被配置为取决于在所述声学通信模式下的操作的实施输出包含所存储的操作状态信息的声音。
6.根据权利要求1所述的家用电器,其中所述控制器被配置为:
当与屏幕相关的信息是与所述家用电器相关的电力信息时,基于与所述家用电器相关的所述电力信息相对于所述家用电器控制节电操作的实施;
当与所述屏幕相关的信息是与所述家用电器相关的操作程序信息时,基于所述操作程序信息控制所述家用电器的操作;
当与所述屏幕相关的信息是与所述家用电器相关的固件信息时,基于所述固件信息控制所述家用电器的固件的安装;
当与所述屏幕相关的信息是与所述家用电器相关的远程控制信息时,基于所述远程控制信息操作所述家用电器;以及
当与所述屏幕相关的信息是与接入点设备相关的网络信息时,控制所述家用电器以便使用所述网络信息访问所述接入点设备。
7.根据权利要求1所述的家用电器,还包括无线通信单元,
其中当接收到的声音的强度是指定值或更大时或者当网络信息的误码率是指定值或更小时,所述控制器被配置为控制所述无线通信单元,以便基于提取的所述网络信息访问接入点设备。
8.根据权利要求7所述的家用电器,其中所述控制器被配置为响应于来自移动终端的请求经由所述声学输出模块控制包含所述家用电器的服务集标识符的声音的输出。
9.根据权利要求1所述的家用电器,其中当所提取的信息包括与另一个家用电器相关的信息时,所述控制器被配置为控制从由所述麦克风接收到的的声音的信息的提取并且经由所述声学输出模块控制包含与另一个家用电器相关的信息的声音的输出。
10.根据权利要求9所述的家用电器,其中所述控制器被配置为当所提取的信息包括语音备忘录时控制在所述存储器中存储所述语音备忘录。
11.根据权利要求10所述的家用电器,其中响应于再现所述语音备忘录的输入,所述控制器被配置为控制从所述声学输出模块再现和输出所存储的语音备忘录。
12.一种移动终端,包括:
显示器,被配置为显示指定屏幕;
声学输出模块,被配置为输出声音;
麦克风,被配置为从外部源接收声音;
声学通信单元,被配置为基于声学通信模式将包含与屏幕相关的信息的声音输出到所述声学输出模块或者从通过所述麦克风接收到的声音提取指定信息;以及
控制器,被配置为控制由所述声学通信单元提取的信息在所述显示器上的显示。
13.根据权利要求12所述的移动终端,其中所述声学通信单元包括:
变频器,被配置为对待输出的音频信号执行频率转换;
数据插入器,被配置为将与所述屏幕相关的信息数据插入到经频率转换的音频信号;
逆变器,被配置为对已经插入有所述信息数据的所述音频信号执行逆变换;以及
多路转换器,被配置为对经逆变换的音频信号进行多路转换。
14.根据权利要求13所述的移动终端,其中所述变频器被配置为基于复数调整重叠变换(MCLT)对所述音频信号执行频率转换。
15.根据权利要求12所述的移动终端,其中所述麦克风被配置为在家用电器由远程控制设备操作的同时,从所述家用电器接收包含所述家用电器的操作状态信息的声音。
16.根据权利要求12所述的移动终端,其中所述声学通信单元被配置为当所述声音包含家用电器的服务集标识符时,从所述声音提取所述家用电器的所述服务集标识符,并且
其中当接收到的声音的强度是指定值或更大时或者当网络信息的误码率是指定值或更小时,所述控制器被配置为基于所述服务集标识符控制将所提取的指定接入点设备的网络信息输出到所述家用电器。
17.根据权利要求16所述的移动终端,其中在接收所述声音之前,所述声学输出模块输出包含接入点模式进入信息的声音,用于所述家用电器的注册。
18.根据权利要求16所述的移动终端,还包括:
存储器,被配置为存储从所述家用电器接收到的所述家用电器的产品信息;以及
输入单元,被配置为接收关于所述家用电器的输入的名称信息,
其中所述存储器被配置为在存储所述产品信息的同时存储所述名称信息。
19.根据权利要求16所述的移动终端,还包括无线通信模块,被配置为将从所述家用电器接收到的所述家用电器的产品信息传送到服务器。
20.根据权利要求16所述的移动终端,其中所述声学输出模块被配置为输出包含所述接入点设备的网络信息的声音。
CN201480062596.6A 2013-09-16 2014-09-16 家用电器及移动终端 Expired - Fee Related CN105723635B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
KR10-2013-0111223 2013-09-16
KR10-2013-0111222 2013-09-16
KR1020130111223A KR102243641B1 (ko) 2013-09-16 2013-09-16 홈 어플라이언스 및 그 동작방법
KR1020130111222A KR102080514B1 (ko) 2013-09-16 2013-09-16 이동 단말기, 홈 어플라이언스 및 그 동작방법
KR10-2014-0060574 2014-05-20
KR1020140060574A KR102198182B1 (ko) 2014-05-20 2014-05-20 이동 단말기, 홈 어플라이언스 및 그 동작방법
PCT/KR2014/008592 WO2015037963A1 (en) 2013-09-16 2014-09-16 Home appliance and mobile terminal

Publications (2)

Publication Number Publication Date
CN105723635A true CN105723635A (zh) 2016-06-29
CN105723635B CN105723635B (zh) 2018-11-09

Family

ID=52665981

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480062596.6A Expired - Fee Related CN105723635B (zh) 2013-09-16 2014-09-16 家用电器及移动终端

Country Status (4)

Country Link
US (1) US10015021B2 (zh)
EP (2) EP3047583B1 (zh)
CN (1) CN105723635B (zh)
WO (1) WO2015037963A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107077844A (zh) * 2016-12-14 2017-08-18 深圳前海达闼云端智能科技有限公司 语音联合协助的实现方法、装置及机器人
CN110190673A (zh) * 2019-06-13 2019-08-30 广东电网有限责任公司 一种分布式智能家庭有序用电控制系统及分布控制器
TWI672586B (zh) * 2017-11-10 2019-09-21 威剛科技股份有限公司 應用於智慧型機器人的省電系統及其省電方法
CN111066264A (zh) * 2017-08-24 2020-04-24 谷歌有限责任公司 用于音频数据传送的动态校准

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9233472B2 (en) * 2013-01-18 2016-01-12 Irobot Corporation Mobile robot providing environmental mapping for household environmental control
DE112015001508B4 (de) * 2014-03-28 2020-08-27 Kubota Corporation Zugriffspunktvorrichtung für Arbeitsmaschine, Kommunikationssystem für Arbeitsmaschinen, und Arbeitsmaschine
KR20160096487A (ko) * 2015-02-05 2016-08-16 삼성전자주식회사 식품 보관용 저장 용기, 그 저장 용기의 관리 방법 및 냉장고
GB2538510B (en) * 2015-05-18 2019-10-16 Humberto Jose Moran Cirkovic Interoperating sensing devices and mobile devices
KR20170031558A (ko) * 2015-09-11 2017-03-21 엘지전자 주식회사 이동 단말기, 및 홈 어플라이언스
KR101709469B1 (ko) * 2015-09-11 2017-02-23 엘지전자 주식회사 이동 단말기, 및 홈 어플라이언스
KR101754684B1 (ko) * 2015-09-11 2017-07-19 엘지전자 주식회사 이동 단말기, 및 전자 기기
TWI613919B (zh) * 2015-09-16 2018-02-01 新唐科技股份有限公司 家電控制系統及其控制方法
KR101813593B1 (ko) * 2016-03-15 2018-01-30 엘지전자 주식회사 음향 센서, 및 이를 구비하는 홈 어플라이언스 시스템
EP3635531A1 (en) 2017-06-09 2020-04-15 Bang & Olufsen A/S An instruction forwarding system for a voice assistant
US10581532B2 (en) * 2017-07-21 2020-03-03 Naffa Innovations Private Limtied System and a method for establishing data communication between devices using audio frequency
KR20190099586A (ko) 2018-02-19 2019-08-28 삼성전자주식회사 전자 장치, 전자 장치의 제어방법 및 서버
FR3079643A1 (fr) * 2018-03-30 2019-10-04 Orange Procede de gestion d'un dispositif electronique.
DE102018110423A1 (de) 2018-05-01 2019-11-07 Tobias Rückert Verfahren zum Anmelden eines Zielgeräts an ein Netzwerk
KR102044522B1 (ko) * 2018-05-24 2019-11-13 엘지전자 주식회사 이동 단말 및 이동 단말의 전자 기기 등록 처리 방법
KR102667645B1 (ko) 2018-09-21 2024-05-22 삼성전자 주식회사 복수의 전자 장치들을 연동하여 알림을 제공하는 방법 및 장치
US20210302050A1 (en) * 2018-09-28 2021-09-30 Mitsubishi Electric Corporation Air-conditioning management apparatus, air-conditioning apparatus, and storage device that stores program for implementing apparatus management method
JP7187994B2 (ja) * 2018-11-06 2022-12-13 株式会社リコー 受信装置、プログラム、音波処理システム、及び音波処理方法
KR102618407B1 (ko) * 2018-12-10 2023-12-28 삼성전자주식회사 가전기기 및 이의 제어 방법
ES2969919T3 (es) * 2019-05-23 2024-05-23 Liebherr Hausgeraete Ochsenhausen Gmbh Frigorífico y/o congelador
US11656615B2 (en) 2020-11-30 2023-05-23 Haier Us Appliance Solutions, Inc. Methods for detecting fan anomalies with built-in usage and sensory data

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010112677A1 (en) * 2009-04-03 2010-10-07 Aalto-Korkeakoulusäätiö Method for controlling an apparatus
CN102915004A (zh) * 2011-08-02 2013-02-06 Lg电子株式会社 家用电器、家用电器诊断系统和方法
US20130183944A1 (en) * 2012-01-12 2013-07-18 Sensory, Incorporated Information Access and Device Control Using Mobile Phones and Audio in the Home Environment

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000021203A1 (en) * 1998-10-02 2000-04-13 Comsense Technologies, Ltd. A method to use acoustic signals for computer communications
ITPN20010017A1 (it) * 2001-02-23 2002-08-23 Electrolux Professional Spa Apparecchio da cucina e/o domestico
IL154745A0 (en) * 2003-03-04 2003-10-31 Medit Medical Interactive Tech Method and system for acoustic communication
EP2228969B1 (en) * 2005-06-09 2017-04-19 Whirlpool Corporation Software architecture system and method for communication with, and management of, at least one component within a household appliance
US7869824B2 (en) 2006-09-06 2011-01-11 Byung Woo Min Cell phone with remote control system
US8745203B2 (en) * 2009-12-21 2014-06-03 Whirlpool Corporation Mechanical proximity sensor enabled eService connector system
JP2011193426A (ja) * 2010-03-15 2011-09-29 Shinten Sangyo Co Ltd リモコン機能付き携帯電話端末
KR101275582B1 (ko) * 2010-12-31 2013-06-17 엘지전자 주식회사 휴대 단말기의 동작방법
KR101795025B1 (ko) * 2011-01-24 2017-11-07 엘지전자 주식회사 네트워크 시스템 및 그 제어방법
KR101797946B1 (ko) * 2011-05-25 2017-12-12 삼성전자주식회사 가전기기의 자가 진단 시스템 및 그 동작 방법
US8942835B2 (en) * 2011-06-16 2015-01-27 Bsh Home Appliances Corporation System and method of operating household appliances
WO2013115317A1 (ja) * 2012-01-31 2013-08-08 エイディシーテクノロジー株式会社 音波通信システム及び受信装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010112677A1 (en) * 2009-04-03 2010-10-07 Aalto-Korkeakoulusäätiö Method for controlling an apparatus
CN102915004A (zh) * 2011-08-02 2013-02-06 Lg电子株式会社 家用电器、家用电器诊断系统和方法
US20130183944A1 (en) * 2012-01-12 2013-07-18 Sensory, Incorporated Information Access and Device Control Using Mobile Phones and Audio in the Home Environment

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107077844A (zh) * 2016-12-14 2017-08-18 深圳前海达闼云端智能科技有限公司 语音联合协助的实现方法、装置及机器人
WO2018107389A1 (zh) * 2016-12-14 2018-06-21 深圳前海达闼云端智能科技有限公司 语音联合协助的实现方法、装置及机器人
CN107077844B (zh) * 2016-12-14 2020-07-31 深圳前海达闼云端智能科技有限公司 语音联合协助的实现方法、装置及机器人
CN111066264A (zh) * 2017-08-24 2020-04-24 谷歌有限责任公司 用于音频数据传送的动态校准
CN111066264B (zh) * 2017-08-24 2022-01-25 谷歌有限责任公司 用于音频数据传送的动态校准
TWI672586B (zh) * 2017-11-10 2019-09-21 威剛科技股份有限公司 應用於智慧型機器人的省電系統及其省電方法
US10732599B2 (en) 2017-11-10 2020-08-04 Adata Technology Co., Ltd. Power saving system and power saving method for intelligent robot
CN110190673A (zh) * 2019-06-13 2019-08-30 广东电网有限责任公司 一种分布式智能家庭有序用电控制系统及分布控制器

Also Published As

Publication number Publication date
US10015021B2 (en) 2018-07-03
EP3047583B1 (en) 2019-05-15
CN105723635B (zh) 2018-11-09
EP3047583A1 (en) 2016-07-27
US20160226676A1 (en) 2016-08-04
EP3591903A2 (en) 2020-01-08
EP3047583A4 (en) 2017-08-02
WO2015037963A1 (en) 2015-03-19
EP3591903B1 (en) 2024-08-21
EP3591903A3 (en) 2020-04-15

Similar Documents

Publication Publication Date Title
CN105723635A (zh) 家用电器及移动终端
CN111123721B (zh) 具有结合声波导和散热片的紧凑型家庭助手的设计
US9640174B2 (en) Home appliance and operation method thereof
CN112789561B (zh) 用于为电器定制便携式自然语言处理接口的系统和方法
US9773408B2 (en) Mobile terminal and operation method thereof
CN108700645A (zh) 用于随智能设备利用雷达的系统、方法和设备
CN112840345B (zh) 用于提供跨电器的便携式自然语言处理接口的系统和方法
KR101924961B1 (ko) 홈 어플라이언스 및 그 동작방법
CN105765899B (zh) 在家庭网络系统中基于组来控制家庭设备的方法和装置
CN102449917A (zh) 移动终端及其操作方法,以及冰箱
KR102342117B1 (ko) 단말기, 및 이를 구비하는 홈 어플라이언스 시스템
CN105357368A (zh) 提醒方法及装置
KR20140089795A (ko) 홈 어플라이언스 및 그 동작방법
CN105474621A (zh) 摄像机装置、室内摄像系统及室内信息取得装置
US9860621B2 (en) Home appliance and operating method thereof
KR102080514B1 (ko) 이동 단말기, 홈 어플라이언스 및 그 동작방법
KR102198182B1 (ko) 이동 단말기, 홈 어플라이언스 및 그 동작방법
KR102077563B1 (ko) 홈 어플라이언스 및 그 동작방법
CN113709009B (zh) 设备通信方法、装置、电子设备及存储介质
KR101969031B1 (ko) 이동 단말기, 홈 어플라이언스 및 그 동작방법
KR100381167B1 (ko) 도어폰과 연결된 냉장고
KR100416773B1 (ko) 도어폰에 연결된 냉장고 시스템
CN104038483A (zh) 安全控制方法及装置
CN107479520A (zh) 智能管理影音终端
KR20150053553A (ko) 홈 어플라이언스 및 그 동작방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181109