CN112130744B - 用于智能设备的内容输入方法和内容输入装置 - Google Patents

用于智能设备的内容输入方法和内容输入装置 Download PDF

Info

Publication number
CN112130744B
CN112130744B CN202010952161.6A CN202010952161A CN112130744B CN 112130744 B CN112130744 B CN 112130744B CN 202010952161 A CN202010952161 A CN 202010952161A CN 112130744 B CN112130744 B CN 112130744B
Authority
CN
China
Prior art keywords
input
content
content page
page
entered
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010952161.6A
Other languages
English (en)
Other versions
CN112130744A (zh
Inventor
关伟豪
赵世禹
吴松岩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN202010952161.6A priority Critical patent/CN112130744B/zh
Publication of CN112130744A publication Critical patent/CN112130744A/zh
Application granted granted Critical
Publication of CN112130744B publication Critical patent/CN112130744B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

公开了用于智能设备的内容输入方法和内容输入装置，内容输入方法包括：响应于从智能终端接收到对在智能设备的显示屏上显示的待录入内容页面进行内容编辑后形成的已录入内容页面，确定已录入内容页面中的录入内容；将录入内容添加到待录入内容页面中对应的位置。

Description

用于智能设备的内容输入方法和内容输入装置
技术领域
本公开涉及智能设备的内容输入，更具体地讲，涉及用于智能设备的内容输入方法，能够实现内容的快速输入。
背景技术
目前的智能设备越来越多，功能也越来越强大，但是在有些智能设备的上输入内容是不方便的，比如在智能冰箱上，如果输入菜单备忘录，可能就要一直站着；还有些智能设备上输入效率是非常低下的，比如在智能电视上，如果输入账号密码之类比较长的文本时，仍然需要遥控器一个一个字符的输入，非常缓慢，或者在智能电视上解答老师布置的数学等学科的题目时，遥控器甚至都无法输入。此外，对于老人、儿童以及不会使用传统输入法的人群而言，想要在非手机智能设备上输入内容非常不便。
发明内容
本公开提供了用于智能设备的内容输入方法以及相应的装置，可实现针对智能设备的快速内容输入。
根据本公开示例性实施例的一个方面，提供一种用于智能设备的内容输入方法，其中，所述内容输入方法包括：响应于从智能终端接收到对在智能设备的显示屏上显示的待录入内容页面进行内容编辑后形成的已录入内容页面，确定所述已录入内容页面中的录入内容；将所述录入内容添加到所述待录入内容页面中对应的位置。
可选地，所述内容输入方法还包括：将所述待录入内容页面提供给所述智能终端。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式。
可选地，确定所述已录入内容页面中的录入内容的步骤包括：通过对所述待录入内容页面和所述已录入内容页面进行图片对比和格式转换来确定所述已录入内容页面中的录入内容。
可选地，确定所述已录入内容页面中的录入内容的步骤包括：通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分；对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
可选地，将所述录入内容添加到所述待录入内容页面对应的位置的步骤包括：根据所述定位参数将所述内容数据添加到所述待录入内容页面中的所述添加位置。
可选地，将所述待录入内容页面提供给所述智能终端的步骤包括：控制所述智能设备的显示屏显示所述待录入内容页面；或者，响应于预设指令对所述智能设备的显示屏显示的所述待录入内容页面进行截图，并将所述待录入内容页面的截图发送给所述智能终端。
根据本公开示例性实施例的另一方面，提供一种用于智能设备的内容输入方法，其中，所述内容输入方法包括：获取智能设备的显示屏显示的待录入内容页面；对所述待录入内容页面进行内容编辑形成已录入内容页面；将所述已录入内容页面发送给所述智能设备。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式。
可选地，对所述待录入内容页面进行内容编辑形成已录入内容页面的步骤包括：响应于用户编辑输入，对所述待录入内容页面进行内容编辑，以将用户编辑输入的内容添加至所述待录入内容页面上形成所述已录入内容页面。
可选地，对所述待录入内容页面进行内容编辑包括在所述待录入内容页面上进行字符串键入输入和/或手写输入。
可选地，获取智能设备的显示屏显示的待录入内容页面的步骤包括：拍摄所述智能设备的显示屏显示的待录入内容页面；或者，将预设指令发送到所述智能设备并接收所述智能设备响应于所述预设指令而发送的所述待录入内容页面的截图。
根据本公开示例性实施例的另一方面，提供一种用于智能设备的内容输入装置，其中，所述内容输入装置包括：提取模块，被配置为：响应于从智能终端接收到对在智能设备的显示屏上显示的待录入内容页面进行内容编辑后形成的已录入内容页面，确定所述已录入内容页面中的录入内容；添加模块，被配置为将所述录入内容添加到所述待录入内容页面中对应的位置。
可选地，所述内容输入装置还包括显示处理模块，所述显示处理模块被配置为将智能设备的显示屏显示的待录入内容页面提供给智能终端。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式。
可选地，提取模块被配置为：通过对所述待录入内容页面和所述已录入内容页面进行图片对比和格式转换来确定所述已录入内容页面中的录入内容。
可选地，提取模块被进一步配置为：通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分；对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
可选地，添加模块被配置为：根据所述定位参数将所述内容数据添加到所述待录入内容页面中的所述添加位置。
可选地，显示处理模块被配置为：控制所述智能设备的显示屏显示所述待录入内容页面；或者，响应于预设指令对所述智能设备的显示屏显示的所述待录入内容页面进行截图，并将所述待录入内容页面的截图发送给所述智能终端。
根据本公开示例性实施例的另一方面，提供一种用于智能设备的内容输入装置，其中，所述内容输入装置包括：获取模块，被配置为获取智能设备的显示屏显示的待录入内容页面；编辑模块，被配置为对所述待录入内容页面进行内容编辑形成已录入内容页面；发送模块，被配置为将所述已录入内容页面发送给所述智能设备。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式。
可选地，编辑模块被进一步配置为：响应于用户编辑输入，对所述待录入内容页面进行内容编辑，以将用户编辑输入的内容添加至所述待录入内容页面上形成所述已录入内容页面。
可选地，对所述待录入内容页面进行内容编辑包括在所述待录入内容页面上进行字符串键入输入和/或手写输入。
可选地，获取模块被配置为：拍摄所述智能设备的显示屏显示的待录入内容页面；或者，将预设指令发送到所述智能设备并接收所述智能设备响应于所述预设指令而发送的所述待录入内容页面的截图。
根据本公开示例性实施例的另一方面，提供一种智能设备，其中，所述智能设备包括：至少一个处理器；至少一个存储器，用于存储计算机程序，其中，当所述计算机程序被所述至少一个处理器执行时，实现如上所述的用于智能设备的内容输入方法。
根据本公开示例性实施例的另一方面，提供一种智能终端，其中，所述智能终端包括：至少一个处理器；至少一个存储器，用于存储计算机程序，其中，当所述计算机程序被至少一个处理器执行时，实现如上所述的用于智能设备的内容输入方法。
根据本公开示例性实施例的另一方面，提供一种存储有计算机程序的计算机可读存储介质，当所述计算机程序被处理器执行时，实现如上所述的用于智能设备的内容输入方法。
根据本公开的示例性实施例的用于智能设备的内容输入方法和内容输入装置，通过所述智能终端对所述待录入内容页面进行输入内容的编辑形成录入内容页面，然后将所述已录入内容页面发送给所述智能设备，所述智能设备响应于接收到的录入内容页面自主识别并提取录入内容，并添加到对应其自身的显示页面的对应位置，从而实现录入内容的远程快速输入，大幅提高输入效率，并且可输入的内容还包括智能设备的输入法无法输入的内容(例如，图片、特殊字符等)，此外所述智能终端对所述待录入内容页面进行输入内容的编辑还支持手写输入的方式，便于老人、儿童以及不会使用输入法的用户执行输入。
将在接下来的描述中部分阐述本公开总体构思另外的方面和/或优点，还有一部分通过描述将是清楚的，或者可以经过本公开总体构思的实施而得知。
附图说明
通过下面结合示例性地示出实施例的附图进行的描述，本公开的示例性实施例的上述和其他目的和特点将会变得更加清楚，其中：
图1是示出根据本公开的一个示例性实施例的用于智能设备的内容输入方法的流程图；
图2是示出根据本公开的另一个示例性实施例的用于智能设备的内容输入方法的流程图；
图3是示出根据本公开的一个示例性实施例的用于智能设备的内容输入装置的框图；
图4是示出根据本公开的另一个示例性实施例的用于智能设备的内容输入装置的框图；
图5a和5b是示出根据本公开的示例性实施例的用于智能设备的内容输入方法和/或内容输入装置的一个示例的示图；
图6是示出根据本公开的示例性实施例的用于智能设备的内容输入方法和/或内容输入装置的另一个示例的示图。
具体实施方式
提供下面的具体实施方式以帮助读者获得对在此描述的方法、设备和/或系统的全面理解。然而，在理解本申请的公开之后，在此描述的方法、设备和/或系统的各种改变、修改和等同物将是清楚的。例如，在此描述的操作的顺序仅是示例，并且不限于在此阐述的那些顺序，而是除了必须以特定的顺序发生的操作之外，可如在理解本申请的公开之后将是清楚的那样被改变。此外，为了更加清楚和简明，本领域已知的特征的描述可被省略。
在此描述的特征可以以不同的形式来实现，而不应被解释为限于在此描述的示例。相反，已提供在此描述的示例，以仅示出实现在此描述的方法、设备和/或系统的许多可行方式中的一些可行方式，所述许多可行方式在理解本申请的公开之后将是清楚的。
如在此使用的，术语“和/或”包括相关联的所列项中的任何一个以及任何两个或更多个的任何组合。
尽管在此可使用诸如“第一”、“第二”和“第三”的术语来描述各种构件、组件、区域、层或部分，但是这些构件、组件、区域、层或部分不应被这些术语所限制。相反，这些术语仅用于将一个构件、组件、区域、层或部分与另一构件、组件、区域、层或部分进行区分。因此，在不脱离示例的教导的情况下，在此描述的示例中所称的第一构件、第一组件、第一区域、第一层或第一部分也可被称为第二构件、第二组件、第二区域、第二层或第二部分。
在说明书中，当元件(诸如，层、区域或基底)被描述为“在”另一元件上、“连接到”或“结合到”另一元件时，该元件可直接“在”另一元件上、直接“连接到”或“结合到”另一元件，或者可存在介于其间的一个或多个其他元件。相反，当元件被描述为“直接在”另一元件上、“直接连接到”或“直接结合到”另一元件时，可不存在介于其间的其他元件。
在此使用的术语仅用于描述各种示例，并不将用于限制公开。除非上下文另外清楚地指示，否则单数形式也意在包括复数形式。术语“包含”、“包括”和“具有”说明存在叙述的特征、数量、操作、构件、元件和/或它们的组合，但不排除存在或添加一个或多个其他特征、数量、操作、构件、元件和/或它们的组合。
除非另有定义，否则在此使用的所有术语(包括技术术语和科学术语)具有与由本公开所属领域的普通技术人员在理解本公开之后通常理解的含义相同的含义。除非在此明确地如此定义，否则术语(诸如，在通用词典中定义的术语)应被解释为具有与它们在相关领域的上下文和本公开中的含义一致的含义，并且不应被理想化或过于形式化地解释。
此外，在示例的描述中，当认为公知的相关结构或功能的详细描述将引起对本公开的模糊解释时，将省略这样的详细描述。
在下文中，将参照附图详细描述实施例。然而，实施例可以以各种形式实现，并且不限于在此描述的示例。
本公开提供的用于智能设备的内容输入方法可基于所述智能设备与所述智能终端的交互实现。所述智能设备包括至少一个处理器和用于存储计算机程序的至少一个存储器，当所述计算机程序被所述至少一个处理器执行时，可实现如本公开所述的用于智能设备的内容输入方法。所述智能终端包括至少一个处理器和用于存储计算机程序的至少一个存储器，当所述计算机程序被所述至少一个处理器执行时，可实现如本公开所述的用于智能设备的内容输入方法。除此之外，本公开对所述智能设备和所述智能终端不做其他限定。可选地，所述智能设备例如可以为具有显示屏的智能冰箱、智能洗衣机、智能电视等家电设备；所述智能终端例如可以为智能手机、平板计算机、可穿戴装置(诸如，智能手表)等。
具体地，本公开提供的用于智能设备的内容输入方法基于所述智能设备与所述智能终端的交互描述如下。
图1是示出据本公开的一个示例性实施例的用于智能设备的内容输入方法的流程图。图1所示的内容输入方法可在所述智能设备上执行。
参照图1，在步骤S101中，响应于从智能终端接收到对在智能设备的显示屏上显示的待录入内容页面进行内容编辑后形成的已录入内容页面，确定所述已录入内容页面中的录入内容。
这里，所述智能终端与所述智能设备可基于任何可用的无线通信方式实现数据交互(数据的接收或发送)。所述无线通信的方式例如可包括Wi-Fi、移动网络(4G或5G等)、蓝牙和/或近场通信(NFC)。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式，其优点在于便于编辑处理以及传输。基于此，可通过对所述待录入内容页面和所述已录入内容页面进行图片对比和格式转换来确定所述已录入内容页面中的录入内容。具体地，通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分；对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
如能理解的，可通过任何可用的方式实现上述“图片对比”。例如，可采用图片相似度对比算法(包括投影对比、分块对比等)对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分。在对比的结果中除了差异部分还包括与所述差异部分相关的参数，例如关于所述差异部分的位置和/或坐标等定位参数，用于描述差异部分的在图片中的相对位置。
此外，所述预设格式可以为{diff_pos,diff_content}，其中，diff_pos表示所述差异部分在所述已录入内容页面中的定位参数。例如，可以所述已录入内容页面的左上角为锚点(原点)、以所述原点所在的左边和上边分别为x轴和y轴建立平面坐标系XY，计算所述差异部分在平面坐标系XY中的坐标，作为所述定位参数diff_pos。可选地所述定位参数diff_pos用百分数表示，原因在于所述智能终端的显示屏的尺寸与所述智能设备的显示屏的尺寸存在差异，因此利用百分数表示所述定位参数可适配具体显示屏幕的尺寸灵活确定所述差异部分的具体位置。diff_content表示所述差异部分的内容数据。其中，所述内容数据可包括字符串形式的文本数据、特殊字符或者手写输入的文本数据。因此，所述格式转换的步骤还隐含对所述手写文本的识别，具体地，例如可通过手识别算法实现。
基于上述分析可知，将所述差异部分转换为例如{diff_pos,diff_content}的预设格式，可便于智能设备在显示屏显示的待录入内容页面中准确定位到所述内容数据的添加位置。可选地，上述“格式转换”的操作可由智能设备的接收服务(Received Service)(对应后面将描述的所述提取模块)执行。
在步骤S102中，将所述录入内容添加到所述待录入内容页面中对应的位置。具体地，根据所述定位参数将所述内容数据添加到所述待录入内容页面中的所述添加位置。
如能理解的，基于步骤S101确定的预设格式的差异部分，可根据定位参数diff_pos在智能设备的显示屏显示的待录入内容页面中找到内容数据diff_content要输入的输入框或者可输入区域，然后根据所述输入框或者可输入区域允许的数据格式添加所述内容数据diff_content。
可选地，上述“内容添加”的操作可由智能设备当前运行的APP的接收服务(AutoFill Service)(对应后面将描述的所述添加模块)执行。
可选地，在执行步骤S101之前，可将所述待录入内容页面提供给所述智能终端。具体地，可控制所述智能设备的显示屏显示所述待录入内容页面；或者，响应于预设指令对所述智能设备的显示屏显示的所述待录入内容页面进行截图，并将所述待录入内容页面的截图发送给所述智能终端。如能理解的，所述“预设指令”可包括多种适用的形式。例如，可以为所述智能终端发送的获取所述智能设备的显示屏当前显示页面的截图的请求。控制所述智能设备的显示屏显示所述待录入内容页面，可便于智能终端拍摄。
图2是示出据本公开的另一个示例性实施例的用于智能设备的内容输入方法的流程图。图2所示的内容输入方法可在所述智能终端上执行。
参考图2，在步骤S201中，获取智能设备的显示屏显示的待录入内容页面。在步骤S202中，对所述待录入内容页面进行内容编辑形成已录入内容页面。在步骤S203中，将所述已录入内容页面发送给所述智能设备。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式。
可选地，在步骤S201中，所述获取智能设备的显示屏显示的待录入内容页面的步骤包括：拍摄所述智能设备的显示屏显示的待录入内容页面；或者，将预设指令发送到所述智能设备并接收所述智能设备响应于所述预设指令而发送的所述待录入内容页面的截图。其中，所述“预设指令”例如为所述智能终端发送的获取所述智能设备的显示屏当前显示页面的截图的请求。
可选地，在步骤S202中，对所述待录入内容页面进行内容编辑形成已录入内容页面的步骤包括：响应于用户编辑输入，对所述待录入内容页面进行内容编辑，以将用户编辑输入的内容添加至所述待录入内容页面上形成所述已录入内容页面。更具地体，对所述待录入内容页面进行内容编辑包括在所述待录入内容页面上进行字符串键入输入和/或手写输入。
如能理解的，可利用任何适用的方式实现上述“内容编辑”。例如，基于所述待录入内容页面为图片格式，可在待录入内容的页面插入文本框，在所述文本框内可利用字符串键入的方式输入待录入的文本数据；或者，在所述待录入内容页面插入可编辑UI图层，所述可编辑UI图层在所述待录入内容页面中形成为可输入区域，以支持用户手写输入或添加图片。
根据本公开的示例性实施例的用于智能设备的内容输入方法，通过所述智能终端对所述待录入内容页面进行输入内容的编辑形成录入内容页面，然后将所述已录入内容页面发送给所述智能设备，所述智能设备响应于接收到的录入内容页面自主识别并提取录入内容，并添加到对应其自身的显示页面的对应位置，从而实现录入内容的远程快速输入，大幅提高输入效率，并且可输入的内容还包括智能设备的输入法无法输入的内容(例如，图片、特殊字符等)，此外所述智能终端对所述待录入内容页面进行输入内容的编辑还支持手写输入的方式，便于老人、儿童以及不会使用输入法的用户执行输入。
图3是示出根据本公开的一个示例性实施例的用于智能设备的内容输入装置的框图。
参照图3，用于智能设备的内容输入装置包括提取模块310和添加模块320。其中，提取模块310和添加模块320可设置在所述智能设备上，并且可通信地耦合。
提取模块310可响应于从智能终端接收到对在智能设备的显示屏上显示的待录入内容页面进行内容编辑后形成的已录入内容页面，确定所述已录入内容页面中的录入内容；添加模块320可将所述录入内容添加到所述待录入内容页面中对应的位置。
可选地，所述内容输入装置还包括显示处理模块(未示出)。显示处理模块可将智能设备的显示屏显示的待录入内容页面提供给智能终端。具体地，显示处理模块可控制所述智能设备的显示屏显示所述待录入内容页面；或者可响应于预设指令对所述智能设备的显示屏显示的所述待录入内容页面进行截图，并将所述待录入内容页面的截图发送给所述智能终端。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式。
可选地，提取模块310可通过对所述待录入内容页面和所述已录入内容页面进行图片对比和格式转换来确定所述已录入内容页面中的录入内容。具体地，提取模块310可通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分；对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
可选地，添加模块320可根据所述定位参数将所述内容数据添加到所述待录入内容页面中的所述添加位置。
上述各模块的功能性扩展与图1实施例中对应内容输入方法的各步骤的扩展内容相同，因此这里不赘述。
图4是示出根据本公开的另一个示例性实施例的用于智能设备的内容输入装置的框图。
参照图4，用于智能设备的内容输入装置包括获取模块410、编辑模块420以及发送模块430。其中，获取模块410、编辑模块420以及发送模块430可设置在所述智能终端上，并且可通信地耦合。
获取模块410可获取智能设备的显示屏显示的待录入内容页面；编辑模块420可对所述待录入内容页面进行内容编辑形成已录入内容页面；发送模块430可将所述已录入内容页面发送给所述智能设备。
可选地，所述待录入内容页面和所述已录入内容页面均为图片格式。
可选地，编辑模块420可响应于用户编辑输入，对所述待录入内容页面进行内容编辑，以将用户编辑输入的内容添加至所述待录入内容页面上形成所述已录入内容页面。具体地，对所述待录入内容页面进行内容编辑包括在所述待录入内容页面上进行字符串键入输入和/或手写输入。
可选地，获取模块410可拍摄所述智能设备的显示屏显示的待录入内容页面；或者可将预设指令发送到所述智能设备并接收所述智能设备响应于所述预设指令而发送的所述待录入内容页面的截图。
上述各模块的功能性扩展与图2实施例中对应内容输入方法的各步骤的扩展内容相同，因此这里不赘述。
根据本公开的示例性实施例的用于智能设备的内容输入装置，通过所述智能终端对所述待录入内容页面进行输入内容的编辑形成录入内容页面，然后将所述已录入内容页面发送给所述智能设备，所述智能设备响应于接收到的录入内容页面自主识别并提取录入内容，并添加到对应其自身的显示页面的对应位置，从而实现录入内容的远程快速输入，大幅提高输入效率，并且可输入的内容还包括智能设备的输入法无法输入的内容(例如，图片、特殊字符等)，此外所述智能终端对所述待录入内容页面进行输入内容的编辑还支持手写输入的方式，便于老人、儿童以及不会使用输入法的用户执行输入。
下面分别根据图5a、5b和图6示出的应用场景，对本公开所述的用于智能设备的内容输入方法和/或内容输入装置的工作过程进行描述：
图5a和5b是示出根据本公开的示例性实施例的用于智能设备的内容输入方法和/或内容输入装置的一个示例的示图。
参照图5a和5b，所述智能设备为智能冰箱，所述智能终端为智能手机。该示例的应用场景为利用智能手机在智能冰箱的登陆界面输入登陆信息。所述登陆界面包括提示用户登录您的三星账户、账号及密码的输入框以及登录按钮等。
首先，所述智能冰箱响应于接收到所述预设指令，可利用所述显示处理模块截屏所述智能冰箱的显示屏当前显示的登陆界面的页面作为所述待录入内容页面，然后发送截屏图片(即，所述待录入内容页面)给所述智能手机。
接下来，用户可利用所述智能手机编辑所述截屏图片。具体地，用户可在所述截屏图片对应账号及密码的输入框的位置输入账号及对应账号的密码，输入完成后保存形成为编辑后的截屏图片(即，已录入内容页面)，然后将所述编辑后的截屏图片发送给所述智能冰箱。
然后，所述智能冰箱接收到所述编辑后的截屏图片后，可利用所述提取模块将所述编辑后的截屏图片与所述截屏图片进行对比，以确定所述已录入内容页面中的录入内容。更具体地，参照图5b，所述提取模块可为智能冰箱提供接收服务(Received Service)，以接收所述编辑后的截屏图片。然后所述提取模块将所述编辑后的截屏图片与所述截屏图片进行对比确定所述差异部分，进而确定录入内容，并将所述录入内容转换为预设格式{diff_pos,diff_content}的形式，其中定位参数(x1,y1)对应的内容数据为账号，例如，图5b示出的www@www.net；定位参数diff_pos(x2,y1)对应的内容数据diff_content为密码，例如，图5b示出的qqqwww。
最后，所述提取模块将所述预设格式的差异部分发送给所述添加模块，所述添加模块可为智能冰箱提供其当前运行的App的AutoFill Service功能。具体地，所述添加模块可对接收到的所述预设格式的差异部分进行分析(如图5b示出的Analysis content)，以确定所述定位参数和对应的内容数据，例如预设格式{(x1,y1)，“www@www.net”}的电子邮箱、电话号码等；然后根据所述定位参数在智能冰箱显示屏当前显示的待录入内容页面中定位出例如账号的输入框，进而将对应的内容数据(例如，)以输入框允许的格式写入。关于密码的定位以及添加与上述“账号”的定位以及添加的原理相同，这里不再赘述。
至此，完成了利用智能手机在智能冰箱的登陆界面输入登陆信息的交互过程。
图6是示出根据本公开的示例性实施例的用于智能设备的内容输入方法和/或内容输入装置的另一个示例的示图。
参照图6，所述智能设备为智能电视，所述智能终端为智能手机。该示例的应用场景为利用智能手机在智能电视的显示屏上输入在线学习的习题答案。
首先，可利用所述智能手机拍摄所述智能电视的显示屏，获取屏幕图片；其中，所述屏幕图片上包括习题题目。
接下来，可利用智能手机在所述屏幕图片上编辑习题的答案，为方便用户(例如，学生)的答题习惯智能手机的触摸屏可支持手写输入，编辑完成后保存，得到编辑后的屏幕图片，然后发送给所述智能电视。
然后，所述智能电视接响应于收到所述编辑后的屏幕图片，利用所述提取模块与之前的屏幕图片比对以确定出二者之间的差异部分，进而确定出录入内容；然后所述录入内容转换为所述预设格式并发送至所述添加模块。
最后，所述添加模块响应于接收到所述预设格式的录入内容，执行分析并基于素手定位参数确定所述内容数据在智能电视当前屏幕显示的画面中的添加位置，然后将所述内容数据添加至所述添加位置。其中，所述内容数据的格式可以为图片(即保留手写输入的原有样式)，也可以为文本数据(即，提取模块在确定所述录入内容时对手写输入的内容数据进行了手写识别，转换为文本数据)。
至此，完成了利用智能手机在智能电视的显示屏上输入在线学习的习题答案的交互过程。
应该理解，根据本公开的示例性实施例的用于智能设备的内容输入装置中的各个单元/模块可被实现为硬件组件和/或软件组件。本领域技术人员根据限定的各个单元/模块所执行的处理，可以例如使用现场可编程门阵列(FPGA)或专用集成电路(ASIC)来实现各个单元/模块。
根据本公开的示例性实施例的用于智能设备的内容输入方法可被编写为计算机程序、代码段、指令或它们的任何组合，并被记录、存储或固定在一个或多个非暂时性计算机可读存储介质中或一个或多个非暂时性计算机可读存储介质上。当所述计算机程序被处理器执行时，可实现如上所述的内容输入方法。所述非暂时性计算机可读存储介质是可存储由计算机系统读出的数据的任意数据存储装置。计算机可读存储介质的示例包括：只读存储器、随机存取存储器、只读光盘、磁带、软盘、光数据存储装置和载波(诸如经有线或无线传输路径通过互联网的数据传输)。
虽然已表示和描述了本公开的一些示例性实施例，但本领域技术人员应该理解，在不脱离由权利要求及其等同物限定其范围的本公开的原理和精神的情况下，可以对这些实施例进行修改。

Claims (19)

1.一种用于智能设备的内容输入方法，其特征在于，所述内容输入方法包括：
响应于从智能终端接收到对在智能设备的显示屏上显示的待录入内容页面进行内容编辑后形成的已录入内容页面，确定所述已录入内容页面中的录入内容，其中，已录入内容页面是通过对从智能设备接收到的智能设备的显示屏上显示的待录入内容页面的截图进行编辑后形成的；
将所述录入内容添加到所述待录入内容页面中对应的位置，
其中，所述待录入内容页面和所述已录入内容页面均为图片格式，
其中，确定所述已录入内容页面中的录入内容的步骤包括：
通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分，对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
2.根据权利要求1所述的内容输入方法，其特征在于，所述内容输入方法还包括：将所述待录入内容页面提供给所述智能终端。
3.根据权利要求1所述的内容输入方法，其特征在于，将所述录入内容添加到所述待录入内容页面对应的位置的步骤包括：
根据所述定位参数将所述内容数据添加到所述待录入内容页面中的所述添加位置。
4.根据权利要求2所述的内容输入方法，其特征在于，将所述待录入内容页面提供给所述智能终端的步骤包括：
控制所述智能设备的显示屏显示所述待录入内容页面；或者
响应于预设指令对所述智能设备的显示屏显示的所述待录入内容页面进行截图，并将所述待录入内容页面的截图发送给所述智能终端。
5.一种用于智能设备的内容输入方法，其特征在于，所述内容输入方法包括：
获取智能设备的显示屏显示的待录入内容页面；
对所述待录入内容页面进行内容编辑形成已录入内容页面；
将所述已录入内容页面发送给所述智能设备，
其中，已录入内容页面是通过对从智能设备接收到的智能设备的显示屏上显示的待录入内容页面的截图进行编辑后形成的，
其中，所述待录入内容页面和所述已录入内容页面均为图片格式，
其中，所述已录入内容页面被所述智能设备用于确定所述已录入内容页面中的录入内容，
其中，确定所述已录入内容页面中的录入内容的步骤包括：
通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分，对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
6.根据权利要求5所述的内容输入方法，其特征在于，对所述待录入内容页面进行内容编辑形成已录入内容页面的步骤包括：
响应于用户编辑输入，对所述待录入内容页面进行内容编辑，以将用户编辑输入的内容添加至所述待录入内容页面上形成所述已录入内容页面。
7.根据权利要求6所述的内容输入方法，其特征在于，对所述待录入内容页面进行内容编辑包括在所述待录入内容页面上进行字符串键入输入和/或手写输入。
8.根据权利要求5所述的内容输入方法，其特征在于，获取智能设备的显示屏显示的待录入内容页面的步骤包括：
拍摄所述智能设备的显示屏显示的待录入内容页面；或者
将预设指令发送到所述智能设备并接收所述智能设备响应于所述预设指令而发送的所述待录入内容页面的截图。
9.一种用于智能设备的内容输入装置，其特征在于，所述内容输入装置包括：
提取模块，被配置为响应于从智能终端接收到对在智能设备的显示屏上显示的待录入内容页面进行内容编辑后形成的已录入内容页面，确定所述已录入内容页面中的录入内容；
添加模块，被配置为将所述录入内容添加到所述待录入内容页面中对应的位置，
其中，已录入内容页面是通过对从智能设备接收到的智能设备的显示屏上显示的待录入内容页面的截图进行编辑后形成的，
其中，所述待录入内容页面和所述已录入内容页面均为图片格式，
其中，提取模块被进一步配置为：通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分，对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
10.根据权利要求9所述的内容输入装置，其特征在于，所述内容输入装置还包括显示处理模块，所述显示处理模块被配置为将智能设备的显示屏显示的待录入内容页面提供给智能终端。
11.根据权利要求9所述的内容输入装置，其特征在于，添加模块被配置为：
根据所述定位参数将所述内容数据添加到所述待录入内容页面中的所述添加位置。
12.根据权利要求10所述的内容输入装置，其特征在于，显示处理模块被配置为：
控制所述智能设备的显示屏显示所述待录入内容页面；或者，
响应于预设指令对所述智能设备的显示屏显示的所述待录入内容页面进行截图，并将所述待录入内容页面的截图发送给所述智能终端。
13.一种用于智能设备的内容输入装置，其特征在于，所述内容输入装置包括：
获取模块，被配置为获取智能设备的显示屏显示的待录入内容页面；
编辑模块，被配置为对所述待录入内容页面进行内容编辑形成已录入内容页面；
发送模块，被配置为将所述已录入内容页面发送给所述智能设备，
其中，已录入内容页面是通过对从智能设备接收到的智能设备的显示屏上显示的待录入内容页面的截图进行编辑后形成的，
其中，所述待录入内容页面和所述已录入内容页面均为图片格式，
其中，所述已录入内容页面被所述智能设备用于确定所述已录入内容页面中的录入内容，
其中，确定所述已录入内容页面中的录入内容的步骤包括：
通过对所述待录入内容页面与所述已录入内容页面进行图片对比来确定二者之间的差异部分，对所述差异部分进行格式转换以获取预设格式的差异部分，其中，所述预设格式的差异部分包括定位参数和内容数据，所述内容数据被确定为所述录入内容，所述定位参数用于指示所述内容数据在所述待录入内容页面中的添加位置。
14.根据权利要求13所述的内容输入装置，其特征在于，编辑模块被进一步配置为：
响应于用户编辑输入，对所述待录入内容页面进行内容编辑，以将用户编辑输入的内容添加至所述待录入内容页面上形成所述已录入内容页面。
15.根据权利要求14所述的内容输入装置，其特征在于，对所述待录入内容页面进行内容编辑包括在所述待录入内容页面上进行字符串键入输入和/或手写输入。
16.根据权利要求13所述的内容输入装置，其特征在于，获取模块被配置为：
拍摄所述智能设备的显示屏显示的待录入内容页面；或者，
将预设指令发送到所述智能设备并接收所述智能设备响应于所述预设指令而发送的所述待录入内容页面的截图。
17.一种智能设备，其特征在于，所述智能设备包括：
至少一个处理器；
至少一个存储器，用于存储计算机程序，
其中，当所述计算机程序被所述至少一个处理器执行时，实现如权利要求1至4中任一项所述的用于智能设备的内容输入方法。
18.一种智能终端，其特征在于，所述智能终端包括：
至少一个处理器；
至少一个存储器，用于存储计算机程序，
其中，当所述计算机程序被所述至少一个处理器执行时，实现如权利要求5至8中任一项所述的用于智能设备的内容输入方法。
19.一种存储有计算机程序的计算机可读存储介质，其特征在于，当所述计算机程序被处理器执行时，实现如权利要求1至8中任一项所述的用于智能设备的内容输入方法。
CN202010952161.6A 2020-09-11 2020-09-11 用于智能设备的内容输入方法和内容输入装置 Active CN112130744B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010952161.6A CN112130744B (zh) 2020-09-11 2020-09-11 用于智能设备的内容输入方法和内容输入装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010952161.6A CN112130744B (zh) 2020-09-11 2020-09-11 用于智能设备的内容输入方法和内容输入装置

Publications (2)

Publication Number Publication Date
CN112130744A CN112130744A (zh) 2020-12-25
CN112130744B true CN112130744B (zh) 2022-06-21

Family

ID=73846197

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010952161.6A Active CN112130744B (zh) 2020-09-11 2020-09-11 用于智能设备的内容输入方法和内容输入装置

Country Status (1)

Country Link
CN (1) CN112130744B (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103607654A (zh) * 2013-11-15 2014-02-26 四川长虹电器股份有限公司 基于多屏协同系统的移动终端辅助输入装置及方法
CN105554560A (zh) * 2015-10-30 2016-05-04 深圳市美贝壳科技有限公司 一种家用智能设备密码输入的方法
CN106126060A (zh) * 2016-06-20 2016-11-16 北京小米移动软件有限公司 智能家居控制方法及装置
CN111291537A (zh) * 2018-11-22 2020-06-16 无锡雅座在线科技股份有限公司 一种支持自动识别图片信息并转化为文字的方法
CN110376905A (zh) * 2019-06-03 2019-10-25 广州日顺电子科技有限公司 一种智慧酒店的设备控制方法、电子设备及存储介质

Also Published As

Publication number Publication date
CN112130744A (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
KR101909807B1 (ko) 메시지 입력 방법 및 장치
US20190068527A1 (en) Method and system for conducting an automated conversation with a virtual agent system
CN110557678B (zh) 视频处理方法、装置及设备
US9161238B2 (en) Mobile device monitoring and testing
EP2747389A2 (en) Mobile terminal having auto answering function and auto answering method for use in the mobile terminal
KR20140030361A (ko) 휴대단말기의 문자 인식장치 및 방법
CN103809860B (zh) 显示设备及其字符校正方法
US20210073476A1 (en) Recording medium, conversation control method, and information processing apparatus
CN110490182A (zh) 一种点读数据的制作方法、系统、存储介质及电子设备
CN104010070A (zh) 用于控制终端中的信使服务的设备和方法
CN116561276A (zh) 知识问答方法、装置、设备及存储介质
CN105225103B (zh) 继续支付系统和方法
CN108475221A (zh) 用于提供多任务处理视图的方法和装置
CN110046571B (zh) 用于识别年龄的方法和装置
CN111240669A (zh) 界面生成方法、装置、电子设备及计算机存储介质
CN116561277A (zh) 知识问答方法、装置、设备及存储介质
CN105094381A (zh) 一种书写处理方法和装置
CN115757725A (zh) 问答处理方法、装置、计算机设备及存储介质
CN104063424B (zh) 网页图片的展现方法和展现装置
US20170161871A1 (en) Method and electronic device for previewing picture on intelligent terminal
CN104837065B (zh) 电视终端与移动终端间的二维码信息共享方法及系统
WO2024104423A1 (zh) 图像处理方法、装置、电子设备及存储介质
CN111651049B (zh) 交互方法、装置、计算机设备及存储介质
CN112130744B (zh) 用于智能设备的内容输入方法和内容输入装置
CN112597066A (zh) 页面测试方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant