CN110609662B - 打印系统、控制方法和服务器 - Google Patents

Abstract

本发明提供一种打印系统、控制方法和服务器。如果不能基于指示数据来指定打印对象内容数据，则至少一个服务器的发送单元发送用以询问与内容设置项有关的消息数据，以及如果能够基于指示数据来指定打印对象内容数据，则发送单元发送用以询问与打印设置项有关的消息数据。声音控制装置基于所发送的消息数据通过声音来输出消息。至少一个服务器的指定单元基于声音控制装置在通过声音输出消息之后所接受的声音指示来指定内容数据，并且打印设备根据基于所指定的内容数据所生成的打印数据来执行打印。

Description

打印系统、控制方法和服务器

技术领域

本发明涉及能够通过声音指示来执行打印的打印系统、控制方法和服务器。

背景技术

已知可通信地连接到打印设备的移动终端使打印设备执行打印的技术。根据日本特开2015-100020，当在移动终端中执行打印机应用程序并且在移动终端上显示的UI画面上按下打印按钮时，指示打印。

然而，在日本特开2015-100020中，用户需要按下打印按钮以指示打印。近年来，打印设备已经用于各种场景，因此需要进一步改进打印指示的可操作性的技术。

发明内容

本发明的方面是消除传统技术的上述问题。本发明提供进一步提高打印指示的可操作性的打印系统、控制方法和服务器。

本发明在其第一方面提供一种打印系统，包括打印设备和至少一个服务器，所述至少一个服务器包括：接收单元，其被配置为接收基于与声音控制装置所接受的打印有关的声音指示的指示数据，发送单元，其被配置为基于所接收到的指示数据来发送消息数据，以及指定单元，其被配置为指定内容数据，其中，在不能基于所述指示数据来指定打印对象内容数据的情况下，所述发送单元发送用以询问内容设置项的消息数据，以及在能够基于所述指示数据来指定打印对象内容数据的情况下，所述发送单元发送用以询问打印设置项的消息数据，所述声音控制装置基于所发送的消息数据通过声音来输出消息，所述指定单元基于所述声音控制装置在通过声音输出消息之后所接受的声音指示来指定内容数据，以及所述打印设备根据基于所指定的内容数据所生成的打印数据来执行打印。

本发明在其第二方面提供一种打印系统中的控制方法，所述打印系统包括打印设备和至少一个服务器，包括：通过所述至少一个服务器：接收基于与声音控制装置所接受的打印有关的声音指示的指示数据，基于所接收到的指示数据来发送消息数据，以及指定内容数据，其中，在不能基于所述指示数据来指定打印对象内容数据的情况下，发送用以询问内容设置项的消息数据，以及在能够基于所述指示数据来指定打印对象内容数据的情况下，发送用以询问打印设置项的消息数据，所述声音控制装置基于所发送的消息数据通过声音来输出消息，内容数据是基于所述声音控制装置在通过声音输出所述消息之后所接受的声音指示来指定的，以及所述打印设备根据基于所指定的内容数据所生成的打印数据来执行打印。

本发明在其第三方面提供一种服务器，包括：接收单元，其被配置为接收基于与声音控制装置所接受的打印有关的声音指示的指示数据，发送单元，其被配置为基于所接收到的指示数据来发送消息数据，以及指定单元，其被配置为指定内容数据，其中，在不能基于所述指示数据来指定打印对象内容数据的情况下，所述发送单元发送用以询问内容设置项的消息数据，以及在能够基于所述指示数据来指定打印对象内容数据的情况下，所述发送单元发送用以询问打印设置项的消息数据，所述声音控制装置基于所发送的消息数据通过声音来输出消息，以及所述指定单元基于所述声音控制装置在通过声音输出所述消息之后所接受的声音指示来指定打印对象内容数据。

根据本发明，可以进一步提高打印指示的可操作性。

通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。

附图说明

图1是示出打印系统的配置的图；

图2是示出声音控制装置的块结构的框图；

图3是示出声控装置管理服务器和中继服务器各自的块结构的框图；

图4是示出MFP的块结构的框图；

图5是示出将声音控制装置与MFP彼此关联的处理的序列图；

图6是示出启动打印系统的处理的序列图；

图7是示出从用户的打印指示到执行打印的处理的序列图；

图8是打印对象和设置项彼此关联的表；

图9是打印对象和设置项彼此关联的表；

图10A和10B是各自示出在用户终端上显示的消息的图；以及

图11是示出终端设备的块结构的框图。

具体实施方式

现在将在下文中参考附图来详细描述本发明的优选实施例。应当理解，以下实施例并非旨在限制本发明的权利要求，并且根据以下实施例描述的方面的并非所有组合是针对根据本发明的问题的解决方案所必需的。注意，相同的附图标记表示相同的构成元件，并且将省略其描述。

图1是示出根据本实施例的打印系统的配置的示例的图。图1所示的打印系统包括声音控制装置101、声音控制装置管理服务器102、中继服务器103、MFP 104、终端设备105和接入点(AP)106。MFP 104是具有打印功能的打印设备的示例，并且在本实施例中将被解释为多功能打印机。终端设备105是诸如智能电话、PC(个人计算机)、平板终端、移动电话或PDA(个人数字助理)等的任意终端设备。注意，在以下描述中，终端设备105是智能电话。AP106例如是无线LAN路由器，并且连接到AP 106的设备可以经由AP 106使用因特网。此外，在本实施例中，根据符合IEEE 802.11标准系列的无线LAN的无线通信方法，声音控制装置101、MFP 104和终端设备105无线连接到AP 106。也就是说，声音控制装置101、MFP 104和终端设备105连接到由AP 106形成的本地网络。

在打印系统中，用户可以通过声音来指示打印。声音控制装置101例如是被称为智能扬声器或AI扬声器的装置。更具体地，声音控制装置101可以进行输入至麦克风的用户的声音的声音识别，并且经由由AP 106形成的网络和因特网107发送声音数据，并且还可以通过扬声器输出经由因特网107和由AP 106形成的网络接收的声音数据。声音控制装置101和终端设备105可以经由AP 106和因特网107与声音控制装置管理服务器102通信。声音控制装置管理服务器102管理声音控制装置101，并且例如将声音控制装置101和MFP 104彼此关联。另外，例如，声音控制装置管理服务器102根据从声音控制装置101接收到的声音数据的内容来进行(后述的)预定处理。

声音控制装置管理服务器102和中继服务器103经由因特网107相互连接。中继服务器103控制MFP 104，以例如根据来自声音控制装置管理服务器102的请求来生成打印数据，并将打印数据发送到MFP 104。此外，中继服务器103和MFP 104经由由AP 106形成的网络和因特网107而相互连接，并且中继服务器103经由因特网107和由AP 106形成的网络来指示MFP 104执行打印。注意，在图1所示的系统中，声音控制装置101、MFP 104和终端设备105连接到相同的AP以能够使用因特网107。然而，本发明不限于此。例如，声音控制装置101、MFP 104和终端设备105可以连接到不同的AP以能够使用因特网。可选地，这些设备可以在无需使用任何AP的情况下通过诸如LTE或4G等的移动通信网络而能够使用因特网。

图2是示出声音控制装置101的硬件块结构的框图。声音控制装置101包括扬声器201、CPU 202、ROM 203、麦克风204、RAM 205、外部存储装置206、通信单元207和短距离无线通信单元208。注意，图2所示的各个块使用例如内部总线而相互连接。另外，注意，CPU是中央处理单元的首字母缩写，ROM是只读存储器的首字母缩写，以及RAM是随机存取存储器的首字母缩写。在本实施例中，当例如CPU 202将存储在ROM 203中的程序加载到RAM 205中并执行该程序时，实现声音控制装置101的工作。

扬声器201基于声音数据输出声音。CPU 202设置在例如系统控制板上，并且全面地控制声音控制装置101。ROM 203存储固定数据，诸如要由CPU 202执行的控制程序、数据表和嵌入式OS(操作系统)程序等。在本实施例中，存储在ROM 203中的各控制程序是存储在ROM 203中的嵌入式OS的软件执行控制的对象。软件执行控制例如是调度、任务切换或中断处理。麦克风204接收声音控制装置101的周围的声音(例如，用户说话的声音)。

RAM 205由例如需要备用电源的SRAM(静态RAM)等形成。注意，RAM 205通过用于数据备份的一次电池(未示出)来保持数据，因此可以保持诸如程序控制变量等的数据而不使其挥发。另外，在RAM 205中还设置用于存储声音控制装置101的设置信息和管理数据的存储区域。RAM 205还用作CPU 202的主存储器和工作存储器。外部存储装置206存储应用软件。

通信单元207包括用于根据预定无线通信方法来进行通信的电路和天线。例如，通信单元207可以无线地连接到外部接入点106。另外，通信单元207可以临时作为接入点而工作。也就是说，通信单元207可以具有接入点功能。在本实施例中使用的无线通信可以具有根据符合IEEE 802.11标准系列的无线LAN的无线通信方法而工作的能力，或者可以具有根据另一种无线通信方法而工作的能力。短距离无线通信单元208与存在于距声音控制装置101的预定短距离范围内的另一设备执行短距离无线通信。注意，短距离无线通信单元208使用与通信单元207的无线通信方法不同的无线通信方法来进行通信。在本实施例中，短距离无线通信单元208根据

标准而工作。

声音识别/声音输出单元209进行对经由麦克风204输入的声音的声音识别以生成声音数据，并且还将从外部接收到的声音数据或预先保持的消息数据转换为声音信号，以从扬声器201输出声音。

图3是示出声音控制装置管理服务器102和中继服务器103各自的块结构的框图。图3示出与上述两个设备共通的结构，因此下面将描述声音控制装置管理服务器102。注意，在本实施例中，声音控制装置管理服务器102和中继服务器103各自由一个服务器(信息处理设备)形成。然而，当多个服务器彼此协作工作时，可以形成与声音控制装置管理服务器102或中继服务器103相对应的服务器系统。

CPU 301是用于全面控制声音控制装置管理服务器102的中央处理单元。盘装置302存储应用程序312、数据库313和OS以及各种文件和数据。外部存储介质读取装置303是用于读取诸如存储在诸如SD卡等的外部存储介质中的文件等的信息的装置。存储器304由RAM等形成，并且CPU 301根据需要在存储器304中临时存储或缓冲数据。

显示单元305由例如LCD形成，并显示各种信息。此外，操作单元306包括用户用来进行各种输入操作所使用的键盘和鼠标，并且可以接受来自用户的指示和操作。网络通信单元307经由网络连接单元308连接到诸如因特网等的网络以进行各种通信。网络连接单元308支持诸如有线LAN或无线LAN等的网络介质。对于有线LAN，网络连接单元308例如是用于连接有线LAN线缆的连接器。对于无线LAN，网络连接单元308例如是天线。注意，网络连接单元308可以支持有线LAN和无线LAN两者。USB通信单元310经由USB连接单元311连接到各种周围装置以进行各种通信。

图3所示的各个块经由总线309相互连接。在本实施例中，当例如CPU 301将处理所需的程序从盘装置302加载到存储器304中并执行该程序时，实现声音控制装置管理服务器102(或中继服务器103)的工作。图2所示的声音识别/声音输出单元209的声音识别功能可以包括在图3的结构中。在这种情况下，包括图3的结构的设备可以例如进行对从声音控制装置101发送的声音信号的声音识别，识别预定的单词并提取该单词。尽管本实施例将声音控制装置管理服务器102和中继服务器103描述为单独的服务器(信息处理设备)，但是这些服务器可以由集成了两个服务器功能的服务器形成。

图4是示出MFP 104的块结构的框图。注意，本实施例将说明多功能打印机作为MFP104的示例。代替多功能打印机的形式，可以使用其它形式的设备，只要该设备具有打印功能即可。例如，可以使用图像处理设备、复印机、传真机或具有单一功能的打印设备等。在MFP 104中，打印功能由打印机单元401实现，扫描器功能由扫描器单元402实现，存储功能由存储卡安装单元403和存储卡404实现。上述单元通过总线414相互连接。

打印机单元401通过诸如喷墨打印方法或电子照相方法等的打印方法将从外部接收到的图像数据或者存储在存储卡404中的图像数据等打印在诸如打印薄片等的打印介质上。另外，打印机单元401管理与消耗部件有关的信息(例如，包括剩余墨量的墨信息，以及与堆叠的薄片数等有关的薄片信息)。

扫描器单元402光学地读取原稿台(未示出)所设置的原稿，将其转换为电子数据，并且经由网络将转换成指定的文件格式的图像数据发送到外部设备，或者将图像数据存储在HDD 416等的存储区域中。当通过扫描器单元402读取放置在原稿台上的原稿而生成的图像数据被传送到打印机单元401、并且打印机单元401基于图像数据在诸如打印薄片等的打印介质上执行打印时，实现复印服务。

安装到存储卡安装单元403的存储卡404存储各种文件数据。可以经由网络从外部设备读出文件数据并进行编辑。此外，可以将来自外部设备的文件数据存储在存储卡404中。

另外，MFP 104包括CPU 405、程序存储器406、工作存储器407、显示单元408、操作单元409、网络通信单元410、网络连接单元411和闪速存储器412。CPU 405是用于全面控制MFP 104中的各个单元的中央处理单元。程序存储器406由ROM等形成，并存储各种程序代码和用于与外部服务器通信的应用415。应用415可以访问打印机单元401以获取与墨和薄片等有关的消耗品信息。工作存储器407由RAM等形成，并且在执行各服务时临时存储或缓冲图像数据等。显示单元408由例如LCD形成，并显示诸如用户界面画面等的各种信息。此外，操作单元409包括键盘、鼠标和开关，并且可以接受来自用户的指示和操作。网络通信单元410经由网络连接单元411将MFP 104连接到网络以进行各种通信。

如果网络通信单元410支持有线LAN，则网络连接单元411是用于连接有线LAN线缆的连接器。如果网络通信单元410支持无线LAN，则网络连接单元411用作天线。注意，网络连接单元411可以支持有线LAN和无线LAN这两者。在本实施例中，网络通信单元410和网络连接单元411支持无线LAN，并且根据符合IEEE 802.11标准系列的无线LAN的无线通信方法连接到AP 106。注意，网络连接单元411可以临时作为接入点而工作。也就是说，网络连接单元411可以具有接入点功能。类似于声音控制装置101，MFP 104可以包括短距离无线通信单元(未示出)。

闪速存储器412是用于存储由网络通信单元410等接收到的图像数据的非易失性存储器。上述单元通过总线413相互连接。可能存在在总线414和413之间进行数据转换的块。在本实施例中，当例如CPU 405将处理所需的程序从程序存储器406读出到工作存储器407中并执行该程序时，实现MFP 104的工作。

图11是示意性示出终端设备105的硬件结构的框图。作为示例，终端设备105包括输入接口5010、CPU 5020、ROM 5030、显示单元5040、RAM 5050、外部存储装置5060、通信单元5070和短距离无线通信单元5080。注意，这些块使用例如内部总线相互连接。

CPU 5020是系统控制单元，并且控制整个设备。类似于例如RAM 205，RAM 5050由需要备用电源的DRAM(动态RAM)等形成。RAM 5050还用作CPU 5020的主存储器和工作存储器。ROM 5030存储诸如要由CPU 5020执行的控制程序、数据表和OS程序等的固定数据。注意，在本实施例中，用于声音控制装置101的应用程序(以下称为声音控制应用)安装在终端设备105中，并存储在ROM 5030中。

显示单元5040由LED(发光二极管)或LCD(液晶显示器)等形成，并显示基于各种数据的画面。注意，显示单元5040可以由触摸显示器等形成，以具有接受来自用户的各种输入操作的功能。也就是说，显示单元5040用作用于接受来自用户的数据输入或操作指示的接口，并且可以是由物理键盘和按钮、或者触摸面板等形成的操作面板。通信单元5070具有与上述通信单元207的功能相同的功能，并且可以经由AP 106无线地连接到其它设备。短距离无线通信单元5080是可以使用与短距离无线通信单元208所使用的无线通信方法的相同的无线通信方法来与短距离无线通信单元208进行短距离无线通信的装置。

注意，图2、3、4和11所示的结构仅仅是示例，并且各设备可以包括除了图2、3、4或11所示的硬件组件之外的硬件组件。在图2、3、4和11的各图中，可以将多个块集成到一个块中，并且可以将一个块划分为两个或更多个块。即，图2、3、4和11所示的各设备都可以具有其它结构，只要可以执行根据本实施例的处理(稍后描述)即可。

接着将描述为了用户使用打印系统的服务(本实施例的操作)而将声音控制装置101和MFP 104彼此关联的登记处理。图5是示出将声音控制装置101和MFP 104彼此关联的登记处理的序列图。注意，当各设备的CPU执行存储在各设备的ROM等中的程序时，实现按此顺序由各设备执行的处理。注意，由终端设备105执行的程序是声音控制应用。

在执行登记处理之前，用户使用终端设备105的声音控制应用来登录用于由声音控制装置管理服务器102管理的声音控制装置101的用户账户(将在下文中称为第一账户)。因此，声音控制装置管理服务器102将终端设备105和第一账户彼此链接地进行管理。此外，声音控制装置管理服务器102识别与同第一账户链接的终端设备105的声音控制应用有关的信息。终端设备105识别与第一账户有关的信息(账户名、ID和密码等)。

之后，在S501中，声音控制装置101接受来自用户的预定操作，并且转变成执行登记处理的模式。更具体地，声音控制装置101启用其接入点。

在S502中，终端设备105通过向由声音控制应用显示的画面的输入来接受来自用户的登记处理的执行指示。

在S503中，终端设备105通过Wi-Fi连接到声音控制装置101的接入点。

在S504中，终端设备105指定用于进行与声音控制装置101的连接的外部接入点。更具体地，终端设备105搜索周围外部接入点，并显示找到的外部接入点的列表。终端设备105指定用户从列表中选择的外部接入点。注意，指定外部接入点的方法不限于此。例如，终端设备105可以经由Wi-Fi连接从声音控制装置101接收由声音控制装置101执行的搜索所找到的外部接入点的列表，并指定用户从列表中选择的外部接入点。可选地，例如，终端设备105可以在从用户接受登记处理的执行指示时指定连接到终端设备105的外部接入点。

在S505中，终端设备105经由Wi-Fi连接向声音控制装置101发送与S504中指定的外部接入点有关的信息和与第一账户有关的上述信息。注意，在S505中发送信息之后，终端设备105可以断开与声音控制装置101的Wi-Fi连接，并建立与S504中指定的外部接入点的Wi-Fi连接。

注意，在上述说明中，声音控制装置101通过Wi-Fi接收第一登记处理所需的信息。然而，本发明不限于此。例如，声音控制装置101可以在执行第一登记处理的模式下启用蓝牙功能，并且通过与终端设备105的蓝牙连接来接收第一登记处理所需的信息。

在S506中，声音控制装置101禁用其接入点，并断开与终端设备105的Wi-Fi连接。然后，基于从终端设备105接收到的与外部接入点有关的信息，声音控制装置101通过Wi-Fi连接到外部接入点。注意，如果与外部接入点的Wi-Fi连接成功，则声音控制装置101可以通过声音对其进行通知。

在S507中，声音控制装置101经由外部接入点访问声音控制装置管理服务器102，并且将从终端设备105接收到的与第一账户有关的信息以及自身的识别信息发送到声音控制装置管理服务器102。

在S508中，声音控制装置管理服务器102基于所接收到的信息来将声音控制装置101和第一账户彼此链接地进行管理。注意，声音控制装置管理服务器102已经将终端设备105和第一账户彼此链接地进行管理。因此，在S508中，将声音控制装置101、终端设备105和第一账户彼此链接。

在S509中，终端设备105登记声音控制装置101所要使用的服务(技能)。在本实施例中，由于使用利用声音控制装置101的打印服务，因此登记与MFP 104相对应的打印服务。因此，终端设备105向声音控制装置管理服务器102发送表示用户已经选择了与MFP 104相对应的打印服务的信息。

在S510中，声音控制装置管理服务器102基于所接收到的信息来将与MFP 104相对应的打印服务和第一账户彼此链接地进行管理。也就是说，登记与MFP 104相对应的打印服务。

在S511中，终端设备105显示用于登录由与打印服务链接的中继服务器103管理的用户账户(以下称为第二账户)的登录画面。终端设备105通过例如访问与打印服务链接的中继服务器103来获取用于显示登录画面的信息。注意，用于控制MFP 104的PC等已登录到第二账户，并且中继服务器103预先将第二账户和MFP 104彼此链接地进行管理。

在S512中，终端设备105向中继服务器103发送输入到登录画面的登录信息(ID和密码等)、与第一账户有关的信息以及与声音控制装置管理服务器102有关的信息。

在S513中，中继服务器103判断所接收到的登录信息是否正确。如果作为判断处理的结果，所接收到的登录信息正确并且对第二账户的登录操作成功，则中继服务器103基于所接收到的与声音控制装置管理服务器102有关的信息来访问声音控制装置管理服务器102。中继服务器103向声音控制装置管理服务器102发送用于允许第一账户访问的访问令牌和与第二账户有关的信息。

在S514中，声音控制装置管理服务器102基于所接收到的信息来将第一账户和第二账户彼此链接地进行管理。

这使得声音控制装置管理服务器102能够将各设备和各账户彼此链接地进行管理，并且在根据本实施例的通知处理中识别要发送到特定设备的特定信息。注意，在以上描述中，终端设备105执行的处理可以经由例如终端设备105中提供的Web浏览器等而不是声音控制应用来执行。

在以上描述中，已经将用户的认证操作例示为将声音控制装置101和MFP 104彼此关联的方法。然而，可以使用能够将声音控制装置101和MFP 104彼此关联的其它方法。

以下将参考图6和7来描述从用户通过声音指示打印起、直到与声音控制装置101相关联的MFP 104执行打印为止的过程。用户向声音控制装置101的麦克风204说出“启动打印机”以调用用于使用MFP 104执行打印的功能(S601)。说话内容作为调用用于使用MFP104执行打印的功能的关键字(也称为启动短语或唤醒词)预先登记在声音控制装置管理服务器102中。如果输入了说话内容，则声音控制装置管理服务器102将请求发送到中继服务器103。注意，启动短语可以分为两个短语。也就是说，在接受用于转变成接受来自用户的声音指示的模式的第一启动短语之后，声音控制装置101可以接受“启动打印机”的打印服务执行指示作为第二启动短语。

声音控制装置101向声音控制装置管理服务器102发送在S601中接收到的说话内容的数据(S602)。在该发送处理中，可以完整地发送与所接收到的说话内容相对应的声音数据，或者可以在声音控制装置101中将声音数据转换为文本数据，然后将其作为“启动打印机”的文本信息而发送。然后，声音控制装置管理服务器102请求作为与所接收到的关键字“启动打印机”相关联的请求目的地的中继服务器103来调用用于执行打印的功能(S603)。更具体地，声音控制装置管理服务器102分析所接收到的声音数据。更具体地，声音控制装置管理服务器102分析与第二启动短语相对应的声音数据，从而指定所登记的打印服务、与打印服务链接的中继服务器103以及与打印服务链接的第二账户。向与打印服务链接的中继服务器103通知打印服务执行指示的接受。注意，此时发送的信息包括表示与所登记的打印服务链接的第二账户的信息。

在接收到请求时，中继服务器103获取表示可打印的打印材料的类型的列表(S604)。更具体地，中继服务器103指定需要执行打印服务。然后，中继服务器103指定与所登记的打印服务链接的第二账户，并指定要用于执行打印服务的MFP 104。此外，获取打印服务可以支持的打印对象列表。中继服务器103将列表保持为固定值。

图8示出中继服务器103中所保持的表的示例。图8所示的表保持在例如盘装置302中。作为表的项801，列举了打印材料的类型作为打印对象。也就是说，保持与打印内容的类型有关的信息。参考图8，作为打印材料类型的列表，列举了“拼图、填色图、书写纸、五线谱和检查列表”。此外，作为项802，附加设置项与各种类型的打印材料相关联。例如，参考图8，“难度级别”与“拼图”的打印内容的类型相关联，并且“对象组”与“填色图”的打印内容的类型相关联。另外，作为项803，作为针对各附加设置项的设置内容，对可设置值的候选进行关联。例如，参考图8，将“容易、正常、困难和随机”与“难度级别”相关联。在图8中，“-”表示不存在设置内容的项。注意，中继服务器103针对作为“拼图”的一种类型的打印内容，存储与设置项“难度级别”相对应的多个拼图的内容数据文件。因此，图8中的项802是用于缩窄内容数据以进行决定的内容设置项。

中继服务器103在例如盘装置302中保持图8中的项801的各种类型的打印材料的图像数据。在这种情况下，中继服务器103的CPU 301周期性地从因特网获取拼图，并更新保持在盘装置302中的拼图。这可以始终向用户提供新内容的打印材料。当从因特网获取拼图时，CPU 301还可以获取与针对拼图的平均解答时间有关的相关信息，并保持该相关信息。注意，打印材料的数据可以作为静态数据保存在盘装置302中，但是可以在每次执行打印时动态地生成。

在S604中，例如，CPU 301参考图8所示的表来获取“拼图、填色图、书写纸、五线谱和检查列表”的内容类型信息作为打印材料的类型列表。可以将图8所示的表的信息配置为通过中继服务器103的用户来改变。例如，中继服务器103的管理者能够在显示单元305上显示的UI画面上改变(编辑)图8所示的表的各项801、802和803的内容。

在S604中，CPU 301能够改变从图8所示的表获取到的信息。例如，可以使用用户的性别和兴趣等的属性信息以及与由关联的MFP 104支持的纸张尺寸有关的信息来动态地改变上述列表信息。例如，如果用户的年龄低于预定年龄，则可以过滤图8所示的表的信息以排除“拼图和填色图”的内容，然后获取该表的信息。

随后，中继服务器103生成要从声音控制装置101的扬声器201通过声音输出的消息1的消息数据(S605)。更具体地，中继服务器103生成用于通知在打印服务中使用MFP 104可执行的功能的消息数据。消息1的内容对应于用以指导用户接着可以进行的工作的说明，并且表示如“你可以通过打印机打印拼图、填色图、书写纸、五线谱和检查列表。你想要打印哪一个？”那样的、询问用户选择在S604中所获取到的可打印材料的类型之一的消息。注意，在图6的序列中，仅声音控制装置101进行通知。然而，终端设备105可以进行通知。可选地，声音控制装置101和终端设备105这两者都可以进行通知。在这种情况下，中继服务器103生成用于声音控制装置101的消息数据和用于终端设备105的消息数据。注意，基于用于声音控制装置101的消息数据来决定要由声音控制装置101通过声音通知的消息的内容。也就是说，中继服务器103控制要由声音控制装置101通过声音通知的消息的内容。类似地，基于用于终端设备105的消息数据来决定终端设备105要在画面上通知的消息的内容。也就是说，中继服务器103控制终端设备105要在画面上通知的消息和图示的内容。

中继服务器103将所生成的消息数据发送到声音控制装置管理服务器102(S606)。声音控制装置管理服务器102将所接收到的消息数据转换为用于通过声音进行消息1的通知的声音消息数据，并将声音消息数据发送到声音控制装置101(S607)。基于所接收到的声音消息数据，声音控制装置101通过从扬声器201通过声音输出消息1来向用户再现消息1(S608)。也就是说，通过声音输出“你可以通过打印机打印拼图、填色图、书写纸、五线谱和检查列表。你想要打印哪一个？”的消息。注意，如果终端设备105执行通知，则声音控制装置管理服务器102将所接收到的消息数据转换为可显示数据格式的数据，并将转换后的数据发送到终端设备105。然后，终端设备105基于所接收到的数据来执行消息的显示。

随后，用户选择由在S608中再现的消息1呈现的可打印的打印材料的类型之一。下面将参考图7提供描述。在图7的S701中，用户说出“打印○○”作为选择操作。“○○”表示消息1中呈现的可打印的打印材料类型之一，并且用户说出例如“打印拼图”。声音控制装置101将在S701中接收到的说话内容发送到声音控制装置管理服务器102(S702)。类似于S602，发送方法可以是声音数据或文本数据。然后，声音控制装置管理服务器102请求中继服务器103调用用于执行“○○”的打印的功能(S703)。

在接收到请求时，中继服务器103判断是否存在针对指定类型的打印材料(打印内容的类型)的附加设置(S704)。也就是说，判断是否需要进一步的指定来决定内容数据。该判断处理是通过例如将图8所示的表保持在中继服务器103的盘装置302中并确认针对指定类型的打印内容是否存在附加内容设置项来进行的。如果判断为存在附加设置，则生成表示要由声音控制装置101通过声音输出给用户的内容的消息2的消息数据(S705)。注意，如果在S704中判断为可以决定内容数据(没有内容设置项)，则处理进入S712。

消息2的内容对应于可以由用户接着进行的作业的指导的说明，并且是用于呈现要由用户设置的附加设置项的内容。例如，如果“拼图”被指定为打印对象，则存在“难度级别”作为图8中的附加设置项，并且存在四个可设置值“容易、正常、困难和随机”。在这种情况下，作为消息2的内容，生成“从容易、正常、困难和随机中选择拼图的难度级别”的消息数据。

中继服务器103将所生成的消息2发送到声音控制装置管理服务器102(S706)。声音控制装置管理服务器102将所接收到的消息数据转换为要通过声音通知的声音消息数据，并将声音消息数据发送到声音控制装置101(S707)。声音控制装置101通过基于所接收到的声音消息数据从扬声器201通过声音输出消息2来向用户再现消息2(S708)。

随后，用户针对由在S708再现的消息2呈现的附加设置项选择可设置值之一，并在S709中说出附加设置。如果声音控制装置101通过声音输出与拼图的难度级别有关的上述消息2，则用户在S709中说出例如“困难”。声音控制装置101将在S709中接收到的说话内容发送到声音控制装置管理服务器102(S710)。类似于S602，发送方法可以是声音数据或文本数据。然后，声音控制装置管理服务器102请求中继服务器103调用用于以附加设置执行打印的功能(S711)。

在接收到请求时，中继服务器103确认是否已经设置了与用于决定内容数据的内容设置项有关的所有信息。更具体地，为了判断是否需要进一步的指定来决定内容数据，类似于S704，已经接收到请求的中继服务器103确认是否存在附加内容设置项。如果判断为存在另外的设置项，则类似于S705至S711，重复确认用于决定内容数据的内容设置项信息的步骤。

如果已经设置了与内容设置项有关的所有必要信息，则生成用于与用户确认作为打印设置项的份数的消息数据，并将其发送到声音控制装置管理服务器102(S712)。例如，消息内容表示“你要打印多少份？”的消息。声音控制装置管理服务器102将所接收到的消息数据转换为声音消息数据，并将其发送到声音控制装置101(S713)。声音控制装置101通过基于所接收到的声音消息数据从扬声器201通过声音输出确认份数的消息，来提示用户确认份数(S714)。

用户说出如“二”那样的、要打印的份数(S715)。声音控制装置101将在S715中接收到的说话内容发送到声音控制装置管理服务器102(S716)。类似于S602，发送方法可以是声音数据或文本数据。然后，声音控制装置管理服务器102请求中继服务器103调用用于以指定份数执行打印的功能(S717)。在接收到请求时，中继服务器103基于“打印内容类型”(例如，“拼图”)、“用于决定内容数据的附加设置值”(例如，“困难”)和“份数”(例如，“二”)的信息来生成打印数据，所有这些信息都是通过上述一系列交互而获取到的(S718)。也就是说，基于所决定的内容数据，中继服务器103生成指定份数的打印数据。然后，中继服务器103指示MFP 104使用所生成的打印数据来执行打印(S719)。注意，在图7的序列中，除了份数之外，针对打印设置项(例如，纸张尺寸和纸张类型等)设置预定设置值。当生成打印数据时，应用预定设置值。

注意，如果用户说出“二”，则处理前进直到S719中执行打印为止。然而，在S717之后，中继服务器103可以生成“你确定要打印两份难度级别为困难的拼图吗？”的确认消息数据，并且经由声音控制装置管理服务器102将其发送到声音控制装置101。在这种情况下，从声音控制装置101的扬声器201通过声音输出上述确认消息。如果用户说出“是”，则声音控制装置101从扬声器201通过声音输出“打印开始，我们期待再次为你服务”的消息。然后，类似于S716，声音控制装置101将说话内容“是”发送到声音控制装置管理服务器102。此外，类似于S717，将说话内容“是”发送到中继服务器103，然后进行S718和S719中的处理。在上述示例中，如果用户说出“否”，则可以重复从S714起的处理。

如果以由用户指定的份数来打印多份打印数据，可以根据打印数据的类型来切换是打印多份相同的打印数据还是打印不同的打印数据。例如，如果用户指定打印两份拼图，则生成用于打印不同拼图中的各拼图一份的打印数据。然而，如果用户指定打印两份填色图，则生成用于打印相同填色图两份的打印数据。可以针对图8所示的表的项801的各类型设置在指定多份时是打印多份相同的打印数据、还是打印多份不同的打印数据的信息。用户可以任意改变这种设置。

图8所示的附加设置表是仅存在用于指定内容数据的一个附加设置项的示例。然而，可能存在多个附加设置项。图9是示出存在多个附加设置项的表的示例的表。图9的项901对应于图8的项801。图9与图8的不同之处在于，附加设置项具有如项902和904那样的分层关系。也就是说，如果用户通过声音向麦克风204输入“拼图”，则中继服务器103生成例如“从数字位置(number place)和纵横字谜(crossword)中选择拼图类型”的消息数据。如果用户通过声音向麦克风204输入例如“纵横字谜”，则中继服务器103生成例如“从经济、文化和娱乐中选择种类”的消息数据。如果用户通过声音向麦克风204输入例如“文化”，则类似于S712，中继服务器103生成确认份数的消息。

也就是说，如果在S711中接收到附加设置内容之后中继服务器103参考图9判断为存在另外的附加设置项，则再次进行S705至S711中的处理。在本实施例中，通过连续地与用户交互直到完成所有附加设置项的设置为止，来获取用于决定内容数据的设置信息。注意，类似于图8，图9的表也可以被配置为由用户改变(编辑)。例如，用户能够增加/减少附加设置项。

如上所述，根据本实施例，如果基于在S701中指定的内容的类型而存在决定内容数据所需的附加设置项，则使声音控制装置101通过声音输出附加设置项。当用户听到输出时，他/她通过声音连续地说出期望项以利用声音控制装置101输入该期望项。此外，如果基于在S701中指定的内容的类型唯一地决定内容数据，则使声音控制装置101通过声音输出份数而无需执行S705至S711。利用这种结构，即使设置具有分层结构，用户也不需要操作设置画面，从而提高了可用性。

(变形例)

下面将描述本实施例的变形例。在图7中，在从用户的打印指示到执行打印的过程中，为了生成打印数据，每次设置各附加设置项或份数时，都进行与用户的交互。例如，如果打印一份以“容易”的难度级别作为附加设置项的拼图，则响应用户说出的“启动打印机”而输出“你可以通过打印机打印拼图、填色图、书写纸、五线谱和检查列表。你想要打印哪一个？”的消息。此外，响应于用户说出的“打印拼图”而输出“从容易、正常、困难和随机中选择拼图的难度级别”的消息。此外，响应于用户说出的“容易”而输出“你要打印多少份？”的消息。最后，基于用户说出的“一份”作为打印设置项(例如，份数)(除了图8和9中定义的附加设置项之外的设置项)来生成打印数据。

通过将一系列交互合并成一个或多个交互(单次说话模式)，可以减少用于指定打印数据的交互次数。例如，CPU 202或301通过声音识别从声音信号中提取单词，并判断用户的声音指示是否包括能够生成打印数据的信息。在上面的示例中，由于针对用户说出的“启动打印机，并打印一份难度级别为容易的拼图”提取出单词“难度级别为容易”、“拼图”、“一份”和“打印”，因此判断为可以生成打印数据。在这种情况下，中继服务器103可以生成打印数据，并且MFP 104可以执行打印。针对用户说出的“启动打印机，并打印难度级别为容易的拼图”，提取出单词“难度级别为容易”、“拼图”和“打印”。在这种情况下，CPU 202或301可以决定内容数据但是识别出缺少“份数”的设置项，从而判断为无法生成打印数据。然后，为了仅确认份数，通过中继服务器103生成“你要打印多少份？”的消息数据，并且从声音控制装置101的扬声器201通过声音输出该消息数据。如果基于声音输出，用户说出“一”，则中继服务器103可以基于说话来生成打印数据，并且MFP 104执行打印。

可以在如下情况下执行单次说话模式：用户响应于在图6所示的消息1的声音输出的说话除了包括诸如“难度级别为容易”、“拼图”、“一”和“打印”等的针对消息1所预期的说话单词以外，还包括附加单词。另一方面，如果仅包括如“打印拼图”那样的、针对消息1所预期的说话单词，则顺次执行图7所示的处理。

针对与份数和其它设置有关的信息，例如，中继服务器103将过去的设置信息存储为历史。如果没有指定份数，则可以使用先前打印时的份数来减少交互次数。此时，针对例如各种类型的打印材料存储先前的设置信息，并且可以根据指定的打印材料类型来切换默认份数。例如，在单次说话模式中，如果用户说出“启动打印机，并且打印难度级别为容易的拼图”，则通过声音识别提取单词“难度级别为容易”、“拼图”和“打印”。即使没有提取出份数的单词，也可以使用先前打印时的份数或默认份数来生成“你确定要打印三份难度级别为容易的拼图吗？”的确认消息数据。如果用户针对该消息说出“是”，则声音控制装置101从扬声器201通过声音输出“打印开始，我们期待再次为你服务”。另一方面，例如，如果用户说出“否”，则可以通过声音再次输出图6所示的消息1。

在上述示例中，在指定内容数据之后，在S712至S717中确认份数为打印设置项。然而，本实施例不限于此。也就是说，可以确认除了份数之外的打印设置项。例如，可以将纸张尺寸、纸张类型、颜色设置(彩色或单色)和打印布局(页面分配)之一确认为打印设置项。要确认的打印设置项和要确认的打印设置项的数量可以根据指定的内容数据而不同。例如，针对填色图可以确认纸张尺寸和份数，并且针对拼图可以仅确认份数。

如果用户接受与打印材料的类型相对应的预定声音命令，则可以执行特定操作。例如，如果在用户打印拼图之后经由麦克风204接受到如“拼图可以完成了”那样的、表示已经解决了打印拼图的声音信号，则声音控制装置101可以向声音控制装置管理服务器102发送用于打印另一新的拼图的说话内容。声音控制装置管理服务器102将说话内容发送到中继服务器103，并且中继服务器103控制MFP 104以打印另一新的拼图。此时，中继服务器103存储用户打印拼图的时间。如果经过的时间比与拼图的难度级别相对应的平均解答时间短，即，如果判断为用户已经容易地解决了拼图，则可以通过根据情况改变设置内容来自动执行诸如打印具有更高难度级别的拼图等的打印。

在通过声音交互期间，用户可能需要对要说的话或者系统的功能的指导。在这种情况下，当用户说出诸如“帮助”等的关键字以请求指导时，可以根据当前交互状态通过声音来输出指导用户的消息。

例如，如果用户针对声音输出“你可以通过打印机打印拼图、填色图、书写纸、五线谱和检查列表。你想要打印哪一个？”说出“帮助”，则中继服务器103可以生成如“存在各种难度级别的拼图和针对成人和儿童的填色图。选择拼图、填色图、书写纸、五线谱和检查列表之一以进行打印”那样的用以给出更详细的说明的消息数据，并且声音控制装置101可以通过声音输出消息数据。如果用户响应于声音输出“从容易、正常、困难和随机中选择拼图的难度级别”而说出“帮助”，则输出“你可以选择拼图的难度级别来挑战”的消息数据。此外，如果用户说出“告诉我拼图的挑战成绩”，则除了如“你可以确认到目前为止拼图的挑战次数。选择容易、正常和困难之一”那样的更详细的说明之外，中继服务器103还可以生成介绍其它功能的指导消息，并且声音控制装置101可以通过声音输出指导消息。

中继服务器103将消息的格式数据保持在例如盘装置302中。例如，CPU 301通过根据使用声音识别功能提取的单词而编辑格式数据(例如，对所提取的单词和格式数据进行合成)来生成上述各种消息。

响应于用户的说话，除了声音输出之外，还可以根据需要将消息作为文本数据发送到用户终端。更具体地，声音控制装置管理服务器102优选将显示数据发送到已经执行图5中的登记处理的终端设备105。例如，当将用以介绍其它功能的上述消息显示为文本数据时，与通过声音向用户通知该消息的情况相比，用户更容易理解。例如，在执行打印之后，如图10A所示的消息1000所示，该消息可以作为文本显示在终端设备105上。注意，声音控制装置101通过声音输出的消息可以与终端设备105上显示的消息不同。消息越长，用户错失消息的概率越高。然而，如图10A所示，如果消息作为文本数据显示在用户终端上，则可以可靠地向用户通知消息的内容。因此，声音控制装置101通过声音输出的消息包括简单内容，并且在终端设备105上显示的消息显示详细内容。关于图10A所示的消息1000的用于介绍其它功能的部分，可以针对各打印操作随机切换显示内容。例如，在图10A中，介绍了能够更容易地执行打印的功能(例如，单次说话模式)。在根据图7所示的序列执行打印之后显示单次说话功能的介绍。可以显示如“如果解决了拼图，则说‘已解决’以“打印更难的拼图”那样的、介绍其它功能的消息。

例如，如果用户在图6的S601中说出“启动打印机”，则在S608中通过声音输出消息1，同时如图10B所示，可以将与消息1相关联并且与消息1部分不同的信息作为文本数据显示给用户。例如，通过声音输出主消息，并且将如“你可以听到墨剩余量”那样的附加信息作为文本数据辅助显示给用户。这可以防止用户因声音很长而错失声音输出。

作为显示文本数据的方法，提供将文本消息发送到安装在用户终端中的本地应用的方法以及使用诸如邮件功能等的功能来向用户发送文本的方法。此外，如果当用户说出“帮助”时的上述指导内容以及与打印份数等有关的信息通过被声音输出而提供给用户，则它们也可以作为文本数据在用户终端上呈现给用户。尽管已经将文本数据解释为要在用户终端上显示的显示数据，但是表示图像的图像数据或者文本数据和图像数据的组合也是可能的。

<其它实施例>

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (18)

1.一种打印系统，包括打印设备和至少一个服务器，

所述至少一个服务器包括：

接收单元，其被配置为接收基于与声音控制装置所接受的打印有关的声音指示的打印内容的类型，

发送单元，其被配置为基于所述接收单元接收到的打印内容的类型来发送消息数据，以及

指定单元，其被配置为指定内容数据，

其中，在不能基于所述接收单元接收到的打印内容的类型来指定打印对象内容数据的情况下，所述发送单元发送用以询问内容设置项的消息数据，以及在能够基于所述接收单元接收到的打印内容的类型来指定打印对象内容数据的情况下，所述发送单元发送用以询问份数的消息数据，

所述声音控制装置基于所发送的消息数据通过声音来输出消息，所述指定单元基于所述声音控制装置在通过声音输出消息之后所接受的声音指示来指定内容数据，以及

所述打印设备根据基于所指定的内容数据所生成的打印数据来执行打印。

2.根据权利要求1所述的打印系统，其中，在所述接收单元接收到的打印内容的类型包括与第一打印内容的类型有关的信息的情况下，所述发送单元发送用以询问所述内容设置项的消息数据，以及在所述接收单元接收到的打印内容的类型包括与第二打印内容的类型有关的信息的情况下，所述发送单元发送用以询问所述份数的消息数据。

3.根据权利要求2所述的打印系统，其中，所述至少一个服务器存储多个内容数据文件作为所述第一打印内容的类型，并且仅存储一个内容数据文件作为所述第二打印内容的类型。

4.根据权利要求1所述的打印系统，其中，在所述声音控制装置基于从发送单元发送的用以询问所述内容设置项的消息数据、通过声音输出消息之后，获取与所述内容设置项有关的信息，以及

在获取到与所述内容设置项有关的信息之后，所述发送单元发送用以询问所述份数的消息数据。

5.根据权利要求1所述的打印系统，其中，在指定了内容数据并且获取到与所述份数有关的信息的情况下，生成所述打印数据。

6.根据权利要求1所述的打印系统，其中，将预定设置值应用于包括所述份数的打印设置项中的没有进行询问的项。

7.根据权利要求1所述的打印系统，其中，将先前打印中所使用的设置值应用于包括所述份数的打印设置项中的没有进行询问的项。

8.根据权利要求1所述的打印系统，还包括存储单元，所述存储单元被配置为存储所述内容设置项。

9.根据权利要求8所述的打印系统，其中，所述存储单元将打印内容的类型和内容设置项彼此相关联地存储。

10.根据权利要求9所述的打印系统，其中，在针对一种打印类型的内容提供了多个内容设置项的情况下，所述多个内容设置项具有分层关系。

11.根据权利要求1所述的打印系统，其中，在用户基于用以询问份数的消息数据的发送来指示多份的情况下，根据打印内容的类型来进行是打印多份相同的内容数据、还是打印不同的内容数据的改变。

12.根据权利要求1所述的打印系统，其中，所述打印数据是基于内容数据和与所述份数有关的信息所生成的。

13.根据权利要求1所述的打印系统，其中，在所述声音指示是请求指导的命令的情况下，发送与所请求的指导有关的消息数据。

14.根据权利要求1所述的打印系统，其中，所述声音控制装置是与账户相关联地登记的。

15.根据权利要求14所述的打印系统，其中，所述至少一个服务器还包括显示数据发送单元，所述显示数据发送单元被配置为发送要在经由所述账户与所述声音控制装置相关联的终端设备上显示的显示数据。

16.根据权利要求15所述的打印系统，其中，所述显示数据包括与所述发送单元所发送的消息数据至少部分不同的信息。

17.一种打印系统中的控制方法，所述打印系统包括打印设备和至少一个服务器，包括：

通过所述至少一个服务器：

接收基于与声音控制装置所接受的打印有关的声音指示的打印内容的类型，

基于接收到的打印内容的类型来发送消息数据，以及

指定内容数据，

其中，在不能基于接收到的打印内容的类型来指定打印对象内容数据的情况下，发送用以询问内容设置项的消息数据，以及在能够基于接收到的打印内容的类型来指定打印对象内容数据的情况下，发送用以询问份数的消息数据，

所述声音控制装置基于所发送的消息数据通过声音来输出消息，内容数据是基于所述声音控制装置在通过声音输出所述消息之后所接受的声音指示来指定的，以及

所述打印设备根据基于所指定的内容数据所生成的打印数据来执行打印。

18.一种服务器，包括：

接收单元，其被配置为接收基于与声音控制装置所接受的打印有关的声音指示的打印内容的类型，

发送单元，其被配置为基于所述接收单元所接收到的打印内容的类型来发送消息数据，以及

指定单元，其被配置为指定内容数据，

其中，在不能基于所述接收单元接收到的打印内容的类型来指定打印对象内容数据的情况下，所述发送单元发送用以询问内容设置项的消息数据，以及在能够基于所述接收单元接收到的打印内容的类型来指定打印对象内容数据的情况下，所述发送单元发送用以询问份数的消息数据，

所述声音控制装置基于所发送的消息数据通过声音来输出消息，以及

所述指定单元基于所述声音控制装置在通过声音输出所述消息之后所接受的声音指示来指定打印对象内容数据。

Images