CN109104541A - 通信终端的控制方法和存储介质 - Google Patents

通信终端的控制方法和存储介质 Download PDF

Info

Publication number
CN109104541A
CN109104541A CN201810638769.4A CN201810638769A CN109104541A CN 109104541 A CN109104541 A CN 109104541A CN 201810638769 A CN201810638769 A CN 201810638769A CN 109104541 A CN109104541 A CN 109104541A
Authority
CN
China
Prior art keywords
file
picture
communication terminal
selection
selection function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810638769.4A
Other languages
English (en)
Other versions
CN109104541B (zh
Inventor
三平善郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN109104541A publication Critical patent/CN109104541A/zh
Application granted granted Critical
Publication of CN109104541B publication Critical patent/CN109104541B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00474Output means outputting a plurality of functional options, e.g. scan, copy or print
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201Dedicated interfaces to print systems
    • G06F3/1202Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203Improving or facilitating administration, e.g. print management
    • G06F3/1204Improving or facilitating administration, e.g. print management resulting in reduced user or operator actions, e.g. presetting, automatic actions, using hardware token storing data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201Dedicated interfaces to print systems
    • G06F3/1202Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203Improving or facilitating administration, e.g. print management
    • G06F3/1208Improving or facilitating administration, e.g. print management resulting in improved quality of the output result, e.g. print layout, colours, workflows, print preview
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201Dedicated interfaces to print systems
    • G06F3/1202Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1218Reducing or saving of used resources, e.g. avoiding waste of consumables or improving usage of hardware resources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201Dedicated interfaces to print systems
    • G06F3/1223Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237Print job management
    • G06F3/1253Configuration of print job parameters, e.g. using UI at the client
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201Dedicated interfaces to print systems
    • G06F3/1223Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237Print job management
    • G06F3/1253Configuration of print job parameters, e.g. using UI at the client
    • G06F3/1256User feedback, e.g. print preview, test print, proofing, pre-flight checks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201Dedicated interfaces to print systems
    • G06F3/1278Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1285Remote printer device, e.g. being remote from client or server
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201Dedicated interfaces to print systems
    • G06F3/1278Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1292Mobile client, e.g. wireless printing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00095Systems or arrangements for the transmission of the picture signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/00413Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Facsimiles In General (AREA)

Abstract

本发明涉及一种通信终端的控制方法和存储介质。显示用于提示用户选择文件选择方法、并且至少包括用于选择文件选择方法的第一显示项和第二显示项的选择画面。在选择第一显示项的情况下,显示由应用提供的文件选择功能的画面,并且将经由该画面所选择的文件确定为要处理的文件。在选择第二显示项的情况下,调用由OS提供的文件选择功能,并且将经由OS提供的文件选择画面所选择的文件确定为要处理的文件。将基于该文件的数据发送至图像处理设备。

Description

通信终端的控制方法和存储介质
技术领域
本发明涉及与图像处理设备协作的通信终端所用的控制方法、以及存储介质。
背景技术
诸如智能电话和平板PC(个人计算机)等的通信终端可以存储各种文件。例如,通信终端中的存储器可以保持通信终端的照相机所拍摄到的图像、以及诸如通过因特网下载的文件和附加到电子邮件(或e-mail)的文件等的各种文件。
近年来,能够进行诸如打印设备等的图像处理设备与通信终端之间的协作的应用已开始广泛普及。例如,应用可以提供用于将基于保持在通信终端中的文件的数据发送至图像处理设备、并使图像处理设备处理该数据的功能。
日本特开2014-174831公开了用于在将文件存储在通信终端中的情况下提高便利性的方法。根据日本特开2014-174831,将用于访问通信终端内的预定文件夹或者连接到通信终端的外部存储器中的文件夹的图标显示为数据存储目的地的列表的项。
然而,为了使在通信终端上运行的应用提示用户选择存储在通信终端中的图像或文档文件,可以主要考虑以下将说明的两个类型的方法。
根据第一个方法,在应用内生成显示文件列表的用户界面(UI)画面,并且应用提示用户选择所列出的文件其中之一。根据第二个方法,使用由操作系统(OS)提供的文件浏览功能。
为了应用第一个方法,应用在内部需要文件浏览功能。为了在这种情况下在应用内实现文件浏览功能,可以提供专门为应用设计的文件浏览功能。例如,可以在默认选择画面上显示预先指定的文件夹(诸如应用要用作默认存储器或选择目的地的文件夹等)内的列表。
根据该文件选择方法,应用使得能够快速访问存储频繁使用的文件的文件夹。然而,在应用包括内部文件浏览功能的情况下,要实现用于访问云存储或外部存储卡的机制,这可能需要时间和成本来进行设计。由于每当更新用于访问云存储或外部存储卡的API时、都可能会校正应用,因此这可能会进一步增加用于维护应用的成本。
另一方面,根据第二个方法,OS可以负责与用于选择文件的文件浏览功能有关的机制。在这种情况下,应用可以调用OS的文件浏览功能,并且可以通过OS的文件浏览功能来获得所选择的文件。因此,可以使用在OS中所提供的机制来选择文件,而在应用中不需要用于访问外部存储卡或云存储的机制。然而,由OS提供的文件浏览功能被设计成支持来自各种应用的调用,并且不能专门为特定应用进行详细定义。
发明内容
根据本发明的一个方面,提供一种通信终端的控制方法,所述控制方法由应用来执行,所述应用在包括OS即操作系统的所述通信终端上执行,并且以能够通信的方式使所述通信终端连接到图像处理设备,所述控制方法包括:在所述通信终端的操作单元上显示用于响应于用于选择文件的用户操作而提示用户选择向所述图像处理设备的数据发送所要使用的文件选择方法的选择画面,其中所述选择画面至少包括用于选择文件选择方法的第一显示项和第二显示项;响应于经由所述选择画面所接收到的用以选择所述第一显示项的指示,显示所述应用所提供的文件选择功能的画面,并且将通过该文件选择功能所提供的画面所选择的文件确定为要处理的文件;响应于经由所述选择画面的用以选择所述第二显示项的指示,调用所述OS所提供的文件选择功能,并且将经由所述OS根据调用而提供的文件选择画面所选择的文件确定为要处理的文件;以及将基于所确定的文件的数据发送至所述图像处理设备。
根据本发明的另一方面,提供一种非暂时性计算机可读存储介质,其存储计算机能够执行的程序,所述程序用于使计算机执行通信终端的控制方法,所述通信终端包括所述通信终端上运行的操作系统即OS,所述控制方法包括:显示步骤,用于在所述通信终端的操作单元上显示用于响应于用于选择文件的用户操作而提示用户选择向图像处理设备的数据发送所要使用的文件选择方法的选择画面,其中所述选择画面至少包括用于选择文件选择方法的第一显示项和第二显示项;响应于经由所述选择画面所接收到的用以选择所述第一显示项的指示,显示与所述OS不同的应用所提供的文件选择功能的画面;响应于经由所述选择画面的用以选择所述第二显示项的指示来调用所述OS所提供的文件选择功能,并且将经由所述OS基于调用而提供的文件选择画面所选择的文件确定为要处理的文件;以及将基于所确定的文件的数据发送至所述图像处理设备。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1示出通信系统的概述。
图2示出通信终端的示例硬件结构。
图3是通信终端的示例软件结构。
图4示出MFP的示例硬件结构。
图5示出在通信终端的操作单元上要显示的示例画面。
图6是示出在通信终端中要进行的控制的示例流程图。
图7是示出通信终端中的控制的示例流程图。
图8示出在通信终端的操作单元上要显示的示例画面。
图9示出在通信终端的操作单元上要显示的示例画面。
图10A和10B示出用于调用由OS提供的文件浏览功能的方法。
图11示出在通信终端的操作单元上要显示的示例画面。
图12示出在通信终端的操作单元上要显示的示例画面。
图13是示出通信终端中的控制的示例流程图。
图14是示出通信终端中的控制的示例流程图。
具体实施方式
本实施例的一个方面提供能够进行与图像处理设备的协作的应用,其中可以选择多个选择方法其中之一来选择要发送至图像处理设备的数据,从而提高与选择文件有关的用户便利性。本实施例的另一方面可以降低应用的设计成本并提高选择要发送至图像处理设备的数据的用户便利性。
以下将参考附图来说明本发明的实施例。应当理解,以下实施例并不意图限制要求保护的发明,并且根据实施例的特征的所有组合在本发明中可能不是必需的。
第一实施例
首先,参考图1,将说明根据本发明的通信系统的结构。根据第一实施例的通信系统包括通信终端102、MFP(多功能外围设备)101和AP(接入点)103。
通信终端102可以执行基于IEEE 802.11标准(以下为802.11标准)的无线通信。用户可以向通信终端102输入用于连接到AP 103的SSID(服务集标识符)或安全密钥,使得通信终端102可以连接到由AP 103提供的网络。
MFP 101是具有扫描、打印、复印和其它功能的多功能外围设备。在将用于连接到AP 103的SSID或安全密钥设置为MFP 101的无线网络设置时,通信终端102和MFP 101可以通过AP 103执行无线通信。MFP 101可以通过无线通信从通信终端102接收打印数据,并且可以打印所接收到的打印数据。
根据本实施例的通信系统具有移动协作功能,其中通过该移动协作功能,通信终端102和MFP 101彼此协作以向用户提供功能。例如,可以将用于将打印数据发送至MFP 101的打印协作功能提供至通信终端102的用户。还可以将扫描协作功能提供至用户,其中该扫描协作功能可以将通过利用MFP 101读取文档所获得的扫描数据存储在通信终端102内。
通信终端102通过AP 103与MFP 101可通信地连接。例如,通信终端102可以通过AP103相对于MFP 101进行打印数据或扫描数据的发送/接收。
MFP 101可以在接入点模式下进行工作。在接入点模式中,MFP 101作为软件接入点进行工作。通信终端102可以连接到由MFP 101提供的软件AP,以与MFP 101直接执行无线通信,而不需要诸如AP 103等的中继装置。
尽管根据本实施例已经说明了智能电话和平板PC(个人计算机)作为示例通信终端,但是本发明的实施例不限于此。这样的智能电话和平板PC仅用于说明目的,并且本发明还可应用于可以执行近场无线通信的任何其它通信终端。
尽管根据本实施例已经说明了MFP作为与通信终端协作的图像处理设备的示例,但是本发明的实施例不限于此。例如,图像处理设备可以是单功能打印机或者形成三维物体的3D打印机。图像处理设备可以是能够接收和显示数据的设备,诸如投影仪、显示器和头戴式显示器等。本实施例可应用于可以利用多个选择方法选择文件并且可以基于所选择的文件向图像处理设备发送数据的通信终端。
通信终端
接着,参考图2,将说明通信终端102的硬件结构。控制单元110中的CPU(中央处理单元)111被配置为读出ROM(只读存储器)112或存储器114中所存储的控制程序以控制通信终端102。
控制单元110包括全部连接至总线的CPU 111、ROM 112、RAM(随机存取存储器)113、存储器114、操作单元I/F 115、照相机I/F 117和外部存储器I/F 119。控制单元110具有作为用于与外部设备通信的通信接口的无线LAN I/F(接口)122和蓝牙(Bluetooth,注册商标)I/F 123。根据本实施例,无线LAN I/F 122和蓝牙I/F 123被提供作为单独的硬件模块。然而,实施例不限于此。可以提供作为一个硬件模块的整合芯片,其中该整合芯片可以实现通过无线LAN的无线通信和蓝牙近场无线通信这两者。
CPU 111可以是被配置为整体控制控制单元110的操作的中央处理单元(处理器)。RAM 113是易失性存储器,并且可用作用于对存储在工作区域、ROM 112和存储器114中的控制程序进行解压缩的临时存储区域。例如,ROM 112是非易失性存储器,并且被配置为存储通信终端102的引导程序。存储器114是具有比RAM 113的容量大的容量的非易失性闪速存储器。存储器114可以存储用于控制通信终端102的程序。将以下将说明的OS(操作系统)300和协作应用310存储在存储器114中。
CPU 111被配置为执行ROM 112中所存储的启动程序以启动通信终端。引导程序可以读出存储器114中所存储的对应于OS 300的程序并将该程序解压缩到RAM 113中。在CPU111执行引导程序之后,CPU 111执行在RAM 113中解压缩的与OS 300相对应的程序以控制通信终端102。诸如CPU 111、ROM 112和RAM 113等的硬件模块实现了所谓的计算机。
在通信终端102中,一个CPU 111执行在以下将说明的流程图中示出的处理。然而,本实施例也可应用于其它结构。例如,多个CPU或微处理器(MPU)可以彼此协作以执行在以下将说明的流程图中示出的处理。一些处理可以通过使用诸如ASIC(专用集成电路)等的硬件电路来执行。诸如生成打印预览和生成打印数据等的处理可以通过经由网络可访问的云服务来执行。
操作单元I/F 115被配置为连接操作单元116和控制单元110。操作单元116包括可以检测用户所进行的触摸操作的触摸面板和被配置为显示画面的显示面板。操作单元116可以用作被配置为显示信息的显示单元和被配置为接收用户指示的接收单元。操作单元116可以显示由OS 300和协作应用310提供的画面。用户可以使用诸如他/她的手指等的对象对操作单元116进行触摸操作,使得可以将期望的操作指示输入到通信终端102。操作单元116还可以包括硬件键。用户可以按下硬件键以向通信终端102输入操作指示。
照相机I/F 117被配置为连接控制单元110和照相机118。照相机118被配置为基于来自用户的摄像指示来拍摄图像。将照相机118所拍摄到的图像存储在存储器114的预定区域中。
外部存储器I/F 119是被配置为与诸如微型SD(micro SD,注册商标)卡等的存储卡交换数据的接口。外部存储器I/F 119具有外部存储器可以插入至的外部插槽。在存储卡插入到外部插槽时,通信终端102准备经由外部存储器I/F 119相对于存储卡内的区域进行数据的读取和写入。例如,存储卡可以在内部存储照相机118所拍摄到的图像和动画。存储卡还可以在内部存储由通信终端通过网络下载的文件。
无线LAN I/F 122可以提供用于执行基于802.11标准的无线通信的无线客户端功能。无线LAN I/F 122可以通过连接到外部AP来执行基于802.11标准的无线通信。外部AP可以是以接入点模式进行工作的MFP 101,或者可以是AP 103。
蓝牙I/F 123是被配置为通过执行近场无线通信与外围设备交换数据的接口。根据本实施例,例如,可以使用基于蓝牙(IEEE 802.15.1)、特别是蓝牙低功耗(以下为BLE)的近场无线通信来进行向基于802.11的无线通信的切换。
通信终端102的软件结构
接着,参考图3,将说明通信终端102的软件结构。图3是由存储在ROM 112或存储器114中并由CPU 111读取的控制程序实现的软件模块的功能框图。
OS 300是被配置为整体控制通信终端102中要进行的操作的基本软件程序。例如,OS 300可以是由Google提供的Android(注册商标)。可以将以下要说明的协作应用310和其它各种应用程序安装在通信终端102中。根据本实施例,例如,用于访问云存储服务的应用和被配置成浏览通过使用照相机118拍摄到的图像的图像浏览应用。
OS 300可以与这些应用交换信息,并且可以响应于从这些应用给出的指示来改变要显示在操作单元116上的画面。
OS 300包括应用为了控制通信终端102的硬件模块可使用的框架和API,以将用于使用硬件模块的功能提供至OS 300上运行的应用。OS 300响应于来自应用其中之一的指示,可以控制经由无线LAN I/F 122的基于802.11的无线通信、或者经由蓝牙I/F 123的近场无线通信。
协作应用310可以调用由OS提供的功能作为API或应用框架,并将通信终端102连接到的AP改变为由MFP提供的直接连接AP。OS 300响应于从应用其中之一接收到的指示,可以对要显示在操作单元116上的画面进行显示控制。
OS 300还提供SAF(存储访问框架)作为可用于应用的框架。SAF针对OS 300上运行的应用是具有连贯性的选择用户界面,并提供用于访问通信设备的外部或内部的各种文件的功能。更具体地,请求通过使用OS 300的功能来选择文件的应用使用意图(intent)来开始由SAF提供的文件选择活动。这里,术语“意图”是指用于开始由其它应用提供的活动的程序代码。通过意图接收到了用以开始文件选择活动的指示的OS 300在操作单元116上显示由OS 300提供的文件浏览功能的选择用户界面。这里,术语“活动”是指向用户提供操作画面的应用组件。在下文中,将由OS 300要提供的文件浏览功能的选择用户界面称为选择器或选择用户界面。
OS 300的文件浏览功能提供用于经由选择用户界面来参考被实现为文档提供方的云存储服务或本地存储服务的文档的功能。例如,根据本实施例,OS 300包括基本文档提供方。例如,OS 300可以提供用于访问最近访问的文件的文档提供方和用于访问存储在外部存储器内的文档的文档提供方。OS 300可以提供用于访问存储在作为本地存储区域的存储器114内的文档的文档提供方。用于访问安装在通信终端102中的云存储服务的客户端应用(未示出)可以提供用于访问云上的文件的文档提供方。
这样,协作应用310可以使用由OS提供的SAF和共通选择用户界面来访问由通信终端102的OS提供的嵌入式文档提供方的内容。协作应用310也可以通过使用共通选择用户界面来访问由安装在通信终端102中的应用提供的文档提供方的内容。
接着,将说明协作应用310。协作应用310可以存储协作功能所要使用的设置和要协作的诸如MFP等的设备的列表作为内部信息。设备列表可以存储用于管理要协作的MFP的管理信息,其中该管理信息包括外部设备的设备名称和能力信息、以及用于连接到外部设备的连接信息。协作应用310可以响应于针对MFP的搜索处理或者用户所进行的手动输入,向设备列表登记诸如MFP等的外部设备。在协作应用310在未示出的选择画面上接收到用于选择登记到设备列表的MFP的用户操作时,协作MFP改变为所选择的MFP。
协作应用310可以将基于文件的打印数据发送至协作MFP(诸如MFP 101等)。可以通过使用应用由OS 300提供的选择用户界面的文件浏览功能或者通过使用作为协作应用310的内部功能所实现的文件选择功能来选择文件(以下将说明其详情)。
MFP
接着,将说明MFP 101。图4是示出MFP 101的硬件结构的框图。MFP 101具有用于读取图像的读取功能和用于在薄片上打印图像的打印功能。
包括CPU 131的控制单元130被配置为整体控制MFP 101所要进行的操作。CPU 131可以读出存储在ROM 132或存储器134中的控制程序并进行诸如打印控制和读取控制等的控制。ROM 132被配置为存储CPU 131可执行的控制程序。RAM 133可以是CPU 131所用的主存储器,并且可用作用于对来自控制程序的指示进行解压缩的工作区域或临时存储区域。存储部134是被配置为存储打印数据、图像数据、程序和设置信息的存储单元。尽管在根据本实施例的MFP 101中已经说明了一个CPU 131使用一个存储器(RAM 133)来实现控制,但多个处理器、RAM、ROM和存储器例如可以协作以执行以下将说明的控制。
操作单元I/F 135被配置为连接操作单元136和控制单元130。操作单元136包括具有触摸面板功能的液晶显示单元以及硬件键,并且可以用作被配置为显示信息的显示单元和被配置为接收用户指示的接收单元。读取单元I/F137被配置为连接读取单元138和控制单元130。读取单元138被配置为读取文档并生成所读取的图像。所生成的读取图像可以被发送至外部设备或者可以被打印。打印单元I/F 139被配置为连接打印单元140和控制单元130。打印单元140被配置为基于从外部接收到的打印数据来在薄片上打印图像。
控制单元130被配置为通过有线LAN I/F141连接到未示出的网络。有线LAN I/F141被配置为通过网络(未示出)将图像或信息发送至外部设备,并且从外部设备接收打印数据或信息。控制单元130还包括无线LAN I/F 142和蓝牙I/F 143。无线LAN I/F 142提供用于通过连接到外部AP来进行无线通信的外部客户端的功能和用于使得MFP 101能够充当AP的软件AP的功能。蓝牙I/F 143是可用于通过近场无线通信与外围设备交换数据的接口。根据本实施例的MFP 101可以使用基于BLE的近场无线通信来与通信终端102进行通信并且切换到基于802.11的无线通信。
外部协作功能
接着,将说明协作应用310所提供的协作功能。协作应用310具有多个协作功能,诸如用于将打印数据发送至MFP的打印功能和用于将由MFP扫描的文档存储在通信终端的存储器中的扫描协作功能等。
作为用于提从通信终端上运行的协作应用示用户选择存储在通信终端中的图片或文档文件的方法,主要可应用以下两个方法。
根据第一个方法,可以在应用内生成显示文件列表的用户界面(UI)画面,并且可以提示用户选择文件列表上的文件其中之一。根据第二个方法,可以使用由OS提供的文件浏览功能。
在采用第一个方法的情况下,在应用内要安装文件浏览功能。在应用内实现文件浏览功能的情况下,文件浏览功能是专门为应用设计的。例如,可以在默认选择画面上显示预先指定的文件夹(诸如由应用要用作默认存储目的地或选择目的地的文件夹等)内的内部数据的列表。
采用该文件选择方法使得能够快速访问存储应用频繁使用的文件的文件夹。然而,在应用内安装文件浏览功能的情况下,也可以实现用于访问云存储或外部存储卡的机制,这可能需要时间和成本来设计。此外,每当更新用于访问云存储或外部存储卡的API时,都可能会修改应用,这可能需要应用维护成本。
另一方面,在采用第二个方法的情况下,OS可能负责用于选择文件的文件浏览功能的机制。在这种情况下,应用可以调用OS的文件浏览功能来获取由OS的文件浏览功能所选择的文件。因此,应用可以在无需实现用于访问外部存储卡或云存储的机制的情况下,通过使用由OS提供的机制来选择文件。然而,由OS提供的文件浏览功能被配置为由各种应用调用。因此,详细设置可能不是专门为各应用定义的。
本实施例允许与图像处理设备通信的应用选择多个选择方法来选择要发送至协作的图像处理设备的数据,使得可以提供用于提高与文件选择有关的用户便利性的机制。本实施例还提供如下的机制:可以降低应用的设计成本,同时可以提高用户在选择要发送至协作的图像处理设备的数据时的用户便利性。接着,将说明具体的选择方法。
图5示出在通信终端102的操作单元116上要显示的示例画面。图5所示的画面示例将由协作应用310显示。
在通过经由通信终端102上的应用列表画面(也称为抽屉(drawer))或主画面的用户操作来选择协作应用的图标时,CPU 111启动协作应用310。在启动处理完成之后,协作应用310将顶部菜单画面501显示在通信终端102的操作单元116上。
首先,将参考顶部菜单画面501来说明协作应用310的功能。用户可以通过顶部菜单画面501执行协作应用310中所包括的功能。根据本实施例,例如,指定MFP 101作为要协作的设备。协作应用310将与已登记的MFP有关的信息作为可以发生通过用户操作的协作所针对的设备的列表存储在存储器114中。然后,可以选择登记到设备列表的MFP其中之一作为要协作的MFP。
协作应用310可以通过与被指定为协作的MFP(诸如MFP 101等)协作来执行协作功能。文档(DOCUMENT)键504可用于将存储在通信终端内的图像数据或文档数据发送至协作MFP并打印该图像数据或文档数据。扫描(SCAN)键502可用于执行扫描协作功能,其中该扫描协作功能用于在协作MFP中扫描文档并将通过扫描所获得的数据存储在通信终端的存储器114内。可以将从进行协作的MFP获得的数据存储在通信终端102的预定文件夹(诸如由协作应用生成的预定存储文件夹等)中。拍摄(CAPTURE)键503可用于通过使用照相机118对文件或白板摄像。将通过拍摄功能所获得的诸如图像等的数据存储在通信终端102的预定文件夹中。
要用作扫描协作功能或拍摄功能的存储目的地的文件夹被配置成易于由打印功能访问。因此,为了使用打印功能,用户可以容易地访问通过扫描协作功能或拍摄功能所获得的数据(文件)并选择要打印的文件。
接着,将说明在选择文档键504之后提示用户选择要打印的文件的处理。
如果选择了文档键504,则通信终端102将要显示在操作单元116上的画面改变为文档画面511或521。画面511显示本地(LOCAL)键512和打印外部数据(PRINT EXTERNALDATA)键513。本地键512可用于通过使用由协作应用310实现的文件浏览功能打开预定文件夹(诸如预定义的存储文件夹等)作为当前文件夹。用户可以使用键512来容易地访问通过扫描协作功能或拍摄功能所获得的数据(文件),并选择该数据(文件)作为要打印的文件。
另一方面,打印外部数据键513可用于调用由OS 300提供的文件浏览功能。用户可以使用键513来选择外部存储卡内的文件、或者根据OS提供的机制从最近使用的文件列表中选择文件。
文档画面521是在OS 300是不支持文件浏览功能的版本时要显示的示例画面。协作应用310被配置为在OS 300的版本不支持SAF的情况下,显示不包括用于选择由OS 300提供的文件浏览功能的键的文档画面。
如果通过由协作应用310实现的文件浏览功能或由OS 300提供的文件浏览功能来选择要打印的文件,则协作应用310将要在操作单元116上显示的画面改变为预览(PREVIEW)画面541。
协作应用310可以在预览画面541上的区域542上显示用于确认要打印的数据的预览图像。要在区域542上显示的预览图像可以基于所选择的文件生成。预览图像生成可以由CPU 111执行,或者可以向未示出的云服务请求预览图像生成,使得可以使云服务生成预览图像。
区域543被配置为显示由MFP与通信终端协作所提供的信息。根据本实施例,例如,选择MFP 101作为协作设备。区域543用作用于改变协作MFP的显示项。用户可以选择区域543以转变为未示出的用于选择协作MFP的画面,从设备列表上的MFP中选择期望的MFP作为协作用设备,并且改变协作MFP。
区域544可以显示为要发送至MFP的打印数据定义的打印设置。区域544还可以用作用于转变为打印设置画面的显示项。用户可以选择区域544来定义详细打印设置。
打印(PRINT)键545可用于基于所选择的文档来进行打印。用户可以选择要打印的文件并通过遵循图5所示的画面序列进行基于该文件的打印。该打印键可用于给出用于发送基于所选择的文件的数据的发送指示。
根据本实施例,用于接收用户操作的键也可以被称为用于接收用户操作的显示项。可以接收用户操作所利用的显示区域、选项和项也被称为可以接收用户操作的显示项。
接着,将参考图6和7所示的流程图来说明用于使得能够成为可用于选择要发送至协作MFP的数据的多个选择方法的具体控制。图6和7是示出在通信终端102中要进行的控制的流程图。
在图6和7的流程图中示出的操作(步骤)可以通过以下操作来实现:由CPU 111将ROM 112或存储器114中所存储的用于实现控制模块的程序从ROM 112或存储器读出到RAM113并执行。这些流程图中示出的处理通过作为主体的协作应用310与作为控制程序的OS300协作来实现。为了明确说明作为引起操作的主体的控制程序,将这些操作描述为由OS300或协作应用310作为主体来进行。
图6是示出在通过通信终端102的抽屉或主画面选择了与协作应用相对应的图标的情况下、在通信终端102中要进行的操作的流程图。
在步骤S601中,CPU 111在操作单元116上显示顶部菜单画面501。在步骤S602中,CPU 111判断是否接收到用以使用打印功能的用户指示。如果接收到了用以使用打印功能的用户指示,则处理进入步骤S603。否则,处理进入步骤S604。例如,用于指示使用打印功能的用户操作可以是用于选择顶部菜单画面501上所显示的键504的操作。
在步骤S603中,CPU 111执行针对MFP的打印功能的处理。以下将参考图7的流程图来详细说明打印功能的处理。在打印功能的处理完成时,CPU 111将在操作单元116上显示的画面改变为顶部菜单画面。然后,处理返回至步骤S601。
在步骤S604中,CPU 111判断是否接收到用以使用扫描协作功能的用户指示。如果接收到用以使用扫描协作功能的用户指示,则处理进入步骤S605。否则,处理进入步骤S606。例如,用以指示使用扫描协作功能的用户操作可以是用于选择顶部菜单画面501上所显示的键502的操作。
在步骤S605中,CPU 111与协作MFP(诸如MFP 101等)协作地执行扫描处理。将说明MFP 101是协作MFP的示例。CPU 111与MFP 101协作地通过无线通信接收基于通过MFP 101中的读取单元138读取文档所获得的图像的数据。CPU 111将所接收到的数据存储在存储器114内的预定文件夹中。在存储完成时,CPU 111将操作单元116上所显示的画面改变为顶部菜单画面。然后,处理返回至步骤S601。
在步骤S606中,CPU 111判断是否接收到用以使用拍摄功能的用户指示。如果接收到用以使用拍摄功能的用户指示,则处理进入步骤S607。否则,处理进入步骤S608。例如,用于使用拍摄功能的用户操作可以是用于选择顶部菜单画面501上所显示的键503的操作。
在步骤S607中,CPU 111执行拍摄处理。CPU 111与照相机118协作拍摄图像。根据本实施例,拍摄处理可以以专门用于拍摄纸质文档的图像的模式或者专门用于拍摄白板的图像的模式来拍摄图像。例如,在专门用于拍摄纸质文档的图像的模式中,可以指定纸质文档的所拍摄图像的区域,并且可以对该区域进行梯形失真校正。然后,可以对该区域进行图像处理,以将纸质文档的所拍摄图像的区域变换为矩形。在这种情况下,即使在纸质文档被摄像成梯形时,也可以提取纸质文档的区域,并且可以获得该区域被校正为矩形的图像。例如,在专门用于对白板摄像的模式中,可以进行用于调整所拍摄图像内的光泽的图像处理。在这种情况下,如此得到的图像可以减少白板上的光反射的影响。CPU 111可以将可能已经过了图像处理的所拍摄图像存储在存储器114内的预定文件夹中。在存储完成之后,CPU111将操作单元116上所显示的画面改变为顶部菜单画面。然后,处理返回至步骤S601。
接着,在步骤S608中,CPU 111判断是否接收到用以退出应用的指示。如果接收到用以退出应用的指示,则CPU 111终止协作应用310的执行,并且使操作单元116上所显示的画面转变为由OS 300提供的主画面。然后,该控制的一系列操作结束。另一方面,如果没有接收到用以退出应用的指示,则处理返回至步骤S601。
以这种方式,用户可以通过使用协作应用310来执行包括扫描功能、拍摄功能和打印功能的各种功能。
接着,将参考图7中的流程图来说明打印功能的处理。在步骤S701中,CPU 111判断OS是否是支持文件浏览功能的版本。协作应用310向OS 300询问OS 300的版本。如果作为该询问的结果所获得的OS 300的版本是预定版本之前的版本,则协作应用310判断为OS是不支持文件浏览功能的版本。然后,处理进入步骤S703。另一方面,如果作为该询问的结果所获得的OS 300的版本是预定版本之后的版本,则协作应用310判断为OS是支持文件浏览功能的版本。然后,处理进入步骤S702。
在步骤S702中,协作应用310在操作单元116上显示包括“打印外部数据(PRINTEXTERNAL DATA)”的文档画面511。另一方面,在步骤S703中,协作应用310在操作单元116上显示不包括“打印外部数据”的文档画面521。
步骤S701~S703的处理是如下的例外处理:如果OS 300是不支持SAF的版本,则协作应用310隐藏用于通过使用意图调用OS所提供的文件浏览功能的键。
在步骤S704中,CPU 111判断是否接收到用以选择本地键512的指示。如果接收到用以选择本地键512的指示,则处理进入步骤S705。否则,处理进入步骤S710。
接着,将说明响应于用以选择本地键512的指示而使用协作应用310的文件选择操作。在步骤S705中,CPU 111使操作单元116上所显示的画面转变为由协作应用310提供的文件选择画面。图8示出在通信终端102的操作单元116上要显示的示例画面,其是由协作应用310提供的文件选择画面801。文件选择画面801显示表示当前打开的文件夹的名称的信息802。根据本实施例,在选择本地键时,协作应用310可以显示具有可用作扫描协作功能和拍摄功能所用的预定义存储目的地的预定文件夹的列表的画面。
选项803可用于打开上一级的文件夹。用户可以使用选项803来参考由其它应用作为预定义存储目的地使用的文件夹。
选项804可用于打开预定义文件夹中的子文件夹(CPBDownload文件夹)。响应于选择呈现当前文件夹中的子文件夹的选项的操作,显示具有下级文件夹内的文件列表的画面。响应于用于选择选项803的操作,可以访问上一级的文件夹。选项805对应于预定义文件夹内的示例文件。用户可以选择表示文件的选项805。在文件夹内存在多个文件的情况下,多个文件是可选择的。在选择完成时,CPU 111显示例如图5所示的预览画面541。
返回参考图7的例示,CPU 111在步骤S706中通过由协作应用310提供的文件选择画面801接收用于选择文件的用户指示。在步骤S707中,获得在步骤S706中选择的文件。在步骤S708中,CPU 111基于所选择的文件来生成打印预览图像并显示打印预览(PRINTPREVIEW)画面。在步骤S709中,CPU 111基于所选择的文件生成用于打印文件的打印数据,并将该打印数据发送至MFP 101。更具体地说,CPU 111响应于打印指示发送打印数据。应该注意,例如,可以通过按下图5中所示的打印键545来给出打印指示。可以根据任何其它方法来判断打印指示的接收。例如,可以基于在正显示图5的打印预览画面541的状态下检测到MFP 101和通信终端102之间的接近来判断打印指示的接收。可以通过使用蓝牙近场无线通信来判断接近。例如,响应于在正显示图5的打印预览画面541的状态下检测到由通信终端102进行的抖动姿势,可以判断为进行了打印指示。接着,CPU 111基于所选择的文件生成打印数据。在打印数据生成完成时,打印数据被发送至协作MFP(诸如MFP 101等)。然后处理结束。根据本实施例,可以使用基于802.11的无线通信来将打印数据发送至协作MFP。打印数据可以通过经由AP 103的无线通信或通过经由MFP 101提供的软件AP的无线通信来发送。可以建立使用Wi-Fi直连(Wi-FiDirect,注册商标)的直接无线通信以通过P2P无线通信发送打印数据。可选地,可以通过使用Wi-Fi感知(Wi-Fi Aware,注册商标)的P2P无线通信来发送打印数据。例如,可以使用利用蓝牙近场无线通信的切换来与MFP 101建立基于802.11的无线通信。
从通信终端102接收到打印数据的MFP基于所接收到的打印数据执行打印。例如,将参考MFP 101是MFP 101的情况来说明该处理。MFP 101的CPU 131从通信终端102接收打印数据。CPU 131与打印单元140协作地基于所接收到的打印数据执行打印。更具体地,CPU131基于所接收到的打印数据生成打印图像并将该打印图像传送到打印单元140。例如,接收到打印图像的打印单元140将打印图像打印在纸上。
接着,将说明使用由OS 300提供的文件浏览功能的文件选择操作。在步骤S710中,CPU 111判断是否接收到用以选择打印外部数据键的指示。如果接收到用以选择打印外部数据键的指示,则处理进入步骤S711。否则,处理返回到步骤S704,其中在该步骤S704中,处理等待用户所进行的选择指示。
在说明步骤S711之后的具体处理之前,将参考图9以及图10A和10B来说明由OS300提供的文件浏览功能的概述。图9示出作为OS 300为了使用OS 300提供的文件浏览功能而提供的用户界面的选择用户界面。图10A示出用于从诸如协作应用310等的应用调用OS300提供的文件浏览功能的方法。图10B示出用于由协作应用310从OS的文件浏览功能获得文件列表的方法。
画面901和911是由OS 300的选择器提供的示例用户界面画面。协作应用310通过使用显式意图请求开始由OS的文件浏览功能所提供的文件选择的活动。响应于用以开始用于文件选择的活动的请求,OS 300将与该活动相对应的画面显示在操作单元116上。
将参考图10A所示的样本代码来说明活动的开始。第4~16行描述意图的生成。第4行是定义利用意图要开始的活动是SAF的选择用户界面的活动的描述。第5~16行是用于指定要供给至使用意图的活动的自变量和操作条件的描述。例如,根据本实施例,指定自变量,其中该自变量表示根据网络访问状态而要返回在无需从远程服务下载的情况下可以在图像处理设备上直接访问的文件。附加地或可选地,可以指定表示可选择多个选项的自变量、或者表示可选择的数据类型的条件。
第19行是用于开始SAF的选择用户界面的活动的描述。这里,通过调用startActivityForResult()function函数来开始活动,以从SAF的活动接收文件选择的结果。
返回参考图9,响应于来自协作应用310的用以开始选择用户界面的活动的请求,OS 300显示诸如画面901或画面911等的选择用户界面画面。画面911是在指定如下的自变量时要显示的选择用户界面画面,其中该自变量表示指定在无需从远程服务下载的情况下可以在设备上直接访问的文件作为意图的自变量。画面901是在没有指定如下的自变量时要显示的选择用户界面画面,其中该自变量表示指定在无需从远程服务下载的情况下可以在设备上直接访问的文件作为意图的自变量。
对话框905与由OS 300提供的文件浏览功能相关联。将该对话框显示(或叠加)在操作画面上并持续预定时间段。在经过该预定时间段之后,CPU 111终止该对话框的显示。可以配置成:仅在选择了文档画面511上的打印外部数据键513的情况下才可以显示对话框。根据本实施例,考虑到选择器不具有存储卡的访问权的情况,可以向用户通知可以改变选择器的设置。图11示出选择器不具有存储卡的访问权的情况。在选择器不具有存储卡的访问权的情况下,如在画面1101上那样,没有显示用于访问存储卡的选项。将说明由用户改变选择器的设置以将访问存储卡的权限提供给拾取器的方法。设置键1103可用于查看拾取器的设置。如果选择了设置键1103,则OS 300显示选择器设置画面1110。选择器设置画面1110包括用于显示SD卡的项1112。用户可以选择项1112以将访问存储卡的权限提供给拾取器。响应于用以选择项1112的用户操作,OS 300将访问安装在外部存储器I/F中的存储卡的权限提供给拾取器。在将访问权提供给选取器时,将用于访问存储卡的显示项1114显示在画面1111上。
返回参考图9,将说明通过选择用户界面的文件的选择。键902可用于选择云存储服务中的文件。如果选择了键902,则OS 300访问云存储服务并且显示保存在云存储中的文件选择画面。根据本实施例,例如,云存储服务可以是Google Drive(注册商标)。然而,本发明的实施例不限于此。
键904可用于选择通信终端102的存储器114内的文件。如果选择了键904,则OS300显示用于选择存储器114的根文件夹中的文件的选择画面。
键903可用于选择安装在外部存储器I/F中的外部SD卡内的文件。如果选择了键903,则OS 300显示用于选择安装在外部存储器I/F中的存储卡的根文件夹内的文件的选择画面921。
用户可以通过选择画面921访问存储卡内的文件夹层级结构以选择文件。以下将说明用户选择选项922的情况。如果用户选择了选项922,则OS 300显示用于选择存储卡中的“DCIM”文件夹内的文件的画面931。通过画面931,用户可以选择表示要显示的文件的选项(例如选项932等)。在文件选择画面上,可以选择多个文件。响应于用以结束文件选择的用户指示,OS 300通过选择用户界面结束活动。OS 300将文件获得结果发送至开始了活动的协作应用310作为活动结束处理。
将参考图10B的样本代码来说明结果的接收。图10B示出用于从选择用户界面的活动接收结果的onactivityresult()方法。
在利用显式意图所调用的活动完成时,OS 300将其结果返回到协作应用310的onactivityresult()方法。在图10B所示的方法中,执行用于确认请求是否成功的处理或者用于获得所选择的文件列表的处理。另外,可以进行诸如错误检查等的处理。所获得的文件列表存储用于访问文件的URI(统一资源标识符)。如果通过选择用户界面选择了多个文件,则存储用于访问这些文件的URI。协作应用310可以使用URI来访问通过选择用户界面所选择的文件。
返回参考图7的流程图,将说明使用OS的文件浏览功能的文件选择。如果在步骤S710中接收到用以选择打印外部数据键513的指示,则在步骤S711中,协作应用310显示与文件浏览功能相关联的对话框905。该对话框可以显示在其它操作画面上并持续预定时间段。
在步骤S712中,协作应用310与OS 300协作地判断协作应用310是否能够访问因特网。如果判断为协作应用310不能被因特网访问,则处理进入步骤S713。如果协作应用310能够访问因特网,则处理进入步骤S714。步骤S712中的处理与图10A的样本代码中的第8行的处理相对应。
在步骤S713中,CPU 111利用隐藏云文档提供方的设置来调用由OS提供的文件浏览功能。更具体地,协作应用310将图10A的第9行所示的自变量设置在用于调用SAF选择用户界面的意图中。协作应用310通过使用显式意图来请求开始选择用户界面活动。接收到针对选择用户界面活动的开始请求的OS 300开始选择用户界面活动,并且使操作单元116上的画面转变为选择用户界面画面911(图9)。
另一方面,在步骤S714中,CPU 111利用用于显示云文档提供方的设置来调用由OS提供的文件浏览功能。这里,协作应用310在无需设置图10A的第9行所示的自变量的情况下,将显式意图发出到用于调用SAF选择用户界面的意图。因此,OS 300基于该意图的设置来使操作单元116上所显示的画面转变为选择用户界面画面901。
如果通过步骤S712~S714的处理预先判断为协作应用310不能被因特网访问,则可以显示不包括云文档提供方的选择用户界面。
在步骤S715中,协作应用310判断是否从步骤S713或S714中启动的选择用户界面的活动接收到结果。如果从选择用户界面的活动接收到结果,则处理进入步骤S716。否则,等待表示来自选择用户界面的活动的结果的应答。
在S716中,协作应用310接收表示活动的结果的数据,并且基于所接收到的数据来进行错误检查。进行错误检查,以检查是否超过了协作应用在一次操作中可以处理的文件的上限数量。如果错误检查的结果为OK,则处理进入步骤S718。如果错误检查的结果为NG,则处理进入步骤S717。在步骤S717中,协作应用310将未示出的错误对话框显示在操作单元116上。响应于用于关闭错误对话框的用户操作,协作应用310将操作单元116上所显示的画面改变为顶部菜单画面501,并且处理结束。
另一方面,在步骤S718中,协作应用310通过使用OS的文件浏览功能来获得所选择的文件。更具体地,使用作为结果从选择用户界面活动接收到的文件列表中所存储的URI来获得文件。如果文件获得完成,则进行步骤S708和后续步骤中的预览处理和打印处理。
为了选择向图像处理设备的发送所要使用的文件,如上所述,第一实施例提供了包括用于通过使用OS的文件浏览功能来进行选择的方法和用于通过在协作应用内实现的文件选择画面来进行选择的方法这两个选择方法。因此,由协作应用提供的文件选择方法可以提供用于快速地访问存储应用频繁使用的文件的文件夹的机制。该文件夹可以用作协作应用310的诸如扫描协作功能和拍摄功能等的功能的预定义存储器。因此,用户可以容易地访问存储利用扫描协作功能获得的数据或利用拍摄功能获得的数据的可能性高的文件夹。这可以促进协作应用所存储的文件的重复使用。
另一方面,根据使用OS的文件浏览功能的选择方法,可以通过使用由OS提供的选择用户界面来从存储卡内的文件和最近使用的文件中选择发送所要使用的文件。在应用使用OS的文件浏览功能的选择方法的情况下,也允许访问云存储服务。在应用使用OS的文件浏览功能的选择方法的情况下,可以基于是否能够访问因特网来判断是否要显示用于访问云存储服务中的文件的显示项。通过该处理,在不能被因特网访问的状态下,通信终端102可以隐藏云存储服务的会导致通信错误的显示项。例如,在通信终端102为了与MFP 101协作而连接到不能访问因特网的AP的情况下,可以隐藏云存储服务的显示项。提前隐藏不可用的显示项可以提高用户的便利性。
根据本实施例,配置成可以通过使用OS 300的文件浏览功能来执行向存储卡的访问。这可以消除实现用于访问云存储或外部存储卡的模块的必要性,从而可以抑制设计所需的人工和成本。可以进一步提供用于通过OS 300的文件浏览功能来选择文件的具体机制。因此,即使在更新用于访问云存储或外部存储卡的过程的情况下,OS 300也可以吸收如此产生的差异。这有利地可以抑制协作应用的维护成本的增加。
第二实施例
接着,将说明本发明的第二实施例。第二实施例是第一实施例的变形例。根据第二实施例的协作应用310还包括用于打印所接收到的电子邮件(或e-mail)的功能和用于打印网页的功能。
第二实施例假定与第一实施例相同的设备的硬件结构。将省略针对与第一实施例相同的结构的任何重复性详细说明。
图12示出与操作单元116上要显示的根据第二实施例的打印功能有关的示例画面。
代替根据第一实施例的顶部菜单画面501,要显示顶部菜单画面1201。顶部菜单画面1201与画面501的不同之处在于:代替文档键504,显示打印键1202。根据第二实施例,协作应用310可以打印所接收到的电子邮件或网页。有鉴于此,根据第二实施例,代替标记为“文档”的键,显示标记为“打印”的键。
如果选择了打印键1202,则通信终端102将操作单元116上显示的画面改变为打印画面1211。打印画面1211显示键1212至1215。用户可以选择这些键其中之一以执行期望的打印功能。相簿(ALBUM)键1212可用于从相簿中选择和打印照片。文件夹(FOLDER)键1213可用于从文件夹中选择和打印文件。网页(WEB PAGE)键1214可用于打印网页。电子邮件(E-MAIL)键1215可用于打印电子邮件的正文或附件。
如果选择了文件夹键1213,则通信终端102将操作单元116上所显示的画面改变为文件夹选择画面1221或1231。代替根据第一实施例的文档画面511,要显示文件夹选择画面1221。代替根据第一实施例的文档画面521,要显示文件夹选择画面1231。画面1231是在OS300是不支持文件浏览功能的版本时要显示的示例画面。如果OS 300在不支持SAF的版本的OS上运行,则协作应用310显示不包括用于选择OS所提供的文件浏览功能的键的文档画面。应用内文件夹(FOLDER WITHIN APP)键1222可用于将应用内的文件夹作为当前文件夹打开并选择文件。键1222提供与对应于根据第一实施例的本地键512的功能相同的功能。终端内文件夹(FOLDER WITHIN TERMINAL)键1223可用于将通信终端102内的存储器114中的根文件夹作为当前文件夹打开并选择文件。打印外部数据键1224可用于通过使用由OS提供的文件浏览功能来选择文件。键1224提供与对应于根据第一实施例的打印外部数据键513的功能相同的功能。
根据第二实施例,除根据第一实施例的用于选择和打印文件的功能以外,还可以进行网页的打印以及电子邮件的主体和附件的打印。根据第二实施例,可以在画面1211上确定请求打印的数据(诸如图像、网页、电子邮件和存储在文件夹中的文件等)。在确认出用户的用以打印存储在文件夹中的文件的请求时,显示画面1221或画面1231,从而呈现用于选择文件选择方法的方法。
接着,将参考图13和14的流程图来说明在选择打印键1202的情况下的打印处理的具体控制。图13和14是示出在通信终端102中要执行的控制的流程图。图13是示出代替根据第一实施例的图7所示的打印处理而要执行的处理的流程图。
在图13和14的流程图中示出的操作(步骤)可以通过以下操作来实现:由CPU 111将ROM 112或存储器114中所存储的用于实现控制模块的程序从ROM 112或存储器114读出到RAM 113并执行。在这些流程图中示出的处理通过作为主体的协作应用310与作为控制程序的OS 300协作来实现。为了明确说明作为引起操作的主体的控制程序,将这些操作描述为由OS 300或协作应用310作为主体来进行。
参考图13,在步骤S1301中,CPU 111显示用于指定打印数据的画面。例如,指定打印数据的画面可以是图12所示的打印(PRINT)画面1211。
在步骤S1302中,CPU 111基于键选择指示的接收状态来确定用于转变为下一操作的处理。如果没有接收到键选择,则进行用于等待用户所进行的一个键的选择的处理。如果接收到电子邮件键1215的选择,则处理进入步骤S1303。如果接收到相簿键1212的选择,则处理进入步骤S1304。如果接收到网页键1214的选择,则处理进入步骤S1305。如果接收到文件夹键1213的选择,则处理进入步骤S1307。
在步骤S1303中,CPU 111显示未示出的电子邮件信箱,并接收用以选择电子邮件的指示。用于接收电子邮件的电子邮件服务器和电子邮件地址等的设置是在协作应用310中预定义的。CPU 111响应于电子邮件的选择来生成打印所要使用的表示电子邮件正文的数据或表示附件的数据,并且处理进入步骤S1308。
在步骤S1304中,协作应用310通过使用显式意图来开始用于浏览图像的浏览应用活动。OS 300显示用于浏览图像的浏览应用画面并且从用户接收图像的选择。如果协作应用310接收到图像选择的结果,则处理进入步骤S1308。利用该功能,明确请求打印图像的用户可以通过使用用户通常习惯使用的管理应用来选择图像文件。
在步骤S1305中,协作应用310通过使用意图来启动Web浏览器应用。在这种情况下,协作应用310指定将描述使用协作应用310的打印方法的文档显示为Web浏览器应用的初始页面。利用该功能,可以将用于从Web浏览器进行打印的方法通知给用户。在步骤S1306中,CPU 111从Web浏览器应用接收利用隐式意图的选择结果。然后,处理进入步骤S1308。
在步骤S1308中,CPU 111获得通过步骤S1303、S1304或S1306的处理所选择的文件。然后,处理进入步骤S1309。如果在步骤S1303中CPU 111接收到电子邮件的选择,则获得通过步骤S1303的处理所生成的数据。
另一方面,在步骤S1307中,CPU 111执行用于从文件夹中选择文件的处理。将参考图14的流程图来说明在步骤S1307中要进行的处理。
参考图14,在步骤S1401中,与步骤S701的处理相同,CPU 111判断OS是否是支持文件浏览功能的版本。如果CPU 111判断为OS是支持文件浏览功能的版本,则处理进入步骤S1402。否则,处理进入步骤S1403。
在步骤S1402中,CPU 111显示包括“打印外部数据”的文件夹选择画面。另一方面,在步骤S1403中,CPU 111显示不包括“打印外部数据”的文件夹选择画面。
在步骤S1418中,CPU 111判断是否接收到用以选择应用内文件夹键的指示。如果接收到用以选择应用内文件夹键的指示,则处理进入步骤S1419。否则,处理进入步骤S1420。
在步骤S1419中,协作应用310将应用内的文件夹指定为当前文件夹,并且调用由协作应用310提供的文件选择画面。例如,应用内的文件夹可以是要用作扫描协作功能或拍摄功能的预定义存储目的地的预定文件夹。如果用于选择预定文件夹内的文件的选择画面的显示完成,则处理进入步骤S1406。
另一方面,在步骤S1420中,CPU 111判断是否接收到用以选择终端内文件夹键的指示。如果接收到用以选择终端内文件夹键的指示,则处理进入步骤S1421。否则,处理进入步骤S1422。在步骤S1421中,协作应用310将终端内的根文件夹指定为当前文件夹并且调用由协作应用310提供的文件选择画面。如果用于选择根文件夹内的文件的选择画面的显示完成,则处理进入步骤S1406。
在步骤S1422中,CPU 111判断是否接收到打印外部数据键的选择。如果接收到打印外部数据键的选择,则处理进入步骤S1411。否则,处理返回到步骤S1418,其中在该步骤S1418中,处理等待用户操作。
由于步骤S1411~S1418中的利用OS 300所提供的文件浏览功能的文件选择的处理与根据第一实施例的步骤S711~S718的处理相同,因此将省略任何重复说明。如果CPU111通过步骤S1411~S1418的处理通过使用OS 300所提供的文件浏览功能来获得文件,则处理进入步骤S1309。
由于步骤S1406和S1407的处理与步骤S706和S707的处理相同,因此将省略任何重复的详细描述。在通过协作应用310所提供的文件选择画面接收到文件的选择并且文件获取完成时,处理进入步骤S1309。
返回参考图13,在步骤S1309中,CPU 111基于所选择的文件显示打印预览画面。在步骤S1310中,CPU 111基于所选择的文件生成用于打印文件的打印数据,并将该打印数据发送至MFP 101。步骤S1309的处理与根据第一实施例的步骤S708的处理相同,并且步骤S1310的处理与根据第一实施例的步骤S709的处理相同。
根据第二实施例,如上所述也可在包括针对所接收到的电子邮件的打印功能和用于打印网页的功能的协作应用中适当地选择打印所要使用的文件。
根据上述实施例,在与图像处理设备通信的通信终端中,可以选择多个选择方法来选择要发送至协作图像处理设备的数据,以提高与文件选择有关的用户便利性。另外,上述实施例可以降低与应用的设计和维护有关的成本,同时可以提高用于选择要发送至协作图像处理设备的数据的用户便利性。
其它实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所发明的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。

Claims (19)

1.一种通信终端的控制方法,所述控制方法由应用来执行,所述应用在包括OS即操作系统的所述通信终端上执行,并且以能够通信的方式使所述通信终端连接到图像处理设备,所述控制方法包括:
在所述通信终端的操作单元上显示用于响应于用于选择文件的用户操作而提示用户选择向所述图像处理设备的数据发送所要使用的文件选择方法的选择画面,其中所述选择画面至少包括用于选择文件选择方法的第一显示项和第二显示项;
响应于经由所述选择画面所接收到的用以选择所述第一显示项的指示,显示所述应用所提供的文件选择功能的画面,并且将通过该文件选择功能所提供的画面所选择的文件确定为要处理的文件;
响应于经由所述选择画面的用以选择所述第二显示项的指示,调用所述OS所提供的文件选择功能,并且将经由所述OS根据调用而提供的文件选择画面所选择的文件确定为要处理的文件;以及
将基于所确定的文件的数据发送至所述图像处理设备。
2.根据权利要求1所述的控制方法,其中,还包括以下步骤:
利用所述应用,基于所确定的文件来显示要发送至所述图像处理设备的数据的预览画面;以及
利用所述应用,响应于经由所述预览画面所接收到的发送指示来将基于所确定的文件的数据发送至所述图像处理设备。
3.根据权利要求1所述的控制方法,其特征在于,所述应用通过使用显式意图来调用所述OS所提供的文件选择功能。
4.根据权利要求3所述的控制方法,其中,还包括:
利用所述应用,判断所述通信终端是否能够访问因特网;以及
利用所述应用,根据所述通信终端不能访问因特网的判断结果,为了调用所述OS所提供的文件选择功能,代替从云服务下载而是在所述意图中指定表示要返回所述通信终端上能够直接访问的文件的自变量,并且调用所述OS所提供的文件选择功能。
5.根据权利要求4所述的控制方法,其中,在利用具有指定的自变量的意图来调用所述OS所提供的文件选择功能的情况下,所述OS进行控制以将不包括用于访问云服务的文档提供方所提供的内容的显示项的文件选择画面显示在该文件选择功能的画面上,以及
在利用不具有指定的自变量的意图来调用所述OS所提供的文件选择功能的情况下,所述OS进行控制以显示包括用于访问所述云服务的文档提供方所提供的内容的显示项的文件选择画面。
6.根据权利要求1所述的控制方法,其中,所述应用所提供的响应于用以选择所述第一显示项的指示而要显示的文件选择功能的画面是用于选择所述通信终端的存储器内的预定文件夹内的文件的画面。
7.根据权利要求6所述的控制方法,其中,还包括:
利用所述应用,通过使用所述通信终端中所包括的照相机来获得图像,并且使用所述预定文件夹作为所获得的图像的预定义存储目的地。
8.根据权利要求1至7中任一项所述的控制方法,其中,
所述图像处理设备是打印机,以及
将基于所述文件所生成的打印数据发送至所述打印机。
9.一种非暂时性计算机可读存储介质,其存储计算机能够执行的程序,所述程序用于使计算机执行通信终端的控制方法,所述通信终端包括所述通信终端上运行的操作系统即OS,所述控制方法包括:
显示步骤,用于在所述通信终端的操作单元上显示用于响应于用于选择文件的用户操作而提示用户选择向图像处理设备的数据发送所要使用的文件选择方法的选择画面,其中所述选择画面至少包括用于选择文件选择方法的第一显示项和第二显示项;
响应于经由所述选择画面所接收到的用以选择所述第一显示项的指示,显示与所述OS不同的应用所提供的文件选择功能的画面;
响应于经由所述选择画面的用以选择所述第二显示项的指示来调用所述OS所提供的文件选择功能,并且将经由所述OS基于调用而提供的文件选择画面所选择的文件确定为要处理的文件;以及
将基于所确定的文件的数据发送至所述图像处理设备。
10.根据权利要求9所述的非暂时性计算机可读存储介质,其中,所述程序是能够安装在所述通信终端中的应用程序,并且与所述OS不同的应用所提供的文件选择功能是由所述应用程序所提供的文件选择功能。
11.根据权利要求10所述的非暂时性计算机可读存储介质,其中,所述控制方法还包括:
利用所述应用程序,基于所确定的文件来显示要发送至所述图像处理设备的数据的预览画面;以及
利用所述应用程序,响应于经由所述预览画面所接收到的发送指示来将基于所确定的文件的数据发送至所述图像处理设备。
12.根据权利要求10所述的非暂时性计算机可读存储介质,其中,所述应用程序通过使用显式意图来调用所述OS所提供的文件选择功能。
13.根据权利要求12所述的非暂时性计算机可读存储介质,其中,所述控制方法还包括:
利用所述应用程序,判断所述通信终端是否能够访问因特网;以及
利用所述应用程序,根据所述通信终端不能访问因特网的判断结果,为了调用所述OS所提供的文件选择功能,代替从云服务下载而是在所述意图中指定表示要返回所述通信终端上能够直接访问的文件的自变量,并且调用所述OS所提供的文件选择功能。
14.根据权利要求13所述的非暂时性计算机可读存储介质,其中,在利用所述应用程序调用的由所述OS所提供的文件选择功能中,在基于具有指定的自变量的意图来调用所述OS所提供的文件选择功能的情况下,所述OS进行控制以将不包括用于访问云服务的文档提供方所提供的内容的显示项的文件选择画面显示在该文件选择功能的画面上,以及在基于不具有指定的自变量的意图来调用所述OS所提供的文件选择功能的情况下,所述OS进行控制以显示包括用于访问所述云服务的文档提供方所提供的内容的显示项的文件选择画面。
15.根据权利要求9所述的非暂时性计算机可读存储介质,其中,为了调用所述OS所提供的文件选择功能,所述显示步骤显示用于显示与存储卡的显示有关的信息的对话框。
16.根据权利要求10所述的非暂时性计算机可读存储介质,其中,所述应用程序所提供的响应于用以选择所述第一显示项的指示而要显示的文件选择功能的画面是用于选择所述通信终端的存储器内的预定文件夹内的文件的画面。
17.根据权利要求10所述的非暂时性计算机可读存储介质,其中,所述控制方法还包括:
利用所述应用程序,通过使用所述通信终端中所包括的照相机来获得图像,其中使用所述预定文件夹作为所获得的图像的预定义存储目的地。
18.根据权利要求9至17中任一项所述的非暂时性计算机可读存储介质,其中,
所述图像处理设备是打印机,以及
将基于所述文件所生成的打印数据发送至所述打印机。
19.根据权利要求10所述的非暂时性计算机可读存储介质,其中,所述控制方法还包括:
利用所述应用程序来获得所述OS的版本,并且在所获得的版本不满足预定条件的情况下,显示不包括所述第二显示项的文件选择功能的画面。
CN201810638769.4A 2017-06-20 2018-06-20 通信终端的控制方法和存储介质 Active CN109104541B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-120749 2017-06-20
JP2017120749A JP6490153B2 (ja) 2017-06-20 2017-06-20 通信端末の制御方法及びプログラム

Publications (2)

Publication Number Publication Date
CN109104541A true CN109104541A (zh) 2018-12-28
CN109104541B CN109104541B (zh) 2021-03-05

Family

ID=64656180

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810638769.4A Active CN109104541B (zh) 2017-06-20 2018-06-20 通信终端的控制方法和存储介质

Country Status (3)

Country Link
US (1) US10394507B2 (zh)
JP (1) JP6490153B2 (zh)
CN (1) CN109104541B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022011872A (ja) 2020-06-30 2022-01-17 ブラザー工業株式会社 制御プログラム、情報処理装置
JP2022045626A (ja) 2020-09-09 2022-03-22 キヤノン株式会社 情報処理装置、プログラム及び制御方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101253469A (zh) * 2005-08-31 2008-08-27 佳能株式会社 图像形成设备,移动设备及其控制方法
US20120069371A1 (en) * 2010-09-17 2012-03-22 Konica Minolta Business Technologies, Inc. Image information processing apparatus, image information processing system, and computer-readable storage medium for computer program
US8346903B2 (en) * 2005-11-29 2013-01-01 Xerox Corporation Print server, mobile computing device, system and method for printing using a mobile computing device
JP2014174831A (ja) * 2013-03-11 2014-09-22 Panasonic Corp 電子機器
US20140355059A1 (en) * 2013-05-31 2014-12-04 Brother Kogyo Kabushiki Kaisha Computer-Readable Storage Medium Storing Display Program and Display Device
CN104808955A (zh) * 2014-01-23 2015-07-29 柯尼卡美能达株式会社 信息终端、印刷系统以及印刷系统的控制方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2523804B2 (ja) * 1988-08-03 1996-08-14 松下電器産業株式会社 メニュ―表示装置
US7188316B2 (en) * 2003-03-24 2007-03-06 Microsoft Corporation System and method for viewing and editing multi-value properties
JP2013161451A (ja) * 2012-02-08 2013-08-19 Canon Inc 情報処理装置、情報処理方法、およびプログラム
KR102077823B1 (ko) * 2013-06-03 2020-02-14 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. 엔에프씨를 이용한 모바일 프린팅 시스템 및 방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101253469A (zh) * 2005-08-31 2008-08-27 佳能株式会社 图像形成设备,移动设备及其控制方法
US8346903B2 (en) * 2005-11-29 2013-01-01 Xerox Corporation Print server, mobile computing device, system and method for printing using a mobile computing device
US20120069371A1 (en) * 2010-09-17 2012-03-22 Konica Minolta Business Technologies, Inc. Image information processing apparatus, image information processing system, and computer-readable storage medium for computer program
JP2014174831A (ja) * 2013-03-11 2014-09-22 Panasonic Corp 電子機器
US20140355059A1 (en) * 2013-05-31 2014-12-04 Brother Kogyo Kabushiki Kaisha Computer-Readable Storage Medium Storing Display Program and Display Device
CN104808955A (zh) * 2014-01-23 2015-07-29 柯尼卡美能达株式会社 信息终端、印刷系统以及印刷系统的控制方法

Also Published As

Publication number Publication date
CN109104541B (zh) 2021-03-05
JP2019008370A (ja) 2019-01-17
US10394507B2 (en) 2019-08-27
JP6490153B2 (ja) 2019-03-27
US20180364963A1 (en) 2018-12-20

Similar Documents

Publication Publication Date Title
US10628099B2 (en) Multifunctional image processing apparatus with user registration features
JP6544976B2 (ja) 通信システム、画像処理装置とその制御方法、及びプログラム
US20200019355A1 (en) Communication terminal, method of controlling communication terminal, and storage medium
JP5805519B2 (ja) 画像処理システム、画像受信装置、画像処理装置、及び画像処理方法
US9471284B2 (en) Apparatus, method, and non-transitory computer-readable storage medium
JP6438218B2 (ja) 装置、方法、及びプログラム
CN108471482A (zh) 信息处理装置及其控制方法、系统的控制方法及存储介质
CN109104541A (zh) 通信终端的控制方法和存储介质
JP2020201903A (ja) プログラム、情報処理装置、および情報処理方法
JP6008897B2 (ja) 装置、方法、及びプログラム
JP6188466B2 (ja) 画像処理装置及びその認証方法、並びにプログラム
JP6891536B2 (ja) 操作支援システム、電子機器、操作支援方法およびプログラム
JP2015204526A (ja) 携帯端末、画像通信システム、ファクス装置、およびこれらの制御方法、並びにプログラム
JP6660507B2 (ja) 通信システム、画像処理装置とその制御方法、及びプログラム
JP6555949B2 (ja) 情報処理装置、表示制御方法、及びプログラム
JP6910488B2 (ja) 通信システム、画像処理装置とその制御方法、及びプログラム
JP6616867B2 (ja) 画像受信装置とその制御方法、アプリケーションプログラム、画像処理システムおよびその制御方法
JP6367409B2 (ja) 画像処理システム、画像処理方法及びコンピュータプログラム
JP6114353B2 (ja) 画像処理システム、画像処理方法及びコンピュータプログラム
JP2017027321A (ja) 情報処理端末、プログラム及び制御方法
JP2018069505A (ja) 画像形成装置、画像形成方法及び画像形成プログラム
JP2022018773A (ja) 画像形成システム、携帯通信端末、画像形成装置および画像形成方法
JP2020071822A (ja) 画像形成装置、画像形成装置の制御方法および制御プログラム、ならびに画像形成システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant