JP2015008001A - Terminal device, and program - Google Patents

Terminal device, and program Download PDF

Info

Publication number
JP2015008001A
JP2015008001A JP2014166015A JP2014166015A JP2015008001A JP 2015008001 A JP2015008001 A JP 2015008001A JP 2014166015 A JP2014166015 A JP 2014166015A JP 2014166015 A JP2014166015 A JP 2014166015A JP 2015008001 A JP2015008001 A JP 2015008001A
Authority
JP
Japan
Prior art keywords
information
terminal device
switching
terminal
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014166015A
Other languages
Japanese (ja)
Other versions
JP6044604B2 (en
Inventor
篤志 助則
Atsushi Sukenori
篤志 助則
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2014166015A priority Critical patent/JP6044604B2/en
Publication of JP2015008001A publication Critical patent/JP2015008001A/en
Application granted granted Critical
Publication of JP6044604B2 publication Critical patent/JP6044604B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To make it simple to switch without log on/off operation, in the case that, in a server based computing (SBC) system, a user switches from a client device being connected with a server device, to a different client device.SOLUTION: Communication means among client devices transmits switching notice (including terminal information) in response to user operation or the like directly from a switching destination client device (B) 20b to a switching source client device (A) 20a. The switching notice is transferred to a server device 10 by the switching source 20a. At this time, the switching source 20a re-sizes screen data G during display depending on the terminal information of the switching destination 20b and transmits it to the switching destination 20b to make it display the data. On the other hand, when the server device 10 receives the switching notice from the switching destination 20b transferred by the switching source 20a, it stores an operation state of an application at that time, and switches connection from the switching source 20a to the switching destination 20b. Then, the stored operation state of the application is restored, and the switching destination 20b is able to continuously perform work before the switching.

Description

本発明は、端末装置に関する。   The present invention relates to a terminal device.

従来のサーバ・クライアント・システムにおいて、例えばクライアント装置からのリモート操作によりサーバ装置側で所望のアプリケーションプログラムを起動実行させるサーバベース・コンピューティング・システム(SBCシステム;Server Based Computing system)がある。このSBCシステムでは、クライアント装置の操作入力に応じてサーバ装置側で処理され更新される表示用の画面データが、該サーバ装置からその画面更新の都度クライアント装置へと送信転送されて表示される。これによりクライアント装置は、表示や入力など最低限の機能のみを持てば良く、アプリケーションなどの資源はサーバ装置で一元管理するものである。   In a conventional server-client system, for example, there is a server-based computing system (SBC system) that activates and executes a desired application program on the server device side by remote operation from the client device. In this SBC system, display screen data that is processed and updated on the server device side in response to an operation input of the client device is transmitted and transferred from the server device to the client device each time the screen is updated. As a result, the client device only needs to have a minimum function such as display and input, and resources such as applications are centrally managed by the server device.

このようにSBCシステムは、サーバ装置上でアプリケーションプログラムが実行されるので、クライアント装置の性能が低い場合にも高機能なコンピューティング環境を実現可能である。   As described above, since the application program is executed on the server device, the SBC system can realize a highly functional computing environment even when the performance of the client device is low.

複数のサーバ装置を並列に備えたサーバベース・コンピューティング・システムにおいて、クライアント装置からアプリケーションプログラムの起動要求があった場合に、最適な実行環境を持つサーバ装置が決定され、マルチユーザ且つマルチタスクで同一アプリケーションの動作を実現できるようにする手法が考えられている(例えば、特許文献1参照。)。   In a server-based computing system having a plurality of server devices in parallel, when a client device requests an application program to be launched, a server device having an optimal execution environment is determined, and multi-user and multi-tasking is performed. A technique for realizing the operation of the same application has been considered (see, for example, Patent Document 1).

複数種類の専用端末となる各クライアント装置を1つのサーバ装置に接続して使用する場合でも、各クライアント装置毎にユーザ自らが異なる実行環境を設定する必要なく、各ユーザが必要とする最適な作業を各端末画面サイズに合わせて行うことができるサーバベース・コンピューティング・システムが考えられている(例えば、特許文献2参照。)。   Even when each client device, which is a plurality of types of dedicated terminals, is connected to one server device, it is not necessary for the user to set a different execution environment for each client device, and the optimum work required for each user A server-based computing system that can be adapted to each terminal screen size has been considered (see, for example, Patent Document 2).

2004−192348号公報2004-192348 2007−179108号公報2007-179108

前記従来のサーバベース・コンピューティング・システムにおいて、同一ユーザが、例えば外出先では携帯端末型のクライアント装置によりサーバ装置と接続して作業を行い、外出から戻った社内ではデスクトップPC型のクライアント装置により同サーバ装置と接続して引き続き同じ作業を行うことがある。   In the conventional server-based computing system, for example, the same user works by connecting to the server device by a portable terminal type client device when going out, and by a desktop PC type client device when returning from the office. The same work may be continued by connecting to the server device.

このような場合、ユーザはその都度、外出先にて使用していた接続中の携帯端末型のクライアント装置をログオフ操作し、次いで社内にあるデスクトップPC型のクライアント装置をログオン操作して、クライアント装置の切替作業を行わなければならない。   In such a case, each time the user logs off the connected portable terminal type client device that was used outside, and then logged on the desktop PC type client device in the office, the client device Must be switched.

本発明は、情報管理装置から情報を受信する端末装置の切り替える際は、その情報を維持しながら簡単に切り替えることが可能になることを目的とする。   An object of the present invention is to enable easy switching while maintaining the information when the terminal device that receives information from the information management device is switched.

請求項1記載の発明は、情報管理装置から情報を受信して出力する端末装置であって、前記情報管理装置から情報を受信して出力している状態において、前記情報管理装置からの情報送信先を第2端末装置へ切り替える切替指示を取得する指示取得手段と、前記指示取得手段で切替指示を取得した際は、当該端末装置で出力されていた情報を前記第2端末装置で出力させるべく当該情報を変換する情報変換手段と、前記指示取得手段で切替指示を取得した際は、前記情報管理装置からの情報切替が完了するまでの間、前記情報を前記第2端末装置で出力させるべく当該情報を前記第2端末装置に対して送信する送信手段と、を備えたことを特徴とする。   The invention according to claim 1 is a terminal device that receives and outputs information from an information management device, and transmits information from the information management device in a state where information is received and output from the information management device. An instruction acquisition unit that acquires a switching instruction to switch the destination to the second terminal device; and when the switching instruction is acquired by the instruction acquisition unit, the information output from the terminal device should be output by the second terminal device When the switching instruction is acquired by the information converting means for converting the information and the instruction acquiring means, the second terminal apparatus should output the information until the information switching from the information management apparatus is completed. Transmitting means for transmitting the information to the second terminal device.

請求項4記載の発明は、情報管理装置から情報を受信して出力する端末装置であって、第2端末装置が前記情報管理装置から情報を受信して出力している状態において、前記情報管理装置からの情報送信先を前記第2端末装置から当該端末装置へ切り替える切替指示を取得する指示取得手段と、前記指示取得手段で切替指示を取得した際は、前記情報管理装置からの情報切替が完了するまでの間、前記第2端末装置で出力されていたその時点での情報を当該端末装置で出力させるべく、前記第2端末装置から、その時点での前記情報を受信する情報受信手段と、前記情報受信手段で受信した情報を出力し、その後、前記情報管理装置での情報送信先の切替が完了した後にあっては前記情報管理装置からの新たな情報を受信して出力する出力手段と、を備えたことを特徴とする。出力手段と、を備えたことを特徴とする。   According to a fourth aspect of the present invention, there is provided a terminal device that receives and outputs information from an information management device, wherein the second terminal device receives and outputs information from the information management device. An instruction acquisition unit that acquires a switching instruction for switching the information transmission destination from the second terminal device to the terminal device, and when the instruction acquisition unit acquires the switching instruction, information switching from the information management device is performed. Information receiving means for receiving the information at that time from the second terminal device in order to cause the terminal device to output the information at that time which has been output at the second terminal device until completion. An output unit that outputs the information received by the information receiving unit and then receives and outputs new information from the information management device after switching of the information transmission destination in the information management device is completed. Characterized by comprising a and. And an output means.

本発明によれば、情報管理装置から情報を受信する端末装置の切り替える際は、その情報を維持しながら簡単に切り替えることが可能になる。   ADVANTAGE OF THE INVENTION According to this invention, when switching the terminal device which receives information from an information management apparatus, it becomes possible to switch easily, maintaining the information.

本発明の実施形態に係るSBC(Server Based Computing)システムの構成を示すブロック図。1 is a block diagram showing a configuration of an SBC (Server Based Computing) system according to an embodiment of the present invention. 前記SBCシステムのサーバ装置10に対するクライアント装置(A)20a,(B)20b,…間での接続切り替えに伴う表示画面の状態を示す図。The figure which shows the state of the display screen accompanying the connection switching between the client apparatus (A) 20a, (B) 20b, ... with respect to the server apparatus 10 of the SBC system. 前記SBCシステムにおけるサーバ装置10の回路構成を示すブロック図。The block diagram which shows the circuit structure of the server apparatus 10 in the said SBC system. 前記SBCシステムにおけるクライアント装置20a(20b)の回路構成を示すブロック図。The block diagram which shows the circuit structure of the client apparatus 20a (20b) in the said SBC system. 前記SBCシステムの全体の動作シーケンスを示す図。The figure which shows the whole operation | movement sequence of the said SBC system. 前記SBCシステムのサーバ装置10によるサーバ処理を示すフローチャート。The flowchart which shows the server process by the server apparatus 10 of the said SBC system. 前記サーバ装置10のサーバ処理に伴うクライアント切替処理を示すフローチャート。5 is a flowchart showing client switching processing accompanying server processing of the server device 10; 前記SBCシステムのクライアント装置(A:切替元)20aによるクライアント処理を示すフローチャート。The flowchart which shows the client process by the client apparatus (A: switching origin) 20a of the said SBC system. 前記クライアント装置(A:切替元)20aのクライアント処理に伴う画面リサイズ処理を示すフローチャート。The flowchart which shows the screen resizing process accompanying the client process of the said client apparatus (A: switching origin) 20a. 前記SBCシステムのクライアント装置(B:切替先)20bによるクライアント処理を示すフローチャート。The flowchart which shows the client process by the client apparatus (B: switching destination) 20b of the said SBC system.

以下図面により本発明の実施の形態について説明する。   Embodiments of the present invention will be described below with reference to the drawings.

図1は、本発明の実施形態に係るSBC(Server Based Computing)システムの構成を示すブロック図である。   FIG. 1 is a block diagram showing a configuration of an SBC (Server Based Computing) system according to an embodiment of the present invention.

このSBCシステムは、有線または無線のLAN(Local Area Network)やWAN(Wide Area Network)からなるネットワークN上に接続されたサーバ装置10および複数のクライアント装置(Thin client)(A)20a,(B)20b,…を備える。   This SBC system includes a server device 10 and a plurality of client devices (A) 20a, (B) connected to a network N composed of a wired or wireless LAN (Local Area Network) or WAN (Wide Area Network). ) 20b,.

クライアント装置(A)20a,(B)20b,…は、例えばデスクトップPC型、ノートPC型、携帯端末(PDA)型、携帯電話型など、それぞれ異なる種類の端末装置でもよいし、同種の端末装置でもよい。   The client devices (A) 20a, (B) 20b,... May be different types of terminal devices such as a desktop PC type, a notebook PC type, a portable terminal (PDA) type, a mobile phone type, or the like. But you can.

サーバ装置10は、テキスト作成処理プログラム,Webブラウザプログラム,表計算処理プログラム,メール処理プログラムなど、複数のアプリケーションプログラムを有し、当該サーバ装置10に接続されたクライアント装置(A)20a,(B)20b,…からの操作入力(入力イベント)信号に応じて起動しその処理を実行する。   The server device 10 includes a plurality of application programs such as a text creation processing program, a Web browser program, a spreadsheet processing program, and a mail processing program, and client devices (A) 20a and (B) connected to the server device 10 20b,... Is started and executed in response to an operation input (input event) signal from 20b,.

このサーバ装置10において、クライアント装置(A)20a,(B)20b,…からの操作入力信号に応じたアプリケーションプログラムの実行に伴い、クライアント用のフレームバッファRAM14a(図3参照)上に生成された表示出力用の画面データGは、アクセス元のクライアント装置(A)20a,(B)20b,…へ転送される。   In the server device 10, the application program is generated on the client frame buffer RAM 14a (see FIG. 3) in accordance with the execution of the application program in accordance with the operation input signal from the client device (A) 20a, (B) 20b,. The screen data G for display output is transferred to the client device (A) 20a, (B) 20b,.

そして、クライアント装置(A)20a,(B)20b,…では、前記サーバ装置10から転送された画面データGがフレームバッファRAM25(図4参照)に展開され、表示装置26の表示画面に表示される。   In the client devices (A) 20a, (B) 20b,..., The screen data G transferred from the server device 10 is expanded in the frame buffer RAM 25 (see FIG. 4) and displayed on the display screen of the display device 26. The

つまり、このSBCシステムにおける各クライアント装置(Thin client)(A)20a,(B)20b,…は、何れもキーボードやマウスなどのユーザ操作に応じた入力機能とLCD表示部及びプリンタなどへの出力機能を主要な機能として有し、少なくとも前記サーバ装置10が有している各種のアプリケーション機能やデータファイルの管理機能を持っていない。   In other words, each client device (A) 20a, (B) 20b,... In this SBC system has an input function corresponding to a user operation such as a keyboard and a mouse, and an output to an LCD display unit and a printer. It has functions as main functions and does not have at least various application functions and data file management functions that the server device 10 has.

そして、クライアント装置(A)20a,(B)20b,…からの操作入力(入力イベント)信号に応じてサーバ装置10にて起動実行される各種の処理に伴い生成されたデータファイルは、基本的には、当該サーバ装置10内あるいは該サーバ装置10にて接続管理される磁気ディスクなどの記憶装置にユーザアカウント毎あるいは共有ファイルとして記憶され保存される。   The data files generated by various processes activated and executed in the server device 10 in response to operation input (input event) signals from the client devices (A) 20a, (B) 20b,. Are stored and stored for each user account or as a shared file in the server device 10 or in a storage device such as a magnetic disk managed and managed by the server device 10.

このSBCシステムのクライアント装置(A)20a,(B)20b,…は、ネットワークNを介してサーバ装置10と通信するための第1の通信手段(通信I/F(1)29a:図4参照)だけでなく、クライアント装置(A)20a,(B)20b,…同士で通信するための第2の通信手段(通信I/F(2)29b:図4参照)を備える。   The client devices (A) 20a, (B) 20b,... Of this SBC system are connected to the first communication means (communication I / F (1) 29a: FIG. 4) for communicating with the server device 10 via the network N. ) As well as second communication means (communication I / F (2) 29b: see FIG. 4) for communicating with each other between the client devices (A) 20a, (B) 20b,.

そして、このSBCシステムは、サーバ装置10に接続中のあるクライアント装置(A)20aを、その同一ユーザが別のクライアント装置(B)20bに切り替えて接続する場合に、接続中のクライアント装置(A)20aにおけるログオフ操作と、切替先のクライアント装置(B)20bにおけるログオン操作とをすることなく、簡単に切替可能な機能を有する。   The SBC system is configured such that when a client device (A) 20a connected to the server device 10 is connected to another client device (B) 20b by the same user, the connected client device (A) ) A function that can be easily switched without performing a log-off operation in 20a and a logon operation in the switching destination client device (B) 20b.

接続中のクライアント装置(A)20aから切替先のクライアント装置(B)20bへの切り替え処理は、切替先のクライアント装置(B)20bから接続中のクライアント装置(A)20aへの端末情報(表示画面サイズ等)を含む切替通知信号に基づき開始される。この際、切替先のクライアント装置(B)20bに最初に表示される画面データは、切替元のクライアント装置(A)20aにおいて最後に表示されていた画面データが、前記端末情報(表示画面サイズ)に基づきリサイズされて与えられる。   The switching process from the client device (A) 20a being connected to the client device (B) 20b to be switched is the terminal information (display) from the client device (B) 20b being the switch destination to the client device (A) 20a being connected. This is started based on a switching notification signal including a screen size. At this time, the screen data first displayed on the switching destination client device (B) 20b is the screen data last displayed on the switching source client device (A) 20a, and the terminal information (display screen size). Resized based on the given.

図2は、前記SBCシステムのサーバ装置10に対するクライアント装置(A)20a,(B)20b,…間での接続切り替えに伴う表示画面の状態を示す図である。   FIG. 2 is a diagram showing a state of a display screen associated with connection switching between the client devices (A) 20a, (B) 20b,... With respect to the server device 10 of the SBC system.

切替元のクライアント装置(A)[例えば携帯端末型]20aにて最後に表示されていた画面データGは、前述した通り、切替先のクライアント装置(B)[例えばデスクトップ型PC]20bの端末情報(表示画面サイズ)に基づきリサイズされ、当該切替先のクライアント装置(B)20bへ転送されて表示される。この際、図2(A)(B)の矢印xで示すように、例えば切替元の画面データGの上部から下部へ一定幅の画面データ毎に順次リサイズされて切替先へ転送され、その都度、切替元の画面データGが順次消去されながら切替先の画面データG′として表示させる構成とする。   As described above, the screen data G last displayed on the switching source client device (A) [for example, portable terminal type] 20a is the terminal information of the switching destination client device (B) [for example, desktop type PC] 20b. The image is resized based on (display screen size), transferred to the switching destination client device (B) 20b, and displayed. At this time, as indicated by arrows x in FIGS. 2A and 2B, for example, the screen data G of the switching source is sequentially resized for each screen data of a certain width from the upper part to the lower part and transferred to the switching destination. The switching source screen data G is displayed as the switching destination screen data G ′ while being sequentially deleted.

これにより、切替先のクライアント装置(B)20bでは、サーバ装置10との接続完了を待つこと無しに、素早く且つ自然な切り替えイメージで初期画面(G′)を表示させることができる。また、切替元のクライアント装置(A)20aでは、その接続切り替えに伴い画面データGが完全に消去されるので、SBCシステムとしてのセキュリティ性を確実に維持することができる。   As a result, the switching destination client device (B) 20b can quickly and naturally display the initial screen (G ′) without waiting for the completion of connection with the server device 10. Further, in the switching source client device (A) 20a, the screen data G is completely erased as the connection is switched, so that the security as the SBC system can be reliably maintained.

図3は、前記SBCシステムにおけるサーバ装置10の回路構成を示すブロック図である。   FIG. 3 is a block diagram showing a circuit configuration of the server device 10 in the SBC system.

サーバ装置10は、コンピュータとしてのCPU11を備え、このCPU11には、バス12を介してROM13、RAM14、フレームバッファRAM15、表示装置16が接続される。   The server device 10 includes a CPU 11 as a computer, and a ROM 13, a RAM 14, a frame buffer RAM 15, and a display device 16 are connected to the CPU 11 via a bus 12.

また、CPU11には、バス12を介してキーボード,マウスなどの入力装置17、外部記憶装置18、クライアント装置(A)20a,(B)20b,…との通信I/F(インターフェイス)19が接続される。   Further, the CPU 11 is connected to an input device 17 such as a keyboard and a mouse, an external storage device 18, and a communication I / F (interface) 19 with the client devices (A) 20a, (B) 20b,. Is done.

CPU11は、ROM13内のプログラムメモリ13aに予め記憶されているシステムプログラムや種々のアプリケーションプログラムに従ってRAM14を作業用メモリとし回路各部の動作を制御するもので、入力装置17からのキー入力信号や通信I/F19を介して受信されるクライアント装置20a,20b,…からのユーザ操作に応じた処理指令(入力イベント)信号などに応じて前記種々のプログラムが起動・実行される。   The CPU 11 controls the operation of each part of the circuit by using the RAM 14 as a working memory according to a system program stored in the program memory 13a in the ROM 13 and various application programs. The various programs are activated and executed in response to a processing command (input event) signal corresponding to a user operation from the client devices 20a, 20b,.

このサーバ装置10において、クライアント装置20a,20b,…からの入力イベント信号に応じて起動・実行されるアプリケーションプログラムに従い生成された種々のデータは、例えばそのユーザIDに対応付けられて外部記憶装置18に記憶される。またクライアント表示用の画面データGは、RAM14内のクライアント用フレームバッファRAM14aを使用して生成されると共に、圧縮処理された後、通信I/F19からクライアント装置20a,20b,…へ転送されて表示出力される。   In this server device 10, various data generated in accordance with an application program activated / executed in response to an input event signal from the client devices 20a, 20b,... Is associated with the user ID, for example, the external storage device 18. Is remembered. Further, the client display screen data G is generated by using the client frame buffer RAM 14a in the RAM 14, and after being compressed, is transferred from the communication I / F 19 to the client devices 20a, 20b,. Is output.

前記RAM14内には、さらに、アプリケーション動作状態メモリ14bが確保される。このアプリケーション動作状態メモリ14bには、接続中のクライアント装置20aがログオフなどにより切断される際に、当該クライアント装置20aの入力イベントに応じて実行されていたアプリケーションの動作状態が記憶され管理される。このアプリケーション動作状態メモリ14bに記憶されたアプリケーションの動作状態は、同一ユーザのクライアント装置20a(20b)が次回ログオンして接続された際に復元されて実行される。   In the RAM 14, an application operation state memory 14b is further secured. The application operation state memory 14b stores and manages an operation state of an application that is being executed in response to an input event of the client device 20a when the connected client device 20a is disconnected due to logoff or the like. The operation state of the application stored in the application operation state memory 14b is restored and executed when the client device 20a (20b) of the same user is next logged on and connected.

なお、当該サーバ装置10自身の表示装置16にて表示させるための画面データは、フレームバッファRAM15上に生成される。   Note that screen data to be displayed on the display device 16 of the server device 10 itself is generated on the frame buffer RAM 15.

このサーバ装置10は、接続中のクライアント装置(切替元)20aにより転送された他のクライアント装置(切替先)20bからの端末情報(表示画面サイズ等)を含む切替通知信号が受信された場合に、接続中のクライアント装置20aの入力イベントに応じて実行されていたアプリケーションの動作状態を、前記RAM14内のアプリケーション動作状態メモリ14bに記憶して保存し、この後、前記接続中のクライアント装置20aを切断(ログオフ)すると共に、他のクライアント装置20bへ接続通知信号を送信する機能を有する。   This server device 10 receives a switching notification signal including terminal information (display screen size, etc.) from another client device (switching destination) 20b transferred by the connected client device (switching source) 20a. The operation state of the application executed in response to the input event of the connected client device 20a is stored and saved in the application operation state memory 14b in the RAM 14, and then the connected client device 20a is stored. It has a function of disconnecting (logging off) and transmitting a connection notification signal to another client device 20b.

そして、このサーバ装置20は、前記他のクライアント装置(切替先)20bへ接続通知信号を送信した後に、当該他のクライアント装置20bからその端末情報(表示画面サイズ等)を含む認証データが受信された場合、通常のログイン認証処理を実行し、前記RAM14内のアプリケーション動作状態メモリ14bに保存されたアプリケーションの動作状態を、前記切替先の端末情報に基づき復元する機能を有する。   Then, after transmitting a connection notification signal to the other client device (switch destination) 20b, the server device 20 receives authentication data including the terminal information (display screen size, etc.) from the other client device 20b. In this case, a normal login authentication process is executed, and the operation state of the application stored in the application operation state memory 14b in the RAM 14 is restored based on the switching destination terminal information.

図4は、前記SBCシステムにおけるクライアント装置20a(20b)の回路構成を示すブロック図である。   FIG. 4 is a block diagram showing a circuit configuration of the client device 20a (20b) in the SBC system.

クライアント装置20aは、コンピュータとしてのCPU21を備え、このCPU21には、バス22を介してROM23、RAM24、フレームバッファRAM25が接続される。そして、このフレームバッファRAM25に書き込まれた画面データGが表示装置26に出力されて表示される。   The client device 20 a includes a CPU 21 as a computer, and a ROM 23, a RAM 24, and a frame buffer RAM 25 are connected to the CPU 21 via a bus 22. The screen data G written in the frame buffer RAM 25 is output to the display device 26 and displayed.

また、CPU21には、バス22を介してキーボード,マウス,マイク,光センサなどの入力装置27、外部記憶装置28が接続され、さらに、前記サーバ装置10とネットワークNを介して通信するための通信I/F(インターフェイス)(1)29a、他のクライアント装置20bと通信するための通信I/F(2)29bが接続される。   The CPU 21 is connected to an input device 27 such as a keyboard, a mouse, a microphone, and an optical sensor, and an external storage device 28 via the bus 22 and further communicates with the server device 10 via the network N. An I / F (interface) (1) 29a and a communication I / F (2) 29b for communicating with another client device 20b are connected.

前記他のクライアント装置20bと通信するための通信I/F(2)29bは、USBケーブルやクレードル、近距離無線装置などを使用して構成される。   The communication I / F (2) 29b for communicating with the other client device 20b is configured using a USB cable, a cradle, a short-range wireless device, or the like.

CPU21は、ROM23内のプログラムメモリ23aに予め記憶されているシステムプログラムに従ってRAM24を作業用メモリとし回路各部の動作を制御するもので、入力装置27からのキー入力信号やマウス移動信号、通信I/F(A)29aを介して受信されるサーバ装置10からのアプリケーション応答信号や転送画面データG、通信I/F(B)29bを介して受信される他のクライアント装置20bからの切替通知信号などに応じて前記システムプログラムが起動され実行される。   The CPU 21 controls the operation of each part of the circuit by using the RAM 24 as a working memory in accordance with a system program stored in the program memory 23a in the ROM 23 in advance. The CPU 21 controls the operation of each part of the circuit. Application response signal from server device 10 received via F (A) 29a, transfer screen data G, switching notification signal from other client device 20b received via communication I / F (B) 29b, etc. In response to this, the system program is started and executed.

このクライアント装置20aにおいて、前記サーバ装置10におけるアプリケーションプログラムを実行させて生成した種々のデータは、適宜、外部記憶装置28に読み込ませて記憶させ、また生成転送された表示用の画面データGは、その圧縮が解凍されてフレームバッファRAM25に書き込まれ表示装置26で表示出力される。   In the client device 20a, various data generated by executing the application program in the server device 10 is appropriately read and stored in the external storage device 28. The display screen data G generated and transferred is The compressed data is decompressed, written in the frame buffer RAM 25, and displayed on the display device 26.

このクライアント装置20a(20b)は、サーバ装置10と接続中の他のクライアント装置20b(20a)から接続を切り替える場合、ユーザ操作に応じて、あるいは前記通信I/F(B)29bを介して前記他のクライアント装置20b(20a)との接続が確立された際に自動で、当該他のクライアント装置20b(20a)に対し、自分の端末情報(表示画面サイズ等)を含む切替通知信号を送信する機能を有する。   When the client device 20a (20b) switches the connection from another client device 20b (20a) connected to the server device 10, the client device 20a (20b) responds to a user operation or via the communication I / F (B) 29b. When a connection with another client device 20b (20a) is established, a switching notification signal including its own terminal information (display screen size, etc.) is automatically transmitted to the other client device 20b (20a). It has a function.

また、このクライアント装置20a(20b)は、前記サーバ装置10と接続中の他のクライアント装置20b(20a)へ切替通知信号を送信した後に、当該他のクライアント装置20b(20a)から直接転送されて来るリサイズされた画面データG′(図2参照)を表示装置26に表示させる機能を有する。   The client device 20a (20b) transmits a switch notification signal to the other client device 20b (20a) connected to the server device 10 and then is directly transferred from the other client device 20b (20a). The display device 26 has a function of displaying the incoming resized screen data G ′ (see FIG. 2).

また、このクライアント装置20a(20b)は、前記他のクライアント装置20b(20a)から直接転送された画面データG′を表示させた後に、サーバ装置10から接続通知信号が受信された場合、当該サーバ装置10に対し、自分の端末情報(表示画面サイズ等)を含む認証データを送信して接続を確立させる機能を有する。   When the client device 20a (20b) receives the connection notification signal from the server device 10 after displaying the screen data G ′ directly transferred from the other client device 20b (20a), The apparatus 10 has a function of transmitting authentication data including its own terminal information (display screen size and the like) to establish a connection.

また、このクライアント装置20a(20b)は、前記通信I/F(B)29bを介して他のクライアント装置20b(20a)からその端末情報(表示画面サイズ等)を含む切替通知信号が受信された場合、当該他のクライアント装置20b(20a)からの切替通知信号をサーバ装置10へ転送する機能を有する。   Further, the client device 20a (20b) has received a switching notification signal including its terminal information (display screen size, etc.) from the other client device 20b (20a) via the communication I / F (B) 29b. In this case, it has a function of transferring a switching notification signal from the other client device 20b (20a) to the server device 10.

また、このクライアント装置20a(20b)は、前記他のクライアント装置20b(20a)からの切替通知信号が受信された場合、そのときにフレームバッファRAM25に記憶され表示装置26に表示されていた画面データGを、前記切替通知信号に含まれる端末情報(表示画面サイズ等)に基づきリサイズし、前記他のクライアント装置20b(20a)へ転送して表示させる機能を有する。   Further, when the switch notification signal is received from the other client device 20b (20a), the client device 20a (20b) stores the screen data stored in the frame buffer RAM 25 and displayed on the display device 26 at that time. G is resized based on terminal information (display screen size or the like) included in the switching notification signal, and transferred to the other client device 20b (20a) for display.

次に、前記構成のSBCシステムの動作について説明する。   Next, the operation of the SBC system configured as described above will be described.

図5は、前記SBCシステムの全体の動作シーケンスを示す図である。   FIG. 5 is a diagram showing an overall operation sequence of the SBC system.

この実施形態では、例えばあるユーザが外出から社内に戻った際に、外出先でサーバ装置10に接続して使用していた携帯端末型のクライアント装置(A:切替元)20aから社内にあるデスクトップ型のクライアント装置(B:切替先)20bへ、サーバ装置10との接続を切り替え、継続して作業する場合を主体に説明する。   In this embodiment, for example, when a certain user returns from the outside to the office, the desktop in the office from the mobile terminal type client device (A: switching source) 20a used by connecting to the server apparatus 10 at the outside is used. A case where the connection to the server device 10 is switched to the type client device (B: switching destination) 20b and the operation is continued will be mainly described.

図6は、前記SBCシステムのサーバ装置10によるサーバ処理を示すフローチャートである。   FIG. 6 is a flowchart showing server processing by the server device 10 of the SBC system.

図7は、前記サーバ装置10のサーバ処理に伴うクライアント切替処理を示すフローチャートである。   FIG. 7 is a flowchart showing client switching processing accompanying server processing of the server device 10.

図8は、前記SBCシステムのクライアント装置(A:切替元)20aによるクライアント処理を示すフローチャートである。   FIG. 8 is a flowchart showing client processing by the client device (A: switching source) 20a of the SBC system.

図9は、前記クライアント装置(A:切替元)20aのクライアント処理に伴う画面リサイズ処理を示すフローチャートである。   FIG. 9 is a flowchart showing a screen resize process accompanying the client process of the client device (A: switching source) 20a.

図10は、前記SBCシステムのクライアント装置(B:切替先)20bによるクライアント処理を示すフローチャートである。   FIG. 10 is a flowchart showing client processing by the client device (B: switching destination) 20b of the SBC system.

外出先で使用するクライアント装置(A)20aにおいて、ユーザがログイン操作すると、当該クライアント装置(A)20aのユーザID、CPU21の性能、表示画面サイズ等の端末情報を含む認証データがサーバ装置10へ送信される(ステップA1(Yes)→A2)。   When the user performs a login operation on the client device (A) 20a used outside, authentication data including terminal information such as the user ID of the client device (A) 20a, the performance of the CPU 21, and the display screen size is sent to the server device 10. It is transmitted (step A1 (Yes) → A2).

サーバ装置10において、前記クライアント装置(A)20aから送信された認証データが受信されると(ステップS1(Yes)→S2)、ログイン認証処理が実行されて接続が確立されると共に(ステップS3)、当該接続されたクライアント装置(A)20aの端末情報がRAM14に設定される(ステップS4)。   When the server device 10 receives the authentication data transmitted from the client device (A) 20a (step S1 (Yes) → S2), a login authentication process is executed to establish a connection (step S3). The terminal information of the connected client device (A) 20a is set in the RAM 14 (step S4).

そして、前記RAM14に設定されたクライアント装置(A)20aの端末情報に対応付けられて、RAM14内のアプリケーション動作状態メモリ14bに保存されている前回の接続終了(ログオフ)時点でのアプリケーションプログラムの動作状態が復元される(ステップS5)。   The operation of the application program at the end of the previous connection (logoff) stored in the application operation state memory 14b in the RAM 14 in association with the terminal information of the client device (A) 20a set in the RAM 14 The state is restored (step S5).

ここで、前記クライアント装置(A)20aにおいて、ユーザによる入力操作が行われると(ステップA3(Yes))、その入力操作データ(入力イベント信号)が前記サーバ装置10へ送信される(ステップA4)。   Here, when an input operation by the user is performed in the client device (A) 20a (step A3 (Yes)), the input operation data (input event signal) is transmitted to the server device 10 (step A4). .

サーバ装置10において、前記クライアント装置(A)20aから送信された入力操作データ(入力イベント信号)が受信されると(ステップS6)、当該入力操作(入力イベント)に応じたアプリケーションプログラムが実行され(ステップS7)、前記RAM14に設定された端末情報(表示画面サイズ等)に合わせたクライアント表示用の画面データGが生成されてクライアント用フレームバッファRAM14aに描画されると共に、この画面データGが前記イベント入力元のクライアント装置(A)20aへ送信される(ステップS8)。   When the server apparatus 10 receives the input operation data (input event signal) transmitted from the client apparatus (A) 20a (step S6), an application program corresponding to the input operation (input event) is executed ( In step S7), client display screen data G matching the terminal information (display screen size, etc.) set in the RAM 14 is generated and rendered in the client frame buffer RAM 14a. It is transmitted to the input source client device (A) 20a (step S8).

前記イベント入力元のクライアント装置(A)20aにおいて、前記サーバ装置10により生成されて送信された画面データGが受信されると(ステップA5)、当該画面データGは、フレームバッファRAM25に描画され表示装置26に表示される(ステップA6)。   When the event input source client device (A) 20a receives the screen data G generated and transmitted by the server device 10 (step A5), the screen data G is drawn and displayed in the frame buffer RAM 25. It is displayed on the device 26 (step A6).

これにより、クライアント装置(A)20aでは、ユーザの入力操作に応じて、サーバ装置10にて実行されるアプリケーションプログラムに従い生成された画面データGが受信され、表示装置26に表示される(ステップA3〜A6(S6〜S8))。   Thereby, in the client device (A) 20a, the screen data G generated according to the application program executed in the server device 10 is received and displayed on the display device 26 according to the input operation of the user (step A3). -A6 (S6-S8)).

こうして、ユーザが外出先にて携帯端末型のクライアント装置(A)20aをサーバ装置10に接続し、所望の作業を行っている状態で、社内に戻り、デスクトップ型のクライアント装置(B:切替先)20bで、ユーザが接続・切替を指示する操作を行うか、または当該デスクトップ型のクライアント装置(B:切替先)20bの通信I/F29bに接続されているクレードルに前記携帯端末型のクライアント装置(A:接続中)20aを装着するか、または近距離無線通信により前記携帯端末型のクライアント装置(A:接続中)20aとデスクトップ型のクライアント装置(B:切替先)20bとの接続が確立されると、当該デスクトップ型のクライアント装置(B:切替先)20bからそのユーザID、CPU21の性能、表示画面サイズ等の端末情報を含む切替通知信号が、前記携帯端末型のクライアント装置(A:接続中)20aへ送信される(ステップB1(Yes)→B2)。   In this way, the user connects the mobile terminal type client device (A) 20a to the server device 10 at a place where he / she is away and returns to the office while performing a desired work, and the desktop type client device (B: switching destination) ) In 20b, the user performs an operation for instructing connection / switching, or the mobile terminal type client device is connected to the cradle connected to the communication I / F 29b of the desktop type client device (B: switching destination) 20b. (A: connected) 20a is attached, or connection between the portable terminal type client device (A: connected) 20a and the desktop type client device (B: switching destination) 20b is established by short-range wireless communication Then, from the desktop type client device (B: switching destination) 20b, the user ID, the performance of the CPU 21, the display screen Switching notification signal including the terminal information of the size or the like, the mobile terminal type client device: sent to (A connecting) 20a (step B1 (Yes) → B2).

前記接続中のクライアント装置(A)20aにおいて、前記切替先のクライアント装置(B)20bから送信された切替通知信号が受信されると(ステップA7(Yes))、図9における画面リサイズ処理に移行される(ステップAR)。   When the connected client device (A) 20a receives the switching notification signal transmitted from the switching destination client device (B) 20b (step A7 (Yes)), the process proceeds to the screen resizing process in FIG. (Step AR).

この画面リサイズ処理において、前記切替先のクライアント装置(B)20bの端末情報を含む切替通知信号が受信されると(ステップR1)、この受信されたクライアント装置(B)20bの切替通知信号(含む端末情報)は、前記サーバ装置10へ転送される(ステップR2)。   In this screen resizing process, when a switching notification signal including the terminal information of the switching destination client device (B) 20b is received (step R1), the received switching notification signal (including the client device (B) 20b) is included. The terminal information is transferred to the server device 10 (step R2).

すると、切替元のクライアント装置(A)20aのフレームバッファRAM25に記憶されて表示装置26にて現在表示中の画面データGが、前記切替通知信号と共に受信された切替先のクライアント装置(B)20bの端末情報(表示画面サイズ)に合わせてリサイズ(拡大/縮小)される(ステップR3)。そして、このリサイズされた画面データG′が、前記切替先のクライアント装置(B)20bへ送信される(ステップR4)。   Then, the switching destination client device (B) 20b that has received the screen data G stored in the frame buffer RAM 25 of the switching source client device (A) 20a and currently displayed on the display device 26 together with the switching notification signal. Are resized (enlarged / reduced) in accordance with the terminal information (display screen size) (step R3). Then, the resized screen data G ′ is transmitted to the switching destination client device (B) 20b (step R4).

切替先のクライアント装置(B)20bにおいて、前記切替元のクライアント装置(A)20aからリサイズされて送信された画面データG′が受信されると(ステップB3)、この受信された画面データG′は、フレームバッファRAM25に描画されて記憶され表示装置26に表示される(ステップB4)。   When the switching destination client device (B) 20b receives the screen data G 'resized and transmitted from the switching source client device (A) 20a (step B3), the received screen data G' Are drawn and stored in the frame buffer RAM 25 and displayed on the display device 26 (step B4).

この場合、前記図2(A)(B)の矢印xで示すように、例えば切替元のクライアント装置(A)20aにて表示されている画面データGの上部から下部へ一定幅の画面データ毎に順次リサイズされて切替先のクライアント装置(B)20bへ転送され、その都度、切替元の画面データGが順次消去されながら切替先の画面データG′が表示される。   In this case, as indicated by the arrow x in FIGS. 2A and 2B, for example, screen data having a certain width from the upper part to the lower part of the screen data G displayed on the switching source client apparatus (A) 20a. Are sequentially resized and transferred to the switching destination client device (B) 20b, and each time the switching source screen data G is sequentially deleted, the switching destination screen data G 'is displayed.

このため、切替先のクライアント装置(B)20bでは、サーバ装置10との接続完了を待つこと無しに、素早く且つ自然な切り替えイメージで初期画面(G′)を表示させることができる。また、切替元のクライアント装置(A)20aでは、その接続切り替えに伴い画面データGが完全に消去されるので、SBCシステムとしてのセキュリティ性を確実に維持することができる。   For this reason, in the switching destination client device (B) 20b, the initial screen (G ′) can be displayed in a quick and natural switching image without waiting for the completion of connection with the server device 10. Further, in the switching source client device (A) 20a, the screen data G is completely erased as the connection is switched, so that the security as the SBC system can be reliably maintained.

なお、前記切替元の画面データGのリサイズ処理と、リサイズされた画面データG′の切替先への送信処理は、前述した通り、その画面データGの上部から下部へ一定幅の画面データ毎に順次リサイズして送信してもよいし、切替元の画面データGを一括リサイズして送信し、同画面データGを一括消去する構成としてもよい。   The resize processing of the screen data G of the switching source and the transmission processing of the resized screen data G ′ to the switching destination are performed for each screen data of a certain width from the top to the bottom of the screen data G as described above. The screen data G may be resized and transmitted sequentially, or the screen data G that is the switching source may be resized and transmitted collectively, and the screen data G may be erased collectively.

一方、サーバ装置10において、接続中のクライアント装置(A:切替元)20aにより転送された前記クライアント装置(B:切替先)20bからの切替通知信号(含む端末情報)が受信されると(ステップS9(Yes))、図7におけるクライアント切替処理へ移行される(ステップSC)。   On the other hand, when the server apparatus 10 receives the switching notification signal (including terminal information) from the client apparatus (B: switching destination) 20b transferred by the currently connected client apparatus (A: switching source) 20a (steps) S9 (Yes)), the process proceeds to the client switching process in FIG. 7 (step SC).

このクライアント切替処理では、現在接続中のクライアント装置(A:切替元)20aからの入力操作(入力イベント)に応じて実行中にあるアプリケーションプログラムの動作状態が、RAM14内のアプリケーション動作状態メモリ14bに記憶され保存される(ステップC1)。   In this client switching process, the operating state of the application program being executed in response to an input operation (input event) from the currently connected client device (A: switching source) 20 a is stored in the application operating state memory 14 b in the RAM 14. Stored and saved (step C1).

すると、前記接続中のクライアント装置(A:切替元)20aとの接続が切断(ログオフ)され(ステップC2)、当該クライアント装置(A:切替元)20aを介して、前記ステップS9にて受信されたクライアント装置(B:切替先)20bからの切替通知信号に含まれる端末情報に基づき、同クライアント装置(B:切替先)20bへ接続通知信号が送信される(ステップC3)。   Then, the connection with the connected client device (A: switching source) 20a is disconnected (logged off) (step C2), and is received at step S9 via the client device (A: switching source) 20a. Based on the terminal information included in the switching notification signal from the client device (B: switching destination) 20b, the connection notification signal is transmitted to the client device (B: switching destination) 20b (step C3).

この切替先のクライアント装置(B)20bにおいて、前記サーバ装置10から送信された接続通知信号が受信されると(ステップB5(Yes))、当該クライアント装置(B)20bのユーザID、CPU21の性能、表示画面サイズ等の端末情報を含む認証データが前記サーバ装置10へ送信される(ステップB6)。   When the switching destination client device (B) 20b receives the connection notification signal transmitted from the server device 10 (step B5 (Yes)), the user ID of the client device (B) 20b, the performance of the CPU 21 Then, authentication data including terminal information such as a display screen size is transmitted to the server device 10 (step B6).

サーバ装置10において、前記切替先のクライアント装置(B)20bから送信された認証データが受信されると、前記切替元のクライアント装置(A)20aに対する初期のログイン認証処理と同様に、ログイン認証処理が実行されて接続が確立されると共に(ステップS3)、当該接続されたクライアント装置(B)20bの端末情報がRAM14に設定される(ステップS4)。   When the server device 10 receives the authentication data transmitted from the switching destination client device (B) 20b, the login authentication processing is similar to the initial login authentication processing for the switching source client device (A) 20a. Is established (step S3), and the terminal information of the connected client device (B) 20b is set in the RAM 14 (step S4).

すると、前記RAM14内のアプリケーション動作状態メモリ14bに保存されている前記切替元のクライアント装置(A)20aとの接続終了(ログオフ)時点でのアプリケーションプログラムの動作状態が復元される(ステップS5)。   Then, the operation state of the application program at the time when the connection with the switching source client device (A) 20a stored in the application operation state memory 14b in the RAM 14 is completed (logoff) is restored (step S5).

ここで、切替先のクライアント装置(B)20bにおいて、ユーザによる入力操作が行われると(ステップB7(Yes))、その入力操作データ(入力イベント信号)が前記サーバ装置10へ送信される(ステップB8)。   Here, when an input operation is performed by the user (step B7 (Yes)) in the switching destination client device (B) 20b, the input operation data (input event signal) is transmitted to the server device 10 (step S7). B8).

サーバ装置10において、前記クライアント装置(B)20bから送信された入力操作データ(入力イベント信号)が受信されると(ステップS6)、当該入力操作(入力イベント)に応じたアプリケーションプログラムが実行され(ステップS7)、前記RAM14に設定された端末情報(表示画面サイズ等)に合わせたクライアント表示用の画面データGが生成されてクライアント用フレームバッファRAM14aに描画されると共に、この画面データGが前記イベント入力元である切替先のクライアント装置(B)20bへ送信される(ステップS8)。   When the server apparatus 10 receives the input operation data (input event signal) transmitted from the client apparatus (B) 20b (step S6), an application program corresponding to the input operation (input event) is executed ( In step S7), client display screen data G matching the terminal information (display screen size, etc.) set in the RAM 14 is generated and rendered in the client frame buffer RAM 14a. It is transmitted to the switching destination client device (B) 20b that is the input source (step S8).

この切替先のクライアント装置(B)20bにおいて、前記サーバ装置10により生成されて送信された画面データGが受信されると(ステップB9)、当該画面データGは、フレームバッファRAM25に描画され表示装置26に表示される(ステップB10)。   When the screen data G generated and transmitted by the server device 10 is received in the switching destination client device (B) 20b (step B9), the screen data G is drawn in the frame buffer RAM 25 and displayed on the display device. 26 (step B10).

これにより、前記切替元のクライアント装置(A)20aから切り替えられた社内のクライアント装置(B)20bでは、同一ユーザの入力操作に応じて、サーバ装置10にて継続的に実行されるアプリケーションプログラムに従い生成された画面データGが受信され、表示装置26に表示される(ステップB7〜B10(S6〜S8))。   As a result, the in-house client device (B) 20b switched from the switching source client device (A) 20a follows the application program continuously executed by the server device 10 in response to an input operation by the same user. The generated screen data G is received and displayed on the display device 26 (steps B7 to B10 (S6 to S8)).

したがって、前記構成のSBCシステムによれば、例えば外出先でサーバ装置10と接続して使用していたクライアント装置(A:切替元)20aを、社内のクライアント装置(B:切替先)20bにその接続を切り替えて継続的に使用したい場合に、クライアント装置同士の通信手段(29b)により、切替先のクライアント装置(B)20bから切替元のクライアント装置(A)20aへ直接、ユーザ操作等に応じた切替通知信号(含む端末情報)を送信させる。すると、この切替通知信号は前記切替元のクライアント装置(A)20aにより転送されてサーバ装置10へ送信される。この際、切替元のクライアント装置(A)20aは、現在表示中の画面データGを、前記切替先のクライアント装置(B)20bの端末情報に応じてリサイズし、当該切替先のクライアント装置(B)20bへ送信して表示させる。一方、サーバ装置10において、前記切替元のクライアント装置(A)20aにより転送された前記切替先のクライアント装置(B)20bからの切替通知信号が受信されると、その時点のアプリケーションの動作状態が保存された後、前記切替元のクライアント装置(A)20aから切替先のクライアント装置(B)20bへと接続が切り替えられる。すると、前記切替元のクライアント装置(A)20aの切り替え前に保存されたアプリケーションの動作状態が復元され、切替先のクライアント装置(B)20bでは切り替え前からの作業を継続的に実行可能になる。   Therefore, according to the SBC system having the above-described configuration, for example, a client device (A: switching source) 20a that has been used by connecting to the server device 10 when going out is used as an in-house client device (B: switching destination) 20b. When it is desired to continuously use the connection by switching the connection, the communication means (29b) between the client apparatuses directly responds to the switching source client apparatus (A) 20a from the switching destination client apparatus (B) 20b according to a user operation or the like. Switch notification signal (including terminal information) is transmitted. Then, the switching notification signal is transferred by the switching source client device (A) 20 a and transmitted to the server device 10. At this time, the switching source client device (A) 20a resizes the screen data G currently being displayed according to the terminal information of the switching destination client device (B) 20b, and the switching destination client device (B) ) Send to 20b and display. On the other hand, in the server device 10, when the switching notification signal from the switching destination client device (B) 20b transferred by the switching source client device (A) 20a is received, the operation state of the application at that time is changed. After being saved, the connection is switched from the switching source client device (A) 20a to the switching destination client device (B) 20b. Then, the operation state of the application saved before the switching of the switching source client device (A) 20a is restored, and the switching destination client device (B) 20b can continuously execute the work from before the switching. .

このため、同一ユーザがサーバ装置20と接続中のクライアント装置(A)20aを別のクライアント装置(B)20bへ切り替えて使用する場合に、その都度ユーザがログオフ操作とログオン操作とによる切替作業を行う必要なく、非常に簡単に接続を切り替えて、切り替え前からの作業を継続的に実行することができる。   For this reason, when the same user switches the client device (A) 20a connected to the server device 20 to another client device (B) 20b and uses it, the user performs a switching operation by a logoff operation and a logon operation each time. There is no need to do so, and the connection can be switched very easily and the work from before the switching can be continuously executed.

なお、前記実施形態では、切替元のクライアント装置(A)20aにて表示されている画面データGを、切替先のクライアント装置(B)20bの端末情報(表示画面サイズ等)に合わせてリサイズ(拡大/縮小)する処理を、前記切替元のクライアント装置(A)20aにおいて実行する構成とした。   In the embodiment, the screen data G displayed on the switching source client device (A) 20a is resized according to the terminal information (display screen size etc.) of the switching destination client device (B) 20b. The enlargement / reduction processing is executed in the switching source client device (A) 20a.

これに対し、切替先のクライアント装置(B)20bからその端末情報を含む切替通知信号が、切替元のクライアント装置(A)20aに受信された際に、当該切替元のクライアント装置(A)20aにおいて、前記切替先のクライアント装置(B)20bとのCPU性能を比較する。そして、切替元のクライアント装置(A)20aの方が高性能な場合には、当該切替元のクライアント装置(A)20aにおいてリサイズ処理した画面データG′を、切替先のクライアント装置(B)20bへ送信して表示させる。逆に、切替先のクライアント装置(A)20aの方が高性能な場合には、切替元のクライアント装置(A)20aにて表示されている画面データGを、切替先のクライアント装置(B)20bへ送信した後に、当該切替先のクライアント装置(B)20bにおいてリサイズ処理した画面データG′を表示する構成としてもよい。   In contrast, when a switching notification signal including the terminal information is received from the switching destination client device (B) 20b by the switching source client device (A) 20a, the switching source client device (A) 20a. The CPU performance of the switching destination client device (B) 20b is compared. If the switching source client device (A) 20a has higher performance, the screen data G ′ resized in the switching source client device (A) 20a is transferred to the switching destination client device (B) 20b. Send to and display. On the contrary, when the switching destination client device (A) 20a has higher performance, the screen data G displayed on the switching source client device (A) 20a is converted to the switching destination client device (B). After transmission to 20b, the screen data G ′ that has been resized in the switching destination client device (B) 20b may be displayed.

また、前記実施形態における画面データGのリサイズ処理は、ソフトウエア処理により実行する構成としたが、ハードウエアにより高速に実行する構成としてもよい。   Further, the resizing process of the screen data G in the above embodiment is configured to be executed by software processing, but may be configured to be executed at high speed by hardware.

なお、前記実施形態において記載したSBCシステムによる各処理の手法、すなわち、図6のフローチャートに示すサーバ装置10によるサーバ処理、図7のフローチャートに示す前記サーバ処理に伴うクライアント切替処理、図8のフローチャートに示す接続中のクライアント装置20a(20b)によるクライアント処理、図9のフローチャートに示す前記接続中のクライアント処理に伴う画面リサイズ処理、図10のフローチャートに示す切替先のクライアント装置20b(20a)によるクライアント処理等の各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード(ROMカード、RAMカード等)、磁気ディスク(フロッピディスク、ハードディスク等)、光ディスク(CD−ROM、DVD等)、半導体メモリ等の外部記憶装置18,28の媒体に格納して配布することができる。そして、サーバ装置10やクライアント装置20a,20b,…のコンピュータ(CPU11,21)は、この外部記憶装置18,28の媒体に記憶されたプログラムを記憶装置(フラッシュROM13,23やRAM14,24)に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記実施形態において説明した各クライアント装置20a,20b,…間でのサーバ装置10との接続切替機能を実現し、前述した手法による同様の処理を実行することができる。   Note that each processing method by the SBC system described in the embodiment, that is, server processing by the server device 10 shown in the flowchart of FIG. 6, client switching processing accompanying the server processing shown in the flowchart of FIG. 7, flowchart of FIG. Client processing by the connected client device 20a (20b) shown in FIG. 9, screen resizing processing accompanying the client processing during connection shown in the flowchart of FIG. 9, and client by the switching destination client device 20b (20a) shown in the flowchart of FIG. Each method such as processing is a program that can be executed by a computer, such as a memory card (ROM card, RAM card, etc.), a magnetic disk (floppy disk, hard disk, etc.), an optical disk (CD-ROM, DVD, etc.). ), Can be distributed and stored in the medium of the external storage device 18, 28 such as a semiconductor memory. The computers (CPUs 11 and 21) of the server device 10 and the client devices 20a, 20b,... Store the programs stored in the media of the external storage devices 18 and 28 in the storage devices (flash ROMs 13 and 23 and RAMs 14 and 24). The operation is controlled by the read program, and the connection switching function with the server device 10 between the client devices 20a, 20b,... Described in the above embodiment is realized, and the same method as described above is used. Processing can be executed.

また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク(N)上を伝送させることができ、この通信ネットワーク(N)に接続されたコンピュータ装置(プログラムサーバ)から前記のプログラムデータを取り込んで記憶装置(フラッシュROM13,23やRAM14,24)に記憶させ、前述した各クライアント装置20a,20b,…間でのサーバ装置10との接続切替機能を実現することもできる。   Further, program data for realizing each of the above methods can be transmitted on the communication network (N) in the form of a program code, and from a computer device (program server) connected to the communication network (N). The program data is taken in and stored in a storage device (flash ROM 13, 23 or RAM 14, 24), and the above-described connection switching function with the server device 10 between the client devices 20a, 20b,. .

なお、本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が異なる形態にして組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。   Note that the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the invention at the stage of implementation. Further, each of the embodiments includes inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some constituent elements are deleted from all the constituent elements shown in each embodiment or some constituent elements are combined in different forms, the problems described in the column of the problem to be solved by the invention If the effects described in the column “Effects of the Invention” can be obtained, a configuration in which these constituent requirements are deleted or combined can be extracted as an invention.

10 …サーバ装置
20a,20b…クライアント装置
11、21…CPU
12、22…バス
13、23…ROM
13a,23a…プログラムメモリ
14、24…RAM
14a…クライアント用フレームバッファRAM
14b…アプリケーション動作状態メモリ
15、25…フレームバッファRAM
16、26…表示装置
17、27…入力装置
18、28…外部記憶装置
19、29a…通信I/F(ネットワーク通信用)
29b…通信I/F(クライアント間通信用)
N …通信ネットワーク
G …表示用画面データ
G′…表示用画面データ(リサイズ後)
DESCRIPTION OF SYMBOLS 10 ... Server apparatus 20a, 20b ... Client apparatus 11, 21 ... CPU
12, 22 ... Bus 13, 23 ... ROM
13a, 23a ... Program memory 14, 24 ... RAM
14a: Client frame buffer RAM
14b ... Application operation state memory 15, 25 ... Frame buffer RAM
16, 26 ... Display device 17, 27 ... Input device 18, 28 ... External storage device 19, 29a ... Communication I / F (for network communication)
29b ... Communication I / F (for communication between clients)
N ... Communication network G ... Display screen data G '... Display screen data (after resizing)

本発明は、情報管理装置から情報を受信する端末装置切り替える際は、その情報を維持しながらり替えることが可能になることを目的とする。 The present invention, when switching the terminal device to receive information from the information management device is intended to be possible to switch while maintaining the information.

請求項1記載の発明は、情報管理装置と通信接続で情報通信を行う端末装置であって、当該端末装置が前記情報管理装置と通信接続されている状態その情報管理装置との通信接続の接続先を当該端末装置から第2端末装置へ切り替えることの指示を取得する指示取得手段と、前記指示取得手段で示を取得した際は、その切り替え時において前記第2端末装置へ伝達すべき当該端末装置における情報を特定する特定手段と、前記特定手段で特定された特定情報を前記第2端末装置で出力させるべく当該第2端末装置に対して転送する転送手段と、を備えたことを特徴とする。
請求項3記載の発明は、情報管理装置から情報を受信して出力する端末装置であって、前記情報管理装置から第1情報を受信して出力している状態において、その受信した第1情報に対応する第2情報を第2端末装置が前記情報管理装置から受信することの指示を取得する指示取得手段と、前記指示取得手段で取得した指示に基づいて、前記第1情報に対応する第2情報を前記情報管理装置が前記第2端末装置へ直接送信することを可能とする要求を当該情報管理装置へ送信する要求送信手段と、前記指示取得手段で前記指示を取得した時点において当該端末装置で出力されていた第1情報を特定し、その特定された特定情報に対応する情報を前記第2端末装置で出力させるべく、前記情報管理装置が前記第2端末装置へ情報を送信するのに先だって、前記特定情報を当該第2端末装置に対して転送する転送手段と、を備えたことを特徴とする。
請求項5記載の発明は、情報管理装置から情報を受信して出力する端末装置であって、前記情報管理装置から表示情報を受信して表示出力している状態において、その表示情報の表示出力先を第2端末装置へ切り替えることの指示を取得する指示取得手段と、前記指示取得手段で指示を取得した際は、当該指示を取得した時点において当該端末装置で表示されていた表示情報を前記第2端末装置で表示出力させるべく当該表示情報を前記第2端末装置に対して順次転送する転送手段と、当該端末装置で表示出力される前記表示情報の内で、前記転送手段により前記第2端末装置に順次転送されて表示された表示情報に対応する部分の部分表示情報を、当該端末装置で表示される前記表示情報の中から順次消去して表示させる表示制御手段と、を備えたことを特徴とする。
The invention according to claim 1 is a terminal device that performs information communication with an information management device through communication connection, and the communication connection with the information management device in a state where the terminal device is in communication connection with the information management device an instruction acquisition unit that acquires the connection destination Kotono instruction for switching from the terminal device to the second terminal device, when acquiring the instructions in the instruction acquisition unit may be transmitted to the second terminal apparatus at the time of switching specifying means for specifying information in the terminal device should, further comprising a transfer means for transferring the specifying information to the second terminal device so as to output in the second terminal apparatus specified by said specifying means It is characterized by.
The invention according to claim 3 is a terminal device that receives and outputs information from the information management device, and receives the first information in a state where the first information is received and output from the information management device. Based on the instruction acquired by the second terminal apparatus to receive an instruction from the information management apparatus and the instruction acquired by the instruction acquisition means. 2 request transmitting means for transmitting to the information management apparatus a request that enables the information management apparatus to directly transmit the information to the second terminal apparatus, and the terminal at the time when the instruction acquisition means acquires the instruction. The information management device transmits information to the second terminal device in order to identify the first information output from the device and cause the second terminal device to output information corresponding to the identified specific information. In Because, characterized by comprising a transfer means for transferring the specific information to the second terminal device.
The invention according to claim 5 is a terminal device that receives and outputs information from the information management device, and displays and outputs the display information in a state where the display information is received and displayed from the information management device. An instruction acquisition unit that acquires an instruction to switch the destination to the second terminal device; and when the instruction acquisition unit acquires an instruction, the display information displayed on the terminal device at the time of acquiring the instruction is Transfer means for sequentially transferring the display information to the second terminal device for display output by the second terminal device, and the second information by the transfer means among the display information displayed and output by the terminal device. Display control means for sequentially erasing and displaying the partial display information corresponding to the display information transferred and displayed on the terminal device from the display information displayed on the terminal device; Characterized by comprising.

請求項記載の発明は、情報管理装置との通信接続が可能な端末装置であって、第2端末装置が前記情報管理装置と通信接続されている状態その情報管理装置との通信接続の接続先を前記第2端末装置から当該端末装置へ切り替えることの指示を取得する指示取得手段と、前記指示取得手段で示を取得した際は、その切り替え時において前記第2端末装置が当該端末装置へ伝達すべき情報として特定した特定情報当該第2端末装置から受信する信手段と、前記情報受信手段で受信した前記特定情報を、前記情報管理装置での通信接続の切り替えに先だって出力する出力手段と、を備えたことを特徴とする。
請求項9記載の発明は、情報管理装置から情報を受信して出力する端末装置であって、第2端末装置が前記情報管理装置から第1情報を受信して出力している状態において、その第1情報に対応する第2情報を当該端末装置が前記情報管理装置から受信することの指示を取得する指示取得手段と、前記指示取得手段で取得した指示に基づいて、前記第1情報に対応する第2情報を前記情報管理装置が当該端末装置へ直接送信することを可能とする要求を行った際は、前記指示を取得した時点で前記第2端末装置で出力されていた第1情報を特定情報として特定して当該端末装置で出力させるべく、前記第2端末装置から前記特定情報を受信する受信手段と、前記受信手段で受信した特定情報を、前記情報管理装置からの第2情報を当該端末装置が受信するのに先だって出力する出力手段と、を備えたことを特徴とする。
The invention of claim 6, wherein, there is provided a communication connection terminal device capable of information management device, in a state where the second terminal device is connected for communication with the information management device, communication connection with the information management apparatus an instruction acquisition unit for acquiring the Kotono instruction for switching a connection destination from said second terminal device to the terminal device, when acquiring the instructions in the instruction acquisition unit, the second terminal device the during the switching a receiving means for receiving the identification information identified as the information to be transmitted to the terminal apparatus from the second terminal device, the specific information received by the information receiving means, prior to switching of the communication connection in the information management device Output means for outputting.
The invention according to claim 9 is a terminal device that receives and outputs information from the information management device, and the second terminal device receives and outputs the first information from the information management device. Corresponding to the first information based on the instruction acquisition means for acquiring an instruction for the terminal device to receive the second information corresponding to the first information from the information management apparatus, and the instruction acquired by the instruction acquisition means When the information management device makes a request that enables the information management device to directly transmit the second information to the terminal device, the first information output by the second terminal device at the time of obtaining the instruction is received. Receiving means for receiving the specific information from the second terminal apparatus, and specifying information received by the receiving means as second information from the information management apparatus to be specified as specific information and output by the terminal apparatus. The terminal equipment There is characterized in that and an output means for outputting prior to receiving.

本発明、情報管理装置から情報を受信する端末装置切り替える際は、その情報を維持しながらり替えることが可能になることが可能になる。

The present invention, when switching the terminal device to receive information from the information management apparatus, it is possible to it is possible to switch while maintaining the information.

Claims (9)

情報管理装置から情報を受信して出力する端末装置であって、
前記情報管理装置から情報を受信して出力している状態において、前記情報管理装置からの情報送信先を第2端末装置へ切り替える切替指示を取得する指示取得手段と、
前記指示取得手段で切替指示を取得した際は、当該端末装置で出力されていた情報を前記第2端末装置で出力させるべく当該情報を変換する情報変換手段と、
前記指示取得手段で切替指示を取得した際は、前記情報管理装置からの情報切替が完了するまでの間、前記情報を前記第2端末装置で出力させるべく当該情報を前記第2端末装置に対して送信する送信手段と、
を備えたことを特徴とする端末装置。
A terminal device that receives and outputs information from an information management device,
Instruction acquisition means for acquiring a switching instruction to switch the information transmission destination from the information management device to the second terminal device in a state in which information is received and output from the information management device;
When the switching instruction is acquired by the instruction acquisition means, information conversion means for converting the information to be output by the second terminal device, which has been output by the terminal device;
When the switching instruction is acquired by the instruction acquisition means, the information is sent to the second terminal device so that the information is output by the second terminal device until the information switching from the information management device is completed. A transmission means for transmitting
A terminal device comprising:
当該端末装置は、前記情報管理装置から情報を受信している受信中の端末装置であり、その情報の受信先を前記第2端末装置へ切り替える際の切替元の端末装置であり、
前記情報変換手段は、当該端末装置で表示出力されていた情報を前記第2端末装置で表示出力される情報のサイズに変換する、
ことを特徴とする請求項1に記載の端末装置。
The terminal device is a receiving terminal device that is receiving information from the information management device, and is a switching source terminal device when switching the reception destination of the information to the second terminal device,
The information conversion means converts the information displayed and output on the terminal device into the size of information displayed and output on the second terminal device.
The terminal device according to claim 1.
前記指示取得手段は、前記切替指示を前記第2端末装置から取得し、前記情報管理装置に対して前記情報送信先を前記第2端末装置へ切り替えることの指示を行う、
ことを特徴とする請求項1又は2に記載の端末装置。
The instruction acquisition means acquires the switching instruction from the second terminal device, and instructs the information management device to switch the information transmission destination to the second terminal device.
The terminal device according to claim 1, wherein the terminal device is a terminal device.
情報管理装置から情報を受信して出力する端末装置であって、
第2端末装置が前記情報管理装置から情報を受信して出力している状態において、前記情報管理装置からの情報送信先を前記第2端末装置から当該端末装置へ切り替える切替指示を取得する指示取得手段と、
前記指示取得手段で切替指示を取得した際は、前記情報管理装置からの情報切替が完了するまでの間、前記第2端末装置で出力されていたその時点での情報を当該端末装置で出力させるべく、前記第2端末装置から、その時点での前記情報を受信する情報受信手段と、
前記情報受信手段で受信した情報を出力し、その後、前記情報管理装置での情報送信先の切替が完了した後にあっては前記情報管理装置からの新たな情報を受信して出力する出力手段と、
を備えたことを特徴とする端末装置。
A terminal device that receives and outputs information from an information management device,
Obtaining an instruction to obtain a switching instruction for switching the information transmission destination from the information management apparatus from the second terminal apparatus to the terminal apparatus in a state where the second terminal apparatus receives and outputs information from the information management apparatus Means,
When the switching instruction is acquired by the instruction acquiring means, the information at that time that has been output by the second terminal device is output by the terminal device until the information switching from the information management device is completed. Therefore, information receiving means for receiving the information at that time from the second terminal device,
Output means for outputting the information received by the information receiving means, and then receiving and outputting new information from the information management apparatus after switching of the information transmission destination in the information management apparatus is completed; ,
A terminal device comprising:
当該端末装置は、前記情報管理装置から情報を受信している前記第2端末装置から、その情報の受信先を当該端末装置へ切り替える際の切替先の端末装置であり、
前記情報受信手段は、前記第2端末装置が受信した情報を当該端末装置で出力可能に変換された情報を前記第2端末装置から受信する、
ことを特徴とする請求項4に記載の端末装置。
The terminal device is a terminal device that is a switching destination when switching the reception destination of the information from the second terminal device receiving information from the information management device to the terminal device,
The information receiving means receives, from the second terminal device, information obtained by converting the information received by the second terminal device so that the information can be output by the terminal device.
The terminal device according to claim 4.
当該端末装置は、前記情報管理装置から受信した情報、あるいは前記第2端末装置から受信した情報を表示出力し、
前記情報受信手段は、当該端末装置で表示出力されるサイズに変換された情報を受信する、
ことを特徴とする請求項4又は5に記載の端末装置。
The terminal device displays and outputs information received from the information management device or information received from the second terminal device,
The information receiving means receives information converted to a size displayed and output by the terminal device.
The terminal device according to claim 4 or 5, wherein
前記指示取得手段は、前記切替指示をユーザから切替操作に基づいて取得し、その切替指示を、前記情報管理装置と接続中にある前記第2端末装置を介して行う、
ことを特徴とする請求項4〜6の何れかに記載の端末装置。
The instruction acquisition means acquires the switching instruction from a user based on a switching operation, and performs the switching instruction via the second terminal device connected to the information management device.
The terminal device according to any one of claims 4 to 6.
情報管理装置から情報を受信して出力する端末装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
前記情報管理装置から情報を受信して出力している状態において、前記情報管理装置からの情報送信先を第2端末装置へ切り替える切替指示を取得する指示取得手段、
前記指示取得手段で切替指示を取得した際は、当該端末装置で出力されていた情報を前記第2端末装置で出力させるべく当該情報を変換する情報変換手段、
前記指示取得手段で切替指示を取得した際は、前記情報管理装置からの情報切替が完了するまでの間、前記情報を前記第2端末装置で出力させるべく当該情報を前記第2端末装置に対して送信する送信手段、
として機能させるようにしたコンピュータ読み取り可能なプログラム。
A program for controlling a computer of a terminal device that receives and outputs information from an information management device,
The computer,
Instruction acquisition means for acquiring a switching instruction to switch the information transmission destination from the information management device to the second terminal device in a state in which information is received and output from the information management device;
When the switching instruction is acquired by the instruction acquisition means, information conversion means for converting the information to be output by the second terminal apparatus to the information output from the terminal apparatus;
When the switching instruction is acquired by the instruction acquisition means, the information is sent to the second terminal device so that the information is output by the second terminal device until the information switching from the information management device is completed. Transmitting means for transmitting
A computer-readable program designed to function as a computer.
情報管理装置から情報を受信して出力する端末装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
第2端末装置が前記情報管理装置から情報を受信して出力している状態において、前記情報管理装置からの情報送信先を前記第2端末装置から当該端末装置へ切り替える切替指示を取得する指示取得手段、
前記指示取得手段で切替指示を取得した際は、前記情報管理装置からの情報切替が完了するまでの間、前記第2端末装置で出力されていたその時点での情報を当該端末装置で出力させるべく、前記第2端末装置から、その時点での前記情報を受信する情報受信手段、
前記情報受信手段で受信した情報を出力し、その後、前記情報管理装置での情報送信先の切替が完了した後にあっては前記情報管理装置からの新たな情報を受信して出力する出力手段、
として機能させるようにしたコンピュータ読み取り可能なプログラム。
A program for controlling a computer of a terminal device that receives and outputs information from an information management device,
The computer,
Obtaining an instruction to obtain a switching instruction for switching the information transmission destination from the information management apparatus from the second terminal apparatus to the terminal apparatus in a state where the second terminal apparatus receives and outputs information from the information management apparatus means,
When the switching instruction is acquired by the instruction acquiring means, the information at that time that has been output by the second terminal device is output by the terminal device until the information switching from the information management device is completed. Therefore, information receiving means for receiving the information at that time from the second terminal device,
An output means for outputting the information received by the information receiving means, and then receiving and outputting new information from the information management apparatus after switching of the information transmission destination in the information management apparatus is completed;
A computer-readable program designed to function as a computer.
JP2014166015A 2014-08-18 2014-08-18 Terminal device and program Active JP6044604B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014166015A JP6044604B2 (en) 2014-08-18 2014-08-18 Terminal device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014166015A JP6044604B2 (en) 2014-08-18 2014-08-18 Terminal device and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2013040268A Division JP5601387B2 (en) 2013-03-01 2013-03-01 Terminal device and program

Publications (2)

Publication Number Publication Date
JP2015008001A true JP2015008001A (en) 2015-01-15
JP6044604B2 JP6044604B2 (en) 2016-12-14

Family

ID=52338178

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014166015A Active JP6044604B2 (en) 2014-08-18 2014-08-18 Terminal device and program

Country Status (1)

Country Link
JP (1) JP6044604B2 (en)

Cited By (116)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018507483A (en) * 2015-03-08 2018-03-15 アップル インコーポレイテッド Virtual assistant continuity
US10178234B2 (en) 2014-05-30 2019-01-08 Apple, Inc. User interface for phone call routing among devices
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10334054B2 (en) 2016-05-19 2019-06-25 Apple Inc. User interface for a device requesting remote authorization
CN110131022A (en) * 2018-02-09 2019-08-16 本田技研工业株式会社 Saddle-ride type vehicle
US10390213B2 (en) 2014-09-30 2019-08-20 Apple Inc. Social reminders
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10417344B2 (en) 2014-05-30 2019-09-17 Apple Inc. Exemplar-based natural language processing
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10419933B2 (en) 2011-09-29 2019-09-17 Apple Inc. Authentication with secondary approver
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
US10438595B2 (en) 2014-09-30 2019-10-08 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10453443B2 (en) 2014-09-30 2019-10-22 Apple Inc. Providing an indication of the suitability of speech recognition
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10484384B2 (en) 2011-09-29 2019-11-19 Apple Inc. Indirect authentication
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10529332B2 (en) 2015-03-08 2020-01-07 Apple Inc. Virtual assistant activation
US10580409B2 (en) 2016-06-11 2020-03-03 Apple Inc. Application integration with a digital assistant
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10657966B2 (en) 2014-05-30 2020-05-19 Apple Inc. Better resolution when referencing to concepts
US10681212B2 (en) 2015-06-05 2020-06-09 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10692504B2 (en) 2010-02-25 2020-06-23 Apple Inc. User profiling for voice input processing
US10699717B2 (en) 2014-05-30 2020-06-30 Apple Inc. Intelligent assistant for home automation
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10741181B2 (en) 2017-05-09 2020-08-11 Apple Inc. User interface for correcting recognition errors
US10741185B2 (en) 2010-01-18 2020-08-11 Apple Inc. Intelligent automated assistant
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US10769385B2 (en) 2013-06-09 2020-09-08 Apple Inc. System and method for inferring user intent from speech inputs
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US10866731B2 (en) 2014-05-30 2020-12-15 Apple Inc. Continuity of applications across devices
US10878809B2 (en) 2014-05-30 2020-12-29 Apple Inc. Multi-command single utterance input method
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10909171B2 (en) 2017-05-16 2021-02-02 Apple Inc. Intelligent automated assistant for media exploration
US10930282B2 (en) 2015-03-08 2021-02-23 Apple Inc. Competing devices responding to voice triggers
US10942702B2 (en) 2016-06-11 2021-03-09 Apple Inc. Intelligent device arbitration and control
US10942703B2 (en) 2015-12-23 2021-03-09 Apple Inc. Proactive assistance based on dialog communication between devices
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10996917B2 (en) 2019-05-31 2021-05-04 Apple Inc. User interfaces for audio media control
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11009970B2 (en) 2018-06-01 2021-05-18 Apple Inc. Attention aware virtual assistant dismissal
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US11037565B2 (en) 2016-06-10 2021-06-15 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US11037150B2 (en) 2016-06-12 2021-06-15 Apple Inc. User interfaces for transactions
US11048473B2 (en) 2013-06-09 2021-06-29 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US11126704B2 (en) 2014-08-15 2021-09-21 Apple Inc. Authenticated device used to unlock another device
US11127397B2 (en) 2015-05-27 2021-09-21 Apple Inc. Device voice control
US11126400B2 (en) 2015-09-08 2021-09-21 Apple Inc. Zero latency digital assistant
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11169616B2 (en) 2018-05-07 2021-11-09 Apple Inc. Raise to speak
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11283916B2 (en) 2017-05-16 2022-03-22 Apple Inc. Methods and interfaces for configuring a device in accordance with an audio tone signal
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
US11343335B2 (en) 2014-05-29 2022-05-24 Apple Inc. Message processing by subscriber app prior to message forwarding
US11348582B2 (en) 2008-10-02 2022-05-31 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11380310B2 (en) 2017-05-12 2022-07-05 Apple Inc. Low-latency intelligent automated assistant
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US11405466B2 (en) 2017-05-12 2022-08-02 Apple Inc. Synchronization and task delegation of a digital assistant
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US11467802B2 (en) 2017-05-11 2022-10-11 Apple Inc. Maintaining privacy of personal information
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11500672B2 (en) 2015-09-08 2022-11-15 Apple Inc. Distributed personal assistant
US11516537B2 (en) 2014-06-30 2022-11-29 Apple Inc. Intelligent automated assistant for TV user interactions
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US11539831B2 (en) 2013-03-15 2022-12-27 Apple Inc. Providing remote interactions with host device using a wireless device
US11580990B2 (en) 2017-05-12 2023-02-14 Apple Inc. User-specific acoustic models
US11599331B2 (en) 2017-05-11 2023-03-07 Apple Inc. Maintaining privacy of personal information
US11620103B2 (en) 2019-05-31 2023-04-04 Apple Inc. User interfaces for audio media control
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11656884B2 (en) 2017-01-09 2023-05-23 Apple Inc. Application integration with a digital assistant
US11671920B2 (en) 2007-04-03 2023-06-06 Apple Inc. Method and system for operating a multifunction portable electronic device using voice-activation
US11683408B2 (en) 2017-05-16 2023-06-20 Apple Inc. Methods and interfaces for home media control
US11696060B2 (en) 2020-07-21 2023-07-04 Apple Inc. User identification using headphones
US11710482B2 (en) 2018-03-26 2023-07-25 Apple Inc. Natural assistant interaction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11790914B2 (en) 2019-06-01 2023-10-17 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11838734B2 (en) 2020-07-20 2023-12-05 Apple Inc. Multi-device audio adjustment coordination
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US11914848B2 (en) 2020-05-11 2024-02-27 Apple Inc. Providing relevant data items based on context
US11928604B2 (en) 2005-09-08 2024-03-12 Apple Inc. Method and apparatus for building an intelligent automated assistant
US11954405B2 (en) 2022-11-07 2024-04-09 Apple Inc. Zero latency digital assistant

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000020464A (en) * 1998-06-29 2000-01-21 Nec Commun Syst Ltd System for preserving picture setting parameter information
JP2003298796A (en) * 2002-04-05 2003-10-17 Minolta Co Ltd Image communication system, image transmission device, and image reception device
JP2004362062A (en) * 2003-06-02 2004-12-24 Kddi Corp Network system, data download continuation method in terminal switching in the network system, and its program
JP2005234484A (en) * 2004-02-23 2005-09-02 Masashi Kamata Picture display device
JP2005250867A (en) * 2004-03-04 2005-09-15 Sony Corp Control method for information reproduction system, information reproduction system, information provision device, information reproduction device and information provision control program
JP2007140712A (en) * 2005-11-15 2007-06-07 Hitachi Software Eng Co Ltd Client terminal switching method in server/client system
WO2008111112A1 (en) * 2007-03-09 2008-09-18 Pioneer Corporation Video processing device, display device control method, and program

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000020464A (en) * 1998-06-29 2000-01-21 Nec Commun Syst Ltd System for preserving picture setting parameter information
JP2003298796A (en) * 2002-04-05 2003-10-17 Minolta Co Ltd Image communication system, image transmission device, and image reception device
JP2004362062A (en) * 2003-06-02 2004-12-24 Kddi Corp Network system, data download continuation method in terminal switching in the network system, and its program
JP2005234484A (en) * 2004-02-23 2005-09-02 Masashi Kamata Picture display device
JP2005250867A (en) * 2004-03-04 2005-09-15 Sony Corp Control method for information reproduction system, information reproduction system, information provision device, information reproduction device and information provision control program
JP2007140712A (en) * 2005-11-15 2007-06-07 Hitachi Software Eng Co Ltd Client terminal switching method in server/client system
WO2008111112A1 (en) * 2007-03-09 2008-09-18 Pioneer Corporation Video processing device, display device control method, and program

Cited By (180)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11928604B2 (en) 2005-09-08 2024-03-12 Apple Inc. Method and apparatus for building an intelligent automated assistant
US11671920B2 (en) 2007-04-03 2023-06-06 Apple Inc. Method and system for operating a multifunction portable electronic device using voice-activation
US11900936B2 (en) 2008-10-02 2024-02-13 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11348582B2 (en) 2008-10-02 2022-05-31 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10741185B2 (en) 2010-01-18 2020-08-11 Apple Inc. Intelligent automated assistant
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US10692504B2 (en) 2010-02-25 2020-06-23 Apple Inc. User profiling for voice input processing
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US11200309B2 (en) 2011-09-29 2021-12-14 Apple Inc. Authentication with secondary approver
US11755712B2 (en) 2011-09-29 2023-09-12 Apple Inc. Authentication with secondary approver
US10419933B2 (en) 2011-09-29 2019-09-17 Apple Inc. Authentication with secondary approver
US10516997B2 (en) 2011-09-29 2019-12-24 Apple Inc. Authentication with secondary approver
US10484384B2 (en) 2011-09-29 2019-11-19 Apple Inc. Indirect authentication
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11321116B2 (en) 2012-05-15 2022-05-03 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11862186B2 (en) 2013-02-07 2024-01-02 Apple Inc. Voice trigger for a digital assistant
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US10978090B2 (en) 2013-02-07 2021-04-13 Apple Inc. Voice trigger for a digital assistant
US11636869B2 (en) 2013-02-07 2023-04-25 Apple Inc. Voice trigger for a digital assistant
US11557310B2 (en) 2013-02-07 2023-01-17 Apple Inc. Voice trigger for a digital assistant
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11539831B2 (en) 2013-03-15 2022-12-27 Apple Inc. Providing remote interactions with host device using a wireless device
US11048473B2 (en) 2013-06-09 2021-06-29 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US11727219B2 (en) 2013-06-09 2023-08-15 Apple Inc. System and method for inferring user intent from speech inputs
US10769385B2 (en) 2013-06-09 2020-09-08 Apple Inc. System and method for inferring user intent from speech inputs
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
US11343335B2 (en) 2014-05-29 2022-05-24 Apple Inc. Message processing by subscriber app prior to message forwarding
US10878809B2 (en) 2014-05-30 2020-12-29 Apple Inc. Multi-command single utterance input method
US10616416B2 (en) 2014-05-30 2020-04-07 Apple Inc. User interface for phone call routing among devices
US10178234B2 (en) 2014-05-30 2019-01-08 Apple, Inc. User interface for phone call routing among devices
US10699717B2 (en) 2014-05-30 2020-06-30 Apple Inc. Intelligent assistant for home automation
US10417344B2 (en) 2014-05-30 2019-09-17 Apple Inc. Exemplar-based natural language processing
US11907013B2 (en) 2014-05-30 2024-02-20 Apple Inc. Continuity of applications across devices
US11256294B2 (en) 2014-05-30 2022-02-22 Apple Inc. Continuity of applications across devices
US11699448B2 (en) 2014-05-30 2023-07-11 Apple Inc. Intelligent assistant for home automation
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10866731B2 (en) 2014-05-30 2020-12-15 Apple Inc. Continuity of applications across devices
US11670289B2 (en) 2014-05-30 2023-06-06 Apple Inc. Multi-command single utterance input method
US11257504B2 (en) 2014-05-30 2022-02-22 Apple Inc. Intelligent assistant for home automation
US10714095B2 (en) 2014-05-30 2020-07-14 Apple Inc. Intelligent assistant for home automation
US11810562B2 (en) 2014-05-30 2023-11-07 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10657966B2 (en) 2014-05-30 2020-05-19 Apple Inc. Better resolution when referencing to concepts
US11838579B2 (en) 2014-06-30 2023-12-05 Apple Inc. Intelligent automated assistant for TV user interactions
US11516537B2 (en) 2014-06-30 2022-11-29 Apple Inc. Intelligent automated assistant for TV user interactions
US11126704B2 (en) 2014-08-15 2021-09-21 Apple Inc. Authenticated device used to unlock another device
US10453443B2 (en) 2014-09-30 2019-10-22 Apple Inc. Providing an indication of the suitability of speech recognition
US10438595B2 (en) 2014-09-30 2019-10-08 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10390213B2 (en) 2014-09-30 2019-08-20 Apple Inc. Social reminders
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
JP2018507483A (en) * 2015-03-08 2018-03-15 アップル インコーポレイテッド Virtual assistant continuity
US10529332B2 (en) 2015-03-08 2020-01-07 Apple Inc. Virtual assistant activation
US11087759B2 (en) 2015-03-08 2021-08-10 Apple Inc. Virtual assistant activation
US11842734B2 (en) 2015-03-08 2023-12-12 Apple Inc. Virtual assistant activation
US10930282B2 (en) 2015-03-08 2021-02-23 Apple Inc. Competing devices responding to voice triggers
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US11127397B2 (en) 2015-05-27 2021-09-21 Apple Inc. Device voice control
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US10681212B2 (en) 2015-06-05 2020-06-09 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US11947873B2 (en) 2015-06-29 2024-04-02 Apple Inc. Virtual assistant for media playback
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11126400B2 (en) 2015-09-08 2021-09-21 Apple Inc. Zero latency digital assistant
US11550542B2 (en) 2015-09-08 2023-01-10 Apple Inc. Zero latency digital assistant
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US11500672B2 (en) 2015-09-08 2022-11-15 Apple Inc. Distributed personal assistant
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US11809886B2 (en) 2015-11-06 2023-11-07 Apple Inc. Intelligent automated assistant in a messaging environment
US11886805B2 (en) 2015-11-09 2024-01-30 Apple Inc. Unconventional virtual assistant interactions
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10942703B2 (en) 2015-12-23 2021-03-09 Apple Inc. Proactive assistance based on dialog communication between devices
US11206309B2 (en) 2016-05-19 2021-12-21 Apple Inc. User interface for remote authorization
US10334054B2 (en) 2016-05-19 2019-06-25 Apple Inc. User interface for a device requesting remote authorization
US10749967B2 (en) 2016-05-19 2020-08-18 Apple Inc. User interface for remote authorization
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US11657820B2 (en) 2016-06-10 2023-05-23 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US11037565B2 (en) 2016-06-10 2021-06-15 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10942702B2 (en) 2016-06-11 2021-03-09 Apple Inc. Intelligent device arbitration and control
US11152002B2 (en) 2016-06-11 2021-10-19 Apple Inc. Application integration with a digital assistant
US11809783B2 (en) 2016-06-11 2023-11-07 Apple Inc. Intelligent device arbitration and control
US11749275B2 (en) 2016-06-11 2023-09-05 Apple Inc. Application integration with a digital assistant
US10580409B2 (en) 2016-06-11 2020-03-03 Apple Inc. Application integration with a digital assistant
US11037150B2 (en) 2016-06-12 2021-06-15 Apple Inc. User interfaces for transactions
US11900372B2 (en) 2016-06-12 2024-02-13 Apple Inc. User interfaces for transactions
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US11656884B2 (en) 2017-01-09 2023-05-23 Apple Inc. Application integration with a digital assistant
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10741181B2 (en) 2017-05-09 2020-08-11 Apple Inc. User interface for correcting recognition errors
US11599331B2 (en) 2017-05-11 2023-03-07 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US11467802B2 (en) 2017-05-11 2022-10-11 Apple Inc. Maintaining privacy of personal information
US11837237B2 (en) 2017-05-12 2023-12-05 Apple Inc. User-specific acoustic models
US11580990B2 (en) 2017-05-12 2023-02-14 Apple Inc. User-specific acoustic models
US11380310B2 (en) 2017-05-12 2022-07-05 Apple Inc. Low-latency intelligent automated assistant
US11862151B2 (en) 2017-05-12 2024-01-02 Apple Inc. Low-latency intelligent automated assistant
US11405466B2 (en) 2017-05-12 2022-08-02 Apple Inc. Synchronization and task delegation of a digital assistant
US11538469B2 (en) 2017-05-12 2022-12-27 Apple Inc. Low-latency intelligent automated assistant
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US11683408B2 (en) 2017-05-16 2023-06-20 Apple Inc. Methods and interfaces for home media control
US11201961B2 (en) 2017-05-16 2021-12-14 Apple Inc. Methods and interfaces for adjusting the volume of media
US11675829B2 (en) 2017-05-16 2023-06-13 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US11412081B2 (en) 2017-05-16 2022-08-09 Apple Inc. Methods and interfaces for configuring an electronic device to initiate playback of media
US11750734B2 (en) 2017-05-16 2023-09-05 Apple Inc. Methods for initiating output of at least a component of a signal representative of media currently being played back by another device
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11095766B2 (en) 2017-05-16 2021-08-17 Apple Inc. Methods and interfaces for adjusting an audible signal based on a spatial position of a voice command source
US10909171B2 (en) 2017-05-16 2021-02-02 Apple Inc. Intelligent automated assistant for media exploration
US11283916B2 (en) 2017-05-16 2022-03-22 Apple Inc. Methods and interfaces for configuring a device in accordance with an audio tone signal
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
CN110131022A (en) * 2018-02-09 2019-08-16 本田技研工业株式会社 Saddle-ride type vehicle
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US11710482B2 (en) 2018-03-26 2023-07-25 Apple Inc. Natural assistant interaction
US11487364B2 (en) 2018-05-07 2022-11-01 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11900923B2 (en) 2018-05-07 2024-02-13 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11854539B2 (en) 2018-05-07 2023-12-26 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11169616B2 (en) 2018-05-07 2021-11-09 Apple Inc. Raise to speak
US11907436B2 (en) 2018-05-07 2024-02-20 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11630525B2 (en) 2018-06-01 2023-04-18 Apple Inc. Attention aware virtual assistant dismissal
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US10720160B2 (en) 2018-06-01 2020-07-21 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10984798B2 (en) 2018-06-01 2021-04-20 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11009970B2 (en) 2018-06-01 2021-05-18 Apple Inc. Attention aware virtual assistant dismissal
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11431642B2 (en) 2018-06-01 2022-08-30 Apple Inc. Variable latency device coordination
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US11360577B2 (en) 2018-06-01 2022-06-14 Apple Inc. Attention aware virtual assistant dismissal
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11893992B2 (en) 2018-09-28 2024-02-06 Apple Inc. Multi-modal inputs for voice commands
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11783815B2 (en) 2019-03-18 2023-10-10 Apple Inc. Multimodality in digital assistant systems
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11675491B2 (en) 2019-05-06 2023-06-13 Apple Inc. User configurable task triggers
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11705130B2 (en) 2019-05-06 2023-07-18 Apple Inc. Spoken notifications
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11888791B2 (en) 2019-05-21 2024-01-30 Apple Inc. Providing message response suggestions
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US11620103B2 (en) 2019-05-31 2023-04-04 Apple Inc. User interfaces for audio media control
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11755273B2 (en) 2019-05-31 2023-09-12 Apple Inc. User interfaces for audio media control
US10996917B2 (en) 2019-05-31 2021-05-04 Apple Inc. User interfaces for audio media control
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11853646B2 (en) 2019-05-31 2023-12-26 Apple Inc. User interfaces for audio media control
US11360739B2 (en) 2019-05-31 2022-06-14 Apple Inc. User activity shortcut suggestions
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11790914B2 (en) 2019-06-01 2023-10-17 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11914848B2 (en) 2020-05-11 2024-02-27 Apple Inc. Providing relevant data items based on context
US11924254B2 (en) 2020-05-11 2024-03-05 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11838734B2 (en) 2020-07-20 2023-12-05 Apple Inc. Multi-device audio adjustment coordination
US11750962B2 (en) 2020-07-21 2023-09-05 Apple Inc. User identification using headphones
US11696060B2 (en) 2020-07-21 2023-07-04 Apple Inc. User identification using headphones
US11782598B2 (en) 2020-09-25 2023-10-10 Apple Inc. Methods and interfaces for media control with dynamic feedback
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11954405B2 (en) 2022-11-07 2024-04-09 Apple Inc. Zero latency digital assistant

Also Published As

Publication number Publication date
JP6044604B2 (en) 2016-12-14

Similar Documents

Publication Publication Date Title
JP6044604B2 (en) Terminal device and program
US11451619B2 (en) App remote control method and related devices
CN108475221B (en) Method and apparatus for providing a multitasking view
US20180107493A1 (en) Synchronous control method and device via external apparatus
TW201535142A (en) Authentication and pairing of devices using a machine readable code
WO2016142713A1 (en) System for connecting external displays to a mobile device
JP2012079084A (en) Remote desktop system and operation application migration system
CN107959932B (en) Method and device for processing wireless access point information and computer readable storage medium
JP5223802B2 (en) Server-based computing system, server device, client device, and program
CN107038024B (en) Operation configuration method and equipment thereof
JP6488903B2 (en) Screen transfer control system, screen transfer control program, and screen transfer control method
US9326306B2 (en) Interactive remote windows between applications operating within heterogeneous operating systems on mobile and stationary devices
JP5601387B2 (en) Terminal device and program
JP2013210867A (en) Display control apparatus, display control method, program, and display device
CN113617020B (en) Game control method, game control device, storage medium, server and terminal
JP2007122691A (en) Information processor, information processing method and program
JP2007004301A (en) Computer, data processing method, program and communication method
CN107391354A (en) The method and system of automatic monitoring terminal performance, storage device
US9552044B2 (en) Information processing apparatus, information processing system, information processing method, and non-transitory computer readable medium
JP2012133727A (en) Print management system, print management method, program and recording medium
JP2008269525A (en) Terminal unit provided with handwritten input device and document information processing system using the unit
JP2017062645A (en) Image distribution system, image distribution method, and program
JP6266925B2 (en) Control device, control method, and program
US20160080466A1 (en) Information processing apparatus and method of remote operation control
KR102442111B1 (en) Apparatus for configuring virtual network and method thereof

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150721

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150918

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160322

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160511

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161031

R150 Certificate of patent or registration of utility model

Ref document number: 6044604

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150