JP2023053842A - 情報処理装置、情報処理装置の制御方法及びプログラム - Google Patents

Abstract

【課題】ソフトキーの二重表示等によって遠隔操作における操作性が低下することなく、装置のハードキーに対応する遠隔操作を可能にすること。【解決手段】画像形成装置１０２のＶＮＣサーバー３２０は、接続されたモバイル端末１０３のＶＮＣクライアント５２０に応じて、ハードキー６０２に対応するソフトキーを含む操作画面（図７（ｂ））をＶＮＣクライアント５２０に提供するか、ハードキー６０２に対応するソフトキーを含まない操作画面（図７（ａ））をＶＮＣクライアント５２０に提供するかを切り替える（Ｓ８０４～Ｓ８０９）。【選択図】図８

Description

本発明は、外部装置から遠隔操作を受けることが可能な情報処理装置、情報処理の制御方法、及びプログラムに関する。

装置を遠隔操作するリモートオペレーションという機能がある。例えば、ＶＮＣ（Virtual Network Computing）と呼ばれる技術を用いて、ＶＮＣサーバー機能を有する装置を、ＶＮＣクライアント機能を有するＰＣやモバイル端末等の端末から遠隔操作する方法がある。ＶＮＣサーバーとＶＮＣクライアント間の通信には、ＲＦＢ（Remote FrameBuffer）プロトコル（ＲＦＣ６１４３）が使用される。ＶＮＣサーバー機能を有する装置が、ＶＮＣクライアント機能を有する端末に対して操作パネルの操作画面に対応する画面情報を送信する。端末は、受信した画面情報に基づき、装置側の操作画面に対応する画面を表示する。ユーザーは端末に表示された画面上で操作を行なうことで、装置の操作パネルを操作せずとも、装置に処理を実行させることができる。
なお、操作パネル上にハードキーを備えた装置を遠隔操作する場合、ＶＮＣクライアントに該装置の操作画面を表示するだけでは、該装置のハードキーに対応する遠隔操作ができない。

特許文献１には、画像形成装置のハードキーを遠隔操作するために、ハードキーに対応するソフトキー画像を配置したハードキー画面を操作画面と合成した遠隔操作画面を、遠隔操作する端末に提供する技術が提案されている。
また、ＶＮＣクライアント機能を提供する端末側のアプリケーションが、ハードキーに対応するソフトキーを生成し、端末側に表示する方法も知られている。例えば、装置ベンダー等から、このようなＶＮＣクライアントのアプリケーションが提供される場合がある。

特開２０１５－２０７９１３号公報

しかし、特許文献１のように、一様に装置のハードキーに対応するソフトキー画像を含む操作画面をＶＮＣクライアントに提供する構成では、遠隔操作における操作性を低下させてしまう場合があった。例えば、ＶＮＣクライアントのアプリケーションでハードキーに対応するソフトキーを表示している場合、ハードキーに対応するソフトキーが二重に表示されてしまい、遠隔操作における操作性が低下してしまうといった課題があった。

本発明は、上記の課題を解決するためになされたものである。本発明は、遠隔操作における操作性を低下させることなく、装置のハードキーに対応する遠隔操作を可能にする仕組みを提供することを目的とする。

本発明は、ハードキーを有する情報処理装置であって、ネットワークを介して接続された外部装置に対して前記情報処理装置の操作画面の画面情報を提供し、該画面情報に基づいて前記操作画面に対応する画面を表示した前記外部装置から、該画面上での操作に応じた操作情報を受け取る機能を提供する提供手段を有し、前記提供手段は、前記外部装置に応じて、前記ハードキーに対応するソフトキーを含む操作画面を提供するか、前記ソフトキーを含まない操作画面を提供するかを切り替えることを特徴とする。

本発明によれば、遠隔操作における操作性を低下させることなく、装置のハードキーに対応する遠隔操作を可能にすることができる。

本実施形態に係る情報処理システム構成の一例を示す図。 画像形成装置のハードウェア構成の一例を示す図。 画像形成装置のソフトウェア構成の一例を示す図。 モバイル端末のハードウェア構成の一例を示す図。 モバイル端末のソフトウェア構成の一例を示す図。 画像形成装置の表示・操作部の一例を示す図。 表示・操作部のディスプレイに表示される操作画面の一例を示す図。 表示・操作部のディスプレイに表示される操作画面の一例を示す図。 第１実施形態における画像形成処理のソフトキー表示切り替え処理を説明するフローチャート。 ソフトキー表示切り替えの条件を管理するテーブルの一例を示す図。 条件Ａの判定処理を説明するフローチャート。 条件Ｂの判定処理を説明するフローチャート。 条件Ｃの判定処理を説明するフローチャート。 第２実施形態における画像形成処理のソフトキー表示切り替え処理を説明するフローチャート。

以下、本発明を実施するための形態について図面を用いて説明する。なお、以下の実施の形態は特許請求の範囲に係る発明を限定するものでなく、また実施の形態で説明されている特徴の組み合わせの全てが発明の解決手段に必須のものとは限らない。また以下の実施例では情報処理装置の一例として画像形成装置を用いて説明を行うが、これに限らない。

〔第１実施形態〕
図１は、本発明の一実施形態に係る情報処理システム構成の一例を示す図である。
ＬＡＮ（Local Area Network）１０５には、画像形成装置１０２、パーソナルコンピューター（ＰＣ）１０１、アクセスポイント１０４が接続される。画像形成装置１０２は、ＶＮＣ（Virtual Network Computing）サーバー機能を有する情報処理装置の一例である。ＰＣ１０１は、ＶＮＣクライアント機能を有する情報処理装置の一例である。

また、ＶＮＣクライアント機能を有する情報処理装置であるモバイル端末１０３が、アクセスポイント１０４を介してＬＡＮ１０５に接続される。画像形成装置１０２及びモバイル端末１０３が無線ダイレクト通信機能を備えている場合には、モバイル端末１０３はＬＡＮ１０５を介さず直接、画像形成装置１０２と通信可能である。

本実施形態では、ＶＮＣサーバー機能を有する画像形成装置１０２に、ＶＮＣクライアント機能を有するモバイル端末１０３がＶＮＣ接続する例を用いて説明する。しかし、接続するＶＮＣクライアントは、ＶＮＣクライアント機能を有していれば他の装置（例えばＰＣ１０１や図示しないその他の画像形成装置等）であってもよく、該他の装置とＶＮＣ接続する場合も同様である。

以下、ＶＮＣサーバーとして動作する画像形成装置１０２等の情報処理装置を「サーバー」、このサーバーにＶＮＣ接続するＰＣ１０１やモバイル端末１０３等の情報処理装置を「クライアント」と呼ぶ場合がある。

サーバーは、自装置の表示部に表示された画面に対応する画面情報を、クライアントに送信する。この画面情報を取得したクライアントは、この画面情報に基づきサーバーに表示された画面に対応する画面を表示する。クライアントで表示された画面上でユーザーが操作を行なうと、当該操作情報がサーバーに送信され、サーバーは当該操作情報に応じて処理を行う。つまり、クライアントは、サーバーにＶＮＣ接続を行うことで、サーバーを遠隔操作（リモートオペレーション）することができる。

画像形成装置１０２は、ＶＮＣサーバーソフトウェアを起動し、クライアントからの接続要求を待機する。また、モバイル端末１０３は、ＶＮＣクライアントソフトウェアを起動し、ユーザー操作等で所望のサーバーに接続する。サーバーとクライアント間の通信は、ＲＦＢ（Remote FrameBuffer）プロトコルに従って行われる。ＲＦＢプロトコルは、最初にハンドシェーク処理を行い、ハンドシェーク処理が完了した後に、画面情報や操作情報の送受信を行う。

以下、本実施形態のシステムを構成する各装置について説明する。
図２は、画像形成装置１０２のハードウェア構成の一例を示す図である。
画像形成装置１０２は、コントローラユニット２０１、表示・操作部２０７、スキャナ２１０、プリンタ２１１等を有する。

コントローラユニット２０１において、ＣＰＵ２０２は、システム全体を制御する演算装置である。ＣＰＵ２０２は、システムバス２１２に接続される各デバイスを総括的に制御する。
ＲＯＭ２０４は、不揮発性のメモリであり、画像データやその他のデータ、ＣＰＵ２０２が動作するための各種プログラムなどが格納されている。
ＲＡＭ２０３は、揮発性のメモリであり、ＣＰＵ２０２の主メモリ、ワークエリア等の一時記憶領域として用いられる。また、ＲＡＭ２０３には、オペレーティングシステム（ＯＳ）やシステムソフトウェア、アプリケーションソフトウェアなどのプログラムやデータも配置される。

ＣＰＵ２０２は、ＲＯＭ２０４等に格納されるプログラムをＲＡＭ２０３に展開し、実行することで画像形成装置１０２の各部を制御する。なお、ＣＰＵ２０２が動作するためのプログラムは、ＲＯＭ２０４に格納されるものに限らず、ハードディスクドライブ（ＨＤＤ）２０５等に予め記憶されたものを用いてもよい。

ハードディスクドライブ（ＨＤＤ）２０５は、オペレーティングシステムやシステムソフトウェア、アプリケーションソフトウェア、画像データ、設定データなどを格納する。なお、これらのデータを格納することができるのであれば、ＨＤＤの代わりに又は併用して、ソリッドステートドライブ（ＳＳＤ）、ＳＤメモリーカード、またはｅＭＭＣなど、その他の記憶装置を用いてもよい。

表示・操作部Ｉ／Ｆ２０６は、表示・操作部２０７とのインターフェース部であり、表示・操作部２０７に表示する情報を表示・操作部２０７に対して出力する。また、表示・操作部Ｉ／Ｆ２０６は、表示・操作部２０７からユーザーが入力した情報を受け付ける。
表示・操作部２０７は、ユーザー操作を受け付けるためのタッチパネルやハードキーを備える。ここで、図６を用いて、表示・操作部２０７について説明する。

図６は、表示・操作部２０７の一例を示す図である。
タッチパネル６０１は、平面的に構成されたパネルであり、ユーザーがタッチした座標情報を表示・操作部Ｉ／Ｆ２０６に通知する。タッチパネル６０１は、ディスプレイと一体となるように設けられている。該ディスプレイは、ＣＰＵ２０２が生成するＧＵＩ（Graphical User Interface）画面を、表示・操作部Ｉ／Ｆ２０６から受信し、表示する。該ディスプレイの上層にタッチパネル６０１が一体となるように設置することで、ユーザーがディスプレイに表示された画面を直接的に操作しているかのように制御することが可能となる。

ハードキー６０２は、ハードウェアとして設けられたキーであり、数値キーやスタートキー、ストップキーなど物理的に押下可能なキーであり、キーが押下された場合に表示・操作部Ｉ／Ｆ２０６に通知する。
以下、図２の説明に戻る。

ネットワークＩ／Ｆ２０８は、ネットワーク（ＬＡＮ）１０５に接続し、同一ＬＡＮ上に接続されたＰＣ１０１、図示しない他の画像形成装置等と通信を行ったり、アクセスポイント１０４を介してモバイル端末１０３と情報の入出力を行う。
デバイスＩ／Ｆ２０９は、画像入出力デバイスであるスキャナ２１０、プリンタ２１１とコントローラユニット２０１を接続し、画像データの入力や出力を行う。つまり、デバイスＩ／Ｆ２０９は、画像データを用紙にプリントしたり、原稿のスキャン等を行う場合に、データの入出力を行う。

図３は、画像形成装置１０２のソフトウェア構成の一例を示す図である。
システムソフトウェア３０１は、ＲＡＭ２０３、ＲＯＭ２０４、ＨＤＤ２０５のいずれかの記憶装置に記憶され、ＣＰＵ２０２により実行されることで、画像形成装置１０２に各種の機能を実現させる。
ジョブコントロール処理部３０２は、アプリケーション３１０を含む各ソフトウェアモジュールを制御し、コピー、プリント、スキャン、などの画像形成装置１０２が実行するジョブの制御を行う。

スキャン処理部３０３は、ジョブコントロール処理部３０２の指示に基づいて、デバイスＩ／Ｆ２０９を経由してスキャナ２１０を制御して、スキャナ２１０の原稿台に設置されている原稿を読み込む処理を行う。
プリント処理部３０４は、ジョブコントロール処理部３０２の指示に基づいて、デバイスＩ／Ｆ２０９を経由してプリンタ２１１を制御して、指定された画像の印刷処理を行う。

操作入力解析部３０５は、表示・操作部Ｉ／Ｆ２０６を介して表示・操作部２０７から供給される情報を解析し、ユーザー操作に応じたイベントをイベント処理部３０７に通知する。操作入力解析部３０５において解析される情報とは、ユーザーがタッチパネルをタッチしたことやユーザーがハードキーを押下したことを示す操作情報である。

イベント解析部３０６は、操作入力以外に画像形成装置１０２で発生する各種事象をジョブコントロール処理部３０２などから受け取って解析し、その事象に応じたイベントをイベント処理部３０７に通知する。イベント解析部３０６の解析する各種事象とは、ジョブが終了したことや印刷用紙が不足していること等、ユーザーによる操作によって発生する事象以外の事象である。

イベント処理部３０７は、操作入力解析部３０５、イベント解析部３０６、操作情報受信部３２２又はアプリケーション３１０などからイベントを受け取る。イベント処理部３０７は、イベントに応じてジョブコントロール処理部３０２、画面生成部３０８又はアプリケーション３１０にイベントを通知し、画像形成装置１０２の各部を制御する。

画面生成部３０８は、表示・操作部２０７や外部装置の表示部に表示する画面のデータをＲＡＭ２０３上に生成する処理を行う。
画面表示部３０９は、画面生成部３０８が生成した画面のデータをＲＡＭ２０３から読み取って、表示・操作部Ｉ／Ｆ２０６を介して表示・操作部２０７のディスプレイに表示する表示制御を行う。

アプリケーション３１０は、画像形成装置１０２上で動作するアプリケーション群であり、イベント処理部３０７を介したユーザーからの指示を受け取り、それに従ってジョブを制御するためのイベントをイベント処理部３０７へ通知する等の所定の処理を行う。例えば、画像形成装置１０２が有するアプリケーションとしては以下のものが挙げられる。
・スキャナ２１０により原稿上の画像を読み取って生成された画像データをプリンタ２１１にて印刷する「コピー」機能
・ＰＣ１０１やモバイル端末１０３等の外部装置から投入されたプリントジョブに基づいて画像データをプリンタ２１１にて印刷する「プリント」機能
・スキャナ２１０により原稿上の画像を読み取って生成された画像データをネットワークＩ／Ｆ２０８を介して外部へ送信する「スキャンして送信」機能
なお、画像形成装置１０２が有するアプリケーションは、上記に限らず、ユーザーの指示により後からアプリケーションを追加することも可能である。

ＶＮＣサーバー３２０は、クライアントとＬＡＮ１０５を介して通信するためのソフトウェアモジュールである。ＶＮＣサーバー３２０は、例えば、モバイル端末１０３上で動作するＶＮＣクライアント５２０（図５）と通信し遠隔操作を受け付けるための処理を行う。
ＶＮＣサーバー３２０は、接続処理部３２１、操作情報受信部３２２、画面送信部３２３を有する。

接続処理部３２１は、例えばＶＮＣクライアント５２０の接続処理部５２１からの接続要求を受け付け、接続制御を行う。
操作情報受信部３２２は、例えばＶＮＣクライアント５２０の操作情報送信部５２２から操作情報を受信し、ユーザー操作に応じたイベントをイベント処理部３０７に通知する。なお、操作情報受信部３２２が通知するイベントは、操作入力解析部３０５が通知するイベントと同等のものであり、ユーザーが画像形成装置１０２を操作するためのイベントである。
画面送信部３２３は、画面生成部３０８が生成した画面データをＲＡＭ２０３から読み取って、ＶＮＣクライアント５２０の画面受信部５２３に送信する処理を行う。

図４は、モバイル端末１０３のハードウェア構成の一例を示す図である。
モバイル端末１０３内において、ＣＰＵ４０１はシステム全体を制御する演算装置である。ＣＰＵ４０１は、システムバス４１１に接続される各デバイスを総括的に制御する。
ＲＯＭ４０２は、不揮発性のメモリであり、画像データやその他のデータ、ＣＰＵ４０１が動作するための各種プログラムなどが格納されている。

ＲＡＭ４０３は、揮発性のメモリであり、ＣＰＵ４０１の主メモリ、ワークエリア等の一時記憶領域として用いられる。また、ＲＡＭ４０３には、オペレーティングシステムやシステムソフトウェア、アプリケーションソフトウェアなどのプログラムやデータも配置される。

ＣＰＵ４０１は、ＲＯＭ４０２等に格納されるプログラムをＲＡＭ４０３に展開し、実行することでモバイル端末１０３の各部を制御する。なお、ＣＰＵ４０１が動作するためのプログラムは、ＲＯＭ４０２に格納されるものに限らず、ストレージ４０４等に予め記憶されたものを用いてもよい。

ストレージ４０４は、オペレーティングシステムやシステムソフトウェア、アプリケーションソフトウェア、写真や電子文書、設定データなどを格納する。なお、これらのデータを格納することができるのであれば、ＨＤＤ、ＳＳＤ、ＳＤメモリーカード、またはｅＭＭＣなど、どのような記憶装置を用いてもよいし、これらを複数備えていてもよい。

ＲＴＣ（Real Time Clock）４０５は、時間を計時する。
操作パネル４０６は、ユーザーのタッチ操作を検出可能なタッチパネル機能を備え、図５に示すＯＳ５３０やＭＦＰアプリケーション５０２が提供する各種画面を表示する。ユーザーは操作パネル４０６にタッチ操作を入力することで、モバイル端末１０３に所望の操作指示を入力することができる。

スピーカー４０７とマイク４０８は、例えばユーザーが他のモバイル端末や固定電話と電話をする際に使用される。
カメラ４０９は、ユーザーの撮像指示に応じて撮像を行う。カメラ４０９によって撮像された写真は、ストレージ４０４の所定の領域に記憶される。
無線通信部４１０は、無線通信ＬＡＮ等の無線通信を実行する。

図５は、モバイル端末１０３のソフトウェア構成の一例を示す図である。
システムソフトウェア５０１はＲＡＭ４０３、ＲＯＭ４０２、ストレージ４０４のいずれかの記憶手段に記憶され、ＣＰＵ４０１により実行されることで、モバイル端末１０３に各種機能を実現させる。

オペレーティングシステム（ＯＳ）５３０は、モバイル端末１０３全体の動作を制御するためのソフトウェアである。モバイル端末１０３には、後述するＭＦＰアプリケーション５０２を含め、様々なアプリケーションをインストールすることができる。ＯＳ５３０は、これらのアプリケーションとの間で情報をやり取りし、アプリケーションから受けた指示に従って、操作パネル４０６に表示する画面を変更する。また、ＯＳ５３０は、各種ハードウェアを制御するためのデバイスドライバ群を備えており、ＯＳ５３０上で動作するアプリケーションに対して各種ハードウェアを利用するためのＡＰＩを提供する。ＡＰＩは、Application Programming Interfaceを示す。上述のデバイスドライバ群として、本実施形態では、無線ＬＡＮ制御部５３１が存在する。
無線ＬＡＮ制御部５３１は、無線通信部４１０を制御するためのデバイスドライバである。

ＭＦＰアプリケーション５０２は、モバイル端末１０３にインストールされたアプリケーションである。ＭＦＰアプリケーション５０２を用いて画像形成装置１０２等の画像形成装置に対して印刷やスキャンの指示や、画像形成装置の操作画面の遠隔操作などを行うことができる。モバイル端末１０３には、このＭＦＰアプリケーション５０２の他に様々なアプリケーションがインストールされているが、説明は省略する。

ＭＦＰアプリケーション５０２のソフトウェア構成についてさらに詳しく説明する。
画面制御部５０３は、ＯＳ５３０を介して操作パネル４０６に表示する画面を制御する。画面制御部５０３によって、ＭＦＰアプリケーション画面が操作パネル４０６に表示される。また、画面制御部５０３は、操作パネル４０６を介してユーザーが入力した操作指示を判別する。また、画面制御部５０３は、画面受信部５２３がアプリ記憶部５０６に記録した画像データを読み出し、ＯＳ５３０を介して操作パネル４０６に表示する。

通信部５０４は、ＯＳ５３０を介して、無線通信部４１０による無線通信を制御してコマンドの送受信などを行う。
計時部５０５は、時間を計時する。
アプリ記憶部５０６は、ＭＦＰアプリケーション５０２の実行のための様々な情報を一時的にＲＡＭ４０３に記憶する。

デバイス検索制御部５０７は、接続する画像形成装置１０２を検索する検索用データを生成し、無線通信部４１０を介してＬＡＮ１０５上のデバイスに送信し、該当する画像形成装置１０２からのレスポンスを受信する。検索用データは、ＬＡＮ１０５上のすべてのデバイスにブロードキャストする場合もあるし、１台のアドレスを指定して送信する場合もある。

印刷ジョブ生成部５０８は、印刷ジョブを生成する。印刷ジョブ生成部５０８によって生成された印刷ジョブは、無線通信部４１０によって画像形成装置１０２に送信され、画像形成装置１０２で該印刷ジョブに基づく印刷が実行される。
スキャンジョブ制御部５０９は、無線通信部４１０を介して画像形成装置１０２にスキャン指示を行い、画像形成装置１０２から受信したスキャンデータを操作パネル４０６に表示する。スキャンデータを保存する場合、スキャンデータはアプリ記憶部５０６に記憶される。

ＶＮＣクライアント５２０は、画像形成装置１０２上で動作するＶＮＣサーバー３２０とＬＡＮ１０５を介した通信を行うことで画像形成装置１０２を遠隔操作するためのソフトウェアモジュールである。ＶＮＣクライアント５２０は、接続処理部５２１、操作情報送信部５２２、画面受信部５２３を有する。

接続処理部５２１は、ユーザーからの要求を受け付けて、ＶＮＣサーバー３２０の接続処理部３２１に対して接続要求を送信し、接続処理を行う。
操作情報送信部５２２は、操作パネル４０６を介してユーザーが入力した操作指示を画面制御部５０３から受信し、ＶＮＣサーバー３２０の操作情報受信部３２２に送信する。
画面受信部５２３は、ＶＮＣサーバー３２０の画面送信部３２３から画面データを受信し、アプリ記憶部５０６に記録する。

なお、ＶＮＣサーバー３２０とＶＮＣクライアント５２０の間の通信は、ＣＰＵ２０２およびＣＰＵ４０１が、それぞれネットワークＩ／Ｆ２０８および無線通信部４１０を制御することで実現する。
上記のような各ソフトウェアモジュールの処理によって、画像形成装置１０２の表示・操作部２０７のディスプレイに表示される画面と同じ画面が、モバイル端末１０３の操作パネル４０６にも表示される。そして、ユーザーがモバイル端末１０３の操作パネル４０６を用いて操作を行うことで、遠隔で画像形成装置１０２に各種処理を実行させることができる。

図７Ａ、図７Ｂは、画像形成装置１０２の表示・操作部２０７のディスプレイに表示される操作画面の一例を示す図である。以下、図７Ａ、図７Ｂをまとめて「図７」と記載する。

図７（ａ）は、コピーのアプリケーションを表示した場合の操作画面の例を示す。
画面の左部には、アプリケーションの画面が表示される。
画面の右部は、上部エリア、ショートカットキーエリア、下部エリアで構成される。
上部エリアと下部エリアは、それぞれ常時呼び出し可能な画面を表示するためのボタンが配置されているエリアである。例えば、上部エリアには「ログアウト」ボタン、下部エリアには「状況確認」ボタン等が表示される。
ショートカットキーエリアは、各アプリケーションを呼び出すためのショートカットキー７０１等が表示されるエリアである。図７（ａ）の例では、コピー、スキャンして送信、プリント等のショートカットキーが表示されている。

なお、図７（ａ）の操作画面をＶＮＣクライアント５２０へ送信した場合、ハードキー６０２に対応したソフトキーを別途表示できない（又は表示中でない）ＶＮＣクライアント５２０側の操作画面上にはハードキー６０２に対応したソフトキーが表示されない。そのため、ＶＮＣクライアント５２０側に表示される操作画面からハードキー６０２を遠隔で操作することができない。

図７（ｂ）は、第１実施形態において、画面の右部をソフトキー表示に切り替えた操作画面の例を示す。
ソフトキー表示への切り替えは、画面生成部３０８において所定の条件を満たした場合に実行される。例えば、ＶＮＣサーバー３２０において画像形成装置１０２がサポートしていないＶＮＣクライアントによる接続を検知することや、画像形成装置１０２の特定の設定値が有効化されていることを条件として、ソフトキー表示への切り替えが実行される。

ソフトキー７０２には、ハードキー６０２に対応したボタンが配置されている。ソフトキー７０２の各キーを押下すると、対応するハードキーを押下した場合と同じ処理が操作入力解析部３０５において実行される。すなわち、図７（ｂ）の操作画面をＶＮＣクライアント５２０へ送信し、ユーザーがＶＮＣクライアント５２０からソフトキー７０２を操作することで、表示・操作部２０７からハードキー６０２を操作した場合と同等の操作を実施することができる。

図８は、第１実施形態における画像形成装置１０２のソフトキー表示切り替え処理を説明するフローチャートである。図８及び後述する図１０～図１２のフローチャートの処理は、ＣＰＵ２０２がＲＯＭ２０４又はＨＤＤ２０５に記憶された各制御モジュールを実現するためのプログラムをＲＡＭ２０３に読み出し、実行することにより実現される。

ユーザーによって画像形成装置１０２の電源が入れられると、画像形成装置１０２内のシステムによりＶＮＣサーバー３２０が起動される。ＶＮＣサーバー３２０の起動処理において、接続処理部３２１は、ＶＮＣ接続用のポートをオープンし、クライアントからの接続を待機する（Ｓ８０１）。

ユーザーがモバイル端末１０３を操作することでリモートオペレーション機能を開始し、モバイル端末１０３が画像形成装置１０２とのＶＮＣ接続を要求すると、接続処理部３２１が、クライアントからの接続要求を受信する（Ｓ８０２）。
ＶＮＣ接続に失敗した場合（Ｓ８０３でＮＯの場合）、接続処理部３２１は、Ｓ８０１に処理を戻す。
一方、ＶＮＣ接続が成功した場合（Ｓ８０３でＹＥＳの場合）、接続処理部３２１は、Ｓ８０４に処理を進める。

Ｓ８０４では、画面生成部３０８が、ソフトキー表示切り替えの条件を満たすか否かを判断する。本実施形態では、画像形成装置１０２が有するソフトキー表示切り替えの条件は、画面生成部３０８において図９のようなテーブルで管理される。

図９は、ソフトキー表示切り替えの条件を管理するテーブルの一例を示す図である。
条件Ａは、ＶＮＣクライアント５２０がハードキー６０２に対応するキー操作部を操作パネル４０６に表示できない場合にソフトキーを表示するための条件である（９０１）。

条件Ｂは、画像形成装置１０２のソフトキー表示切り替え機能の設定（ソフトキー表示切り替え有効設定）の設定値が有効化されている場合にソフトキーを表示するための条件である（９０２）。画像形成装置１０２のソフトキー表示切り替え有効設定は、例えば、表示・操作部２０７から行うことができ、その設定値はＨＤＤ２０５に格納されるものとする。

条件Ｃは、ＶＮＣクライアント５２０がハードキー６０２に対応するキー操作部を非表示にしている場合（以下「非表示中」の場合）にソフトキーを表示するための条件である（９０３）。

ソフトキー表示切り替えの条件は上記に限らず、任意の条件をテーブルに追加・削除してもよい。
また、図８のＳ８０４でソフトキー表示切り替えの条件を満たす基準は、上記テーブルのいずれかの条件が真であることであってもよいし、任意数の条件が全て真であることであってもよい。

例えば、条件が条件Ａのみであった場合、ＶＮＣサーバー３２０が提供する操作画面とは別に、ハードキー６０２に対応するソフトキーを表示できないＶＮＣクライアント５２０には、ＶＮＣサーバー３２０はソフトキーを含む操作画面を提供する。一方、上記ハードキー６０２に対応するソフトキーを表示できるＶＮＣクライアント５２０には、ＶＮＣサーバー３２０はソフトキーを含まない操作画面を提供する。

また、条件が条件Ｂのみであった場合、ソフトキー表示切り替え有効設定が「有効」に設定されている場合には、ＶＮＣサーバー３２０は、ＶＮＣクライアント５２０にソフトキーを含む操作画面を提供する。一方、ソフトキー表示切り替え有効設定が「無効」に設定されている場合には、ＶＮＣサーバー３２０は、ＶＮＣクライアント５２０にソフトキーを含まない操作画面を提供する。

また、条件が条件Ｃのみであった場合、ＶＮＣサーバー３２０が提供する操作画面とは別の、ハードキー６０２に対応するソフトキーを表示していない（非表示中の）ＶＮＣクライアント５２０には、ＶＮＣサーバー３２０はソフトキーを含む操作画面を提供する。一方、上記ハードキー６０２に対応するソフトキーを表示している（表示中の）ＶＮＣクライアント５２０には、ＶＮＣサーバー３２０はソフトキーを含まない操作画面を提供する。

以下、条件Ａ、条件Ｂ及び条件Ｃの判定処理について、図１０、図１１及び図１２を用いてそれぞれ説明する。

まず条件Ａの判定処理について説明する。
図１０は、本実施形態における条件Ａの判定処理を説明するフローチャートである。
画面生成部３０８は、ＶＮＣサーバー３２０から接続中のＶＮＣクライアント５２０のＲＦＢプロトコルバージョンを取得する（Ｓ１００１）。
次に、画面生成部３０８は、上記Ｓ１００１で取得したＲＦＢプロトコルバージョンが「RFB 003.103」か否かを判定する（Ｓ１００２）。

ＲＦＢプロトコルバージョンが「RFB 003.103」であった場合（Ｓ１００２でＹＥＳの場合）、画面生成部３０８は、Ｓ１００３に処理を進める。
Ｓ１００３では、画面生成部３０８は、ＶＮＣクライアント５２０は画像形成装置１０２がサポートするクライアントであり、ハードキー６０２に対応するキー操作部を操作パネル４０６に表示できるため、条件Ａが「偽」であると判断する。

一方、ＲＦＢプロトコルバージョンが「RFB 003.103」でなかった場合（Ｓ１００２でＮＯの場合）、画面生成部３０８は、Ｓ１００４に処理を進める。
Ｓ１００４では、画面生成部３０８は、ＶＮＣクライアント５２０は画像形成装置１０２がサポートしていないクライアントであり、ハードキー６０２に対応するキー操作部を操作パネル４０６に表示できないため、条件Ａが「真」であると判断する。
なお、条件Ａの判定条件とするＲＦＢプロトコルバージョンは上記に限らず、ＶＮＣサーバー３２０やＶＮＣクライアント５２０の構成に応じて任意のバージョンとしてもよい。

次に条件Ｂの判定処理について説明する。
図１１は、本実施形態における条件Ｂの判定処理を説明するフローチャートである。
画面生成部３０８は、ＨＤＤ２０５からソフトキー表示切り替え有効設定の設定値を取得する（Ｓ１１０１）。
次に、画面生成部３０８は、ソフトキー表示切り替え有効設定の設定値が「有効」か否かを判定する（Ｓ１１０２）。

ソフトキー表示切り替え有効設定の設定値が「有効」であった場合（Ｓ１１０２でＹＥＳの場合）、画面生成部３０８は、Ｓ１１０３に処理を進める。
Ｓ１１０３では、画面生成部３０８は、操作画面にソフトキー７０２を表示可能であり、条件Ｂが「真」であると判断する。

一方、ソフトキー表示切り替え有効設定の設定値が「無効」であった場合（Ｓ１１０２でＮＯの場合）、画面生成部３０８は、Ｓ１１０４に処理を進める。
Ｓ１１０４では、画面生成部３０８は、操作画面にソフトキー７０２を表示不能であり、条件Ｂが「偽」であると判断する。

次に条件Ｃ（９０２）の判定処理について説明する。
図１２は、本実施形態における条件Ｃの判定処理を説明するフローチャートである。
画面生成部３０８は、ＶＮＣサーバー３２０から接続中のＶＮＣクライアント５２０のキー操作部の表示状態を取得する（Ｓ１２０１）。

次に、画面生成部３０８は、上記Ｓ１２０１で取得した接続中のＶＮＣクライアント５２０のキー操作部の表示状態が「非表示中」（非表示にしている）か否かを判定する（Ｓ１２０２）。

キー操作部の表示状態が「非表示中」であった場合（Ｓ１２０２でＹＥＳの場合）、画面生成部３０８は、Ｓ１２０３に処理を進める。
Ｓ１２０３では、画面生成部３０８は、操作画面にソフトキー７０２を表示可能であり、条件Ｂが「真」であると判断する。

一方、キー操作部の表示状態が「非表示中」でない（すなわち「表示中」）であった場合（Ｓ１２０２でＮＯの場合）、画面生成部３０８は、Ｓ１２０４に処理を進める。
Ｓ１２０４では、画面生成部３０８は、操作画面にソフトキー７０２を表示不能であり、条件Ｂが「偽」であると判断する。

以下、図８のフローチャートの説明に戻る。
ソフトキー表示切り替えの条件を満たす場合（条件が「真」の場合）（すなわちＳ８０４でＹＥＳの場合）、画面生成部３０８は、キー操作部を含む操作画面をＶＮＣクライアントに提供すると判断し、Ｓ８０５に処理を進める。
一方、ソフトキー表示切り替えの条件を満たさない場合（条件が「偽」の場合）（すなわちＳ８０４でＮＯの場合）、画面生成部３０８は、キー操作部を含まない操作画面をＶＮＣクライアントに提供すると判断し、Ｓ８０６に処理を進める。

Ｓ８０５では、画面生成部３０８は、画面の特定領域をソフトキー７０２の表示に切り替えた操作画面を生成し、Ｓ８０６に処理を進める。
Ｓ８０６では、画面表示部３０９が、画面生成部３０８により生成された操作画面を、画面表示部３０９が表示・操作部２０７のディスプレイに表示すると同時に、画面送信部３２３がモバイル端末１０３へ送信する（Ｓ８０６）。

以上のように、ＶＮＣクライアントや設定等に応じて、ハードキー６０２に対応したソフトキーを含む操作画面をＶＮＣクライアントに提供するか、該ソフトキーを含まない操作画面をＶＮＣクライアントに提供するか切り替える。すなわち、ＶＮＣクライアント側で別途ハードキー６０２に対応したソフトキーを表示できない（又は非表示中の）ＶＮＣクライアントに対しては、ハードキー６０２に対応したソフトキーを含む操作画面を提供する。一方、ＶＮＣクライアント側で別途ハードキー６０２に対応したソフトキーを表示できる（又は表示中の）ＶＮＣクライアントに対しては、ハードキー６０２に対応したソフトキーを含まない操作画面を提供する。このように、ＶＮＣクライアントが接続されたタイミングで、ＶＮＣクライアント等に応じて操作画面を切り替える。これにより、ソフトキーの重複表示を防止し、遠隔操作におけるユーザビリティの低下を防止することができる。また、モバイル端末１０３からソフトキー７０２を操作することで、表示・操作部２０７からハードキー６０２を操作した場合と同等の操作をモバイル端末１０３から実施することができる。このように、遠隔操作における操作性を損なうことなく、モバイル端末１０３に表示された操作画面にソフトキー７０２を表示できる。

また、本実施形態では、ショートカットエリアにソフトキー７０２を表示する。このため、ソフトキー７０２を含まない操作画面から、ソフトキー７０２を含む操作画面に切り替えた場合にも、操作画面のサイズは変わらない。このため、切り替えにより、操作画面のサイズが変更されることによる遠隔操作におけるユーザビリティの低下を招くこともない。すなわち、遠隔操作における操作性を低下させることなく、装置のハードキーに対応する遠隔操作を可能にできる。

〔第２実施形態〕
上記第１実施形態では、操作画面の特定領域（ショートカットエリア）をソフトキー表示に切り替える例を示した。この場合、ソフトキーを表示している間、操作画面の特定領域に元々表示されていた情報（図７（ａ）のショートカットキー７０１など）は表示されなくなる。それに対して、第２実施形態では、ソフトキーを表示している間、操作画面の特定領域に元々表示されていた情報を別の特定領域に再表示する例を示す。

図７（ｂ）は、第１実施形態において、図７（ａ）に示した画面の右部をソフトキー表示に切り替えた操作画面の例を示す。
本実施形態では、操作画面の右部の表示をソフトキー７０２に切り替えた場合、当該の領域に元々表示していた（該切り替えの直前まで表示していた）ショートカットキー７０１を、画面の上部にショートカットキー７０３として再表示する。

図１３は、第２実施形態における画像形成装置１０２のソフトキー表示切り替え処理を説明するフローチャートである。図１３に示すフローチャートの処理は、ＣＰＵ２０２がＲＯＭ２０４又はＨＤＤ２０５に記憶された各制御モジュールを実現するためのプログラムをＲＡＭ２０３に読み出し、実行することにより実現される。
なお、図１３において、図８と同一のステップには同一のステップ番号を付してあり、説明を省略する。

本実施形態では、ソフトキー表示切り替えの条件を満たす場合（条件が「真」の場合）（すなわちＳ８０４でＹＥＳの場合）、画面生成部３０８は、キー操作部を含む操作画面をＶＮＣクライアントに提供すると判断し、Ｓ１３０１に処理を進める。

Ｓ１３０１において、画面生成部３０８は、画面の右部にある「第１の領域」をソフトキー７０２の表示に切り替える。
さらにＳ１３０２において、画面生成部３０８は、第１の領域に元々表示されていた情報（図７（ａ）の例ではショートカットキー７０１）を画面の上部にある「第２の領域」に再表示し、Ｓ８０６に処理を進める。

以上のフローチャートの処理により、操作画面の第１の領域の表示をソフトキー７０２に切り替えても、第１の領域に表示されていた情報と同等の情報を、第２の領域に再表示することによって、操作画面が提供する機能性を維持することができる。すなわち、遠隔操作性をより高めることができる。

〔その他の実施形態〕
以上の実施形態では、ハードキー６０２に対応したソフトキー７０２を操作画面に表示する例を示したが、ソフトキーの構成はこれに限らない。例えば、ＶＮＣ接続の切断を行うためのキーといった、ハードキー６０２に対応しないソフトキーを操作画面に表示してもよい。
また、以上の実施形態では、表示・操作部２０７にハードキーが備わっている例を示したが、表示・操作部２０７の構成はこれに限らない。例えば、画像形成装置１０２に対して表示・操作部２０７とは別にハードキーを備えたデバイス（テンキーボード等）を接続することで、表示・操作部Ｉ／Ｆ２０６に対してハードキーの操作情報を入力可能であってもよい。そして、上述のようなデバイスが接続された場合、画像形成装置１０２では、上記各フローチャートで示した処理を実行し、接続したデバイスに備えられているハードキーに対応するソフトキーの表示切り替え制御を行うものとする。

以上、各実施形態によれば、遠隔操作における操作性を低下させることなく、装置のハードキーに対応する遠隔操作を可能にできる。すなわち、遠隔操作におけるユーザビリティと、ＶＮＣクライアントから装置のハードキーに対応する遠隔操作を両立することが可能となる。
なお、上記各実施形態では、遠隔操作にＶＮＣを用いる例に説明したが、他の方法を用いる場合にも、本発明は適用可能である。すなわち、接続される端末に、装置の操作画面を提供する場合、接続される端末等に応じて、装置側のハードキーに対応するソフトキーを含む操作画面を提供するか、前記ソフトキーを含まない操作画面を提供するかを切り替える。

なお、上述した各種データの構成及びその内容はこれに限定されるものではなく、用途や目的に応じて、様々な構成や内容で構成されることは言うまでもない。
以上、一実施形態について示したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
また、上記各実施形態を組み合わせた構成も全て本発明に含まれるものである。

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
また、本発明は、複数の機器から構成されるシステムに適用しても、１つの機器からなる装置に適用してもよい。
本発明は上記実施形態に限定されるものではなく、本発明の趣旨に基づき種々の変形（各実施形態の有機的な組合せを含む）が可能であり、それらを本発明の範囲から除外するものではない。即ち、上述した各実施形態及びその変形例を組み合わせた構成も全て本発明に含まれるものである。

１０２ 画像形成装置
１０３ モバイル端末
２０７ 表示・操作部
３０５ 操作入力解析部
３０８ 画面生成部
３０９ 画面表示部
３２０ ＶＮＣサーバー
５２０ ＶＮＣクライアント

Claims (13)

1. ハードキーを有する情報処理装置であって、
   ネットワークを介して接続された外部装置に対して前記情報処理装置の操作画面の画面情報を提供し、該画面情報に基づいて前記操作画面に対応する画面を表示した前記外部装置から、該画面上での操作に応じた操作情報を受け取る機能を提供する提供手段を有し、
   前記提供手段は、前記外部装置に応じて、前記ハードキーに対応するソフトキーを含む操作画面を提供するか、前記ソフトキーを含まない操作画面を提供するかを切り替えることを特徴とする情報処理装置。
2. 前記機能は、ＶＮＣサーバー機能であることを特徴とする請求項１に記載の情報処理装置。
3. 前記提供手段は、前記外部装置が、当該提供手段が提供する操作画面とは別に、前記ハードキーに対応するソフトキーを表示できない場合に、前記ソフトキーを含む操作画面を提供することを特徴とする請求項１又は２に記載の情報処理装置。
4. 前記提供手段は、前記外部装置が、当該提供手段が提供する操作画面とは別に、前記ハードキーに対応するソフトキーを表示できる場合に、前記ソフトキーを含まない操作画面を提供することを特徴とする請求項３に記載の情報処理装置。
5. 前記提供手段は、前記外部装置において、当該提供手段が提供する操作画面とは別に、前記ハードキーに対応するソフトキーが表示されていない場合に、前記ソフトキーを含む操作画面を提供することを特徴とする請求項１又は２に記載の情報処理装置。
6. 前記提供手段は、前記外部装置において、当該提供手段が提供する操作画面とは別に、前記ハードキーに対応するソフトキーが表示されている場合に、前記ソフトキーを含まない操作画面を提供することを特徴とする請求項５に記載の情報処理装置。
7. 前記操作画面の切り替えを有効または無効にするための設定手段を有し、
   前記提供手段は、前記切り替えが有効に設定されている場合に、前記ソフトキーを含む操作画面を提供することを特徴とする請求項１又は２に記載の情報処理装置。
8. 前記提供手段は、前記切り替えが無効に設定されている場合に、前記ソフトキーを含まない操作画面を提供することを特徴とする請求項７に記載の情報処理装置。
9. 前記操作画面は、第１の領域と第２の領域を含み、
   前記提供手段は、前記ソフトキーを含まない操作画面の提供から、前記ソフトキーを含む操作画面の提供に切り替える場合、前記第１の領域に前記ソフトキーを表示し、該ソフトキーを表示する直前に前記第１の領域に表示していた情報を前記第２の領域に表示する、ことを特徴とする請求項１～８のいずれか１項に記載の情報処理装置。
10. 前記提供手段は、前記外部装置が接続されたタイミングで、前記切り替えを行う、ことを特徴とする請求項１～９のいずれか１項に記載の情報処理装置。
11. ハードキーを備えた操作パネルを有する画像形成装置であることを特徴とする請求項１～１０のいずれか１項に記載の情報処理装置。
12. ハードキーと、ネットワークを介して接続された外部装置に対して操作画面の画面情報を提供し、該画面情報に基づいて前記操作画面に対応する画面を表示した前記外部装置から、該画面上での操作に応じた操作情報を受け取る機能を提供する提供手段と、を有する情報処理装置の制御方法であって、
    前記提供手段が、前記外部装置に応じて、前記ハードキーに対応するソフトキーを含む操作画面を提供するか、前記ソフトキーを含まない操作画面を提供するかを切り替える工程を有することを特徴とする情報処理装置の制御方法。
13. コンピュータを、請求項１～１１のいずれか１項に記載の提供手段として機能させるためのプログラム。

Images