JP2017174050A

JP2017174050A - 画面表示システム、画面表示方法、画像処理装置及び画面表示プログラム

Info

Publication number: JP2017174050A
Application number: JP2016058079A
Authority: JP
Inventors: 洋一来正; Yoichi Kurumasa; 亮佑西村; Ryosuke Nishimura; 伊藤　昌之; Masayuki Ito; 昌之伊藤; 博杉浦; Hiroshi Sugiura
Original assignee: Konica Minolta Inc
Current assignee: Konica Minolta Inc
Priority date: 2016-03-23
Filing date: 2016-03-23
Publication date: 2017-09-28
Anticipated expiration: 2036-03-23
Also published as: CN107229132A; US20170279987A1; JP6597435B2

Abstract

【課題】携帯端末装置に表示される画面の画像データを画像処理装置の表示部の画面に表示させる場合に、表示が小さくなって操作しづらいという問題や、携帯端末装置側に画像処理装置の表示に適した画像データを新たに生成する機能が必要であるという問題を解消できる画面表示システム等を提供する。
【解決手段】携帯端末装置２は、画像データと、画像データの再生に関するアプリケーションが縦画角と横画角の画像データの両方に対応しているか否かを示すアプリケーション情報と画像処理装置１に送信する。画像処理装置１は、アプリケーション情報に基づいて、アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合に、その画角が自装置の表示手段１３１の画面の向きと異なる場合は、受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して表示する。
【選択図】図７

Description

この発明は、相互に接続可能な携帯端末装置と画像処理装置を備え、携帯端末装置の画面に表示される画像データを画像処理装置の横長の画面に表示させる画面表示システム、画面表示方法、画像処理装置及び画面表示プログラムに関する。

例えば、コピー機能、プリンタ機能、ファクシミリ機能、スキャン機能等の複数の機能を有する多機能デジタル複合機であるＭＦＰ（Multi Function Peripheral）等の画像処理装置と、スマートフォン、タブレット端末等の携帯端末装置とを接続するとともに、携帯端末装置から画像処理装置へジョブ等を投入し、画像処理装置が投入されたジョブを実行するシステムが知られている。

このような場合、ユーザーは携帯端末装置の画面と画像処理装置の画面の両方での操作が必要となる場合があり、操作性が良くない。

そこで、操作性を向上するために、携帯端末装置の画面を画像処理装置の表示部の画面に表示させ、携帯端末装置の画面上の操作を画像処理装置側で行えるようにして、携帯端末装置からのジョブの実行を、画像処理装置の画面のみのワンストップ操作で可能とすることが考えられている。

このような携帯端末装置と画像処理装置のように、装置間で通信を行うことによって一方の表示部に表示された画像データを他方の表示部に表示させる方式として、例えばWi-Fi Miracast方式やX Window System等が挙げられる。

また、特許文献１には、画像データを生成する画像生成部と、画像表示装置への画像データの送信、および、画像表示装置の表示面における画像データの表示の向きに関する情報の受信を行う通信部と、を備え、画像生成部は、通信部により受信される表示向きに関する情報に応じて画像データを生成する画像生成装置が開示されている。

特開２０１２−１４１５７０号公報

しかし、装置間で通信を行うことによって一方の表示部に表示された画像データを他方の表示部に表示させる方式を適用して、携帯端末装置側の画面の画像データを画像処理装置に転送して表示部に表示させたとしても、表示される携帯端末側の画面が相対的に小さいという問題があった。

例えば、Wi-Fi Miracast方式では、表示画角が４：３や１６：９等の横長の画面、つまり画向きの画面にしか規定していないため、携帯端末装置に縦画角で表示された画像データを画像処理装置に転送して表示させた場合は、画像処理装置の表示部の画面の向きが横長の場合には、画面の幅方向の中央部のみに携帯端末装置側の画像が表示される、いわゆるピラーボックス表示となる。このため、画像処理装置の画面の幅方向の両端部に大きな非表示領域が発生し、画面の幅方向中央部に表示される携帯端末装置側の画像が相対的に小さくなり、特に画像内に複数の操作キーが横並びに配置されているような場合には、操作キーを操作しづらいという問題がある。

また、特許文献１に記載の技術は、転送先の装置の表示部の画面が縦向きか横向きかを問い合わせ、それに応じた画像データを生成して転送先に転送するものであり、これを応用した場合は、携帯端末装置側で画像処理装置の表示部の画面の向きが横長か縦長かに応じて画像データを新たに生成する必要があり、そのための画像生成機能を携帯端末装置に保有させる必要があるという問題がある。

この発明は、このような技術的背景に鑑みてなされたものであって、携帯端末装置に表示される画面の画像データを画像処理装置の表示部の画面に表示させる場合に、表示が小さくなって操作しづらいという問題や、携帯端末装置側に画像処理装置の表示に適した画像データを新たに生成する機能が必要であるという問題を解消できる画面表示システム、画面表示方法、画像処理装置及び画面表示プログラムを提供することを目的とする。

上記課題は、以下の手段によって解決される。
（１）携帯端末装置と、該携帯端末装置と接続可能な画像処理装置とを備えた画面表示システムであって、前記携帯端末装置は、表示手段と、前記表示手段に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを前記画像処理装置に送信する送信手段と、を備え、前記画像処理装置は、前記携帯端末装置から、前記画像データと前記アプリケーション情報とを受信する受信手段と、前記受信手段により受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定手段と、画面の向きが横長または縦長の表示手段と、前記第１の判定手段により、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御手段と、を備えたことを特徴とする画面表示システム。
（２）前記画像処理装置の表示手段の画面は横長の向きであり、前記アプリケーションが縦画角の画像データのみに対応している場合において、前記画像データにおける画像には横方向に間隔を置いて配置される複数の操作キーが含まれ、前記表示制御手段は、前記複数の操作キーの間隔を横方向に拡張して表示手段に表示する前項１に記載の画面表示システム。
（３）前記画像処理装置の第１の判定手段により、前記アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、画像処理装置は前記表示手段の画面の向きに対応する画角の画像データの取得要求を携帯端末装置へ行い、携帯端末装置の送信手段は、前記取得要求に応じて対応する画像データを画像処理装置に送信する前項１または２に記載の画面表示システム。
（４）前記画像処理装置は、携帯端末装置から受信した画像データが表示手段の画面の向きに対応する画角の画像データか否かを判定する第２の判定手段を備え、該第２の判定手段により携帯端末装置から受信した画像データが、表示手段の画面の向きに対応する画角の画像データでないと判定された場合に限って、画像処理装置は携帯端末装置へ表示手段の画面の向きに対応する画角の画像データの取得要求を行う前項３に記載の画面表示システム。
（５）前記画像処理装置は、前記表示手段を回転させることにより、表示手段の画面の向きを横長から縦長へまたは縦長から横長へ変更可能な向き変更手段と、向き変更手段により変更された画面の向きが横長かまたは縦長かを判定する第３の判定手段とを備え、前記第１の判定手段により、前記アプリケーションが縦画角の画像データまたは横画角の画像データの一方のみに対応していることが判定された場合において、その画角が前記第３の判定手段により判定された画面の向きと異なる場合に、前記表示制御手段は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の少なくとも長手方向に拡張して前記表示手段に表示する前項１〜４のいずれかに記載の画面表示システム。
（６）前記第１の判定手段を有しているかどうかを判断する判断手段を備え、該判断手段により第１の判定手段を有していると判断された場合に、前記第１の判定手段による判定が行われる前項１〜５のいずれかに記載の画面表示システム。
（７）携帯端末装置と、画面の向きが横長または縦長の表示手段を有し前記携帯端末装置と接続可能な画像処理装置とを備えた画面表示システムで実行される画面表示方法であって、前記携帯端末装置は、携帯端末装置の表示手段に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを前記画像処理装置に送信する送信ステップを実行し、前記画像処理装置は、前記携帯端末装置から、前記画像データと前記アプリケーション情報とを受信する受信ステップと、前記受信ステップにより受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定ステップと、前記第１の判定ステップにより、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信ステップにより受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御ステップと、を実行することを特徴とする画面表示方法。
（８）携帯端末装置と接続可能な画像処理装置であって、前記携帯端末装置に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを、前記携帯端末装置から受信する受信手段と、前記受信手段により受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定手段と、画面の向きが横長または縦長の表示手段と、前記第１の判定手段により、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御手段と、を備えたことを特徴とする画像処理装置。
（９）前記表示手段の画面は横長の向きであり、前記アプリケーションが縦画角の画像データのみに対応している場合において、前記画像データにおける画像には横方向に間隔を置いて配置される複数の操作キーが含まれ、前記表示制御手段は、前記複数の操作キーの間隔を横方向に拡張して表示手段に表示する前項８に記載の画像処理装置。
（１０）前記第１の判定手段により、前記アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、前記表示手段の画面の向きに対応する画角の画像データの取得要求を携帯端末装置へ行う取得要求手段を備えている前項８または９に記載の画像処理装置。
（１１）前記受信手段により受信した画像データが表示手段の画面の向きに対応する画角の画像データか否かを判定する第２の判定手段を備え、該第２の判定手段により、受信した画像データが表示手段の画面の向きに対応する画角の画像データでないと判定された場合に限って、前記取得要求手段は携帯端末装置へ表示手段の画面の向きに対応する画角の画像データの取得要求を行う前項１０に記載の画像処理装置。
（１２）表示手段の画面の向きを横長から縦長へまたは縦長から横長へ変更可能な向き変更手段と、向き変更手段により変更された画面の向きが横長かまたは縦長かを判定する第３の判定手段とを備え、前記第１の判定手段により、前記アプリケーションが縦画角の画像データまたは横画角の画像データの一方のみに対応していることが判定された場合において、その画角が前記第３の判定手段により判定された画面の向きと異なる場合に、前記表示制御手段は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の少なくとも長手方向に拡張して前記表示手段に表示する前項８〜１１のいずれかに記載の画像処理装置。
（１３）前記第１の判定手段を有しているかどうかを判断する判断手段を備え、該判断手段により第１の判定手段を有していると判断された場合に、前記第１の判定手段による判定が行われる前項８〜１２のいずれかに記載の画像処理装置。
（１４）画面の向きが横長または縦長の表示手段を有し、携帯端末装置と接続可能な画像処理装置のコンピュータに、前記携帯端末装置に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを、前記携帯端末装置から受信する受信ステップと、前記受信ステップにより受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定ステップと、前記第１の判定ステップにより、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信ステップにより受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御ステップと、を実行させるための画面表示プログラム。
（１５）前記表示手段の画面は横長の向きを有し、前記アプリケーションが縦画角の画像データのみに対応している場合において、前記画像データにおける画像には横方向に間隔を置いて配置される複数の操作キーが含まれ、前記表示制御ステップでは、前記複数の操作キーの間隔を横方向に拡張して表示手段に表示する処理を、前記コンピュータに実行させる前項１４に記載の画面表示プログラム。
（１６）前記アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、前記表示手段の画面の向きに対応する画角の画像データの取得要求を携帯端末装置へ行う取得要求ステップを前記コンピュータに実行させる前項１４または１５に記載の画面表示プログラム。
（１７）前記受信ステップにより受信した画像データが表示手段の画面の向きに対応する画角の画像データか否かを判定する第２の判定ステップを前記コンピュータに実行させ、該第２の判定ステップにより、受信した画像データが表示手段の画面の向きに対応する画角の画像データでないと判定された場合に限って、前記取得要求ステップでは携帯端末装置へ表示手段の画面の向きに対応する画角の画像データの取得要求を行う処理を前記コンピュータに実行させる前項１６に記載の画面表示プログラム。
（１８）前記表示手段の画面の向きを横長から縦長へまたは縦長から横長へ変更する向き変更ステップと、向き変更ステップにより変更された画面の向きが横長かまたは縦長かを判定する第３の判定第３の判定ステップとを前記コンピュータに実行させ、前記第１の判定ステップにより、前記アプリケーションが縦画角の画像データまたは横画角の画像データの一方のみに対応していることが判定された場合において、その画角が前記第３の判定ステップにより判定された画面の向きと異なる場合に、前記表示制御ステップでは、前記受信ステップにより受信した画像データにおける少なくとも一部の画像を、画面の少なくとも長手方向に拡張して前記表示手段に表示する処理を前記コンピュータに実行させる前項１４〜１７のいずれかに記載の画面表示プログラム。

前項（１）、（７）および（８）に記載の発明によれば、画像処理装置は、携帯端末装置の表示手段に表示される画像データと、画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かについてのアプリケーション情報とを、携帯端末装置から受信する。画像処理装置は、受信したアプリケーション情報に基づいて、アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する。そして、アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が画像処理装置の表示手段の画面の向きと異なる場合は、携帯端末装置から受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して表示手段に表示する。

従って、画像処理装置の表示手段に表示された携帯端末装置側の画像データが小さいために操作キー等を操作しづらいという問題を改善することができる。また、携帯端末装置側で画像処理装置の表示に適した画像データを新たに生成することは不要であるから、携帯端末装置に画像の生成機能を新たに保有させる必要は無い。

前項（２）および（９）に記載の発明によれば、画像処理装置の表示手段の画面の向きは横長であり、アプリケーションが縦画角の画像データのみに対応している場合において、画像データにおける画像に含まれる、横方向に間隔を置いて配置される複数の操作キーがその間隔を横方向に拡張して表示されるから、隣り合う操作キーを重複して操作してしまう不都合を防止でき、操作性が良くなる。

前項（３）および（１０）に記載の発明によれば、画像処理装置の第１の判定手段により、アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、画像処理装置は画面の向きに対応する画角の画像データの取得要求を携帯端末装置に行い、この取得要求に応じて、携帯端末装置から対応する画像データが画像処理装置に送信される。

前項（４）および（１１）に記載の発明によれば、画像処理装置により、携帯端末装置から受信した画像データが表示手段の画面の向きに対応する画角の画像データか否かが判定され、対応する画角の画像データでないと判定された場合に限って、画像データの取得要求が携帯端末装置に送信される。

前項（５）および（１２）に記載の発明によれば、ユーザーが画像処理装置の表示手段を回転させることにより、表示手段の画面の向きを横長から縦長へまたは縦長から横長へ変更可能な画像処理装置に対しても本発明を適用できる。

前項（６）および（１３）に記載の発明によれば、第１の判定手段を有していると判断された場合にのみ、携帯端末装置のアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かが判定される。

前項（１４）に記載の発明によれば、携帯端末装置から受信したアプリケーション情報に基づいて、アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定し、アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が表示手段の画面の向きと異なる場合、携帯端末装置から受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して画面に表示する処理を、画像処理装置のコンピュータに実行させることができる。

前項（１５）に記載の発明によれば、表示手段の画面の向きは横長であり、アプリケーションが縦画角の画像データのみに対応している場合において、横方向に間隔を置いて配置される複数の操作キーの間隔を横方向に拡張して表示手段に表示する処理を、画像処理装置のコンピュータに実行させることができる。

前項（１６）に記載の発明によれば、アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、表示手段の画面の向きに対応する画角の画像データの取得要求を携帯端末装置へ行う取得要求ステップを、画像処理装置のコンピュータに実行させることができる。

前項（１７）に記載の発明によれば、受信した画像データが表示手段の画面の向きに対応する画角の画像データでないと判定された場合に限って、携帯端末装置へ表示手段の画面の向きに対応する画角の画像データの取得要求を行う処理を、画像処理装置のコンピュータに実行させることができる。

前項（１８）に記載の発明によれば、表示手段の回転により変更された表示手段の画面の向きが横長か縦長かを判定し、アプリケーションが縦画角の画像データまたは横画角の画像データの一方のみに対応していることが判定された場合において、その画角が前記判定された画面の向きと異なる場合に、受信した画像データにおける少なくとも一部の画像を画面の少なくとも長手方向に拡張して表示手段に表示する処理を、画像処理装置のコンピュータに実行させることができる。

この発明の一実施形態に係る画面表示システムの構成図である。画像処理装置の構成を示すブロック図である。携帯端末装置の構成を示すブロック図である。携帯端末装置から送信された縦画角の画像データを画像処理装置の表示手段に表示したときの従来の状態を説明するための図である。携帯端末装置から送信された縦画角の画像データを画像処理装置の表示手段に表示したときの本実施形態での状態を説明するための図である。携帯端末装置から縦画角の画像データが送信された場合に、画像処理装置が横画角の画像データを要求して表示手段に表示したときの状態を説明するための図である。画像処理装置の動作を説明するためのフローチャートである。携帯端末装置の動作を説明するためのフローチャートである。画像処理装置の他の動作例を説明するためのフローチャートである。図１０のフローチャートの続きを示すフローチャートである。

以下、この発明の実施形態を図面に基づいて説明する。

図１は、この発明の一実施形態に係る画面表示システムの構成図である。

本システムは画像処理装置１と携帯端末装置２を備え、これらの画像処理装置１と携帯端末装置２とはネットワーク３を介して接続可能となされている。

ここで、ネットワーク３は、ＬＡＮ（Local Area Network）などの専用回線を用いたネットワーク、一般回線を用いたネットワーク、無線通信によるネットワーク、のいずれであっても構わない。また、ネットワーク３は、外部ネットワークを介して、他のネットワークと接続されている。

画像処理装置１は、走査した原稿画像、および情報処理装置３から送信されたプリントデータから生成した画像の複写画像を用紙上に形成する装置であり、この実施形態では、プリンタ機能、ファクシミリ機能、スキャン機能等の機能を備えた多機能デジタル画像処理装置である前述したＭＦＰが用いられている。以下、画像処理装置をＭＦＰともいう。

携帯端末装置２は、ＣＰＵ、ＲＡＭ、固定記憶装置（ハードディスク装置など）、モニタ、タッチ操作可能な液晶パネル等を有する携帯型のコンピュータ装置であり、例えばスマートフォンやタブレット端末等が用いられる。電子化された文書を蓄積して持ち運び、どこでも閲覧、編集を行うことができる。また、無線通信する手段を有し、ＭＦＰ１や情報処理装置３との間で文書の送受信を行うことができるほか、ＭＦＰ１を遠隔操作する手段を有する。以下の説明では携帯端末装置を単に携帯端末とも言う。

図２は、ＭＦＰ１の構成を示すブロック図である。ＭＦＰ１のＣＰＵ１０１には、動作プログラムの格納されたＲＯＭ１０２、作業用のＳ−ＲＡＭ（Static Random Access Memory）１０３、画像形成に関わる各種の設定を記憶するバッテリバックアップされたＮＶ−ＲＡＭ（不揮発性メモリ）１０４、時計ＩＣ１０５がバスを介して接続され、ＭＦＰ１の全体を統括的に制御する制御部１００を構成している。

制御部１００には、原稿画像を読み取る画像読取装置１２０、ジョブの開始を指示するスタートキー、ジョブを停止させるストップキー、設定をリセットするリセットキーなどの各種キーや表示部１３１を備えた操作パネル１３０、ネットワーク３を介して接続された携帯端末２等の外部装置との間で各種の情報を送受信する為のネットワークインターフェース（ネットワークＩ／Ｆ）１６０、該ネットワークインターフェース１６０により受信したプリントデータから複写画像を生成するプリンタコントローラ１５０、複写画像を用紙上に形成する画像出力装置１４０がそれぞれバスを介して接続されている。

前記表示部１３１は、タッチパネルを備えた液晶表示装置等からなり、この実施形態では、縦寸法よりも横寸法の方が大きい横長の画面、つまり横向きの画面を有している。

また、制御部１００には、固定記憶装置１１０がバスを介して接続されている。固定記憶装置１１０とは例えばハードディスク装置である。この固定記憶装置１１０には、各種のデータが記憶されている。

また、ワイヤレスインターフェース（WirelessＩ／Ｆ）１７０と短距離無線インターフェース（短距離無線Ｉ／Ｆ）１８０が、バスを介して制御部１００に接続されている。ワイヤレスインターフェース１７０は、ネットワークとの通信や携帯端末装置２との通信に利用され、短距離無線インターフェース１８０は例えばブルートゥースや赤外線通信（ＩｒＤＡ：Infrared Data Association）等の短距離無線通信を行うためのインターフェースである。

図３は携帯端末２の構成を示すブロック図である。携帯端末２はＣＰＵ２０１、動作プログラムの格納されたＲＯＭ２０２、作業用のＲＡＭ２０３を備え、ＲＯＭ２０２及びＲＡＭ２０３はそれぞれバスを介してＣＰＵ２０１に接続されている。また、ＣＰＵ２０１、ＲＯＭ２０２及びＲＡＭ２０３により、携帯端末２の全体を統括的に制御する制御部２００を形成している。

制御部２００には、各種の情報を表示するとともに画面を直接タッチして操作入力を行うタッチパネル付きの液晶表示装置等からなる表示部２０５、ワイヤレスランインターフェース２０６、短距離無線インターフェース２０７が、バスを介してそれぞれ接続されている。ワイヤレスランインターフェース２０６は、ネットワークとの通信やＭＦＰ１との通信に利用され、短距離無線インターフェース２０７は例えばブルートゥースや赤外線通信等の短距離無線通信を行うためのインターフェースである。

表示部２０５は、携帯端末２が縦向きで使用される場合は画面は縦長の縦向きとなり、携帯端末２が横向きで使用される場合は画面は横長の横向きとなる。また、図示は省略したが、携帯端末２には加速度センサが搭載されており、この加速度センサによって携帯端末２はその向きを判別できるようになっている。

また、携帯端末２にはＭＦＰ１との連携用アプリケーションがインストールされている。このアプリケーションは、画像データを表示部２０５に再生するためのコンテンツを有するとともに、アプリケーションが縦画角の画像データと横画角の画像データの両方に対応している場合には、加速度センサにより携帯端末２の向きが縦向きと判別された場合は、表示部２０５には縦画角の画像データが表示され、横向きと判別された場合は横画角の画像データが表示されるようになっている。アプリケーションが縦画角の画像データのみにしか対応していない場合は、携帯端末２が縦向きか横向きかにかかわらず、縦画角の画角の画像データが表示される。

さらに、制御部２００には固定記憶装置２０４がバスを介して接続されている。固定記憶装置２０４とは例えばハードディスク装置である。この固定記憶装置２０４には、上述のアプリケーションを始め各種のデータが記憶されている。

次に、図１に示した画面表示システムの動作を説明する。

ユーザーが携帯端末２にインストールされたＭＦＰ１との連携用アプリケーションを起動すると、アプリケーションは該アプリケーションに含まれるコンテンツに従って操作画面の画像データを携帯端末２のタッチパネル２０５に再生する。

この状態で、ユーザーがＭＦＰ１の表示部１３１に表示された携帯端末２との連携操作ボタン（図示せず）を押すと、携帯端末２に表示されている画面の画像データが携帯端末２からＭＦＰ１に送信され、ＭＦＰ１の表示部１３１に表示される。画像データの送信は例えばWi-Fi Miracast方式にて行えば良いが、この方式に限定されることはない。

ここで、携帯端末１は常時は縦向きで使用されるものとし、携帯端末２に表示されている画像データを再生しているアプリケーションは、縦画角のみに対応しているものとすると、携帯端末２からは縦画角の画像データが送信され、ＭＦＰ１の表示部１３１の横向き（横長）の画面には、図４の画面Ｄ１に示すように、画面の幅方向の中央部近傍に、携帯端末２側の表示部２０５に表示された画面の画像データが表示され、画面の幅方向の両端部にハッチングで示すように大きな非表示エリアが生じ、携帯端末２側の画像が相対的に小さくなってしまう。図中の符号１３２は操作キーであり、複数の操作キーが横方向に間隔を置いて配置されている。

そこでこの実施形態では、携帯端末２は、画面再生用の画像データとともに、画像データを再生しているアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報、携帯端末２の表示部２０５の解像度、画像データ内の操作キー１３２の位置情報等を、ＭＦＰ１に送信する。

ＭＦＰ１は、携帯端末２から送信された画像データ、アプリケーション情報、解像度、操作キーの位置情報等を受信する。そして、受信したアプリケーション情報に基づいて、アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する。

アプリケーションが縦画角の画像データのみにしか対応していなければ、ＭＦＰ１は図５の画面Ｄ２に示すように、携帯端末２から転送された画像データのうち、複数の操作キー１３２の間隔を表示部１３１の画面の横方向に拡張して表示する。なお、間隔と合わせて操作キーのサイズを横方向及び／または縦方向に拡張しても良い。また、図５に示すように、背景画像についても表示部１３１の画面の横方向に拡張しても良い。

このように、ＭＦＰ１の表示部１３１の画面が横向きの場合、携帯端末２のアプリケーションが縦画角の画像データにしか対応していなければ、携帯端末２から受信した縦画角の画像データの少なくとも複数の操作キー１３２がそれらの間隔を横方向に拡張されて表示されるから、ＭＦＰ１の表示部１３１の横長の画面が有効に活用され、携帯端末２側の画面の画像データの特に操作キーが小さすぎて操作しづらいという問題を改善することができる。また、携帯端末２側においてＭＦＰ１の画面に合わせた新たな画像データの生成は不要であるから、携帯端末２に画像の生成機能を新たに保有させる必要は無い。

なお、ＭＦＰ１の表示部１３１の画面が縦向きである場合において、携帯端末２のアプリケーションが横画角の画像データにしか対応していない場合も同様に、携帯端末２から受信した横画角の画像データに、縦方向に配置された操作キーが存在していれば、これらの操作キーの間隔を縦方向に拡張して表示すれば良い。

一方、図６（Ａ）に示す携帯端末２から、縦画角の画像データ及びアプリケーション情報が図６（Ｂ）に示すＭＦＰ１に送信された後、受信したアプリケーション情報に基づいて、ＭＦＰ１が携帯端末２のアプリケーションが縦画角の画像データ及び横画角の画像データの両方に対応していることを判定した場合は、図６（Ｃ）に示すように、ＭＦＰ１は表示部１３１の画面の向きに対応する横画角の画像データの取得要求を携帯端末２に送信する。携帯端末２は、ＭＦＰ１からの取得要求に応じて、横画角の画像データをＭＦＰ１に送信する。ＭＦＰ１は、受信した画像データを図６（Ｄ）に示すように表示部１３１に表示する。横画角の画像データは操作キー１３２の間隔やサイズも大きいため、操作キー１３２の間隔やサイズを拡張することなくそのまま表示しても良いし、拡張して表示しても良い。また、背景画像を表示部１３１の画面の縦横方向の全体に拡張して表示しても良い。

図７は、ＭＦＰ１の動作を説明するためのフローチャートである。この動作はＭＦＰ１のＣＰＵ１０１がＲＯＭ１０２等に格納されている動作プログラムに従って動作することにより実行される。

なお、図７の例では、ＭＦＰ１の表示部１３１の画面の向きが横向き（横長）の表示部であり、携帯端末２の画面を再生しているアプリケーションが縦画角の画像データのみか、縦画角及び横画角の両方の画像データに対応している場合について説明する。

ステップＳ１０１で携帯端末２との接続が確立した後、ステップＳ１０２では、携帯端末２の表示部２０５に表示されている画面の画像データ、画面を再生しているアプリケーションについてのアプリケーション情報、表示部２０５の解像度、操作キー等の位置情報等の情報を、携帯端末２から受信する。

次いで、ステップＳ１０３では、アプリケーション情報を基に携帯端末２の画面を再生しているアプリケーションが、縦画角及び横画角のいずれか一方の画像データのみかあるいは両方の画像データに対応しているかを判定する機能を、自装置が有しているかどうかを判断する。有していなければ（ステップＳ１０３でＮＯ）、ステップＳ１１０で、受信した画像データを表示部１３１に表示したのち、ステップＳ１１１に進む。

前記機能を自装置が有している場合は（ステップＳ１０３でＹＥＳ）、ステップＳ１０４で、アプリケーションは縦画角の画像データのみに対応しているかどうかを判定する。

縦画角の画像データのみに対応している場合は（ステップＳ１０４でＹＥＳ）、受信した画像データは縦画角の画像データであるから、ステップＳ１０５で、横並びの操作キーの配置を横方向に拡張するとともに、必要に応じて操作キーのサイズを縦横に拡張して、表示部１３１に表示したのち、ステップＳ１１１に進む。

ステップＳ１０４で、縦画角の画像データのみに対応しているものではない、換言すれば縦画角及び横画角の両方に対応するものであれば（ステップＳ１０４でＮＯ）、ステップＳ１０６で、受信した画像データは縦画角の画像データかどうかを調べる。縦画角の画像データかどうかは例えば画像データの縦横のサイズから判断しても良いし、あるいは携帯端末２がその情報を送信するものとしても良い。

縦画角の画像データである場合は（ステップＳ１０６でＹＥＳ）、ステップＳ１０７で、横画角の画像データの取得要求を携帯端末２に送信し、ステップＳ１０８で、携帯端末２から横画角の画像データの受信を待つ（ステップＳ１０８でＮＯ）。受信すると（ステップＳ１０８でＹＥＳ）、ステップＳ１０９に進む。ステップＳ１０６で、縦画角の画像データでない場合は（ステップＳ１０６でＮＯ）、横画角の画像データであるので、そのままステップＳ１０９に進む。

ステップＳ１０９では、表示部１３１に横画角の画像データをそのまま、あるいは操作キーの配置及びサイズを縦横に拡張して表示したのち、ステップＳ１１１に進む。

ステップＳ１１１では、操作キーが操作されるのを待つ（ステップＳ１１１でＮＯ）。操作キーが操作されると（ステップＳ１１１でＹＥＳ）、ステップＳ１１２で、終了操作か否かを判断し、終了操作であれば（ステップＳ１１２でＹＥＳ）、処理を終了する。終了操作でなければ（ステップＳ１１２でＮＯ）、ステップＳ１１３で、タッチされたキーの座標情報を携帯端末２に送信し、ステップＳ１１４で携帯端末２からの次の画像データの受信を待つ（ステップＳ１１４でＮＯ）。受信すると（ステップＳ１１４でＹＥＳ）、ステップＳ１０４に戻る。なお、タッチされたキーの座標情報が、ジョブの実行指示等に関するものである場合は、携帯端末２からジョブの実行指示等を受信した後、ジョブの実行等を行う。

図８は、携帯端末２の動作を説明するためのフローチャートである。この動作は、携帯端末２のＣＰＵ２０１がＲＯＭ２０２等に格納されている動作プログラムに従って動作することにより実行される。

ＭＦＰ１との連携用アプリケーションを起動し、ステップＳ２０１でＭＦＰ１との接続が確立されると、ステップＳ２０２で、携帯端末２の表示部２０５に表示されている画面の画像データ、画面を再生しているアプリケーションについてのアプリケーション情報、表示部２０５の解像度、操作キー等の位置情報等の情報を、ＭＦＰ１に転送する。

次いで、ステップＳ２０３で、ＭＦＰ１から画像データの取得要求があるかどうかを調べ、あれば（ステップＳ２０３でＹＥＳ）、ステップＳ２０４で横画角の画像データを送信した後、ステップＳ２０５に進む。取得要求がなければ（ステップＳ２０３でＮＯ）、そのままステップＳ２０５に進む。

ステップＳ２０５では、ＭＦＰ１から座標データを受信するのを待ち（ステップＳ２０５でＮＯ）、受信すると（ステップＳ２０５でＹＥＳ）、ステップＳ２０６で処理終了の操作かどうかを判定する。処理終了の操作であれば（ステップＳ２０６でＹＥＳ）、処理を終了する。処理終了の操作でなければ（ステップＳ２０６でＮＯ）、ステップＳ２０７で、操作に応じた画面に更新し、その画面の画像データをＭＦＰ１に転送した後、ステップＳ２０３に戻る。

なお、操作がジョブの実行指示等の場合は、画面データを送信することなくジョブの実行指令等をＭＦＰ１に送信する。これを受けて、ＭＦＰ１はジョブ等を実行する。

また、携帯端末２のアプリケーションが横画角の画像データのみに対応している場合は、ステップＳ１０４で、アプリケーションのコンテンツが横画角の画像データのみに対応しているかどうかを判定し、横画角の画像データのみに対応している場合において（ステップＳ１０４でＹＥＳ）、表示部１３１が縦向きの場合は、ステップＳ１０５で、縦並びの操作キーの配置を縦に広げて表示すれば良い。

図９は、この発明の他の実施形態に係るＭＦＰ１の動作を示すフローチャートである。この実施形態では、ＭＦＰ１の表示部１３１を含む操作パネル１３０は画面を含む平面内で回転可能に構成されており、回転によって画面が横長の横向きと縦長の縦向きとの間で、一方から他方へ向きを切り替えることができるようになっている。また、操作パネル１３０（表示部１３１）の現在の向きを、図示しないセンサを介してＣＰＵ１０１が判定できるようになっている。

また、携帯端末２の画面を再生しているアプリケーションは、縦画角の画像データのみか、縦画角及び横画角の両方の画像データに対応しているものとして説明する。

図９のフローチャートではステップＳ１２１の処理が追加されている点を除いて、図７に示したフローチャートと同じであるので、ステップＳ１２１の処理を中心に説明する。

ステップＳ１０３の判定において、携帯端末２の画面を再生しているアプリケーションが、縦画角及び横画角のいずれか一方の画像データのみかあるいは両方の画像データに対応しているかをアプリケーション情報を基に判定する機能を、ＭＦＰ１が有している場合は（ステップＳ１０３でＹＥＳ）、ステップＳ１２１に進み、表示部１３１の画面の向きが横向き（横長）かどうかを判定する。横向きであれば（ステップＳ１２１でＹＥＳ）、図７のフローチャートと同じくステップＳ１０４に進む。

表示部１３１の画面の向きが横でない、即ち縦向きであれば（ステップＳ１２１でＮＯ）、図１０のステップＳ１３１に進み、アプリケーションのコンテンツは縦画角の画像データのみに対応しているか否かを判定する。縦画角の画像データのみに対応している場合は（ステップＳ１３１でＹＥＳ）、ステップＳ１３２で、携帯端末２から受信した画像データを、縦長の表示部１３１に縦画角の画像データをそのまま、あるいは操作キーの配置及びサイズを縦横に拡張して表示したのち、図９のステップＳ１１１に進む。

ステップＳ１３１において、縦画角の画像データのみに対応しているものではない、換言すれば縦画角及び横画角の両方に対応するものであれば（ステップＳ１３１でＮＯ）、ステップＳ１３３で、受信した画像データは縦画角の画像データかどうかを調べる。縦画角の画像データでない場合は（ステップＳ１３３でＮＯ）、ステップＳ１３４で、縦画角の画像データの取得要求を携帯端末２に送信し、ステップＳ１３５で、携帯端末２から縦画角の画像データの受信を待つ（ステップＳ１３５でＮＯ）。受信すると（ステップＳ１３５でＹＥＳ）、ステップＳ１３６に進む。ステップＳ１３３で、縦画角の画像データである場合は（ステップＳ１３３でＹＥＳ）、そのままステップＳ１３６に進む。

ステップＳ１３６では、表示部１３１に縦画角の画像データをそのまま、あるいは操作キーの配置及びサイズを縦横に拡張して表示したのち、図９のステップＳ１１１に進む。

なお、図９及び図１０の実施形態において、携帯端末２のアプリケーションが横画角の画像データのみに対応している場合は、図１０のステップＳ１３１で、縦画角の画像データのみに対応しているか、横画角の画像データのみに対応しているかを調べ、横画角の画像データのみに対応している場合は、ステップＳ１３２で、縦並びに配置された複数の操作キーがあればそれらの操作キーの間隔を縦方向に拡張して表示すれば良い。

以上、本発明の一実施形態を説明したが、本発明は上記実施形態に限定されることはない。例えば、図７及び図９のステップＳ１０６で、受信した画像データが縦画角の画像データか否かを判定したが、判定することなく横画角の画像データを要求しても良い。また、アプリケーションが縦画角及び横画角の両方の画像データに対応している場合は、携帯端末２が最初から横画角の画像データをＭＦＰ１に送信する構成にすると、ステップＳ１０４の判定後に直ちにステップＳ１０９に進んで、受信した画像データを表示することができる。

１画像処理装置
１０１ＣＰＵ
１０２ＲＯＭ
１０３ＲＡＭ
１３０操作パネル
１３１表示部
２携帯端末装置
２０１ＣＰＵ
２０２ＲＯＭ
２０３ＲＡＭ
２０５表示部

Claims

携帯端末装置と、該携帯端末装置と接続可能な画像処理装置とを備えた画面表示システムであって、
前記携帯端末装置は、
表示手段と、
前記表示手段に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを前記画像処理装置に送信する送信手段と、
を備え、
前記画像処理装置は、
前記携帯端末装置から、前記画像データと前記アプリケーション情報とを受信する受信手段と、
前記受信手段により受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定手段と、
画面の向きが横長または縦長の表示手段と、
前記第１の判定手段により、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御手段と、
を備えたことを特徴とする画面表示システム。
前記画像処理装置の表示手段の画面は横長の向きであり、前記アプリケーションが縦画角の画像データのみに対応している場合において、前記画像データにおける画像には横方向に間隔を置いて配置される複数の操作キーが含まれ、前記表示制御手段は、前記複数の操作キーの間隔を横方向に拡張して表示手段に表示する請求項１に記載の画面表示システム。
前記画像処理装置の第１の判定手段により、前記アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、画像処理装置は前記表示手段の画面の向きに対応する画角の画像データの取得要求を携帯端末装置へ行い、携帯端末装置の送信手段は、前記取得要求に応じて対応する画像データを画像処理装置に送信する請求項１または２に記載の画面表示システム。
前記画像処理装置は、携帯端末装置から受信した画像データが表示手段の画面の向きに対応する画角の画像データか否かを判定する第２の判定手段を備え、該第２の判定手段により携帯端末装置から受信した画像データが、表示手段の画面の向きに対応する画角の画像データでないと判定された場合に限って、画像処理装置は携帯端末装置へ表示手段の画面の向きに対応する画角の画像データの取得要求を行う請求項３に記載の画面表示システム。
前記画像処理装置は、前記表示手段を回転させることにより、表示手段の画面の向きを横長から縦長へまたは縦長から横長へ変更可能な向き変更手段と、向き変更手段により変更された画面の向きが横長かまたは縦長かを判定する第３の判定手段とを備え、
前記第１の判定手段により、前記アプリケーションが縦画角の画像データまたは横画角の画像データの一方のみに対応していることが判定された場合において、その画角が前記第３の判定手段により判定された画面の向きと異なる場合に、前記表示制御手段は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の少なくとも長手方向に拡張して前記表示手段に表示する請求項１〜４のいずれかに記載の画面表示システム。
前記第１の判定手段を有しているかどうかを判断する判断手段を備え、該判断手段により第１の判定手段を有していると判断された場合に、前記第１の判定手段による判定が行われる請求項１〜５のいずれかに記載の画面表示システム。
携帯端末装置と、画面の向きが横長または縦長の表示手段を有し前記携帯端末装置と接続可能な画像処理装置とを備えた画面表示システムで実行される画面表示方法であって、
前記携帯端末装置は、
携帯端末装置の表示手段に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを前記画像処理装置に送信する送信ステップを実行し、
前記画像処理装置は、
前記携帯端末装置から、前記画像データと前記アプリケーション情報とを受信する受信ステップと、
前記受信ステップにより受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定ステップと、
前記第１の判定ステップにより、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信ステップにより受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御ステップと、
を実行することを特徴とする画面表示方法。
携帯端末装置と接続可能な画像処理装置であって、
前記携帯端末装置に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを、前記携帯端末装置から受信する受信手段と、
前記受信手段により受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定手段と、
画面の向きが横長または縦長の表示手段と、
前記第１の判定手段により、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御手段と、
を備えたことを特徴とする画像処理装置。
前記表示手段の画面は横長の向きであり、前記アプリケーションが縦画角の画像データのみに対応している場合において、前記画像データにおける画像には横方向に間隔を置いて配置される複数の操作キーが含まれ、前記表示制御手段は、前記複数の操作キーの間隔を横方向に拡張して表示手段に表示する請求項８に記載の画像処理装置。
前記第１の判定手段により、前記アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、前記表示手段の画面の向きに対応する画角の画像データの取得要求を携帯端末装置へ行う取得要求手段を備えている請求項８または９に記載の画像処理装置。
前記受信手段により受信した画像データが表示手段の画面の向きに対応する画角の画像データか否かを判定する第２の判定手段を備え、該第２の判定手段により、受信した画像データが表示手段の画面の向きに対応する画角の画像データでないと判定された場合に限って、前記取得要求手段は携帯端末装置へ表示手段の画面の向きに対応する画角の画像データの取得要求を行う請求項１０に記載の画像処理装置。
表示手段の画面の向きを横長から縦長へまたは縦長から横長へ変更可能な向き変更手段と、向き変更手段により変更された画面の向きが横長かまたは縦長かを判定する第３の判定手段とを備え、
前記第１の判定手段により、前記アプリケーションが縦画角の画像データまたは横画角の画像データの一方のみに対応していることが判定された場合において、その画角が前記第３の判定手段により判定された画面の向きと異なる場合に、前記表示制御手段は、前記受信手段により受信した画像データにおける少なくとも一部の画像を、画面の少なくとも長手方向に拡張して前記表示手段に表示する請求項８〜１１のいずれかに記載の画像処理装置。
前記第１の判定手段を有しているかどうかを判断する判断手段を備え、該判断手段により第１の判定手段を有していると判断された場合に、前記第１の判定手段による判定が行われる請求項８〜１２のいずれかに記載の画像処理装置。
画面の向きが横長または縦長の表示手段を有し、携帯端末装置と接続可能な画像処理装置のコンピュータに、
前記携帯端末装置に表示される画像データと、該画像データの再生に関するアプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを示すアプリケーション情報とを、前記携帯端末装置から受信する受信ステップと、
前記受信ステップにより受信したアプリケーション情報に基づいて、該アプリケーションが縦画角の画像データと横画角の画像データの両方に対応しているか否かを判定する第１の判定ステップと、
前記第１の判定ステップにより、前記アプリケーションが縦画角または横画角の一方の画像データのみに対応していることが判定された場合において、その画角が前記表示手段の画面の向きと異なる場合は、前記受信ステップにより受信した画像データにおける少なくとも一部の画像を、画面の長手方向に拡張して前記表示手段に表示する表示制御ステップと、
を実行させるための画面表示プログラム。
前記表示手段の画面は横長の向きを有し、前記アプリケーションが縦画角の画像データのみに対応している場合において、前記画像データにおける画像には横方向に間隔を置いて配置される複数の操作キーが含まれ、前記表示制御ステップでは、前記複数の操作キーの間隔を横方向に拡張して表示手段に表示する処理を、前記コンピュータに実行させる請求項１４に記載の画面表示プログラム。
前記アプリケーションが縦画角の画像データと横画角の画像データの両方に対応していることが判定された場合、前記表示手段の画面の向きに対応する画角の画像データの取得要求を携帯端末装置へ行う取得要求ステップを前記コンピュータに実行させる請求項１４または１５に記載の画面表示プログラム。
前記受信ステップにより受信した画像データが表示手段の画面の向きに対応する画角の画像データか否かを判定する第２の判定ステップを前記コンピュータに実行させ、該第２の判定ステップにより、受信した画像データが表示手段の画面の向きに対応する画角の画像データでないと判定された場合に限って、前記取得要求ステップでは携帯端末装置へ表示手段の画面の向きに対応する画角の画像データの取得要求を行う処理を前記コンピュータに実行させる請求項１６に記載の画面表示プログラム。
前記表示手段の画面の向きを横長から縦長へまたは縦長から横長へ変更する向き変更ステップと、向き変更ステップにより変更された画面の向きが横長かまたは縦長かを判定する第３の判定第３の判定ステップとを前記コンピュータに実行させ、
前記第１の判定ステップにより、前記アプリケーションが縦画角の画像データまたは横画角の画像データの一方のみに対応していることが判定された場合において、その画角が前記第３の判定ステップにより判定された画面の向きと異なる場合に、前記表示制御ステップでは、前記受信ステップにより受信した画像データにおける少なくとも一部の画像を、画面の少なくとも長手方向に拡張して前記表示手段に表示する処理を前記コンピュータに実行させる請求項１４〜１７のいずれかに記載の画面表示プログラム。