JP2013167940A - Display screen conversion device, display screen conversion method and program - Google Patents

Display screen conversion device, display screen conversion method and program Download PDF

Info

Publication number
JP2013167940A
JP2013167940A JP2012029374A JP2012029374A JP2013167940A JP 2013167940 A JP2013167940 A JP 2013167940A JP 2012029374 A JP2012029374 A JP 2012029374A JP 2012029374 A JP2012029374 A JP 2012029374A JP 2013167940 A JP2013167940 A JP 2013167940A
Authority
JP
Japan
Prior art keywords
information
screen
input
conversion
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012029374A
Other languages
Japanese (ja)
Other versions
JP5965661B2 (en
Inventor
Shohei Sato
祥平 佐藤
Takanori Hishiki
孝紀 菱木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Data Group Corp
Original Assignee
NTT Data Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Data Corp filed Critical NTT Data Corp
Priority to JP2012029374A priority Critical patent/JP5965661B2/en
Publication of JP2013167940A publication Critical patent/JP2013167940A/en
Application granted granted Critical
Publication of JP5965661B2 publication Critical patent/JP5965661B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide an operation image in which an input operation can be done in a form suitable for a display screen, to a wireless communication terminal.SOLUTION: A display screen conversion device 200 is connected with an application server 300 and a wireless communication terminal 100 through a network in a mutually communicable manner. The display screen conversion device 200 performs the steps of: converting an input screen into an image according to a preliminarily stored reference and storing the conversion information, each time input screen information defining the input screen which receives input to a service provided by the application server is transmitted from the application server; transmitting image information showing the converted image to the wireless communication terminal; and instructing processing corresponding to input information by acquiring operation information to the image, changing the operation information to the input information corresponding to the input screen before conversion on the basis of the stored conversion information and transmitting the input information to the application server 300.

Description

本発明は、表示画面変換装置、表示画面変換方法、およびプログラムに関する。   The present invention relates to a display screen conversion device, a display screen conversion method, and a program.

コンピュータの多機能化に伴ってコンピュータに対する操作内容は多岐に亘り、その入力項目も増加している。コンピュータは、ユーザが操作する入力デバイスの操作内容を液晶ディスプレイ等の表示手段に表示し、ユーザはその表示画面を見ながら必要事項を入力する。   Along with the increase in the number of functions of computers, there are a wide variety of operations for computers, and the number of input items is also increasing. The computer displays the operation contents of the input device operated by the user on a display means such as a liquid crystal display, and the user inputs necessary items while viewing the display screen.

近年、様々な種類の無線通信端末が開発されており、無線通信端末を用いて社外から社内システムを利用したいという要求が増大している。この場合、無線通信端末内に社内システムにおける情報を保持すると、当該無線通信端末の紛失時に情報が漏洩したり、通信を傍受されるといった危険が生じる。また、社内システムを利用するためのサーバを新たに設けるとコストがかかってしまう。そのため、無線通信端末から、RDP(Remote Desktop Protocol)接続により企業ネットワーク内に設置されているクライアントPCに接続し、当該無線通信端末を操作することにより、データ入力等の入力操作を行う技術が提案されている。   In recent years, various types of wireless communication terminals have been developed, and there is an increasing demand for using an in-house system from outside the company using the wireless communication terminals. In this case, if information in the in-house system is held in the wireless communication terminal, there is a risk that information is leaked or communication is intercepted when the wireless communication terminal is lost. In addition, if a server for using the in-house system is newly provided, the cost is increased. For this reason, a technique has been proposed in which a wireless communication terminal is connected to a client PC installed in a corporate network by RDP (Remote Desktop Protocol) connection, and the wireless communication terminal is operated to perform input operations such as data input. Has been.

無線通信端末により入力操作を行う場合、PC向けの画面を無線通信端末で操作するため、画面サイズの違いなどにより入力が困難となる。そこで、無線通信端末による入力操作を容易にするため、無線通信端末からクライアントPCにRDP接続する際に、PCから送信された画像を無線通信端末の画面サイズに合わせて縦横比を圧縮し、PC用の操作であるキーボード及びマウス操作を無線通信端末用の操作に変換する技術が提案されている(例えば、特許文献1)。   When an input operation is performed using a wireless communication terminal, since a screen for a PC is operated using the wireless communication terminal, input becomes difficult due to a difference in screen size. Therefore, in order to facilitate the input operation by the wireless communication terminal, when the RDP connection from the wireless communication terminal to the client PC, the image transmitted from the PC is compressed in accordance with the screen size of the wireless communication terminal, and the PC There has been proposed a technique for converting a keyboard and mouse operation, which is an operation for an operation, into an operation for a wireless communication terminal (for example, Patent Document 1).

特開2007−251630号公報JP 2007-251630 A

しかしながら、特許文献1に記載の技術では、PCから送信されたPC向けの画面表示画像を、単に無線通信端末の画面サイズに合わせて圧縮して表示するため、無線通信端末上に表示される入力項目等のサイズがPC上で表示されるサイズと比較して小さくなり、入力操作が困難となるおそれがある。したがって、表示画面に適した形式で入力操作を行うことのできる操作画像を無線通信端末に提供するという観点からすると未だ十分とはいえない。   However, in the technique described in Patent Document 1, since the screen display image for the PC transmitted from the PC is simply compressed and displayed in accordance with the screen size of the wireless communication terminal, the input displayed on the wireless communication terminal is displayed. There is a possibility that the size of items and the like becomes smaller than the size displayed on the PC, and the input operation becomes difficult. Therefore, it is still not sufficient from the viewpoint of providing the wireless communication terminal with an operation image that can be input in a format suitable for the display screen.

本発明は、上述のような事情に鑑みてなされたものであり、表示画面に適した形式で入力操作を行うことのできる操作画像を無線通信端末に提供する表示画面変換装置、表示画面変換方法、およびプログラムを提供することを目的としている。   The present invention has been made in view of the above-described circumstances, and provides a display screen conversion apparatus and a display screen conversion method for providing an operation image that can be input in a format suitable for a display screen to a wireless communication terminal. , And aims to provide a program.

上記目的を達成するため、本発明の第1の観点に係る表示画面変換装置は、
アプリケーションサーバと無線通信端末とにネットワークを介して相互に通信可能に接続される表示画面変換装置であって、
前記アプリケーションサーバが提供するサービスに対する入力を受け付ける入力画面を定義する入力画面情報が前記アプリケーションサーバから送信される度に、予め記憶されている基準にしたがって、前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する画面変換部と、
前記画面変換部で変換した入力画面に対する変換内容を示す変換情報を記憶する変換情報記憶部と、
前記画面変換部で変換されたイメージ画像を前記無線通信端末で表示するためのイメージ画像情報を、ユーザによる入力操作を受け付ける前記無線通信端末に送信するイメージ送信部と、
前記無線通信端末から送信される前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記画面変換部で変換される前の入力画面に対応する入力情報に、前記変換情報記憶部で記憶した変換情報に基づいて変更する操作情報変更部と、
前記操作情報変更部で変更された入力情報を前記アプリケーションサーバに送信することにより、前記入力情報により特定される処理の実行を指示する処理指示部と、
を備えることを特徴とする。
In order to achieve the above object, a display screen conversion apparatus according to the first aspect of the present invention provides:
A display screen conversion device connected to an application server and a wireless communication terminal so that they can communicate with each other via a network,
Each time input screen information that defines an input screen that receives an input for a service provided by the application server is transmitted from the application server, an input screen defined by the input screen information according to a prestored criterion A screen conversion unit for converting the image to be displayed on the wireless communication terminal;
A conversion information storage unit that stores conversion information indicating conversion contents for the input screen converted by the screen conversion unit;
An image transmission unit that transmits image image information for displaying an image image converted by the screen conversion unit on the wireless communication terminal to the wireless communication terminal that accepts an input operation by a user;
Operation information for the image image transmitted from the wireless communication terminal is acquired, and the acquired operation information is converted into input information corresponding to an input screen before being converted by the screen conversion unit, by the conversion information storage unit. An operation information changing unit to change based on the stored conversion information;
A process instruction unit that instructs execution of the process specified by the input information by transmitting the input information changed by the operation information change unit to the application server;
It is characterized by providing.

また、
前記画面変換部は、
前記入力画面情報に含まれる所定の文字列の数をカウントするカウンタ部と、
前記カウンタ部によりカウントされた値が前記基準で定められた閾値より大きい場合に前記入力画面情報を分割して前記入力画面を分割する画面分割部と、
予め記憶されている基準にしたがって、前記画面分割部で分割された入力画面を前記無線通信端末で表示するイメージ画像に変換する分割画面変換部と、を備え、
前記変換情報記憶部は、前記画面分割部で分割された入力画面と分割前の入力画面との対応関係をさらに記憶し、
前記操作情報変更部は、
前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記変換情報記憶部で記憶した変換情報に基づいて、前記分割画面変換部で変換される前の入力画面に対応する操作情報に変更する分割後操作情報変更部と、
前記分割後操作情報変更部で変更した操作情報を、前記変換情報記憶部で記憶した前記対応関係に基づいて、前記画面分割部で分割される前の入力画面に対応する入力情報に変更する分割前操作情報変更部と、
を備える、ようにしてもよい。
Also,
The screen conversion unit
A counter unit that counts the number of predetermined character strings included in the input screen information;
A screen dividing unit that divides the input screen by dividing the input screen information when a value counted by the counter unit is larger than a threshold defined by the reference;
A divided screen conversion unit that converts the input screen divided by the screen division unit into an image image to be displayed on the wireless communication terminal according to a pre-stored standard,
The conversion information storage unit further stores a correspondence relationship between the input screen divided by the screen division unit and the input screen before the division,
The operation information changing unit
Operation information for the image is acquired, and the acquired operation information is converted into operation information corresponding to the input screen before being converted by the split screen conversion unit based on the conversion information stored in the conversion information storage unit. A post-division operation information change part to be changed;
Division which changes operation information changed in the operation information change part after division into input information corresponding to an input screen before being divided in the screen division part based on the correspondence stored in the conversion information storage part A previous operation information change part;
May be provided.

また、表示画面変換装置は、
前記アプリケーションサーバから送信される暗号化された入力画面情報を復号する復号部をさらに備え、
前記画面変換部は、前記復号部により前記暗号化された入力画面情報が復号される度に、予め記憶されている基準にしたがって前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する、
ことを特徴とするようにしてもよい。
In addition, the display screen conversion device
A decrypting unit for decrypting encrypted input screen information transmitted from the application server;
The screen conversion unit displays, on the wireless communication terminal, an input screen defined by the input screen information in accordance with a pre-stored standard every time the encrypted input screen information is decrypted by the decryption unit. Convert to an image
You may make it feature.

上記目的を達成するため、本発明の第2の観点に係る表示画面変換方法は、
アプリケーションサーバと無線通信端末とにネットワークを介して相互に通信可能に接続される表示画面変換装置による表示画面変換方法であって、
前記アプリケーションサーバが提供するサービスに対する入力を受け付ける入力画面を定義する入力画面情報が前記アプリケーションサーバから送信される度に、予め記憶されている基準にしたがって、前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する画面変換ステップと、
前記画面変換ステップで変換した入力画面に対する変換内容を示す変換情報を記憶する変換情報記憶ステップと、
前記画面変換ステップで変換されたイメージ画像を前記無線通信端末で表示するためのイメージ画像情報を、ユーザによる入力操作を受け付ける前記無線通信端末に送信するイメージ送信ステップと、
前記無線通信端末から送信される前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記画面変換ステップで変換される前の入力画面に対応する入力情報に、前記変換情報記憶ステップで記憶した変換情報に基づいて変更する操作情報変更ステップと、
前記操作情報変更ステップで変更された入力情報を前記アプリケーションサーバに送信することにより、前記入力情報により特定される処理の実行を指示する処理指示ステップと、
を備えることを特徴とする。
In order to achieve the above object, a display screen conversion method according to a second aspect of the present invention includes:
A display screen conversion method by a display screen conversion device connected to an application server and a wireless communication terminal so that they can communicate with each other via a network,
Each time input screen information that defines an input screen that receives an input for a service provided by the application server is transmitted from the application server, an input screen defined by the input screen information according to a prestored criterion A screen conversion step of converting the image to be displayed on the wireless communication terminal;
A conversion information storage step for storing conversion information indicating conversion contents for the input screen converted in the screen conversion step;
An image transmission step of transmitting image image information for displaying the image image converted in the screen conversion step to the wireless communication terminal, which receives an input operation by a user;
Operation information for the image image transmitted from the wireless communication terminal is acquired, and the acquired operation information is converted into input information corresponding to the input screen before being converted in the screen conversion step, in the conversion information storage step. An operation information change step for changing based on the stored conversion information;
A process instruction step for instructing execution of a process specified by the input information by transmitting the input information changed in the operation information change step to the application server;
It is characterized by providing.

上記目的を達成するため、本発明の第3の観点に係るプログラムは、
アプリケーションサーバと無線通信端末とにネットワークを介して相互に通信可能に接続されるコンピュータを、
前記アプリケーションサーバが提供するサービスに対する入力を受け付ける入力画面を定義する入力画面情報が前記アプリケーションサーバから送信される度に、予め記憶されている基準にしたがって、前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する画面変換部、
前記画面変換部で変換した入力画面に対する変換内容を示す変換情報を記憶する変換情報記憶部、
前記画面変換部で変換されたイメージ画像を前記無線通信端末で表示するためのイメージ画像情報を、ユーザによる入力操作を受け付ける前記無線通信端末に送信するイメージ送信部、
前記無線通信端末から送信される前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記画面変換部で変換される前の入力画面に対応する入力情報に、前記変換情報記憶部で記憶した変換情報に基づいて変更する操作情報変更部、
前記操作情報変更部で変更された入力情報を前記アプリケーションサーバに送信することにより、前記入力情報により特定される処理の実行を指示する処理指示部、
として機能させることを特徴とする。
In order to achieve the above object, a program according to the third aspect of the present invention provides:
A computer connected to an application server and a wireless communication terminal so as to communicate with each other via a network,
Each time input screen information that defines an input screen that receives an input for a service provided by the application server is transmitted from the application server, an input screen defined by the input screen information according to a prestored criterion A screen conversion unit for converting the image to be displayed on the wireless communication terminal;
A conversion information storage unit for storing conversion information indicating conversion contents for the input screen converted by the screen conversion unit;
An image transmission unit that transmits image image information for displaying the image image converted by the screen conversion unit on the wireless communication terminal to the wireless communication terminal that accepts an input operation by a user;
Operation information for the image image transmitted from the wireless communication terminal is acquired, and the acquired operation information is converted into input information corresponding to an input screen before being converted by the screen conversion unit, by the conversion information storage unit. An operation information changing unit that changes based on the stored conversion information,
A process instructing unit for instructing execution of a process specified by the input information by transmitting the input information changed by the operation information changing unit to the application server;
It is made to function as.

本発明によれば、表示画面に適した形式で入力操作を行う操作画像を無線通信端末に提供することができる。   According to the present invention, an operation image for performing an input operation in a format suitable for a display screen can be provided to a wireless communication terminal.

本発明の実施の形態に係る表示画面変換システムの構成を示すブロック図である。It is a block diagram which shows the structure of the display screen conversion system which concerns on embodiment of this invention. 図1の表示画面変換システムにおける無線通信端末の構成を示すブロック図である。It is a block diagram which shows the structure of the radio | wireless communication terminal in the display screen conversion system of FIG. 図1の表示画面変換システムにおける表示画面変換装置の構成を示すブロック図である。It is a block diagram which shows the structure of the display screen conversion apparatus in the display screen conversion system of FIG. 図1の表示画面変換システムにおける表示画面変換装置が備える画面変換ルールの一例を示す図である。It is a figure which shows an example of the screen conversion rule with which the display screen conversion apparatus in the display screen conversion system of FIG. 1 is provided. 図1の表示画面変換システムにおけるアプリケーションサーバの構成を示すブロック図である。It is a block diagram which shows the structure of the application server in the display screen conversion system of FIG. 図1の表示画面変換システムの動作の一例を示すフローチャートである。It is a flowchart which shows an example of operation | movement of the display screen conversion system of FIG. アプリケーションサーバから送信されるhtmlファイルの一例を示す図である。It is a figure which shows an example of the html file transmitted from an application server. 図1の表示画面変換システムにおける部品置き換え処理の一例を示すフローチャートである。It is a flowchart which shows an example of the components replacement process in the display screen conversion system of FIG. 部品置き換え処理にて変換される画面イメージとソースコードの一例を示す図である。It is a figure which shows an example of the screen image converted by component replacement processing, and a source code. 部品置き換え処理にて変換される画面イメージとソースコードの一例を示す図である。It is a figure which shows an example of the screen image converted by component replacement processing, and a source code. 部品置き換え処理にて変換される画面イメージとソースコードの一例を示す図である。It is a figure which shows an example of the screen image converted by component replacement processing, and a source code. 図1の表示画面変換システムにおける画面分割処理の一例を示すフローチャートである。It is a flowchart which shows an example of the screen division | segmentation process in the display screen conversion system of FIG. 画面分割処理にて追記されるソースコードと画面イメージの一例を示す図である。It is a figure which shows an example of the source code and screen image which are added by the screen division | segmentation process. 画面分割処理にて分割されるhtmlファイルの一例を示す図である。It is a figure which shows an example of the html file divided | segmented by a screen division | segmentation process. 図1の表示画面変換システムにおける画面統合処理の一例を示すフローチャートである。It is a flowchart which shows an example of the screen integration process in the display screen conversion system of FIG. 図1の表示画面変換システムの動作の一例を示すフローチャートである。It is a flowchart which shows an example of operation | movement of the display screen conversion system of FIG. 部品置き換え処理にて変換される画面イメージとソースコードの一例を示す図である。It is a figure which shows an example of the screen image converted by component replacement processing, and a source code.

本実施形態では、本発明に係る表示画面変換装置を表示画面変換システムに適用した例を示す。   In the present embodiment, an example in which the display screen conversion apparatus according to the present invention is applied to a display screen conversion system is shown.

表示画面変換システムについて図面を参照して説明する。図1に示すように、表示画面変換システム1は、複数の無線通信端末100と、表示画面変換装置200と、複数のアプリケーションサーバ300と、を備えている。表示画面変換システム1は、無線通信端末100にてRDP接続により表示画面変換装置200のブラウザを利用する場合に、当該PC用のhtmlファイルのソースコードを、予め定められた変換ルールに従って編集して、htmlファイルの分割、イメージ画像の変換を行い、分割されたhtmlファイルや変換後のイメージ画像により表示される画面イメージを無線通信端末100に提供する。また、表示画面変換システム1は、変換したイメージ画像に対するユーザによる入力操作を受け付ける。そして、分割後のhtmlファイルに対する入力操作の内容を、分割前のhtmlファイルの操作内容として統合してアプリケーションサーバ300に送信し、当該入力操作に対する処理を行う。   A display screen conversion system will be described with reference to the drawings. As shown in FIG. 1, the display screen conversion system 1 includes a plurality of wireless communication terminals 100, a display screen conversion device 200, and a plurality of application servers 300. The display screen conversion system 1 edits the source code of the html file for the PC in accordance with a predetermined conversion rule when using the browser of the display screen conversion device 200 by RDP connection in the wireless communication terminal 100. The html file is divided and the image is converted, and a screen image displayed by the divided html file and the converted image image is provided to the wireless communication terminal 100. Further, the display screen conversion system 1 accepts an input operation by the user for the converted image. Then, the contents of the input operation for the divided html file are integrated as the operation contents of the html file before the division and transmitted to the application server 300, and processing for the input operation is performed.

各無線通信端末100は、スマートフォンやタブレットパソコン等の端末から構成され、ネットワークを介して表示画面変換装置200と相互に通信可能に接続されている。各無線通信端末100は、主に、表示画面変換装置200から受信した画面イメージに対してユーザが入力操作を行う端末である。   Each wireless communication terminal 100 includes a terminal such as a smartphone or a tablet personal computer, and is connected to the display screen conversion apparatus 200 via a network so as to be able to communicate with each other. Each wireless communication terminal 100 is a terminal on which a user mainly performs an input operation on a screen image received from the display screen conversion apparatus 200.

無線通信端末100は、図2に示すように、入力部110と、表示部120と、記憶部130と、制御部140と、通信部150と、上記各部を相互に接続するシステムバス160を備えている。
を備えている。
As shown in FIG. 2, the wireless communication terminal 100 includes an input unit 110, a display unit 120, a storage unit 130, a control unit 140, a communication unit 150, and a system bus 160 that interconnects the above units. ing.
It has.

入力部110は、例えば、キーボード、マウス、カメラ、マイク等から構成され、当該無線通信端末100への指示や、データの入力を行うための装置である。キーボードやマウス等であり、表示部120は、例えば、ディスプレイにより構成され、表示画面変換装置200から受信した画面イメージを表示する他、当該無線通信端末100による処理状態や処理結果を表示する。また、表示部120は、例えば、スピーカにより構成され、利用者に対して、音を出力するようにしてもよい。該処理状態や処理結果には、オペレーティングシステム(OS: Operating System)やアプリケーション(Application)によるものが含まれる。ディスプレイには、液晶ディスプレイ(Liquid Crystal Display :LCD)、CRT(Cathode Ray Tube)ディスプレイ、プラズマディスプレイ(PDP: Plasma Display Panel)、有機EL(Electro-Luminescence)ディスプレイなどが含まれる。   The input unit 110 includes, for example, a keyboard, a mouse, a camera, a microphone, and the like, and is a device for inputting instructions and data to the wireless communication terminal 100. The display unit 120 includes, for example, a display and displays a screen image received from the display screen conversion apparatus 200, and displays a processing state and a processing result by the wireless communication terminal 100. The display unit 120 may be configured by a speaker, for example, and output sound to the user. The processing state and the processing result include an operating system (OS) and an application (Application). The display includes a liquid crystal display (LCD), a CRT (Cathode Ray Tube) display, a plasma display (PDP), an organic EL (Electro-Luminescence) display, and the like.

記憶部130は、ハードディスクやメモリなどから構成され、アプリケーションと、オペレーティングシステムとを有する。アプリケーションは、ユーザが本無線通信端末100上で実行する作業を実施する機能を有するソフトウェアである。オペレーティングシステムは、本無線通信端末100において、ハードウェアを抽象化したインターフェースをアプリケーションソフトウェアに提供するソフトウェアである。なお、記憶部130には、RDPアプリケーション131とRDPファイル132が記憶されている。RDPアプリケーション131は、RDPファイル132に予め設定されている表示画面変換装置200とRDP接続を行うためのアプリケーションである。RDPファイル132は、RDP接続における定義が設定されたファイルであり、例えば、当該無線通信端末100の画面サイズや、接続先のアプリケーションサーバ300を特定する接続先情報等が定義されている。   The storage unit 130 includes a hard disk, a memory, and the like, and includes an application and an operating system. The application is software having a function of performing a work performed on the wireless communication terminal 100 by the user. The operating system is software that provides application software with an interface that abstracts hardware in the wireless communication terminal 100. The storage unit 130 stores an RDP application 131 and an RDP file 132. The RDP application 131 is an application for performing RDP connection with the display screen conversion apparatus 200 preset in the RDP file 132. The RDP file 132 is a file in which a definition for RDP connection is set. For example, the screen size of the wireless communication terminal 100, connection destination information for specifying the connection destination application server 300, and the like are defined.

制御部140は、CPU等から構成される。制御部140は、記憶部130に記憶されたアプリケーション等のプログラムに従って機能し、表示画面変換装置200に対して、ユーザによる入力操作の内容を送信する等といった所定の処理を行う。   The control unit 140 includes a CPU and the like. The control unit 140 functions in accordance with a program such as an application stored in the storage unit 130 and performs predetermined processing such as transmitting the contents of the input operation by the user to the display screen conversion apparatus 200.

制御部140は、記憶部130に記憶されているRDPアプリケーション131が起動されることに基づいて、RDPファイル132に設定されている表示画面変換装置200とVPN接続を行い企業ネットワークに接続した後、RDP接続を行う。   Based on the activation of the RDP application 131 stored in the storage unit 130, the control unit 140 performs VPN connection with the display screen conversion device 200 set in the RDP file 132 and connects to the corporate network. Make an RDP connection.

また、制御部140は、後述する表示画面変換装置200から通信部150を介して画面イメージを受信し、表示部120に表示する。ユーザは表示部120に表示された画面に従って必要項目を入力する。   In addition, the control unit 140 receives a screen image from the display screen conversion apparatus 200 described later via the communication unit 150 and displays the screen image on the display unit 120. The user inputs necessary items according to the screen displayed on the display unit 120.

また、制御部140は、入力部110からユーザの入力操作が行われる度に、ユーザにより入力された操作情報を、表示画面変換装置200に送信する。ここで、操作情報は、ユーザによりいかなる操作が行われたかを示す情報であり、例えば、画面上における座標位置で特定される箇所がユーザにより押下された、といったことを示す情報である。操作情報は、表示画面変換装置200にて、htmlファイルやブラウザ上での入力操作を示す入力情報に変換される。   The control unit 140 transmits operation information input by the user to the display screen conversion apparatus 200 every time a user input operation is performed from the input unit 110. Here, the operation information is information indicating what operation has been performed by the user, for example, information indicating that a location specified by the coordinate position on the screen has been pressed by the user. The operation information is converted into input information indicating an input operation on an html file or a browser by the display screen conversion device 200.

通信部150は、シリアルインタフェース、或いはアナログ信号を受信するためのアナログインタフェースを有している。表示画面変換装置200から送信される情報は、通信部150によって受信され、制御部140へ提供される。   The communication unit 150 has a serial interface or an analog interface for receiving an analog signal. Information transmitted from the display screen conversion apparatus 200 is received by the communication unit 150 and provided to the control unit 140.

表示画面変換装置200は、一般的なコンピュータから構成され、企業ネットワーク内等、セキュリティが確保された環境内に設置されている。また、表示画面変換装置200は、アプリケーションサーバ300から送信されるhtmlファイルのソースコードを編集してイメージ画像の変換とhtmlファイルの分割をし、そのhtmlファイルや変換後のイメージ画像により表される画面イメージを無線通信端末100へ送信する。さらに、表示画面変換装置200は、無線通信端末100から送信された操作情報に基づいて、起動したブラウザ上での処理を行うとともに、分割されたhtmlファイルについての入力操作を統合し、アプリケーションサーバ300へ送信する。   The display screen conversion apparatus 200 is composed of a general computer, and is installed in an environment where security is ensured, such as in a corporate network. The display screen conversion apparatus 200 edits the source code of the html file transmitted from the application server 300 to convert the image and divide the html file, and is represented by the html file and the converted image image. The screen image is transmitted to the wireless communication terminal 100. Furthermore, the display screen conversion apparatus 200 performs processing on the activated browser based on the operation information transmitted from the wireless communication terminal 100 and integrates the input operations for the divided html files, and the application server 300. Send to.

表示画面変換装置200は、図3に示すように、入力部210と、表示部220と、記憶部230と、制御部240と、通信部250と、上記各部を相互に接続するシステムバス260を備えている。   As shown in FIG. 3, the display screen conversion apparatus 200 includes an input unit 210, a display unit 220, a storage unit 230, a control unit 240, a communication unit 250, and a system bus 260 that connects the above units to each other. I have.

入力部210は、例えば、キーボードやマウス等であり、表示部220は、例えば、無線通信端末100で表示される画面イメージと同サイズのイメージ画像を、後述する制御部240により起動されるブラウザを表示するモニター等である。   The input unit 210 is, for example, a keyboard or a mouse, and the display unit 220 is, for example, an image image having the same size as the screen image displayed on the wireless communication terminal 100. A monitor to be displayed.

記憶部230は、フラッシュメモリ、ハードディスク等の不揮発性メモリから構成され、無線通信端末100から送信される入力操作の内容や、オペレーティングシステム、後述する画面変換ルール231、及び、プログラム232等が格納される。また、記憶部230には、無線通信端末100から送信される操作情報であって、表示画面変換装置200のブラウザにて処理された操作内容や、画面分割処理や部品置き換え処理によりhtmlファイルが編集された場合における、編集前後の対応関係と編集内容が格納される。   The storage unit 230 includes a nonvolatile memory such as a flash memory and a hard disk, and stores the contents of input operations transmitted from the wireless communication terminal 100, an operating system, a screen conversion rule 231 described later, a program 232, and the like. The Further, in the storage unit 230, the operation information transmitted from the wireless communication terminal 100, and the html file edited by the operation content processed by the browser of the display screen conversion apparatus 200, the screen division process, and the part replacement process are edited. In this case, the correspondence before and after editing and the editing contents are stored.

画面変換ルール231は、変換対象項目毎の、htmlファイルの変換内容を示すテーブルであり、管理者の入力操作によって作成され、記憶部230に格納される。画面変換ルール231は、管理者等が入力部210を介して入力することで作成される。本実施形態における画面変換ルール231は、図4に示すように、画面分割、文章表示、ボタン表示、画像表示、といった項目が変換対象項目となっており、変換対象項目毎に変換内容が定められている。   The screen conversion rule 231 is a table indicating the conversion contents of the html file for each conversion target item, and is created by an administrator input operation and stored in the storage unit 230. The screen conversion rule 231 is created when an administrator or the like inputs through the input unit 210. In the screen conversion rule 231 in this embodiment, as shown in FIG. 4, items such as screen division, sentence display, button display, and image display are conversion target items, and conversion contents are determined for each conversion target item. ing.

図3に戻り、プログラム232には、アプリケーションサーバ300から受信したhtmlファイルのソースコードを編集して表示画面を構成する部品を置き換える部品置き換え処理や画面分割処理、及び、分割したhtmlファイルにより表示される画面イメージに対する操作情報を、分割前のhtmlファイルへの操作内容を特定する入力情報として統合する画面統合処理等が記述された変換ソフトウェアが含まれている。   Returning to FIG. 3, the program 232 displays the part replacement process and the screen division process for replacing the parts constituting the display screen by editing the source code of the html file received from the application server 300 and the divided html file. Conversion software in which a screen integration process for integrating operation information for a screen image to be input as input information for specifying an operation content to an html file before division is included.

制御部240は、CPU等から構成される。制御部240は、プログラム232に従って動作し、画面分割処理、部品置き換え処理、及び、画面統合処理に必要な機能を提供する。また、制御部240は、オペレーティングシステム上でプログラムが実行されることでRDPサーバとしての機能を提供する。制御部240は、RDPサーバとしての機能により、無線通信端末100に対して画面イメージの送信や、操作情報の受信を行う。   The control unit 240 is composed of a CPU and the like. The control unit 240 operates in accordance with the program 232 and provides functions necessary for screen division processing, component replacement processing, and screen integration processing. In addition, the control unit 240 provides a function as an RDP server by executing a program on the operating system. The control unit 240 transmits a screen image to the wireless communication terminal 100 and receives operation information by the function as an RDP server.

制御部240は、プログラム232により提供される主要な機能部として、表示画面変換部241と、分割画面統合部242と、ブラウザ処理部243と、を備えている。   The control unit 240 includes a display screen conversion unit 241, a split screen integration unit 242, and a browser processing unit 243 as main functional units provided by the program 232.

表示画面変換部241は、記憶部230に格納されている画面変換ルール232に基づいて、アプリケーションサーバ300から受信した画面(htmlファイル)に対して画面分割処理や部品置き換え処理を行う。具体的には、表示画面変換部241は、アプリケーションサーバ300から受信したhtmlファイルのソースコード中から、画面変換ルール232の判断基準となる文字列を検索し、検索した文字列毎に、画面変換ルール232に従って、この文字列に対応するhtmlファイルのソースコードを編集するなどして、画面分割処理や部品置き換え処理を行う。これらの処理の詳細については後述する。   The display screen conversion unit 241 performs screen division processing and component replacement processing on the screen (html file) received from the application server 300 based on the screen conversion rule 232 stored in the storage unit 230. Specifically, the display screen conversion unit 241 searches the source code of the html file received from the application server 300 for a character string that is a criterion for the screen conversion rule 232, and performs screen conversion for each searched character string. In accordance with the rule 232, screen split processing and component replacement processing are performed by editing the source code of the html file corresponding to this character string. Details of these processes will be described later.

分割画面統合部242は、無線通信端末100から受信した操作情報により示されるユーザによる入力情報を統合する画面統合処理を行う。具体的には、分割画面統合部144は、操作情報により示される入力情報が入力完了通知を含むページ遷移情報であると判定したことに基づいて、入力情報を、分割前のhtmlファイルに対応する形に統合し、アプリケーションサーバ300へ送信し、当該入力情報に対応する処理を行うよう指示する。この処理の詳細については後述する。   The split screen integration unit 242 performs screen integration processing for integrating user input information indicated by the operation information received from the wireless communication terminal 100. Specifically, based on the determination that the input information indicated by the operation information is page transition information including an input completion notification, the split screen integration unit 144 corresponds the input information to the html file before splitting. Are integrated into a form, transmitted to the application server 300, and instructed to perform processing corresponding to the input information. Details of this processing will be described later.

ブラウザ処理部243は、無線通信端末100から受信した操作情報により示される入力情報に対応する処理を行い、処理を行った後に表示すべき画面イメージを、無線通信端末100に送信する。具体的には、ブラウザ処理部243は、無線通信端末100から受信した操作情報が、ブラウザ処理部243での操作を要求する入力情報である場合に、当該入力情報に対応する、予めhtmlファイル上で定められた処理を行い、処理後に表示される画面イメージを、無線通信端末100へ送信する。この処理の詳細については後述する。   The browser processing unit 243 performs processing corresponding to the input information indicated by the operation information received from the wireless communication terminal 100, and transmits a screen image to be displayed after the processing to the wireless communication terminal 100. Specifically, when the operation information received from the wireless communication terminal 100 is input information for requesting an operation in the browser processing unit 243, the browser processing unit 243 previously stores an html file corresponding to the input information. The screen image displayed after the processing is transmitted to the wireless communication terminal 100. Details of this processing will be described later.

通信部250は、シリアルインタフェース、或いはアナログ信号を受信するためのアナログインタフェースを有している。無線通信端末100やアプリケーションサーバ300から送信される操作情報やhtmlファイル等の各種情報は、通信部250によって受信され、制御部240へ送信される。   The communication unit 250 has a serial interface or an analog interface for receiving an analog signal. Various types of information such as operation information and html files transmitted from the wireless communication terminal 100 and the application server 300 are received by the communication unit 250 and transmitted to the control unit 240.

アプリケーションサーバ300は、一般的なコンピュータから構成され、企業ネットワーク内等のセキュリティが確保された環境内に設置されている。アプリケーションサーバ300は、表示画面変換装置200から送信されるhtmlファイルの送信要求に応じて該当するhtmlファイルを表示画面変換装置200に送信する。また、アプリケーションサーバ300は、表示画面変換装置200から送信される入力情報を受信し、入力事項に応じた処理を行う。   The application server 300 includes a general computer and is installed in an environment where security is ensured, such as in a corporate network. The application server 300 transmits the corresponding html file to the display screen conversion device 200 in response to the html file transmission request transmitted from the display screen conversion device 200. In addition, the application server 300 receives input information transmitted from the display screen conversion apparatus 200 and performs processing according to the input items.

アプリケーションサーバ300は、図5に示すように、入力部310と、表示部320と、記憶部330と、制御部340と、通信部350と、上記各部を相互に接続するシステムバス360を備えている。   As shown in FIG. 5, the application server 300 includes an input unit 310, a display unit 320, a storage unit 330, a control unit 340, a communication unit 350, and a system bus 360 that interconnects the above units. Yes.

入力部310は、例えば、キーボードやマウス等であり、表示部320は、例えば、後述する制御部340から提供される情報を表示するモニター等である。   The input unit 310 is, for example, a keyboard or a mouse, and the display unit 320 is, for example, a monitor that displays information provided from a control unit 340 to be described later.

記憶部330は、フラッシュメモリ、ハードディスク等の不揮発性メモリから構成され、サーバプログラムや複数のhtmlファイルが格納されている。   The storage unit 330 includes a nonvolatile memory such as a flash memory and a hard disk, and stores a server program and a plurality of html files.

制御部340は、CPU等から構成される。制御部340は、サーバプログラム331に従って動作し、後述する通信部350を介して受信した無線通信端末100からの要求に応じて、この要求に対応するhtmlファイルを、表示画面変換装置200に送信する。また、制御部340は、表示画面変換装置200により送信された入力情報に基づいて、すなわち、ユーザによる無線通信端末100への操作情報に応じて、アプリケーションの処理を実行する。   The control unit 340 includes a CPU and the like. The control unit 340 operates according to the server program 331, and transmits an html file corresponding to this request to the display screen conversion device 200 in response to a request from the wireless communication terminal 100 received via the communication unit 350 described later. . In addition, the control unit 340 executes application processing based on the input information transmitted by the display screen conversion apparatus 200, that is, according to operation information on the wireless communication terminal 100 by the user.

通信部350は、シリアルインタフェース、或いはアナログ信号を受信するためのアナログインタフェースを有している。表示画面変換装置200から送信される情報は、通信部350によって受信され、制御部340へ送信される。   The communication unit 350 has a serial interface or an analog interface for receiving an analog signal. Information transmitted from the display screen conversion apparatus 200 is received by the communication unit 350 and transmitted to the control unit 340.

以上が、表示画面変換システム1の構成である。続いて、表示画面変換システム1の全体的な動作について、図6〜図15を参照して説明する。   The above is the configuration of the display screen conversion system 1. Next, the overall operation of the display screen conversion system 1 will be described with reference to FIGS.

表示画面変換システム1では、無線端末装置100に対するユーザの入力操作により、RDPアプリケーション131が起動されることに応答して処理が開始される。まず、制御部140は、図6に示すように、入力部110に入力された入力操作に応答して、記憶部130に記憶されているRDPアプリケーション131を起動し(ステップS101)、表示画面変換装置200に対して、ブラウザの起動命令と各種情報を、通信部150を介して送信する(ステップS102)。各種情報には、無線通信端末100の端末を識別する端末識別情報や、当該無線通信端末100の画面サイズ、接続するアプリケーションサーバ300を特定する接続先情報等が含まれている。   In the display screen conversion system 1, processing is started in response to activation of the RDP application 131 by a user input operation on the wireless terminal device 100. First, as illustrated in FIG. 6, the control unit 140 starts the RDP application 131 stored in the storage unit 130 in response to the input operation input to the input unit 110 (step S <b> 101), and converts the display screen. A browser activation command and various types of information are transmitted to the device 200 via the communication unit 150 (step S102). The various types of information include terminal identification information for identifying the terminal of the wireless communication terminal 100, a screen size of the wireless communication terminal 100, connection destination information for specifying the application server 300 to be connected, and the like.

表示画面変換装置200の制御部240は、無線通信端末100からブラウザの起動命令と各種情報を受信すると、ブラウザを起動するとともに、記憶部230に格納されているプログラム232に含まれる変換ソフトウェアを起動する(ステップS201)。なお、ブラウザを先に起動し、その後変換ソフトウェアを起動してもよい。   When receiving the browser activation command and various information from the wireless communication terminal 100, the control unit 240 of the display screen conversion device 200 activates the browser and activates the conversion software included in the program 232 stored in the storage unit 230. (Step S201). Note that the browser may be started first and then the conversion software may be started.

制御部240は、変換ソフトウェアが起動されることに応じて、無線端末装置100から受信した接続先情報により特定されるアプリケーションサーバ300へ、当該接続先情報に含まれるhtmlファイルの送信要求を、通信部250を介して送信する(ステップS202)。   In response to the activation of the conversion software, the control unit 240 communicates a transmission request for the html file included in the connection destination information to the application server 300 specified by the connection destination information received from the wireless terminal device 100. It transmits via the part 250 (step S202).

アプリケーションサーバ300の制御部340は、htmlファイルの送信要求を受信すると、当該送信要求により特定されるhtmlファイルを検索して特定し、図7に示すようなhtmlファイルを、通信部350を介して表示画面変換装置200へ送信する(ステップS301)。なお、htmlファイルの特定は、例えば、当該接続先情報に含まれるURLに基づいて行う。   When receiving the html file transmission request, the control unit 340 of the application server 300 searches and identifies the html file specified by the transmission request, and the html file as shown in FIG. It transmits to the display screen converter 200 (step S301). Note that the html file is specified based on, for example, the URL included in the connection destination information.

図6に戻り、表示画面変換装置200の制御部240は、アプリケーションサーバ300からhtmlファイルを受信すると、記憶部230に格納されている画面変換ルール232を読み込み、表示画面変換部241の機能により、部品置き換え処理を開始する(ステップS203)。   Returning to FIG. 6, when receiving the html file from the application server 300, the control unit 240 of the display screen conversion apparatus 200 reads the screen conversion rule 232 stored in the storage unit 230, and the function of the display screen conversion unit 241 The component replacement process is started (step S203).

具体的には、部品置き換え処理では、図8に示すように、表示画面変換部241の機能により、アプリケーションサーバ300から受信したhtmlファイルのソースコード中から、「Button」の文字列を検索する(ステップS401)。そして、「Button」の文字列を検索した場合(ステップS401;検索)、画面変換ルール133中の、変換対象が「ボタン表示」に対応する変更内容で、検索した文字列に対応するソースコードを編集する(ステップS402)。この例では、図9に示すように、「Button」の文字列と同じタグ内のwidthとheightがそれぞれ93pixel以上となるようにソースコードを編集する。図8に戻り、「Button」の文字列を検索できなかった場合(ステップS401;検索不可)、特に処理を行わず、次の処理へと進む。   Specifically, in the component replacement process, as shown in FIG. 8, the function of the display screen conversion unit 241 searches for the character string “Button” from the source code of the html file received from the application server 300 ( Step S401). When the character string “Button” is searched (step S401; search), the source code corresponding to the searched character string is changed in the screen conversion rule 133 with the change content corresponding to “button display”. Edit (step S402). In this example, as shown in FIG. 9, the source code is edited so that the width and height in the same tag as the character string “Button” are each 93 pixels or more. Returning to FIG. 8, when the character string “Button” cannot be searched (step S401; search not possible), the process proceeds to the next process without performing any particular process.

次に、表示画面分割部241は、アプリケーションサーバ300から受信したhtmlファイルのソースコード中から、「h1」〜「h6」の文字列を検索する(ステップS403)。そして、「h1」〜「h6」の文字列のいずれかを検索した場合には(ステップS403;検索)、htmlファイルの「header」タグに図10(a)に示す内容を追記する(ステップS404)。この処理により、文章表示されている各項目がリスト表示されることとなる。なお、ステップS404の処理を実行した場合には、例えば、フラグをオン状態にセットするなどして、その旨を示す情報を記憶部230に記憶しておく。続いて、表示画面分割部241は、ソースコードを編集する。具体的には、図10(b)に示すように、各「h」タグの階層を「ul」タグで囲み、「h1」以外のタグの前に「br」タグを追加する。そして、各「h」タグと「/h」タグを図示するように置き換える(ステップS405)。これにより、当該変換されたhtmlファイルにより表示される画面イメージが無線通信端末100で表示されると、図示するように、見出しのみが表示され、見出し以下の階層の項目は、ユーザによる入力操作に応じて表示されることとなる。具体的には、h1の見出しが押下されると、この操作情報が無線通信端末100から表示画面変換装置200に送信され、ブラウザ処理部243により画面イメージにh1の見出しの説明文章とh2の見出しが表示され、無線通信端末100へ送信されることとなる。図8に戻り、「h1」〜「h6」の文字列のいずれも検索できなかった場合には(ステップS403;検索不可)、特に処理を行わず、次の処理に進む。   Next, the display screen dividing unit 241 searches for the character string “h1” to “h6” from the source code of the html file received from the application server 300 (step S403). When any of the character strings “h1” to “h6” is searched (step S403; search), the contents shown in FIG. 10A are added to the “header” tag of the html file (step S404). ). By this processing, each item displayed in the sentence is displayed as a list. When the process of step S404 is executed, information indicating that is stored in the storage unit 230, for example, by setting a flag to an ON state. Subsequently, the display screen dividing unit 241 edits the source code. Specifically, as shown in FIG. 10B, the hierarchy of each “h” tag is surrounded by “ul” tags, and “br” tags are added before tags other than “h1”. Then, each “h” tag and “/ h” tag are replaced as shown (step S405). Thus, when the screen image displayed by the converted html file is displayed on the wireless communication terminal 100, only the heading is displayed as shown in the figure, and items below the heading can be input by the user. Will be displayed accordingly. Specifically, when the h1 heading is pressed, the operation information is transmitted from the wireless communication terminal 100 to the display screen conversion apparatus 200, and the browser processing unit 243 displays the explanation text of the h1 heading and the h2 heading on the screen image. Is displayed and transmitted to the wireless communication terminal 100. Returning to FIG. 8, if none of the character strings “h1” to “h6” can be searched (step S403; search not possible), the process proceeds to the next process without performing any particular process.

続いて、表示画面分割部241は、アプリケーションサーバ300から受信したhtmlファイルのソースコードの「body」タグ中から、「img」の文字列を検索し(ステップS406)、無線通信端末100から受信した画面サイズに基づいて、当該無線通信端末100の画面の縦、もしくは横のサイズより大きい画像であるか否かを判定する(ステップS407)。大きい画像であると判定した場合には(ステップS407;Yes)、図11に示すように、画像をリンクに置き換えるようにソースコードを編集し、部品置き換え処理を終了する。図7に戻り、「img」の文字列を検索できなかった場合や(ステップS406;検索不可)、大きい画像でないと判定した場合には(ステップS407;No)、特に処理を行わず、部品置き換え処理を終了する。   Subsequently, the display screen dividing unit 241 searches for the character string “img” from the “body” tag of the source code of the html file received from the application server 300 (step S406), and receives the character string from the wireless communication terminal 100. Based on the screen size, it is determined whether or not the image is larger than the vertical or horizontal size of the screen of the wireless communication terminal 100 (step S407). If it is determined that the image is a large image (step S407; Yes), as shown in FIG. 11, the source code is edited so that the image is replaced with a link, and the component replacement process is terminated. Returning to FIG. 7, if the character string “img” cannot be searched (step S406; search not possible), or if it is determined that the image is not a large image (step S407; No), no particular processing is performed and the component replacement is performed. End the process.

図6に戻り、ステップS203の部品置き換え処理を終了した後、表示画面分割部241は、画面分割処理を行う(ステップS204)。図12に示すように、画面分割処理では、まず、アプリケーションサーバ300から受信したhtmlファイルのソースコードの「body」タグ中から、「div」の文字列と「span」の文字列を順にカウントする(ステップS501)。そして、それぞれの合計が15個を超えるか否かを判定し(ステップS502)、超える場合には(ステップS502;Yes)、受信したhtmlファイルを分割してファイル名を変更し(ステップS503)、カウント値をクリアする(ステップS504)。ここで、記憶部230にて、部品置き換え処理におけるステップS404の処理を実行したことを示す情報が格納されている場合には、分割後のhtmlファイルの「header」タグにも、図10(a)に示す内容が追記されることとなる。なお、分割したhtmlファイルは、記憶部230に格納される。   Returning to FIG. 6, after completing the component replacement process in step S203, the display screen dividing unit 241 performs the screen dividing process (step S204). As shown in FIG. 12, in the screen division process, first, the character string “div” and the character string “span” are sequentially counted from the “body” tag of the source code of the html file received from the application server 300. (Step S501). Then, it is determined whether or not the total of each exceeds 15 (step S502). If it exceeds (step S502; Yes), the received html file is divided and the file name is changed (step S503). The count value is cleared (step S504). Here, if the storage unit 230 stores information indicating that the process of step S404 in the component replacement process has been executed, the “header” tag of the divided html file also stores the information shown in FIG. ) Will be added. The divided html file is stored in the storage unit 230.

図12に戻り、表示画面分割部241は、アプリケーションサーバ300から受信したhtmlファイルの最後までステップS502におけるカウントを行ったか否かを判定し(ステップS505)、最後でないと判定した場合には(ステップS505;No)、ステップS501の処理に戻る。また、ステップS502の処理において、カウント値が15以下であると判定して場合にも、ステップS501の処理に戻る。なお、図示は省略するが、アプリケーションサーバ300から受信したhtmlファイルの最後までステップS502におけるカウントを行ってもカウント値が15以下である場合には、処理を終了するようにすればよい。   Returning to FIG. 12, the display screen dividing unit 241 determines whether or not the counting in step S502 has been performed to the end of the html file received from the application server 300 (step S505). S505; No), the process returns to step S501. Further, when it is determined in the process of step S502 that the count value is 15 or less, the process returns to the process of step S501. Although illustration is omitted, if the count value is 15 or less even if the count in step S502 is performed to the end of the html file received from the application server 300, the process may be terminated.

一方、htmlファイルの最後までカウントを行ったと判定した場合には(ステップS505;Yes)、各分割したhtmlファイルのソースコードに、図13に示す「戻る」、「進む」といったページ遷移情報を追加する処理を行い(ステップS506)、画面分割処理を終了する。ページ遷移情報を追加する処理では、最初に分割したhtmlファイルには、次のhtmlファイルの送信を要求する「進む」のページ遷移情報を示すソースコードのみを追記し、最後に分割したhtmlファイルには、一つ前のhtmlファイルの送信を要求する「戻る」のページ遷移情報を示すソースコードのみを追記し、それ以外のhtmlファイルには、「進む」のページ遷移情報を示すソースコードと「戻る」のページ遷移情報を示すソースコードを追記する。   On the other hand, if it is determined that counting has been performed to the end of the html file (step S505; Yes), page transition information such as “return” and “forward” shown in FIG. 13 is added to the source code of each divided html file. Is performed (step S506), and the screen division process is terminated. In the process of adding page transition information, only the source code indicating “forward” page transition information requesting transmission of the next html file is added to the first divided html file, and the last divided html file is added. Adds only the source code indicating the page transition information of “return” that requests transmission of the previous html file, and the source code indicating the page transition information of “advance” and “ Add the source code indicating the page transition information of "Back".

図14では、ファイル名がsample.htmlであるhtmlファイルが、ステップS503の処理により3つに分割された例を示している(sampleA.htmlとsampleB.htmlとsampleC.html)。この場合には、ステップS506の処理において、sampleA.htmlには「戻る」のページ遷移情報を示すソースコードのみを追記し、sampleB.htmlには、「進む」のページ遷移情報を示すソースコードと「戻る」のページ遷移情報を示すソースコードを追記し、sampleC.htmlには、「戻る」のページ遷移情報を示すソースコードのみを追記する。そして、画面分割処理を終了する。   FIG. 14 shows an example in which the html file whose file name is sample.html is divided into three by the process of step S503 (sampleA.html, sampleB.html, and sampleC.html). In this case, in the process of step S506, only the source code indicating “return” page transition information is added to sampleA.html, and the source code indicating “forward” page transition information is added to sampleB.html. A source code indicating “return” page transition information is added, and only a source code indicating “return” page transition information is added to sampleC.html. Then, the screen division process ends.

図6に戻り、ステップS204における画面分割処理を終了した後、制御部240におけるRDPサーバとしての機能により、端末識別情報により識別される無線通信端末100に対して、分割されたhtmlファイルにより表される画面イメージを送信するとともに、表示部220にも当該htmlファイルの画面イメージを表示する(ステップS205)。   Returning to FIG. 6, after finishing the screen division process in step S <b> 204, the function as the RDP server in the control unit 240 represents the wireless communication terminal 100 identified by the terminal identification information by the divided html file. The screen image of the html file is also displayed on the display unit 220 (step S205).

無線通信端末100の制御部140は、受信した画面イメージを表示部120に表示する(ステップS103)。そして、ユーザによる入力操作が行われることに応じて、操作情報やページ遷移情報を表示画面変換装置200に送信する(ステップS104)。   The control unit 140 of the wireless communication terminal 100 displays the received screen image on the display unit 120 (step S103). Then, in response to an input operation performed by the user, operation information and page transition information are transmitted to the display screen conversion apparatus 200 (step S104).

表示画面変換装置200の制御部240は、操作情報を受信したことに基づいて、操作情報により示される入力情報が、分割したページ中にある、次のページを要求するページ遷移情報であるか否かを判定する(ステップS206)。ページ遷移情報であると判定した場合(ステップS206;Yes)、ページ遷移情報に、入力を完了したことを示す入力完了通知が含まれているか否かを判定し(ステップS207)、含まれていると判定した場合には(ステップS207;Yes)、画面分割処理により分割された全てのhtmlファイルにより表される画面イメージに対しての操作が完了したと判定し、画面統合処理を行う(ステップS208)。その後、入力情報を、接続先情報で特定されるアプリケーションサーバ300へ送信する(ステップS209)。   Based on the reception of the operation information, the control unit 240 of the display screen conversion apparatus 200 determines whether the input information indicated by the operation information is page transition information for requesting the next page in the divided pages. Is determined (step S206). When it is determined that it is page transition information (step S206; Yes), it is determined whether or not an input completion notification indicating completion of input is included in the page transition information (step S207). Is determined (step S207; Yes), it is determined that the operations for the screen images represented by all the html files divided by the screen division process have been completed, and the screen integration process is performed (step S208). ). Thereafter, the input information is transmitted to the application server 300 specified by the connection destination information (step S209).

画面統合処理では、図15に示すように、分割画面統合部144の機能により、記憶部230に格納されている編集前後の対応関係と編集内容を読み込み(ステップS601)、ブラウザにて処理された入力情報を、画面分割処理や部品置き換え処理にて変換される前のhtmlファイルに対する操作内容に変換する(ステップS602)。例えば、図14に示すように、sample.htmlのhtmlファイルを画面分割処理にて3つのhtmlファイルに分割した場合において、当該ブラウザにて処理された操作内容が、sample2.htmlのhtmlファイルにおける「B」の部分に対する操作であった場合、分割画面統合部144は、当該操作内容を、sample.htmlファイルにおける「B」の部分に対する処理として変換して記憶する。そして、分割画面統合部144は、ブラウザにて処理された操作内容の全てに対してこの処理を行ったか否かを判定し(ステップS603)、処理を行ったと判定した場合には(ステップS603;Yes)、ステップS602の処理にて行った変換済みの情報を記憶し(ステップS604)、処理を終了する。一方、処理を行っていないと判定した場合には(ステップS603;No)、次の操作内容を読み込み(ステップS605)、ステップS602における変換処理に戻る。   In the screen integration processing, as shown in FIG. 15, the function of the divided screen integration unit 144 reads the correspondence before and after editing stored in the storage unit 230 and the edited content (step S601), and the browser integrated the processing. The input information is converted into the operation content for the html file before being converted by the screen division process or the parts replacement process (step S602). For example, as shown in FIG. 14, when the html file of sample.html is divided into three html files by the screen division process, the operation content processed by the browser is “ If the operation is for the “B” portion, the divided screen integration unit 144 converts the operation content as a process for the “B” portion in the sample.html file and stores it. Then, the split screen integration unit 144 determines whether or not this processing has been performed on all the operation contents processed by the browser (step S603), and determines that the processing has been performed (step S603; Yes), the converted information obtained in step S602 is stored (step S604), and the process is terminated. On the other hand, when it is determined that the process is not performed (step S603; No), the next operation content is read (step S605), and the process returns to the conversion process in step S602.

図6に戻り、アプリケーションサーバ300の制御部340は、表示画面変換装置200から送信された入力情報に基づいて、アプリケーションの処理を実行する(ステップS302)。そして、制御部340は、当該入力情報に、次のhtmlファイルを送信するページ送信要求が含まれているか否かを判定し(ステップS303)、含まれている場合には(ステップS303;Yes)、当該ページ送信要求に対応するhtmlファイルとアプリケーションの処理を完了したことを示す完了通知を、表示画面変換装置200へ送信する(ステップS304)。これにより、ユーザによる無線通信端末100に対する入力操作が行われると、再び、ステップS203の処理が実行されることになる。一方、含まれていない場合には(ステップS303;No)、完了通知を表示画面変換装置200へ送信し(ステップS305)、処理を終了する。   Returning to FIG. 6, the control unit 340 of the application server 300 executes application processing based on the input information transmitted from the display screen conversion apparatus 200 (step S <b> 302). Then, the control unit 340 determines whether or not the input information includes a page transmission request for transmitting the next html file (step S303), and if included, (step S303; Yes). Then, a completion notification indicating that the processing of the html file corresponding to the page transmission request and the application has been completed is transmitted to the display screen converting apparatus 200 (step S304). As a result, when the user performs an input operation on the wireless communication terminal 100, the process of step S203 is executed again. On the other hand, if it is not included (step S303; No), a completion notification is transmitted to the display screen conversion apparatus 200 (step S305), and the process is terminated.

一方、ステップS207の処理において、入力完了通知が含まれていないと判定した場合には(ステップS207;No)、分割されたhtmlファイルのうち、当該ページ遷移情報に対応するhtmlファイルにより表される画面イメージを、無線通信端末100に送信する(ステップS210)。例えば、図14に示すように、sample.htmlのhtmlファイルを画面分割処理にて3つのhtmlファイルに分割した場合において、当該ページ遷移情報が、sample1.htmlのイメージ画像の次のhtmlファイルのイメージ画像の送信を要求する情報であった場合には、sample2.htmlの画面イメージを、無線通信端末100に送信する。これにより、再びステップS103の処理により、当該画面イメージが表示され、ユーザによる無線通信端末100に対する入力操作が行われると、ステップS104の処理が実行されることになる。   On the other hand, if it is determined in step S207 that the input completion notification is not included (step S207; No), it is represented by the html file corresponding to the page transition information among the divided html files. The screen image is transmitted to the wireless communication terminal 100 (step S210). For example, as shown in FIG. 14, when the html file of sample.html is divided into three html files by screen division processing, the page transition information is the image of the html file next to the image image of sample1.html. If it is information requesting image transmission, the screen image of sample2.html is transmitted to the wireless communication terminal 100. Thus, the screen image is displayed again by the process of step S103, and when the user performs an input operation on the wireless communication terminal 100, the process of step S104 is executed.

ステップS206の処理において、ページ遷移情報でないと判定した場合(ステップS206;No)、ブラウザ処理部243の機能により、受信した操作情報に対応する処理を行い、処理後の画面イメージを無線通信端末100に送信する(ステップS210)。これにより、ユーザによる無線通信端末100に対する入力操作が行われると、再び、ステップS103、S104の処理が実行されることになる。例えば、受信した操作情報が、図10(b)に示すように「見出し1(h1)」を押下したことを示す場合、ブラウザ制御部243は、ステップS211における処理として、図示するように、「見出し1の説明文章」と「見出し1−1(h2)」のリンクを表示する処理を行い、ステップS212の処理により画面イメージを無線通信端末100に送信する。そして、ユーザは、ステップS103の処理により表示された画面イメージに対して、再び、入力操作を行う。そして、ステップS104の処理により、操作情報が表示画面変換装置200へ送信される。   If it is determined in the process of step S206 that the page transition information is not included (step S206; No), the function corresponding to the received operation information is performed by the function of the browser processing unit 243, and the screen image after the process is displayed on the wireless communication terminal 100. (Step S210). Thus, when the user performs an input operation on the wireless communication terminal 100, the processes of steps S103 and S104 are executed again. For example, when the received operation information indicates that “Heading 1 (h1)” has been pressed as shown in FIG. 10B, the browser control unit 243 performs “ A process of displaying a link between the “descriptive text of heading 1” and “heading 1-1 (h2)” is performed, and a screen image is transmitted to the wireless communication terminal 100 by the process of step S212. And a user performs input operation again with respect to the screen image displayed by the process of step S103. Then, the operation information is transmitted to the display screen conversion apparatus 200 by the process of step S104.

以上が、本実施形態における表示画面変換システム1の動作である。このように、アプリケーションサーバ300から送信されるhtmlファイルのイメージ画像が、部品置き換え処理や画面分割処理により、無線通信端末100における操作が簡易となるように変換され、無線端末装置100に提供される。   The above is the operation of the display screen conversion system 1 in the present embodiment. As described above, the image file of the html file transmitted from the application server 300 is converted by the component replacement process or the screen division process so that the operation in the wireless communication terminal 100 is simplified and provided to the wireless terminal apparatus 100. .

したがって、ユーザは、変換されたイメージ画像を操作することで、アプリケーションサーバ300から提供されたhtmlファイルに対する入力操作を、表示画面に適した形式で行うことができる。また、無線通信端末100用のサーバを構築する必要がなく、画面変換ルール133を構築すればよいため、システムの開発効率が向上する。さらに、画面変換ルール133の内容を変更することで、ユーザに提供するイメージ画像の内容を簡単に変更することができるため、仕様変更等にも柔軟に対応することが可能となる。   Therefore, the user can perform an input operation on the html file provided from the application server 300 in a format suitable for the display screen by operating the converted image. In addition, it is not necessary to construct a server for the wireless communication terminal 100, and it is sufficient to construct the screen conversion rule 133, so that the system development efficiency is improved. Furthermore, since the contents of the image provided to the user can be easily changed by changing the contents of the screen conversion rule 133, it is possible to flexibly cope with a specification change or the like.

(変形例)
この発明は、上記の実施形態に限定されず、種々の変形及び応用が可能である。上記実施形態では、表示画面変換装置200とアプリケーションサーバ300における通信において、暗号化通信を行うことについては特に示していないが、これは一例である。例えば、表示画面変換装置200の記憶部230に認証鍵を格納しておき、表示画面変換装置200とアプリケーションサーバ300との間の通信は暗号化通信を行うようにしてもよい。
これによれば、無線通信端末100に認証鍵がなくても、表示画面変換装置200とアプリケーションサーバ300との間で暗号化通信を行うことができる。
(Modification)
The present invention is not limited to the above-described embodiment, and various modifications and applications are possible. In the above embodiment, the communication between the display screen conversion apparatus 200 and the application server 300 is not particularly shown for performing encrypted communication, but this is merely an example. For example, the authentication key may be stored in the storage unit 230 of the display screen conversion apparatus 200, and the communication between the display screen conversion apparatus 200 and the application server 300 may be encrypted communication.
According to this, even if the wireless communication terminal 100 does not have an authentication key, encrypted communication can be performed between the display screen conversion apparatus 200 and the application server 300.

具体的には、無線端末装置100に対するユーザの入力操作により、RDPアプリケーション131が起動されてRDPアプリケーション131が起動されると、図16に示すように、表示画面変換装置200に対して、ブラウザの起動命令と各種情報を、通信部150を介して送信する(ステップS101)。   Specifically, when the RDP application 131 is activated and the RDP application 131 is activated by a user input operation on the wireless terminal device 100, a browser screen is displayed on the display screen conversion device 200 as illustrated in FIG. The activation command and various types of information are transmitted via the communication unit 150 (step S101).

表示画面変換装置200の制御部240は、無線通信端末100からブラウザの起動命令と各種情報を受信すると、ブラウザを起動するとともに、記憶部230に格納されているプログラム232に含まれる変換ソフトウェアを起動する(ステップS201)。   When receiving the browser activation command and various information from the wireless communication terminal 100, the control unit 240 of the display screen conversion device 200 activates the browser and activates the conversion software included in the program 232 stored in the storage unit 230. (Step S201).

制御部240は、変換ソフトウェアが起動されることに応じて、無線端末装置100から受信した接続先情報により特定されるアプリケーションサーバ300へhtmlファイルの送信要求を、通信部250を介して送信する(ステップS202)。   In response to the activation of the conversion software, the control unit 240 transmits an html file transmission request to the application server 300 specified by the connection destination information received from the wireless terminal device 100 via the communication unit 250 ( Step S202).

アプリケーションサーバ300の制御部340は、htmlファイルの送信要求を受信すると、当該送信要求により特定されるhtmlファイルを検索して暗号化し(ステップS901)、通信部350を介して暗号化されたhtmlファイルを表示画面変換装置200へ送信する(ステップS902)。   When receiving the html file transmission request, the control unit 340 of the application server 300 searches for and encrypts the html file specified by the transmission request (step S901), and the html file encrypted via the communication unit 350 Is transmitted to the display screen converting apparatus 200 (step S902).

表示画面変換装置200の制御部240は、アプリケーションサーバ300からhtmlファイルを受信すると、記憶部230に格納されている認証鍵を用いて受信したhtmlファイルを復号化する(ステップS801)。そして、画面変換ルール232を読み込み、表示画面変換部241の機能により、部品置き換え処理を開始する(ステップS203)。ステップS203以降の処理は、図6に示す処理と同様であるが、図16の処理では、図6のステップS304に対応する処理において、画面変換装置200へ送信するhtmlファイルを、暗号化して送信する(ステップS903)。   When receiving the html file from the application server 300, the control unit 240 of the display screen conversion apparatus 200 decrypts the received html file using the authentication key stored in the storage unit 230 (step S801). Then, the screen conversion rule 232 is read, and the component replacement process is started by the function of the display screen conversion unit 241 (step S203). The processing after step S203 is the same as the processing shown in FIG. 6, but in the processing of FIG. 16, the html file to be transmitted to the screen conversion device 200 is encrypted and transmitted in the processing corresponding to step S304 of FIG. (Step S903).

このような構成によれば、認証処理を行う必要がある場合であっても、予め無線通信端末100に認証鍵を用意しておくことなく、無線通信端末100を用いて社内システムを利用することができ、無線通信端末100を紛失した場合でも、認証鍵の漏洩を防止することができる。   According to such a configuration, even when it is necessary to perform authentication processing, an in-house system is used using the wireless communication terminal 100 without preparing an authentication key in the wireless communication terminal 100 in advance. Even if the wireless communication terminal 100 is lost, the authentication key can be prevented from leaking.

また、上記実施形態では、部品置き換え処理において、ボタンの大きさやリンク表示を行う例を示したが、これは一例である。例えば、htmlファイル中の「メールアドレス」の文字列を検索し、図17に示すように、入力事項を「@」の前後とするようにソースコードを編集してもよい。   Further, in the above-described embodiment, an example in which the button size and the link display are performed in the component replacement process is shown, but this is an example. For example, a character string of “mail address” in an html file may be searched, and the source code may be edited so that the input items are before and after “@” as shown in FIG.

上記実施形態では、画面変換ルール231が管理者の入力操作によって作成される例を示したが、これらは、任意の方法で記憶部230に格納されればよく、例えば、ネットワークを介して配信してもよい。また、上記実施形態で示した画面変換ルール231の内容は、一例であり、これらの内容は任意である。例えば、画面分割処理において、htmlファイルのソースコード中の「div」タグの数と「span」タグの数をカウントしてソースコードを分割する例を示したが、これは一例である。カウントするタグは任意であり、例えば、「div」タグ、「span」タグのどちらか一方であってもよいし、別のタグであってもよい。   In the above embodiment, an example in which the screen conversion rule 231 is created by an input operation by the administrator has been shown. However, these may be stored in the storage unit 230 by an arbitrary method, for example, distributed via a network. May be. Further, the contents of the screen conversion rule 231 shown in the above embodiment are merely examples, and these contents are arbitrary. For example, in the screen division process, an example in which the source code is divided by counting the number of “div” tags and the number of “span” tags in the source code of the html file is shown as an example. The tag to count is arbitrary, For example, either a "div" tag and a "span" tag may be sufficient, and another tag may be sufficient.

上記実施形態では、表示画面変換装置200の制御部240が操作情報を受信し、当該操作情報により示される入力情報がページ遷移情報である場合に、入力を完了したことを示す入力完了通知が含まれているか否かを判定して画面統合処理を行う例を示したが、これは一例である。例えば、画面分割処理により分割したhtmlファイルの分割数を記憶しておき、無線通信端末100から受信した操作情報により示される入力情報がページ遷移情報であると判定する度に、その判定回数をカウントし、分割数とカウント値が一致した場合に、画面統合処理を行うようにしてもよい。この場合、一致したと判定した場合にカウント値をクリアすればよい。   In the above embodiment, when the control unit 240 of the display screen conversion apparatus 200 receives the operation information and the input information indicated by the operation information is page transition information, the input completion notification indicating that the input is completed is included. Although an example in which the screen integration process is performed by determining whether or not it has been performed is shown as an example. For example, the number of divisions of the html file divided by the screen division process is stored, and the number of determinations is counted each time the input information indicated by the operation information received from the wireless communication terminal 100 is determined to be page transition information. Then, the screen integration process may be performed when the number of divisions matches the count value. In this case, the count value may be cleared when it is determined that they match.

また、上記実施形態では、画面統合処理において、記憶部230に格納されている編集前後の対応関係と編集内容を読み込み、この内容にしたがってブラウザにて処理された操作内容を、変換される前のhtmlファイルに対する操作内容に変換する例を示したが、これは一例である。例えば、画面統合処理において、画面変換ルール231を読み込み、画面変換ルール231の設定内容に従って、ブラウザにて処理された操作内容を、変換される前のhtmlファイルに対する操作内容に変換するようにしてもよい。   Further, in the above embodiment, in the screen integration process, the correspondence before and after editing stored in the storage unit 230 and the editing content are read, and the operation content processed by the browser according to this content is converted into the content before conversion. Although an example of converting the operation content to the html file has been shown, this is an example. For example, in the screen integration process, the screen conversion rule 231 is read, and the operation content processed in the browser is converted into the operation content for the html file before conversion according to the setting content of the screen conversion rule 231. Good.

なお、本発明の実施形態にかかる無線通信端末100や表示画面変換装置200、及び、アプリケーションサーバ300を実現するための情報処理装置は、専用のシステムによらず、通常のコンピュータシステムを用いて実現可能である。例えば、汎用コンピュータに、上述の処理を実行するためのプログラム232を格納した媒体(CD−ROMなど)から当該プログラム232をインストールすることにより、上述の処理を実行する各種の情報処理装置を構成することができる。また、本実施形態における表示画面変換装置200は、例えば、アプリケーションサーバ300に含まれていてもよい。   The information processing apparatus for realizing the wireless communication terminal 100, the display screen conversion apparatus 200, and the application server 300 according to the embodiment of the present invention is realized using a normal computer system, not a dedicated system. Is possible. For example, by installing the program 232 from a medium (such as a CD-ROM) that stores the program 232 for executing the above-described processing in a general-purpose computer, various information processing apparatuses that execute the above-described processing are configured. be able to. In addition, the display screen conversion apparatus 200 in the present embodiment may be included in the application server 300, for example.

また、上述の機能を、OS(Operating System)とアプリケーションとの分担、またはOSとアプリケーションとの協同により実現する場合等には、OS以外の部分のみを媒体に格納してもよい。   Further, when the above-described functions are realized by sharing between an OS (Operating System) and an application, or by cooperation between the OS and the application, only a part other than the OS may be stored in the medium.

また、搬送波にプログラム232を重畳し、通信ネットワークを介して配信することも可能である。例えば、通信ネットワーク上の掲示板(BBS、Bulletin Board System)に当該プログラムを掲示し、ネットワークを介して当該プログラムを配信してもよい。そして、これらのプログラムを起動し、オペレーティングシステムの制御下で、他のアプリケーションプログラムと同様に実行することにより、上述の処理を実行できるように構成してもよい。   It is also possible to superimpose the program 232 on a carrier wave and distribute it via a communication network. For example, the program may be posted on a bulletin board (BBS, Bulletin Board System) on a communication network, and the program may be distributed via the network. Then, the above-described processing may be executed by starting these programs and executing them in the same manner as other application programs under the control of the operating system.

1 表示画面変換システム
100 無線通信端末
110 入力部
120 表示部
130 記憶部
140 制御部
150 通信部
160 システムバス
200 表示画面変換装置
210 入力部
220 表示部
230 記憶部
231 画面変換ルール
232 プログラム
240 制御部
241 表示画面変換部
242 分割画面統合部
243 ブラウザ処理部
250 通信部
260 システムバス
300 アプリケーションサーバ
310 入力部
320 表示部
330 記憶部
340 制御部
350 通信部
360 システムバス
DESCRIPTION OF SYMBOLS 1 Display screen conversion system 100 Wireless communication terminal 110 Input part 120 Display part 130 Storage part 140 Control part 150 Communication part 160 System bus 200 Display screen conversion apparatus 210 Input part 220 Display part 230 Storage part 231 Screen conversion rule 232 Program 240 Control part 241 Display screen conversion unit 242 Split screen integration unit 243 Browser processing unit 250 Communication unit 260 System bus 300 Application server 310 Input unit 320 Display unit 330 Storage unit 340 Control unit 350 Communication unit 360 System bus

Claims (5)

アプリケーションサーバと無線通信端末とにネットワークを介して相互に通信可能に接続される表示画面変換装置であって、
前記アプリケーションサーバが提供するサービスに対する入力を受け付ける入力画面を定義する入力画面情報が前記アプリケーションサーバから送信される度に、予め記憶されている基準にしたがって、前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する画面変換部と、
前記画面変換部で変換した入力画面に対する変換内容を示す変換情報を記憶する変換情報記憶部と、
前記画面変換部で変換されたイメージ画像を前記無線通信端末で表示するためのイメージ画像情報を、ユーザによる入力操作を受け付ける前記無線通信端末に送信するイメージ送信部と、
前記無線通信端末から送信される前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記画面変換部で変換される前の入力画面に対応する入力情報に、前記変換情報記憶部で記憶した変換情報に基づいて変更する操作情報変更部と、
前記操作情報変更部で変更された入力情報を前記アプリケーションサーバに送信することにより、前記入力情報により特定される処理の実行を指示する処理指示部と、
を備えることを特徴とする表示画面変換装置。
A display screen conversion device connected to an application server and a wireless communication terminal so that they can communicate with each other via a network,
Each time input screen information that defines an input screen that receives an input for a service provided by the application server is transmitted from the application server, an input screen defined by the input screen information according to a prestored criterion A screen conversion unit for converting the image to be displayed on the wireless communication terminal;
A conversion information storage unit that stores conversion information indicating conversion contents for the input screen converted by the screen conversion unit;
An image transmission unit that transmits image image information for displaying an image image converted by the screen conversion unit on the wireless communication terminal to the wireless communication terminal that accepts an input operation by a user;
Operation information for the image image transmitted from the wireless communication terminal is acquired, and the acquired operation information is converted into input information corresponding to an input screen before being converted by the screen conversion unit, by the conversion information storage unit. An operation information changing unit to change based on the stored conversion information;
A process instruction unit that instructs execution of the process specified by the input information by transmitting the input information changed by the operation information change unit to the application server;
A display screen conversion device comprising:
前記画面変換部は、
前記入力画面情報に含まれる所定の文字列の数をカウントするカウンタ部と、
前記カウンタ部によりカウントされた値が前記基準で定められた閾値より大きい場合に前記入力画面情報を分割して前記入力画面を分割する画面分割部と、
予め記憶されている基準にしたがって、前記画面分割部で分割された入力画面を前記無線通信端末で表示するイメージ画像に変換する分割画面変換部と、を備え、
前記変換情報記憶部は、前記画面分割部で分割された入力画面と分割前の入力画面との対応関係をさらに記憶し、
前記操作情報変更部は、
前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記変換情報記憶部で記憶した変換情報に基づいて、前記分割画面変換部で変換される前の入力画面に対応する操作情報に変更する分割後操作情報変更部と、
前記分割後操作情報変更部で変更した操作情報を、前記変換情報記憶部で記憶した前記対応関係に基づいて、前記画面分割部で分割される前の入力画面に対応する入力情報に変更する分割前操作情報変更部と、
を備えることを特徴とする請求項1に記載の表示画面変換装置。
The screen conversion unit
A counter unit that counts the number of predetermined character strings included in the input screen information;
A screen dividing unit that divides the input screen by dividing the input screen information when a value counted by the counter unit is larger than a threshold defined by the reference;
A divided screen conversion unit that converts the input screen divided by the screen division unit into an image image to be displayed on the wireless communication terminal according to a pre-stored standard,
The conversion information storage unit further stores a correspondence relationship between the input screen divided by the screen division unit and the input screen before the division,
The operation information changing unit
Operation information for the image is acquired, and the acquired operation information is converted into operation information corresponding to the input screen before being converted by the split screen conversion unit based on the conversion information stored in the conversion information storage unit. A post-division operation information change part to be changed;
Division which changes operation information changed in the operation information change part after division into input information corresponding to an input screen before being divided in the screen division part based on the correspondence stored in the conversion information storage part A previous operation information change part;
The display screen conversion apparatus according to claim 1, further comprising:
前記アプリケーションサーバから送信される暗号化された入力画面情報を復号する復号部をさらに備え、
前記画面変換部は、前記復号部により前記暗号化された入力画面情報が復号される度に、予め記憶されている基準にしたがって前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する、
ことを特徴とする請求項1に記載の表示画面変換装置。
A decrypting unit for decrypting encrypted input screen information transmitted from the application server;
The screen conversion unit displays, on the wireless communication terminal, an input screen defined by the input screen information in accordance with a pre-stored standard every time the encrypted input screen information is decrypted by the decryption unit. Convert to an image
The display screen conversion apparatus according to claim 1, wherein:
アプリケーションサーバと無線通信端末とにネットワークを介して相互に通信可能に接続される表示画面変換装置による表示画面変換方法であって、
前記アプリケーションサーバが提供するサービスに対する入力を受け付ける入力画面を定義する入力画面情報が前記アプリケーションサーバから送信される度に、予め記憶されている基準にしたがって、前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する画面変換ステップと、
前記画面変換ステップで変換した入力画面に対する変換内容を示す変換情報を記憶する変換情報記憶ステップと、
前記画面変換ステップ変換されたイメージ画像を前記無線通信端末で表示するためのイメージ画像情報を、ユーザによる入力操作を受け付ける前記無線通信端末に送信するイメージ送信ステップと、
前記無線通信端末から送信される前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記画面変換ステップで変換される前の入力画面に対応する入力情報に、前記変換情報記憶ステップで記憶した変換情報に基づいて変更する操作情報変更ステップと、
前記操作情報変更ステップで変更された入力情報を前記アプリケーションサーバに送信することにより、前記入力情報により特定される処理の実行を指示する処理指示ステップと、
を備えることを特徴とする表示画面変換方法。
A display screen conversion method by a display screen conversion device connected to an application server and a wireless communication terminal so that they can communicate with each other via a network,
Each time input screen information that defines an input screen that receives an input for a service provided by the application server is transmitted from the application server, an input screen defined by the input screen information according to a prestored criterion A screen conversion step of converting the image to be displayed on the wireless communication terminal;
A conversion information storage step for storing conversion information indicating conversion contents for the input screen converted in the screen conversion step;
Image transmission step of transmitting image image information for displaying the image image converted in the screen conversion step on the wireless communication terminal to the wireless communication terminal that accepts an input operation by a user;
Operation information for the image image transmitted from the wireless communication terminal is acquired, and the acquired operation information is converted into input information corresponding to the input screen before being converted in the screen conversion step, in the conversion information storage step. An operation information change step for changing based on the stored conversion information;
A process instruction step for instructing execution of a process specified by the input information by transmitting the input information changed in the operation information change step to the application server;
A display screen conversion method characterized by comprising:
アプリケーションサーバと無線通信端末とにネットワークを介して相互に通信可能に接続されるコンピュータを、
前記アプリケーションサーバが提供するサービスに対する入力を受け付ける入力画面を定義する入力画面情報が前記アプリケーションサーバから送信される度に、予め記憶されている基準にしたがって、前記入力画面情報により定義される入力画面を前記無線通信端末で表示するイメージ画像に変換する画面変換部、
前記画面変換部で変換した入力画面に対する変換内容を示す変換情報を記憶する変換情報記憶部、
前記画面変換部で変換されたイメージ画像を前記無線通信端末で表示するためのイメージ画像情報を、ユーザによる入力操作を受け付ける前記無線通信端末に送信するイメージ送信部、
前記無線通信端末から送信される前記イメージ画像に対する操作情報を取得し、前記取得した操作情報を、前記画面変換部で変換される前の入力画面に対応する入力情報に、前記変換情報記憶部で記憶した変換情報に基づいて変更する操作情報変更部、
前記操作情報変更部で変更された入力情報を前記アプリケーションサーバに送信することにより、前記入力情報により特定される処理の実行を指示する処理指示部、
として機能させることを特徴とするプログラム。
A computer connected to an application server and a wireless communication terminal so as to communicate with each other via a network,
Each time input screen information that defines an input screen that receives an input for a service provided by the application server is transmitted from the application server, an input screen defined by the input screen information according to a prestored criterion A screen conversion unit for converting the image to be displayed on the wireless communication terminal;
A conversion information storage unit for storing conversion information indicating conversion contents for the input screen converted by the screen conversion unit;
An image transmission unit that transmits image image information for displaying the image image converted by the screen conversion unit on the wireless communication terminal to the wireless communication terminal that accepts an input operation by a user;
Operation information for the image image transmitted from the wireless communication terminal is acquired, and the acquired operation information is converted into input information corresponding to an input screen before being converted by the screen conversion unit, by the conversion information storage unit. An operation information changing unit that changes based on the stored conversion information,
A process instructing unit for instructing execution of a process specified by the input information by transmitting the input information changed by the operation information changing unit to the application server;
A program characterized by functioning as
JP2012029374A 2012-02-14 2012-02-14 Display screen conversion apparatus, display screen conversion method, and program Active JP5965661B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012029374A JP5965661B2 (en) 2012-02-14 2012-02-14 Display screen conversion apparatus, display screen conversion method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012029374A JP5965661B2 (en) 2012-02-14 2012-02-14 Display screen conversion apparatus, display screen conversion method, and program

Publications (2)

Publication Number Publication Date
JP2013167940A true JP2013167940A (en) 2013-08-29
JP5965661B2 JP5965661B2 (en) 2016-08-10

Family

ID=49178309

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012029374A Active JP5965661B2 (en) 2012-02-14 2012-02-14 Display screen conversion apparatus, display screen conversion method, and program

Country Status (1)

Country Link
JP (1) JP5965661B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3979605A1 (en) * 2020-09-30 2022-04-06 Ricoh Company, Ltd. Protocol conversion for remote access from information terminal

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001125862A (en) * 1999-07-23 2001-05-11 Phone.Com Japan Kk Method and device for dividing markup flow into different screen display
JP2001195391A (en) * 2000-01-14 2001-07-19 Nec Information Service Ltd Format conversion and page division relay server
JP2002342224A (en) * 2001-05-21 2002-11-29 Matsushita Electric Ind Co Ltd Information processing method and information processor
JP2011040034A (en) * 2009-07-16 2011-02-24 Fujifilm Corp Website browsing system, server, and client terminal
JP2011210186A (en) * 2010-03-30 2011-10-20 Brother Industries Ltd Portable terminal, program, and analysis processing method
JP2011248670A (en) * 2010-05-27 2011-12-08 Fujifilm Corp Web browsing system, relay server, and web browsing method
JP2012027887A (en) * 2010-03-09 2012-02-09 On Site:Kk Server, terminal, program and service providing method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001125862A (en) * 1999-07-23 2001-05-11 Phone.Com Japan Kk Method and device for dividing markup flow into different screen display
JP2001195391A (en) * 2000-01-14 2001-07-19 Nec Information Service Ltd Format conversion and page division relay server
JP2002342224A (en) * 2001-05-21 2002-11-29 Matsushita Electric Ind Co Ltd Information processing method and information processor
JP2011040034A (en) * 2009-07-16 2011-02-24 Fujifilm Corp Website browsing system, server, and client terminal
JP2012027887A (en) * 2010-03-09 2012-02-09 On Site:Kk Server, terminal, program and service providing method
JP2011210186A (en) * 2010-03-30 2011-10-20 Brother Industries Ltd Portable terminal, program, and analysis processing method
JP2011248670A (en) * 2010-05-27 2011-12-08 Fujifilm Corp Web browsing system, relay server, and web browsing method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3979605A1 (en) * 2020-09-30 2022-04-06 Ricoh Company, Ltd. Protocol conversion for remote access from information terminal
US11729334B2 (en) 2020-09-30 2023-08-15 Ricoh Company, Ltd. Communication system, device, and recording medium for remote access to electronic device through relaying device and converter

Also Published As

Publication number Publication date
JP5965661B2 (en) 2016-08-10

Similar Documents

Publication Publication Date Title
WO2016177250A1 (en) Client page rendering method and apparatus
US9779069B2 (en) Model traversing based compressed serialization of user interaction data and communication from a client-side application
US9680897B2 (en) Throttled scanning for optimized compression of network communicated data
US11182745B2 (en) Data processing apparatus, data processing system, data processing method, and non-transitory computer readable medium
US20140122576A1 (en) Setting support apparatus, setting support system and setting support method
US9706006B2 (en) System and method of context aware adaption of content for a mobile device
JP2015035187A (en) Information processing apparatus, information processing method, and program
JP2013020416A (en) Screen design support device, screen design support method, and program
US20120221947A1 (en) Information processing apparatus and method
CN112256370A (en) Information display method and device and electronic equipment
JP5965661B2 (en) Display screen conversion apparatus, display screen conversion method, and program
CN111817944A (en) Picture sharing method and device and electronic equipment
JP2016110395A5 (en)
US9552044B2 (en) Information processing apparatus, information processing system, information processing method, and non-transitory computer readable medium
US20100191751A1 (en) Information processing system, information processing apparatus, information processing method and computer readable medium
JP5900050B2 (en) Information processing apparatus, information processing system, and program
JP6128503B1 (en) Program, server and system for providing services related to electronic manuals
US10114904B2 (en) Method, system, electronic device and server for synchronous display of operating information
JP6101895B2 (en) Information processing apparatus, concealment information addition design, information processing method, and program
JP2013020406A (en) Screen design support device, screen design support method, and program
JP2016129061A (en) Information processing device and program
JP6516600B2 (en) Accounting information processing apparatus, accounting information processing method, and program
JP2017045114A (en) Information processing apparatus and program
JP6544868B2 (en) Program, server and system for providing service related to electronic manual
JP5830895B2 (en) Information search system, search server, information search method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140826

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150707

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150827

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160415

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20160425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160628

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160704

R150 Certificate of patent or registration of utility model

Ref document number: 5965661

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350