JP6468105B2 - 通信システム、サーバ装置、クライアント装置及びプログラム - Google Patents

通信システム、サーバ装置、クライアント装置及びプログラム Download PDF

Info

Publication number
JP6468105B2
JP6468105B2 JP2015142151A JP2015142151A JP6468105B2 JP 6468105 B2 JP6468105 B2 JP 6468105B2 JP 2015142151 A JP2015142151 A JP 2015142151A JP 2015142151 A JP2015142151 A JP 2015142151A JP 6468105 B2 JP6468105 B2 JP 6468105B2
Authority
JP
Japan
Prior art keywords
image
character
client device
encoded
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015142151A
Other languages
English (en)
Other versions
JP2017027142A (ja
Inventor
信成 朝日
信成 朝日
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2015142151A priority Critical patent/JP6468105B2/ja
Priority to US15/057,356 priority patent/US10178268B2/en
Priority to CN201610217328.8A priority patent/CN106354450B/zh
Publication of JP2017027142A publication Critical patent/JP2017027142A/ja
Application granted granted Critical
Publication of JP6468105B2 publication Critical patent/JP6468105B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32267Methods relating to embedding, encoding, decoding, detection or retrieval operations combined with processing of the image
    • H04N1/32277Compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32203Spatial or amplitude domain methods
    • H04N1/32224Replacing pixels of an image with other pixels from the same image, e.g. texture block coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32203Spatial or amplitude domain methods
    • H04N1/32229Spatial or amplitude domain methods with selective or adaptive application of the additional information, e.g. in selected regions of the image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • G06F40/109Font handling; Temporal or kinetic typography

Description

本発明は、通信システム、サーバ装置、クライアント装置及びプログラムに関する。
一のコンピュータの画面に表示される画像を圧縮し、他のコンピュータに送信する通信システムが知られている。特許文献1には、コンピュータ画面上の複数の種別のグラフィカルインタフェース(GUI)部品を含む表示画像をGUI部品ごとに適した圧縮方法で圧縮することにより、画像全体の圧縮率を高める技術が記載されている。
特開2006−285302号公報
本発明は、サーバ装置からクライアント装置に画像を送信する通信システムにおいて、サーバ装置が文字を含む画像をクライアント装置に送信しなくても、クライアント装置において当該文字を含む画像が生成されるようにすることを目的とする。
請求項1に係る通信システムは、サーバ装置とクライアント装置とを有し、前記サーバ装置は、第1画像に含まれる文字についての情報を符号化して符号化画像を生成する符号化手段と、前記符号化手段により生成された符号化画像が、前記第1画像上の前記文字の位置から特定される位置に当該文字に替えて埋め込まれた第2画像を生成する生成手段と、前記クライアント装置からの前記第1画像の要求に応じて、当該クライアント装置に前記第2画像を送信する送信手段とを有し、前記クライアント装置は、前記サーバ装置により送信された第2画像から前記符号化画像を抽出する抽出手段と、前記抽出手段により抽出された符号化画像を復号する復号手段と、前記第2画像上の符号化画像を、前記復号手段により復号された情報から特定される文字に置換して前記第1画像を生成する置換手段とを有する。
請求項2に係る通信システムは、請求項1に記載の構成において、前記置換手段は、前記第2画像上の符号化画像を、予め定められた解像度の前記文字に置換することを特徴とする。
請求項3に係る通信システムは、請求項2に記載の構成において、前記置換手段は、前記第2画像上の符号化画像を、前記クライアント装置の表示手段で表示可能な最も高い解像度の前記文字に置換することを特徴とする。
請求項4に係る通信システムは、請求項1乃至3のいずれか1項に記載の構成において、前記サーバ装置は、前記生成手段により生成された第2画像を圧縮する圧縮手段を有し、前記送信手段は、前記圧縮手段により圧縮された第2画像を前記クライアント装置に送信し、前記クライアント装置は、前記サーバ装置により送信された第2画像を解凍する解凍手段を有し、前記抽出手段は、前記解凍手段により解凍された第2画像から前記符号化画像を抽出することを特徴とする。
請求項5に係る通信システムは、請求項1乃至4のいずれか1項に記載の構成において、前記第1画像に含まれる文字についての情報は、文字のフォント、文字のサイズ、文字の位置、文字の装飾、又は文字の回転角のうち少なくとも一つと、当該第1画像に含まれる文字とを示すことを特徴とする。
請求項6に係るプログラムは、コンピュータに、第1画像に含まれる文字についての情報を符号化して符号化画像を生成するステップと、前記符号化画像が、前記第1画像上の前記文字の位置から特定される位置に当該文字に替えて埋め込まれた第2画像を生成するステップと、クライアント装置からの前記第1画像の要求に応じて、当該クライアント装置に前記第2画像を送信するステップとを実行させる。
請求項7に係るプログラムは、コンピュータに、第1画像に含まれる文字についての情報が符号化された符号化画像が、前記第1画像上の前記文字の位置から特定される位置に当該文字に替えて埋め込まれた第2画像をサーバ装置から受信するステップと、前記第2画像から前記符号化画像を抽出するステップと、抽出された符号化画像を復号するステップと、前記第2画像上の符号化画像を、復号された情報から特定される文字に置換して前記第1画像を生成するステップとを実行させる。
請求項1に係る発明によれば、サーバ装置が文字を含む画像をクライアント装置に送信しなくても、クライアント装置において当該文字を含む画像が生成される。
請求項2に係る発明によれば、クライアント装置が、画像に含まれる文字の解像度を、サーバ装置から送信された画像の解像度に依存しない解像度にすることができる。
請求項3に係る発明によれば、クライアント装置が、画像に含まれる文字の解像度を、サーバ装置から送信された画像の解像度に依存しない解像度にすることができる。
請求項4に係る発明によれば、第1画像が圧縮されてクライアント装置に送信された場合に比べて、サーバ装置からクライアント装置への画像の転送量を減らすことができる。
請求項5に係る発明によれば、サーバ装置が文字を含む画像をクライアント装置に送信しなくても、文字のフォント、文字のサイズ、文字の位置、文字の装飾、又は文字の回転角のうち少なくとも一つを示す情報がクライアント装置に送信される。
請求項6に係る発明によれば、文字を含む画像がクライアント送信に送信されなくても、クライアント装置において当該画像が生成される。
請求項7に係る発明によれば、文字を含む画像がサーバ装置から受信されなくても、当該画像が生成される。
通信システムの全体構成を示す図 通信システムの機能構成を示す図 サーバ装置及びクライアント装置のハードウェア構成を示す図 サーバ装置による画像送信処理を示すフローチャート 文字情報の一例を示す図 クライアント装置による画像表示処理を示すフローチャート 文書ファイルを閲覧する際に行われる動作を示すシーケンスチャート 埋込画像を例示する図 文字描画画像を例示する図 文書を編集する際に行われる動作を示すシーケンスチャート 変形例に係る符号化画像を示す図
図1は、本発明の一実施形態に係る通信システムCSの全体構成を示す図である。通信システムCSは、サーバ装置1とクライアント装置2とを有する。通信システムCSは、いわゆる広義のシンクライアントであり、クライアント装置2が必要最小限の処理を行い、残りの処理をサーバ装置1が行う。具体的には、通信システムCSは、画面転送方式のシンクライアントであり、サーバ装置1は、OS(Operating System)及びアプリケーションプログラムを実行し、実行結果を表す画面のビットマップ画像をクライアント装置2に転送する。クライアント装置2は、サーバ装置1から転送されたビットマップ画像を画面に表示し、また、キーボードやマウスを介して自装置に対して行われた操作を示す情報(以下「操作情報」という)をサーバ装置1に送信する。サーバ装置1とクライアント装置2は、インターネットなどの通信回線Cを介して相互に接続されている。
画面転送方式のシンクライアントでは、転送される画像の解像度が高くなるほど、データの転送量が増加する傾向にある。また、転送される画像の解像度はサーバ装置1の画面解像度により決まるため、サーバ装置1の画面解像度がクライアント装置2の画面解像度よりも低い場合、クライアント装置2の画面解像度よりも低い解像度で画像が表示される。通信システムCSは、このような画面転送方式のシンクライアントにおいて、文字を含む画像が表示される際のデータの転送量を減少させ、また、表示画像の解像度の低下を抑制するシステムである。
図2は、本発明の一実施形態に係る通信システムCSの機能構成を示す図である。サーバ装置1は、第1抽出手段11と、符号化手段12と、生成手段13と、圧縮手段14と、送信手段15とを有する。第1抽出手段11は、第1画像に含まれる文字についての情報(以下「文字情報」という)を、第1画像又は第1画像を示す情報から抽出する。符号化手段12は、文字情報を符号化して符号化画像を生成する。生成手段13は、符号化手段12により生成された符号化画像が、第1画像上の文字の位置から特定される位置に当該文字に替えて埋め込まれた第2画像を生成する。圧縮手段14は、生成手段13により生成された第2画像を圧縮する。送信手段15は、圧縮手段14により圧縮された第2画像を、クライアント装置2からの第1画像の要求に応じて当該クライアント装置2に送信する。
クライアント装置2は、受信手段21と、解凍手段22と、第2抽出手段23と、復号手段24と、置換手段25と、表示手段26とを有する。受信手段21は、第2画像をサーバ装置1から受信する。解凍手段22は、受信手段21により受信された第2画像を解凍する。第2抽出手段23は、解凍手段22により解凍された第2画像から符号化画像を抽出する。復号手段24は、第2抽出手段23により抽出された符号化画像を復号する。置換手段25は、第2画像上の符号化画像を、復号手段24により復号された文字情報から特定される文字に置換して第1画像を生成する。表示手段26は、置換手段25により生成された第1画像を表示する。
図3は、サーバ装置1及びクライアント装置2のハードウェア構成を示す図である。図3において、括弧内に示された数字はクライアント装置2のハードウェア構成の符号を表す。サーバ装置1は、CPU(Central Processing Unit)101と、ROM(Read Only Memory)102と、RAM(Random Access Memory)103と、記憶部104と、IF部105と、表示部106と、入力部107とを有するコンピュータである。CPU101は、プログラムを実行することによりサーバ装置1の各部を制御する制御装置である。CPU101は、ROM102及び記憶部104に記憶されているプログラムを読み出し、RAM103を作業エリアにしてプログラムを実行する。ROM102は、各種のプログラム及びデータを記憶した不揮発性の記憶装置である。RAM103は、データを記憶する揮発性の主記憶装置である。
記憶部104は、各種のプログラム及びデータを記憶する不揮発性の補助記憶装置である。IF部105は、データを送受信する手段であり、通信回線Cを介してクライアント装置2と通信を行う。
表示部106は、情報を表示する手段、例えば液晶ディスプレイである。入力部107は、ユーザによる入力を受け付ける装置であり、キーボード、マウス、及び各種ボタン等を備える。クライアント装置2は、サーバ装置1と同様のハードウェア構成を有する。
図3において、サーバ装置1の各部を制御するためのサーバ制御プログラム(例えばサーバ装置1のOS)を実行しているCPU101は、第1抽出手段11、符号化手段12、生成手段13、及び圧縮手段14の一例である。サーバ制御プログラムを実行しているCPU101により制御されたIF部105は、送信手段15の一例である。
また、図3において、クライアント装置2の各部を制御するための端末制御プログラム(例えばクライアント装置2のOS)を実行しているCPU201により制御されたIF部205は、受信手段21の一例である。端末制御プログラムを実行しているCPU201は、解凍手段22、第2抽出手段23、復号手段24、置換手段25の一例である。シンクライアントを実現するためのアプリケーションプログラム(以下「シンクライアントプログラム」という)を実行しているCPU201により制御された表示部206は、表示手段26の一例である。
図4は、通信システムCSにおけるサーバ装置1の動作(画像送信処理)を示すフローチャートである。図4に示す処理は、例えばテキストエディタなどの文書を作成,編集,保存,閲覧するためのアプリケーションプログラム(以下、「文書編集プログラム」という)がサーバ装置1において起動され、当該文書編集プログラムに文書ファイルが読み込まれたことを契機に開始される。以下の説明においては、文書編集プログラム及びサーバ制御プログラムを動作の主体として説明することがあるが、これは、これらのプログラムを実行しているCPU101が他のハードウェア要素と協働して処理を行うことを意味する。文書データが読み込まれると、文書編集プログラムは、文書データが示す文字を描画させるための命令(以下、「文字描画命令」という)をサーバ制御プログラムに出力する。文字描画命令には、画面に描画される文字についての文字情報がデータ記述言語やデータ構造で記述されている。
ステップSA1において、サーバ制御プログラムは、文字描画命令から文字情報を抽出する。具体的には、サーバ制御プログラムは、文字描画命令の中から、描画される文字、文字のフォント、文字のサイズ、文字の位置(座標)、文字の修飾(太字、下線、又は斜体など)、及び文字の回転角などを文字情報として抽出する。サーバ制御プログラムは、抽出された文字情報をRAM103に記憶する。
図5は、文字情報の一例を示す図である。この例で、文字情報は、文字が「こんにちは」であり、フォントがゴシック体であり、サイズが「10」であり、座標が(0,0)であり、太字であり、回転角が0度であることを示している。
再び図4を参照する。ステップSA2において、サーバ制御プログラムは、文字情報を符号化(エンコード)して符号化画像を生成する。文字情報のエンコードは、サーバ装置1からクライアント装置2へのデータの転送量を減らすために行われる。サーバ制御プログラムは、例えば、文字情報をエンコードしてQRコード(登録商標)などの二次元コードを生成する。文字情報のエンコードは、例えば、文字描画命令において記述されている文字情報が示す文字のまとまり毎に行われる。ステップSA3において、サーバ制御プログラムは、文字情報から特定される文字に替えて符号化画像が埋め込まれた埋込画像(第2画像の一例)を生成する。具体的には、サーバ制御プログラムは、符号化画像を、当該符号化画像の元になる文字情報から特定される位置(すなわち文字が本来表示される位置)に埋め込む。サーバ制御プログラムは、例えば、サーバ装置1の画面解像度の埋込画像を生成する。
ステップSA4において、サーバ制御プログラムは、埋込画像を圧縮する。サーバ制御プログラムは、JPEG又はGIFなどの公知の画像圧縮形式により埋込画像を圧縮する。上述の通り、埋込画像においては文字のまとまりに替えて符号化画像が埋め込まれている。そのため、埋込画像において符号化画像が占める領域は、文字描画命令に従って文字が描画された画像(第1画像の一例であって、以下、「文字描画画像」という)において文字が占める領域よりも小さくなり、埋込画像は文字描画画像に比べて圧縮率が高くなる。これにより、文字描画画像が送信される場合に比べて、データの転送量が減少する。ステップSA5において、サーバ制御プログラムは、圧縮後の埋込画像をクライアント装置2に送信する。以上の処理により、サーバ装置1は、文字描画画像をクライアント装置2に送信するのに替えて、埋込画像をクライアント装置2に送信する。
図6は、通信システムCSにおけるクライアント装置2の動作(画像表示処理)を示すフローチャートである。以下の説明においては、シンクライアントプログラム及び端末制御プログラムを動作の主体として説明することがあるが、これは、これらのプログラムを実行しているCPU201が他のハードウェア要素と協働して処理を行うことを意味する。ステップSB1において、端末制御プログラムは、圧縮された画像をサーバ装置1から受信する。ステップSB2において、端末制御プログラムは、サーバ装置1から受信した画像(以下、「受信画像」という)を解凍する。端末制御プログラムは、解凍した受信画像をRAM203に記憶する。
ステップSB3において、端末制御プログラムは、受信画像が埋込画像であるか否かを判断する。具体的には、端末制御プログラムは、パターンマッチングを行って符号化画像の特徴点を検索することにより、受信画像から符号化画像を抽出する。符号化画像が抽出された場合には、端末制御プログラムは、受信画像が埋込画像であると判断する。受信画像が埋込画像であると判断された場合(SB3:YES)、端末制御プログラムは、処理をステップSB4に移行する。受信画像が埋込画像でないと判断された場合(SB3:NO)、端末制御プログラムは、端末制御プログラムは、受信画像をシンクライアントプログラムに出力し、処理がステップSB8に移行される。
ステップSB4において、端末制御プログラムは、ステップSB3において抽出された符号化画像を復号(デコード)して文字情報を取得する。端末制御プログラムは、文字情報をRAM203に記憶する。ステップSB5において、端末制御プログラムは、文字情報に従って文字を表す画像(以下、「文字画像」という)を生成する。例えば、図5に示した文字情報が取得された場合、フォントがゴシック体であり、サイズが「10」であり、太字であり、回転角が0度である文字列「こんにちは」を表す文字画像が生成される。記憶部204には、表示部206に表示される文字のフォントデータが予め記憶されており、端末制御プルグラムは、このフォントデータを参照して文字画像を生成する。端末制御プログラムは、クライアント装置2の画面解像度(すなわち、クライアント装置2の表示部206で表示可能な最も高い解像度)の文字画像を生成する。
ステップSB6において、端末制御プログラムは、埋込画像上の符号化画像を文字画像に置換する。具体的には、端末制御プログラムは、RAM203に記憶された文字情報から特定される座標に、当該文字情報に従って生成された文字画像を埋め込む。受信画像上の符号化画像が文字画像に置換されることにより、文字描画画像がクライアント装置2において生成される。端末制御プログラムは、文字描画画像をシンクライアントプログラムに出力する。ステップSB7において、シンクライアントプログラムは、文字描画画像を表示部206に表示する。上述の通り、文字描画画像上の文字画像は、クライアント装置2の画面解像度で生成されている。そのため、サーバ装置1の画面解像度がクライアント装置2の画面解像度よりも低い場合であっても、クライアント装置2の画面解像度の文字画像が表示部206に表示され、文字の解像度の低下が防止される。ステップSB8において、シンクライアントプログラムは、受信画像を表示部206に表示する。
図7は、文書ファイルを閲覧する際に行われる通信システムCSの動作を示すシーケンスチャートである。図7に示す処理は、シンクライアントを利用してサーバ装置1とクライアント装置2とが接続されている状態で開始される。なお、以下のシーケンスチャートにおいて、クライアント装置2が受け付ける操作は、いずれも、ユーザが入力部207を操作することにより行われる。
ステップS10において、クライアント装置2のシンクライアントプログラムは、文書編集プログラムの起動操作を受け付ける。ステップS11において、シンクライアントプログラムは、文書編集プログラム起動の操作情報をサーバ装置1に送信する。サーバ装置1のサーバ制御プログラムは、この操作情報を受信すると文書編集プログラムを起動する
ステップS12において、シンクライアントプログラムは、文書ファイルを表示させるための操作情報をサーバ装置1に送信する。この操作情報は、文書ファイルを開くための操作が受け付けられたことを契機にサーバ装置1に送信される。ステップS13において、文書編集プログラムは、クライアント装置2から送信された操作情報において指定された文書ファイルを記憶部104から読み込む。文書編集プログラムにより文書ファイルが読み込まれると、サーバ制御プログラムは図4に示した画像送信処理を行う。画像送信処理が行われると、埋込画像がサーバ装置1からクライアント装置2に送信される。画像送信処理において、サーバ制御プログラムは、例えば、文書ファイルの全体について埋込画像を生成し、当該埋込画像のうち予め定められた領域(例えば、文書ファイルの1ページ目)を圧縮して、クライアント装置2に送信する。サーバ装置1から画像を受信したクライアント装置2のCPU201は、図6に示した画像表示処理を行う。
図8は、画像送信処理において生成される埋込画像を例示する図である。この例では、図8(a)に示す文字描画命令が文書編集プログラムにより出力されており、サーバ制御プログラムは、当該文書編集プログラムに応じた埋込画像を生成している。図8(a)において、「我輩は猫である。」、「名前はまだ無い。」、・・・「人間といふものを見た。」という文字列は、文字情報が示す文字のまとまりを表している。サーバ制御プログラムは、この文字のまとまり毎に文字情報をエンコードしてQRコードを生成し、図8(b)に示す埋込画像IAを生成している。
図9は、画像表示処理において表示される文字描画画像を例示する図である。図9は、図8(b)に示した埋込画像がサーバ装置1により送信されたときに表示される文字描画画像IBを示している。文字描画画像IBにおいては、図8(b)に示した埋込画像上のQRコードがデコードされることにより、「我輩は猫である。」、「名前はまだ無い。」、・・・「人間といふものを見た。」という文字列が描画されている。
再び図7を参照する。ステップS14において、文書編集プログラムは、カーソルの現在位置を示す情報(以下「カーソル情報」という)を更新する。カーソル情報は、文書の編集がされるときの編集箇所を特定するために文書編集プログラムにより管理される情報であって、RAM103に記憶される。文書編集プログラムは、予め定められた位置(例えば、表示される文書の左上の位置)、又は、ユーザにより指定された位置をカーソル情報として記憶する。
ステップS15において、シンクライアントプログラムは、表示部206に表示された画像に対するスクロール操作を受け付ける。ステップS16において、シンクライアントプログラムは、スクロールの操作情報をサーバ装置1に送信する。この操作情報は、例えば、スクロールの方向及びスクロールの量を示す。ステップS17において、サーバ制御プログラムは、上述した画像送信処理において生成した埋込画像のうち、スクロールの操作情報に従ったスクロール後の領域を圧縮する。ステップS18において、サーバ制御プログラムは、圧縮後の埋込画像をクライアント装置2に送信する。サーバ装置1から画像を受信したクライアント装置2のCPU201は、図6に示した画像表示処理を再び行う。これによりスクロール操作に応じた画像が表示部206に表示される。
図10は、文書を編集する際に行われる通信システムCSの動作を示すシーケンスチャートである。図10に示す処理は、シンクライアントを利用してクライアント装置2がサーバ装置1に格納された文書ファイルを閲覧している状態で開始される。ステップS21において、シンクライアントプログラムは、文字入力の操作を受け付ける。ステップS22において、シンクライアントプログラムは、文字入力の操作情報をサーバ装置1に送信する。文字入力の操作情報には、入力された文字、又は、操作の内容(例えば、キーボードのどのキーが押下されたか)が含まれる。
ステップS23において、文書編集プログラムは、文書ファイルの内容を、文字入力の操作情報に従って更新する。具体的には、文書編集プログラムは、RAM103からカーソル情報を読み出し、文書ファイル内のカーソル情報により特定される位置に対して文字入力の操作情報を反映させる。文書編集プログラムにより文書ファイルの内容が変更されると、サーバ制御プログラムは図4に示した画像送信処理を再び行う。画像送信処理において、サーバ制御プログラムは、例えば、文書ファイル中の文字入力がされた領域について埋込画像を生成し、当該埋込画像を圧縮してクライアント装置2に送信する。サーバ装置1から画像を受信したクライアント装置2のCPU201は、図6に示した画像表示処理を行う。これにより文字入力の操作が反映された画像が表示部206に表示される。
ステップS24において、文書編集プログラムは、カーソル情報を更新する。具体的には、文書編集プログラムは、カーソル情報を、ステップS22において入力された文字の末尾の位置に変更する。
本発明は、上述の実施形態に限定されるものではなく、種々の変形実施が可能である。以下、変形例をいくつか説明する。以下で説明する変形例のうち、2つ以上のものが組み合わされて用いられてもよい。
符号化画像はQRコードに限らない。符合化画像は、エンコードされた文字情報を示す画像であれば、例えば、PDF417、CP(Communication Platform)コード、HCCB(High Capacity Color Barcode)などの他の二次元コードであってもよい。また、符号化画像は、一次元コードであってもよい。
図11は、変形例に係る符号化画像を示す図である。図11では、フォントが明朝体であり、サイズが「32」であり、色が黒であり、位置が「0」であり、回転角が180度である、下線付きの文字「あいう」から符号化画像I1が生成されている。符号化画像I1は、明朝体で示された文字「あいう」の右側に付加されたルビにより、フォントサイズ、色、位置、回転角、文字の装飾を示している。このような符号化画像が用いられた場合であっても、文字描画命令に従って描かれる文字のサイズよりも小さいサイズで符号化画像が埋め込まれるときには、文字描画画像が送信される場合に比べて、データの転送量が減少する。
文字画像の解像度は、実施形態に記載された解像度に限らない。端末制御プログラムは、クライアント装置2の画面解像度よりも低い解像度で文字画像を生成してもよい。例えば、端末制御プログラムは、予め定められた解像度(例えばユーザにより指定された解像度)で文字画像を生成してもよい。
通信システムCSにおいて行われる処理は、実施形態に記載した処理に限定されない。画像送信処理において、サーバ制御プログラムは、必ずしも文書ファイルの全体について埋込画像を生成しなくてもよい。サーバ制御プログラムは、文書ファイルの一部(例えば、文書ファイルのうちクライアント装置2に送信される箇所)について埋込画像を生成してもよい。この場合、ステップS17において、サーバ制御プログラムは、文書ファイルのうちスクロール後の箇所について埋込画像を生成し、当該埋込画像を圧縮する。
文字情報は、必ずしも文字描画命令から抽出されなくてもよい。例えば、サーバ制御プログラムは、文字描画命令に従って文字描画画像を生成し、当該文字描画画像を解析することにより文字情報を抽出してもよい。
符号化画像は、必ずしも文字が本来表示される位置に埋め込まれなくてもよい。文字描画画像上の文字の位置と、埋込画像における符号化画像の位置とが一対一で対応していれば、符号化画像は他の位置に埋め込まれてもよい。
サーバ制御プログラムは、必ずしも画像を圧縮しなくてもよい。非圧縮の画像がサーバ装置1からクライアント装置2に転送されてもよい。この場合においても、文字画像の解像度が受信画像の解像度よりも高い状況下では、文字画像の解像度の画像が転送されるのに比べて、データの転送量が減少する。
通信システムCSにおいて送信される画像は、文字のみが表された画像に限らない。例えば、文字とイメージ(静止画像)とが並べて示された画像、又は、イメージ上に文字が示された画像がサーバ装置1からクライアント装置2に転送されてもよい。この場合においても、サーバ装置1及びクライアント装置2は、画像に含まれる文字に対して、実施形態に記載した処理を行う。
この場合、埋込画像には、イメージと符号化画像とが含まれる。
図4、図6、図7、及び図10に示した各処理は、上述したプログラムとは異なるプログラムが実行されることにより実現されてもよい。例えば、サーバ制御プログラムが行う動作の一部を、文書編集プログラムが行ってもよい。また、端末制御プログラムが行う動作の一部をシンクライアントプログラムが行ってもよい。
文字情報は実施形態に記載したものに限らない。文字情報は、文字描画命令に従って描かれる文字について、文字のフォント、文字のサイズ、文字の位置、文字の装飾、又は文字の回転角のうち少なくとも一つと、当該文字描画命令に従って描かれる文字とを示していれば、いかなる情報を示してもよい。例えば、文字情報は、実施形態に記載した情報に加えて文字の色を示してもよい。
文字の位置を示す情報は必ずしもエンコードされなくてもよい。この場合、ステップSB3において、受信画像が埋込画像であると判断された場合(SB3:YES)、端末制御プログラムは、受信画像上の符号化画像の位置をRAM203に記憶する。そして、ステップSB6において、端末制御プログラムは、符号化画像の位置に、当該符号化画像を元に生成された文字画像を埋め込む。
文字のサイズを示す情報は必ずしもエンコードされなくてもよい。例えば、符号化画像自体のサイズにより、当該符号化画像から特定される文字のサイズが表現されてもよい。具体的には、ステップSA3において、サーバ制御プログラムは、文字のサイズが小さいほど小さなサイズの符号化画像を埋め込み、文字のサイズが大きいほど大きなサイズの符号化画像を埋め込んでもよい。この場合、ステップSB5において、端末制御プログラムは、符号化画像のサイズに従ったサイズの文字画像を生成する。
実施形態において、サーバ装置1によって実行されるサーバ制御プログラム及び文書編集プログラム、並びに、クライアント装置2によって実行される端末制御プログラム及びシンクライアントプログラムは、磁気記録媒体(磁気テープ、磁気ディスク(HDD、FD(Flexible Disk))など)、光記録媒体(光ディスク(CD(Compact Disk)、DVD(Digital Versatile Disk))など)、光磁気記録媒体、半導体メモリ(フラッシュROMなど)などのコンピュータが読み取り可能な記録媒体に記憶した状態で提供されてもよい。また、これらのプログラムは、インターネットなどのネットワーク経由でダウンロードされてもよい。
サーバ装置1及びクライアント装置2の構成は、実施形態に記載した構成に限らない。例えば、クライアント装置2は、タッチパネルを有するタブレット端末であってもよい。
1…サーバ装置、11…第1抽出手段、12…符号化手段、13…生成手段、14…圧縮手段、15…送信手段、2…クライアント装置、21…受信手段、22…解凍手段、23…第2抽出手段、24…復号手段、25…置換手段、26…表示手段、101(201)…CPU、102(202)…ROM、103(203)…RAM、104(204)…記憶部、105(205)…IF部、106(206)…表示部、107(207)…入力部

Claims (7)

  1. サーバ装置とクライアント装置とを有し、
    前記サーバ装置は、
    第1画像に含まれる文字についての情報を符号化して符号化画像を生成する符号化手段と、
    前記符号化手段により生成された符号化画像が、前記第1画像上の前記文字の位置から特定される位置に当該文字に替えて埋め込まれた第2画像を生成する生成手段と、
    前記クライアント装置からの前記第1画像の要求に応じて、当該クライアント装置に前記第2画像を送信する送信手段と
    を有し、
    前記クライアント装置は、
    前記サーバ装置により送信された第2画像から前記符号化画像を抽出する抽出手段と、
    前記抽出手段により抽出された符号化画像を復号する復号手段と、
    前記第2画像上の符号化画像を、前記復号手段により復号された情報から特定される文字に置換して前記第1画像を生成する置換手段と
    を有する通信システム。
  2. 前記置換手段は、前記第2画像上の符号化画像を、予め定められた解像度の前記文字に置換する
    ことを特徴とする請求項1に記載の通信システム。
  3. 前記置換手段は、前記第2画像上の符号化画像を、前記クライアント装置の表示手段で表示可能な最も高い解像度の前記文字に置換する
    ことを特徴とする請求項2に記載の通信システム。
  4. 前記サーバ装置は、
    前記生成手段により生成された第2画像を圧縮する圧縮手段を有し、
    前記送信手段は、前記圧縮手段により圧縮された第2画像を前記クライアント装置に送信し、
    前記クライアント装置は、
    前記サーバ装置により送信された第2画像を解凍する解凍手段を有し、
    前記抽出手段は、前記解凍手段により解凍された第2画像から前記符号化画像を抽出する
    ことを特徴とする請求項1乃至3のいずれか1項に記載の通信システム。
  5. 前記第1画像に含まれる文字についての情報は、文字のフォント、文字のサイズ、文字の位置、文字の装飾、又は文字の回転角のうち少なくとも一つと、当該第1画像に含まれる文字とを示す
    ことを特徴とする請求項1乃至4のいずれか1項に記載の通信システム。
  6. コンピュータに、
    第1画像に含まれる文字についての情報を符号化して符号化画像を生成するステップと、
    前記符号化画像が、前記第1画像上の前記文字の位置から特定される位置に当該文字に替えて埋め込まれた第2画像を生成するステップと、
    クライアント装置からの前記第1画像の要求に応じて、当該クライアント装置に前記第2画像を送信するステップと
    を実行させるためのプログラム。
  7. コンピュータに、
    第1画像に含まれる文字についての情報が符号化された符号化画像が、前記第1画像上の前記文字の位置から特定される位置に当該文字に替えて埋め込まれた第2画像をサーバ装置から受信するステップと、
    前記第2画像から前記符号化画像を抽出するステップと、
    抽出された符号化画像を復号するステップと、
    前記第2画像上の符号化画像を、復号された情報から特定される文字に置換して前記第1画像を生成するステップと
    を実行させるためのプログラム。
JP2015142151A 2015-07-16 2015-07-16 通信システム、サーバ装置、クライアント装置及びプログラム Active JP6468105B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2015142151A JP6468105B2 (ja) 2015-07-16 2015-07-16 通信システム、サーバ装置、クライアント装置及びプログラム
US15/057,356 US10178268B2 (en) 2015-07-16 2016-03-01 Communication system, server device, client device, and non-transitory computer readable medium
CN201610217328.8A CN106354450B (zh) 2015-07-16 2016-04-08 通信系统以及通信方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015142151A JP6468105B2 (ja) 2015-07-16 2015-07-16 通信システム、サーバ装置、クライアント装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2017027142A JP2017027142A (ja) 2017-02-02
JP6468105B2 true JP6468105B2 (ja) 2019-02-13

Family

ID=57775302

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015142151A Active JP6468105B2 (ja) 2015-07-16 2015-07-16 通信システム、サーバ装置、クライアント装置及びプログラム

Country Status (3)

Country Link
US (1) US10178268B2 (ja)
JP (1) JP6468105B2 (ja)
CN (1) CN106354450B (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2737438A4 (en) * 2011-07-25 2015-08-05 Koji Sakahashi DEVICE AND USE FOR CREATING, TRANSMITTING AND MANAGING 2D BAR CODES WITH INTEGRATED IMAGES
CN110365858B (zh) * 2018-04-10 2020-08-25 北京仁光科技有限公司 信息传输方法、装置、设备、系统及存储介质
CN113127637A (zh) * 2019-12-31 2021-07-16 中兴通讯股份有限公司 一种字符的还原方法及装置、存储介质、电子装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6097439A (en) * 1998-10-02 2000-08-01 C-Cube Microsystems, Inc. Omnibus closed captioning decoder for encoded video
KR20040041082A (ko) * 2000-07-24 2004-05-13 비브콤 인코포레이티드 멀티미디어 북마크와 비디오의 가상 편집을 위한 시스템및 방법
JP4000844B2 (ja) * 2001-12-11 2007-10-31 日本電気株式会社 コンテンツ配信システム、コンテンツ配信システムの配信サーバ及び表示端末、コンテンツ配信プログラム
JP4947883B2 (ja) * 2004-07-30 2012-06-06 キヤノン株式会社 通信装置、制御方法ならびにプログラム
JP4405419B2 (ja) * 2005-03-31 2010-01-27 株式会社東芝 画面送信装置
JP2008148263A (ja) * 2006-12-13 2008-06-26 Canon Inc 画像形成装置及びその制御方法
JP4402138B2 (ja) 2007-06-29 2010-01-20 キヤノン株式会社 画像処理装置、画像処理方法、コンピュータプログラム
KR101643608B1 (ko) * 2009-02-13 2016-07-29 삼성전자주식회사 리모트 ui 서비스 제공 방법 및 장치
JP2010246027A (ja) * 2009-04-09 2010-10-28 Canon Inc 画像形成装置、画像形成方法、及びコンピュータプログラム
JP2011151469A (ja) * 2010-01-19 2011-08-04 Murata Machinery Ltd 文書処理装置
US8208726B2 (en) * 2010-07-22 2012-06-26 Hewlett-Packard Development Company, L.P. Method and system for optical character recognition using image clustering
FR3003422B1 (fr) * 2013-03-15 2016-12-09 Send Only Oked Documents (Sood) Procede de tatouage de la partie textuelle d'un document

Also Published As

Publication number Publication date
US10178268B2 (en) 2019-01-08
CN106354450B (zh) 2019-06-07
CN106354450A (zh) 2017-01-25
JP2017027142A (ja) 2017-02-02
US20170019558A1 (en) 2017-01-19

Similar Documents

Publication Publication Date Title
JP4827950B2 (ja) サーバ装置
JP3859313B2 (ja) タグ文書の圧縮装置および復元装置,圧縮方法および復元方法,圧縮/復元装置および圧縮/復元方法並びに圧縮,復元もしくは圧縮/復元プログラムを記録したコンピュータ読み取り可能な記録媒体
JP3305191B2 (ja) 文書管理装置及びデータ圧縮方法及びデータ復元方法
JP2008123395A (ja) プログラム、コピーアンドペースト処理方法、装置及び記録媒体
JP6468105B2 (ja) 通信システム、サーバ装置、クライアント装置及びプログラム
JP2008123394A (ja) プログラム、文字入力編集方法及び装置
JP2014063481A (ja) クラウドにより支援されるレンダリング
JP3839905B2 (ja) 文字処理装置及び記憶媒体
CN107908625A (zh) 一种pdf文档内容原位置多语言翻译方法
US7483582B2 (en) JPEG2000 coding and/or decoding apparatus and method
JP2005182735A (ja) 文書データ表示装置、携帯電話装置、文書データ表示方法、文書データ表示プログラム、文書データ表示プログラムを記録したコンピュータ読取可能な記録媒体、文書データ印刷装置、文書データ出力装置、文書データ出力方法、文書データ出力プログラム、および文書データ出力プログラムを記録したコンピュータ読取可能な記録媒体
US11836396B2 (en) Information processing apparatus that converts an element that cannot be converted into print data by external apparatus control method thereof, and storage medium
JP2012015775A (ja) 画像処理装置
JP6914491B1 (ja) 情報処理装置、プログラム及び情報処理方法
KR101644858B1 (ko) 고기능 이미지 파일을 활용한 이미지 검색 시스템
JP2014211747A (ja) 画像処理装置、端末装置、情報処理方法及びプログラム
JP2004362538A (ja) 文書データ変換装置、携帯電話装置、文書データ変換方法、文書データ変換プログラム、および文書データ変換プログラムを記録したコンピュータ読取可能な記録媒体
JP4345438B2 (ja) 辞書データ圧縮装置、電子辞書装置及びプログラム
JP4329493B2 (ja) 辞書データ圧縮装置、電子辞書装置及びプログラム
JP7362160B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP5674974B2 (ja) 圧縮データ処理プログラム、圧縮データ編集プログラム
JP2005327151A (ja) 文書管理装置および文書管理プログラム
JP4165482B2 (ja) 画像表示プログラムおよび画像表示装置
JP2018060428A (ja) ウェブページ提供装置、ウェブページ提供方法、及びウェブページデータ
JP2022025017A (ja) 情報処理装置、プログラム及び情報処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181231

R150 Certificate of patent or registration of utility model

Ref document number: 6468105

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350